空間時間チップを用いた参照なし動画品質評価

我々は、動画の空間時間チップ（ST-chip）の自然統計に基づいた、参照なし動画品質評価（VQA）のための新規プロトタイプモデルを提案する。空間時間チップ（ST-chip）とは、局所的な運動フローに従って方向が定義された、動画データの空間時間的に局所化された断片として定義される、新たな品質感知特徴空間である。本研究では、ST-chipのバンドパスヒストグラムに対してパラメトリックな分布フィットを適用し、そのパラメータを用いて品質を特徴づける。さらに、これらのモデルから得られるパラメータが歪みの影響を受けること、すなわち動画品質を客観的に予測するための指標として利用可能であることを示す。提案するプロトタイプ手法であるChipQA-0は、動画に影響を与える歪みの種類に依存せず、自然で歪みのないST-chipの期待される統計から逸脱する部分を同定し、その度合いを定量することで動画品質を予測する。本モデルは複数の大規模VQAデータベース上で学習・評価を行い、人間の動画品質評価との高い相関性を達成し、最先端のモデルと比較しても競争力を持つことを示した。