视频多方法评估融合

✍ dations ◷ 2025-09-12 20:01:58 #视频多方法评估融合

视频多方法评估融合 (Video Multimethod Assessment Fusion,VMAF ) 是Netflix与南加州大学、南特大学IPI/LS2N 实验室以及德克萨斯大学奥斯汀分校图像和视频工程实验室 (LIVE) 合作开发的客观的全参考视频质量指标。它根据参考和失真的视频序列预测主观视频质量。该指标可用于评估不同视频编解码器、编码器、编码设置或传输变体的质量。

该指标基于南加州大学 C.-C. Jay Kuo 教授小组的初步工作。 他们研究了使用 支持向量机 融合不同视频质量指标的可实现性,从而产生了“FVQA(基于融合的视频质量评估)指数”,该指标已被证明在主观上优于现有的图像质量指标视频质量数据库。

该方法已与 Netflix 合作进一步开发,使用不同的主观视频数据集,包括 Netflix 拥有的数据集(“NFLX”)。随后更名为“视频多方法评估融合”,它于 2016 年 6 月上宣布,参考实现的 0.3.1 版在许可的开源许可下提供。

2017 年,该指标进行了更新,以支持自定义模型,其中包括对手机屏幕查看的调整,从而为相同的输入材料生成更高的质量分数。 2018 年,发布了一个预测高达4K分辨率内容质量的模型。训练这些模型的数据集尚未向公众提供。

2021 年,Beamr、Netflix、南加州大学德克萨斯大学奥斯汀分校、SSIMWAVE、迪士尼、谷歌、Brightcove 和 ATEME 因开发视频编码优化的开放感知指标而获得了技术与工程艾美奖(英语:Technology & Engineering Emmy Awards)。这是大学 20 年来第二次获得艾美奖。这也是法国大学第一次获得一个。

VMAF 使用现有的图像质量指标和其他功能来预测视频质量:

上述特征使用基于 SVM 的回归进行融合,以提供每个视频帧0-100 范围内的单个输出分数,其中 100 的质量与参考视频相同。然后使用算术平均值在整个视频序列上临时汇集这些分数,以提供整体差分平均意见分数(DMOS)。

由于训练源代码(“VMAF Development Kit”,VDK)的公开可用性,可以根据不同的视频数据集和特征对融合方法进行重新训练和评估。

抗噪信噪比(AN-SNR) 在早期版本的 VMAF 中用作质量指标,但随后被放弃。

与主观评分相比,早期版本的 VMAF 在四个数据集中的三个数据集上的预测准确性已被证明优于其他图像和视频质量指标,例如SSIM 、 PSNR -HVS 和 VQM-VFD。 在另一篇论文中也对其性能进行了分析,发现 VMAF 在视频数据集上的性能并不优于 SSIM 和 MS-SSIM。 2017 年, 来自RealNetworks的的工程师报告称,网飞的性能论文具有良好的可重复性。

用C语言和Python编写的参考实现(“VMAF 开发工具包,VDK”)根据 BSD+专利许可条款作为自由软件发布 。其源代码和其他材料可在GitHub上获得。

相关

  • 齐克果索伦·奥贝·克尔凯郭尔(丹麦语:Søren Aabye Kierkegaard,又译齐克果、祈克果、克尔凯郭尔、吉尔凯高尔等;1813年5月5日-1855年11月11日)是丹麦神学家、哲学家及作家,一般被视为存
  • 台北和平篮球馆坐标:25°01′17.2″N 121°32′43.7″E / 25.021444°N 121.545472°E / 25.021444; 121.545472台北市和平实小附属篮球馆(英语:Taipei Heping Basketball Gymnasium),简称台北
  • 酷刑酷刑,属于一种会对人的肉体或精神造成极大痛苦的刑罚,其属于一种手段,目的往往在于处罚某种不法行为或是以此取得特定的资讯,后者也称为刑求。根据联合国禁止酷刑和其他残忍、不
  • 仁科芳雄仁科芳雄(1890年12月6日-1951年1月10日)是一位日本物理学家,也是日本近代物理的奠基人,被称为“日本物理之父”。他曾是理化学研究所的研究人员,指导过许多著名日本物理学家,包括诺
  • 中国1949年前所建现存教堂列表本列表为中国大陆地区在1949年之前,由包括景教、天主教、东正教、圣公会、新教等基督宗教各教派建造的十字寺、教堂、隐修院建筑名单。列表内粗体为主教座堂,斜体表示现在未作
  • 弗吉尼亚·哈密顿·亚代尔弗吉尼亚·哈密顿·亚代尔(Virginia Hamilton Adair,1913年2月28日-2004年9月16日)是一位美国诗人,以她在晚年(1996年)出版的而闻名。亚代尔出生于布朗克斯区,成长于新泽西州蒙特克
  • 国际制裁国际制裁(英文:international sanctions)是指出于政治原因,一国或者多国对另一国或者多国采取的行动。制裁的内容包括:外交制裁,通常是一个主权国家在外交领域采取主动行动,对另外
  • 参议院比例区参议院比例区,是日本参议院从1983年总选举起,以全国为一个选区进行比例代表制选举的制度,前身为全国区。1983年初实行时,参议院比例区以全国为一个选区,采取封闭式名单选出100名
  • 伟江河伟江河,位于中国湖南省西南部和广西壮族自治区北部,是平等河左岸支流,发源于湖南省城步苗族自治县西南的南山牧场,西南流入广西龙胜各族自治县境,经伟江乡,至乐江乡河口村汇入平等
  • Invisible Children IncInvisible Children Inc是一个组织,于2004年成立,曾拍摄《科尼 2012》,引起大众对于圣主抵抗军首脑,乌干达反政府武装头目约瑟夫·科尼的注意。Template:Invisible Children Inc.