视频多方法评估融合

✍ dations ◷ 2025-11-05 14:44:07 #视频多方法评估融合

视频多方法评估融合 (Video Multimethod Assessment Fusion,VMAF ) 是Netflix与南加州大学、南特大学IPI/LS2N 实验室以及德克萨斯大学奥斯汀分校图像和视频工程实验室 (LIVE) 合作开发的客观的全参考视频质量指标。它根据参考和失真的视频序列预测主观视频质量。该指标可用于评估不同视频编解码器、编码器、编码设置或传输变体的质量。

该指标基于南加州大学 C.-C. Jay Kuo 教授小组的初步工作。 他们研究了使用 支持向量机 融合不同视频质量指标的可实现性,从而产生了“FVQA(基于融合的视频质量评估)指数”,该指标已被证明在主观上优于现有的图像质量指标视频质量数据库。

该方法已与 Netflix 合作进一步开发,使用不同的主观视频数据集,包括 Netflix 拥有的数据集(“NFLX”)。随后更名为“视频多方法评估融合”,它于 2016 年 6 月上宣布,参考实现的 0.3.1 版在许可的开源许可下提供。

2017 年,该指标进行了更新,以支持自定义模型,其中包括对手机屏幕查看的调整,从而为相同的输入材料生成更高的质量分数。 2018 年,发布了一个预测高达4K分辨率内容质量的模型。训练这些模型的数据集尚未向公众提供。

2021 年,Beamr、Netflix、南加州大学德克萨斯大学奥斯汀分校、SSIMWAVE、迪士尼、谷歌、Brightcove 和 ATEME 因开发视频编码优化的开放感知指标而获得了技术与工程艾美奖(英语:Technology & Engineering Emmy Awards)。这是大学 20 年来第二次获得艾美奖。这也是法国大学第一次获得一个。

VMAF 使用现有的图像质量指标和其他功能来预测视频质量:

上述特征使用基于 SVM 的回归进行融合,以提供每个视频帧0-100 范围内的单个输出分数,其中 100 的质量与参考视频相同。然后使用算术平均值在整个视频序列上临时汇集这些分数,以提供整体差分平均意见分数(DMOS)。

由于训练源代码(“VMAF Development Kit”,VDK)的公开可用性,可以根据不同的视频数据集和特征对融合方法进行重新训练和评估。

抗噪信噪比(AN-SNR) 在早期版本的 VMAF 中用作质量指标,但随后被放弃。

与主观评分相比,早期版本的 VMAF 在四个数据集中的三个数据集上的预测准确性已被证明优于其他图像和视频质量指标,例如SSIM 、 PSNR -HVS 和 VQM-VFD。 在另一篇论文中也对其性能进行了分析,发现 VMAF 在视频数据集上的性能并不优于 SSIM 和 MS-SSIM。 2017 年, 来自RealNetworks的的工程师报告称,网飞的性能论文具有良好的可重复性。

用C语言和Python编写的参考实现(“VMAF 开发工具包,VDK”)根据 BSD+专利许可条款作为自由软件发布 。其源代码和其他材料可在GitHub上获得。

相关

  • 刺尾鱼刺尾鲷科,辐鳍鱼纲鲈形目的一个科。本科鱼类广泛分布于印度太平洋区的热带浅水珊瑚礁海域。从0米的潮池、潮间带到深数十米之岩礁及珊瑚礁海域,但有些鱼种可达50至60米深。本
  • 徐梵澄徐梵澄(1909年10月26日-2000年3月6日),原名琥,谱名诗荃,字季海,湖南长沙人,哲学家、印度学家、翻译家。1925年就读于武汉中山大学历史系,1927年至1929年后入上海复旦大学西洋文学系。
  • 乔治·让·雷蒙·蓬皮杜乔治·让·雷蒙·蓬皮杜(法语:Georges Jean Raymond Pompidou,1911年7月5日-1974年4月2日,法语发音.mw-parser-output .IPA{font-family:"Charis SIL","Doulos SIL","Linux Liber
  • T-34坦克T-34坦克是一款苏联于二战前研发的中型坦克。T-34坦克出现时纳粹几乎没有能对付这种坦克的武器,它的76毫米火炮能够轻松击穿同时期德军的所有坦克。它的出现对纳粹德国造成了
  • 阿丽亚娜空间阿丽亚娜空间(英语:Arianespace)是一家成立于1980年的跨国公司,该公司是世界上第一家商业发射服务提供商。阿丽亚娜空间公司负责阿丽亚娜项目的运行和营销。该公司提供多种不同
  • 远藤晴远藤晴(1933年8月8日-1999年9月20日)是日本的女性演员、声优,东京都出身。最终所属青二Production。在生前从属于青二Production,主要多半是配以老年、中年女性的角色的声音为主
  • 大奄美元规大奄美元规(1992年12月15日-),原名坂元元规,日本鹿儿岛县大岛郡龙郷町的出身现役大相扑力士。身高185cm、体重167kg、血型A型。他在2016年1月开始专业相扑生涯,在2017年他到达幕内
  • 安景林安景林(1939年-),男,山东新泰人,中华人民共和国传媒人物,曾任中央人民广播电台台长。
  • RocoberryRocoberry(韩语:로코베리)是2014年出道的二人Indie Pop组合,由Conan(男)和Roco(女)组成。Rocoberry中的Roco作为队内主唱较多露面,而Conan多停留在背后,作为幕后的词曲创作人和制作人。Conan经常带着泰迪熊头套,人们虽然不知道他是什么样子,却给人一种热情友好的感觉,因而有了有“泰迪熊”的绰号。除了独立制作自己的专辑之外,两人还制作了很多别人的歌曲和OST。其中较为人知的就是《没关系,是爱情啊》、《皮诺丘》和《Who Are You-学校2015》的OST制作
  • 屠绅屠绅(1744年-1801年),字贤书、笏言,号磊砢山人、黍余裔孙、竹勿山石道人,江苏江阴人。生于乾隆九年(1744年),世代务农,幼丧父,天资聪慧。十三岁入邑庠,乾隆二十八年(1763年)癸未进士,授云南师宗县县令,迁甸州知州。五十三岁时,任广州通判。“为文则务为古涩艳异,晦其义旨”,生平慕汤显祖之为人,与洪亮吉、黄景仁等为诗友,姬侍众多。嘉庆六年(1801年)候补入都,遽逝于客舍。著有《笏岩诗稿》、《六合内外琐言》等。又有《蟫史》。