取样自适应偏移

✍ dations ◷ 2025-07-03 19:07:28 #取样自适应偏移

取样自适应偏移(英语:Sample Adaptive Offset,缩写:SAO)为H.265/高效率视讯编码内嵌式滤波器的一种,其余两种内嵌式循环滤波器分别是:去区块效应滤波器(Deblocking Filter)、调适性循环滤波器(Adaptive Loop Filter)。

高效率视讯编码使用4x4至32x32大小的转换单元,而H.264/高阶视讯编码使用的转换单元不超过8x8,越大的转换单元会产生更多的假影(Artifacts)包含量化所造成的振铃现象;此外,高效率视讯编码8阶分数亮度取样差值和4阶分数彩度取样差值,而H.264/高阶视讯编码分别使用6阶分数亮度取样差值和2阶的分数彩度取样差值,越高阶的取样差值会造成越严重的振铃现象(Ringing Artifacts),因此高效率视讯编码需要引入新的内嵌式循环滤波器,除了开发去区块效应滤波器,更进一步引入全新概念的取样自适应偏移滤波器。取样自适应偏移借由类重建的样本为数个类来降低取样的失真,过程中会取得每一类的偏移量,然后再将偏移量分别加到每一类里的样本,而每一类的偏移量会在编码器里适当地计算出且明确地将资讯给解码器,以有效降低取样失真,为了节省边资讯(Side Information),样本类会在编码器和解码器中实现;为了在只有一编码树单元的情况下达到低延迟,基于编码树单元的句法被设计成可以指定取样自适应偏移的系数,此基于编码树单元最佳化算法可以导出每一编码树单元的取样自适应偏移系数,并且将取样自适应偏移系数交错放入边资料(Slide Data)。

取样自适应偏移会根据样本的类和适用的区域而使用不同的偏移量,两种取样自适应偏移型态可以满足高效率视讯编码对于低运算量的要求,分别是:边缘偏移、带偏移,边缘偏移的样本类是基于比较当前样本以及邻近样本,而带偏移的样本类是基于样本值。为达到低编码延迟以及减少缓冲区的使用量,类区域的大小会固定成一个编码树区块的大小,若要再降低边资讯的资料量,可以合并多个编码树单元共用取样自适应偏移参数。

为了保持运算复杂度和编码效率的平衡,边缘偏移使用4种样本类的一维方向图形,分别为:水平、垂直、135度对角、45度对角,如图一所示,"c"代表当前的样本,"a"和"b"则代表邻近的样本,每一种模式分别对应图一的4种图形。在编码时,每一编码树区块只能选择一种边缘偏移类,且基于优化失真率的考量,最佳的边缘偏移类会以位元流(Bitstream)当作边资讯传送,又因为这些边缘偏移图形都是一维,所以类的结果不会确切地和临界样本相关。

对于一个给定的边缘偏移类(Class),在编码树区块内的每个样本会被分为5种形态(Category)中的其一,当前样本"a"会根据选择的一维方向模式和两相邻样本"b"、"c"比较,比较的规则如下表:

型态1及4分别关联相对低值和相对峰值,型态2及3分别关联凹面及凸面,若当前样本无法归于上面4种型态,则为型态0且将不适用取样自适应偏移。这4种型态的意义以及其正负值如图二表示,在边缘偏移型态1和2中使用正偏移使得相对低值及凹面更平滑,若是使用负偏移则会使的图形更尖锐;而在边缘偏移型态3和4中使用负偏移使得相对峰值及凸面更平滑,使用正偏移则更尖锐。

图三说明了著名的吉布斯现象(Gibbs Phenomenon),可以用来模拟一些影像压缩的假象,特别是振铃现象(Ringing Artifacts),虽然水平轴和垂直轴没有特别标记,但分别定义沿着一维路径的样本位置和样本值,虚线代表原始的样本,有色的实心圆代表相对低值、相对峰值、凸面、和凹面,其余样本则为空心圆。若在相对峰值、凸面使用负偏移,而在相对低值、凹面使用正偏移,可以有效减少失真。

带偏移为增加一偏移量至同一带上的所有样本,样本的值域被等分为32带,一个8位元样本的值域为0到255,其宽度为8,取样值从8k至8k+7属于带k,而k的范围是0至31,而解码器会得知在同一带中原始样本和重建样本的平均差。解码器只有4个连续带和起始带位置的偏移资讯,为了减少线性缓冲区的需求,这些由解码器可取得的偏移量数目由16减少至4,而此数目正好相等于解码器可得到的边缘偏移量数目;而另一个会选择只有4个带的理由是这些区域经由图片从四元树分割成编码树区块而减少时,可以有效限制在一个区域中的取样范围。

一张图片会被切割成多层的四元树区域,为了决定取样自适应偏移的系数,下列为处理的过程:

以下说明如何从取样自适应偏移编码器的四元树切割得到统计资料,Nl,i,t,c为在阶层l、区域i、类t、型态c的像素数目,al,i,t,c为相对应的偏移,el,i,t,c为相对应原始讯号和重建讯号差的合,Rl,i,t为相关偏移的预测率,借由使用收集到的统计资料,可以利用简单的式子计算出预测的失真减少量,Dl,i,t为阶层l、区域i、类t、型态c的预测失真减少量。

 Dl,i,t =                                                     c                        t                                {displaystyle sum _{cin t}}  (Nl,i,t,ca2l,i,t,c - 2al,i,t,cel,i,t,c)(1)

得知预测失真减少量之后,我们可以计算出位元率-失真成本(Rate-Distortion-Cost),λ为拉格朗日乘数。

 Jl,i,t = Dl,i,t + λRl,i,t(2)

编码器会根据式子(4)选择有最低位元率-失真成本且在阶层l、区域i的类,T为取样自适应偏移类的集合。

 Jl,i =                               min                      t                        T                                {displaystyle min limits _{tin T}}  (Jl,i,t)(3) tl,i =                     arg                          min                      t                        T                                {displaystyle arg min limits _{tin T}}  (Jl,i,t)(4)

得到最低位元率-失真成本以及最佳取样自适应偏移类之后,编码器会尝试合并子区域成一个父区域,J’l,t和t’l,i分别是合并后的位元率-失真成本以及选择的取样自适应偏移类,Ωl,i是阶层l和区域i的集合。

 J'l,i =                     min              {displaystyle min }  (                                                    k                                      Ω                              l                                      ,            i                                {displaystyle sum _{kin Omega _{l},i}}   Jl+1,k,Jl,i)(5) t'l,i =                     arg                min              {displaystyle arg min }  (                                                    t                        T                                {displaystyle sum _{tin T}}   Jl+1,k,Jl,i)(6)

根据合并子区域后的结果,相关父区域的分离资讯由以下公式决定:

                               S                      l                          ,        i        =                              {                                                            1                  ,                                                                                            if                                                                                                                       k                                                                    Ω                                                  l                                                                    ,                      i                                                                            J                                          l                                                                            +                  1                  ,                  k                  <                                      J                                          l                                                                            ,                  i                                                                              0                  ,                                                                                            otherwise                                                                                                                             {displaystyle S_{l},i={begin{cases}1,&{mbox{if }}sum _{kin Omega _{l},i}J'_{l}+1,k<J'_{l},i\0,&{mbox{otherwise }}end{cases}}}  

Sl,i为1代表当前区域会被切割成若干个子区域,为0则代表当前区域不会被切割,处理所有阶层k的区域后,编码器会继续处理阶层k-1的区域直到阶层0的区域,最后使用决定的取样自适应偏参数更新每一区域的解码器图像缓冲区。

相关

  • 偶氮染料偶氮染料是含有一个或多个偶氮基(-N=N-)发色基的染料。是品种最多、应用最广的一类合成染料。冰染染料是偶氮染料是其中很重要的一类。
  • 伊拉基·巴西里伊拉基·巴西里(英语:Iraj Bashiri,波斯语:ایرج بشیری‎;1940年7月31日-),美国明尼苏达大学历史系教授,是中亚与伊朗研究领域上的学术大家之一。他精通英语、波斯语、塔吉克
  • 来学嘉来学嘉(1954年6月4日- - )是一位中国密码学家,现为上海交通大学教授。他是国际数据加密算法的设计者之一。来学嘉于1982年从西安电子科技大学获得电子工程学士学位,1984年从西安
  • 博尼费 (佛罗里达州)博尼费(英语:Bonifay),是美国佛罗里达州下属的一座城市。建立于1886年。面积约 为9.4平方公里(约合3.6平方英里)。根据2010年美国人口普查,该市有人口2,793人。论人口在本州排行第
  • 藤谷太辅藤谷太辅(1987年6月25日-),杰尼斯事务所旗下偶像团体Kis-My-Ft2的成员。出生于神奈川县,血型AB型,身高175cm。1998年11月8日进入杰尼斯事务所成为小杰尼斯,2011年8月10日随Kis-My-F
  • 母猪河母猪河又称老母猪河,是中国胶东半岛东部最大河流,因支流众多而得名。其主流为西母猪河,发源于文登、威海交界处的大田山东麓牙夼,西北流,绕过大田山,在文登韩家村转向西南。曲折西
  • HBO (消歧义)HBO(家庭票房频道)是AT&T通过其多媒体与娱乐事业部门华纳传媒所有的一家美国付费电视联播网,相似的缩写还可以是:HBO还可以是以下词条的缩写:
  • 同感《同感》(英语:"Me Too")是美国歌手兼词曲作家梅根·特雷纳签进大厂牌后为她第二张录音室专辑《感谢》录制的歌曲,由崔娜、艾瑞克·弗雷德里克(英语:Ricky Reed)、雅各·卡舍·欣德林、杰森·德劳莱奥、彼得·斯文森(英语:Peter Svensson)编写,瑞奇·里德(英语:Ricky Reed)制作,于2016年5月5日作为专辑第二首单曲发行。这首电子(英语:Electro (music))和R&B风格歌曲含有关于自爱和自我赋权的歌词,并激励听众对自己更自信满足。歌曲发行后得到褒贬不一的评价,
  • 奥瓦尔·贝里马克奥瓦尔·贝里马克(瑞典语:Orvar Bergmark,1930年11月16日-2004年5月10日),瑞典男子班迪球、足球运动员。他曾代表瑞典国家队参加1958年国际足联世界杯,获得亚军。他也曾担任1970年世界杯瑞典足球队主教练。
  • 埃贡·韦勒斯埃贡·约瑟夫·韦勒斯,CBE(Egon Joseph Wellesz,1885年10月21日-1974年11月9日),又译维雷茨,是奥地利-英国的作曲家、音乐教育家和音乐学家。他是勋伯格的学生,作有9部交响曲等许多作品。作为学者,他尤以对拜占庭音乐的研究而著称。