取样自适应偏移

✍ dations ◷ 2024-12-22 09:57:21 #取样自适应偏移

取样自适应偏移(英语:Sample Adaptive Offset,缩写:SAO)为H.265/高效率视讯编码内嵌式滤波器的一种,其余两种内嵌式循环滤波器分别是:去区块效应滤波器(Deblocking Filter)、调适性循环滤波器(Adaptive Loop Filter)。

高效率视讯编码使用4x4至32x32大小的转换单元,而H.264/高阶视讯编码使用的转换单元不超过8x8,越大的转换单元会产生更多的假影(Artifacts)包含量化所造成的振铃现象;此外,高效率视讯编码8阶分数亮度取样差值和4阶分数彩度取样差值,而H.264/高阶视讯编码分别使用6阶分数亮度取样差值和2阶的分数彩度取样差值,越高阶的取样差值会造成越严重的振铃现象(Ringing Artifacts),因此高效率视讯编码需要引入新的内嵌式循环滤波器,除了开发去区块效应滤波器,更进一步引入全新概念的取样自适应偏移滤波器。取样自适应偏移借由类重建的样本为数个类来降低取样的失真,过程中会取得每一类的偏移量,然后再将偏移量分别加到每一类里的样本,而每一类的偏移量会在编码器里适当地计算出且明确地将资讯给解码器,以有效降低取样失真,为了节省边资讯(Side Information),样本类会在编码器和解码器中实现;为了在只有一编码树单元的情况下达到低延迟,基于编码树单元的句法被设计成可以指定取样自适应偏移的系数,此基于编码树单元最佳化算法可以导出每一编码树单元的取样自适应偏移系数,并且将取样自适应偏移系数交错放入边资料(Slide Data)。

取样自适应偏移会根据样本的类和适用的区域而使用不同的偏移量,两种取样自适应偏移型态可以满足高效率视讯编码对于低运算量的要求,分别是:边缘偏移、带偏移,边缘偏移的样本类是基于比较当前样本以及邻近样本,而带偏移的样本类是基于样本值。为达到低编码延迟以及减少缓冲区的使用量,类区域的大小会固定成一个编码树区块的大小,若要再降低边资讯的资料量,可以合并多个编码树单元共用取样自适应偏移参数。

为了保持运算复杂度和编码效率的平衡,边缘偏移使用4种样本类的一维方向图形,分别为:水平、垂直、135度对角、45度对角,如图一所示,"c"代表当前的样本,"a"和"b"则代表邻近的样本,每一种模式分别对应图一的4种图形。在编码时,每一编码树区块只能选择一种边缘偏移类,且基于优化失真率的考量,最佳的边缘偏移类会以位元流(Bitstream)当作边资讯传送,又因为这些边缘偏移图形都是一维,所以类的结果不会确切地和临界样本相关。

对于一个给定的边缘偏移类(Class),在编码树区块内的每个样本会被分为5种形态(Category)中的其一,当前样本"a"会根据选择的一维方向模式和两相邻样本"b"、"c"比较,比较的规则如下表:

型态1及4分别关联相对低值和相对峰值,型态2及3分别关联凹面及凸面,若当前样本无法归于上面4种型态,则为型态0且将不适用取样自适应偏移。这4种型态的意义以及其正负值如图二表示,在边缘偏移型态1和2中使用正偏移使得相对低值及凹面更平滑,若是使用负偏移则会使的图形更尖锐;而在边缘偏移型态3和4中使用负偏移使得相对峰值及凸面更平滑,使用正偏移则更尖锐。

图三说明了著名的吉布斯现象(Gibbs Phenomenon),可以用来模拟一些影像压缩的假象,特别是振铃现象(Ringing Artifacts),虽然水平轴和垂直轴没有特别标记,但分别定义沿着一维路径的样本位置和样本值,虚线代表原始的样本,有色的实心圆代表相对低值、相对峰值、凸面、和凹面,其余样本则为空心圆。若在相对峰值、凸面使用负偏移,而在相对低值、凹面使用正偏移,可以有效减少失真。

带偏移为增加一偏移量至同一带上的所有样本,样本的值域被等分为32带,一个8位元样本的值域为0到255,其宽度为8,取样值从8k至8k+7属于带k,而k的范围是0至31,而解码器会得知在同一带中原始样本和重建样本的平均差。解码器只有4个连续带和起始带位置的偏移资讯,为了减少线性缓冲区的需求,这些由解码器可取得的偏移量数目由16减少至4,而此数目正好相等于解码器可得到的边缘偏移量数目;而另一个会选择只有4个带的理由是这些区域经由图片从四元树分割成编码树区块而减少时,可以有效限制在一个区域中的取样范围。

一张图片会被切割成多层的四元树区域,为了决定取样自适应偏移的系数,下列为处理的过程:

以下说明如何从取样自适应偏移编码器的四元树切割得到统计资料,Nl,i,t,c为在阶层l、区域i、类t、型态c的像素数目,al,i,t,c为相对应的偏移,el,i,t,c为相对应原始讯号和重建讯号差的合,Rl,i,t为相关偏移的预测率,借由使用收集到的统计资料,可以利用简单的式子计算出预测的失真减少量,Dl,i,t为阶层l、区域i、类t、型态c的预测失真减少量。

 Dl,i,t =                                                     c                        t                                {displaystyle sum _{cin t}}  (Nl,i,t,ca2l,i,t,c - 2al,i,t,cel,i,t,c)(1)

得知预测失真减少量之后,我们可以计算出位元率-失真成本(Rate-Distortion-Cost),λ为拉格朗日乘数。

 Jl,i,t = Dl,i,t + λRl,i,t(2)

编码器会根据式子(4)选择有最低位元率-失真成本且在阶层l、区域i的类,T为取样自适应偏移类的集合。

 Jl,i =                               min                      t                        T                                {displaystyle min limits _{tin T}}  (Jl,i,t)(3) tl,i =                     arg                          min                      t                        T                                {displaystyle arg min limits _{tin T}}  (Jl,i,t)(4)

得到最低位元率-失真成本以及最佳取样自适应偏移类之后,编码器会尝试合并子区域成一个父区域,J’l,t和t’l,i分别是合并后的位元率-失真成本以及选择的取样自适应偏移类,Ωl,i是阶层l和区域i的集合。

 J'l,i =                     min              {displaystyle min }  (                                                    k                                      Ω                              l                                      ,            i                                {displaystyle sum _{kin Omega _{l},i}}   Jl+1,k,Jl,i)(5) t'l,i =                     arg                min              {displaystyle arg min }  (                                                    t                        T                                {displaystyle sum _{tin T}}   Jl+1,k,Jl,i)(6)

根据合并子区域后的结果,相关父区域的分离资讯由以下公式决定:

                               S                      l                          ,        i        =                              {                                                            1                  ,                                                                                            if                                                                                                                       k                                                                    Ω                                                  l                                                                    ,                      i                                                                            J                                          l                                                                            +                  1                  ,                  k                  <                                      J                                          l                                                                            ,                  i                                                                              0                  ,                                                                                            otherwise                                                                                                                             {displaystyle S_{l},i={begin{cases}1,&{mbox{if }}sum _{kin Omega _{l},i}J'_{l}+1,k<J'_{l},i\0,&{mbox{otherwise }}end{cases}}}  

Sl,i为1代表当前区域会被切割成若干个子区域,为0则代表当前区域不会被切割,处理所有阶层k的区域后,编码器会继续处理阶层k-1的区域直到阶层0的区域,最后使用决定的取样自适应偏参数更新每一区域的解码器图像缓冲区。

相关

  • 高雄市美术家联展高雄市美术家联展是台湾高雄市政府所主办的年度文化展览,始于1986年。是当地重要的艺术活动,主要由高雄地区艺术家参与。联展地点除2007年以前数年曾于高雄市立美术馆举办外,其
  • 乔治·B·菲尔德乔治·B·菲尔德(英语:George B. Field,1929年10月25日-),出生于罗德岛州普罗维登斯,美国天体物理学家。菲尔德在小时候就显示了对天文学的兴趣,但在他的父亲的敦促下,他进入了麻省理
  • 木油树木油树或木油桐(拉丁学名: Lour.,英文名:Wood-oil Tree),是一种原生于中国南部的落叶乔木,由于其树龄远较同属植物油桐为长,因此也有千年桐的称号。木油树为落叶乔木;成长高度可达12
  • 堀井学堀井学(日语:ほりい まなぶ/堀井 学 ;1972年2月19日-),出身于北海道室兰市。日本政治家,前竞速滑冰运动员。在1994年利勒哈默尔冬奥会男子500米竞速滑冰项目夺得铜牌。在2002年盐湖
  • 万国公法《万国公法》(英语:)直译为《国际法原理》,是一部美国法学家亨利·惠顿写的国际法著作,于1836年出版。这部著作出版后,被翻译成西方各国语言;随后被翻译成汉语和日语版,对近代国际法
  • 霍帕朗冰原岛峰坐标:81°33′S 28°45′W / 81.550°S 28.750°W / -81.550; -28.750霍帕朗冰原岛峰(英语:Hopalong Nunatak),是南极洲的冰原岛峰,位于科茨地,属于怀查韦冰原岛峰的一部分,在1957年
  • 三级甲等医院三级甲等医院简称三甲医院,是中国对医院按照《医院分级管理办法》实行“三级六等”的等级划分中最高等级的医院。三级甲等医院的评定一般由省
  • 和平 (月季)和平月季, 正确地说, “A.梅兰德夫人”("Madame A. Meilland")月季, 是一种著名且成功的园艺月季。截止1992年,此种月季已售出逾百万。其具有浅黄,接近奶油色的大花。花瓣边缘略微泛绯红。其适应力和生命力强,且具有一定的抗病性,这使得其在花卉贸易和园艺中相当出名。在1935-1939年中,其被法国园艺家弗朗西斯·梅兰德所开发。当梅兰德预见到德国将侵略法国时,为了保护这种新月季,其将枝条送到其在意大利、土耳其、德国和美利坚合众国的朋友。据信其在侵略之前最后一班可用的航班上被送往美国,并
  • 高沙文史博物馆高沙文史博物馆,位于湖南省邵阳市洞口县高沙镇红鹅村,是依托第七批全国重点文物保护单位——洞口宗祠建筑群之一的曾八支祠建设的民办博物馆。曾八支祠或称高沙曾氏宗祠。始建于清朝乾隆七年(1742年)。道光十九年(1839年),曾国藩前来“拜祠”。道光二十三年(1843年),宗祠因高沙“戕官大案”或称“癸卯之变”损毁严重。同治七年(1868年)开始修复,同治九年,曾氏族人请曾国藩为宗祠书“春风沂水”匾。1873年完工。光绪年间,曾国藩子曾纪泽、孙曾广钧书“一家仁让”、“同归于厚”匾。1938年,黄埔军校第二分校第
  • 软件项目管理软件项目管理是指软件开发过程中的管理,它涉及软件开发周期全过程,包括软件开发前的规划、软件设计、写代码、测试和发布后的维护。管理者要对开发人员进行明确分工,规划好软件每日开发的进度。