基于统计分析的H.264快速模式选择算法
H.264是由ISO/IEC(国际标准化组织/国际电子技术委员会)的MPEG和ITU-T(国际电信联盟)联合成立的JVT(联合视频专家组)制定的新一代数字视频压缩标准。H.264采用很多新的技术,包括可变宏块大小分割、多参考帧、1/4像素精度运动估计、帧内预测、环形滤波等,大大提高了编码性能。从统计的角度和宏块纹理预测的角度出发,提出了一种综合的快速模式选择算法,大大地减少了编码时间。
1 宏块模式选择
对于每一个宏块,H.264可以选择SKIP,inter16×16,inter16×8,inter8×16,inter8×8五种帧间模式和intra16×16,intra4×4两种帧内模式。而其中in-ter8×8又进一步可分成inter8×8,inter8×4,inter4×8,inter4×4四种子模式;intra16×16和intra4×4又分别有4种和9种预测模式。在JM 8.6参考软件中,选择所有模式中率失真代价值最小的模式作为最佳模式。其中率失真代价函数定义如下:
式中:SK为相应宏块;IK为相应的编码模式;Q为量化参数;DREC是失真度;RREC为码率。
从而每个宏块都要经过168次率失真代价值的计算,才能最终选出一种最佳模式,且每次率失真代价值计算都要对残差进行整数DCT变换、量化、熵编码、熵解码、反量化、逆整数DCT变换。因此,参考软件对于模式选择的计算量非常大。
2 宏块模式的统计特征分析
表1是JM 8.6模型中,未采用任何快速模式选择,并且运动搜索采用全搜索的情况下,各序列所采用的编码模式的百分比。其中编码帧数为100帧,I帧周期为30帧,码率为73 Kb/s,QP=28。
由表1可知,无论哪种序列,7种编码模式所占的比重并不均衡,SKIP模式和inter16×16模式占据了很大的比重。这说明图像细节还是占据了一帧图像的少部分,视频序列中大部分依然由缓慢变化的背景组成。而选中概率大的SKIP模式的率失真代价计算很简单,因为没有残差,也就不存在DCT变换,且没有多参考帧的选择、运动搜索;inter16×16模式稍显复杂,但也远远没有其他几种模式复杂。相反,出现概率很小的其他模式运算量却非常大,尤其是inter8×8(inter8×8的运动搜索运算量非常大且子模式多)和intra4×4(预测模式非常多)。因此,对所有模式进行遍历选择时,实际上很大一部分时间是消耗在并未最后起决定作用的几种模式的代价值计算上。因此如果能对概率非常大的几种模式进行早期判决,或者对运算量非常大但选中概率非常小的inter8×8和intra4×4缩小选择范围,从整体编码的性能上来讲,应该能节省大量的编码时间,提高编码速度。
3 SKIP模式快速判决算法
3.1 SKIP模式的特征
在对当前宏块采用SKIP模式进行编码时,它具有以下4个特征:
(1)它不在5帧备选参考帧中进行选择。只以第0个参考帧作为参考帧;
(2)它并不进行运动搜索,因此它的运动矢量经过相邻宏块的运动矢量的预测得到预测值MVp后,并没有运动矢量的残差MVD;
(3)在对它进行运动矢量的预测的时候,是以16×16(即一个宏块)大小为单位;
(4)它经过帧间预测后,并不编码残差,那么也就没有整数DCT变换,或者可以看成它的DCT值为0。
在采用SKIP模式编码后,性能是否最佳,通常情况下要用率失真代价值跟其他模式进行比较才能决定。但是,如果在采用其他正常方式进行编码后,反过来,发现整个宏块的编码数据具有上述的某些或全部特征后,或许可以作为提前判断当前编码宏块模式为SKIP模式的依据,即将上述4个必要条件的某几个作为判断当前宏块最佳模式为SKIP模式的充分条件。当然,这样处理的结果并不准确,但是如果准确率较高,应该对编码效果的影响并不大。
3.2 SKIP模式快速判决方法分析
文献[1]提出了一种以DCT系数是否为全0作为判断条件来进行判断。这种方法比较简单,从理论上讲应该有一定的准确性,因为除了SKIP模式,其他模式的DCT系数为全零可能性并不大。文献[2]则提出提出了一种比较苛刻的方法,它利用SKIP模式的所有特征,然后作为判决条件,即当一个宏块满足第3.1节的4个条件时,便判断为SKIP模式。表2是对两种方法进行实验后判断准确性的统计值。
由表2可知,这两种方法准确性比较高,尤其是方法2,因为它的条件非常苛刻,这也符合文献[2]中的叙述。但是这两种方法判断正确性高,文献中却忽略了一个重要参数,即漏判决率。该两方法对于已经判决出的模式,正确性非常高,但是由于条件比较苛刻,它却未判断出很多本该是SKIP模式的宏块,那么这些宏块依然需要使用最原始的方法进行判断,快速判决也就失去了其意义。
3.3 该文的SKIP模式快速判决方法
基于前一节的考虑,在此对文献[2]提出的方法,将整数DCT系数为全0这一条件舍去,实验结果显示如表3中方法3所示。由表3可知,漏判率有所下降,但是依然很高。
- AVS视频标准研究(10-09)
- 现代视频编码关键技术及其发展(10-09)
- 视频编码讲坛之H.264前世今生(05-18)
- 新一代视频编码标准H.264/AVC的关键技术研究(09-04)
- H.264解码器中一种新颖的去块效应滤波器设计(10-21)
- MAX2640低噪声放大器用于ISDB-T设计(01-05)