摘要:本文介绍了tms320c6416 dsp和mpeg-4asp (advanced simple profile )视频编码器在sp基础上新增的工具,详细阐述了基于该平台实现mpeg-4asp视频编码器的软件优化方法,最后通过实验结果的比较展现了在嵌入式系统应用中asp相对于sp编码器的优越性。由此可看出,在存储能力受限的情况下,采用asp进行mpeg-4视频编码更为适合。
关键词:mpeg-4;视频编码器;软件优化

引言
 
mpeg-4sp ( simple profile)编码器以其出众的压缩效率和图像质量受到了广泛关注,并随之诞生了很多基于pc平台的编解码器(如divx、xvid等) ,在远程教育和高清晰度电影等方面得到了广泛应用。而2001年发布的mpeg-4标准v2. 0 中包含的asp编码器,则在sp的基础上增加了一些新的工具,进一步提高了压缩效率,因此更适合在无线视频通信和数码摄像机等嵌入式系统中应用。

1　硬件平台tms320c6416介绍

选用的实验硬件平台是tms320c6416 dsk(dsp starter kit) 。其核心处理器为美国ti公司的高性能定点32位dsp c6416,基于第2代高性能ve2lociti. 2 vliw结构,带有64个32位字长的寄存器,8个高度独立的功能单元( 2个乘法单元, 6个算术逻辑单元) ,工作时钟频率为600mhz,峰值处理速度可达4800mbit/s。c6416 dsp具有1mb 的片上存储空间,采用两级缓存结构。其中同cpu直接相连的l1p和l1d能以cpu相同的速度运行, 而l2cache有5 种配置模式,可根据实际需要来设定l2cache的大小。同时c6416还具有64个独立的edma通道,可在cpu 后台进行大量的数据搬移，并集成了16mb的sdram,可配置为高速缓存 ,提高访问效率。

2　mpeg-4asp视频编码

运动图像专家组mpeg于2001年在其新发布的v2. 0版本中增加了一些新的工具和框架,其中包括了asp 。asp 在sp的基础上增加了对b-vop、1/4像素精度的运动矢量、可选量化器 、全局运动补偿gmc等的支持,进一步提高了压缩效率。
(1)b-vop使用双向预测来提高运动补偿的效率,也即每个block块或者macroblock宏块都可由前向和后向预测加权得到。
(2) 1/4像素运动矢量 : 在进行运动估计和补偿之前, 参考vop先在1/2像素位置处,进而在1/4处进行插值,尽管这样增加了运动估计、运动补偿和图像重建的复杂度,但编码效率相比sp编码器得到了提高。
(3)可选量化器:在asp中提供了一种可选的反量化方式。在这种方式中,量化系数fq ( u, v)按照下面的方式进行反量化来生成系数f (u, v) : if (fq = 0) f = 0; elsef = [ (2 ×fc( u, v) + k) ×ww ( u, v) ×qp ] /16。其中ww 是8 ×8的加权因子矩阵,这种反量化方式使得编码器可根据量化系数在块中的位置,使用ww 改变步长。
(4)全局运动补偿(gmc) :同一视频对象(vo)中的宏块可能经历相似的运动,如摄像机镜头的缩放和旋转等造成的线性移动,其中的一些宏块可能向同一方向运动。带gmc的编码器只需发送少量的运动参数就能为整个vop描述这个“全局”运动。因此,当vop中相当数量的宏块拥有相同运动特性时, gmc就可以显著的提高压缩效率。

3　软件移植及优化

由于dsp不同于普通的pc环境,因此简单的将代码放到dsp上去编译,运行效率低甚至不能运行,必须进行适合dsp特点的代码移植、改写和优化工作,才能达到实时性要求。

3. 1　软件移植
为使代码适合在dsp平台上运行,首先删除程序代码中大量的printf等调试信息,对必要的信息输出改用puts,以减少函数开销;对double类型数据改用long类型定义;删除不必要的浮点运算(如psnr的计算) ,必要的浮点运算通过定标来实现。

3. 2　存储器优化
c6416dsp有1mb 的片上存储空间,最大能以cpu时钟频率进行访问。在dsk上集成了16mb/s的sdram,可通过em ifa以100mhz的频率进行访问。访问速度上存在的差异以及cpu寻址外部存储空间将导致流水线停止数个周期,因此,如何合理利用c6416的片上存储空间和二级缓存结构成了非常关键的因素。将1mb的存储空间分为256k的l2cache和768 k的l2sram,代码段、全局数据等放在片内存储器l2sram 上, 外部sdram 设定为可高速缓存(cacheable)以提高访问效率。这些设置可以通过调用csl (chip support library)库函数来完成:

#include < csl. h >
#include < csl_cache. h >
csl_init ( ) ;
csl_enablecaching(cache_em ifa_ce00) ;
cache_setl2mode (cache_256 k cache) 。

3. 3　项目级优化
ti为其集成编译环境ccs提供了一系列的编译优化参数,可根据代码性能要求进行选取。因此可以通过不断对各个参数( - mw, - pm, - o3, - mt等)进行组合、优选,这可以通过ccs 2. 20的pbc选项来完成。同时在代码链接过程中,对代码段链接顺序进行一定的安排,可以减少程序执行时代码调用带来的缓存缺失,提高程序的执行效率。

3. 4　代码优化
代码优化是mpeg-4 asp视频编码器软件开发中的一个重要环节,未经过优化的代码在dsk平台上的执行效率很低,平均约25s才进行一帧编码,而实时性的指标为每秒25帧以上。

(1)使用ti库函数
ti提供了图像处理函数库imgl ib,可以调用其中的函数进行fdct和idct变换。

(2)对c代码进行改写
首先对程序中的循环操作进行分解展开,对不能展开的循环则合理安排循环内外层,以更大程度地提高流水效率。c6000的编译器还提供了许多内联函数( intrinsics) ,这些内联函数能直接映射到对应的汇编指令,提高程序的效率。同时可利用编译指示伪语句( pragma directive)向编译器提供一些先验知识,以提高编译效率。如用#p ragma (minimum value, maximumvalue, factor)向编译器指出循环执行的信息,这样便于编译器利用数据打包等技术进行优化。以计算宏块中像素同均值偏差的dev16函数为例,采用了以上方法改写后,函数执行周期数由277 个cycles变为130个cycles (同在o3条件下) ,性能提升超过50%。

(3)进行线性汇编改写
线性汇编是针对c6000 的结构特点优化设计的介于c和汇编语言之间的一种编程语言,其编译效率能达到汇编代码的90%以上。同时c64x系列dsp针对图像和视频应用增加了许多特有的指令,使得这些应用的代码编写效率得到了提高。如在asp视频编码器中,半像素插值使用的avgu4、shrmb、unpklu4 和unpkhu4指令,计算sad 时用到的dotpu4、subabs4 指令,图像重建时用到的spack2指令等等。也方便了代码的编写,如me (motion estimation运动估计)时在参考图像帧中进行像素值读取的ldndw 指令,解决了参考图像中数据不满足双字对齐的问题。下面给出了将函数transfer_16 to8copy( )通过线性汇编改写后的代码,同在o3选项下,线性汇编代码只需c代码15. 8%的指令周期。表1给出了部分代码改写前后的性能对比(同在o3优化选项下) 。

. global _transfer_16 to8copy
              _transfer_16 to8copy: . cp roc dst, src, stride
. reg pdst, p src, count
. reg ahi: alo, bhi: blo, chi: clo
         mvk 8, count
         mv dst, pdst
         mv src, p src
               loop: . trip 8, 8
               lddw 3 *psrc, ahi: alo
               spacku4 ahi, alo, blo; keep the value
               in the range 0 - 255
               lddw 3  *+psrc (8) , chi: clo
               spacku4 chi, clo, bhi 
               stdw bhi: blo, 3 pdst
               add pdst, stride, pdst
               add p src, 16, p src
                   [ count ] sub count, 1, count
                   [ count ] b loop 
. endp roc

3. 5　数据搬移优化
由于片上存储空间有限,因此只能将参考图像及重建图像等数据放在外部sdram中,但也导致了访问外部存储器时带来的巨大开销。而c64x具有的edma和qdma只需花费数个时钟周期进行参数初始化后,就可以在cpu 后台进行高速的数据搬移操作,提高了程序执行效率。针对简单的数据搬移,可以利用csl库提供的dat函数进行。以一段简单的2d数据搬移为例,给出利用qdma后的实现代码:
unsigned int transferid = dat_open (dat_chaa-ny,dat_pr i_low,dat_open_2d) ;
dat_copy2d (dat_2d2d, con, ref, 16, 16,width) ;
dat_wait ( transferid) 。

对复杂的数据搬移,可以采用多通道的edma来实现。edma提供了linking和chaining的机制,在部分数据搬移完成后,自动对edma链路或通道参数进行更新载入,无需cpu干预,特别适合进行大量的数据搬移。然而需要注意,由于sdram中的待搬移数据在l2cache中存在副本,因此在进行数据搬移前,需对l2cache和sdram中的待搬移数据进行一致性操作(coherence operations) ,否则将得不到正确的结果。

4　实验结果与分析
通过上面提到的软件优化方法,在c6416 dsk上对mpeg - 4视频编码器进行了仿真。为了得到编码信息,如峰值信噪比( psnr) ,在代码中临时加入了calc_p snr ( )函数,以便于对asp编码器和sp编码器进行性能比较。以352 ×288大小的cif格式foreman视频序列为例,在编码码率为256 k时,对分别支持gmc、qpel和b - vop以及同时支持上述3 个工具的asp编码器和sp编码器进行了性能对比( sp编码形式为“ipppp.”, asp使用b - vop时为“ ibbpbb-
pbbp.”) 。

表2给出了得到的编码文件长度,可以看出asp编码器相比sp编码器其存储空间要求更小,而图像质量变化不大,因此更适合于数码摄像等嵌入式场合的应用。

图1 对asp编码器(支持b -vop、gmc 及qpel) 与sp 编码器进行了比较, 可以看出前者在psnr性能上较后者平坦,均方差较小,图像质量更为稳定。

图1　foreman序列asp和sp视频编码器psnr性能比较

虽然压缩效率提升,但导致计算量上升,并且由于编码时采用了b-vop增加了后向预测,编码时延增大,图像帧速率有所降低。

5　结束语

由于asp视频编码器具有更高的压缩效率,虽然在编码速度上有所降低,时延增大,但仍能在dsp上进行实时编码,因此适合在存储容量受限的场合(如数码摄像、视频监控网络等领域)应用。 

*博客内容为网友个人发布，仅代表博主个人观点，如有侵权请联系工作人员删除。