新闻  |   论坛  |   博客  |   在线研讨会
基于IPP的嵌入式音频解码器设计与优化
yanqin | 2009-06-24 16:23:48    阅读:1381   发布文章

 

摘要:本文从intel公司的ipp工具对基于特定处理器的音频编解码优化方案出发 ,简要介绍ipp的嵌入式移植应用与api编程规范以及优化步骤.完成了在intel xscale pxa255 pda上,利用linux下qte/qtopia gui开发环境,通过ipp优化,完成音频解码器的设计与实现。
关键词:ipp  qte/qtopia  gui  pda  api linux

1前言

随着信息技术的飞速发展,形式多样的数字化产品已经开始成为继pc机后的信息处理工具,在这种数字化潮流下,嵌入式系统已成为当前研究和应用的热点之一。嵌入式手持设备的视音频多媒体应用也越来越广泛.由于嵌入式系统的应用要求及成本因素决定了嵌入式系统在系统资源, 包括硬件资源和软件资源方面都是非常精简和高效的。因此通过ipp底层api函数实现针对特定处理器的特定关键算法进行程序结构重组和优化,为嵌入式系统低功耗高代码执行效率提供一种很好的解决方案。

2 intel ipp简介

intel集成高性能原件(intel ipp)是一个交叉架构的跨平台软件库,提供了大量库功能,用于多媒体,音频编码,视频编码,计算机视觉密码系统以及此类处理的数学过程。通过一个跨多种架构上的单一api,可以获得平台兼容性,减少开发成本。提升信号,影像,多媒体处理和矢量计算的执行效率。

利用ipp优化的步骤首先是程序结构的重新设计。由于ipp 提供的接口为固定接口,在原程序基础上以ipp函数代替,这意味着需要额外添加变量和步骤,如果程序结构设计不当将在相当程度上抵消使用ipp而带来的增益。为了避免这种情况,对于原来的程序结构往往不能限于局部的调整,而要围绕利用ipp提供的接口为核心,进行较大规模的调整和安排。

3基于linux的系统框架和集成开发环境的搭建

3.1开发平台的搭建

由于嵌入式系统本身不具有软件开发能力,采用pc+目标机的开发方式,在运行linux2.4.20内核的pc机上为pxa 255板提供开发和交叉编译环境。利用pxa 255板的ff串口作调试口与pc的串口相连,可方便地进行调试工作,利用pxa255板的以太网接口和pc相连,建立点对点的连结,在pc上建立ftp服务器,将应用程序及内核等文件通过以太网接口传到pxa255板上。

3.2交叉编译环境的建立

要在pc上开发出能运行在pxa255板上的程序,必须在pc上为其建立一个针对arm芯片的交叉编译环境,为此,将用到交叉编译工具链,包括:交叉编译工具arm-linux-gcc、二进制文件处理工具arm-linux-binutils及链接和运行库arm-linux-blibc。

建立起交叉编译环境后,就可以用此交叉编译器为pxa255板编译其内核和应用程序了。整个开发环境的结构框图如下:


图(1) 开发环境的结构框图

3.3基于qt/embedded库的gui开发环境的建立

为使在通用pc上编译连接的程序能在目标平台pxa255板上运行,必须在开发端pc上安装正确的库文件。qt/e安装包只提供所有qt类和一些辅助工具的源文件,针对目标平台pxa255板,还需要为qt/e库增加触摸屏的库文件,以使基于qt/e的应用程序能正确的接收到触摸屏事件。交叉编译工具使用专门针对xscale系列arm-linux-gcc来编译。

为了提高程序开发的效率,可以为qt/e安装一个生成makefile的工具tmake。用它来生成makefile文件可以节省很多时间。在makefile文件中增加qt/e库的路径及用于包含触摸屏库的参数(-lts)之后再make。这样qt/e程序就被正确的编译连接成为在pxa 255板上可执行的文件了。

4 mp3音频播放器图形界面gui设计与实现

本设计用qte/qtopia作为应用程序图形界面gui的类库和桌面开发环境。qt/embedded是trolltech公司开发的面向嵌入式系统的qt版本。采用framebuffer作为底层图形接口。qt/embedded类库完全采用c++封装。丰富的控件资源和较好的可移植性是qt/embedded最为优秀的一方面,使用x下的开发工具qt designer可以直接开发基于qt/embedded的ui(用户操作接口)界面。

   鉴于篇幅,本文只给出图形界面的类定义和函数接口说明,其中封装和移植ipp低层api操作的成员函数将在文章第5部分作出相应的解释和描述,播放器类在qt中定义如下:

class mediaplayer:public qwidget

{

    public:/*构造函数初始化播放器各参数*/

     mediaplayer(qwidget *parent=0,const char *name=0);

    public slots: /*qt中的消息响应槽函数, 定义播放器的各种操作成员函数*/

     void fileopen();

   private:

     /*播放状态控制、播放器界面控制和gui插件*/

     int stplayer;     /* 0:stop  1:play  2:pause*/

     qmenubar *menu;   

     …

 };播放器截图如下:

图(2)播放器界面截图

5 mp3音频解码流程与关键算法移植

5.1 ipp中提供的高效音频处理api介绍

    本设计采用了ipp的mp3播放解码过程中的解码相关的高效算法,这样使得mp3播放的任务转向流程控制,而不必编写具体的解码代码。mp3解码函数和功能如下:

(1)ippsunpackframeheader_mp3/*解包mp3帧头,输出ippmp3frameheader结构体*/

(2)ippsunpacksideinfo_mp3/*解包mp3枝节信息,输出ippmp3sideinfo结构体*/

(3)ippsunpackscalefactors_mp3_1u8s/*解包比列因子,输出比列因子的指针等*/

(4)ippshuffmandecode_mp3_1u32s/*哈夫曼解码,输出解码后的数据*/

(5)ippsrequantize_mp3_32s_i/*量化哈夫曼解码后的码字,输出量化后的采样值的指针*/

(6)ippsmdctinv_mp3_32s,ippssynthpqmf_mp3_32s16s/*第一、二阶段合成滤波*/

5.2 mp3音频解码流程

为了mp3文件能够连续的播放,需要为原始二进制在内存中建立一个fifo缓冲区,以保证每个时刻都有足够的数据,这个缓冲区要有足够的大小,当缓冲区数据小于某个值时,就要及时写入新的数据,在程序的主循环中需要有段判fifo数据情况和填入数据的程序。主数据也需要一个缓冲区,用来存放解码时用到的数据,播放mp3文件的大致流程如下:

图(3) mp3音频解码播放器程序流程图

除解码和播放mp3程序外,还需用户控制部分的程序。mp3播放要求实时性很高,所以不能跟用户控制程序放在一起,需要为它创建一个线程。通过linux下的pthread线程,它可以共享内存的数据,这使得线程间通信变得方便。mp3播放的代码就可以放到一个线程里面去,通过共享内存数据由主线程来处理用户操作、启动、暂停和结束播放线程序。引入了多线程操作后,使播放器用户界面的各操作(如按纽按下、鼠标点击等)不必等待mp3解码完成而不能得到及时响应。

5.3 mp3音频解码关键算法对ipp关键算法的api移植封装接口

鉴于篇幅关系,不对每一个api移植和具体操作都进行详细阐述,如上所述,ipp最底层的音频解码函数有ippsunpackframeheader_mp3…ippssynthpqmf_mp3_32s16s等,我们先对上述函数进行第一层移植,形成一批引用更为方便、操作更为简单的api,把这一层的移植操作全都完成在一个myaudioapi.cpp文件里面,添加到用qt做图形界面gui的项目中一起编译。

这使得最上层的qt图形界面应用程序的各个成员函数可以非常方便地调用利用ipp生成的音频播放各种操作的函数接口。这样仍然可以利用ipp的高效算法进行解码优化而且屏蔽了底层ipp api的复杂性。还为以后的二次开发提供便利。自己定义的音频解码各个函数原型如下:

void mp3open(char filename);/*打开mp3文件并创建解码线程*/

void mp3play(void); /*设置ispause共享变量为假,重新进入播放线程循环体*/

void mp3pause(void);/*设置ispause共享变量为真*/

void mp3stop(void); /*设置done共享变量为真,等待播放线程结束*

需要说明的是上述函数完成播放器用户界面中启动音频播放、控制暂停和结束播放功能,通过多线程之间共享内存数据的方式进行线程间的通信,从而在主线程中控制播放线程的暂停和停止。

void *mp3start(void *arg) /*针对mp3播放线程主函数进行解释和流程分析*/

{  initmp3decoder(&decoderstate,&bs);/*初始化解码器*/

     while(!done)/*停止键或者解码未完成之前循环播放解码*/

    { if(!ispause)/*通过判断线程之间的共享变量ispause判断时候有暂停键按下*/

      switch( decodemp3frame(&bs,pcm,&decoderstate) )

  {/*根据解码函数返回的状态选择下一步操作*/ 

case mp3_frame_complete:

       /*缓冲区中已有足够数据来解码一帧流数据*/

       …}}

/*关闭 i/o 音频设备,此mp3文件播放结束*/

 }

6 结束语

ipp能够实现底层的交差平台的软件开发,提供高集成的数据通讯,单信号处理以及多媒体功能等,intel ipp并且能够帮助优化电力消耗,达到最佳的cpu执行效率。其嵌入式的移植应用更是为实现手持设备上的低功耗,高代码执行效率提供了一种可行的软件优化方案。

参考文献:

[1] intel. sitsang-pxa255 evaluation platform linux user guide[s] 2005
[2] intel. integrated performance primitives for intel architecture r eference m annual,develop[s].inte1.corn 2002.
[3] trolltec. qt/embedded 2.3.2 reference[s]
[4] 濮琼,黄建华. 基于intelpxa270平台的嵌入式流媒体播放器设计[j],微计算机信息,2005,10-2,31
[5] 白玉霞. 基于qt/embedded的gu i移植及应用程序开发[j]. 嵌入式系统,2005.7
[6] xteam软件技术有限公司[m]. qt程序设计. 北京:清华大学出版社,2002
[7] scott.linux内核源代码分析[m].2004

  


*博客内容为网友个人发布,仅代表博主个人观点,如有侵权请联系工作人员删除。

参与讨论
登录后参与讨论
推荐文章
最近访客