ADSP系列处理器在网络多媒体中的应用
操作系统(Linux)
视频解码(H.264、MPEG4)
音频解码(G.711、G.723.1、G.729、MP3)
以太网通讯(TCP/IP协议栈等)
H.323协议栈
图形用户界面(GUI)
ADI BF533支持:
视频采集编码(H.264、MPEG4)
音频采集编码(G.711、G.723.1、G.729)
回音消除
通过上面使用ARM9+BF533以及相关的软件支持,我们可以实现以下功能:
在局域网和广域网内进行音视频的电话对讲
多媒体娱乐功能:可以播放MPEG4视频和MP3、WMA音乐
支持email服务
支持SMS、MMS短信
支持软件盘、手写输入
可外接键盘和鼠标
可视电话的基本结构和核心技术:
1. 可视电话的基本结构包括:
视频输入/输出模块,视频编解码器
音频输入/输出模块,音频编解码器
延时单元
数据处理、存储单元
系统控制单元
网络界面单元
2. 可视电话的核心技术:
语音和视频压缩技术视可视电话的核心技术。可视电话作为通信终端产品,必须保证足够好的语音和视频质量,同时占用的带宽要尽量小。语音和视频压缩技术的发展目标就是:在保证压缩后的语音和图像质量的同时,尽量提高压缩率。
2.1语音编码技术
语音通信视可视电话最基本的功能。受网络条件的限制,可视电话不可能占用太大的带宽。为了适应低码率语音通信的要求,ITU-T推出了G.72X系列语音压缩标准。其中G.723.1、G.728、G.729和G.729A,在IP电话中得到了广泛应用。不同的语音压缩标准所采用的技术提供不同的码率、时延和语音质量。
2.2视频编码技术
原始的视频数据需要占用非常高的带宽,如果需要通过网络传输必须在保证在一定的图像质量的前提下通过压缩技术尽量降低视频资料的码率,以适应不同的网络条件.因此视频压缩算法的效率决定了可视电话的图像质量和应用前景。
目前在网络监控、视频点播的应用中,MPEG4格式的视频压缩算法较为流行,其码率一般在数百Kbps到1Mbps左右。ITU-T推出的低码率视频压缩标准对推动可视电话的发展和实用化起到了重要的促进作用。H.261是ITU-T推出的第一个低码率视频压缩标准,码率为p×64kbit/s,其中p=1~30,图像格式为CIF(352*288)和QCIF(162*144)。目前H.264的算法能够将同样的视频压缩到更低的码率,但其计算复杂度也大大增加。相信随着DSP芯片处理能力的进一步提高,H.264网络视频传输方面的应用将越来越流行。
2.3通信协议
为保证可视电话在网络上可靠的通信,不同的终端必須运行统一的通信控制协议來保证相互协同工作。
ITU-T推出的H.320/323标准,面向不同的网络,不同的网络介面,不同的信令过程,以及为适应不同的网络而优化设计的包结构。复用协定规定了视频资料、语音资料等的打包标准,而控制协定的作用是在终端之间些商通信方式,如视频编码标准的协商,语音编码标准的协商,通道带宽的协商等。基于以太
《ADSP系列处理器在网络多媒体中的应用(第4页)》