音视频、多媒体应用解决方案指南

目前，音视频编解码技术正在延伸到包括消费类电子、智能家居、智能交通、工业控制、航空航天、国防军事等各行各业。其中，基于网络的多媒体应用正变得越来越广泛，对于音视频处理的技术要求也越来越复杂。对于如何评估选择合适的多媒体解决方案，本文给出一些参考。

 

1为什么要使用编解码技术

 

原始的视频数据量非常大，需要占用非常高的带宽，如果需要通过网络传输必须在保证在一定的图像质量的前提下通过压缩技术尽量降低视频资料的码率，以适应不同的网络条件，减少传输、存储的负担。因此，视频压缩算法的效率决定了多媒体产品的图像质量和应用前景。

 

2视频的主要性能指标

 

1） 编解码格式（format），即视频是以何种编解码技术进行压缩、解压缩的。目前流行的视频格式有：MPEG1/2/4、H.263、H.264、AVS、RM/RMVB、WMV…

2） 分辨率（resolution），即直观的画面像素、大小。一般的规格有CIF（352*288），QCIF（即四分之一CIF，176*144），D1（720*576），VGA（640*480），QVGA（320*240）

3） 帧率（fps），即每秒钟视频刷新的画面数量。一般电影在25fps，即每秒钟有25 张胶片上的画面被投影在银幕上，由于人眼的视觉效果，看到的就是流畅的画面。如果低于

15fps，就会感觉到明显的停顿现象。

4） 清晰度（definition），顾名思义，就是画面的实际效果、图像质量。越清晰的视频保留了越多原始的图像数据，能够更加真实的还原画面。

5） 码率（bit-rate），即每秒钟的图像数据量（bps）。码率越低占用网络的带宽就越小，占用的存储空间也越少。码率和上述性能指标都是成正比的，即越高的分辨率、帧率、清晰度，最终的码率就越大。

 

对于多媒体产品开发，首先需要明确的就是对于以上几项主要性能规格的要求，以此决定处理器的选型。 

  

3目前主流的多媒体处理器 

 

  

4常见的多媒体应用及相关技术、处理器选型参考

  

 

现阶段的视频、多媒体应用已经不仅仅局限于基本的视频压缩/解压的功能。面向不同的行业应用，一些特定的需求、附加的功能对多媒体处理器提出了更高的要求，这既是挑战也是机遇。 

  

5典型视频应用系统结构

  

  

具体的功能需求往往直接体现到对接口的要求，尽量选择内部集成相应接口资源的处理器，减少需要外扩的器件及电路，以此降低成本。