多媒体硬件和软件的关健指标

多媒体
1. 概述
媒体 (Media)是承载信息的载体，即信息的表现形式(或者传播形式),如文字、声音、图像、动画和视频等。按照 ITU-T建议的定义，媒体可分为感觉媒体、表示媒体、显示媒体、存储媒体和传输媒体。

感觉媒体(Perception Medium)：用户接触信息的感觉形式，如视觉、听觉和触觉等。
表示媒体(Representation Medium)：指的是信息的表示形式，如图像、声音、视频等。
表现媒体(Presentation Medium)：表现和获取信息的物理设备
存储媒体(Storage Medium)：用于存储表示媒体的物理介质
传输媒体(Transmission Medium)：指传输表示媒体的物理介质，如电缆、光缆和电磁波等。
媒体包括硬件，软件，以及人类感受，而多媒体就是将其利用计算机技术结合起来，组合成一个相关系统，多媒体系统通常由硬件和软件组成。硬件主要包括计算机主要配置和外部设备以及与各种外部设备的控制接口。多媒体软件主要包括多媒体驱动软件、多媒体操作系统、多媒体数据处理软件、多媒体创作工具软件和多媒体应用软件等。

2. 多媒体关键技术
1.视音频技术

视频技术包括视频数字化和视频编码技术两个方面。视频数字化是将模拟视频信号转换为数字信号。视频编码技术是将数字信号编码为视频信号。

音频技术包括音频数字化、语音处理、语音合成及语音识别4个方面。

（1）视音频编码：编解码器指的是能够对一个信号或者一个数据进行变换的设备或程序。在很多多媒体数据流中，往往需要同时包含音频数据和视频数据，这种编码后的封装是通过视频文件格式来实现的，如常见的*.mpg、.avi、.mov、mp4、.rm、*ogg和 *tta等。

（2）视音频压缩方法：压缩方法总体可以分为有损压缩和无损压缩。无损压缩是指压缩前和解压缩后数据完全一致。无损压缩多数采用RLE行程编码算法。有损压缩则会在压缩过程中丢失一些人眼和人耳不敏感的信息。

2.通信技术

通信技术通常包括了数据传输信道技术和数据传输技术。数据传输信道是指通信的物理介质，包括同轴电缆、双绞线、光纤、越洋海底电缆、微波信道、短波信道、无线通信和卫星通信等。数据传输技术是指在物理介质上如何组织、传送数据的方法，包括基带传输、频带传输及调制技术、同步技术、多路复用技术、数据交换技术、编码、加密、差错控制技术和数据通信网、设备、协议等。

3.数据压缩技术

数据压缩的算法非常多，不同特点的数据有不同的数据压缩算法(也就是编码方式),按类别分主要存在以下3类。

（1）即时压缩和非即时压缩。即时/非即时压缩的区别在于信息在传输过程中被压缩还是信息压缩后再传输。即时压缩一般应用在影像、声音数据的传送中。即时压缩常用到专门的硬件设备，如压缩卡等。

（2）数据压缩和文件压缩。数据压缩是专指一些具有时间性的数据，这些数据常常是即时采集、即时处理或传输的。而文件压缩是指对将要保存在磁盘等物理介质的数据进行压缩。

（3）无损压缩与有损压缩。无损压缩是利用数据的统计冗余进行压缩，通常无损压缩的压缩比比较低。而有损压缩是利用了人类对视觉、听觉对图像、声音中的某些频率成分不敏感的特性，允许压缩的过程中损失一定的信息。

4.虚拟现实 (VR) 增强现实 (AR) 技术

VR/AR 技术发展至今，虽然被广泛应用，其主要关键技术还有待深入研究，这些关键技术

主要包括：

（1）数据采集与优化传输技术。数据采集主要解决如何获取光照、火焰、动态地形等自然现象的数据问题，通常用3种设备获取，即全向相机、高速摄像机和激光设备。优化数据传输技术是要满足低功耗、低延时、高效率等特点，保证数据传输的可靠性。

（2）交互与情形实时再现技术。交互技术的接触方式可分为力觉反馈和触觉反馈两种。力觉反馈是指借助操作控制杆的反作用力效果将虚拟物体的运动轨迹转换成真实物体的机械运动；触觉反馈是指通过手戴3D 数据手套获取手掌和手指的形态和温度等信息，来满足用户对虚拟物体的移动、抓取和触摸等操作。情形实时再现包含了跟踪定位技术、高效可靠的渲染技术和逼真的显示技术等。