lecture01多媒体通信技术概述

1、主讲：蒋志迪主讲：蒋志迪宁波大学信息科学与工程学院宁波大学信息科学与工程学院 办公室：曹光彪信息楼424 电话：665929 email：计划课时：计划课时：51课程情况及要求：课程情况及要求： 本课程帮助学生了解多媒体通信的概念、特点，熟悉多本课程帮助学生了解多媒体通信的概念、特点，熟悉多媒体通信系统的基本构成以及相关的国际标准与协议，掌握媒体通信系统的基本构成以及相关的国际标准与协议，掌握多媒体体信息处理的原理和方法，理解多媒体通信中的关键多媒体体信息处理的原理和方法，理解多媒体通信中的关键技术，如音频数据压缩技术、视频数据压缩技术、组网技术、技术，如音频数据压缩技术、视频数据压缩技术、组

2、网技术、多点控制技术多点控制技术(MCU)，达到对多媒体通信理论和应用较为全，达到对多媒体通信理论和应用较为全面的综合理解，能掌握多媒体通信基本技术并了解其发展趋面的综合理解，能掌握多媒体通信基本技术并了解其发展趋势。势。教学方法：教学方法：课堂讲授为主，辅以完成作业，并阅读相关文献。课堂讲授为主，辅以完成作业，并阅读相关文献。课程讲授内容安排课程讲授内容安排共分共分21讲讲1. 多媒体通信技术概述多媒体通信技术概述2. 图像技术基础图像技术基础(视觉特性和电视技术视觉特性和电视技术)3. 数据压缩的基本理论数据压缩的基本理论4. 预测编码及变换编码预测编码及变换编码5. 子带编码及量化子带编

3、码及量化6. 熵编码及压缩性能评价熵编码及压缩性能评价7. 视频编码及速率控制视频编码及速率控制8. 视频压缩编码国际标准简介视频压缩编码国际标准简介9. 音频编码技术音频编码技术10.多媒体数据及时域特征多媒体数据及时域特征课程讲授内容安排课程讲授内容安排共分共分21讲讲11. 同步模型及分布式多媒体系统同步同步模型及分布式多媒体系统同步12. 连续媒体内部同步及流间同步连续媒体内部同步及流间同步13. 多媒体网络通信多媒体网络通信14. IP网络对多媒体传输的支持网络对多媒体传输的支持15. 多媒体传输协议多媒体传输协议16. 多媒体流式应用系统与终端多媒体流式应用系统与终端17. 流媒体

4、技术流媒体技术18. 视频数据的分组传输及视频数据的分组传输及QoS保障保障19. 多媒体传输拥塞控制及传输层差错控制多媒体传输拥塞控制及传输层差错控制20. 多媒体传输的编码层差错控制多媒体传输的编码层差错控制21. 异构网络中的视频传输技术异构网络中的视频传输技术课程要求课程要求课堂：课堂：1. 按时上课，不交头接耳按时上课，不交头接耳2. 有问题直接课堂讨论或课后反映有问题直接课堂讨论或课后反映3. 有事，按规定请假有事，按规定请假作业：作业：按时完成按时完成考核方式与成绩评定考核方式与成绩评定成绩总评平时成绩总评平时30+期末考试期末考试70平时：包括上课情况及出勤、作业情况平时：包括

5、上课情况及出勤、作业情况期末：闭卷考试期末：闭卷考试第第01讲讲 多媒体通信技术概述多媒体通信技术概述多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院1-1 1-1 概述概述1.1. 原本各自独立的原本各自独立的3 3个领域相互渗透、相互个领域相互渗透、相互融合，形成多媒体技术融合，形成多媒体技术2.2. 多媒体技术的应用与发展，又反过来加速多媒体技术的应用与发展，又反过来加速这这3 3个领域的融合个领域的融合计算机计算机通信通信广播电视广播电视多媒体技术多媒体技术计算机计算机通信通信广播电视广播电视多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学

6、与工程学院1-2 1-2 多媒体的概念和含义多媒体的概念和含义 “多媒体多媒体”概念难建立的原因：概念难建立的原因：3 3个领域技术复杂，融合后形成多媒体技术覆个领域技术复杂，融合后形成多媒体技术覆盖面更广、更复杂盖面更广、更复杂有些商家追求经济、商业利益，乱用概念有些商家追求经济、商业利益，乱用概念新闻报道的不准确用词，起了误导作用新闻报道的不准确用词，起了误导作用 什么是媒体什么是媒体? ?“媒体媒体”(medium)”(medium)一词本身来自于拉丁文一词本身来自于拉丁文“medius”“medius”，意为中介、中间的意思，是信息，意为中介、中间的意思，是信息表示和传输的载体。表示和

7、传输的载体。人类大脑中的信息人类大脑中的信息90%90%是通过眼睛获取是通过眼睛获取多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院CCITT(CCITT(目前已被目前已被ITUITU取代取代) )对媒体分类对媒体分类： 感觉媒体感觉媒体 表示媒体表示媒体 表现媒体表现媒体存储媒体存储媒体 传输媒体传输媒体 多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 感觉媒体感觉媒体直接作用于感官，产生感觉直接作用于感官，产生感觉语言、声音、图像、图形、文字等语言、声音、图像、图形、文字等等等气味、触觉、痛觉？气味、触觉、痛觉？11多媒体通信技术：

8、概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 表现媒体表现媒体感觉媒体与用于通信的电信号之间转换感觉媒体与用于通信的电信号之间转换用的媒体用的媒体输入媒体，如键盘、话筒输入媒体，如键盘、话筒输出媒体，如显示器、扩音器、打印机输出媒体，如显示器、扩音器、打印机12多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 表示媒体表示媒体为了加工、处理和传输感觉媒体而为了加工、处理和传输感觉媒体而人为研究构造出来的一种媒体人为研究构造出来的一种媒体各种编码方式，如文本编码、语言各种编码方式，如文本编码、语言编码、图像编码编码、图像编码感觉媒体数字化的代码感觉媒体

9、数字化的代码13多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 存储媒体存储媒体用于存放表示媒体的媒体用于存放表示媒体的媒体硬盘、磁带、光盘、硬盘、磁带、光盘、RAMRAM等等等等14多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 传输媒体传输媒体将媒体从一处传送到另一处的物理将媒体从一处传送到另一处的物理载体载体通信的信息载体通信的信息载体电缆、双绞线、光纤、无线电波电缆、双绞线、光纤、无线电波15多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院常见感觉媒体常见感觉媒体 声音、文字、图形、图像、视频和动画

10、声音、文字、图形、图像、视频和动画文本文本指各种文字，包括各种字体指各种文字，包括各种字体 、尺寸、格式及色彩的、尺寸、格式及色彩的文本文本音频音频音频包括音乐、语音和各种音响效果。音频包括音乐、语音和各种音响效果。 图形图形图形是指从点、线、面到三维空间的黑白或彩色几图形是指从点、线、面到三维空间的黑白或彩色几何图何图图像图像图像是由像素点阵组成的画面。图像是由像素点阵组成的画面。视频视频是图像数据的一种，若干有联系的图像数据连续播是图像数据的一种，若干有联系的图像数据连续播放便形成了视频。放便形成了视频。 动画动画是利用了人眼的视觉暂留特性，快速播放一连串静是利用了人眼的视觉暂留特性，快速

11、播放一连串静态图像，在人的视觉上产生平滑流畅的动态效果就态图像，在人的视觉上产生平滑流畅的动态效果就是动画。是动画。 16多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 图形图形是指由外部轮廓线条构是指由外部轮廓线条构成的矢量图，即由计算机绘制的成的矢量图，即由计算机绘制的直线、圆、矩形、曲线、图表等。直线、圆、矩形、曲线、图表等。由几何图形构成的矢量图。由几何图形构成的矢量图。 图像图像是由扫描仪、摄像机等是由扫描仪、摄像机等输入设备捕捉实际画面产生的数输入设备捕捉实际画面产生的数字图像。由像素点阵构成的位图。字图像。由像素点阵构成的位图。图形与图像图形与图像1

12、7多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院存储方式的区别：存储方式的区别： - - 图形存储的是画图的函数；图形存储的是画图的函数； - - 图像存储的则是像素的位置信息和颜色信息以及灰度信息。图像存储的则是像素的位置信息和颜色信息以及灰度信息。缩放的区别缩放的区别: : - - 图形在进行缩放时不会失真，可以适应不同的分辨率；图形在进行缩放时不会失真，可以适应不同的分辨率； - - 图像放大时会失真，可以看到整个图像是由很多像素组合而成的。图像放大时会失真，可以看到整个图像是由很多像素组合而成的。处理方式的区别：处理方式的区别： - - 对图形，我们可以旋

13、转、扭曲、拉伸等等；对图形，我们可以旋转、扭曲、拉伸等等； - - 而对图像，我们可以进行对比度增强、边缘检测等等。而对图像，我们可以进行对比度增强、边缘检测等等。算法的区别算法的区别: : - - 对图形，我们可以用几何算法来处理；对图形，我们可以用几何算法来处理； - - 对图像，我们可以用滤波、统计的算法。对图像，我们可以用滤波、统计的算法。其他：其他： - - 图形不是主观存在的，是我们根据客观事物而主观形成的；图形不是主观存在的，是我们根据客观事物而主观形成的； - - 图像则是对客观事物的真实描述。图像则是对客观事物的真实描述。图形与图像的区别图形与图像的区别多媒体通信技术：概述多

14、媒体通信技术：概述信息科学与工程学院信息科学与工程学院动画动画每一帧图像是由人工或计算机生成每一帧图像是由人工或计算机生成的图形的图形 若每帧图像为计算机产生的具有真实感若每帧图像为计算机产生的具有真实感的图像，则称为三维真实感动画。的图像，则称为三维真实感动画。视频视频每帧图像为实时获取的自然景物图每帧图像为实时获取的自然景物图像。像。帧速在帧速在10101616帧帧/ /秒时会感到画面抖动。秒时会感到画面抖动。电影：电影：2424帧帧/ /秒秒NTSCNTSC制式电视：制式电视：3030帧帧/ /秒秒PALPAL制式电视：制式电视：2525帧帧/ /秒秒动画与视频动画与视频19多媒体通信技

15、术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 多媒体多媒体是英文是英文“multimedia”“multimedia”一词的译文，一词的译文，是由是由“multi”“multi”和和“media”“media”复合而成，直复合而成，直译即为多媒体。在多媒体技术中，媒体是译即为多媒体。在多媒体技术中，媒体是指表达信息的手段。指表达信息的手段。1 1）融合两种以上媒体的人机交互式信息交流与）融合两种以上媒体的人机交互式信息交流与传播的媒体传播的媒体2 2）传统的计算媒体）传统的计算媒体文字、图形、图像以及文字、图形、图像以及逻辑分析方法等与视频、音频以及为了知识创建逻辑分析方法

16、等与视频、音频以及为了知识创建和表达的交互式应用的综合体和表达的交互式应用的综合体 多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院例例: : 数字电视的数据量数字电视的数据量电视图像的数字化：数据量庞大电视图像的数字化：数据量庞大我国彩电制式为我国彩电制式为PAL-DPAL-D，场频，场频50Hz(50Hz(帧频帧频25Hz)25Hz)、625625行，屏幕宽高比为行，屏幕宽高比为4/34/3，采用隔行扫描。有效，采用隔行扫描。有效像素点为像素点为767767575575，彩色像素点经过抽样量化为，彩色像素点经过抽样量化为2424位，则位，则1 1幅静止画面的数据

17、量为：幅静止画面的数据量为：76776757557524=10.6Mb24=10.6Mb这时传送数据的速度可高达这时传送数据的速度可高达10.610.625=265Mbps25=265Mbps多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院1-3 1-3 多媒体产生的技术背景多媒体产生的技术背景多媒体技术是信息技术发展的必然结果。促多媒体技术是信息技术发展的必然结果。促进多媒体技术趋于成熟的技术很多，其中最进多媒体技术趋于成熟的技术很多，其中最关键的技术是：关键的技术是： 各种多媒体压缩算法使得多媒体信息巨大的数据量得有各种多媒体压缩算法使得多媒体信息巨大的数据量得

18、有效的压缩、从而是多媒体的有效存储、效的压缩、从而是多媒体的有效存储、 传输、传输、 数据库管数据库管理成为可能理成为可能. 人机交互和分布式处理系统等使得多媒体系统的产生成人机交互和分布式处理系统等使得多媒体系统的产生成为可能。为可能。 CD-ROM解决了多媒体信息的存储问题；解决了多媒体信息的存储问题； 高速计算机网络可以传送多媒体信息；高速计算机网络可以传送多媒体信息； 高速位处理技术、专用集成电路技术和亚微米集成电路高速位处理技术、专用集成电路技术和亚微米集成电路技术的发展，为多媒体技术提供了高速处理的硬件环境；技术的发展，为多媒体技术提供了高速处理的硬件环境；多媒体通信技术：概述多媒

19、体通信技术：概述信息科学与工程学院信息科学与工程学院1 1）集成性集成性：一方面是媒体信息的集成：一方面是媒体信息的集成, ,另一方面是另一方面是显示或表现媒体设备的集成；显示或表现媒体设备的集成；2 2）实时性实时性：声音、视频、动画等媒体是强实时的，：声音、视频、动画等媒体是强实时的，多媒体系统提供了对这些多媒体系统提供了对这些时基媒体时基媒体实时处理的能实时处理的能力；力； 3 3）交互性交互性：多媒体计算机与其它家用声像电器有所：多媒体计算机与其它家用声像电器有所差别的关键特征，普通家用声像电器无交互性，差别的关键特征，普通家用声像电器无交互性，即用户只能被动收看，而不能介入到媒体的加

20、工即用户只能被动收看，而不能介入到媒体的加工和处理之中。和处理之中。多媒体技术的特点多媒体技术的特点23多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 多媒体技术是一门综合的高新技术多媒体技术是一门综合的高新技术, , 是多是多个相关学科综合发展的产物个相关学科综合发展的产物微电子技术微电子技术计算机技术计算机技术通信技术通信技术等等多媒体技术的特点多媒体技术的特点24多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 从应用角度来看从应用角度来看, ,人们对多媒体系统的认识一人们对多媒体系统的认识一是来自电视是来自电视, ,一是来自计算

21、机。一是来自计算机。 Its a PC,Its a TV,Its a Its a PC,Its a TV,Its a MultimediaMultimedia。 【电视】【电视】2020世界世界2020年代的发明，一直沿着模拟信号年代的发明，一直沿着模拟信号处理技术的方向发展，处理技术的方向发展，7070年代才开发数字电视。年代才开发数字电视。 【计算机】【计算机】2020世界世界4040年代的发明，年代的发明，6060年代文字进入年代文字进入计算机，计算机，7070年代图像、声音进入计算机，年代图像、声音进入计算机，8080年代电年代电视进入计算机，视进入计算机，9090年代已经能够实时处理

22、大量的声年代已经能够实时处理大量的声音和影视图像信息。音和影视图像信息。多媒体技术的特点多媒体技术的特点25多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 多媒体的研究开发途径：多媒体的研究开发途径：- - 电视计算机电视计算机（teleputerteleputer） 家电制造厂商研制的，把家电制造厂商研制的，把CPUCPU放到家电中，放到家电中，通过编程控制管理电视机、音响，又称通过编程控制管理电视机、音响，又称 Smart TVSmart TV - - 计算机电视计算机电视（compuvisioncompuvision） 计算机制造厂商研制的，采用微处理器计算

23、机制造厂商研制的，采用微处理器作为作为CPUCPU，其它设备还有，其它设备还有VGAVGA卡、卡、CD-ROMCD-ROM、音响设备以及扩展的多窗口系统，其发展音响设备以及扩展的多窗口系统，其发展方向是方向是TV-KillerTV-Killer家电希望有计算机家电希望有计算机的功能的功能计算机具有综合处理声、计算机具有综合处理声、文、图信息的能力文、图信息的能力代替电视代替电视26多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 多媒体技术最简单的表现形式：多媒体技术最简单的表现形式： 多媒体计算机多媒体计算机增加了对活动图像（包括增加了对活动图像（包括伴音）的处理

24、、存储和显示。伴音）的处理、存储和显示。数据库数据库用户多媒用户多媒体计算机体计算机图像图像伴音伴音通信网络通信网络多媒体通信多媒体通信多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 多媒体技术、计算机技术、通信技术多媒体技术、计算机技术、通信技术和网络技术等相互结合和发展的产物。和网络技术等相互结合和发展的产物。多媒体通信多媒体通信多媒体通信系统多媒体通信系统多媒体多媒体服务器服务器 多媒体多媒体通信终端通信终端 多媒体多媒体通信终端通信终端 多媒体多媒体通信终端通信终端同步性！同步性！多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院

25、多媒体技术的发展历程多媒体技术的发展历程启蒙发展阶段启蒙发展阶段标准化阶段标准化阶段29多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 起源于八十年代中期起源于八十年代中期 19841984，Apple MacintoshApple Macintosh，使用了位映射，使用了位映射(bitmap)(bitmap)、窗口、窗口(window)(window)、图符、图符(icon)(icon)等技术等技术, , 构成构成图形用户界面图形用户界面(GUI)(GUI), , 同时鼠标作为交互设同时鼠标作为交互设备配合备配合GUIGUI使用。使用。 19851985，Mic

26、rosoftMicrosoft推出推出WindowsWindows，多任务的图形操，多任务的图形操作环境，使用鼠标驱动的图形菜单。作环境，使用鼠标驱动的图形菜单。 19851985，美国，美国CommodoreCommodore公司首先推出世界上第一公司首先推出世界上第一台台多媒体计算机多媒体计算机AmigaAmiga系统系统 ，多任务的，能处理，多任务的，能处理图形音响视频，具有下拉菜单、多窗口、图符等。图形音响视频，具有下拉菜单、多窗口、图符等。启蒙发展阶段启蒙发展阶段30多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 19861986，荷兰，荷兰Philip

27、sPhilips和日本和日本SonySony联合推出联合推出CD-ICD-I（compact disc interactive, compact disc interactive, 交互式紧凑交互式紧凑光盘系统），公布了所采用的光盘系统），公布了所采用的CD-ROMCD-ROM光盘光盘的数据的数据格式格式 19891989，IntelIntel将将DVIDVI（Digital Video Digital Video InteractiveInteractive，交互式数字视频系统）技术开发，交互式数字视频系统）技术开发成一种成一种可普及的商品可普及的商品。 19891989，IntelInte

28、l与与IBMIBM合作，在合作，在Comdex/Fall89Comdex/Fall89上上推出推出Action Media 750Action Media 750多媒体开发平台多媒体开发平台。19911991改改进为进为Action Media, Action Media, 在扩展性、可移植性、视在扩展性、可移植性、视频处理能力等方面有大的改善。频处理能力等方面有大的改善。 启蒙发展阶段启蒙发展阶段31多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 2020世纪世纪9090年代逐渐成熟，由研究开发转向应用年代逐渐成熟，由研究开发转向应用 19901990年年101

29、0月，月， 在微软公司召开多媒体开发工作在微软公司召开多媒体开发工作者会议上提出者会议上提出MPC1.0MPC1.0标准（基于标准（基于286286386386）。）。 19931993年由年由IBMIBM， Intel Intel等数十家软硬件公司组成等数十家软硬件公司组成的多媒体个人计算机市场协会的多媒体个人计算机市场协会(MPMC)(MPMC)发布了多媒发布了多媒体个人机的性能标准体个人机的性能标准MPC2.0MPC2.0（486486）。）。 19951995年年6 6月，月， MPMC MPMC又宣布了新的多媒体个人机技又宣布了新的多媒体个人机技术规范术规范MPC3.0MPC3.0（

30、586586）。）。 19961996年以后年以后, , 新的个人机均支持基本多媒体功能新的个人机均支持基本多媒体功能 标准化阶段标准化阶段32多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 技术的标准化技术的标准化 关键技术关键技术多媒体数据的压缩与解压多媒体数据的压缩与解压缩缩静态图像静态图像运动图像运动图像音频（语音）音频（语音） 国际标准化组织国际标准化组织 ISO ISO 国际电信联盟国际电信联盟 ITU ITU标准化阶段标准化阶段33多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 数字化图象压缩标准数字化图象压缩标准JPE

31、GJPEG标准标准MPEGMPEG标准标准ITU H.26XITU H.26X标准标准 数字化音频压缩标准数字化音频压缩标准MPEG-1,2,4MPEG-1,2,4音频标准音频标准16Kbps ITU 16Kbps ITU 标准化方案标准化方案G.728G.72832Kbps ITU32Kbps ITU标准化方案标准化方案G.721G.721标准标准64Kbps ITU64Kbps ITU标准化方案标准化方案G.722G.722标准化阶段标准化阶段34多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 光盘存储系统的标准光盘存储系统的标准 CD-ROM CD-ROM

32、CD-DA CD-DA CD-I CD-I VCD VCD DVD DVD 蓝光蓝光标准化阶段标准化阶段35多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院1-4 1-4 多媒体通信中的关键技术多媒体通信中的关键技术 多媒体数据压缩多媒体数据压缩/ /解压缩算法解压缩算法 多媒体数据的获取与显示技术多媒体数据的获取与显示技术 多媒体信息存储技术多媒体信息存储技术 多媒体数据库与基于内容的检索技术多媒体数据库与基于内容的检索技术 多媒体通信网络技术多媒体通信网络技术 超文本和超文本和WebWeb技术技术36多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息

33、科学与工程学院多媒体信息数据量巨大多媒体信息数据量巨大Ex1Ex1：一路以分量编码的数字电视信号，数据：一路以分量编码的数字电视信号，数据率达率达216Mbit/s216Mbit/s，存储，存储1 1小时这样的电视节目小时这样的电视节目需要近需要近80GB80GB的存储空间；若要实现远距离传的存储空间；若要实现远距离传送，则需要占用送，则需要占用108108216MHz216MHz的信道带宽。的信道带宽。多媒体数据压缩技术多媒体数据压缩技术多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院多媒体数据压缩技术多媒体数据压缩技术Ex2Ex2：以一幅彩色静态图像（：以一幅彩

34、色静态图像（RGBRGB）为例）为例 设分辨率为设分辨率为512512* *512512 每一种颜色用每一种颜色用8bit8bit表示表示 R R用用8bit 2568bit 256级表示级表示 G G用用8bit 2568bit 256级表示级表示 B B用用8bit 2568bit 256级表示级表示RGB多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院Ex2Ex2：以一幅彩色静态图像（：以一幅彩色静态图像（RGBRGB）为例）为例 则一幅彩色静态图像的则一幅彩色静态图像的 数据量为：数据量为： 512 512* *512512* *3 3* *8 bit8 b

35、it以以PALPAL制制2525帧帧/ /秒为例，视频每秒钟的秒为例，视频每秒钟的数据量：数据量：512512* *512512* *3 3* *8 8* *2525180Mbps180MbpsISAISA总线总线 150KB/s 150KB/s150150* *8 81.2Mbps1.2Mbps 差不多要压缩近差不多要压缩近200200倍倍RGB 多媒体数据压缩技术多媒体数据压缩技术多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院- 音频信号压缩编码技术（一维）音频信号压缩编码技术（一维）- 图像压缩编码发展过程（二维）图像压缩编码发展过程（二维）- 图像压缩编码

36、国际标准图像压缩编码国际标准 JPEG JPEG、H.26XH.26X、MPEG-MPEG-X X所以，必须进行压缩！所以，必须进行压缩！多媒体数据压缩技术多媒体数据压缩技术多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 人机交互人机交互 信息输入信息输入：文字识别、联机手写识别、文字识别、联机手写识别、 手写识别（？）、语音识别手写识别（？）、语音识别 图像理解图像理解 多媒体数据的获取与显示技术多媒体数据的获取与显示技术多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 基于内容的查询基于内容的查询多媒体数据库及检索技术多媒体数据库及

37、检索技术多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 网络应有足够的带宽网络应有足够的带宽 100Mbit/s100Mbit/s以上以上 网络应提供服务质量的保证网络应提供服务质量的保证 满足实时性、可靠性满足实时性、可靠性 网络需满足媒体同步的要求网络需满足媒体同步的要求 媒体间（内）同步媒体间（内）同步 目前的电信网络、计算机通信网络、有线电目前的电信网络、计算机通信网络、有线电视网络都不是最理想的多媒体通信解决方案。视网络都不是最理想的多媒体通信解决方案。 IPv6 IPv6协议协议 组播技术组播技术多媒体通信网络技术多媒体通信网络技术多媒体通信技术：概述

38、多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 海量的多媒体信息数据量决定了其存储设备海量的多媒体信息数据量决定了其存储设备必须容量大、速度快、带宽高。必须容量大、速度快、带宽高。 磁带大容量数据存储，速度慢磁带大容量数据存储，速度慢 硬盘读取速度快、可即时读写、多用户同硬盘读取速度快、可即时读写、多用户同时访问时访问 光盘存储量大、可共享、成本低光盘存储量大、可共享、成本低多媒体信息存储技术多媒体信息存储技术多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 分布式多媒体系统涉及计算机领域及通分布式多媒体系统涉及计算机领域及通信领域信领域 流媒体技术流媒体

39、技术多媒体数据的分布式处理技术多媒体数据的分布式处理技术多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院1-5 1-5 多媒体通信终端多媒体通信终端 多媒体计算机多媒体计算机 融入了处理与显示彩色电视信号的功能融入了处理与显示彩色电视信号的功能多媒体通信终端多媒体通信终端是在用户一端用来完成多媒体通信业务的设备是在用户一端用来完成多媒体通信业务的设备1. 以多媒体计算机为平台的终端以多媒体计算机为平台的终端附加上与通信网对应的通信接口附加上与通信网对应的通信接口重要要素：能够进行语音和包括活动图像在内的重要要素：能够进行语音和包括活动图像在内的多媒体通信业务多媒体通

40、信业务2. 以彩色电视机为平台的终端以彩色电视机为平台的终端附加上机顶盒附加上机顶盒(STB),集成了与通信网对应的通信集成了与通信网对应的通信接口接口进行进行VOD业务业务多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院1-6 1-6 多媒体通信系统的类型、特点及其多媒体通信系统的类型、特点及其相关业务相关业务多媒体技术真正的意义在于与网络的结合，多媒体技术真正的意义在于与网络的结合，在于通过网络为用户以多媒体的方式提供信在于通过网络为用户以多媒体的方式提供信息服务。到目前为止，多媒体系统及其相关息服务。到目前为止，多媒体系统及其相关业务可分为业务可分为5 5大类

41、：大类：独立商亭式业务独立商亭式业务多媒体信息检索与查询多媒体信息检索与查询多媒体会议与协同工作多媒体会议与协同工作点播电视点播电视多媒体信件多媒体信件多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 独立商亭式业务独立商亭式业务商场入口的商品介绍商场入口的商品介绍医院等机构的介绍系统医院等机构的介绍系统 多媒体信息检索与查询多媒体信息检索与查询在房地产、商品购物等方面的导向应用在房地产、商品购物等方面的导向应用系统系统图书、资料的异地查询图书、资料的异地查询发展趋势：系统具有活动图像和声音查发展趋势：系统具有活动图像和声音查询能力询能力多媒体通信技术：概述多媒体通

42、信技术：概述信息科学与工程学院信息科学与工程学院 多媒体会议与协同工作多媒体会议与协同工作直接利用广播电视的电视会议直接利用广播电视的电视会议可视电话可视电话视听会议系统视听会议系统 会议电视系统会议电视系统 桌面会议电视系统桌面会议电视系统 点播电视点播电视VODVOD2 2方面：方面：节目库存于电视中心节目库存于电视中心用户可以异地调用节目并能实现传统录像机功用户可以异地调用节目并能实现传统录像机功能能多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 VODVOD引起了全世界的关注，但其实现比较困引起了全世界的关注，但其实现比较困难，出现了各种不是真正意义上的难

43、，出现了各种不是真正意义上的VODVOD系统，系统，称其为准称其为准VODVOD系统系统(N-VOD)(N-VOD)。简化简化VODVOD系统最昂贵的视频服务器：不提供录系统最昂贵的视频服务器：不提供录像机式的操作功能像机式的操作功能将用户相同点的请求合并将用户相同点的请求合并节省线路改造费用：上行通道是电话线，下行节省线路改造费用：上行通道是电话线，下行通道是宽带通道是宽带多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院 未来的开放式未来的开放式VODVOD系统，应遵循以下原则系统，应遵循以下原则服务器的吞吐能力能够模块化地发展服务器的吞吐能力能够模块化地发展能够从多种信源向系统输入信号能够从多种信源向系统输入信号具备层次化存储结构具备层次化存储结构与多媒体信息检索和查询业务融合与多媒体信息检索和查询业务融合对不同终端的兼容性对不同终端的兼容性多媒体通信技术：概述多媒体通信技术：概述信息科学与工程学院信息科学与工程学院1-7 1-7 多媒体技术在我国的发展多媒体技术在我国的发展 我国多媒体技术和应用的发展起于我国多媒体技术和应用的发展起于2020世纪世纪8080年代末，大致分为以下几个阶段：年代末，大致分为以下几个阶段：(1) 1989(1) 1989年开始，主要工作集中在多媒体应用系统年开始，主要工作集中在多媒体应用系统的开发上