多媒体技术第1章-1

多媒体技术基础计算机与信息技术学院：倪蓉蓉教材林福宗．多媒体技术基础（第三版）．北京：清华大学出版社，2009．参考书：(加)LiZN，DrewMS（著）．史元春等（译）．多媒体技术教程．北京：机械工业出版社，2007．阮秋琦.数字图像处理基础.清华大学出版社倪蓉蓉专业：信号与信息处理单位：计算机学院信息科学研究所联系方式： rrni@

九教北604（51683695）团队主页：

信息科学研究所招收的研究生专业：信号与信息处理模式识别与智能系统信息安全BeijingJiaotongUniversity计算机与信息技术学院信息科学研究所InstituteofInformationScience2.信息科学研究所简介北京交通大学信息科学研究所（1）师资情况“教育部长江学者”获得者1人“国家杰出青年科学基金”获得者1人国家百千万人才工程入选

1人北京科技百名领军

1人“科技部重大基础研究（973）信息领域”咨询专家1人“国务院学位委员会学科评议组成员”1人“国家自然科学基金专家评议组成员”2人“国家级教学名师”1人“教育部新世纪优秀人才”入选者3人“北京市科技新星计划”入选者2人北京交通大学“红果园人才计划”

入选者6人

信息所教师由31名老、中、青科研人员组成。其中教授11名，副教授12人，讲师8名。80%以上的成员有海外研究背景。北京交通大学信息科学研究所信息所自上世纪九十年代起，开始主持国家自然科学基金重大项目“超级智能视听信息处理系统”等项目。近5年，信息所主持承担了“973”、“863”、国家自然科学基金、铁道部及军工等纵向项目100多项，项目经费累计近7000万。2012年科研经费1800万。（2）科学研究北京交通大学信息科学研究所近年，信息所共获得“北京市自然科学一、二等奖”、“教育部科技进步一等奖”、“教育部自然科学二等奖”、“国家教学名师奖”等各类奖项14项。获奖承担项目近五年，信息所取得了丰硕的学术成果。信息所成员在国际顶级期刊IEEETrans.OnKnowledgeandDataEngineering(TKDE)、IEEETrans.OnMultimedia(TMM)、IEEETrans.OnCircuitsandSys.forVideoTech.(TCSVT)、IEEETrans.OnSignalProcessing(TSP)、PatternRecognition

与国际会议上发表相关论文400余篇，其中SCI检索论文100篇，授权发明专利30项。5篇论文获国际会议最佳论文奖。学术成果北京交通大学信息科学研究所2023/2/3近年来，团队与包括美国、英国、新加坡等十几个国家的20多个科研院所建立了长期的合作关系,为国外留学生授予博士、硕士学位十余人次。承担了中国-新加坡、中国-意大利等国际重大、重点等合作项目等。国际合作与交流北京交通大学信息科学研究所2023/2/3国际合作与交流自1990年起，团队已连续主办12届IEEE国际信号处理（InternationalConferenceonSignalProcessing，ICSP）会议，在信号处理领域具有非常大的国内、国际影响力自2006年起，已连续承办4届IET国际无线、多媒体和移动网络会议(ICWMMN)北京交通大学信息科学研究所国家级重点学科“信号与信息处理”信号与信息处理全国重点学科8个（2007年二级学科评估第5）清华大学、北京交通大学、北京邮电大学、北京理工大学、东南大学、电子科技大学、西安电子科技大学、中国科学技术大学“信号与信息处理”和“通信与信息系统”合并为国家一级重点学科–“通信与信息工程”（2012年一级学科评估全国排名并列第八）（3）学科建设北京交通大学信息科学研究所（3）学科建设北京交通大学信息科学研究所计算机视觉与数字媒体研究室信息科学研究所朱振峰（室主任）袁保宗阮秋琦赵耀刘渭滨倪蓉蓉杨唐文白慧慧安高云常冬霞韦世奎林春雨刘美琴现代信号处理与信息认证研究室孙冬梅（室主任）裘正定丁晓明章春娥王升辉泛在网络与普适计算研究室朱维彬（室主任）苗振江梁满贵刘湘黔万丽莉信息感知与多维信号处理研究室赵瑞珍(室主任)胡绍海肖扬

赵帅锋岑翼刚王东余贶禄张树军北京交通大学信息科学研究所（4）研究方向（5）科研平台北京交通大学信息科学研究所211工程建设985工程优势学科创新平台教育部创新团队（5）科研平台北京交通大学信息科学研究所信息所具有两个省部级重点实验室北京市重点实验室“现代信息科学与网络技术”铁道部部级开放实验室“铁路信息科学与工程”（5）科研平台北京交通大学信息科学研究所多视点视频采集平台立体实拍显示平台虚拟现实平台博士后出站20余人毕业博士研究生100余人毕业硕士研究生700余人在读博士研究生60余人在读硕士研究生140余人北京交通大学信息科学研究所研究生培养情况（6）人才培养1名博士研究生获全国优秀百篇优秀论文提名奖2名博士研究生获北京市优秀博士学位论文奖1名博士研究生获中国计算机学会（CCF）优秀博士论文奖2名博士入选了微软亚洲研究院的“微软青年学者铸星计划”毕业博士研究生100余人北京交通大学信息科学研究所（6）人才培养3.招生专业北京交通大学信息科学研究所信号与信息处理（081002）通信系统原理及应用（一）数字信号处理数据结构模式识别与智能系统（081104）数字信号处理

数据结构电子与信息工程（085208）

数字信号处理

通信系统原理及应用。学位硕士专业硕士招生人数、考试科目以研究生院的正式通知为准

智瑾专项奖学金、宝钢优秀学生奖学金、校友奖学金、华为技术奖学金、

尖峰奖学金等多项研究生奖学金，奖励额度1000至10000元不等。

教育创新基金：优秀博士生，5万到8万元项目经费。硕士生1-2万。

优秀论文奖：信息所每年对研究生发表论文评奖，奖金额度5000元。北京交通大学信息科学研究所优秀研究生奖学金：北京交通大学信息科学研究所优秀研究生(博士研究生)均有机会获得公派出国进行3个月、一年及两年联合培养的机会。近几年来，每年均有数名研究生赴美国、澳大利亚、英国、德国、新加坡、瑞士等国的著名高校联合培养。国家留学基金委公派留学基金北京交通大学出国交流基金研究生导师根据科研项目需求安排的国际合作

交流联合培养联合培养经费来源北京交通大学信息科学研究所信息科学研究所Institute

ofInformationScience，IIS团队介绍教育部创新团队MePro常年招生本科生NameMePro

:

Center

of

Digital

Media

Information

ProcessingLeader:

Prof.

Yao

ZhaoAbout

30

teachersLeader:

Prof.

Yao

ZhaoAbout

8

teachershttp://Peopleinmepro8teachers1secretary10PhDstudents40MasterstudentsResearchdirections

Digital

Media

Information

Processing

Image/Video

Coding

and

TransmissionMedia

Content

SecurityMedia

Analysis

and

Understanding

3D

Image/Video

Coding;

HEVC;

etc.

1Watermarking;

Stegography;

Forensics2Computer

vision;

Analysis

and

Understanding;

Machine

Learning3Image,

Video,

Graph，etc.第1章多媒体技术概述第2章多媒体数据压缩技术第3章音频处理基础第4章图像处理基础第5章视频信息处理课程内容第1章多媒体技术概述1.1多媒体基本概念1.2多媒体计算机系统1.3多媒体技术的研究内容1.4多媒体技术的应用和发展1.1多媒体基本概念1.1.1媒体和多媒体1.1.2媒体的分类与特性1.1.3多媒体技术基本概念1.1多媒体基本概念1.1.1媒体和多媒体1.1.2媒体的分类与特性1.1.3多媒体技术基本概念1.1.1媒体和多媒体

媒体是人与人之间、人与计算机信息系统之间进行信息交流的介质，媒体信息传递和存储的最基本的技术和手段，也就是信息的载体，是信息的表示形式。媒体1.1.1媒体和多媒体

广义角度看，作为信息的载体，媒体有多种。传统媒体：书刊报纸、广播、电视；现代媒体：Internet、IPTV、电子杂志和手机短信等。媒体媒体要承载信息，所以媒体要能表示信息，媒体要能存储信息，媒体还要传输信息。1.1.1媒体和多媒体表示信息媒体:

文字、音频、图形、图像、动画、视频等文字音频图像媒体1.1.1媒体和多媒体存储信息媒体:

纸、杂志、光盘、磁盘、磁带等媒体纸磁盘光盘1.1.1媒体和多媒体传输信息媒体:

电缆、光缆、电磁波、互联网、移动通讯等媒体广播电台电视台手机短信1.1.1媒体和多媒体多媒体多媒体是指将多个不同但相互关联的媒体综合集成在一起而产生的一种传播、存储和表现的载体。通常，融合两种或两种以上的表示媒体。即指集文本、图形、图像、动画、音频、视频为一体的综合媒体形式。1.1.1媒体和多媒体多媒体多媒体的特征：1．多媒体是信息交流和传播媒体。2．多媒体是人机交互式媒体。3．多媒体信息以数字形式存储和传输。4．多媒体信息种类多，具有实时的特性。1.1.1媒体和多媒体多媒体多媒体的表现形式，如：计算机游戏、交互电视和基于计算机的训练系统等。人人网上的游戏—餐厅自由选择节目的交互电视模拟飞行训练系统1.1多媒体技术概述1.1.1媒体和多媒体1.1.2媒体的分类与特性1.1.3多媒体技术基本概念1.1多媒体技术概述1.1.1媒体和多媒体1.1.2媒体的分类与特性1.1.3多媒体技术基本概念1.1.2多媒体的分类与特性多媒体分类国际电信联盟ITU下属的电信标准部(TSS)建议的ITU-TI.374定义媒体有五大类：

感觉媒体，表现媒体，表示媒体，存储媒体，传输媒体InternationalTelecommunicationUnion1.1.2多媒体的分类与特性多媒体分类感觉媒体表现媒体表示媒体存储媒体传输媒体

使人产生直接感觉的各种媒体。

表达和接收媒体信息的物理设备。

媒体信息在计算机中的存储形式。

存储媒体数据的物理设备。

传输媒体的数据物理设备。1.1.2多媒体的分类与特性多媒体分类计算机系统与各种媒体间的关系示意图

感觉媒体感觉媒体输入设备输出设备CPU存储器表现媒体表现媒体表示媒体表示媒体存储媒体传输媒体1.1.2多媒体的分类与特性多媒体分类五种媒体间关系示意图

1.1.2多媒体的分类与特性多媒体的特性

多媒体的多样性多媒体的交互性多媒体的集成性多媒体的实时性多媒体具有一些共同的基本属性，这些属性使得多媒体的应用异彩纷呈。1.1.2多媒体的分类与特性多媒体的特性

多媒体的多样性65%20%10%2%3%人类五大感觉所占信息量关系

媒体种类多样性媒体信息的表现形式多样性多媒体的应用形式多样1.1.2多媒体的分类与特性多媒体的特性

多媒体的交互性

指人-机之间的信息交换关系交互功能的游戏1.1.2多媒体的分类与特性多媒体的特性

多媒体的集成性

信息媒体的集成媒体的设备和系统的集成左声道右声道右环绕中置低音炮左环绕低音炮系统和设备的集成声音、图像和文字的集成1.1.2多媒体的分类与特性多媒体的特性

多媒体的实时性

各种信息媒体在时间上必须是同步的《家有儿女》：图像、语音、文字、背景音乐必须同步1.1多媒体技术概述1.1.1媒体和多媒体1.1.2媒体的分类与特性1.1.3多媒体技术基本概念1.1多媒体技术概述1.1.1媒体和多媒体1.1.2媒体的分类与特性1.1.3多媒体技术基本概念1.1.3多媒体技术基本概念多媒体技术所谓多媒体技术就是计算机交互式综合处理多种媒体信息（如文本、图形、图像和声音），使多种信息建立逻辑连接，集成为一个具有交互性系统的技术。简言之，多媒体技术就是计算机综合处理图、文、声、像信息，并具有集成性、交互性和实时性的技术。1.1.3多媒体技术基本概念多媒体技术多媒体计算机技术是指以数字化为基础，能够对多种媒体信息进行采集、编码、存储、传输、处理和表现，综合处理多种媒体信息并使之建立起有机的逻辑联系，集成为一个系统并能具有良好交互性的技术。1.1.3多媒体技术基本概念多媒体技术多媒体技术涉及面相当广泛，主要包括:图像处理：如静态图像和电视图像的压缩/解压缩，动画、图形处理技术等。声音处理：如声音的压缩/解压缩、音乐合成、特定人与非特定人的语音识别、文字－语音转换等。存储技术：如光盘、磁光盘、磁带等。多媒体通信：如局域网、广域网、窄带与宽带综合业务数据网络等宽带宽频带通信。1.1.3多媒体技术基本概念媒体对象多媒体技术研究的媒体对象主要有：

文字图形图像声音动画视频文字符号图形图像动画音频视频文字符号---记录语言的书写形式

1.1.3多媒体技术基本概念媒体对象媒体对象

文字文字是人类用来交际的符号系统，是记录语言的书写形式。计算机中的文字指组成计算机文本(text)文件的基本元素。纯文字的文本文件常有.txt扩展名，而.doc则是Word所采用的加入了排版命令的特殊文本文件。文字用编码(ASCII码，GB—2312)的方式在计算机内存储和交换。如ASCII码：7位(扩展后8位)“Ａ”表示为01000001图形---通过计算而描述的图形文字符号图形图像动画音频视频1.1.3多媒体技术基本概念媒体对象媒体对象

图形图形用一组指令集合来描述图形的内容，如描述构成该图的各种图元位置维数、形状等。描述对象可任意缩放不会失真。在显示方面图形使用专门软件将描述图形的指令转换成屏幕上的形状和颜色。适用于描述轮廓不很复杂，色彩不是很丰富的对象，如：几何图形、工程图纸、CAD、3D造型软件等。图像---像素点描述的自然影像文字符号图形图像动画音频视频1.1.3多媒体技术基本概念媒体对象文字符号图形图像动画音频视频媒体对象媒体对象

图像凡是能为人类视觉系统所感知的信息形式或人们心目中的有形想象统称为图像。是指由输入设备捕捉的实际场景画面，以数字化形式存储的任意画面。点阵图像便是最基本的一种图像形式，这些点称之为像素点(pixel)，这种图像称为位图（bitmap）。图像除了可以表达真实的照片外，也可以表现复杂绘画的细节，并具有灵活和富有创造力等特点。事实上，文字、图形、视频等媒体最终都是以图像的形式出现。动画---