多媒体计算机的应用技术

第7章多媒体计算机的应用(yìngyòng)技术7.1多媒体电子出版物的创作(chuàngzuò)7.2多媒体会议系统7.3多媒体数据库及基于内容检索第一页，共四十一页。​本章(běnzhānɡ)重点介绍视频会议系统的结构(jiégòu)和标准第7章多媒体计算机的应用(yìngyòng)技术第二页，共四十一页。​7.2.1视频会议系统的结构(jiégòu)和标准三、视频会议系统(xìtǒng)的标准一、视频会议系统(xìtǒng)的分类二、视频会议系统的结构第三页，共四十一页。​一、视频会议系统(xìtǒng)的分类点对点视频会议系统(xìtǒng)多点视频会议系统根据通信(tōngxìn)节点的数量，视频会议系统可分为第四页，共四十一页。​点对点视频会议系统支持两个通信节点(jiédiǎn)间视频会议通讯功能，它的主要业务是：

可视电话桌面视频会议系统会议室型会议室视频会议1.点对点的视频会议系统(xìtǒng)第五页，共四十一页。​多点视频会议系统允许三个或三个以上不同地点的参加者同时参与会议。多点视频会议系统一个关键技术是多点控制(kòngzhì)问题，多点控制(kòngzhì)单元（MCU）在通讯网络上控制(kòngzhì)各个点的视频、音频、通用数据和控制(kòngzhì)信号的流向，使与会者可以接收到相应的视频、音频等信息，维持会议正常进行。2.多点视频会议系统(xìtǒng)第六页，共四十一页。​二、视频会议系统(xìtǒng)的结构

视频会议终端多点控制器信道（网络(wǎngluò)）控制管理软件第七页，共四十一页。​

视频会议系统结构框图(kuàngtú)

第八页，共四十一页。​完成视频音频信号的采集、编辑处理及输出、视频音频数字信号的压缩编码和解码，最后将符合国际标准的压缩码流经线路接口送到信道，或从信道上将(shàngjiàng)标准压缩码流经线路接口送到终端。1.视频会议终端的主要(zhǔyào)功能第九页，共四十一页。​它的主要功能是对视频、语音及数据信号进行切换，例如(lìrú)它会把传送到MCU某会场发言者的图象信号切换到所有会场。对于语音信号，若同时有几个发言，可以对它们进行混合处理，选出最高的音频信号，切换到其它会场。2.多点控制(kòngzhì)单元的功能（MCU-MultipointControlUnit）第十页，共四十一页。​信道(xìndào)（网络）的主要功能是：保证视频音频数据压缩码流安全在信道(xìndào)上传输到视频会议系统的终端。3.信道(xìndào)的功能第十一页，共四十一页。​9、人的价值(jiàzhí)，在招收诱惑的一瞬间被决定。2023/1/52023/1/5Thursday,January5,202310、低头要有勇气，抬头要有低气。2023/1/52023/1/52023/1/51/5/20236:58:00PM11、人总是珍惜为得到。2023/1/52023/1/52023/1/5Jan-2305-Jan-2312、人乱于心，不宽余请。2023/1/52023/1/52023/1/5Thursday,January5,202313、生气是拿别人做错的事来惩罚自己。2023/1/52023/1/52023/1/52023/1/51/5/202314、抱最大的希望，作最大的努力。05一月20232023/1/52023/1/52023/1/515、一个人炫耀什么，说明他内心缺少什么。。一月232023/1/52023/1/52023/1/51/5/202316、业余生活要有意义，不要越轨。2023/1/52023/1/505January202317、一个人即使已登上顶峰，也仍要自强不息。2023/1/52023/1/52023/1/52023/1/5第十二页，共四十一页。QOS（QualityofService）安全(ānquán)保密4.控制(kòngzhì)管理软件第十三页，共四十一页。​二、视频会议系统(xìtǒng)的结构终端(zhōnɡduān)多点控制器信道（网络）控制管理软件

QOS（QualityofService）

安全保密第十四页，共四十一页。​三、视频会议系统(xìtǒng)的标准在20世纪80年代,国际电信联盟(ITU)专门成立了一个小组研究(yánjiū)视频会议,建立了一系列的建议和标准.关于视频会议最著名的标准是H.320系列和T.120系列建议.1994年以Intel为首的90多家计算机和通信公司联合制定了一个个人会议标准PCS.第十五页，共四十一页。​第7章多媒体计算机的应用(yìngyòng)技术7.1多媒体电子出版物的创作7.2多媒体会议系统7.3多媒体数据库及基于内容(nèiróng)检索第十六页，共四十一页。​一、多媒体数据库的关键技术1.多媒体数据大容量的存储技术(1).光盘存储子系统和高速大容量磁盘、光盘库保存时间很长。(2).超媒体文档和超媒体数据库的随机存取、检索、存储盘标识和关系数据库。在设计上仅支持表结构的字母(zìmǔ)数字数据。

第十七页，共四十一页。​2.多媒体应用程序的数据库组织多媒体系统数据组织：(1).数据独立(2).通用分布式数据库结构(jiégòu)(3).多媒体对象管理(4).多重数据服务器第十八页，共四十一页。​二、多媒体数据库基于内容检索(jiǎnsuǒ)概述web上出现大量多媒体信息，例如:遥感、医疗、安全、商业(shāngyè)等部门，都会产生大量信息。第十九页，共四十一页。​1.IBM公司开发(kāifā)的QBIC是最具代表性的系统通过友好的界面为用户提供颜色、纹理(wénlǐ)、草图、形状等多种检索方法。系统以示例方式进行查询，查找物体的移动，摄影机的操作。第二十页，共四十一页。​2.美国加州大学伯克利分校与

加州水资源部合作(hézuò)Chabot计划，对水利资源部大量图像提供基于内容的有效(yǒuxiào)检索手段。第二十一页，共四十一页。​3.麻省理工学院Photobook可以利用人脸Face(脸)、shape(形状)、texture(纹理)进行基于内容的检索。Virage系统又进一步发展了将多种检索特征(tèzhēng)的融合。第二十二页，共四十一页。​4.澳大利亚(àodàlìyà)NewSouthWales

澳大利亚NewSouthWales(新南威尔士大学)已开发了NUTTAB系统。用于食品(shípǐn)成分数据库的检索。第二十三页，共四十一页。​5.清华大学(qīnɡhuádàxué)计算机系清华大学计算机系结合863高技术研究发展项目“Web上基于内容(nèiróng)图像检索”的研究。Internet/Intranet通过友好的人机界面可以对颜色、纹理或样本图像进行图像检索。

第二十四页，共四十一页。​目前该系统已可对12000张学物照片高维特征建立了Gss—索引。采用Java语言来实现人机交互模块。通过浏览器为用户提供界面。检索请求转换为cbExpr基于内容的检索表达式，通过检索引擎处理与网络延迟(yánchí)相比，检索时间基本上可以忽略，体现了较好的实时性。第二十五页，共四十一页。​基于内容(nèiróng)检索的系统结构现有(xiànyǒu)的许多多媒体数据库系统只提供基本媒体的描述、关键字一类的检索和查询，但很多的应用要求数据库系统能对图像或声音等媒体进行内容语义分析，已达到更深的检索层次。因而有必要讨论多媒体数据库基于内容的检索与查询方法。第二十六页，共四十一页。​基于内容检索的体系结构第二十七页，共四十一页。​

用户(yònghù)的查询说明示例一般性描述相似性匹配(pǐpèi)返回一组候选(hòuxuǎn)结果满意？结束修改查询说明从候选结果中选择一个示例YN特征调整,重新匹配的处理过程第二十八页，共四十一页。​(1)首先由用户提交查询要求，或启用上述的查询接口：

交互式输入方式模板选择输入方式特征(tèzhēng)样板输入方式第二十九页，共四十一页。​(2)相似性匹配(pǐpèi)

将查询的特征与数据库中的特征按照一定的匹配算法进行匹配。第三十页，共四十一页。​(3)返回候选结果满足(mǎnzú)一定相似性的一组候选结果，按照相似度大小排列返回给用户。第三十一页，共四十一页。​(4)特征调整a.用户浏览一组初始特征查询(cháxún)结果选择满意的结果。b.也可以从候选结果选择一个示例，进行特征调整。最后形成一个新的查询，如此逐步缩小查询范围，直到用户对查询结果满意为止。第三十二页，共四十一页。​基于(jīyú)内容检索的关键技术两个关键技术：

多媒体特征提取技术和匹配算法(suànfǎ)相似性检索技术。

第三十三页，共四十一页。​1.特征(tèzhēng)抽取

低层特征(原始特征)特征抽取

高层特征(逻辑特征)(1)语言信号的特征提取和匹配(pǐpèi)低层特征：基音、共振峰、线性预测、倒谱系数高层特征：声纹特征、关键词特征

第三十四页，共四十一页。​(2)静态图象的特征提取和匹配低层特征：纹理特征，颜色特征，几何形状特征，统计特征(立方图)等。高层特征：人的脸部特征、表情特征、某些(mǒuxiē)物体和景物特征。第三十五页，共四十一页。​低层特征可用图象处理方法自动获取；高层特征可以在某些约束条件下或知识(zhīshi)导引下，以低层特征为基础推导得到。第三十六页，共四十一页。​(3)动态视频特征提取低层特征：镜头切换类型、特技效果、摄象机运动(yùndòng)、物体运动(yùndòng)轨迹、代表帧、全景图。高层特征：描述镜头中的内容或事件。第三十七页，共四十一页。​2.相似(xiānɡsì)索引结构检索：在高维空间中寻找指定(zhǐdìng)点距离最近的一组点的问题。采用顺序比较法不能满足实时检索的要求，因此需建立一种有效索引结构和检索方法。第三十八页，共四十一页。​谢谢2023/1/52023/1/52023/1/52023/1/52023/1/52023/1/52023/1/52023/1/52023/1/52023/1/52023/1/52023/1/52023/1/5第三十九页，共四十一页。9、人的价值，在招收诱惑的一瞬间被决定。2023/1/52023/1/5Thursday,January5,202310、低头要有勇气，抬头要有低气。2023/1/52023/1/52023/1/51/5/20236:58:00PM11、人总是珍惜为得到。2023/1/52023/1/52023/1/5Jan-2305-Jan-2312、人乱于心，不宽余请。2023/1/52023/1/52023/1/5Thursday,January5,202313、生气(shēngqì)是拿别人做错的事来惩罚自己。2023/1/52023/1/52023/1/52023/1/51/5/202314、抱最大的希望，作最大的努力。05一月20232023/1/52023/1/52023/1/515、一个人炫耀什么，说明他内心缺少什么。。一月232023/1/52023/1/52023/1/51/5/202316、业余生活要有意义，不要越轨。2023/1/52023/1/505January202317、一个人即使已登上顶峰，也仍要自强不息。2023/1/52