版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
视频会议基础培训视频会议基础培训视频会议基础培训目录会议电视概念发展历史和趋势系统结构相关技术框架协议视频会议基础培训视频会议基础培训视频会议基础培训目录会议电视0目录会议电视概念发展历史和趋势系统结构相关技术框架协议目录会议电视概念会议电视—定义电话
只闻其声,不见其人,不能“面对面”交流会议电视不但能听见对方的声音,还能看见对方的图像会议电视是集语音、图像、数据于一体的一种交互式的多媒体信息业务,是基于通信网络上的一种增值业务。会议电视—定义电话会议电视-基本概念功能身处异地的人们,希望能象同在一间屋子一样,方便的召开会议理解了这个由来,就能理解会议电视的精髓,以及这个系统的各种功能概念会议电视系统,为参与会议的人提供了一个虚拟的会议室,满足象真实会议室一样所需要的控制、声音和图象北京上海深圳重庆虚拟会议室会议电视-基本概念功能北京上海深圳重庆虚拟会议室会议电视概念-功能从功能来看,会议电视有三大功能:1、音频通信;2、视频通信;3、数据通信;声音图像数据从应用来看,会议电视可以应用于下列场合:技术交流、教学培训、例行会议、汇报工作、传达精神、军事指挥、现场直播、采访新闻、远程医疗、实时股评;会议电视概念-功能从功能来看,会议电视有三大功能:声音图像数会议电视概念-场景会议电视概念-场景会议电视应用模式-点对点点对点应用模式2方与会不需要MCU主要用于参与交流人数较少的应用场景对交互性有较高的要求承载网本地会场远端会场会议电视应用模式-点对点点对点应用模式承载网本地会场远端会场会议电视概念-应用模式小容量多点会议模式3~10方与会需要MCU主要用于小范围的沟通对交互性有较高要求承载网会场1会场2会场3MCU会议电视概念-应用模式小容量多点会议模式承载网会场1会场2会会议电视概念-应用模式大容量多点会议模式数十方甚至数百方与会需多MCU级联主要用于大型的政策宣讲、报告等方式的会议一般要求会议管理人员对可靠性有较高要求对交互性要求不高上级MCU下级MCU1下级MCU2会议电视概念-应用模式大容量多点会议模式上级MCU下级MCU会议电视概念-常用名词解释会议电视=视频会议=视讯会场=点=方15个会场=15个点=15方导演=管理台导演控制=通过管理台进行控制主会场:最重要与会人物所在的会场管理员:会议召开时对会议进行控制的人员一级网、二级网、三级网会议电视概念-常用名词解释会议电视=视频会议=视讯目录会议电视概念发展历史和趋势系统结构相关技术框架协议目录会议电视概念发展历史和趋势-发展历史60年代初,模拟会议电视系统逐渐商用。60年代末期,在压缩编码技术推动下,由模拟系统转向数字系统。80年代初期,非标2Mbit/s彩色数字会议电视系统推出。80年代末,CCITT(ITU-T前身)形成了H.200系列建议,规定了统一的视频输入输出标准、算法标准、误码校验标准及一系列互通的模式转换标准,解决了不同厂商的设备互通问题,极大地推动了会议电视的发展。1990年CCITT发布了H.320标准,主要针对电路交换的窄带ISDN网。1996年,IP网络迅速发展成为一种主要的传输网络,为了实现在IP网络上开展视讯业务,ITU-T发布了H.323的视讯标准。发展历史和趋势-发展历史60年代初,模拟会议电视系统逐渐商用视频技术发展趋势CIF4CIF720p1080pCIF时代:图像达到VCD效果分辨率101,376像素(352×288)4CIF时代:图像达到DVD效果分辨率405,504像素(704×576)720p时代:图像达到9CIF效果分辨率921,600像素(1280×720)1080p时代:图像达到20CIF效果分辨率2,073,600像素(1920×1080)高清晰是视频技术发展的主线之一!视频技术发展趋势CIF4CIF720p1080pCIF时代:720p和4CIF图像比较采用相同视野范围(这里取的是相同高度)的话,则在图像的清晰度和细腻程度上有较大不同4CIF720p(9CIF)720p和4CIF图像比较采用相同视野范围(这里取的是相同高720p和4CIF图像比较图1.720p16:9的图象效果,视野范围更为宽广图2.4CIF在相同分辨率下为4:3图象效果,视野范围较720p有所缩小在垂直解像度(线数)相同的情况下
,720p的视野更宽16943720p和4CIF图像比较图1.720p16:9的图象效远程呈现-未来视频会议的发展方向网真会议室示意图远程呈现Telepresence真人大小、眼对眼、面对面圆桌会议体验!远程虚拟人物呈现,改变“视界观”远程呈现-未来视频会议的发展方向网真会议室示意图远程呈现真人音频技术发展视讯音频技术发展历程G.71164kbit/s下的3kHz音频编码G.72264kbit/s下的7kHz音频编码
G.728速率为16kbit/s使用低时延码激励线性预测编码
G.722.1C高保真低延时CD音质、14kHz音频编码支持多声道高保真、立体声、低延时音频技术发展视讯音频技术发展历程G.711G.722G.72视讯“数据”技术发展视讯数据技术发展历程T.120数据会议1990H.239双流统一的通讯标准2003标准化、易用、更高分辨率桌面传送双视P+CDUOVideo视讯“数据”技术发展视讯数据技术发展历程T.1201990H发展历史和趋势-发展趋势窄带(H.320)→宽带(H.323)
标准清晰度(CIF)→高清(720P/1080P)窄频语音(电话音质)→宽频语音(语音CD音质)非标协议→标准化;基本的视频通讯→身临其境的体验独立的视频通讯→与IT、3G等的融合发展历史和趋势-发展趋势窄带(H.320)→宽带(H.323目录会议电视概念发展历史和趋势系统结构相关技术框架协议目录会议电视概念基本的会议电视系统-组成基本的会议电视系统-组成基本的会议电视系统-MCU多点控制单元视频交换音频混合数据处理(包括会议控制、数据双流会议等)多点控制单元是会议电视的控制核心。当参加会议的终端数量多于2个时,必须通过MCU来进行控制,通过MCU完成终端之间图像交换、混音及控制。基本的会议电视系统-MCU多点控制单元多点控制单元是会议电视会议电视产品-MCUMC多点控制单元,完成与会议电视终端之间控制信息的交互;MP多点处理单元,完成会议电视体系中音、视频和数据的相关处理MCMPMPMP…会议电视产品-MCUMCMCMPMPMP…1、MCU在视频会议系统中处于媒体交换层,是整个体系的核心部件;2、主要功能包括:码流转发、混音、多画面、速率适配等;3、一般情况下,MCU只需将指定会场画面直接转发到需要观看的终端或者广播式转发给所有终端。MCU基本原理---构成
MCU
第三方通信
多画面
速率适配
呼叫信令
会议控制码流转发混音MCMP
监控1、MCU在视频会议系统中处于媒体交换层,是整个体系的核心会议电视产品-MCU音频混合在真实地会议室中,与会者总是能听到所有人的声音,同时在声音很多时,人耳也只是听到声音比较大的;会议电视系统中对声音的处理模仿真实的会议室,对所有的声音进行解码,混音合成,编码,发送给与会者,同时执行以下混音策略:1、通常只对声音很大的几路进行混音,以免声音嘈杂;2、可以控制声音不发送到某路终端;3、可以控制不处理从某路终端接收的声音;会议电视产品-MCU音频混合多画面:通过对多画面中的各个终端图像进行解码,再编码成一路组合画面,传送给所有观看多画面的终端。MCU基本原理---多画面
组合画面原始图像媒体流处理MCU终端2解码编码
子画面1
子画面
子画面
子画面2终端1组合图像
一个多画面会议需要一路编码资源,有几个子画面需要几路解码资源;多个会议有多画面则相应累加。多画面:通过对多画面中的各个终端图像进行解码,再编码成一路组会议电视产品-MCU-原理会议控制召开/结束会议延长会议添加/删除会场广播/观看单画面/多画面切换静音/闭音……会议电视产品-MCU-原理会议控制基本的会议电视系统-通信网络完成数据的双向透明传输要组成一个完整的会议电视系统必须经通信网络把终端设备与MCU连接起来,传输信道可以是光纤、电缆、微波或卫星等方式;通信网络可为E1、IP、ISDN;随着基于TCP/IP的因特网的发展,IP宽带网已经成为承载视讯业务的主要网络。基本的会议电视系统-通信网络完成数据的双向透明传输要组成一个图像、语音重现用户交互/控制网络连接基本的会议电视系统-终端图像、语音重现基本的会议电视系统-终端会议电视产品-终端-功能上行方向:1、采集终端语音、数据、视频信号;2、编码发送到传输网络;下行方向:1、接收从传输网络输入的语音、数据、视频信号;2、分发、解码、输出到相应终端,将声音、视频信号播放出来;会议控制1、申请发言,观看会场;2、申请主席,会议控制;3、召集会议;会议电视产品-终端-功能上行方向:会议电视产品-终端-原理A/D图像格式转换编码摄像机4:2:2YUVCCIR601CIF/QCIF字幕叠加A/D编码前端处理麦克风回声抵消音量控制时延调整唇音同步协议选择视频编码语音编码解码过程类似,稍有差异会议电视产品-终端-原理A/D图像格编码摄像机4:2:2Y问题:1、MCU的主要作用有哪些?2、终端的主要功能有?3、多画面和电视墙相比各有什么优缺点?问题:1、MCU的主要作用有哪些?2、终端的主要功能有?3、目录会议电视概念发展历史和趋势系统结构相关技术框架协议目录会议电视概念会议电视相关的技术一、信息压缩技术;二、会议控制技术;三、数据接口技术;四、国际标准化。会议电视相关的技术一、信息压缩技术;会议电视技术-信息压缩技术信息压缩技术
声音、图像在不失真编码后的码流速率很高,如一路模拟电视信号数字化后的码流速度是160Mbit/s,如果不采用数据压缩技术,一路数字图像将占用几千条电话信道。在有限的带宽内,为了得到逼真的声像效果,必须采用信息压缩。会议电视技术-信息压缩技术信息压缩技术音频编解码技术采样后语音信息比图像信息少得多,但数据量仍然比较庞大一个采样率为44.1KHz,采样大小为16bit,双声道的PCM编码的WAV文件,它的数据速率则为44.1K×16×2=1411.2Kb/s语音的编码方法分为三类:
基于语音波形进行编码的波形编码,如G.711;基于语音特性参数进行编码的参数编码;在低速语音编码应用最多的将前两种方法混合使用的混合编码,如G.728。主要的音频压缩方法有:G.711,G.722,G.728,G.723.1,G.729,G722.1,G.722.1C,AAC_LD,AAC_LC音频编解码技术采样后语音信息比图像信息少得多,但数据量仍然比常用音频编码方法对比表协议MOS频宽码率(kbps)延迟(ms)复杂度G711A、G711Mu4.43KHz640.125很低G7284.03KHz162.53G729A3.93KHz8152G7223.7/4.0/4.17kHz48/56/640.251G722.14.17kHz24/32401.5G722.1C4.314kHz24/32/48404G722.1E4.422kHz32~128405AAC_LD4.422kHz64/96205HWA_LD4.422kHz32/64/96326MOS(语音质量主观打分),频宽指可采样的最高频率常用音频编码方法对比表协议MOS频宽码率(kbps)延迟(m视频基本概念和知识-常用格式介绍格式图像大小格式图像大小QCIF176×144CIF(P制)352×288SIF(N制)352×240ICIF352×576隔行4CIF704×576480i/D1720×480隔行480P/D2720×4801080i/D31920×1080隔行720P/D41280×7201080P/D51920*1080监控系统中也把4CIF称为D1;DVD分辨率为720*480/576;ICIF是华为系统经常用到的50/60场,也称为2CIF视频基本概念和知识-常用格式介绍格式图像大小格式图像大小QC三大电视制式美、日标准720*480分辨率30fps欧、中标准720*576分辨率25fps法国标准720*576分辨率25fps电影的播放速度是24帧/秒、PAL制电视是25帧/秒,NTSC制电视是30帧/秒;普通电视多采用隔行扫描,每帧由偶数场和奇数场两场组成;电脑显示器采用逐行扫描,最新液晶显示器采用自身发光而不是以往的电子扫描模式,效果相当于逐行扫描,一般兼容隔行扫描。三大电视制式美、日标准欧、中标准法国标准电影的播放速度是24HDTV标准格式HDTV有三种显示格式,分别是:720P(1280×720,逐行,场频为25、30或60),1080i(1920×1080,隔行,场频50、60)1080P(1920×1080,逐行,场频为24、25或30)
常见的两种显示模式是720P和1080i:1080i是目前大多数国家普遍采用的一种模式(也包括我国),它的分辨率为1920×1080,拥有207.3万像素。在原本采用NTSC制式的国家如美日韩,他们规定的1080i仍然采用60Hz场频,这主要是为了与其以前的标准接轨;而我国规定1080i采用的是50Hz场频,也与以前PAL制式的场频相同1080P目前并不是民用领域使用的标准1080P对摄像机、带宽有更高的要求,主要在专业领域应用;如1080p/30Hz在拍摄完毕后可以方便地转换为1080i/60Hz的图像。HDTV标准格式HDTV有三种显示格式,分别是:常见的两种显视频编解码技术
图像压缩利用图像固有的统计特性(信源特性),以及视觉生理、心理学特性(信宿特性),或者记录设备和显示设备的特性(如电视监视器)等的特性,从原始图像中经过压缩编码提取有效的的信息,尽量去除无用或用处不大的冗余信息。按照压缩编码所采用的算法不同,图像压缩编码的方法有三类:消除图像时间冗余度的预测编码方法(从时间域);消除图像空间冗余度的交换编码方法(从空间域);将前面两者结合起来使用的混合编码。主要的视频压缩方法有:H.261,H.263,H.263+,H.264,MPEG-2,MPEG-4等:目前会议电视主流应用为H.264协议视频编解码技术图像压缩利用图像固有的统计特性(信源视频的核心技术-H.264高压缩比
2.5Mbits/s的MPEG-2质量,相当于2.0Mbits/s的H.263质量,相当于1.2Mbits/s的H.264质量。高清晰度的视频质量同等带宽下,H.264在运动图像、图像细节、图像边缘的视频质量大大提高。形象的比喻:MPEG-2象是用毛笔画画,H.263/MPEG-4象是用水彩笔画画,则H.264象是用细铅笔画画。容错能力强网络适应性强CODECMPEG-4H.263MPEG-2H.26439%49%64%MPEG-4-17%43%H.263--31%CIF30Hz25262728293031323334353637380500100015002000250030003500Bit-rate[kbit/s]QualityY-PSNR[dB]MPEG-2H.263MPEG-4H.264高效视频压缩标准引领了视讯的发展!视频的核心技术-H.264高压缩比高清晰度的视频质量容错能力会议电视技术-多点控制技术多点控制技术
会议电视业务是一种多点间双向通信业务,限于目前通信网的现状,多点间视讯会议信号的切换,必须由专门用于多点视讯会议切换设备——多点控制单元(MCU)来完成。会议电视技术-多点控制技术多点控制技术会议电视技术-传输接口技术传输接口技术视讯会议是基于通信网络的一种增值业务。视讯会议系统必须根据不同通信线路、不同的传输特性来进行多媒体数据的传输。视讯会议终端必须将本端的复合码流转换成传输网络所能接受的数据格式、信号格式和互控协议,然后经过网络接口送到传输网络。会议电视技术-传输接口技术传输接口技术各类常用视频接口标清高清YPbPr/YCbCrVGAAV/莲花头/CVBS/RCA各类常用视频接口标清高清YPbPr/YCbCrVGAAV/莲问题:1、协议H.264的主要作用是?2、G.722.1C与AAC_LD相比有哪些特点?3、哪些视频接口支持高清?各有什么特点?问题:1、协议H.264的主要作用是?2、G.722.1C与目录会议电视概念发展历史和趋势系统结构相关技术框架协议目录会议电视概念框架协议-总介线路类型:ISDN、E1、V35、DDN等电路线路。技术成熟,专网专用。是对于安全保障敏感的行业的首选。在图像质量、稳定性等方面都有所保证。但是难以充分利用当前网络资源,且建设和使用费用较为昂贵。
线路类型:LAN、ADSL等IP线路,目前视频会议应用的主流。
H.323协议比较复杂,但已非常完善。H323采用集中控制模式非常便于管理,其局限性是易造成瓶颈,不适合大规模应用。视讯系统H.323体系H.320体系SIP体系SIP协议基于文本,简单易用,可扩展性强。主要在VoIP领域应用,有向视频发展的趋势,随着IP多媒体子系统的发展,SIP的会议电视系统将会越来越广泛。框架协议-总介线路类型:ISDN、E1、V35、DDN等电路H.323协议体系媒体控制H.323信令控制H.239H.235H.245H.225T.120/T.XXXRTP/RTCPQ.931RASH.323协议体系媒体控制H.323信令控制H.239H.2框架协议-H.323协议体系-协议简介H.323:协议框架,描述以下协议如何协同工作H.225:定义呼叫信令(Q.931)以及节点和GK
(RAS)之间的通信H.245:会议控制协议,用于能力和媒体控制RTP/RTCP:
实时传输协议,用来传输视、音频流T.120系列:如何召开数据会议H.239:双流H.283:远程摄像机控制(FECC);H.235:有关安全方面的一种标准。框架协议-H.323协议体系-协议简介H.323:协框架协议-H.323协议体系-终端框架协议-H.323协议体系-终端框架协议-H.323协议体系-MCU终端终端终端传输网络H.225层语音编解码混音图象交换图象编解码多画面组合数据处理控制单元(H.225,H.245,RAS)MCU框架协议-H.323协议体系-MCU终端终端终端传输网络H.会议电视产品-GK-功能节点注册-在有GK时,终端和MCU需要都注册到GK来;-GK实现节点的注册和管理;号码或名称解析-用户呼叫对方的IP地址是很麻烦的,如果呼叫一个号码或者名称则简单-GK实现号码、名称等和IP地址之间的转换呼叫管理-GK处理对节点的呼叫接入请求进行管理,可根据节点的带宽、属性等条件,判断是否允许该节点进行呼叫或接收呼叫,GK可断开节点的呼叫带宽管理-GK可以限定指定节点或网段的呼叫带宽上限,避免呼叫带宽超出网络承受能力,保护正在使用业务的QoS区域管理-将部分用户作为一个区域来管理-提供类似黑名单、白名单的网段注册限制功能,运营商可以有选择的允许或禁止某些网段的用户使用视讯业务接入控制-提供类似黑名单、白名单的网段注册限制功能,运营商可以有选择的允许或禁止某些网段的用户使用视讯业务路由管理和区域间路由-提供邻居GK和顶级GK组网方式,支持路由配置,允许向邻居GK或GK申请地址解析。-对路由可以进行配置管理会议电视产品-GK-功能节点注册会议电视产品-GW-功能会议电视中网关有很多种,包括:1、H.320和H.323转换网关 实现H.320和H.323之间的转换;2、语音网关 将PSTN终端与H.323会议电视系统互通;3、3G网关 将会议电视系统与3G系统融合起来;4、SIP网关 将H323的会议电视系统与SIP系统融合起来;5、业务网关 实现NAT穿越、防火墙穿越等业务网关;在会议电视标准体系中,主要定义的是第一种,其他是各厂家根据业务应用和组网需要扩展的,因此本文下面简要介绍第一种,其它不在此处介绍;会议电视产品-GW-功能会议电视中网关有很多种,包括:问题:1、GK最主要功能有?2、使用语音网关可以把PSTN电话接入到会议电视系统中,语音网关起到H323中什么部件的作用?3、SIP视频终端与H323视频终端有什么相同和不同的地方?(从协议层分析)问题:1、GK最主要功能有?2、使用语音网关可以把PSTN电视频会议基础培训课件谢谢观赏谢谢观赏56视频会议基础培训视频会议基础培训视频会议基础培训目录会议电视概念发展历史和趋势系统结构相关技术框架协议视频会议基础培训视频会议基础培训视频会议基础培训目录会议电视57目录会议电视概念发展历史和趋势系统结构相关技术框架协议目录会议电视概念会议电视—定义电话
只闻其声,不见其人,不能“面对面”交流会议电视不但能听见对方的声音,还能看见对方的图像会议电视是集语音、图像、数据于一体的一种交互式的多媒体信息业务,是基于通信网络上的一种增值业务。会议电视—定义电话会议电视-基本概念功能身处异地的人们,希望能象同在一间屋子一样,方便的召开会议理解了这个由来,就能理解会议电视的精髓,以及这个系统的各种功能概念会议电视系统,为参与会议的人提供了一个虚拟的会议室,满足象真实会议室一样所需要的控制、声音和图象北京上海深圳重庆虚拟会议室会议电视-基本概念功能北京上海深圳重庆虚拟会议室会议电视概念-功能从功能来看,会议电视有三大功能:1、音频通信;2、视频通信;3、数据通信;声音图像数据从应用来看,会议电视可以应用于下列场合:技术交流、教学培训、例行会议、汇报工作、传达精神、军事指挥、现场直播、采访新闻、远程医疗、实时股评;会议电视概念-功能从功能来看,会议电视有三大功能:声音图像数会议电视概念-场景会议电视概念-场景会议电视应用模式-点对点点对点应用模式2方与会不需要MCU主要用于参与交流人数较少的应用场景对交互性有较高的要求承载网本地会场远端会场会议电视应用模式-点对点点对点应用模式承载网本地会场远端会场会议电视概念-应用模式小容量多点会议模式3~10方与会需要MCU主要用于小范围的沟通对交互性有较高要求承载网会场1会场2会场3MCU会议电视概念-应用模式小容量多点会议模式承载网会场1会场2会会议电视概念-应用模式大容量多点会议模式数十方甚至数百方与会需多MCU级联主要用于大型的政策宣讲、报告等方式的会议一般要求会议管理人员对可靠性有较高要求对交互性要求不高上级MCU下级MCU1下级MCU2会议电视概念-应用模式大容量多点会议模式上级MCU下级MCU会议电视概念-常用名词解释会议电视=视频会议=视讯会场=点=方15个会场=15个点=15方导演=管理台导演控制=通过管理台进行控制主会场:最重要与会人物所在的会场管理员:会议召开时对会议进行控制的人员一级网、二级网、三级网会议电视概念-常用名词解释会议电视=视频会议=视讯目录会议电视概念发展历史和趋势系统结构相关技术框架协议目录会议电视概念发展历史和趋势-发展历史60年代初,模拟会议电视系统逐渐商用。60年代末期,在压缩编码技术推动下,由模拟系统转向数字系统。80年代初期,非标2Mbit/s彩色数字会议电视系统推出。80年代末,CCITT(ITU-T前身)形成了H.200系列建议,规定了统一的视频输入输出标准、算法标准、误码校验标准及一系列互通的模式转换标准,解决了不同厂商的设备互通问题,极大地推动了会议电视的发展。1990年CCITT发布了H.320标准,主要针对电路交换的窄带ISDN网。1996年,IP网络迅速发展成为一种主要的传输网络,为了实现在IP网络上开展视讯业务,ITU-T发布了H.323的视讯标准。发展历史和趋势-发展历史60年代初,模拟会议电视系统逐渐商用视频技术发展趋势CIF4CIF720p1080pCIF时代:图像达到VCD效果分辨率101,376像素(352×288)4CIF时代:图像达到DVD效果分辨率405,504像素(704×576)720p时代:图像达到9CIF效果分辨率921,600像素(1280×720)1080p时代:图像达到20CIF效果分辨率2,073,600像素(1920×1080)高清晰是视频技术发展的主线之一!视频技术发展趋势CIF4CIF720p1080pCIF时代:720p和4CIF图像比较采用相同视野范围(这里取的是相同高度)的话,则在图像的清晰度和细腻程度上有较大不同4CIF720p(9CIF)720p和4CIF图像比较采用相同视野范围(这里取的是相同高720p和4CIF图像比较图1.720p16:9的图象效果,视野范围更为宽广图2.4CIF在相同分辨率下为4:3图象效果,视野范围较720p有所缩小在垂直解像度(线数)相同的情况下
,720p的视野更宽16943720p和4CIF图像比较图1.720p16:9的图象效远程呈现-未来视频会议的发展方向网真会议室示意图远程呈现Telepresence真人大小、眼对眼、面对面圆桌会议体验!远程虚拟人物呈现,改变“视界观”远程呈现-未来视频会议的发展方向网真会议室示意图远程呈现真人音频技术发展视讯音频技术发展历程G.71164kbit/s下的3kHz音频编码G.72264kbit/s下的7kHz音频编码
G.728速率为16kbit/s使用低时延码激励线性预测编码
G.722.1C高保真低延时CD音质、14kHz音频编码支持多声道高保真、立体声、低延时音频技术发展视讯音频技术发展历程G.711G.722G.72视讯“数据”技术发展视讯数据技术发展历程T.120数据会议1990H.239双流统一的通讯标准2003标准化、易用、更高分辨率桌面传送双视P+CDUOVideo视讯“数据”技术发展视讯数据技术发展历程T.1201990H发展历史和趋势-发展趋势窄带(H.320)→宽带(H.323)
标准清晰度(CIF)→高清(720P/1080P)窄频语音(电话音质)→宽频语音(语音CD音质)非标协议→标准化;基本的视频通讯→身临其境的体验独立的视频通讯→与IT、3G等的融合发展历史和趋势-发展趋势窄带(H.320)→宽带(H.323目录会议电视概念发展历史和趋势系统结构相关技术框架协议目录会议电视概念基本的会议电视系统-组成基本的会议电视系统-组成基本的会议电视系统-MCU多点控制单元视频交换音频混合数据处理(包括会议控制、数据双流会议等)多点控制单元是会议电视的控制核心。当参加会议的终端数量多于2个时,必须通过MCU来进行控制,通过MCU完成终端之间图像交换、混音及控制。基本的会议电视系统-MCU多点控制单元多点控制单元是会议电视会议电视产品-MCUMC多点控制单元,完成与会议电视终端之间控制信息的交互;MP多点处理单元,完成会议电视体系中音、视频和数据的相关处理MCMPMPMP…会议电视产品-MCUMCMCMPMPMP…1、MCU在视频会议系统中处于媒体交换层,是整个体系的核心部件;2、主要功能包括:码流转发、混音、多画面、速率适配等;3、一般情况下,MCU只需将指定会场画面直接转发到需要观看的终端或者广播式转发给所有终端。MCU基本原理---构成
MCU
第三方通信
多画面
速率适配
呼叫信令
会议控制码流转发混音MCMP
监控1、MCU在视频会议系统中处于媒体交换层,是整个体系的核心会议电视产品-MCU音频混合在真实地会议室中,与会者总是能听到所有人的声音,同时在声音很多时,人耳也只是听到声音比较大的;会议电视系统中对声音的处理模仿真实的会议室,对所有的声音进行解码,混音合成,编码,发送给与会者,同时执行以下混音策略:1、通常只对声音很大的几路进行混音,以免声音嘈杂;2、可以控制声音不发送到某路终端;3、可以控制不处理从某路终端接收的声音;会议电视产品-MCU音频混合多画面:通过对多画面中的各个终端图像进行解码,再编码成一路组合画面,传送给所有观看多画面的终端。MCU基本原理---多画面
组合画面原始图像媒体流处理MCU终端2解码编码
子画面1
子画面
子画面
子画面2终端1组合图像
一个多画面会议需要一路编码资源,有几个子画面需要几路解码资源;多个会议有多画面则相应累加。多画面:通过对多画面中的各个终端图像进行解码,再编码成一路组会议电视产品-MCU-原理会议控制召开/结束会议延长会议添加/删除会场广播/观看单画面/多画面切换静音/闭音……会议电视产品-MCU-原理会议控制基本的会议电视系统-通信网络完成数据的双向透明传输要组成一个完整的会议电视系统必须经通信网络把终端设备与MCU连接起来,传输信道可以是光纤、电缆、微波或卫星等方式;通信网络可为E1、IP、ISDN;随着基于TCP/IP的因特网的发展,IP宽带网已经成为承载视讯业务的主要网络。基本的会议电视系统-通信网络完成数据的双向透明传输要组成一个图像、语音重现用户交互/控制网络连接基本的会议电视系统-终端图像、语音重现基本的会议电视系统-终端会议电视产品-终端-功能上行方向:1、采集终端语音、数据、视频信号;2、编码发送到传输网络;下行方向:1、接收从传输网络输入的语音、数据、视频信号;2、分发、解码、输出到相应终端,将声音、视频信号播放出来;会议控制1、申请发言,观看会场;2、申请主席,会议控制;3、召集会议;会议电视产品-终端-功能上行方向:会议电视产品-终端-原理A/D图像格式转换编码摄像机4:2:2YUVCCIR601CIF/QCIF字幕叠加A/D编码前端处理麦克风回声抵消音量控制时延调整唇音同步协议选择视频编码语音编码解码过程类似,稍有差异会议电视产品-终端-原理A/D图像格编码摄像机4:2:2Y问题:1、MCU的主要作用有哪些?2、终端的主要功能有?3、多画面和电视墙相比各有什么优缺点?问题:1、MCU的主要作用有哪些?2、终端的主要功能有?3、目录会议电视概念发展历史和趋势系统结构相关技术框架协议目录会议电视概念会议电视相关的技术一、信息压缩技术;二、会议控制技术;三、数据接口技术;四、国际标准化。会议电视相关的技术一、信息压缩技术;会议电视技术-信息压缩技术信息压缩技术
声音、图像在不失真编码后的码流速率很高,如一路模拟电视信号数字化后的码流速度是160Mbit/s,如果不采用数据压缩技术,一路数字图像将占用几千条电话信道。在有限的带宽内,为了得到逼真的声像效果,必须采用信息压缩。会议电视技术-信息压缩技术信息压缩技术音频编解码技术采样后语音信息比图像信息少得多,但数据量仍然比较庞大一个采样率为44.1KHz,采样大小为16bit,双声道的PCM编码的WAV文件,它的数据速率则为44.1K×16×2=1411.2Kb/s语音的编码方法分为三类:
基于语音波形进行编码的波形编码,如G.711;基于语音特性参数进行编码的参数编码;在低速语音编码应用最多的将前两种方法混合使用的混合编码,如G.728。主要的音频压缩方法有:G.711,G.722,G.728,G.723.1,G.729,G722.1,G.722.1C,AAC_LD,AAC_LC音频编解码技术采样后语音信息比图像信息少得多,但数据量仍然比常用音频编码方法对比表协议MOS频宽码率(kbps)延迟(ms)复杂度G711A、G711Mu4.43KHz640.125很低G7284.03KHz162.53G729A3.93KHz8152G7223.7/4.0/4.17kHz48/56/640.251G722.14.17kHz24/32401.5G722.1C4.314kHz24/32/48404G722.1E4.422kHz32~128405AAC_LD4.422kHz64/96205HWA_LD4.422kHz32/64/96326MOS(语音质量主观打分),频宽指可采样的最高频率常用音频编码方法对比表协议MOS频宽码率(kbps)延迟(m视频基本概念和知识-常用格式介绍格式图像大小格式图像大小QCIF176×144CIF(P制)352×288SIF(N制)352×240ICIF352×576隔行4CIF704×576480i/D1720×480隔行480P/D2720×4801080i/D31920×1080隔行720P/D41280×7201080P/D51920*1080监控系统中也把4CIF称为D1;DVD分辨率为720*480/576;ICIF是华为系统经常用到的50/60场,也称为2CIF视频基本概念和知识-常用格式介绍格式图像大小格式图像大小QC三大电视制式美、日标准720*480分辨率30fps欧、中标准720*576分辨率25fps法国标准720*576分辨率25fps电影的播放速度是24帧/秒、PAL制电视是25帧/秒,NTSC制电视是30帧/秒;普通电视多采用隔行扫描,每帧由偶数场和奇数场两场组成;电脑显示器采用逐行扫描,最新液晶显示器采用自身发光而不是以往的电子扫描模式,效果相当于逐行扫描,一般兼容隔行扫描。三大电视制式美、日标准欧、中标准法国标准电影的播放速度是24HDTV标准格式HDTV有三种显示格式,分别是:720P(1280×720,逐行,场频为25、30或60),1080i(1920×1080,隔行,场频50、60)1080P(1920×1080,逐行,场频为24、25或30)
常见的两种显示模式是720P和1080i:1080i是目前大多数国家普遍采用的一种模式(也包括我国),它的分辨率为1920×1080,拥有207.3万像素。在原本采用NTSC制式的国家如美日韩,他们规定的1080i仍然采用60Hz场频,这主要是为了与其以前的标准接轨;而我国规定1080i采用的是50Hz场频,也与以前PAL制式的场频相同1080P目前并不是民用领域使用的标准1080P对摄像机、带宽有更高的要求,主要在专业领域应用;如1080p/30Hz在拍摄完毕后可以方便地转换为1080i/60Hz的图像。HDTV标准格式HDTV有三种显示格式,分别是:常见的两种显视频编解码技术
图像压缩利用图像固有的统计特性(信源特性),以及视觉生理、心理学特性(信宿特性),或者记录设备和显示设备的特性(如电视监视器)等的特性,从原始图像中经过压缩编码提取有效的的信息,尽量去除无用或用处不大的冗余信息。按照压缩编码所采用的算法不同,图像压缩编码的方法有三类:消除图像时间冗余度的预测编码方法(从时间域);消除图像空间冗余度的交换编码方法(从空间域);将前面两者结合起来使用的混合编码。主要的视频压缩方法有:H.261,H.263,H.263+,H.264,MPEG-2,MPEG-4等:目前会议电视主流应用为H.264协议视频编解码技术图像压缩利用图像固有的统计特性(信源视频的核心技术-H.264高压缩比
2.5Mbits/s的MPEG-2质量,相当于2.0Mbits/s的H.263质量,相当于1.2Mbits/s的H.264质量。高清晰度的视频质量同等带宽下,H.264在运动图像、图像细节、图像边缘的视频质量大大提高。形象的比喻:MPEG-2象是用毛笔画画,H.263/MPEG-4象是用水彩笔画画,则H.264象是用细铅笔画画。容错能力强网络适应性强CODECMPEG-4H.263MPEG-2H.26439%49%64%MPEG-4-17%43%H.263--31%CIF30Hz25262728293031323334353637380500100015002000250030003500Bit-rate[kbit/s]QualityY-PSNR[dB]MPEG-2H.263MPEG-4H.264高效视频压缩标准引领了视讯的发展!视频的核心技术-H.264高压缩比高清晰度的视频质量容错能力会议电视技术-多点控制技术多点控制技术
会议电视业务是一种多点间双向通信业务,限于目前通信网的现状,多点间视讯会议信号的切换,必须由专门用于多点视讯会议切换设备——多点控制单元(MCU)来完成。会议电视技术-多点控制技术多点控制技术会议电视技术-传输接口技术传输接口技术视讯会议是基于通信网络的一种增值业务。视讯会议系统必须根据不同通信线路、不同的传输特性来进行多媒体数据的传输。视讯会议终端必须将本端的复合码流转换成传输网络所能接受的数据格式、信号格式和互控协议,然后经过网络接口送到传输网络。会议电视技术-传输接口技术传输接口技术各类常用视频接口标清高清YPbPr/YCbCrVGAAV/莲花头/CVBS/RCA各类常用视频接口标清高清YPbPr/YCbCrVGAAV/莲问题:1、协议H.264的主要作用是?2、G.722.1C与AAC_LD相比有哪些特点?3、哪些视频接口支持高清?各有什么特点?问题:1、协议H.
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 培训股合同范例
- 商洛职业技术学院《人体生物力学》2023-2024学年第一学期期末试卷
- 合同范例保证书
- 混凝土大体积施工方案
- 陕西中医药大学《水库调度》2023-2024学年第一学期期末试卷
- 2024至2030年脱水洋葱丝项目投资价值分析报告
- 土石方施工方案范本
- 路面浇灌协议合同范例
- 2024至2030年放疗剂量仪项目投资价值分析报告
- 2024至2030年印花低腰迷你裤项目投资价值分析报告
- 低压不停电换表接插件技术规范
- DLT 5210.5-2018 电力建设施工质量验收规程 第5部分:焊接
- 劳动教育概论智慧树知到期末考试答案章节答案2024年哈尔滨工业大学
- 计算机使用管理制度
- 医疗美容操作技术规范
- 人教版五年级上册《道德与法治》期末试卷(加答案)
- HJT 166-2004 土壤环境监测技术规范(正式版)
- 中国文学经典导读智慧树知到期末考试答案章节答案2024年华东政法大学
- 乡村振兴产业基金规划方案
- 2024年浙江杭州西湖云创集团有限公司招聘笔试参考题库附带答案详解
- (2024年)农作物病虫害绿色防控技术课件
评论
0/150
提交评论