交互式直播推流编码器的设计_第1页
交互式直播推流编码器的设计_第2页
交互式直播推流编码器的设计_第3页
交互式直播推流编码器的设计_第4页
交互式直播推流编码器的设计_第5页
已阅读5页,还剩8页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

1、交互式直播推流编码器的设计议程 直播编码器的使用场景 直播编码器在直播中的位置 直播编码器的典型架构 如何进行直播交互 交互式直播在教育上的独特应用 直播编码器在教育上的技术挑战直播编码器的使用场景娱乐 类秀 游 体 场 戏 育教育 类在线 教育电商类直播 营销直播编码器在直播中的位置直播编码器所处的位置直播编码器的典型架构技术点分析音频采集后处理 PCM(Pulse Code Modulation)数据的处理目的是除去声音中电流声、环境噪声等,为终端用户提供更好的视听体验。 开源经典处理库可以参考webrtc的ns音频处理模块。技术点分析视频采集后处理RGB/YUV 的美化处理给摄像头或者其

2、它直播画面增加一些特效处理,可以大大增强直播的趣味性。由于图像处理对CPU的消耗很大,所以这个过程建议放到GPU里去做(如GLSL去处理图 像),这个典型的一个开源库是GPU image。或者通过第三方的视频美化软件来做(一般是虚拟摄像头)。技术点分析音视频缓冲区的目的外部时钟x1摄像头/其它干扰无法和 外部时 钟同步? 根据上图,由于采集会收到来自系统、硬件等方面的限制, 可能会超出或者低于外部时钟指定的采样率。解决方法就是增加缓冲区,来减少这种干扰,如果采样率较低,可以使用最后 一帧来填充,如果采样率较高,可以丢弃一些旧帧。技术点分析音视频同步以RTMP/FLV直播流为分析媒体,假设:视频

3、帧率:25 fps音频采样率:44100,每帧音频包含1024个采样则video_duration=1000/25=40msaudio_duration=1024/44100*1000=23.219954ms开始04080120160200240280320时间轴视频音频1:交叉2:递增如何打时间戳?技术点分析音视频合成以RTMP/FLV直播流为分析媒体 DTSDecoding Time Stamp PTSPresent Time Stamp CTSComposition Time Stamp那么rtmp/flv里的时间戳是什么呢?DTS如果H264包含了B帧呢?CTS=PTS如何进行直播交互交互式直播在教育上的独特应用 教师所见,学生即所得 录屏? 各种数学作图图形,画笔工具 辅助教学内容的展示 码率大小?直播编码器在教

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论