《视频传输中图像处理》141017

1、图像处理的介绍图像处理的介绍图像的基本处理图像的基本处理视频图像的处理视频图像的处理 视频传输中的图像处理 万德 刘珂铭图像处理的介绍 数字图像处理，用计算机对图像进行分析，以达到所需结果。 图像处理可以增强图像的质量，或者改变图像的大小以适应传输环境。 常用软件PS 常用工具FFMPEG（工业级图像格式库）过程 视频传输中，视频采集设备（如摄像头）将采集的图像数字化后，进过压缩后传输给远程接收端，接收端收到解压，这时就需要进一步地进行处理。图像的基本处理 图像处理时，常用16位和32位表示一个像素 16位：R（5）G（6）B（5） 32位： A（8） R（8）G（8）B（8），A（透明度在视

2、频处理中一般不用）16位到32位转换方法 运用SHL,SHR指令对RGB进行偏移，实现RGB的扩展或压缩 所以32位到16位时会丢失颜色值，造成图像质量下降 但是16位的像素单元处理速度非常快图像的基本处理旋转 首先旋转要确定一个中心点。 旋转的实现并不是根据源点计算目标点的位置，因为那样的话，你会在屏幕上看到有很多小洞的千仓百孔的旋转图像。 正确的方式是先计算旋转以后的图像的长和宽，然后依次计算其在源图中的位置。 旋转效果图片向左旋转45度图像的基本处理缩放 缩放和旋转一样，也是“反过来”取得像素的。 图像缩放的实现方法主要有以下3种，质量越高，消耗时间越长临近插值法双线性插值法立方卷积插值

3、法 tips：现代浏览器由于都支持GPU加速，所以不管采用什么算法，他们的渲染效率都不会相差太远图像的基本处理双线性插值法 插值公式: f(i+u,j+v) = (1-u)*(1-v)*f(i,j) + (1-u)*v*f(i,j+1) + u*(1-v)*f(i+1,j) + u*v*f(i+1,j+1)详细说明: 比如一个点缩放后是x,y，那么要去寻找的坐标一共有4个，叫做采样点，分别是(i,j),(i,j+1),(i+1,j),(i+1,j+1) 。i,j是被缩放图片中的坐标点。先计算缩放比例scale_x,scale_yx*scale_x = i+uy*scale_y = j+vu,v

4、是坐标的小数部分，也就是说：假如缩放比例为1.25 , x = 10,那么 i = 12 , u = (12.5-12) = 0.5图像的基本处理 原图 双线性插值法 临近插值法视频图像的处理FFMPEGffmpeg是一个开源免费跨平台的视频和音频流方案，属于自由软件，采用LGPL或GPL许可证（依据你选择的组件）。它提供了录制、转换以及流化音视频的完整解决方案。 ffmpeg支持asf，avi，bfi，iff，flv，mp4，h264等格式 h264格式是目前视频传输应用中图像压缩率最高，对应图像效果最好的一种编码方式视频图像的处理去噪 采用均值滤波器，自适应维纳滤波器 ，中值滤波器 ， 形

5、态学噪声滤除器 ，小波去噪等算法进行图像的去噪操作，可以去除图像中的噪声奇点 均值滤波 中值滤波 视频图像的处理锐化 锐化是对图像边缘模糊区域进行聚焦，可以加强图像中的边缘，轮廓等。 在视频采集时，由于摄像头的不同可能图像的清晰度也有好坏，有时需要更好地识别图像中的信息，比如二维码扫描，就可以对图像进行锐化后保存。4个方向的梯度算子（Sobel算子）视频图像的处理压缩 使用FFMPEG，可以以H264的格式对图像进行以帧位单元的压缩。 H264有 I , B , P 三种帧（一帧代表一张画面）。 I帧：关键帧，一帧原图像的直接压缩，可以单独解压成图像，体积最大 P，B帧 ：都是根据前后关系来得到图像的，保存的是差异值和运动矢量，体积非常小。 一般I帧的数量是P,B帧的1/20到1/5，所以H264总体积还是很小的。MP4和H264压缩后大小比较对320*240的视频编码后，随机取20帧的大小做对比，单位为字节。MP4和和H264对监控视频的压缩效果比较技术支持提供C+（