视频大数据技术趋势及实践

1、视频大数据技术趋势及实践目录现场疑问解答技术发展概述01020304常规处理框架具体实践说明三元空间视频资源分类现实世界物理空间网络世界信息空间人类认知社会空间网络层面社会层面政府、企事业、平面媒体物理层面传感器、条码、二维码三元数据富媒体 数据基础网络数据自媒体日志数据数据社交网络、搜索引擎、网博客、微博购、金融支付文本、音视频、 信令、定位、图片、照片计费网上视频数据，除了有节目内容外，还包括个人身份信息、位置信息、通信录、应用偏好信息，可能还有账号信息等。来源：邬贺铨，视频大数据的发展与应用，2016年03月视频数据的常规处理视频关联分析文件信息标题关键词用户名IP地址采集日期视频时长时

2、空信息运行时间监控编号视频内容挖掘参考帧图像识别图像描述图像定位图像生成特征转换语音转文本字幕分离OCR来源：Microsoft，HAL，NBA，Karens .etc深度学习用于图像描述来源：Google，2014；Microsoft，2015Google和Microsoft的工程师开发的机器学习算法，能自动生成图片题注说明，准确地描述图像的内容深度学习用于视频分析来源：Translating Videos to Natural Language Using Deep Recurrent Neural Networks, 2015.04深度学习用于视频分析来源：Bidirectional L

3、ong-Short Term Memory for Video Description, 2016.06深度学习技术趋势Architectures more complex and sophisticatedAll the cool kids are using LSTMsAttention models are showing upNeural Turing Machines remain interestingDeep learning for CV and NLP are cross-hybridizing each otherSymbolic differentiation is be

4、coming even more importantSurprising results are happeningThe intersection of deep and reinforcement learning continuesIf you arent using batch normalization you shouldNeural network research and productionisation go hand in hand来源：Brad Neuberg, 10 Deep Learning Trends at NIPS 2015, 2015.12目录现场疑问解答技

5、术发展概述01020304常规处理框架具体实践说明平台整体框架人脸建库人脸识别图像文件文本文件音频特征语音识别图像标注图像识别视频指纹视频识别全媒体内容管理语音全文检索图像浏览检索视频/片段浏览检索音频文件深度学习平台全媒体聚合云平台统一检索门户API/Web Service视频文件话题聚类字幕匹配物体追踪以图搜图以图搜视频局部图像搜索其他融合架构基础设施文本挖掘语音识别图像识别内容审核以图搜图以图搜视频目录现场疑问解答技术发展概述01020304常规处理框架具体实践说明案例：某市云计算中心公安云2012年8月开通，市电子政务外网整体迁移至云计算中心，并建设数据共享服务平台和地理信息服务平台，打造政务云依托政务云，在青山区试点社会管理和服务创新，得到各级领导广泛认可目前，部署各类服务器、存储及网络设备400余台，并达到三级等保要求市公安云依托云计算中心建设，是公安行业首个采用云计算方式构建信息系统的地区案例：某市云计算中心公安云视频结构化分析智能目标搜索视频图像大数据人脸识别搜索车型车牌识别车主、车辆信息身份证、实名信息飞机、高铁票信息交通卡口数据手机号、通话信息实名管理大数据社交账号、网络信息公共安全视频侦查应急指挥执法查验缉私情报信用管理国家反恐案例：某市云计算中心公安云视频结构化分析智能目标搜索案