大数据应用基础图像数据

图像数据大数据应用基础魏炜1第一页，共二十六页。计算机视觉的重要性图像是信息的重要载体。人类获取外界信息中，80%左右来自视觉。2第二页，共二十六页。计算机视觉的基本原理首先，从图片中提取出特征。这个特征不仅是每个像素的颜色，更重要的是更高级的特征，例如形状、甚至图片中物体的名称。进而，可以对大量图片进行聚类、分类、搜索。3第三页，共二十六页。计算机视觉的主要辅助技术图像压缩：可以减少描述图像所用的数据量。图像增强和复原：这是一种图像预处理。目的是提高图像质量，使图像更加清晰。图像分割：把图像中有意义的部分提取出来，例如边缘、区域等。图像融合：把几个关于某一场景的图像合并，最大限度地利用多个图像来源之间的互补信息，生成一个新图像。4第四页，共二十六页。如何对韩国美女进行人脸识别2013年韩国选美竞赛的20名参赛美女。对参赛选手进行人脸识别颇有难度。发型识别呢？5第五页，共二十六页。重点：人脸拍摄人脸，就能识别出这个人的表情：Emotient、Affectiva拍摄人脸，就能在人脸数据库找出与其相似的人脸：百度魔图、北京旷视科技的Face++。人脸数据库可以是明星脸数据库（百度）、也可以是社交媒体上的全部头像（Face++）、也可以是罪犯人脸数据库（MorphoTrust）从视频中识别出含有某明星的片段：Orbeus身份识别——例如，Face++的云脸应用锁、灏泷智能科技的FaceEID人脸身份实证、杭州热和科技检测驾驶员疲劳驾驶精神状态，并进行预警：灏泷智能科技6第六页，共二十六页。人脸：识别表情、性别、年龄、种族旷视科技：目前只能识别微笑程度不能识别其他情绪7第七页，共二十六页。人脸验证8第八页，共二十六页。重点：物品拍摄任意一个物品，就能给出物品的名称：Camfind、百度轻拍拍摄纸媒内容（例如广告、海报），就能链接到这个商品的零售网页，或者得到商家优惠券：Target公司的InaSnap手机应用、腾讯、基美文化传媒的基美耀拍APP（与亮风台合作开发）、亿拍天下拍摄一件衣服，就能在零售商数据库中找到这件衣服，或者相似的衣服：SnapFashion、Style-Eyes、Slyce、搜鞋客、图图搜衣、亮风台9第九页，共二十六页。重点：物品拍摄一个商品，就能在零售商数据库中找出这件商品及同款商品的介绍、评论，并进行比价，而且能进行购买：Viscovery、北京同创网讯、百度与唯品会的合作拍摄一个景点，就能给出这个景点的名称、介绍：亮风台拍摄一件展品，就能在数据库中找出这件展品的介绍：Guidico10第十页，共二十六页。11第十一页，共二十六页。物品拍摄葡萄酒酒标，就能给出商品信息、并进行比价、购买：佛山市咔嚓购的酒咔嚓APP。12第十二页，共二十六页。物品拍摄一组食物，就能给出这些食物的营养含量：芯草莓科技的微营养App。13第十三页，共二十六页。物品拍一个应用图标，能识别出这是什么APP：亮风台的应用拍拍APP14第十四页，共二十六页。文字拍摄外语文字，就能给出翻译：Viscovery、旷视科技拍摄一个数学题，就能给出答案和解析：学习宝15第十五页，共二十六页。有一些公司采用了深度学习百度Orbeus旷视科技DNNresearchIQEnginesLooknowClarifaiJetpac16第十六页，共二十六页。重点：基础服务：基于深度学习的图片搜索以图搜图：百度、谷歌百度能识别出图片中的元素，例如河流、倒影、建筑、树木、白云、蓝天等。拍摄图片，就能根据图中包含的元素生成一首诗：百度为你写诗识别出画作中的视觉概念，例如鸭子、走路、死尸，进而根据描述性词汇组成的向量，用自然语言处理比较不同画作之间的相似度：达特茅斯学院和微软剑桥研究院17第十七页，共二十六页。重点：基础服务：基于深度学习的图片自动分类给照片自动加标签、归类，进而可以用关键词搜索图片：Orbeus、Madbits、百度云18第十八页，共二十六页。和互联网广告结合根据网页上的图片，判断应该给这个网页的访问者展示什么广告：Cortica以往的互联网广告都是基于用户访问的网页中的文本内容了解用户的兴趣，而没有考虑到图片内容。19第十九页，共二十六页。重点：图像输入的来源手机摄像头谷歌眼镜、百度眼镜20第二十页，共二十六页。重点：物品识别准确率的挑战物品形变会影响某些物品的识别。例如：同一件服装随着人的姿势不同，会发生很多形状上的变化。相比之下，建筑物的识别要容易很多。拍摄角度也会影响人脸、服装等的识别灯光明暗、物体反光也会影响物体识别。拍摄焦距也会影响物体识别。化妆也会影响人脸识别干扰图像的遮挡会影响对商品图片的识别21第二十一页，共二十六页。一种加强人脸识别率的策略把所有人脸图形都调整到正面照角度，然后生成给每个人脸正面照生成一个3D模型。在这些3D模型之间进行比较，就更加准确。22第二十二页，共二十六页。如何降低对于隐私的担忧尽量少把图像存储在云端先不把技术用于涉及隐私的行业23第二十三页，共二十六页。重点：图像识别底层技术的开放一些公司通过以下方式，把底层的技术开放给广大的、成千上万的开发者，由他们来设计各种各样的应用。云端API离线SDK开发包例如：腾讯、Face++24第二十四页，共二十六页。语音识别技术也一样有些公司侧重于底层技术，把API和SDK开放给广大的应用开发者：例如，云知声另一些公司在别的公司提供的底层技术基础上，开发具体的应用app。还有些公司不仅做底层，也做应用：例如羽扇智公司。25第二十五页，共二十六页。内容总结图像数据。目的是提高图像质量，使图像更加清晰。图像分割：把图像中有意义的部分提取出来，例如边缘、区域等。拍摄任意一个物品，就能给出物品的名称：Camfind、百度轻拍。拍摄一组食物，就能给出这些食物的营养含量：芯草莓科技的微营养App。拍一个应用图标，能识别出这是什么APP：亮风台的应用拍拍APP。重点：基础服务：基于深度学习的图片