NNI大数据解决方案

NNIT大数据解决方案创造数据的价值

1.WhyBigData2.WhyNNIT3.解决方案详细内容4.案例21.WhyBigData

3数据爆发时代的到来通过媒体流通的信息量的变迁比特数（×1017）【出处】2010年度信息流通统计调查报告书未被利用的信息19982000200220042008200004000060000800000被利用的信息量流通的信息量2006■2025年,社会的信息量爆发为06年的200倍！

■今后如何利用大量未开发信息来创造新价值，是我们的课题多媒体信息网络电影/图像电视机・收音机社会媒体等

非结构化数据的增加企业内信息

交易信息日志信息

模拟数据数字化传感器・机器等生成的信息

图像/各种测量数据未被利用的信息比例99.4%4信息时代无所不在的数据来源

云计算中心商业旅游科研工业农林水产物流金融机构大厦公共设施住宅学校医院宾馆车站能源站商店回收设施工厂城市管理基础设施通信能源交通水学习生活工作移动互联网放送固定手机新能源煤气大规模集中电源蓄电池铁道航空海运道路上水处理下水处理产业排水处理5大数据的商业价值美国第二大百货商Target通过数据分析帮助销售额提升超过50%广告信原有的美国婴儿用品营销: 根据公开的出生记录在婴儿出生后，海量的广告促销Target的基于大数据分析的营销: 分析消费者的行为，对孕妇进行提前促销购买无香护手霜,善存钙片等分析数据广告信6大数据技术的应用行业7搜索社交游戏视频流通电信医疗交通公安制造航空电力金融民生核心～２０１２２０１２～

2.WhyNNIT8大数据平台整体及NNIT注重领域处理大量数据处理多媒体数据数据库分布式处理面部识别图像分析数据挖掘语音识别：：运营商收集处理数据保健金融能源交通・物流安全推动人・物・IT系统之间的互动互联网数据WebDBLog传感器数据统计分析数据挖掘②对应激增的数据③处理不同类型的数据①从传感器・机器收集信息←NNIT注重领域提供大数据处理平台设计/构筑服务(使用NEC及开源产品)定制开发大数据处理系统(可能需要与NEC其他部门或其他公司合作)9面向的客户NNIT大数据平台的潜在客户具有以下特点：

有大量的文件或者数据需要处理/存储/访问例：医疗影像、地图文件、GPS记录、电商网站的海量图片非ＯＬＴＰ(非面向实时交易的系统)例：银行BI、谷歌街景、FaceBook等不会频繁修改已有数据内容例：ERP系统不适合使用10NNIT大数据据解决决方案案特点点高性价价比・使用通通用硬硬件比比使用用存储储设备备节省省３００％以以上便捷・平台管管理通通过专专用图图形化化管理理系统统ＯＤＤＰＭＭ，操操作便便捷・通过挂挂载可可在１１分钟钟内开开始应应用系系统与与平台台间的的文件件交互互而无无需修修改应应用易扩展展・在管理理系统统上简简单操操作即即可通通过增增加节节点来来提升升系统统存储储容量量及性性能・平台存存储量量从１１０ＴＴＢ扩扩展到到１００ＰＢＢ也只只需简简单增增加节节点即即可完完成・平台性性能随随节点点增加加线形形增长长整体解解决方方案・我们提提供从从系统统整体体设计计优化化、定定制开开发到到数据据迁移移、系系统实实施等等相关关服务的的整体体解决决方案案11ＮＮＩＩＴ大大数据据平台台ODPF体系12MapReduce分布式式处理理组件件ＯＦＳ分布式式文件件存储储系统统ＯＤＢＢ*1KVS型分布布式DBＯＤＰＰＭ图形化化的平台管管理系系统*1：现版版本ODPF的分布布式数数据库库主要要功能能以Hbase为主上图为为平台台管理理系统统ODPMＯＤＰＰＦ其他Hadoop生态圈圈组件件SQL支持，，数据据迁移移，ETL等平台综综合管管理系系统ODPM・整体一一站式式管理理-管理作作为前前端主主机的的web/DB服务器器(可为虚虚拟机机)-管理NNIT大数据据平台台的整整体配配置/硬件/组件/运行状状态等等-管理平平台中中的文文件和和数据据・丰富的的管理理功能能使平平台运运用更更便捷捷-Wizard向导功功能：：初期期安装装，节节点追追加等等-配置管管理：：平台台的初初期设设定及及修改改等-运维管管理：：监控控、报报警等等-数据管管理：：文件件及数数据的的访问问控制制，副副本管管理，，内容容检索索等13前端主主机管管理界界面OFSVolume管理界界面文件系系统OFS14WebServer应用程程序直直接读读写存存放在在平台台上的的文件件和数数据JmeterJmeterJmeter数据节节点JmeterJmeterJmeter数据节节点DBServerWebServerDBServer分布式式文件件系统统(从KB大小的的数十十亿海海量地地图图图片到到GB级别的的数据据库文文件)ＯＦＳ・便捷：：无需需修改改前端端应用用程序序即可可连接接OFS进行读读写・高扩展展性：：通过过简单单追加加数据据节点点即可可线性性扩展展存储储容量量与性性能・高性价价比：：硬件件使用用通用用x86服务器器避免免昂贵贵小型型机和和存储储设备备・高可用用性：：自动动副本本管理理机制制对应应硬件件故障障3.解决方方案详详细内内容15服务内内容（（基于于数据据生命命周期期）数据生生成数据存存储数据处处理数据应应用分布式式数据据库，，分布布式文文件系系统采集、、监测测软件件智能搜搜索与与分析析软件件系统集集成、、IT基础设设施服服务咨询实实施服服务信息安安全平台设设备（（网络络设备备、服服务器器等））采集设设备信息服服务硬件基础软软件应用软软件NNIT提供部部分NNIT与母公公司或或合作作伙伴伴共同同提供供部分分16解决方方案内内容#项目内容1信息服务系统集成整体解决方案2咨询顾问数据应用咨询3平台开发咨询4IT基础设施面向私有云的IDC需求设计5IaaS/PaaS6程序开发数据层应用程序开发7性能测试AP/DB/Filesystem层面的性能测试8应用软件采集，检测软件9智能搜索与分析软件10基础软件数据库SQL+NoSQL11非关系型数据库NoSQL12分布式文件系统13数据处理中间件14系统管理15硬件数据采集设备各种传感器，摄像头等等16数据平台设备网络设备，服务器等NNIT注力领领域17解决方方案内内容（（信息息服务务）#项目内容备注1信息服务系统集成整体解决方案整合母公司及合作伙伴资源提供一站式服务2咨询顾问数据应用咨询帮助客户找出数据的附加价值3平台开发咨询根据客户需求提案大数据平台4IT基础设施面向私有云的IDC需求设计基于业务发展规划的IDC需求设计5IaaS/PaaS使用日电东软IaaS/PaaS作为基础平台6程序开发数据层应用程序开发对应用程序中需要与数据库及文件系统等平台层交互的数据层进行开发7性能测试AP/DB/FS层的性能测试性能测试及系统优化18服务内内容（（基础础软件件）#项目内容备注10基础软件数据库SQL+NoSQLMySQL+ＯＦＳ,IFS(InfoFrameRelationalStore,byNEC)等11ＯＤＢ，Ｈｂａｓｅ12分布式文件系统ＯＦＳ可通过ＮＦＳ直接操作文件或应用系统使用ＡＰＩ操作文件13数据处理中间件HIVE,Pig,Sqoop等14平台管理ＯＤＰＭ图形化的平台综合管理系统19目录4.案例20NNIT案例(1):移动位位置服服务21作为移移动位位置服服务的的后端端平台台提供供文件件及数数据的的存储储和访访问NNIT案例(1):移动位位置服服务22内测版版:初期系系统规规模:14台机架架式服服务器器（其其中8台用于于大数数据集集群））初期数数据规规模:100T・20亿个文文件(30KB/个的地地图图图片及及500KB/个的卫卫星实实景照照片)・数十万万台车车的GPS信息(2条/分)・用户上上传的的照片片等文文件系统性性能：：・地图访访问并并发：：受限限于互互联网网带宽宽(平台内内部支支持万万兆数数据交交换)・GPS数据上上传并并发：：每数数据库库节点点1400条/秒NNIT案例(2):油井管管理平平台云平台台用大数数据处处理平平台分分析处处理来来自物物联网网传感感器的的海量量数据据23NNIT案例(2):油井管管理平平台24初期系系统规规模:2千口新新式油油井(国内油油井数数7万口)初期数数据规规模:容量:2TB+,数据条条数:二十亿亿条以以上(每口井井每分分发送送2次1K数据包包，保保存1年以上上)系统效效果：：提高生生产效效率及及管理理水平平●中短期期故障障(结蜡，，卡泵泵，短短路，，漏液液等)自动分分析，，●中长期期生产产经营营信息息(产量，，电力力成本本控制制等)自动分分析NNIT案例(2):油井管管理平平台251亿条数数据:3台8Corex86服务器器10亿条数数据：：5台100亿条数数据：：10台对全数数据进进行带带有模模糊匹匹配查查询的的分析析扫描描任务务NNIT案例(3):食品溯溯源零售企企业流通企企业成品制制造企企业原料制制造企企业养殖厂厂消费者者农户加强监监管·杜绝假冒伪伪劣产产品提高安安全安安心的附加加价值值共享·掌握运输和和保管管状态态食品溯源平台通过整整合供供应链链上的的各个个环节节达成成对各各种食食品的的综合合管理理26NNIT案例(3):食品溯溯源作为山山东某某食品品集团团企业业内产产品溯溯源，，年产