大数据建设思路方案

1、Powered By DataEngine大数据建设思绪分享第1页01系统演示大数据建设思绪分享02第2页大数据4V特征决定了建设思绪Volume（体量）Variety（多样）Value（价值）Velocity（高速）传统数据处理量10倍到百倍；数据量级基本在TB到PB级以上；数据暴发式增加：每年30%；传统数据以数据库内操作交易数据；数据类型、起源各种多样：多维度交叉分析，是大数据技术关键；数据价值密度低；数据背后蕴藏规律和价值；秒级是临界点，不然返回结果可能过时；区分大数据和传统OLAP关键差异；沙里淘金为了一点金子需要保留全部沙子新型工具，才能够做到第3页数据价值挖掘数据资源整合处理技术

2、升级第一阶段第二阶段第三阶段大数据建设厂商客户ISV大数据研究咨询机构平台提供厂商客户ISV第4页大数据方案建设四个子项数据治理数据平台数据应用搭建大数据基础平台，处理数据不可连续发展问题？创新应用，处理数据价值问题？数据共享数据共享，处理不通问题？水利数据、人口数据、交通数据、GIS数据等统一标准、提升质量，处理不可用？第5页数据价值挖掘四个层次4321第一层次第二层次第三层次第四层次数据价值展现关联分析数据碰撞印证，发觉相关规律统计分析采取大数据平台工具快速替换传统统计分析伎俩，快速业务展现统计分析关联分析趋势预测决议支撑趋势预测在数据集中基础上对历史数据挖掘，做出趋势预测决议支撑在大数据

3、分析、学习、模型训练基础上提供决议支撑因为认识水平、人才缺乏等原因，大部分大数据应用都处于第一、二阶段，这正常过程，无需在大数据建设应用早期寄以过高希望。前景美好，道路波折第6页大数据建设怎么开展数据标准、数据清楚、数据质量、数据目录建设，为数据挖掘打好基础。, 数据治理筑巢引凤，招商引智ISV围绕大数据资源开发各种应用大数据创业、创新平台，用“数据”孵化高技术企业双创平台01020304构建城市数据引擎，做数据集中。与传统城市建设相比，我们“不拆，不过要迁”，要把符合共享开放要求委办局数据都集中（迁移）到城市数据引擎，聚集新经济关键资源。数据集中信用大数据建设大数据行政效能监督体系建设政府综

4、合治税大数据系统建设提供大数据开发工具集大数据营商环境建设为开发商、企业进驻提供条件四通一平招商引资开放商进入，住宅、综合体等等建设产业园区，孵化企业产业园区传统城市建设无疑不是从征地、拆迁开始拆 迁建设管委会建设政府办事大厅，工商、税务、审批一条龙服务学校、商场营商环境数据交易？等一等第7页大数据项目建设思绪数据治理数据平台数据应用和运行数据共享1思绪一：1、先数据资源整合（共享+治理+平台）“搭台子”2、大数据应用和创新思绪二：1、以业务逻辑清楚大数据应用作为“抓手”，做好数据资源整合（共享+治理+平台）2第8页“数据”资产是大数据创新和运行根本平台创新和运行孵化器数据创新和运行根本应用价

5、值展现徐宗本院士强调“大数据从数据分析，到预处理，到管理方式，到适当分析和挖掘，到结果解释，到修正过程数据是基础，平台是支撑，技术是关键，效益是根本”第9页数据获取处理数据采集共享数据存放加工数据湖泊数据展示工具数据源数据引擎环境质量、污染防治、生态保护实时数据非实时数据价值数据交易101010数据分析挖掘应用开发引擎数据框架数据管控、数据安全数据集中存放环境质量检测实时分析/预警传统产业赋能环境保护创新孵化污染防治综合分析/预测自然与环境保护应用监测点、政府、互联网新华三大数据企业ISV、大数据孵化产业数据应用系统三个步骤，缺一不可第10页大数据区分传统IT建设模式需求驱动数据驱动业务需求数

6、据模型架构设计开发集成测试运行维护探索结果预测检验学业自动预警选择数据源加入全部与学生相关数据源假设上课、图书馆、上网体育、消费?新方向沉迷网络辅导价值体系培养一个问题学生学业能不能早知道？优化模型早餐、图书馆、上网识别模式学业预警模型第11页数据引擎到底长什么样？税务数据集成引擎（数据共享交换和治理） 应用开发引擎数据服务数据共享交换数据质量监控数据标准管理元数据管理应用构建工厂数据科学工厂科研数据集开发知识库商务智能引擎安全和一体化运维视觉引擎人工智能引擎机器学习数据挖据数据运行引擎 数据计算引擎离/在线计算流计算分布式数据库数据资源运行业务应用开发平台资源运行大数据创新平台工商公安财政政

7、务社保国土药监内外部数据源（非结构化、半结构化、结构化数据）第12页数据集成引擎应用数据库消息文本文件XML影音图像CSV日志数据数据仓库文件系统资源目录应用分布式抽取分布式转换分布式加载数据质量管理数据生命周期管理 数据源数据集成引擎目标数据轻松整合海量异构数据、节约40%时间第13页数据集成引擎关键能力数据整合新旧系统业务更替，迁移跨组织数据移动数据分析建设大数据标准工具+大数据数据治理方法论和标准+“数农”第14页OLAP多维分析演示计算指标维度过滤数据联动复用钻取换维BI商务智能进行轻量级业统计分析展现多维度数据碰撞和轻量级创意第15页应用开发引擎用开发引擎企业工商公安财税政务H3CD

8、ata ADE应用开发引擎智能决议运行智能用户画像应用构建工厂应用布署管理业务数据交易数据互联网数据文本数据数据科学工厂产品License咨询、开发培训、建模服务+在线资源无偿同时销售方式一站式大数据应用开发平台“创新”应用开发效率提升30%以上降低大数据开发门槛快速实现基于大数据业务创新第16页 数据视觉引擎30余种数据源200类图表类型PB级数据秒级响应零编码可视化分析多屏完美共享第17页数据视觉引擎：价值展现视觉美观+快速实时或多维统计碰撞统计/关联分析+大数据处理+数据展现作为“抓手”推进大数据杠杆第18页值得信赖朋友DataEngine 应用开发引擎数据集成引擎数据视觉引擎“戏台子”

9、，“生态土壤” “百花齐放”第19页新华三厚积薄发-大数据 4年研发创新100+功效增强改进200+项大数据创造专利4大关键团体100+案例500+资深研发第20页DataEngine 产品资质计算机软件著作权证书工信部基础功效测试汇报工信部性能专题测试汇报数据中心联盟理事单位信标委大数据标准工作组组员客户使用汇报工信部信标委大数据系统测试汇报泰尔试验室检验汇报项目中标协议第21页200多篇相关专利近30篇关键专利工信部信息通信研究院测试：功效32项，100%经过，性能12项，6项第一，4项第二。荣获工信部中国电子信息产业发展研究院颁发大数据企业50强称号。江苏等省公安厅测试：28项，100%经过公安部视频监控试验室大数据标准制订公安部大数据安全标准制订DataEngine 成就卓著DataEngine 技术功