活动方案之大数据建设方案

大数据建设方案【篇一：物联网大数据平台建设方案】物联网大数据平台建设方案一、项目背景“十三五”期间，随着我国现代信息技术的蓬勃发展，信息化建设模式发生根本性转变,一场以云计算、大数据、物联网、移动应用等技术为核心的“新it”浪潮风起云涌，信息化应用进入一个“新常态”。章鱼大数据为积极应对“互联网+”和大数据时代的机遇和挑战，适应经济社会发展与改革要求，开发建设物联网大数据平台。物联网大数据平台打造集数据采集、数据处理、监测管理、预测预警、应急指挥、可视化平台于一体的大数据平台，以信息化提升数据化管理与服务能力，及时准确掌握社会经济发展情况，做到“用数据说话、用数据管理、用数据决策、用数据创新”，牢牢把握社会经济发展主动权和话语权。二、物联网行业现状数字传感器的大量应用及移动设备的大面积普及，才会导致全球数字信息总量的极速增长。根据工信部的统计结果，中国物联网产业规模在2011年已经超过2300亿元，虽然和期望的“万亿规模产业”还有一定距离，但已经不可小视。其中传感器设备市场规模超过900亿元，rfid产业规模190亿元，m2m终端数量也已超过2100万个。另一个方面，我国的物联网企业也呈现出聚集效应，例如北京中关村已有物联网相关企业600余家，无锡国家示范区有608家，重庆、西安等城市也有近300家。从区域发展来看，形成了环渤海、长三角、珠三角等核心区以及中西部地区的特色产业集群。在2009年以前，可能没有哪家企业说自己是物联网企业。一夜之间产生的上千家物联网企业，他们的核心能力、产品或服务价值定位、目标客户和盈利模式都是如何呢？首先来看这些物联网企业从哪里来。现在的物联网企业主要分为三类，第一类是以前的公用企业转型，最典型的是电信运营商，他们有自己的基础设施，有客户资源，因此自然转型到物联网行业。除了电信运营商，一些交通基础设施运营商、甚至是气象设施运营商，也都转型为物联网企业。第二类是传统it企业，例如华为、神州数码，以及众多上市公司等。这一类公司也是在传统的优势积累基础上开拓物联网新业务。第三类是一些制造企业，包括传感设备制造企业，网络核心设备制造企业，还包括如家电等一批传统制造企业。这一类企业不能说没有大企业，但是绝大多数都是中小型企业。这些企业的核心能力主要体现在三个方面，第一是传感器和智能仪表，第二是嵌入式系统和智能装备，第三是软件与集成服务。再来看我国物联网应用的领域。通过对多个部委和地区的物联网专项进行汇总，下图列出了目前提到最多，也是应用最成熟的八个领域。但是换个角度再看，不管是工业控制、供应链管理、精准农业，还是建筑自动化、远程抄表、etc，其实都并不是新的技术领域，而是在物联网这个大概念下重新包装后再次引起了人们的兴趣。总的来说，物联网应用传感器改善了信息获取的实时性和准确性，同时智能终端改变了人们利用和使用信息的习惯。目前存在的主要问题包括应用过于碎片化，缺少满足用户需求的创新型产品/服务，行业间缺乏信息共享和应用协同渠道，以及安全和隐私保护重视不够。三、建设目标章鱼大数据物联网大数据平台是顺应目前信息化技术水平发展、服务政府职能改革的架构平台。它的主要目标是强化经济运行监测分析，实现企业信用社会化监督，建立规范化共建共享投资项目管理体系，推进政务数据共享和业务协同，为决策提供及时、准确、可靠的信息依据，提高政务工作的前瞻性和针对性，加大宏观调控力度，促进经济持续健康发展。1、制定统一信息资源管理规范，拓宽数据获取渠道，整合业务信息系统数据、企业单位数据和互联网抓取数据，构建汇聚式一体化数据库，为平台打下坚实稳固的数据基础。2、梳理各相关系统数据资源的关联性，编制数据资源目录，建立信息资源交换管理标准体系，在业务可行性的基础上，实现数据信息共享，推进信息公开，建立跨部门跨领域经济形势分析制度。3、在大数据分析监测基础上，为政府把握经济发展趋势、预见经济发展潜在问题、辅助经济决策提供基础支撑。四、建设原则物联网大数据平台以物联网数据资源为重点，以大数据应用为核心，坚持“统筹规划、分步实施，整合资源、协同共享，突出重点、注重3.2.7xx市公共客运交通管理处业务及信息化建设现状_____593.2.7.1主要业务及业务量统计_______________________593.2.7.2信息化建设现状_____________________________603.2.8xx市交通建设质量监督站业务及信息化建设现状_____623.2.8.1主要业务及业务量统计_______________________623.2.8.2信息化建设现状_____________________________623.2.9xx市机动车驾驶员培训管理处业务及信息化建设现状_633.2.9.1主要业务及业务量统计_______________________633.2.9.2信息化建设现状_____________________________633.3信息化现状存在的不足______________________________633.3.1信息利用及共享存在的问题_______________________633.3.1.1信息获取问题_______________________________643.3.1.2信息采集标准格式不统一_____________________653.3.1.3信息存储问题_______________________________663.3.1.4信息处理问题_______________________________663.3.1.5信息维护工作难度较大_______________________673.3.1.6信息质量问题_______________________________673.3.1.7信息共享问题_______________________________683.3.1.8信息服务问题_______________________________693.3.2交通电子政务亟待发展___________________________713.3.3交通运输信息化发展存在的问题___________________723.3.4公交信息化发展存在的问题_______________________743.3.5出租车行业信息化发展存在的问题_________________773.3.6海事、新港信息化发展存在的问题_________________783.3.7现代物流信息化发展中存在的问题_________________803.3.8电子收费发展中的问题___________________________803.3.9信息化基础设施方面存在的问题___________________813.3.10软硬件设施方面存在的问题______________________823.3.11通信网络基础设施方面存在的问题________________833.3.12数据采集发布设备方面存在的问题________________833.3.13信息化发展模式存在的问题______________________843.3.14信息化保障措施存在的问题______________________85第四章需求分析_________________________________________884.1总体需求___________________________________________884.1.1信息分级汇集管理总体需求_______________________884.1.2信息共享及交换总体需求_________________________914.1.3信息应用总体需求_______________________________924.2二级平台整合需求__________________________________954.2.1形成统一完善的信息化基础设施___________________954.2.2形成统一完善的交通电子政务系统_________________964.2.3形成统一完善的视频会议系统_____________________974.2.4形成统一完善的视频监控系统_____________________984.2.5形成统一完善的办公自动化系统___________________984.2.6形成统一完善的gis系统________________________1024.2.7形成统一完善的gps智能调度系统________________1034.2.7形成统一完善的内务管理系统____________________1044.2.7.1资产管理___________________________________1044.2.7.2办公用品管理______________________________1044.2.7.3固定资产管理______________________________1044.2.7.4公务车辆管理______________________________1054.2.7.5党团管理___________________________________1054.2.7.6工会管理___________________________________1054.2.7.7老干管理___________________________________1054.2.7.8纪检监察___________________________________1054.2.7.9机构人员管理______________________________1064.2.8形成统一完善的档案管理系统____________________1064.2.8.1人事档案管理______________________________1064.2.8.2案件档案管理______________________________1064.2.9形成统一完善的法规管理系统____________________1074.2.10形成统一完善的稽查管理系统___________________1074.2.11形成统一完善的移动办公系统___________________1084.2.12形成统一完善的规费征收系统___________________1084.2.12.1公路管理平台规费征收系统_________________109【篇三：大数据应用解决方案】大数据应用解决方案目录..........61.1.1.2.1.3.2.2.1.2.2.2.3.概述...........................................................................................................................6大数据定义...............................................................................................................6大数据技术发展.......................................................................................................8大数据应用阐述.....................................................................................................11大数据应用架构.....................................................................................................13大数据行业应用.....................................................................................................13大数据应用.....................................................................................................................112.3.1.医疗行业.........................................................................................................132.3.2.能源行业.........................................................................................................142.3.3.通信行业.........................................................................................................142.3.4.零售业.............................................................................................................153.大数据解决方案.............................................................................................................163.1.大数据技术组成.....................................................................................................163.1.1.分析技术.........................................................................................................163.1.1.1.3.1.1.2.3.1.1.3.3.1.1.4.3.1.1.5.可视化分析.........................................................................16数据挖掘算法.....................................................................16预测分析能力.....................................................................16语义引擎.............................................................................16数据质量和数据管理.........................................................173.1.2.存储数据库.....................................................................................................173.1.3.分布式计算技术.............................................................................................183.2.大数据处理过程.....................................................................................................203.2.1.采集.................................................................................................................203.2.2.导入/预处理...................................................................................................213.2.3.统计/分析.......................................................................................................213.2.4.挖掘.................................................................................................................213.3.大数据处理的核心技术-hadoop...........................................................................213.3.1.hadoop的组成................................................................................................223.3.2.hadoop的优点：............................................................................................253.3.2.1.3.3.2.2.3.3.2.3.3.3.2.4.高可靠性。.........................................................................25高扩展性。.........................................................................25高效性。.............................................................................25高容错性。.........................................................................253.3.3.hadoop的不足................................................................................................253.3.4.主要商业性“大数据”处理方案.................................................................263.3.2.5.3.3.2.6.3.3.2.7.3.3.2.8.ibminfosphere大数据分析平台....................................26oraclebigdataapplianc.................................27microsoftsqlserver.......................................27sybaseiq...........................................................................283.3.5.其他“大数据”解决方案.............................................................................283.3.2.9.emc.......................................................................................283.3.2.10.bigquery...........................................................................293.3.6.大数据”与科技文献信息处理.....................................................................293.4.大数据处理技术发展前景.....................................................................................293.4.1.大数据复杂度降低.........................................................................................293.4.2.大数据细分市场.............................................................................................303.4.3.大数据开源.....................................................................................................303.4.4.hadoop将加速发展........................................................................................303.4.5.打包的大数据行业分析应用.........................................................................303.4.6.大数据分析的革命性方法出现.....................................................................313.4.7.大数据与云计算:深度融合...........................................................................313.4.8.大数据一体机陆续发布.................................................................................314.基于基站大数据应用及案例.........................................................................................324.1.气象灾害应急短信发布平台.................................................................................324.1.1.概述.................................................................................................................324.1.1.1.项目背景.............................................................................324.1.1.2.平台概述.............................................................................324.1.2.平台建设特点与原则.....................................................................................324.1.2.1.建设特点.............................................................................324.1.2.2.建设原则.............................................................................324.1.2.3.大数据管理平台特点.........................................................334.1.3.平台整体架构.................................................................................................334.1.3.1.建设原理.............................................................................334.1.3.2.平台总体设计.........................................................................351.平台总体结构..........................................................................................352.平台技术架构..........................................................错误！未定义书签。4.1.3.3.平台技术思路.....................................................................364.1.3.4.平台技术路线.........................................错误！未定义书签。1.内存数据库..............................................................错误！未定义书签。2.短信发送多链路配置..............................................错误！未定义书签。3.队列缓存..................................................................错误！未定义书签。4.参数可配置..............................................................错误！未定义书签。4.1.3.5.平台性能要求.....................................错误！未定义书签。4.1.4.平台网络拓扑.................................................................错误！未定义书签。4.1.5.平台关键流程.................................................................错误！未定义书签。4.1.5.1.4.1.5.2.4.1.5.3.4.1.5.4.4.1.5.5.平台数据流程.....................................错误！未定义书签。平台业务主流程.................................错误！未定义书签。短信下发审批流程.............................错误！未定义书签。信令分析处理流程.............................错误！未定义书签。短信发送流程.....................................错误！未定义书签。4.1.6.平台功能模块.................................................................错误！未定义书签。4.1.6.1.信令分析子系统.................................错误！未定义书签。4.1.6.2.短信发送子系统.................................错误！未定义书签。1.短信发送功能..........................................................错误！未定义书签。2.短信回执接收功能..................................................错误！未定义书签。3.短信批量发送管理功能..........................................错误！未定义书签。4.统计报表..................................................................错误！未定义书签。4.1.6.3.管理子系统.........................................错误！未定义书签。1.用户管理..................................................................错误！未定义书签。2.权限管理..................................................................错误！未定义书签。3.实时监控..................................................................错误！未定义书签。4.日志管理..................................................................错误！未定义书签。5.基站位置信息管理..................................................错误！未定义书签。6.系统参数配置管理..................................................错误！未定义书签。4.1.6.4.内容数据库子系统.............................错误！未定义书签。4.1.7.平台外部接口.................................................................错误！未定义书签。4.1.7.1.信令采集接口.....................................错误！未定义书签。1.接口说明..................................................................错误！未定义书签。2.数据采集模式..........................................................错误！未定义书签。4.1.7.2.短信发送接口.....................................错误！未定义书签。1.短信发送通知接口..................................................错误！未定义书签。2.短信发送状态查询接口..........................................错误！未定义书签。3.短信发送接口..........................................................错误！未定义书签。4.1.7.3.基站位置信息接口.............................错误！未定义书签。1.数据同步模式..........................................................错误！未定义书签。2.基站位置信息全量同步接口..................................错误！未定义书签。3.基站位置信息增量同步接口..................................错误！未定义书签。4.2.旅游客源分析.........................................................................................................364.2.1.建设目标.........................................................................错误！未定义书签。4.2.2.整体方案.........................................................................................................364.2.2.1.方案思路.............................................................................364.2.2.2.