北京移动大数据研究项目27课件

2013年6月北京东方国信科技股份有限公司北京移动大数据研究项目投标方案2013年6月北京东方国信科技股份有限公司北京移动大数据研究目录3成功案例介绍2本项目的要求及我们的理解4项目组织安排东方国信公司简介1总体技术方案5目录3成功案例介绍2本项目的要求及我们的理解4项目组织2东方国信是国内唯一一家以商业智能为题材的上市公司在2013年1月《福布斯》中文版发布其2013年度榜单“中国潜力企业榜”中，我公司再一次被列入“中国最具潜力100家上市公司”榜单第七位，这是我公司连续两年被福布斯中国收录该榜单之中。我公司被列入“中国潜力上市公司100强”，证明了《福布斯》中文版对东方国信的未来发展规划、商业运行模式、核心技术实力、管理理念和人才理念的认可。最适用的商业智能产品及解决方案最优产品，最佳服务构筑民族BI全产业链第一品牌公司致力于夯实国内商业智能与软件服务第一品牌最专业的商业智能业务专家库最高效的商业智能交付实施团队2东方国信是国内唯一一家以商业智能为题材的上市公司在2013东方国信为多行业客户提供专业化的商业智能解决方案3作为核心合作伙伴供应商，我公司承建了中国联通25个省分公司及联通集团公司集中化经营分析系统的建设工作。这其中东方国信帮助中国联通构建了全国最大的数据仓库系统——集中化数据仓库（总数据量193PB）；我公司承建了中国电信14个省分公司的数据仓库系统和核心经营分析系统的建设和运营工作；我公司为中国移动9个省分公司和移动集团公司提供数据仓库系统和经营分析系统的建设及运营工作。同时为中国移动全资子公司中国铁通集团公司及4个省分公司提供核心系统软件及建设服务；东方国信为国家电网、中国石油、西部机场集团、中航三星人寿及多家地方商业银行等客户，提供数据仓库及商业智能解决方案。东方国信为多行业客户提供专业化的商业智能解决方案3作为核心合东方国信在商业智能领域的核心竞争力4领先经验团队专注资金大规模研发资金投入，紧跟云计算、“大数据”处理、社交化、数据可视化等业界脉搏汇聚业内800名精通商业智能业务的专家，辅助客户有效地挖掘数据资产超过2600人的专业服务队伍提供专业化商业智能定制方案1997年至今，始终专注于国内数据仓库及商业智能领域的产品研发，专注于做适合国内客户的Bi软件借助资本市场的有利条件，实现充沛的资金保障，确保公司的稳定和可持续发展在群雄逐鹿的商业智能领域，东方国信靠什么一路走来？东方国信在商业智能领域的核心竞争力4领先经验团队专注资金大规多年的BI领域运营经验告诉我们：

商业智能系统的价值彰显本质上依靠持续不断的运营5东方国信一直采用“T+B”的运营模式辅助客户用好BI系统，确保客户投入的商业智能系统有效地发挥其价值Think业务咨询Build系统建设将业务咨询的分析与研究成果在平台上进行固化，使系统能够更有效地满足业务部门的支撑需求平台中的技术数据是业务分析与模型构建的基础，咨询的成果来源于系统平台，通过业务咨询能够充分发挥平台建设的价值主要工作描述业务梳理问题诊断原因定位监控分析模型设计策略建议效果评估需求编写主要工作描述平台规划架构设计需求理解数据准备接口建设系统开发系统测试调优多年的BI领域运营经验告诉我们：

商业智能系统的价值彰显本质目录3成功案例介绍2本项目的要求及我们的理解4项目组织安排东方国信公司简介1总体技术方案5目录3成功案例介绍2本项目的要求及我们的理解4项目组织项目需求本项目主要针对管理支撑域大数据专题研究，其范围主要为MSS域，旨在梳理企业内部管理数据化工作现状，探索管理支撑领域大数据的应用价值，规划管理支撑领域大数据的实施路线。研究内容包括企业内部管理数据化现状调研与梳理、管理支撑大数据应用价值及方案研究、管理支撑大数据实施规划建议几部分。1．企业内部管理数据化现状调研与梳理：伴随企业内部管理的电子化水平不断提升，企业内部管理数据也在逐年增长，包括企业内部人财物信息、内部知识、业务流程数据、企业内部用户的工作行为等。本部分针对MSS域，梳理目前企业内部管理数据化现状，旨在考察目前企业管理的数据化现状。2．管理支撑大数据应用价值及方案研究：在数据化现状调研的基础上，借鉴大数据的宏观思想，结合目前企业内部管理的问题与面临的挑战，以挖掘企业内部管理数据价值为目标，总结出目前北京公司管理支撑大数据的应用价值。基于挖掘出的大数据应用价值分析，结合北京公司目前MSS域建设现状及数据现状，设计出大数据思想落地实施的初始化方案建议，建议可以包括组织及流程、人员能力、设计思想、业务逻辑、技术建议等。该建议可以较全面指导北京公司MSS域大数据工作的落地，较完备的保证前期分析的大数据应用价值能够有效的产生。3．管理支撑大数据实施规划建议：根据北京公司实际情况制定出阶段性的演进路线，给出未来三年大数据实施的目标及工作步骤，以及大数据思想下未来MSS域的发展建议。项目需求本项目主要针对管理支撑域大数据专题研究，其范围主要为目录3成功案例介绍2本项目的要求及我们的理解4项目组织安排东方国信公司简介1大数据咨询过程介绍5目录3成功案例介绍2本项目的要求及我们的理解4项目组织大数据现状调研与梳理访谈及现状梳理大数据分类及分布评估业务流程评估问题分析报告大数据现状梳理报告实施规划业务流程改进设计管控规范设计大数据维护业务流程报告大数据方案功能、技术架构设计大数据模型设计大数据管控规范功能及技术架构设计报告大数据模型设计报告工具、流程输入输出阶段一阶段二阶段三大数据战略管理架构调研业务现状调研系统现状调研数据现状调研目标评估方案研究及应用建议大数据架构设计业务流程优化大数据方案大数据应用建议大数据应用研究大数据方案研究演进路线规划实施方案规划大数据现状调研与梳理访谈及现状梳理大数据分类及分布评估业务流大数据特点及难题大数据主要特征：量大（PB级别的数据）、实时性（更短的时间处理数据）、多样性（非结构的文档数据为主）。也正是它的这些独具特点，给我们主要带来了“存”、“管”、“用”这三个方面的难题。“存”—如何解决PB级别大数据的存储问题？“管”—如何解决非结构化数据的管理问题？“用”—如何解决这种大规模复杂结构下的实时应用问题？大数据特点及难题大数据主要特征：量大（PB级别的数据）、实时大数据与云计算云计算有几个很显著的特征：它基于资源共享，这样就可以实现资源的池化共享和管理，为大数据提供最基本的生存基础它基于服务可用性与快速交付，这样可以降低IT管理的复杂度，提高资源利用率，降低大数据管理的复杂性它基于按需服务与交付能力，通过高性能的扩展，为大数据的实时应用环境提供可能性大数据与云计算云计算有几个很显著的特征：大数据逻辑架构云服务提供：为云服务对象提供统一的界面和访问，包装云服务资源，建立服务等级(SLA)，管理云服务对象状态和请求云服务管理：管理和维护云计算架构，保障云架构的稳定和可靠云平台资源：构建服务器、存储资源池，实现IaaS；建设企业级数据中心，实现PaaS；通过SOA架构整合系统应用，以提供SaaS。大数据逻辑架构云服务提供：为云服务对象提供统一的界面和访问，大数据涉及的关键技术X86虚拟化技术VMware---vSphereMicrosoft—Hyper-VCitrix–XenServerLinux—Xen/KVM/UMLParallelsServerBareMetalUNIX虚拟化技术IBMAIX–LPar、Micro-partitionHP-UX—vPar/nParSun--Domain大数据涉及的关键技术X86虚拟化技术UNIX虚拟化技术大数据处理技术目前，从技术层面大数据处理技术种类繁多，主要包括数据仓库技术、Hadoop、NoSql、流式处理技术等大数据处理技术目前，从技术层面大数据处理技术种类繁多，主要包北京移动大数据演进路线第一．试验验证阶段。选择具有典型意义的系统开展试验验证，为大面积现网推广部署提供试验数据，进行云平台的探索和验证，结合云计算标准化工作，逐渐规划出统一云平台的基础框架。第二，试点部署阶段。试点部署应遵循先易后难的原则，优先选取对实时性要求较低，对业务影响较小的系统，开展现网部署。第三，规模推广阶段。在试点部署的基础上，总结经验，优化方案。稳步推进云计算平台在整个管理支撑系统的应用部署。北京移动大数据演进路线第一．试验验证阶段。选择具有典型意义的大数据应用价值大数据应用价值北京移动大数据成本规划资源池项目投资(万元)比例x86资源池硬件投资软件投资IBM资源池硬件投资SUN/HP资源池硬件投资集成费

软件费

合计

北京移动大数据项目前期成本主要是建立虚拟化资源池的硬件、软件及集成费成本，后期成本会因规划建设的进度有较大的变化。北京移动大数据成本规划资源池项目投资(万元)比例x8目录3成功案例介绍2本项目的要求及我们的理解4项目组织安排东方国信公司简介1大数据咨询过程介绍5目录3成功案例介绍2本项目的要求及我们的理解4项目组织项目人员安排项目人员安排北京移动大数据实施步骤北京移动大数据实施步骤关于大数据的几点建议北京移动数据采集和预处理可采用基于Hadoop的分布式ETL技术，引入流计算提高数据转换效率。数据存储和处理采用Hadoop和数据仓库混搭的方式，通过透明访问机制为上层应用提供透明的访问环境采用PaaS的方式向各部门提供资源和应用开发、运行环境，解决平台/数据集中化和各部门应用开发个性化的矛盾。充分利用各种处理平台的特征，实现高效低成本非结构化数据处理在Hadoop平台上存储与处理。结构化、不需要关联分析、Ad-hoc查询较少的数据，建议保存在Nosql数据库或hadoop平台。结构化、需要关联分析或经常ad-hoc查询的数据保存在关系型数据库中，短期高价值数据放在高性能平台，中长期放在低成本产品中。关于大数据的几点建议北京移动数据采集和预处理可采用基于Had目录3成功案例介绍2本项目的要求及我们的理解4项目组织安排东方国信公司简介1大数据咨询过程介绍5目录3成功案例介绍2本项目的要求及我们的理解4项目组织通信行业大数据项目经验东方国信承建的中国联通数据大集中项目是目前为止国内最大的基于云计算架构的大数据落地项目。项目名称建设内容描述2012年中国联通总部数据服务支撑平台U-Cloud_D2.0应用软件更新改造工程(M域-东方国信）应用软件开发合同整合M域及外部数据，实现财务、业务、资源数据的深度关联，建立基于云架构的企业级集中化数据仓库，成为企业唯一的数据服务提供者。

2012年中国联通总部渠道集中管理系统应用软件更新改造工程总部数据分析系统全渠道全数据整合及服务部分委托开发合同整合M域及外部数据，实现财务、业务、资源数据的深度关联，建立基于云架构的企业级集中化数据仓库，成为企业唯一的数据服务提供者。2012年中国联通总部数据服务支撑平台U-Cloud_D2.0应用软件（B域分析应用优化部分）更新改造工程实现经营的日监控和企业绩效的一点展现，保障各级分析服务及营销的全面化支撑，充分发挥大数据在经营中的商机效用，实现集团对业务运营的垂直化管理。

11.2.1.42012年中国联通总部数据服务支撑平台U-Cloud_D2.0应用软件（B域数据部分）更新改造工程通过从生产到应用的端到端数据管控和流程保障，构建上下统一的数据管控和评价体系。从而构建基于数据集中化的业务和数据联动。

新华社全球一体化多媒体采编和数字生产加工平台技术开发及服务合同新华社全球一体化多媒体采编和数字生产加工平台实现了对文字、网页、图片、视频音频等多种结构化、半结构化和非结构化数据的采集、存储、分析能力，并在此基础上进行多媒体信息的编辑、发布。中航三星人寿TM系统服务框架协议

三星人寿电话营销系统，建设内容包括客户信息、客户行为信息、客户访谈音视频信息等大数据采集、存储和分析，为公司产品战略及发展战略提供依据。通信行业大数据项目经验东方国信承建的中国联通数据大集中项目是2424产品监控体系

围绕产品发展、产品设计、销售效果、用户质量及违规监控，打造产品全程管控体系

向管理层提供清晰准确的决策数据

支撑业务部门营销策略执行效果的跟踪和管理例：3G套餐违反六统一原则发现用户质量体系建立了3G、2G用户质量的分析体系直接服务于业务部门营销策略执行效果的跟踪和管理向管理层提供清晰准确的决策数据例：‘三无’用户，由总用户数占比的30%降至8%营销支撑体系

细分市场，立足用户全生命周期，结合产品架构体系，打造全过程营销体系

直接服务业务部门对省分营销策略制定的指导及营销效果评估

例：如意通随意打套餐政策：集团直接制定一线方案，快速执行，快速复制成本管控体系

梳理收入、欠费、结算流程

洞悉欠费、结算成本规模与影响

挖掘成本上升原因，服务于业务部门引导优势业务发展

提升利润空间，向管理层提供决策数据例：12省佣金超标,5省违规叠加费用快速定位终端监控体系

统一终端政策，防范省分违规操作，统筹资源规划，形成终端引进、销售、评估、优化终端政策闭环终端体系

助力3G规模发展。例：仅5个月机卡分离率从41.7%降低至5%，节约终端补贴17.5个亿服务评价体系

结合用户通话重接率评估网络服务支撑，借助结算数据，洞悉客服接触规模及成效，形成软硬件并行服务评价体系

结合用户质量、业务与消费能力、违规监控等数据实现3G业务评价体系例：网络侧话单批量造假发现，合约政策违规发现集中化整合M/B/O多领域数据，完成了电信行业最大的企业级数据仓库构建，数据量达到2.8PB，由220个x86云节点提供运算支撑。以此为基础构建了六大集中化体系以大数据为中心的信息化集中建设价值2424产品监控体系围绕产品发展、产品设计、销售效果、用大数据行业经验项目名称建设内容描述新华社全球一体化多媒体采编和数字生产加工平台技术开发及服务合同新华社全球一体化多媒体采编和数字生产加工平台实现了对文字、网页、图片、视频音频等多种结构化、半结构化和非结构化数据的采集、存储、分析能力，并在此基础上进行多媒体信息的编辑、发布。中航三星人寿TM系统服务框架协议

三星人寿电话营销系统，建设内容包括客户信息、客户行为信息、客户访谈音视频信息等大数据采集、存储和分析，为公司产品战略及发展战略提供依据。大数据行业经验项目名称建设内容描述新华社全球一体化多媒体采编2626王侃说:(2010-09-1614:05:40)圆圆部门规划给你弄了吗时文鸿-北京说:(2010-09-1614:06:38)正在弄。时文鸿-北京说:(2010-09-1614:06:47)我觉得跟你学靠谱。时文鸿-北京说:(2010-09-1614:06:52)整分析报告。时文鸿-北京说:(2010-09-1614:06:57)很有眼光。时文鸿-北京说:(2010-09-1614:07:06)改改东西，效果还是挺明显的。BONCThanks!!InformationChangetheWorldCopyright©2010byBONC2626王侃说:(2010-09-1614:05:401、Geniusonlymeanshard-workingallone'slife.(Mendeleyer,RussianChemist)

天才只意味着终身不懈的努力。20.8.58.5.202011:0311:03:10Aug-2011:032、Ourdestinyoffersnotonlythecupofdespair,butthechaliceofopportunity.(RichardNixon,AmericanPresident)命运给予我们的不是失望之酒，而是机会之杯。二〇二〇年八月五日2020年8月5日星期三3、Patienceisbitter,butitsfruitissweet.(JeanJacquesRousseau,Frenchthinker)忍耐是痛苦的，但它的果实是甜蜜的。11:038.5.202011:038.5.202011:0311:03:108.5.202011:038.5.20204、Allthatyoudo,dowithyourmight;thingsdonebyhalvesareneverdoneright.----R.H.Stoddard,Americanpoet做一切事都应尽力而为，半途而废永远不行8.5.20208.5.202011:0311:0311:03:1011:03:105、Youhavetobelieveinyourself.That'sthesecretofsuccess.----CharlesChaplin人必须相信自己，这是成功的秘诀。-Wednesday,August5,2020August20Wednesday,August5,20208/5/20206、Almostanysituation---goodorbad---isaffectedbytheattitudewebringto.----LuciusAnnausSeneca差不多任何一种处境---无论是好是坏---都受到我们对待处境态度的影响。11时3分11时3分5-Aug-208.5.20207、Althoughtheworldisfullofsuffering,itisfullalsooftheovercomingofit.----HellenKeller,Americanwriter虽然世界多苦难，但是苦难总是能战胜的。20.8.520.8.520.8.5。2020年8月5日星期三二〇二〇年八月五日8、Formanismanandmasterofhisfate.----Tennyson人就是人，是自己命运的主人11:0311:03:108.5.2020Wednesday,August5,20209、Whensuccesscomesinthedoor,itseems,loveoftengoesoutthewindow.-----JoyceBrothers成功来到门前时，爱情往往就走出了窗外。11:038.5.202011:038.5.202011:0311:03:108.5.202011:038.5.202010、Lifeismeasuredbythoughtandaction,notbytime.——Lubbock衡量生命的尺度是思想和行为，而不是时间。8.5.20208.5.202011:0311:0311:03:1011:03:1011、Tomakealastingmarriagewehavetoovercomeself-centeredness.要使婚姻长久，就需克服自我中心意识。Wednesday,August5,2020August20Wednesday,August5,20208/5/202012、Treatotherpeopleasyouhopetheywilltreatyou.你希望别人如何对待你，你就如何对待别人。11时3分11时3分5-Aug-208.5.202013、Todowhateverneedstobedoneto

preservethislastandgreatestbastionof

freedom.(RonaldReagan,AmericanPresident)为了保住这最后的、最伟大的自由堡垒，我们必须尽我们所能。20.8.520.8.5Wednesday,August5,202014、Wherethereisawill,thereisaway.(ThomasEdison,Americaninventor)有志者，事竟成。11:01:1911:01:1911:018/5/202011:01:19AM15、

Everymanisthemasterofhisownfortune.