数聚中台赋能,数驱管理创新_第1页
数聚中台赋能,数驱管理创新_第2页
数聚中台赋能,数驱管理创新_第3页
数聚中台赋能,数驱管理创新_第4页
数聚中台赋能,数驱管理创新_第5页
已阅读5页,还剩6页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

数聚中台赋能,数驱管理创新作者:陈庆华摘要:本文作者结合过去20多年在数据管理、数据应用领域的实践经验,并阅读了大量文献、资料,听取了多方的报告,对数据中台的起源、本质、为什么受欢迎、与以前建设的数字化中心/DWH/BI是啥关系、谁该上数据中台、怎么上数据中台等进行了深入研究与分析。“数据中台”这个词,最近可谓是火遍了大江南北。业内人士都知道这个词是阿里巴巴集团提出来的,一个中国公司提出的IT概念,能够被那么多中国大中型企业认可和关注,这在以前是不可思议的。以前,IT的概念都是美国人在引领,国内企业提出的概念大多被嗤之以鼻,后来不了了之。这次阿里巴巴提出的数据中台理念被众多国内企业认可甚至采纳,一方面反映了人们对数据的重视程度,另一方面也说明国人越来越自信了。对其他中国企业的相信,其实也是国内企业对自身的相信。一、“数据中台”确实是中国独有的概念为了验证上述国人的自信,笔者利用公司的Gartner会员身份,请我司战略副总咨询了多位Gartner全球著名分析师,得到的结论是:“数据中台”这个概念确实只在中国有,国外没有这样的概念。Gartner分析师说,中台这种说法Gartner并没有在其他市场发现过,也没有在自己的报告中使用过。相比而言,Gartner建议客户使用网格应用和服务架构(MASA-MeshAppandServiceArchitecture)框架规划数字业务的应用架构。仅从上述信息看来,Gartner似乎更关注的是技术,而阿里提出的数据中台,似乎已经超越了技术。我们在为阿里感到骄傲的同时,不禁自问,数据中台究竟是什么?为什么那么受欢迎?它与我们之前做的有什么区别?笔者带着疑问开始研究阿里巴巴数据中台概念。二、数据中台究竟是什么?现在网上关于数据中台的文章铺天盖地、书店里也铺了不少关于中台的书,其中多数写文章、写书的人都要跟阿里沾点边,即使主要作者不是阿里系的,也要拉上一个在阿里待过的人作为作者之一,似乎那样才显得正宗。这让人不得不联想到西游记里那些在观音莲花池中听经的金鱼,雷音寺里听佛经的蝎子,毕竟亲耳听过菩萨念经,功力似乎就会高些。笔者不是阿里系的,还是听听阿里巴巴集团中正宗菩萨念的真经吧。幸亏阿里巴巴那些数据中台的开拓者也出了书,其中由邓中华出的《大数据大创新:阿里巴巴云上数据中台之道》(后简称《中台之道》),几乎成数据中台的教科书了。关于数据中台,《中台之道》是这么说的:云上数据中台处于计算后台与业务前台之间,其内核能力是以业务视角而非纯技术视角智能化构建数据、管理数据资产,并提供数据调用、数据监控、数据分析与数据展现等多种服务;承技术后台,启业务前台,是建设智能数据和催生数据智能的引擎。上述描述揭示了如下几点:1)数据中台后面还有计算后台(或技术后台);2)其内核能力是业务视角,并为业务前台提供数据调用的手段;3)数据中台把数据当成资产看待,并具有智能化构建、数据监控、管理等手段;4)数据中台提供了数据分析与展现的服务。最近在乌镇互联网大会的BDAI数据中台论坛上,可里巴巴数据技术与产品部总经理王赛说,阿里巴巴公司并没有叫“数据中台”的部门,为了完成阿里巴巴数据公共层建设,除了前期启动的23个项目,此后还投入上千人一直在不断完善、运营数据中台。建设数据中台,其实可里巴巴自己也在不断摸索、不断完善,在向产业界输出的概念上更是在不断调整。比如其建设数据中台的方法论,以前称为“ OneData”、“OneEntity”、”OneService”,蛮难理解的,现在阿里人把它们归纳为一个核心方法论OneData,并由"OneModel"、“One-Id"、“OneService"来解析上述OneData方法论,这就容易理解得多了。配套其方法论,阿里巴巴提供了相应的工具,包括数据加工与管理工具DataPhin,当然也少不了阿里自主研发的BI工具QuickBI(按王赛总的话来说,BI是“白米饭",每个企业都需要)。所以数据中台是确确实实存在的那么一个实体,它可能涉及规划、观念、视角、方法论,甚至组织的变革,但不是虚无缥缈的。它可以作为企业级共享服务平台的形式出现,它涉及的产品可能不止一个,要建设它也不是一个项目就能做完的,它是一个系统工程。阿里巴巴在建设中台的过程中,曾经有个SOP(StandardOperationProcedure)的概念,其目的是通过提供一套标准化的流程+预留可动态注入的扩展点的方式来向前台提供服务---即赋能前台。比如淘宝和天猫在业务上可以共享一套SOP,在这套SOP的扩展点上各自注入自己不同的规则,从而满足自己的需求。这些SOP,非常好地阐释了“业务数据化与数据业务化”的水乳交融。综上,数据中台的本质是对数据的统一管理(OneData),方法是把数据变成资产(OneModel/Oneld),重点是数据价值的业务变现(OneService)。三、数据中台是头部企业的自我修养由于数据中台是独立于业务的,所以得由专门的组织来负责。阿里巴巴也设立了这样的组织,王赛说,这个组织曾经走过弯路,早期叫“共享业务事业部”,曾一度从100多人被业务蚕食成20多人,因为业务觉得他们不能正确地理解业务的需求,把相关的人挖到业务部门去了,后来这个部门是从20多人重新组建的,由阿里巴巴CTO行癫张建峰亲自挂帅推进中台战略,作了详细规划、部署,才有了今天阿里中台的影响力,该部门也逐步发展成1000多人的有话语权的团队。可见,建设数据中台不是个一蹴而就的事,哪怕阿里都花了4-5年,而且还在持续投入。

袋鼠云的创始人陈吉平在阿里干了11年,是阿里数据中台的最早建设者之一,他在乌镇互联网大会的数据中台专题研讨会上坦陈,建设数据中台的责任在建设方,数据中台是头部企业的自我修养。之所以说是头部企业的自我修养,这里有两层意思:1)头部企业,也就是说并不是所有企业都需要上数据中台;2)自我修养,即建设数据中台的责任在建设方,而不是承包一个项目给乙方就完事的工作。建设数据中台是需要投入不小成本的,其次数据中台涉及的面非常广、贯穿的时间非常长,甚至涉及到组织机构的变革。比如阿里,为建设数据中台首先启动了23个项目,而且还专门有个部门叫“数据技术与产品部”,新增了"数据产品经理"的岗位,重新规划了负责数据中台的部门的绩效考核机制…,所有这些,都是建设方需要考虑的,乙方公司顶多带来些其他公司的经验,完成其中的部分项目说数据中台并不是所有企业都适合上,网上有篇文章说“只有符合以下条件的企业,才有实施中台的必要,切莫乱搞”,还是负责任地讲了大实话:中台朋略斛决盪杂坐态系统的治理问如果不圧复余先态磊统.ERP或企业倍息化祥理系统岖适合怖,屮台战略左農融降低盯乘统的H杂度丸即台・,小前台・具备快速试锚、快速反甩"快速创締的能力,他黑你的业务场嚴童化平大,槪孙化或组件化克适合你中台建设解决皮就吐以遂吐的何题,如果你的証业不存在这个M膛.说明rr治理井不壘眼卜函怎迫的问题拥有爭『解业部、爭个产品蜒.隔要在金鄆产品线中形成皴抵其亨和口用"构建數据中台,是实现数据一体化辭理的方法Z—图1企业适合做中台的条件所以,对于业务线比较单一的企业,盲目尝试中台架构有害无益。另外,我们也要清楚实施中台的目的,以及中台会给企业带来的价值,原则上讲,建设数据中台,是为

了让企业级数据能力能得以复用,并因此打通数据孤岛,快速响应变化中的数据需求,赋能业务创新、转型升级、降本增效。四、数据中台的概念为什么那么受欢迎阿里巴巴提出的数据中台并非一项技术,也不是一个产品,它涉及观念、方法论、组织变革,其目的就是让数据更好地为用户业务服务,即所谓“业务数据化,数据业务化”,它强调的数据的治理与价值实现。这就不难理解数据中台的概念为什么会那么受欢迎了。我们来看一下另一项由Gartner进行的调研:DigitalTransforimationiBu5ine&±ritMligeriLe口rcht-aanBlvtfcs-solutionCyber)1infarmatran«-njrrtwPercentageofrespondentsDigitalTransforimationiBu5ine&±ritMligeriLe口rcht-aanBlvtfcs-solutionCyber)1infarmatran«-njrrtwPercentageofrespondentsPercentofrespondentdecreasiftRInvestmentIncreasing,investmentinitJilivs(inilixiing,dig:nlrmirkEtin^|CLetorneryuserExperienceArbiRznltaiteHiEeTce/macfineleamireAutianirtiEnMttiiesEpllcaUixitTec血口寸刖iriqs^iionSoftvrare-dft'slDpfreiTtorup^radHIwiciLKfingh«™ir\g,maint-nancsandsyppartlGL^ton^rrdationshlp丹日国盟ni亡ntwahitlo曜Infras-lrudtuviidda^awnlsrIrateiTiebsfThingsE-tDmrnerce/ciftkenjxxtBi/M^b-sIteEnispruer-soun-E-口InmirENfftwarking;voteandcatarnnmurwcfftlDns亡0(0网1^«:创6吐口1「亡刊#了¥410匚11«1诡Wi-Fiandinternet■»:匚us:Induilryspecfc・alLrt£m图2Gartner关于需要加大投入的技术调研上述调研是2019年初Gartner就"您的组织在2019年将在哪个技术领域加大资金投入?”,在对全球上万家著名企业发出调研单后,收到了3086份有效答案(不包括那些回答"不知道"的),吉果显示45%的组织把票投向了"BusinessIntelligeneeordataanalyticssolution"(即"商业智能或数据分析解决方案"),该项技术获得了第一名的排位,而且该项技术在过去十年中已经获得九次第一了。为什么会是这样的结果呢?笔者作过仔细的研究与分析,发现主要原因还是因为企业管理者感觉缺乏数据。尽管过去数十年来在信息化建设方面投入巨大,但各组织的管理层/业务层仍然缺乏有效数据支撑,他们纷纷给IT部门施加压力,从而传递到Gartner的调研上,造成了®与分析解决方案”是未来一年中最需要加大投入的技术领域这样一个结果。所以当今社会,几十年的信息化建设已造就大量的数据,但由于这些数据分散在各个业务系统中,形成了多个孤岛,使得管理者/业务用户仍然感觉到缺乏有效的数据支撑,而“数据中台”的概念就是要进一步治理数据,让数据更准确,成为资产而不是负担,还要让业务用户能触手可及,这当然是各组织所诉求的了,所以数据中台的概念受到极大的欢迎也是理所当然的了。五、数据中台与我们之前建设的数据仓库/BI项目有什么区别?数据中台这个概念是在大数据概念被热炒多年以后才冉冉升起的。“历史总有惊人的相似",看来DT(DataTechnology)技术的发展也不例外。只不过人类历史的车轮更大一些,技术的发展的历史车轮更小一些,而且滚动的速度越来越快。早在上世纪80年代,BillInmon提出“数据仓库”(DWH---DataWarehouse)这个概念,一度风靡全球。可是,在数据仓库发展一段时间后,人们发现数据仓库越积越大,无论模型建设得多么有前瞻性,前端取数的性能和方便性却越来越出问题。于是,在1993年,被称为关系型数据库之父的E.F.Codd博士提出了联机分析处理(OLAP---OnlineAnalysisProcessing)的概念。把对数据技术的关注重点,从数据收集存放建模往前挪了一步,到数据供给,关注业务的数据需求。OLAP的概念也一度风靡全球;OLAP的技术提出没过多久,人们发现把对数据技术的重点放在存储和供给上都是有偏颇的,应该放在前端应用上,于是,BI(业务智能----BusinessIntelligenee)的概念应运而生,并于1996年被Gartner引用,从此BI开始逐渐风靡全球。无论是"数据仓库”,还是“联机分析处理”,还是“业务智能”,其实都涉及数据的收集、存放(含建模)、供给、应用,只不过是把关注重点逐步从数据存放的后端前移到应用而已。随着信息技术的发展,数据的形态与容量发生了巨大变化,可以说从量变到质变。2008年,维克托•迈尔-舍恩伯格及肯尼斯•库克耶编写的《大数据时代》面世,"大数据”的概念被提出,火到现在。对大数据技术需求最大的可能要数互联网企业了,因为互联网巨大的访问量已经突破了传统数据库的处理能力。中国是互联网应用最成功的国家,阿里、腾讯、百度、京东等优秀互联网企业积累了巨量的数据。就如数据仓库时代一样,当互联网企业在数十个业务板块,百余家公司,千万级客户,上万个应用场景的情况下,原先的大数据体系架构也已经满足不了前端的需求了。人们发现数据应该统一管理/治理,应该更加关注业务需求,应该为业务需求统一建模,这就如数据仓库时代的OLAP,把对数据技术的关注点前移,于是“数据中台”概念应运而生。我们再来看看阿里巴巴的中台建设之道,下述插图来自《中台之道》:I4ttt4* 4f大黙抵不是営养岛,帀足缺宣活不下去的经耀、曲液、走騎1512-6冉一t巴巴妁*杜祐主掘丽17■:□■右驻谕"IT卄EE"<Plll?>'jitV^ftRELUIVIIKChflRH9K1E^足勺甘”HBRiiE-r■Pi«i-winmBHHKK.aru-.iivTn.I4ttt4* 4f大黙抵不是営养岛,帀足缺宣活不下去的经耀、曲液、走騎1512-6冉一t巴巴妁*杜祐主掘丽17■:□■右驻谕"IT卄EE"<Plll?>'jitV^ftRELUIVIIKChflRH9K1E^足勺甘”HBRiiE-r■Pi«i-winmBHHKK.aru-.iivTn.BS二用常"53舄屮*it盘用用疏九£&V性kt弭■疋BdiE屮洁聃丁is弈空吧誤田st活ffiT 122.妙酸£T■强IB瞬沁H中e-^^lKW序■歳研倉按丸求少半8址2曲翌亍描阳啊总宓醉特丸战邂忡计■坦耳耳逝軍诈曹翅雄和疔阿歹湘ETL血H唧側測轴丁用3-rkce&<t»^h.案虔取屯M;牟h砺口启■-;3■',咒已已応松冷I!早屯:伞>;[!;■it竝■:*旳v.'-,(,■;丄_卜詁I?k勺:沢;FKW胡■!:纵观阿里巴巴数据中台的整个建设过程,其实与我们在为企业提供的“数字化中心”/“数据仓库”/“BI”解决方案非常相似。阿里巴巴也是在数据越来越混乱、资源越来越浪费之后,才痛定思痛下决心,让数据独立出来集中管理和治理,把数据变成资产,更好地为业务服务。由数据中台概念催生的对数据的重视可谓达到了一个新的高度:阿里巴巴认为大数据不是营养品,而是组织缺之不可的经络、血液、大脑,它也是大创新的源泉。当然QneService是阿里数据中台的一个重大创新彳艮多企业在建设数据仓库系统,或者"数字化中心”、或者BI系统时并没有OneService的概念,而OneModel/One-Id,可以说数据仓库建模、主数据就是为此而存在的。OneService让众多的业务需求都能通过一个数据API接口获得数据中台的数据服务,这对于阿里这样需要服务众多电商客户的企业,是非常有必要的,它不仅大幅减少了沟通成本,还能防止商家复制数据,并方便地向商家收取数据使用费。但某个内部无须结算数据使用费用的组织是否也一定要用OneService来提供数据服务,是值得商榷的。其实阿里巴巴自己也没有定论,他们把这三个One称为最佳实践。所以,除了云概念/OneService以外,阿里巴巴云上数据中台建设与我们之前为客户提供的数据仓库/数字化中心/BI项目没有什么本质区别,也不是什么新物种、新技术,但数据中台更加贴近业务,不只提供分析功能,更重要的是为业务提供服务,与业务中台或者业务系统(老旧系统)链接更加紧密了。所以有人把数据中台定义为:是一个用技术连接大数据计算存储能力,用业务连接数据应用场景能力的平台。既然“数据中台、是一种观念、一种方法、一种组织架构,那么很多企业其实早就有这样的意识,也有自己的方法,甚至有专门的组织来负责数据,他们是不是已经在建设中台了呢?在阿里巴巴工作了十一年的袋鼠云创始人陈吉平就说,其实在马云老师正式提出"数据中台、之前他们早就开始了中台建设…,可见,其实中台建设是被业务需求推着走的,这就像数聚股份服务过的很多客户,其实已经在建设数据中台的路上,只是之前没有那么冠名。六、数聚DIMP助力中台建设,驱动管理创新数聚DIMP是为企业或政府的数字化而打造的产品,其本身的立意就是通过汇聚各类信息系统所产生的数据,进行恰当的治理,以此打通各系统之间的关系,赋能业务,尤其赋能数据驱动的管理与数字化业务。如图:;检工物联网/:HI/;检工物联网/:HI/设备等物岸'一.客户瞬平台信慝系统r;员工平台・r1于』魏浊沖我•乜;-■-rcvg:四大类信息化靈删累大量数热数聚肋力建设数字化中心,挖掘数宇价值EHre?nrNUi^合柞伙伴/;生态系统\: 5JZ台 ':: 十口 :图3数聚股份一直致力于为客户构建数字化中心阿里巴巴数据中台无论从顶层设计、实施步骤,还是成果(“观星台”、“黄金策”、“直播厅”、“孔明灯”),都与数聚公司帮助客户构建的数字化中心思想不谋而合,只是数聚股份还打造了DIMP(数字化智能管理平台),让它承担了企业大脑和中枢神经的重任。阿里云上数据中台所建设的“观星台”、“黄金策”、“直播厅”、“孔明灯”等在DIMP上都可以找到“领导视窗”、“主题报表”、“实时大屏”、“数字看板”等功能对应模块。DIMP产品是基于微服务体系架构的,这为其赋能中台建设打下

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论