大数据培训课件

1、大数据徐俊杰 经管学院第一页，共二十八页。目录一个案例大数据究竟是什么？大数据为何会火爆？如何应对大数据潮流？第二页，共二十八页。埃奇奥尼与他的Farecast第三页，共二十八页。人们已经认同：数据也是资源 数据是企业最广泛的资源。举例：饭店、工厂数据是最易被人们忽视的资源举例：公交卡、支付宝数据是利用潜力巨大的资源。举例：网店购物推荐第四页，共二十八页。但同时，数据也是麻烦类型多样、来源复杂举例：交通管理持续变化、质量难控举例：网店评论第五页，共二十八页。那么，大数据是指什么？第六页，共二十八页。咨询公司是这样解释的加特纳：“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化

2、能力的海量、高增长率和多样化的信息资产。 麦肯锡：一种规模大到在采集、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合。 第七页，共二十八页。我对大数据的理解大数据是指超大规模的数据集合，往往还具有类型多样、快速流转、和价值密度低等特点，人们无法通过传统数据技术，以可接受的代价来驾驭处理它。第八页，共二十八页。两点认识大数据的“大”不只是“数量大”，类型多样、快速流转和价值密度低才是其有别于传统“数据”概念的关键所在。举例：NEC用脸部识别技术提升销售大数据的“大”还体现在企业的数据观突破了传统的管理视野。举例：商超的促销定价怎么做第九页，共二十八页。处理大数据需要专门的技术

3、方案传统数据 数据库 OLTP系统 中心式架构大数据 数据仓库 OLAP 数据挖掘 云计算架构 Hadoop第十页，共二十八页。所以，马云说“我们正从IT（信息技术）时代走向DT（数据技术）时代”、“IT时代是制造，DT时代是创造”。传统的“信息技术”，是对规模有限的“干净” 数据进行处理，系统的功效是可以预见的。而大数据依赖的“数据技术”，则擅长于对规模无限的“混乱”数据进行处理，系统的功效是不确定的。第十一页，共二十八页。为什么现在必须关注大数据？第十二页，共二十八页。原因1：这是一个数据激增的时代每天有200万篇博客在网上发布，这些文章相当于时代杂志刊发770年的总量；每天有2.5亿张照

4、片上传至社交网站Facebook，如果都打印出来，摞在一起有80个埃菲尔铁塔那么高；每天有86.4万小时视频被上传至视频网站Youtube，相当于不间断播放视频98年；百度每天的关键词搜索量50亿，谷歌33亿；淘宝天猫2015双11营业额达912亿人民币。中国小商品城2014全年成交额才857亿元人民币；互联网一天内产生的信息量可以装满1.68亿张DVD光盘。第十三页，共二十八页。原因2：数据的商业地位正在上升大量案例表明，粗放式经营是个死胡同。举例：中国制造为何不被尊重传统产业都在探寻“数据驱动型”创新。举例：UBI引导车险定价改革第十四页，共二十八页。原因3：大数据已跃升为国际竞争战略20

5、12年，美国推出“大数据研发计划”，希望增强海量数据收集、分析萃取能力，认为这事关美国国家安全和未来竞争力。 目前，欧盟正在制定数据价值链战略计划，包括开放数据、云计算、高性能计算和科学知识开放获取四大战略。 2013年，日本公布“创建最尖端IT国家宣言”，提出要把日本建设成为一个具有“世界最高水准的广泛运用信息产业技术的社会”。2014年，韩国提出“数据产业发展战略”，并把大数据纳入了未来增长引擎执行计划。 2009年，联合国推出“全球脉动”项目，旨在推动数字数据采集和分析创新；2014年发布大数据开发：机遇与挑战报告。 2013年，八国集团发布了G8开放数据宪章，提出要加快推动数据开放和利

6、用。 第十五页，共二十八页。原因4：国内的政策导向十分明显2015.1 国务院关于促进云计算创新发展培育信息产业新业态的意见2015.7 国务院关于积极推进“互联网+”行动的指导意见 2015.9 国务院关于促进大数据发展行动纲要2015.5安徽省人民政府办公厅关于促进电子政务协调发展的实施意见2015.9 安徽省委省政府关于加快调结构转方式促升级行动计划 2015.10安徽省人民政府关于促进云计算创新发展培育信息产业新业态的实施意见2015.10安徽省运用大数据加强对市场主体服务和监管实施方案第十六页，共二十八页。中央明确提出“国家大数据战略”11月3日发布的中共中央关于制定国民经济和社会发

7、展第十三个五年规划的建议提出：拓展网络经济空间，推进数据资源开放共享，实施国家大数据战略，超前布局下一代互联网。 第十七页，共二十八页。安徽省提出了大数据产业空间布局思路安徽省人民政府关于促进云计算创新发展培育信息产业新业态的实施意见提出：参与国家产业布局，创建国家大数据产业发展集聚区。规划“一中心两基地多园区”云计算和大数据产业空间布局，建设合肥市云计算大数据生产应用中心，淮南、宿州市大数据存储基地，黄山、池州市云计算大数据创意产业园。推动合肥市创建“中国软件名城”和中国（合肥）智能语音产业基地暨“中国声谷”建设；打造芜湖、马鞍山市互联网产业园和生产性服务业示范园区，培育一批面向国际或国内的

8、电商平台，加快建设一批“皖货”网上专业市场。建成中国移动（安徽）数据中心、合肥国际金融后台服务基地。第十八页，共二十八页。原因5：政府、企业在行动2015年，贵州提出打造“中国数谷”，发起举办“国际数博会”，是第一个举全省之力推动大数据发展的省份。成立了“贵阳大数据交易所”。2014年，安徽省经信委和省中小企业服务中心牵头成立“安徽省大数据产业情报服务平台”，为中小企业服务。 2014年，芜湖建立安徽沿江大数据信息产业服务中心 中国电信、华为、阿里、腾讯、中国石化、义乌小商品城、贵阳孟关汽贸城、安徽烟草.第十九页，共二十八页。如何应对大数据潮流？第二十页，共二十八页。认清形势、把握趋势土地、人

9、力、资本等传统要素已经无法构建抵御市场竞争的护城河，对数据的掌控能力决定了企业的发展潜力，对数据的利用效率决定了企业的发展效益。举例：克罗格证明传统超市生财有道举例：阿里真能打造物流智能骨干网吗？第二十一页，共二十八页。理性面对 厘清思路大数据来了？还是狼来了？大数据的本质是“基于数据的决策”，摒弃“基于经验的决策”，传统企业应当从客户端、产品端、管理端寻找介入机会，切不可陷入技术端陷阱。举例：谷歌流感趋势预测饱受质疑第二十二页，共二十八页。设立机构 转换职能企业应当设立信息化部门，甚至设立大数据开发管理部门，该部门不再是后勤支撑角色，而是要总领性规划企业的数据战略。支持通过数据整合颠覆公司低

10、效的流程和业务，信息化部门的职能从软硬件日常维护转向助推商业逻辑重构。第二十三页，共二十八页。主动采集 有序归集企业要围绕客户、产品、管理建立数据采集计划，把数据当作“战略资产”来看待，大中型企业要着手建立数据仓库或数据集市；数据采集、清洗、储存、分析纳入公司信息化部门的日常管理任务中。举例：携程打造众荟酒店大数据平台第二十四页，共二十八页。项目导向 大胆尝试企业可以通过项目预研的方式，支持部门和员工探索大数据应用方案，根据预研结果择优推进。需要注意，传统行业的大数据应用也具有很多风险，对成效不明显的应用应当给予包容。第二十五页，共二十八页。寻求联合 推动聚合公共服务型大数据应用离不开政府机关、事业单位的数据支持，政府文件对此也有明确要求（2018年前建立国家政府数据统一开放平台），企业可主动出击，推动公共数据向社会开放。此外，产业链共建共享数据中心、直接并购等方式也是企业构建大数据平台的潜在途径。举例：江苏与百度合作建设智慧交通项目第二十六页，共二十八页。谢谢第二十七页，共二十八页。内容总结大数据。每天有2.5亿张照片上传至社交网站Facebook，如果都打印出来，摞在一起有80个埃菲尔铁塔那么高。百度每天的关键词搜索量50亿，谷歌33亿。2014年，韩国提出“数据产业发展战略”，并把大数据纳入了未来增长引擎执行计划