大数据解决方案课件

1、微软大数据微软大数据&自助式分析解决方案自助式分析解决方案 议程 大数据解决方案 大数据的一些疑问 大数据分析 大数据处理 自助式分析方案 2大数据解决方案 Gartner Magic Quadrant for Business Intelligence Platforms , 2011 全球权威评估机构全球权威评估机构GARTNER连续几年把微软评为连续几年把微软评为 BI方案实施能力第一厂商方案实施能力第一厂商 Gartner Magic Quadrant for Business Intelligence Platforms , 2013 Gartner Magic Quadrant f

2、or Business Intelligence Platforms , 2010 3大数据解决方案 大数据解决方案 -大数据的一些疑问 怎么从大数据得到价值？ 你想从大数据里得到什么？ 多大的数据才是大数据？ 4大数据解决方案 大数据企业品牌腾飞的大数据企业品牌腾飞的“肾上腺素肾上腺素” 5.5 Billion Subscribers WW (70+% of population) 设备爆炸 2 Billion Connected People 社交网络 Web Traffic up from 130 Exabyte (10 E18) in 2010 to 1.6 ZettaByte (10

3、 E21) in 2015 无处不在的连 接 10 Billion Connected Sensors 传感器网络 数据复杂度：多元性和速度 Terabytes Gigabytes Megabytes Petabytes Big Data Web 2.0 Web 2.0 ERP/CRM 付款 薪资 货存 联系人 订单跟踪 销售管道 Web 日志 数字市场 搜索市场 网上推荐 广告 移动 协作 电子商务 网页点击流 Wikis/博客 传感器/RFID/ 设备 社交网络 音频/视频 日志文件 空间 & GPS 坐标数据 数据集市 电子政务 气候 文本/图像 Web 日志 数字市场 搜索市场 网上推

4、荐 协作 电子商务 数据的获取 主要趋势, 你想从大数据里得到什么？ 一系列新问题 社交网络和互联网分析 我的品牌或产品 情绪 实时数据源 如何优化我的车队运 行 (基于天气和交通 趋势） 高级分析功能 如何更好预测未来 结果？ 6大数据解决方案 端到端的大数据生命周期 增强 可视化 10101HQL Cold Stream HDFS Hot Stream E=MC2 HQL Learned Limits SQL 战略/趋势 分析 存储 & 管理洞察价值 操作/实时 分析 7大数据解决方案 微软大数据平台总体架构微软大数据平台总体架构 Fast Load Source Systems Hist

5、orical Data (Beyond Active Window) Summarize & Load Big Data Sources (Raw, Unstructured) Alerts, Notifications Data & Compute Intensive App ERPCRMLOBAPPS Integrate/Enrich SQL Server StreamInsight ETL with SSIS, DQS, MDS HDInsight on Windows Azure HDInsight on Windows Server SQL Server FTDW Data Mart

6、s SQL Server Reporting Services SQL Server Analysis Server Business Insights Interactive Reports Performance Scorecards Crawlers Bots Devices Sensors SQL Server Parallel Data Warehouse $ What We Sell $ Azure Market Place Summarize & Load via PDW Hadoop Connector Hortonworks or Cloudera Hadoop 微软大数据产

7、品 洞察力 INSIGHTS 数据管理 DATA MANAGEMENT 丰富数据 DATA ENRICHMENT PowerPivot Power View Hadoop on Windows 9大数据解决方案 Hadoop = Big Data? 10大数据解决方案 HADOOP 集成 企业级安全，高可靠性，管理 与微软商业智能工具无缝集成 SQL Server 数据平台的一部分 在Windows Azure上几分钟内完成部署 11大数据解决方案 SQL SERVER 2012 PARALLEL DATA WAREHOUSE 软硬件整合优化的并行数据仓库 从TB到PB 的高可扩展性平台 使用

8、MPP架构实现卓越的可扩展性 硬件厂商的选择 通过使用遵循行业标准的硬件降低成本 与Microsoft 商业智能工具的深度集成 充分利用最新软件技术 Windows Server 2012 Storage Spaces Windows Server 2012 Hyper-V SQL Server 2012 xVelocity 列存储 12大数据解决方案 SQL SERVER 2012 PARALLEL DATA WAREHOUSE 13大数据解决方案 开放和灵活 与Apache Hadoop 100%兼容工具由丰富的合作伙伴生态系统提供与社区的紧密合作 Accelerating the del

9、ivery of Hadoop for Windows Hadoop for Windows JavaScript libraries Hive ODBC drivers The Apache Software Foundation 14大数据解决方案 当前大数据分析的挑战： 大量新技术需要学习掌握、周期长、见效缓慢 数据仓库 学习MapReduce 需要IT人员提前手动将数据从HDFS导 入数据仓库或集市，才可进行分析 HDFS (Hadoop) HDFS (Hadoop) Databa se HDFS (Hadoop) SQL Server 2012 PDW Powered by Poly

10、Base POLYBASEPOLYBASE： 数据处理的突破性技术 SQL 统一查询，结构化和非结构化数据 查询关联Hadoop表和关系型数据库表 采用标准SQL语言 Select, From Where 沿用现有 SQL 技能 无需IT人员 介入 节省时间和 成本 分析多样 的 数据类型 企业数据及商业智能平台的进化 -当前 结构化数据源 结构化数据源 结构化数据源 ODS 数据集市 多维度存储 分析 应用 其他 存储使用 DW 17大数据解决方案 企业数据及商业智能平台的进化 -未来 大数据存储 结构化数据源 非结构化数据源 数据流 数据仓库 数据集市 多维度存储 数 据 服 务 分析 应

11、用 其他 存储服务使用 18大数据解决方案 高度可视化-数据民主化的基础 敏捷、精准的业务决策 面向中高层领导面向中高层领导-管理驾驶舱管理驾驶舱 面向一线经营分析面向一线经营分析-大数据自助平台大数据自助平台 提供面向不同层面用户的解决方案 19大数据解决方案 分析的基础是数据可视化分析的基础是数据可视化 数据可视化是数据可视化是一门艺术一门艺术 向导向导 提高分析效率提高分析效率 图表图表, KPIs, 波形图波形图, 仪表与仪表与 数据地图可视化数据地图可视化 面向业务人员的面向业务人员的 运营报表与自定制报表工具运营报表与自定制报表工具 发布、权限管理；发布、权限管理； 数据驱动的数据

12、驱动的KPI报警报警 与报表内容订阅与报表内容订阅 组件库，团队成员分享自组件库，团队成员分享自 定制报定制报(图图)表与可重用数据表与可重用数据 集合集合 丰富多样的图表类型，连接所有类型数据源丰富多样的图表类型，连接所有类型数据源 20大数据解决方案 1.1.面向中高层领导面向中高层领导-管理驾驶舱管理驾驶舱 领导驾驶舱是一个为高层管理层提供的 “一站式”（One-Stop）决策支持的管理信息 中心系统。它以驾驶舱的形式，通过各种常见 的图表（速度表、音量柱、预警雷达、雷达球） 形象标示企业运行的关键指标（KPI），直观的 监测企业运营情况，并可以对异常关键指标预 警，和挖掘分析。 它能将

13、企业管理决策提升到一个新的高度。 最大化地发挥高层经理了解、领导和控制公司 业务的管理室（即驾驶舱） 21大数据解决方案 用户定义的报表导航途径用户定义的报表导航途径 What-If 分析分析 地理数据图层地理数据图层 动画数据呈现动画数据呈现 易于开发交互式易于开发交互式, 上下文关联的报表，内存数据引擎高速处理上亿上下文关联的报表，内存数据引擎高速处理上亿 Excel表单记录表单记录 关联其它关联其它Excel表单数据表单数据 数据分解数据分解 2 2. .面向普通员工面向普通员工-大数据自助式分析平台大数据自助式分析平台 22大数据解决方案 DEMO1- EXCEL BI分析增强能力 透

14、视表、透视图、切片器、跨维度钻取 23大数据解决方案 DEMO2-EXCEL 新增能力POWER VIEW自助分析 联动、动态展现、0代码GIS、业务人员与IT人员新沟通方式 24大数据解决方案 DEMO3-EXCEL 新增能力POWERMAP 3D GIS自助分析 25大数据解决方案 DEMO4-微软POWERBI现实应用案例（微博与电影票房） 26大数据解决方案 DEMO5-微软POWERBI现实应用案例（星巴克机场选址开店） 27大数据解决方案 自助式自助式BI案例案例- XX移动、移动、XX联通成功案例联通成功案例 背景：背景： u客户原有BI系统基于Cognos，后台数据库Oracle，但是业务人员学习困难，使用不易，推广工作困 难重重。领导使用界面不够友好，导致决策迟缓。当有新需求时，重新部署需要很长周期。 现在：现在： u经过启动新一轮BI前端工具选型，通过对各个BI厂商的POC成果对比，微软成功赢标。 u新平台改