03大数据解决方案27

1、大数据解决方案议程大数据的的一些疑疑问大数据采集大数据处处理大数据展现大数据解解决方案案-大数据的一一些疑问问怎么从大数据得到价值？你想从大数据里得到什么？多大的数据才是大数据？多大的数数据才是是大数据据？数据发展展趋势 BIG DATAAudio / VideoLog FilesText/ImageSocial SentimentData Market FeedseGov FeedsWeather Wikis / BlogsClick StreamSensors / RFID / DevicesSpatial & GPS Coordinates WEB 2.0MobileAdvertisin

2、gCollaborationeCommerceDigital Marketing Search MarketingWeb LogsRecommendations ERP / CRMSales PipelinePayablesPayrollInventoryContactsDeal TrackingTerabytes(10E12)Gigabytes(10E9)Exabytes(10E18)Petabytes(10E15)复杂性： 种类和速度数据量主要趋势势数据来源源5.5 Billion Subscribers WW (70+% of population)设备爆炸2 Billion Conne

3、cted People 社交网络Web Traffic up from130 Exabyte (10 E18) in 2010 to 1.6 ZettaByte (10 E21) in 2015无处不在的连接10 Billion Connected Sensors传感器网络2.大数据采采集你想从大大数据里里得到什什么？一系列新问题社交网络和互联网分析我的品牌或产品情绪实时数据源如何优化我的车队运行 (基于天气和交通趋势）高级分析功能如何更好预测未来结果？数据整合合带来的的价值个人数据组织数据社区数据世界数据价值采集任何种类、大小、来源数数据StreamingNon-Relational0101

4、01010101010101101010101010101001010101010101101010101010Relational数据科学家商业智能专业人员业务分析人员丰富数据据来源数据集市市Global reachUnified billing & provisioning platformEasy content onboardingData security / authorization modelFlexible pricing, auditing, logging内容提供商Content ProvidersConsistent, flexible , context optimi

5、zed APIs - ODataSingle Contract One Stop shop for data Easy access to premium dataUnified billing and provisioning platform独立软件开发商及开发者ISVs and DevsEasy of Discovery and Rich Apps to Consume Data Microsoft Office, Dynamics, Bing + 3rd party ISV ApplicationsAbility to mash up public and private dataFl

6、exible pricing pay as you go信息工作者Information Workers端到端的的大数据据生命周期期Data Upload ServiceStreamInsightSQL Server增强可视化10101Mud PulseRotationTemperatureAzureEquipmentOperationsMaintenanceWindowsHQLDedicatedHadoop ClusterColdStreamHDFSData NodeHDFSData NodeHDFSData NodeHDFSData NodeHDFSData NodeHDFSData No

7、deHDFSData NodeHDFSData NodeHDFSHotStreamE=MC2HQLLearnedLimitsSQL战略/趋势分析存储 & 管理洞察价值操作/实时分析端到端的的大数据据解决方案洞察力 INSIGHTS数据管理 DATA MANAGEMENTNON-RELATIONAL100111RELATIONALSTREAMING丰富数据 DATA ENRICHMENTSHAREAND GOVERNDISCOVERAND RECOMMENDTRANSFORMAND CLEANSELF-SERVICE COLLABORATIVE MOBILEREAL-TIME微软大数据产品洞察力

8、 INSIGHTS数据管理 DATA MANAGEMENT丰富数据 DATA ENRICHMENTPowerPivotPower ViewHadoop on Windows3.大数据处理Hadoop=BigData?HADOOP集成Non-RelationalHadoop-based distribution on premisesHadoop-based service in the cloud企业级安全，高可靠性，管理与微软商业智能工具无缝集成SQL Server 数据平台的一部分在Windows Azure上几分钟内完成部署SQLServer 2012ParallelDataWareho

9、use软硬件整整合优化化的并行行数据仓仓库一体体机从TB到PB的高可扩扩展性平平台使用MPP架构实现现卓越的的可扩展展性硬件厂商商的选择择通过使用用遵循行行业标准准的硬件件降低成成本与Microsoft商业智能能工具的的深度集集成充分利用用最新软软件技术术Windows Server2012 StorageSpacesWindows Server2012 Hyper-VSQLServer 2012xVelocity列存储SQLServer 2012ParallelDataWarehouse为大数据据而建新一代的的性能和和规模洞察任意意大小的的数据最优化的软硬件价值开放和灵活与Apache Ha

10、doop 100%兼容工具由丰富的合作伙伴生态系统提供与社区的紧密合作Accelerating the delivery of Hadoop for WindowsHadoop for Windows JavaScript librariesHive ODBC driversThe Apache Software Foundation当前大数数据分析析的挑战战：大量新技技术需要要学习掌掌握、周周期长、见效缓缓慢数据仓库库学习MapReduce需要IT人员提前前手动将将数据从从HDFS导入数据据仓库或或集市，才可进进行分析析HDFS(Hadoop)HDFS(Hadoop)DatabaseHDFS (Hadoop)SQLServer 2012PDW PoweredbyPolyBasePolyBase：数据处理理的突破破性技术术SQL统一查询询，结构构化和非非结构化化数据查询关联联Hadoop表和关系系型数据据库表采用标准准SQL语言Select, FromWhere沿用现有有SQL技能无需IT人员介入节省时间间和成本分析多样样 的数据类型型企业数据据及商业业智能平平台的进化-当前结构化数数据源结构化数数据源结构化数数据源ODS数据集市市多维度存存储分析应用其他存储使用DW企业数据据及商业业智能平平台的进化-未来大数据存存储结构化数数据源非结构化化数据源源数据流数据仓库库数据集市市