走近云计算大数据与物联网

计算机领域最新技术报告走近云计算、大数据与物联网提纲

什么是云计算《走近云计算、大数据与物联网》

云计算的层次

云计算的发展与影响

云计算相关技术

云计算安全

云计算市场角逐

云计算在企业中的应用什么是云计算云计算概念•通过整合、管理、调配分布在网络各处的计算资源，通过互联网以统一界面、同时向大量的用户提供服务云计算特点超大规模计算、虚拟化、高可靠性和安全性、通用性、动态扩展性、按需服务、降低成本云计算应用场景Google个人云服务企业应用实例：AnimotoAmazon云计算示意图你身边的“云”•群雄逐鹿：国外有微软SkyDrive、苹果iCloud，亚马逊CloudDriver等网盘产品，国内有百度云、新浪微盘、华为网盘、金山快盘、115网盘和360云盘等•不以空间大小论英雄：以100K/s的均速上传，1T空间也需124天方可填满，合计2976小时。而如若想占满36T，估摸得熬上12年以上光景《走近云计算、大数据与物联网》

你身边的“云”有道云笔记/video.html?auto=12011年6月28日网易旗下的有道推出的云笔记软件，支持多种附件格式，拥有2G容量的初始免费存储空间，能够实时增量式同步，并采用“三备份存储”技术，同时上线的还有网页剪报功能。云电视、百度地图、百度音乐、云杀毒、云端备份《走近云计算、大数据与物联网》

云计算的层次data

Storage

as

a

ServiceInfrastructure

as

a

ServicePlatform

as

a

ServiceSoftware

as

a

ServiceSaaSPaaSIaaSdSaaSGoogle

Apps,

Microsoft

“Software+Services”IBM

IT

factory,

Google

App

Engine,

FAmazon

EC2,

IBM

Blue

Cloud,

Sun

GridNirvanix

SDN,

Amazon

S3,Cleversafe

dsNetServerVisualizationStorage ServerStorageInfrastructurePlatformApplication从一个集中的系统部署软件，使之在一台本地计算机上(或从云中远程地)运行的一个模型。由于是计量服务，SaaS

允许出租一个应用程序，并计时收费IaaS将基础设施(计算资源和存储)作为服务出租PaaS类似于

IaaS，但是它包括操作系统和围绕特定应用的必需的服务SaaS《走近云计算、大数据与物联网》

云计算的发展与影响网格计算利用并行计算解决大型问题GlobusAlliance使其成为主流公共计算将计算资源作为可计量的服务提供于上世纪90年代末推出SaaS基于网络预订应用程序于2001年推出云计算下一代因特网计算下一代数据中心云计算的演进《走近云计算、大数据与物联网》

云计算相关技术云计算是一种业务模式创新《走近云计算、大数据与物联网》

网格计算《走近云计算、大数据与物联网》

网络上提供的不同种类的服一个用于计算任务的资源池务，可以运行在网格计算或公共计算环境中环境为了通用应用而设计的，没为完成某一个特定的任务需有专门以某种应用命名要，比如生物网格、地理网格、国家教育网格资源相对集中，主要以数据聚合分布资源，支持虚拟组中心的形式提供底层资源的织，提供高层次的服务，例使用，并不强调虚拟组织如分布协同科学研究（VO）的概念支持持久服务，用户可以利用执行作业形式使用，在一用云计算作为其部分IT基础个阶段内完成作用产生数据设施，实现业务托管和外包从诞生开始就是针对企业商更多地面向科研应用，商业模业应用，商业模型比较清晰型不清晰云计算网格计算虚拟化技术传统的虚拟化方式虚拟化是云计算的基石通常的虚拟化方法只考虑虚拟单个硬件资源，把虚拟的单个计算环境联结起来云计算所需的虚拟化技术必须虚拟架构技术，虚拟化不必局限于单个硬件资源云计算环境中的虚拟化方式《走近云计算、大数据与物联网》

虚拟化技术把物理的计算资源转换成了逻辑的计算资源通过创建虚拟机使得计算资源按需分配数据中心数据中心是云云计算的温床床云计算推动数数据中心向虚拟化和云架构的转转型，不断提提高IT基础架构的灵活性，以降降低IT、能源和空间成本，从而让客户能够够快速地提高高业务敏捷性“那些正在兴兴建最大规模模数据中心的的公司一般都都在云计算方方面拥有巨大大野心”--《数据中心知知识》杂志主编RichMiller《走近云计算算、大数据与与物联网》SaaSSaaS（软件即服务务）通过浏览器把把程序传给成千上万的用户，为用户省去在服务器和和软件授权上上的开支；供应商只需要维持一个程序，减少维维护成本SaaS在人力资源管管理程序和ERP中比较常用；GoogleApps和ZohoOffice也是类似的服务S是迄今为止提供这类服务最为出名的公司贝尼奥夫Salesforce的创始人在“云”概念出来之后后，Salesforce迅速宣称自己己是第一家提提供云产品的的公司《走近云计算算、大数据与与物联网》Salesforce的创始人贝尼奥夫，或许可以视为“云”的先行者。早在1999年，贝尼奥夫就大声宣布自己要成为“软件终结者”Salesforce以“即买即用”的服务模式，颠覆了传统软件销售方法论用户不需要通通过购买软件许可证、安装和实施，才可以建立起CRM系统。用户户只需要一个个账户，就可以像访问网页一样，访问在Salesforce上运行的CRM系统云计算安全问题访问权风险管理风险地点所产生的的风险加以衡量。”数据风险数据恢复风险长期发展风险…“使用云计算算的局限是企业必须认真对待的敏感问题，企业业必须对云计算发挥作用的时间和Gartner咨询公司副总总裁兼分析师师DavidCearley《走近云计算算、大数据与与物联网》云计算市场角逐CompetingforcloudcomputingGoogleGFS、MapReduce和BigTableGoogleAppEngineGoogleApps------------------------------------------AmazonAWSS3、EC2、SQS和SimpleDB------------------------------------------Sun公司推出“黑盒子”计划------------------------------------------IBM“BlueCloud”蓝云云计划划------------------------------------------Microsoft：Azure、MatrixDB------------------------------------------Salesforce：F------------------------------------------HP联手手Intel和Yahoo!建实验室云云计算《走走近近云云计计算算、、大大数数据据与与物物联联网网》》云计计算在在企业中中的应用用中小小企企业业的的产产业业环环境境中小小企企业业信信息息化化面面临临的的压力–信息息系系统统爆爆炸炸式式膨膨胀胀带带来的““经济””压力–信息息系系统统建建设设周周期期越越来来越短带带来的““时间””压力–对新新技技术术、、新新产产品品、、新新理念的的“研究究”压力力–信息息系系统统面面临临的的““数数据据存储量量和计算算量”的的压力越越来越大大–“人人才才““压压力力–维护护““客客户户粘粘性性””的的压压力力云计计算算可可以以促促进进中中小小企企业转型型升级云计计算算促促进进中中小小企企业业转转型型升升级级《走走近近云云计计算算、、大大数数据据与与物物联联网网》》总结结《走走近近云云计计算算、、大大数数据据与与物物联联网网》》•云计计算算，，在在本本质质上上并并非非一种新新的技术术，而是是一种服服务模式式•云计计算算关关键键词词：：虚虚拟拟化化、数据据中心、、面向服服务、按按需付费费•云计计算算让让中中小小企企业业受受益益提纲纲大数数据据时代《走走近近云云计计算算、、大大数数据据与与物物联联网网》》大数数据据应用大数数据据的影响响大数数据据的四个特特征大数数据据的产生生大数数据据关键技术Hadoop体系系结结构构参考考：主主讲讲研研究究生生课课程《大大数数据据技技术术基基础》，，并并编编写写了了配配套套教教材材。。下下载载配配套套教教材材请请访访问《大大数数据据技技术术基基础》网网站站：：http://dblab.a/post/1089/大数数据时时代代《走走近近云云计计算算、、大大数数据据与与物物联联网网》》大数数据应应用场景景KevinSpacey大数数据据分分析析DavidFincher风靡靡全全球球的的美美剧《纸纸牌牌屋》英国国同同名名小小说说《《纸纸牌牌屋屋》》《走走近近云云计计算算、、大大数数据据与与物物联联网网》》大数数据应应用场景景美国国零零售售商商和和怀怀孕孕预预测测VISA信用用卡卡与与商商户户推推荐荐股票票投投资资智能能电电表表广告告投投放放中国国粮粮食食统统计计人的的数数字字化化阿里里信信用用贷贷款款和和淘淘宝宝数数据据魔魔方方UPS快递递的的最最佳佳行行车车路路径径《走走近近云云计计算算、、大大数数据据与与物物联联网网》》典型型的大大数据应应用实例例从谷谷歌歌流流感感趋趋势势看看大大数数据的应应用用价价值值“谷谷歌歌流流感感趋趋势势””，，通通过过跟跟踪踪搜索索词词相相关关数数据据来来判判断断全全美美地地区区的的流流感感情情况况《走走近近云云计计算算、、大大数数据据与与物物联联网网》》大数数据的的影响•大数数据据对对行行业业发发展展的的影影响响•大数数据据对对思思维维方方式式的的影影响响全样样而而非非抽抽样样效率率而而非非精精确确相关关而而非非因因果果《走走近近云云计计算算、、大大数数据据与与物物联联网网》》大数数据的的影响：：对科学学研究的的影响图灵灵奖奖获获得得者者、、著著名名数数据据库库专专家家JimGray博士士观观察察并并总总结结人人类类自自古古以以来来，，在在科科学学研研究究上上，，先先后后历历经经了了实实验验、、理理论论、、计计算算和和数数据据四四种种范范式式实验验《走走近近云云计计算算、、大大数数据据与与物物联联网网》》理论论计算算数据据大数数据无无处不在在科学学研研究究–基因因组组–LHC加速速器器–地球球与与空空间间探探测测企业应应用–Email、文档档、文文件–应用日日志–交易记记录Web1.0数据–文本–图像–视频Web2.0数据–查询日日志/点击流流–Twitter/Blog/SNS–Wiki《走近近云计计算、、大数数据与与物联联网》》大数据的四个特征征《走近近云计计算、、大数数据与与物联联网》》Volume—数量大大根据IDC作出的的估测测，数数据一直都在以每年50%的速度增长，也就是说每两年就增长一倍（大数据据摩尔尔定律律）人类在在最近近两年年产生生的数据量相当于之前产生的全部数据量量预计到2020年年，全全球将总共拥有35ZB的数据量，相较于2010年，数据量将增长近30倍《走近近云计计算、、大数数据与与物联联网》》Velocity—速度快从数据据的生生成到到消耗耗，时时间窗窗口非非常小小，可可用于于生成成决策策的时时间非非常少少1秒定律律：这这一点点也是是和传传统的的数据据挖掘掘技术术有着着本质质的不不同《走近近云计计算、、大数数据与与物联联网》》Variety——多样化大数据据是由由结构构化和和非结结构化化数据据组成成的–10%的结构构化数数据，，存储储在数数据库库中–90%的非结结构化化数据据，它它们与与人类类信息息密密切相相关非结构构化数数据类类型多多样–邮件、、视频频、微微博–位置信信息、、链接接信息息–手机呼呼叫、、网页页点击击–―长微博博”《走近近云计计算、、大数数据与与物联联网》》Value—价值化化价值密密度低低，商商业价价值高高以视频频为例例，连连续不不间断断监控控过程程中，，可能能有用用的数数据仅仅仅有有一两两秒，，但是是具有很很高的的商业业价值值《走近近云计计算、、大数数据与与物联联网》》大数据的产生运营式系统阶段1用户原创内容阶段段2感知式系统阶段3•数据库库的出出现使使得数数据据管理理的复复杂度度大大大降降低，数据据往往往伴伴随着着一定定的运运营营活动动而产产生并并记录录在在数据据库中中的，数数据的的产生生方式式是被被动动的•数据爆爆发产产生于于Web2.0时代，，而Web2.0的最重重要标志就就是用用户原原创内内容容•智能手手机等等移动动设备备加加速内内容产产生•数据产产生方方式是是主动动的的•感知式式系统统的广广泛使使用用•人类社社会数数据量量第三三次次大的的飞跃跃最终终导导致了了大数数据的的产生生《走近近云计计算、、大数数据与与物联联网》》大数据与云计算大数据据与云云计算算是相相辅相成的大数据据根植植于云云计算算–云计算算关键键技术术中的的海量量数据据存储储技术术、海海量数数据管管理技技术、、MapReduce编程模模型，，都是是大数数据技技术的的基础础大数据据为云云计算算提供供用武之地《走近近云计计算、、大数数据与与物联联网》》大数据与物联网物联网网就是是“物物物相相连的互联网”。物联网通过智能感知、识别技术与普适计算、泛在网络的融合应应用用，被被称为为继计计算机机、互联网之后世界信息产业发展的第三次浪潮物联网网架构构可分分为三三层，包括感知层、网络层和应用层物联网网，移移动互互联网网再加上传统互联网，每天都在产生海量数据，而大数据又通过云计算的形式，将将这这些数数据筛筛选处处理分分析，提取出有用的信息，这就是大数据分析。《走近近云计计算、、大数数据与与物联联网》》大数据关键键技术分布式式存储储GFS\HDFS\BigTable分布式式处理理MapReduce大数据据《走近云计计算、大数数据与物联联网》Google公司的技术术《走近云计计算、大数数据与物联联网》Hadoop的体系结构HDFS和MapReduce是Hadoop的两大核心心。而整个个Hadoop的体系结构主要要是通过HDFS来实现对分分布式存储储的底层支支持的，并且它会通过MapReduce来实现对分分布式并行行任务处理的程序支持。《走近云计计算、大数数据与物联联网》大数据在企业中的应用基于客户行行为分析的的产品推荐荐基于客户评评价的产品品设计基于数据分分析的产品品定价基于数据分分析的广告告投放基于客户异异常行为的的客户流失失预测基于社区热热点的趋势势预测和病病毒式营销销基于环境数数据的外部部形势分析析基于物联网网数据分析析的产品生生命周期管管理《走近云计计算、大数数据与物联联网》总结《走近云计计算、大数数据与物联联网》大数据无处处不在，是是变革经济的力量大数据是多多种技术的的集合，不只是数据大数据与云云计算相辅辅相成Google公司在大数数据时代引领技术Hadoop成为事实上上的大数据处理标准提纲物联网时代代《走近云计计算、大数数据与物联联网》什么是物联联网物联网应用用领域物联网关键键技术物联网在企企业中的应应用物联网未来来的前景展展望物联网时代2012我国物联网网行业继续保持快速发展势头，总产值超过3650亿元，同比增长率超过38%。工信部正式发布《物联网““十二五”发展规划》。《走近云计计算、大数数据与物联联网》物联网时代福州信息识别产业基地泉州通信传输产业基地厦门闽台云计算产业基地南平示范区区平潭示范区区鼓楼示范区区马尾示范区区三大产业基基地四大大示范区福建物联网网基地分布布图《福建省加加快物联网网发展行动方案案（2013-2015年）》2015年形成千亿亿产业规规模《泉州市创创建国家物物联网重重大应用示示范工程区区域试点点工作方案案》到2015年末，全市市物联网产产业规模模超300亿元《走近云计计算、大数数据与物联联网》什么是物联网物联网就是是物物相连连的互联网网，是互联联网的延伸伸，它包括括互联网及及互联网网上所有的的资源，兼兼容互联网网所有的应应用。物联网是利利用局部网网络或互联联网等通信信技术把传传感器、控控制器、机机器、人员和和物等通过过新的方式式联在一起起，形成人人与物、物物与物相联联，实现现信息化、、远程管理理控制和智智能化的网网络。《走近云计计算、大数数据与物联联网》物联网层次架构从技术架构构上来看，，物联网可可分为三层：感知层、网络层和应用层。感知层：由各种传传感器以及及传感器网关构成，包括二氧化碳浓度传感器、温度传感器、、湿度传感感器、二维维码标签、、RFID标签和读写器、摄像头、GPS等感知终端。感知层的作用用相当于人人的眼耳鼻鼻喉和皮肤等神经末梢，它是物联网识别物体、采集信息的来源，，其主要功功能是识别别物体，采集信息。网络层：由各种私私有网络、、互联网、有线和无线通信网、网络管理系统和云计算平台等等组成，相相当于人的的神经中枢枢和大脑，负责传递和处理感知层获取的信息。应用层：是物联网网和用户（（包括人、组织和其他系统）的接口，它与行业需求结合，实现物联联网的智能能应用。《走近云计计算、大数数据与物联联网》物联网应用领域智能工业智慧农业智能电网智能交通智能物流环保监测健康医疗智能家居智能安防物联网《走近云计计算、大数数据与物联联网》物联网应用领域智能电网智能电网是是以包括各各种发电设备、输配电网络、用电设备和储能设备备的物理电网为基础，将现代先进的传感测量技术、网络技术、通讯技技术、计算算技术、自动化与智能控制技术等与物理电网高度集成成而形成的的新型电网网，它能够实现可观测（能够监测电网所有设备备的状态））、可控制制（能够控制电网所有设备的状态）、完全自动动化（可自自适应并实实现自愈）和系统综合优化平衡（发电、输配电电和用电之间的优化平衡），从而使电力系统更加清洁、高效、安全、、可靠。智能工业业智能工业业是将具具有环境境感知能力的各类终端、基于泛在技术的计算模式、、移动通信等不断融入到工业生产的各个环节，大幅提高制造效率，改善产品品质量，，降低产产品成本和资源消耗，将传统工业提升到智能化的新新阶段。。总的来来说，智能工业的实现是基于物联网技术的渗透和应用，，并与未未来先进进制造技术相结合，形成新的智能化的制造体系。《走近云云计算、、大数据据与物联联网》物联网应用领域智慧农业