多图技术贴:深入浅出解析大数据平台架构_第1页
多图技术贴:深入浅出解析大数据平台架构_第2页
多图技术贴:深入浅出解析大数据平台架构_第3页
全文预览已结束

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

1、目录: ?什么是大数据? Hadoop 介绍-HDFS、MR、Hbase?大数据平台应用举例-腾讯?公司的大数据平台架构就像望远镜让我们能够感受宇宙,显微镜让我们能够观测微生物一样,大数据正在改变我们的生活以及理解世界的方式.大数据的4V特征-来源VolumeVarietyVelocityValue瞳丈 I Stij 优 £BF公司的大数据随着公司业务的增长,大量和流程、如:规那么相关的非结构化数据也爆发式增长.比1、业务系统现在平均每天存储 20万张图片,磁盘空间每天消耗100G;2、平均每天产生签约视频文件 6000个,每个平均250M ,磁盘空间每天消耗1T;三国里的大数据草船

2、借箭和大数据有什么关系呢?对天象的观察是基于一种对风、云、温度、 湿度、光照和所处节气的综合分析这些数据来源于多元化的非结构类型,并且数据量较大,只不过这些数据输入到的不是电脑, 而是人脑并最终通过计算分析 得出结论.Google分布式计算的三驾马车? Google用来解决数据存储的问题,采用 N多台廉价的电脑,使用冗余也就是 一份文件保存多份在不同的电脑之上的方式,来取得读写速度与数据平安并存的结果.? Map-Reduce说穿了就是函数式编程,把所有的操作都分成两类,map与reduce, map用来将数据分成多份,分开处理,reduce将处理后的结果进行归并,得到 最终的结果.? BigTable是在分布式系统上存储结构化数据的一个解决方案,解

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论