联合NameNode的体系结构_第1页
联合NameNode的体系结构_第2页
联合NameNode的体系结构_第3页
联合NameNode的体系结构_第4页
联合NameNode的体系结构_第5页
已阅读5页，还剩5页未读， 继续免费阅读

下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

文档简介

主讲：朱佳目录01联合NameNode的体系结构联合NameNode的体系结构1联合NameNode的体系结构HDFS是Hadoop的存储组件，可以把它看作命名空间和存储服务的整体。存储服务称为块存储服务。命名空间包含HDFS存储系统一部分的文件、目录和数据块的信息。联合NameNode的体系结构块存储服务包括两个主要组件:物理存储和块管理。物理存储就是DataNode如何在底层Linux(或其他操作系统)文件系统上存储HDFS块。块管理是指与块相关的操作，例如创建、删除和修改数据块，以及复制和副本在集群节点之间的放置。联合NameNode的体系结构在非常大的Hadoop环境中，存在数以千计的具有数百万个文件和数据块的数据节点，存储量超过PB。在这种环境中，虽然可以通过添加新节点来扩展HDFS，但命名空间无法跟上存储的增长。单命名空间的吞吐量设计仅支持大约60000个任务。联合NameNode的体系结构联合体系结构中的每个命名空间都被分配一个块池，这是属于单个命名空间的一组特定的HDFS块。命名空间(元数据)及其块池一起被称为命名空间卷。联合NameNode的体系结构每个命名空间卷是一个自包含的管理单元，每个命名空间管理自己的块池，其能够为新块生成自己的块ID，而不与其他命名空间冲突。联合NameNode的体系结构如果其中一个联合NameNode失效，并且没有为其配置备用数据库，则无法访问属于该NameNode的命名空间的数据块。因此，NameNode服务的联合体系结构不会提供高

人人文库> 全部分类> 教育资料 > 课件下载

温馨提示

  • 1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论