2023学年完整公开课版NameNode启动过程_第1页
2023学年完整公开课版NameNode启动过程_第2页
2023学年完整公开课版NameNode启动过程_第3页
2023学年完整公开课版NameNode启动过程_第4页
2023学年完整公开课版NameNode启动过程_第5页
已阅读5页，还剩7页未读， 继续免费阅读

下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

文档简介

朱佳目录0102NameNode启动过程安全模式NameNode启动过程1NameNode启动过程理解NameNode如何启动对理解NameNode操作的性质有很大的帮助。NameNode的一个关键功能是让应用程序知道它们需要处理的数据块。它通过保持块位置和块到文件的映射在内存中维护对所有数据块的准确位置的访问。NameNode启动过程当启动NameNode时，会执行以下操作:1.NameNode将其拥有的映像文件的内容读入内存,从而获得HDFS文件系统状态。2.NameNode加载编辑日志并重放编辑日志(编辑日志段中的事务)以更新其在步骤1中加载到内存中的元数据。3.NameNode使用更新的HDFS状态信息更新fsimage文件。NameNode启动过程4.NameNode开始使用一个新的空的编辑文件。5.DataNode守护程序连接到NameNode并发送其报告，该报告列出DataNode存储的所有数据块。NameNode启动过程一旦启动过程完成，NameNode即完全了解了HDFS数据，并且此时可以开始向客户端提供HDFS数据。当HDFS数据被修改时，编辑日志随信息更新，并且NameNode存储在RAM中的块位置和元数据也随之更新。这里要理解的关键点是，NameNode将所有命名空间更改写入编辑日志，但它在运行时不会将这些更改合并到fsimage文件。安全模式2安全模式安全模式是集群的一种状态。安全模式下，集群属于只读状态。但是严格来说，只是保证HDFS元数据信息的访问，而不保证文件的访问，因为文件的组成Block信息此时NameNode还不一定已经知道了。所以只有NameNode已了解了Block信息的文件才能做到。而安全模式下任何对HDFS有更新的操作都会失败。对于全新创建的HDFS集群，NameNode启动后不会进入安全模式，因为没有Block信息。安全模式安全模式的相关命令：查询当前是否处于安全模式 hadoopdfsadmin-safemodeget等待SafeMode关闭，以便后续操作hadoopdfsadmin-safemodewait安全模式退出安全模式hadoopdfsadmin-safemo

人人文库> 全部分类> 教育资料 > 辅导培训

温馨提示

  • 1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论