2023学年完整公开课版HDFS角色分析_第1页
2023学年完整公开课版HDFS角色分析_第2页
2023学年完整公开课版HDFS角色分析_第3页
2023学年完整公开课版HDFS角色分析_第4页
2023学年完整公开课版HDFS角色分析_第5页
已阅读5页，还剩5页未读， 继续免费阅读

下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

文档简介

HDFS角色分析1.掌握HDFS的NameNode

2.掌握HDFS的DataNode

3.掌握HDFS的SecondaryNameNode

4.掌握客户端的概念1.

NameNode

2.

DataNode

3.

SecondaryNameNode

4.客户端主要功能：接受客户端的读写服务NameNode硬件要求：计算能力强稳定性高元数据管理：只存在内存中（edits.log）持久化（fsimage）文件系统结构及文件属性文件ownership、permissions、大小、时间Block列表及位置信息NameNode廉价机，硬件要求低以本地文件的形式存储数据（Block）存储Block的元数据信息DN启动时会向NN汇报block信息向NN发送心跳保持与其联系（3秒一次），如果NN10分钟没有收到DN的心跳，则认为其已经lost，并copy其上的block到其它DNDataNodeSecondaryNameNode它不是NN的备份（但可以做备份），它的主要工作是帮助NN合并editslog，减少NN启动时间。SNN执行合并时机根据配置文件设置的时间间隔fs.checkpoint.period默认3600秒•根据配置文件设置editslog大小fs.checkpoint.size规定edits文件的最大值默认是64MB 进行数据块的物理切分向namenode发送读写请求向namenode发送读写响应客户端1.NameNode

--内存存储、处理客户端请求、metadata

2.DataNode

--Block存储、

人人文库> 全部分类> 教育资料 > 辅导培训

温馨提示

  • 1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论