分布式文件系统对比_第1页
分布式文件系统对比_第2页
分布式文件系统对比_第3页
分布式文件系统对比_第4页
分布式文件系统对比_第5页
已阅读5页，还剩21页未读， 继续免费阅读

下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

文档简介

1、1分布式文件系统对比基础应用组郑主能 体系结构-FastDFS4Tracker对等组内Storage对等体系结构-MooseFS5体系结构-HDFS6I/O流程-FastDFS7文件上传I/O流程-FastDFS8文件下载I/O流程-MooseFS9I/O流程-MooseFS10I/O流程-HDFS11Write ProcessI/O流程-HDFS12Read Process数据存储-FastDFS13Storage Group1Storage Group2push/syncpush/syncABABABABABABABABABGetStorehttp数据存储-MooseFS,HDFS14Ch

2、unckServer / DataNodesABa1GetStoreb2b33 blocks3 blocksa2a2a3a1 a2a3b1b3b1b2b3a1b2b3a2a2a3b1b2b3a1 a2a3b1b3piping/syncpiping/syncBAa2a1a3b3b1b2ChunckServer / DataNodesMooseFS支持支持fuse，HDFS支持支持http,rcp,容灾能力适用场景参考文献201 袁晨阳.2 陈海涛,袁晨阳.3 郑海洪.4 郑海洪.5 郑海洪.6 未知.7 刘景龙.8 Tom White . 9 Chuck Lam . 附录-比较详情Q&A24L

3、Q: 不同的文件(或文件块)的副本数是否可以不同，还是所有文件的副本数都是一样的J A: 可以不同L Q: 似乎HDFS完全可以代替MooseFS，公司目前选用MooseFS的考虑点主要有哪些J A: 作为单纯的存储，MooseFS在均衡调配的精度上比HDFS密，各个机器的数据大小基本持衡L Q: 目前对这些文件系统的细节研究部分尚缺乏相关文档，如日志文件分析、数据存储块的结构、日志是如何进行合并和恢复的，或者说缺乏一个技术手册J A: 有技术文档，但需申请L Q: NameNode/Master会定时将内存中的元数据刷新到metadata.mfs.back中，是增量刷新，还是全量刷新J A: 全量刷Q&A25L Q: FastDFS中的client是如何选择tracker的，以及tracker是如何选择Storage Server的J A: 选择tracker通过轮询，tracker选择storage有三种方式：a. 轮询b. 指定某一Serverc. 最大存储空间L Q: MooseFS/HDFS在写一个分块时，是所有分块副本写完算

人人文库> 全部分类> 教育资料 > 课件下载

温馨提示

  • 1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论