![云计算与大数据技术 课件9.4YARN概述_第1页](http://file4.renrendoc.com/view5/M00/05/16/wKhkGGaOU0KAL0BNAAA59S9r-H8472.jpg)
![云计算与大数据技术 课件9.4YARN概述_第2页](http://file4.renrendoc.com/view5/M00/05/16/wKhkGGaOU0KAL0BNAAA59S9r-H84722.jpg)
![云计算与大数据技术 课件9.4YARN概述_第3页](http://file4.renrendoc.com/view5/M00/05/16/wKhkGGaOU0KAL0BNAAA59S9r-H84723.jpg)
![云计算与大数据技术 课件9.4YARN概述_第4页](http://file4.renrendoc.com/view5/M00/05/16/wKhkGGaOU0KAL0BNAAA59S9r-H84724.jpg)
![云计算与大数据技术 课件9.4YARN概述_第5页](http://file4.renrendoc.com/view5/M00/05/16/wKhkGGaOU0KAL0BNAAA59S9r-H84725.jpg)
版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
YARN概述YARN简介YARN(YetAnotherResourceNegotiator,另一种资源协调者)是一个通用资源管理系统和调度平台,可以为上层应用提供统一的资源管理和调度,它的引入为集群在资源利用率、资源统一管理和数据共享等方面带来了巨大的好处。基于YARN的计算框架YARN与运行的用户程序完全解耦,只提供运算资源的调度,即用户程序向YARN申请资源,YARN负责分配资源。在YARN上,可以运行各种类型的分布式运算程序YARN的特点(1)资源管理与计算框架解耦设计,将一个集群资源共享给上层各个计算框架,并按需分配,大幅度提高资源利用率。(2)运维成本显著下降,只需要运维一个集群,就可以同时运行满足多种业务需求的计算框架。(3)集群内数据共享一致,数据不再需要在集群间复制转移,达到共享互用的目的。(4)避免了单点故障集群资源扩展的问题。YARN的基本框架YARN的基本框架基本框架由一个ResourceManager与多个NodeManager组成,构成了一个新的通用系统,实现了以分布式管理应用程序的系统。ResourceManager负责对全局资源进行统一的管理和调度。每个应用程序对应一个ApplicationMaster,YARN会为每个任务分配一个Container,且该任务只能使用该Container中描述的资源。YARN的工作流程在YARN-Cluster模式中,当客户端向YARN提交一个应用程序后,YARN将分两个阶段运行该应用程序。第一个阶段是为应用程序创建一个ApplicationMaster并启动;第二个阶段是由ApplicationMaster创建应用程序,将作业拆解成多个任务(Task),为每
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2024-2030年中国橱柜台面行业市场发展趋势与前景展望战略分析报告
- 2024-2030年中国橡胶底帆布鞋行业竞争状况及销售前景预测报告
- 2024-2030年中国槟榔果行业营销动态及竞争格局分析报告
- 2024-2030年中国棒球击球训练辅助器材行业市场发展趋势与前景展望战略分析报告
- 2024-2030年中国梯子稳定器行业应用状况与投资盈利预测报告
- 2024-2030年中国栎樱酸行业现状调查与发展前景策略分析研究报告
- 2024-2030年中国柱式悬臂起重机行业市场发展趋势与前景展望战略分析报告
- 2024-2030年中国杀鼠剂行业市场发展趋势与前景展望战略分析报告
- 2024-2030年中国果乳行业市场发展分析及发展趋势与投资战略研究报告
- 2024-2030年中国机场照明行业市场发展趋势与前景展望战略分析报告
- 部编版道德与法治一年级上册全册课件
- 1276小学网络安全教育PPT
- 一 《七律二首 送瘟神》(教学设计)-【中职专用】高二语文精讲课堂(高教版2023·职业模块)
- Python程序设计完整全套教学课件
- 新教科版五年级科学上册全册课件(精品PPT)
- 《血糖监测》PPT课件(完整版)
- 国家电网公司电缆及通道运维管理规定
- 四渡赤水PPT课件
- 表格式教学设计模板
- (最新整理)潜能生转化情况记录表1
- 汉字书法课件模板:儒_草书32种写法
评论
0/150
提交评论