Hadoop学习之YARN(YARN工作机制)心得

YARN 工作机制(步骤):
        1. Mr 程序提交到客户端所在的节点
        (集群模式创建了 YarnRunner,本地模式是LocalRunner)
        2. 向 RM 申请一个Application
        3. RM 把要提交的job放到Application资源提交的路径上
        4. 提交 job 运行所需要的资源(Job.split,Job.xml,wc.jar)
        5. 资源提交完毕,申请运行 mrAppMaster
        6. 将用户的请求初始化成一个Task,并将其放入调度队列中
        7. NM 领取到Task任务
        8. 创建容器 Container
        9. 下载 job 资源到本地
        10. 申请运行 MapTask 容器(根据切片信息申请开启的 MapTask 数量)
        11. 领取到任务,创建容器
        12. 发送程序启动脚本(启动 M

Hadoop学习之YARN(YARN工作机制)心得最先出现在Python成神之路

版权声明:
作者:ht
链接:https://www.techfm.club/p/24357.html
来源:TechFM
文章版权归作者所有,未经允许请勿转载。

THE END
分享
二维码
< <上一篇
下一篇>>