读书频道 > 网站 > 网页设计 > 深入理解Hadoop(原书第2版)
2.4.5 分步详解YARN请求
15-11-29    下载编辑
收藏    我要投稿   

本文所属图书 > 深入理解Hadoop(原书第2版)

本书详细地讲述了Hadoop生态圈中最为重要的几个组件。不仅介绍了Hadoop涉及的分布式理论基础知识,还着重讲解Hadoop系统的工程实践应用。为了深入浅出地讲述Hadoop各个组件的运行机理,作者使用了贴切的实战用例立即去当当网订购

当一个用户向Hadoop2.x框架提交了一份作业,YARN框架后台处理该请求(如图2-7所示)。
步骤如下:

1)一个客户端提交作业程序。该应用程序的类型确定了,就决定了使用何种应用程序管理器。

2)资源管理器协调资源,在一个节点上获取一个用于运行应用程序管理器实例的容器。

3)应用程序管理器在资源管理器中注册。注册之后,客户端就可以向资源管理器查询该应用程序管理器的详细信息了。客户端将会与应用程序管理器通信,应用程序管理器已经通过自己的资源管理器启动了。

4)在这个操作过程中,应用程序管理器通过资源请求与资源管理器协商资源。除了其他内容,一个资源请求包括被请求的容器所在的节点和该容器的详细说明(CPU核数量和内存大小)。

5)在启动的容器中运行的应用程序会通过该应用程序特定的协议向应用程序管理器汇报它的执行进度(有可能是远程的)。


 

6)通过应用程序特定的协议,客户端与应用程序管理器通信。客户端通过查询在步骤3中注册的资源管理器的信息就可以找到对应的应用程序管理器。

上面的步骤如图2-8所示:


 

当应用程序执行完毕,应用程序管理器就会从资源管理器中取消注册,作业占用的容器将会被释放回系统中。

点击复制链接 与好友分享!回本站首页
分享到: 更多
您对本文章有什么意见或着疑问吗?请到论坛讨论您的关注和建议是我们前行的参考和动力  
上一篇:1.3 功能
下一篇:1.5 小结
相关文章
图文推荐
JavaScript网页动画设
1.9 响应式
1.8 登陆页式
1.7 主题式
排行
热门
文章
下载
读书

关于我们 | 联系我们 | 广告服务 | 投资合作 | 版权申明 | 在线帮助 | 网站地图 | 作品发布 | Vip技术培训
版权所有: 红黑联盟--致力于做最好的IT技术学习网站