MapReduce提交到Yarn上大体执行流程

MapReduce提交到Yarn上大体执行流程

创新互联建站-云计算及IDC服务提供商,涵盖公有云、IDC机房租用、电信内江机房、等保安全、私有云建设等企业级互联网基础服务,服务电话:18980820575

  1. 启动申请提交一个job(wordcount.jar和程序中的配置参数和数据切片规划文件)运行进程为runjar

  2. ResouceManager 会在一台节点NodeManager上先启动客户提交的wordcount.jar的主管进程MRAppMasster

  3. 由主管进程(MRAppMasster)根据启动规则启动mapTask任务(yarnChild进程).如果所有mapTask任务运行结束.MRAppMasster进程会启动Reduce Task任务(yarnChild进程)


当前标题:MapReduce提交到Yarn上大体执行流程
浏览地址:http://csdahua.cn/article/jgdhge.html
扫二维码与项目经理沟通

我们在微信上24小时期待你的声音

解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流