https://i.ancii.com/lisongjia123/
拂晓 lisongjia123
Ta还没有发布动态 ...
Java version: 11, vendor: Oracle Corporation, runtime: D:\Tools\jdk-11. OS name: "windows 10", version: "10.0&quo
当client提交一个任务后,首先resourceManger来调度出一个container,这个container是在nodeManger运作的, client直接和这个container所在的NM进行通信,在这个container中启动applicat
了解mapreduce的工作机制,对编写mapreduce高级编程奠定基础。mapreduce确保每个reducer的输入都是按键排序的。
1\ client 会执行inputformat 的getsplit ,write 成文件,然后提交job 包含资源。3\ AM 接受,找RM 要资源 找NODENAMAGER 要 container 搞起。。。。。总体上来说,这些运行模式都基于一个相似的
在MapReduce1.x下的架构:MapReduce:Master/Slave架构,1个JobTracker带多个 TaskTracker. 由于在MapReduce1.x的架构加只能跑MapReduce,所以想要用其他的计算框架就必须在搭建支持其他计算
0 关注 0 粉丝 0 动态
Copyright © 2013 - 2019 Ancii.com
京ICP备18063983号-5 京公网安备11010802014868号