学习的时候没有太过注意Shuffle这个概念，以至于还认为是不是漏掉了什么知识点，前面看了一些帖子才发现Shuffle原来是map()办法执行完结到reduce()办法执行这么一大段过程….小声BB：本质上该过程蕴含许多环节，不晓得为啥就统称Shuffle了……

学习的时候没有太过注意Shuffle这个概念，以至于还认为是不是漏掉了什么知识点，前面看了一些帖子才发现Shuffle原来是map()办法执行完结到reduce()办法执行这么一大段过程….小声BB：本质上该过程蕴含许多环节，不晓得为啥就统称Shuffle了……

背景：由于涉及到 Flink 的学习，想在本机装个测试环境。这里记录下用 VMWare 搭建 hadoop 集群的坑。

[链接]

YARN在Hadoop中的功能作用有两个，第一是负责Hadoop集群中的资源管理(resource management)，第二是负责对任务进行调度和监控(scheduling/monitoring)。YARN分别提供了相应的组件完成这两项工作。