MapReduce 2 without YARN

Question

考虑到 YARN 是运行 mapreduce2 的更好选择，但是是否可以在没有 YARN 的情况下运行 MR2？我尝试使用 MR2，但它使用 YARN 运行。

Answer 1

MRv2 实际上是 YARN！所以，不，你不能在没有 YARN 的情况下运行 mapreduce2 作业！

官方文档 ：

Apache Hadoop NextGen MapReduce （YARN）

MapReduce在Hadoop-0.23中经历了彻底的改革，我们现在 有，我们称之为MapReduce 2.0（MRv2）或YARN。

MRv2的基本思想是将两个主要分开 作业跟踪器的功能、资源管理和作业 调度/监视，到单独的守护程序中。这个想法是有一个 全局资源管理器 （RM） 和每个应用程序的应用程序主控 （上午）。应用程序是经典意义上的单个作业 映射归约作业或作业的 DAG。