YARN

Apache Hadoop YARN (Yet Another Resource Negotiator) 是 Hadoop 中负责管理资源并在集群上运行作业的部分。它有一个 ResourceManager 控制所有集群资源，每个作业都有一个 ApplicationMaster 负责调度和运行任务。YARN 允许 MapReduce 和 Spark 等不同工具共享同一个集群，使其更高效、灵活和可靠。