5.5 YARN 资源管理与调度

文档摘要

5.5 YARN 资源管理与调度 5 YARN 资源管理与调度 5.1 YARN 简介 YARN（Yet Another Resource Negotiator）是 Hadoop 生态系统中的资源管理层。它在 Hadoop 集群中负责管理资源的分配和调度。YARN 的主要目标是为应用程序（如 MapReduce、Spark 等）提供一个通用的平台，以便它们能够共享资源，同时满足多种应用需求。 YARN 架构分为两个主要组件： ResourceManager：负责全局资源管理，决定如何分配集群资源。 NodeManager：负责在每个节点上管理资源使用情况，并与 ResourceManager 通信。 5.2 YARN 资源管理机制 5.2.