4.4 YARN 高级特性与扩展

文档摘要

4.4 YARN 高级特性与扩展 4.4 YARN 高级特性与扩展 4.4.1 节点标签与资源分区 (Node Labels and Resource Partitioning) 在大型 Hadoop 集群中，往往存在多种类型的节点，例如配备 GPU 的节点、拥有高速 SSD 的节点、或者专门用于特定类型计算任务的节点。为了更好地利用这些异构资源，并实现工作负载隔离，YARN 引入了节点标签 (Node Labels) 和资源分区 (Resource Partitioning) 特性。概念解释: 节点标签 (Node Labels): 管理员可以为集群中的节点打上标签，例如 "gpu"、"ssd"、"high-memory" 等。这些标签是对节点硬件或软件特性的描述。