OneFS 尝试使用 Apache Hadoop YARN 节点标签功能失败

原因

解决方案

• OneFS 7.2.1.2

  • 实施下面提供的解决方法

• OneFS 7.2.1.1

  • 首先应用 patch-164059，然后实施下面提供的解决方法

解决方法

实施以下解决方法，以手动创建和使用驻留在 OneFS 群集而不是 HDFS 群集上的 YARN 节点标签目录。  提醒：如果您在 GitHub 上运行了 isilon_hadoop_tools 脚本，则无需遵循此解决方法，因为脚本会自动创建正确的目录并获得权限。

步骤 1。准备 OneFS 以存储节点标签信息
在 OneFS 群集上执行以下步骤。
注意：在以下过程中，HDFS_ROOT_DIR指的是 OneFS 群集上的 HDFS 根目录。

1. 在 OneFS 上创建新目录以托管节点标签存储。
   • mkdir -p HDFS_ROOT_DIR/system/yarn/node-labels
2. 确认用户纱线存在。注意：如果您尚未创建名为 yarn 的用户，请立即创建一个。  有关创建用户的信息，请参阅 IsilonOneFSCLI 管理指南的管理本地用户和组部分。
   • isi auth users list
3. 使用户 yarn 成为新目录的所有者。
   • chown 纱线 HDFS_ROOT_DIR/system/yarn/node-labels
4. 更改目录的权限级别以允许所有者读取、写入和执行。
   • CHMOD 700 HDFS_ROOT_DIR/系统/纱线/节点标签

1. 使用浏览器登录到 HDFS 群集上的 Ambari Manager。
2. 从 Ambari 控制面板的顶部横幅中，单击 服务。
3. 在左侧面板中，单击 YARN。
4. 单击 Configs 选项卡。
5. 单击Settings（设置）选项卡。
6. 在“ YARN Features”下，确认节点标签为“Enabled”。
7. 单击 Save。
8. 单击 高级 选项卡。
9. 展开 Advanced yarn-site 部分。
10. 在 yarn.node-labels.fs-store.root-dir 字段中，确认列出了默认的 /system/yarn/node-labels。
11. 单击 Save。