Ubuntu HDFS权限设置怎么做 - 问答

Ubuntu 上 HDFS 权限设置实操指南

一前置准备与模式确认

确认权限检查已开启：在 HDFS 配置 hdfs-site.xml 中确保 dfs.permissions.enabled=true；如需使用更细粒度授权，开启 dfs.namenode.acls.enabled=true。修改后需重启 NameNode/DataNode 生效。
统一身份：普通模式集群可用环境变量临时指定操作用户，例如 export HADOOP_USER_NAME=omm；启用 Kerberos 的集群需先执行 kinit 组件业务用户 完成认证。
安全模式：权限变更前后注意 安全模式 状态，必要时执行 hdfs dfsadmin -safemode leave 退出只读状态。
用户组映射：若需对接 LDAP/AD，在 core-site.xml 设置 hadoop.security.group.mapping=org.apache.hadoop.security.LdapGroupsMapping 并配置 LDAP 连接参数，使 HDFS 能解析外部用户组。

二常用 HDFS 权限命令

查看权限与属主：
- 列表查看：hdfs dfs -ls /path
- 查看 ACL：hdfs dfs -getfacl /path
修改权限、属主、属组：
- 权限：hdfs dfs -chmod [-R] 755 /path
- 属主/属组：hdfs dfs -chown [-R] owner:group /path
- 仅改组：hdfs dfs -chgrp [-R] group /path
默认权限与 umask：
- 查看/调整默认掩码：fs.permissions.umask-mode（默认 022）。例如设置为 007 可使新建文件默认仅对同组开放写权限（符号法：u=rwx,g=rwx,o=）。
目录粘滞位：
- 对共享目录（如 /user）设置 1777，仅所有者或 root 可删除或重命名他人文件：hdfs dfs -chmod 1777 /user。
典型示例：
- 新建业务目录并授权：
  - hdfs dfs -mkdir -p /user/alice
  - hdfs dfs -chown alice:data /user/alice
  - hdfs dfs -chmod 750 /user/alice
- 为特定用户追加写权限：
  - hdfs dfs -setfacl -m user:bob:rw /user/alice
- 查看结果：
  - hdfs dfs -ls /user/alice
  - hdfs dfs -getfacl /user/alice

三常见场景与推荐权限

共享目录（如 /user）：建议 1777（含粘滞位），保证多用户可创建，但仅所有者可删除自己文件。
历史任务目录（如 /mr-history、/mr-history/tmp、/mr-history/done）：常用 777，便于作业历史读写与清理。
系统目录（如 /user/mapred）：建议 755，仅属主与同组可写。
业务目录（如 /user/<业务用户>）：建议 750，同组可读执行，其他无权限。
默认权限控制：通过 fs.permissions.umask-mode 统一新建文件/目录的默认权限，减少后续逐条 chmod 的工作量与风险。

四进阶与排错

细粒度授权：当 UGO 不足时，使用 ACL 为特定用户/组授予额外权限（如 hdfs dfs -setfacl -m user:u1:rwx /data），并用 -getfacl 校验。
超级用户与属主变更：普通用户无法更改文件属主；需切换到 hdfs 超级用户或具备相应权限的代理用户执行 chown/chgrp。
权限不生效排查：
- 确认 dfs.permissions.enabled=true 且集群已退出 安全模式；
- 检查是否启用 Kerberos 且已完成 kinit；
- 若对接 LDAP，确认 group mapping 正确、用户组可解析；
- 校验 ACL 是否已覆盖所需权限。

五安全加固建议

0 赞

0 踩