CentOS HDFS如何进行权限管理

在 CentOS 上管理 HDFS 权限时，主要依赖于 HDFS 自身的权限模型（类似于 Linux 文件系统），并结合用户/组管理工具。以下是详细的权限管理方法：

1. HDFS 权限模型

用户和组：HDFS 使用 Linux 系统的用户名和组名（需与运行 Hadoop 服务的用户一致）。
权限类型：
- 读（r）：查看文件内容或目录列表。
- 写（w）：创建/删除文件或修改文件内容。
- 执行（x）：访问目录的子项（仅对目录有效）。
权限格式：与 Linux 类似，如 drwxr-xr-x，分为：
- 所有者权限：前 3 位（例如 rwx）。
- 所属组权限：中间 3 位（例如 r-x）。
- 其他用户权限：后 3 位（例如 r-x）。

2. 基础配置

确保 HDFS 权限检查已启用（默认通常为 true）：

<!-- 修改 hdfs-site.xml -->
<property>
  <name>dfs.permissions.enabled</name>
  <value>true</value>
</property>

3. 常用权限管理命令

3.1 修改文件/目录权限 (`chmod`)

# 设置目录 /data 的权限为 750（所有者：rwx，组：r-x，其他用户：无权限）
hdfs dfs -chmod 750 /data

# 递归修改目录及其子项权限
hdfs dfs -chmod -R 755 /data

3.2 修改所有者 (`chown`)

# 将 /data 的所有者改为用户 hadoop，组改为 hdfs
hdfs dfs -chown hadoop:hdfs /data

# 递归修改所有者
hdfs dfs -chown -R hadoop:hdfs /data

3.3 修改所属组 (`chgrp`)

hdfs dfs -chgrp hdfs /data

4. 高级权限：ACL（访问控制列表）

若需更细粒度的控制（例如为特定用户/组单独授权），需启用 ACL：

<!-- hdfs-site.xml -->
<property>
  <name>dfs.namenode.acls.enabled</name>
  <value>true</value>
</property>

4.1 设置 ACL

# 为用户 alice 添加读写执行权限
hdfs dfs -setfacl -m user:alice:rwx /data

# 为组 devs 添加读权限
hdfs dfs -setfacl -m group:devs:r-- /data

# 递归应用 ACL
hdfs dfs -setfacl -R -m user:alice:rwx /data

4.2 查看 ACL

hdfs dfs -getfacl /data

5. 用户/组映射

HDFS 默认使用 Linux 系统的用户和组。若需自定义映射（例如通过 LDAP），可配置：

<!-- core-site.xml -->
<property>
  <name>hadoop.security.group.mapping</name>
  <value>org.apache.hadoop.security.LdapGroupsMapping</value>
</property>

（需配置 LDAP 服务器参数，适用于企业级环境）