Ubuntu Hadoop安全设置方法

以下是在Ubuntu上设置Hadoop安全性的关键方法：

1. 启用Kerberos认证

   • 安装Kerberos服务端和客户端：sudo apt-get install krb5-kdc krb5-admin-server krb5-user。
   • 配置/etc/krb5.conf，设置默认领域（如EXAMPLE.COM）和KDC服务器地址。
   • 为Hadoop服务创建主体（如hdfs/hostname@EXAMPLE.COM）并生成Keytab文件，配置到hdfs-site.xml中。
   • 在core-site.xml中设置hadoop.security.authentication=kerberos。

2. 配置HDFS权限管理

   • 使用hdfs dfs -chmod和hdfs dfs -chown命令设置文件/目录权限，限制用户访问范围。
   • 启用HDFS权限检查：在hdfs-site.xml中设置dfs.permissions.enabled=true。

3. 限制用户权限

   • 避免直接使用root用户运行Hadoop，创建专用用户（如hadoop）并添加到sudo组。
   • 通过sudo visudo限制用户仅能执行必要命令，避免权限滥用。

4. 加密传输与防火墙

   • 启用SSL/TLS加密数据传输（需配置hadoop.ssl.enabled=true及相关证书）。
   • 配置防火墙（如ufw）限制Hadoop节点间通信端口（如HDFS默认9000、YARN默认8088），仅允许信任IP访问。

5. 审计与监控

   • 启用Hadoop审计日志（如hadoop.audit.logger配置），记录用户操作。
   • 定期检查HDFS权限配置和用户账户状态，清理冗余权限。

参考来源：