Ubuntu Hadoop 集群故障排除指南

以下是Ubuntu Hadoop集群故障排除指南：

1. 检查进程：用jps命令查看Hadoop各组件进程是否正常运行。
2. 查看日志：查看/var/log/hadoop-*目录下相关日志文件，用tail、grep等命令分析错误信息。
3. 检查网络：用ping命令测试节点间连通性，检查/etc/hosts文件配置是否正确，确保防火墙允许Hadoop所需端口。
4. 检查配置文件：确认core-site.xml、hdfs-site.xml、yarn-site.xml等配置文件路径正确，配置项无误。
5. 检查系统资源：用top、htop、iostat等命令监控CPU、内存、磁盘I/O等资源使用情况，确保资源充足。
6. 检查磁盘空间：确保HDFS数据节点有足够磁盘空间。
7. 验证集群状态：用hdfs dfsadmin -report查看HDFS状态，用yarn node -list查看YARN节点状态。