Ubuntu 如何解决 Hadoop 故障

以下是在Ubuntu上解决Hadoop故障的常用方法：

1. 检查服务进程：用jps命令查看NameNode、DataNode、ResourceManager等进程是否正常运行。
2. 查看日志文件：定位到$HADOOP_HOME/logs目录，用tail -f或grep分析错误日志，如hadoop-hdfs-datanode-*.log。
3. 验证配置文件：检查core-site.xml、hdfs-site.xml、yarn-site.xml等配置，确保参数（如IP、端口、路径）正确。
4. 测试网络连通性：用ping命令测试节点间网络，用netstat或ss检查端口监听状态（如HDFS的9000端口、YARN的8088端口）。
5. 检查磁盘空间与权限：用df -h查看磁盘空间，确保DataNode有足够空间；用ls -l确认HDFS数据目录权限正确。
6. 重启Hadoop服务：先停止服务（stop-all.sh），再启动（start-all.sh），或单独重启异常组件。
7. 排查防火墙与SSH：关闭防火墙或开放Hadoop所需端口（如9000、8088），确保节点间SSH无密码登录配置正确。
8. 使用Web界面监控：通过NameNode（http://namenode:50070）和ResourceManager（http://resourcemanager:8088）查看集群状态。
9. 分析性能瓶颈：用top、iostat、vmstat等工具监控CPU、内存、磁盘I/O，优化资源配置。

若问题仍未解决，可参考Hadoop官方文档或社区论坛（如Stack Overflow）寻求帮助。