Debian下Hadoop故障排查方法如下:
HADOOP_HOME/logs
目录,用tail -f
实时查看或grep
搜索错误信息。tail -f /var/log/syslog
、dmesg
或journalctl
查看。jps
确认NameNode、DataNode等核心进程是否正常运行。ps aux
查看进程资源占用情况。ping
测试节点间网络连通性,检查防火墙是否放行必要端口。core-site.xml
、hdfs-site.xml
等配置正确,重点关注路径、端口等参数。top
、htop
、iostat
、vmstat
监控CPU、内存、磁盘I/O,定位性能瓶颈。stop-all.sh
)再启动(start-all.sh
)Hadoop服务,解决临时故障。fsck
检查修复文件系统。操作前建议备份重要数据,若问题仍未解决可参考具体错误日志进一步分析。