centos lnmp故障排查思路 - 问答

CentOS 上 LNMP 故障排查思路

一、快速定位与分层检查

明确现象与范围：记录时间、URL/接口、错误码/报错截图、影响用户/实例，优先判断是单机还是集群/多实例问题。
资源与连通性快检：
- 资源：top/htop、vmstat、iostat、df -h，关注CPU、内存、磁盘IO、磁盘空间是否耗尽。
- 连通：ping、traceroute、telnet/curl，验证端口开放与DNS解析。
进程与端口：确认Nginx、PHP-FPM、MySQL/MariaDB是否在运行并监听正确端口（如 80/443、9000 或 /run/php-fpm.sock、3306）。
配置与权限：核对监听地址/端口、用户与组、root 目录、SCRIPT_FILENAME、open_basedir等关键项；变更后先语法检查再重载。
日志优先：先看错误日志，再回溯访问日志与慢查询，避免盲目改动。
安全与变更：排查防火墙 firewalld/iptables、SELinux、最近变更/发布。

二、核心日志与关键文件位置

组件	关键日志	常见路径	重点排查项
Nginx	错误日志、访问日志	/var/log/nginx/error.log、/var/log/nginx/access.log	upstream 超时/502/504、权限与路径、listen/root/server_name 配置
PHP-FPM	错误日志、慢日志	/var/log/php-fpm/error.log（慢日志路径以 pool 配置为准）	进程耗尽/连接拒绝、cgi.fix_pathinfo、listen（端口或 socket）、pm.max_children、权限
MySQL/MariaDB	错误日志、慢查询日志	/var/log/mysql/error.log、/var/log/mysql/slow.log	启动失败/权限/磁盘、连接数/锁等待、慢查询
系统	内核与系统日志	/var/log/messages、/var/log/syslog、/var/log/kern.log	OOM、磁盘满、内核/网络异常

三、常见症状与处理要点

网站全站不可达或端口不通
- 检查服务状态与端口：systemctl status nginx php-fpm mysqld；确认firewalld/iptables放行 80/443；云主机检查安全组；DNS 解析是否正确。
Nginx 启动失败
- 语法检查：nginx -t；查看 /var/log/nginx/error.log；核对端口占用与配置文件语法/包含关系。
访问 PHP 页面直接下载或空白
- Nginx 未将 .php 交给 PHP-FPM：确认 location ~ .php$ 存在且包含 fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;；检查 root 与文件系统权限；确保 PHP-FPM 正在运行。
502 Bad Gateway / 504 Gateway Timeout
- 多为 PHP-FPM 不可用/过载/超时：查看 PHP-FPM 错误日志与 Nginx upstream 超时；适当调大 pm.max_children、request_terminate_timeout，并优化慢脚本。
数据库连接失败或“Too many connections”
- 检查 MySQL 错误日志与连接数；临时调大 max_connections；定位长事务/慢查询并优化索引。
磁盘写满或 Inode 耗尽
- df -h、df -i 确认；清理过大日志/临时文件，必要时扩容或轮转。

四、系统化排查命令清单

资源与系统
- 资源：top/htop、vmstat 1、iostat -x 1、df -h、df -i
- 端口与监听：ss -tulpen | grep -E ‘(:80|:443|:9000|:3306)’ 或 netstat -tulpen
服务状态与语法
- 状态：systemctl status nginx php-fpm mysqld；重启：systemctl restart/ reload
- 语法：nginx -t、php-fpm -t
日志与追踪
- 实时查看：tail -f /var/log/nginx/error.log /var/log/php-fpm/error.log /var/log/mysql/error.log
- 连通与解析：ping、traceroute、telnet/curl -Iv http://localhost/health
数据库快速检查
- 登录与状态：mysql -u root -p -e “SHOW STATUS LIKE ‘Threads_connected’;”
- 慢查询开关：mysql -e “SET GLOBAL slow_query_log=ON; SET GLOBAL long_query_time=1;”
权限与路径
- 目录与属主：ls -ld /usr/share/nginx/html /var/lib/php /run/php-fpm.sock
- SELinux：getenforce、setenforce 0（仅测试）；firewalld：firewall-cmd --list-ports

五、排障流程模板与后续优化

流程模板
1. 现象与范围 → 2) 资源快检 → 3) 进程/端口 → 4) 日志定位 → 5) 配置与权限 → 6) 网络与安全 → 7) 修复与灰度恢复 → 8) 复盘记录。
变更与回滚
- 任何配置变更先备份与语法检查，遵循灰度/蓝绿发布；保留回滚方案。
监控与预防
- 建立基础监控（CPU/内存/磁盘/IO、连接数、5xx 比例、慢查询、PHP-FPM 队列、队列耗时）；配置日志轮转与告警；定期审计防火墙/SELinux与最小权限。

0 赞

0 踩