CentOS上 WebLogic 常见性能瓶颈与定位要点
一、常见瓶颈概览
- 硬件资源：CPU 饱和、内存不足触发频繁 GC、磁盘 I/O 延迟高、网络带宽或时延成为短板。
- JVM 与 GC：堆过小或过大、GC 策略不匹配、元空间/永久代设置不当，导致 STW 长、CPU 被 GC 占满。
- 操作系统限制：文件描述符上限不足、内核网络/TCP 参数未调优、磁盘调度策略不合适。
- WebLogic 配置：执行线程池与数据库连接池配比失衡、持久化存储（JDBC/ JMS File Store）写策略与块大小未匹配底层存储。
- 应用代码：慢 SQL、连接/会话未释放、内存泄漏、字符串/XSLT 等CPU 密集型处理、第三方客户端未正确关闭。
- 网络状况：跨机房/跨地域链路抖动、丢包、时延高，导致请求排队与超时。
以上因素在 CentOS 上均较常见，需结合监控与诊断工具分层排查与验证。
二、快速定位路径与关键指标
- 资源层：用 top/vmstat/sar/iostat/netstat/free/df 观察 CPU、内存、I/O、网络与文件句柄使用；关注 load average、%wa、iowait、swap、ulimit -n。
- JVM 层：用 jstat -gcutil 看 YGC/FGC 次数与耗时、老年代使用；必要时做 heap dump 并用 JProfiler/VisualVM 分析泄漏与热点。
- 线程与锁：用 jstack 抓取线程栈，定位 ExecuteThread 阻塞点（如等 DB/HTTP 连接、锁竞争）；将高 CPU 线程 tid 转 16 进制后在栈中匹配 nid=0x…。
- WebLogic 层：在控制台与 WLST/JMX 查看 线程池 空闲/队列、JDBC 连接池 使用/等待、JMS/持久化存储状态与告警。
- 存储层：对 JMS File Store / JDBC 日志等持久化路径做 iostat -x 与 延迟评估，必要时校验文件系统与磁盘写策略。
- 网络层：用 netstat -s / sar -n DEV 观察 重传、丢包、RTT，确认是否网络瓶颈。
以上方法覆盖系统、JVM、WebLogic 与应用四个层面，适合先建立基线再逐步缩小范围。
三、典型症状与对应瓶颈对照表
| 症状 |
高概率瓶颈 |
快速验证 |
处理要点 |
| CPU 持续 >80% 且 FGC 频繁 |
内存不足/泄漏、GC 策略不当 |
jstat 显示 FGC 多且耗时、heap dump 增长 |
增大堆、优化对象生命周期、切换/调优 GC；修复泄漏 |
| CPU 飙高 但 GC 正常 |
应用计算密集/死循环/正则回溯/第三方库 |
top -Hp + jstack 定位热点线程栈 |
优化算法/缓存/解析逻辑；升级依赖 |
| 响应慢/超时，线程队列堆积 |
执行线程池过小、后端慢（DB/外部服务） |
控制台线程池队列增长、DB 会话占满 |
合理增大线程池；优化慢 SQL/下游；加熔断/超时 |
| 数据库连接池耗尽 |
连接泄漏、获取连接阻塞 |
JDBC 等待数升高、连接泄漏检测告警 |
修复泄漏；设置合理 MaxCapacity/Timeout；复用连接 |
| 磁盘 I/O 高、写延迟大 |
JMS/日志等持久化写策略与块大小不匹配 |
iostat 高 await、存储延迟明显 |
调整 File Store 块大小匹配文件系统（常见 4KB）；启用写缓存/优化调度器 |
| 偶发卡顿/报错，文件句柄接近上限 |
ulimit -n 不足、文件/套接字泄漏 |
lsof |
grep java 句柄数、dmesg/日志报错 |
| 网络抖动/超时 |
带宽不足、丢包/重传、跨域链路差 |
netstat -s 重传、sar -n DEV 丢包 |
优化拓扑/就近接入；调大 TCP 缓冲与窗口；启用多队列网卡 |
以上对照总结了在 CentOS 上最常见的问题表现与处置方向，便于按图索骥定位。
四、关键配置与优化要点
- JVM：设置合理的 -Xms/-Xmx（通常相等避免运行期扩缩堆抖动），根据负载选择 并行/CMS/G1 等 GC；JDK 8+ 关注 Metaspace 上限；发生 OutOfMemoryError 时抓取 heap dump 分析泄漏与对象生命周期。
- WebLogic 线程与连接：结合 CPU 核数与后端能力，调整 执行线程池与 JDBC 连接池；为外部 HTTP 客户端设置连接池与空闲回收，避免 CLOSE_WAIT 堆积。
- 持久化与存储：对 JMS File Store 的 Direct-Write/Cache-Flush 策略，建议将块大小调至与文件系统一致（常见 4096 字节），可显著降低物理存储延迟带来的吞吐瓶颈；无改善时保持默认以节省空间。
- 操作系统：提升 ulimit -n（如 65536+）、优化 vm.swappiness、为磁盘选择合适 I/O 调度器（如 noop/deadline/cfq 视介质而定）、开启 网卡多队列 提升网络吞吐。
- 网络：调大 net.core.rmem_max/wmem_max、合理设置 TCP 窗口 与 缓冲区，必要时启用 TCP 快速打开；对高并发场景优化 TIME_WAIT 与连接复用策略。
以上调优项需基于压测基线逐步验证，避免一次性大幅改动引入稳定性风险。