Nginx怎么配置TCP负载均衡

发布时间：2022-02-16 16:04:00 作者：iii
来源：亿速云阅读：201

# Nginx怎么配置TCP负载均衡

## 前言

Nginx作为一款高性能的反向代理服务器，除了常见的HTTP/HTTPS负载均衡外，还支持TCP/UDP协议的负载均衡功能。这种能力使Nginx能够成为数据库、邮件服务等非HTTP协议应用的负载均衡解决方案。本文将详细介绍如何配置Nginx实现TCP负载均衡。

## 一、TCP负载均衡概述

### 1.1 什么是TCP负载均衡

TCP负载均衡是指通过中间代理服务器，将客户端的TCP连接请求分发到后端多个服务器上的技术。与HTTP负载均衡不同，TCP负载均衡工作在传输层（OSI第4层），不解析应用层协议。

典型应用场景包括：
- 数据库集群（MySQL、PostgreSQL等）
- 邮件服务器（SMTP、IMAP、POP3）
- 自定义TCP协议应用
- Redis/Memcached等缓存服务

### 1.2 Nginx实现TCP负载均衡的优势

1. **高性能**：基于事件驱动的异步架构
2. **高可靠性**：支持健康检查、故障转移
3. **灵活性**：支持多种负载均衡算法
4. **低延迟**：相比LVS等方案配置更简单

## 二、环境准备

### 2.1 软件要求

- Nginx 1.9.0及以上版本（需要包含`--with-stream`模块）
- Linux/Unix操作系统

检查Nginx是否支持stream模块：
```bash
nginx -V 2>&1 | grep -o with-stream

2.2 示例环境

假设我们有三台服务器： - 负载均衡器：192.168.1.100（安装Nginx） - 后端服务器1：192.168.1.101:3306（MySQL） - 后端服务器2：192.168.1.102:3306（MySQL）

三、基础配置

3.1 主配置文件设置

在nginx.conf的顶层添加stream块（与http块同级）：

worker_processes auto;

events {
    worker_connections 1024;
}

# TCP/UDP代理配置
stream {
    include /etc/nginx/conf.d/*.stream;
}

http {
    # 原有的HTTP配置
}

3.2 创建TCP负载均衡配置

新建/etc/nginx/conf.d/mysql_lb.stream：

upstream mysql_backend {
    server 192.168.1.101:3306 weight=5;
    server 192.168.1.102:3306 max_fails=3 fail_timeout=30s;
    # 可添加更多后端服务器
}

server {
    listen 3306;
    proxy_pass mysql_backend;
    proxy_connect_timeout 1s;
    proxy_timeout 3s;
}

3.3 配置说明

upstream块：定义后端服务器组
- weight：权重，默认为1
- max_fails：最大失败次数
- fail_timeout：失败超时时间
server块：定义监听端口和代理规则
- proxy_connect_timeout：连接超时时间
- proxy_timeout：会话超时时间

四、高级配置选项

4.1 负载均衡算法

Nginx支持多种负载均衡算法：

upstream backend {
    # 轮询（默认）
    server 192.168.1.101:3306;
    
    # 加权轮询
    server 192.168.1.102:3306 weight=2;
    
    # 最少连接
    least_conn;
    server 192.168.1.103:3306;
    
    # IP哈希（保持会话）
    hash $remote_addr consistent;
}

4.2 健康检查

被动健康检查：

upstream backend {
    server 192.168.1.101:3306 max_fails=2 fail_timeout=10s;
    server 192.168.1.102:3306 max_fails=2 fail_timeout=10s;
}

主动健康检查（需要商业版Nginx Plus）：

health_check interval=5 passes=2 fails=3;

4.3 SSL/TLS终止

server {
    listen 3306 ssl;
    proxy_pass backend;
    
    ssl_certificate /path/to/cert.pem;
    ssl_certificate_key /path/to/key.pem;
    ssl_protocols TLSv1.2 TLSv1.3;
}

4.4 日志配置

在stream块中添加：

log_format tcp_proxy '$remote_addr [$time_local] '
                     '$protocol $status $bytes_sent $bytes_received '
                     '$session_time "$upstream_addr"';
                     
access_log /var/log/nginx/tcp-access.log tcp_proxy;

五、性能优化

5.1 内核参数调优

# 增加最大文件描述符数量
echo "fs.file-max = 100000" >> /etc/sysctl.conf

# 增加端口范围
echo "net.ipv4.ip_local_port_range = 1024 65535" >> /etc/sysctl.conf

# 启用TCP快速回收
echo "net.ipv4.tcp_tw_recycle = 1" >> /etc/sysctl.conf

sysctl -p

5.2 Nginx参数优化

worker_processes auto;
worker_rlimit_nofile 100000;

events {
    worker_connections 4096;
    multi_accept on;
    use epoll;
}

stream {
    proxy_buffer_size 16k;
}

六、安全配置

6.1 访问控制

server {
    listen 3306;
    allow 192.168.1.0/24;
    deny all;
    proxy_pass backend;
}

6.2 连接限制

limit_conn_zone $binary_remote_addr zone=conn_limit_per_ip:10m;

server {
    listen 3306;
    limit_conn conn_limit_per_ip 10;
    proxy_pass backend;
}

七、常见问题排查

7.1 连接被拒绝

检查项： 1. 后端服务是否正常运行 2. 防火墙是否放行端口 3. SELinux是否阻止连接

7.2 性能瓶颈

排查方向： 1. netstat -antp | grep nginx 查看连接状态 2. ss -s 查看socket统计 3. top -H 查看Nginx worker进程CPU使用率

7.3 日志分析

关键日志字段： - $status：会话状态（200成功，502失败等） - $upstream_addr：实际连接的后端服务器 - $session_time：会话持续时间

八、实际应用案例

8.1 MySQL读写分离

upstream mysql_read {
    server read1.example.com:3306;
    server read2.example.com:3306;
}

upstream mysql_write {
    server write1.example.com:3306;
}

server {
    listen 3306;
    # 根据SQL语句路由（需要商业版Nginx Plus）
    # proxy_pass $upstream;
    proxy_pass mysql_read;
}

8.2 Redis集群代理

upstream redis_cluster {
    server 192.168.1.110:6379;
    server 192.168.1.111:6379;
    server 192.168.1.112:6379;
}

server {
    listen 6379;
    proxy_pass redis_cluster;
    proxy_timeout 10s;
}

九、与HTTP负载均衡的对比

特性	TCP负载均衡	HTTP负载均衡
OSI层级	传输层（4层）	应用层（7层）
协议支持	任意TCP/UDP协议	HTTP/HTTPS
配置复杂度	相对简单	相对复杂
性能开销	较低	较高
会话保持	有限支持	完善支持
内容感知	不支持	支持

十、总结

Nginx的TCP负载均衡功能为传统非HTTP服务提供了高效的负载均衡解决方案。通过合理配置，可以实现：

高可用性的后端服务集群
灵活的流量分发策略
可观测的运行状态监控
安全可靠的网络访问控制

对于需要更高阶功能（如协议解析、内容路由等）的场景，可以考虑Nginx Plus商业版本或结合其他专用代理工具使用。

附录：常用命令

# 检查配置语法
nginx -t -c /etc/nginx/nginx.conf

# 重新加载配置
nginx -s reload

# 查看Nginx版本和编译参数
nginx -V

# 监控TCP连接状态
ss -ntp | grep nginx

注意：本文基于Nginx 1.18.0版本编写，不同版本配置可能略有差异。生产环境部署前请务必进行充分测试。 “`