MYSQL 多源复制，过滤复制与应用场景介绍

引言

MySQL 是一种广泛使用的关系型数据库管理系统，支持多种复制技术以提高数据的可用性和可靠性。多源复制和过滤复制是 MySQL 中两种重要的复制技术，它们在不同的应用场景中发挥着关键作用。本文将详细介绍这两种复制技术的原理、配置方法以及适用场景。

多源复制

1. 多源复制概述

多源复制（Multi-Source Replication）是 MySQL 5.7 引入的一项新功能，允许一个从服务器（Slave）同时从多个主服务器（Master）复制数据。这种复制方式适用于需要从多个数据源汇总数据的场景，例如数据仓库、报表系统等。

2. 多源复制的配置

2.1 配置主服务器

在多源复制中，每个主服务器都需要配置为允许从服务器连接并复制数据。以下是配置主服务器的基本步骤：

1. 启用二进制日志：在主服务器的配置文件（my.cnf 或 my.ini）中，确保 log_bin 参数已启用。

   [mysqld]
   log_bin = /var/log/mysql/mysql-bin.log
   server_id = 1
   

2. 创建复制用户：在主服务器上创建一个用于复制的用户，并授予复制权限。

   CREATE USER 'repl'@'%' IDENTIFIED BY 'password';
   GRANT REPLICATION SLAVE ON *.* TO 'repl'@'%';
   FLUSH PRIVILEGES;
   

2.2 配置从服务器

在从服务器上，需要为每个主服务器配置一个独立的复制通道。以下是配置从服务器的基本步骤：

1. 配置从服务器：在从服务器的配置文件中，确保 server_id 参数已设置，并且 relay_log 和 log_slave_updates 参数已启用。

   [mysqld]
   server_id = 2
   relay_log = /var/log/mysql/relay-log
   log_slave_updates = 1
   

2. 配置复制通道：在从服务器上为每个主服务器配置一个独立的复制通道。

   CHANGE MASTER TO
   MASTER_HOST='master1_host',
   MASTER_USER='repl',
   MASTER_PASSWORD='password',
   MASTER_LOG_FILE='mysql-bin.000001',
   MASTER_LOG_POS=4
   FOR CHANNEL 'channel1';
   
   
   CHANGE MASTER TO
   MASTER_HOST='master2_host',
   MASTER_USER='repl',
   MASTER_PASSWORD='password',
   MASTER_LOG_FILE='mysql-bin.000001',
   MASTER_LOG_POS=4
   FOR CHANNEL 'channel2';
   

3. 启动复制：启动从服务器上的复制进程。

   START SLAVE FOR CHANNEL 'channel1';
   START SLAVE FOR CHANNEL 'channel2';
   

3. 多源复制的应用场景

多源复制适用于以下场景：

• 数据汇总：从多个数据源汇总数据到一个中央数据库，用于生成报表或进行分析。
• 数据分发：将数据从多个主服务器分发到多个从服务器，以提高读取性能。
• 数据备份：将多个主服务器的数据备份到一个从服务器上，以提高数据的安全性。

过滤复制

1. 过滤复制概述

过滤复制（Filtered Replication）是 MySQL 中的一种复制技术，允许从服务器只复制主服务器上的部分数据。这种复制方式适用于只需要复制特定数据库或表数据的场景，例如数据分区、数据隔离等。

2. 过滤复制的配置

2.1 配置主服务器

在过滤复制中，主服务器的配置与普通复制相同，无需特殊配置。

2.2 配置从服务器

在从服务器上，可以通过设置 replicate-do-db、replicate-ignore-db、replicate-do-table 和 replicate-ignore-table 等参数来实现数据过滤。以下是配置从服务器的基本步骤：

1. 配置从服务器：在从服务器的配置文件中，设置过滤规则。

   [mysqld]
   server_id = 2
   replicate-do-db = db1
   replicate-ignore-db = db2
   replicate-do-table = db3.table1
   replicate-ignore-table = db4.table2
   

2. 启动复制：启动从服务器上的复制进程。

   START SLAVE;
   

3. 过滤复制的应用场景

过滤复制适用于以下场景：

• 数据分区：将不同数据库或表的数据复制到不同的从服务器上，以实现数据分区。
• 数据隔离：只复制特定数据库或表的数据，以隔离敏感数据。
• 数据同步：只同步部分数据，以减少网络带宽和存储空间的占用。

多源复制与过滤复制的结合应用

在实际应用中，多源复制和过滤复制可以结合使用，以满足更复杂的需求。例如，在一个数据仓库系统中，可以从多个主服务器复制数据到一个从服务器，并通过过滤复制只复制特定的数据库或表数据。

1. 配置示例

以下是一个结合多源复制和过滤复制的配置示例：

1. 配置主服务器：在每个主服务器上启用二进制日志并创建复制用户。

2. 配置从服务器：在从服务器上为每个主服务器配置一个独立的复制通道，并设置过滤规则。

   [mysqld]
   server_id = 2
   replicate-do-db = db1
   replicate-ignore-db = db2
   

   CHANGE MASTER TO
   MASTER_HOST='master1_host',
   MASTER_USER='repl',
   MASTER_PASSWORD='password',
   MASTER_LOG_FILE='mysql-bin.000001',
   MASTER_LOG_POS=4
   FOR CHANNEL 'channel1';
   
   
   CHANGE MASTER TO
   MASTER_HOST='master2_host',
   MASTER_USER='repl',
   MASTER_PASSWORD='password',
   MASTER_LOG_FILE='mysql-bin.000001',
   MASTER_LOG_POS=4
   FOR CHANNEL 'channel2';
   
   
   START SLAVE FOR CHANNEL 'channel1';
   START SLAVE FOR CHANNEL 'channel2';
   

2. 应用场景

结合多源复制和过滤复制的应用场景包括：

• 数据仓库：从多个数据源汇总特定数据库或表的数据到一个中央数据库，用于生成报表或进行分析。
• 数据分发：将特定数据库或表的数据从多个主服务器分发到多个从服务器，以提高读取性能。
• 数据备份：将多个主服务器的特定数据库或表数据备份到一个从服务器上，以提高数据的安全性。

结论

多源复制和过滤复制是 MySQL 中两种重要的复制技术，它们在不同的应用场景中发挥着关键作用。多源复制适用于需要从多个数据源汇总数据的场景，而过滤复制适用于只需要复制特定数据库或表数据的场景。通过结合使用这两种复制技术，可以满足更复杂的数据复制需求，提高数据的可用性和可靠性。