CentOS 7.2 mysql-5.7.17 源碼編譯安裝操作、主主集群、数据库备份脚本

mysql tar 源碼編譯安裝操作

在下述的操作系统为CentOS 7.2，mysql版本为mysql-5.7.17 

1.安裝前進行依賴包安裝

yum -y install gcc gcc-c++ ncurses ncurses-devel cmake bison bison-devel openssl openssl-devel pcre pcre-devel 

2.下载源码包

 2.1 建议到官方网站下载http://dev.mysql.com/downloads/mysql/，选择“Source Code”。下载的过程，需要注册一个Oracle账户，如果有直接登录就好

 2.2 提供一个下载地址：http://101.96.10.47/dev.mysql.com/get/Downloads/MySQL-5.7/mysql-boost-5.7.17.tar.gz

或者https://sourceforge.net/projects/boost/files/boost/1.59.0/boost_1_59_0.tar.gz

新版本的源码增加了boost库，如果你下的源码里面没有需要下载这个库，否则会报错，故需進行下載

3.新建MySQL用户和用户组

groupadd -r mysql

useradd -r -g mysql mysql

4.進入安裝步驟

tar -zvxf mysql-boost-5.7.17.tar.gz

cd mysql-5.7.17

新建MySQL数据库数据文件目录

mkdir -p /www/mysql-data

mkdir -p /www/mysql-logs

mkdir -p /www/mysql-temp

進行預編譯

cmake  -DCMAKE_INSTALL_PREFIX=/www/mysql \

-DMYSQL_DATADIR=/www/mysql-data \

-DMYSQL_UNIX_ADDR=/www/mysql/mysql.sock \

-DWITH_BOOST=/www/boost_1_59_0 \

-DSYSCONFDIR=/etc \

-DWITH_INNOBASE_STORAGE_ENGINE=1 \

-DWITH_PARTITION_STORAGE_ENGINE=1 \

-DWITH_FEDERATED_STORAGE_ENGINE=1 \

-DWITH_BLACKHOLE_STORAGE_ENGINE=1 \

-DWITH_MYISAM_STORAGE_ENGINE=1 \

-DENABLED_LOCAL_INFILE=1 \

-DENABLE_DTRACE=0 \

-DDEFAULT_CHARSET=utf8mb4 \

-DDEFAULT_COLLATION=utf8mb4_general_ci \

-DWITH_EMBEDDED_SERVER=1

上述配置解释：

-DCMAKE_INSTALL_PREFIX=/www/mysql    //设置安装目录

-DMYSQL_DATADIR=/www/mysql/data     //设置数据库存放目录             

-DMYSQL_UNIX_ADDR=/www/mysql/mysql.sock   //设置UNIX socket目录

-DDEFAULT_CHARSET=utf8mb4     //设置默认字符集

-DDEFAULT_COLLATION=utf8mb4_general_ci     //设置默认校对规则

-DWITH_INNOBASE_STORAGE_ENGINE=1    //添加InnoDB引擎支持

-DSYSCONFDIR=/etc    //设置my.cnf配置文件的所在目录，默认为安装目录，沒有的話，後期可添加一份至此

進行編譯安裝

make && make install 

#安装完成后清理一下零时文件

make clean

设置启动脚本，开机自启动(即將mysql做成服務)

#拷贝可执行文件到指定的目录下，并修改名字为mysqld

cp /www/mysql/support-files/mysql.server /etc/init.d/mysqld

cp /www/mysql/bin/mysqld  /usr/bin/mysqld

#授予可执行的权限

chmod +x /etc/init.d/mysqld

#设置为开机启动 

systemctl enable mysqld

修改mysql的可执行目录

chown -Rf mysql:mysql /www/mysql

chown -Rf mysql:mysql /www/mysql-data

chown -Rf mysql:mysql /www/mysql-logs

chown -Rf mysql:mysql /www/mysql-temp

配置文件即修改/etc/my.cnf

#参考，具体里面的参数说明，请自行網上搜索

[mysqld]

character-set-server = utf8mb4

collation-server = utf8mb4_general_ci

skip-external-locking

skip-name-resolve

user = mysql

port = 3306

basedir = /www/mysql

datadir = /www/mysql-data

tmpdir = /www/mysql-temp

# server_id = .....

socket = /www/mysql/mysql.sock

log-error = /www/mysql-logs/mysql_error.log

pid-file = /www/mysql-data/mysql.pid

open_files_limit = 10240

back_log = 600

max_connections=500

max_connect_errors = 6000

wait_timeout=605800

#open_tables = 600

#table_cache = 650

#opened_tables = 630

max_allowed_packet = 32M

sort_buffer_size = 4M

join_buffer_size = 4M

thread_cache_size = 300

query_cache_type = 1

query_cache_size = 256M

query_cache_limit = 2M

query_cache_min_res_unit = 16k

tmp_table_size = 256M

max_heap_table_size = 256M

key_buffer_size = 256M

read_buffer_size = 1M

read_rnd_buffer_size = 16M

bulk_insert_buffer_size = 64M

lower_case_table_names=1(不區分大小寫設定)

default-storage-engine = INNODB

innodb_buffer_pool_size = 1G

innodb_log_buffer_size = 32M

innodb_log_file_size = 128M

innodb_flush_method = O_DIRECT

#####################

long_query_time= 2

slow-query-log = on

slow-query-log-file = /www/mysql-logs/mysql-slow.log

[mysqldump]

quick

max_allowed_packet = 32M

character_set_server = utf8

[mysqld_safe]

log-error=/var/log/mysqld.log

pid-file=/var/run/mysqld/mysqld.pid

character_set_server = utf8

備註：上述character_set_server = utf8屬於解決亂碼問題

添加环境变量 vi /etc/profile

#末尾添加以下内容

#mysql env

export PATH=$PATH:/www/mysql/bin:/www/mysql/lib

使得設置文件生效 source /etc/profile

初始化数据库

mysqld --initialize-insecure --user=mysql --basedir=/www/mysql --datadir=/www/mysql-data

备注：

MySQL之前版本mysql_install_db是在mysql_basedir/script下

MySQL 5.7直接放在了mysql_install_db/bin目录下。

"–initialize"已废弃,生成一个随机密码(~/.mysql_secret)

"–initialize-insecure"不会生成密码

"–datadir"目录下不能有数据文件

或者使用下列語句：

mysql_install_db --user=mysql --basedir=/www/mysql --datadir=/www/mysql-data

启动数据库

systemctl start mysqld

查看數據庫狀態

systemctl status mysqld

查看mysql服务进程和端口

ps -ef | grep mysql

netstat -tunpl | grep 3306

设置数据库root用户密码

MySQL和Oracle数据库一样，数据库也默认自带了一个root用户（这个和当前Linux主机上的

root用户是完全不搭边的），我们在设置好MySQL数据库的安全配置后初始化root用户的密码。

配制过程中，一路输入 y 就行了。这里只说明下MySQL5.7.17版本中，用户密码策略分成低级 

LOW 、中等 MEDIUM 和超强 STRONG 三种，推荐使用中等 MEDIUM 级别！當然也可以不進行等

級設置

查阅官方文档后发现有以下三种密码策略：

政策测试执行

0 ---LOW长度

1 ---MEDIUM长度; 数字，小写/大写和特殊字符

2 ---STRONG长度; 数字，小写/大写和特殊字符; 字典文件

備註：後續的用戶相關密碼將需要按照此標準來執行，但是也可以進行相關修改

mysql_secure_installation

除了

Disallow root login remotely 

Remove test database and accesss to it 可以為n，

其他都是y

進入數據庫

mysql -uroot -p密碼

創建其他用戶

mysql> create user 'hua'@'localhost' identified by 'hlj123';(後續可以修改)

設置存儲引擎

mysql> set storage_engine=INNODB;

創建數據庫 

mysql> create database zgz character set utf8;

查看是否建立成功

mysql> show databases;

賦予用戶相關數據庫權限

mysql> GRANT ALL PRIVILEGES ON *.* TO 'root'@'10.134.100.174' IDENTIFIED BY 'FLM@88' WITH GRANT OPTION;

mysql> flush privileges;

檢驗是否賦予遠程連接數據庫權限已開通

mysql -h 10.134.100.174 -uroot -pFLM@88 zgz

如果進入數據庫說明成功，否則重啟mysql服務即可再次嘗試

若是允許該用戶通過任意服務器可進行連接相關數據庫

mysql> GRANT ALL PRIVILEGES ON databasename.tables TO 'root'@'%' IDENTIFIED BY 'Foxconn@88' WITH GRANT OPTION;

mysql> flush privileges;

導出你需要的數據庫

mysqldump -h 10.157.136.134 -uroot -proot --events --ignore-table=mysql.event --default-character-set=UTF8 jspxcms >zgz.sql

提前建立一個空數據庫來存放需要導入的數據，後只需要執行數據庫導入命令 

mysql> use zgz;

mysql> source /root/zgz.sql(此處為你放置zgz.sql的存放位置)

确定数据表是否创建成功，即数据文件是否导入成功

mysql> show tables;

當你需要查看當前密碼策略，可進行下列操作：

mysql> show VARIABLES like "%password%"

+---------------------------------------+---------+

| Variable_name                         | Value   |

|---------------------------------------+---------|

| default_password_lifetime                   | 0       |

| disconnect_on_expired_password        | ON      |

| log_builtin_as_identified_by_password | OFF     |

| mysql_native_password_proxy_users     | OFF     |

| old_passwords                                        | 0       |

| report_password                                   |         |

| sha256_password_proxy_users              | OFF     |

| validate_password_dictionary_file           |         |

| validate_password_length                     | 8       |

| validate_password_mixed_case_count    | 1       |

| validate_password_number_count         | 1       |

| validate_password_policy              | MEDIUM  |

| validate_password_special_char_count  | 1       |

+---------------------------------------+---------+

13 rows in set

Time: 0.030s

修改默认密码策略（当然实际环境是不推荐修改为更低安全策略的）

mysql> set global validate_password_policy = 0;

validate_password_number_count指定了密码中数据的长度，

validate_password_special_char_count指定了密码中特殊字符的长度，

validate_password_mixed_case_count指定了密码中大小字母的长度。

这些参数，默认值均为1，所以validate_password_length最小值为4，

如果你显示指定validate_password_length的值小于4，尽管不会报错，

但validate_password_length的值将设为4。

修改validate_password_number_count，validate_password_special_char_count，

validate_password_mixed_case_count中任何一个值，则validate_password_length将进行动态修改

另，可通过my.cnf配置文件设置密码策略的级别

vi /etc/my.cnf

[mysqld]

validate_password_policy=2

validate_password_policy设置mysql启动的时候，密码策略级别如果设置为3，那么需要指定字典文件

当然你也可以通过my.cnf配置文件关闭validate_password插件

只需要添加一行 

validate_password = off

编辑完配置文件后，重启mysqld服务即可生效。

mysql > show VARIABLES  like "validate_password%"

+-----------------+---------+

| Variable_name   | Value   |

|-----------------+---------|

+-----------------+---------+

0 rows in set

Time: 0.008s

关闭validate_password插件后，就没有了validate_password的一些参数变量。

MySQL新版本默认监听在IPv6的地址族上。更改为监听IPv4地址族，

修改my.cnf添加一行配置：bind-address = 0.0.0.0

重启mysqld即可

mysql主主複製配置

首先分別在兩台服務器上安裝上述的安裝mysql的步驟，確保有兩台服務器可使用

故數據庫服务器环境：

+-------------------+---------------------------------------------------

|                   |服务器节点1             |服务器节点2              |

+-------------------+------------------------+-------------------------+

|OS                 |CentOS 7.2              |CentOS 7.2               |

+-------------------+------------------------+-------------------------+

|DB Version         |MySQL 5.7.17            |MySQL 5.7.17             |

+-------------------+------------------------+-------------------------+

|HostName           |Linux01                 |Linux02                  |

+-------------------+------------------------+-------------------------+

|IPADDR             |172.16.100.69           |172.16.100.70            | 

+-------------------+------------------------+-------------------------+

创建复制需要的用户，用户需要slave权限（必要），file，select权限（可选）

mysql> grant replication slave, file, select on *.* to 'mysql_sync'@'172.16.100.69' identified by 'FLM88'

mysql> grant replication slave, file, select on *.* to 'mysql_sync'@'172.16.100.70' identified by 'FLM88'

备注：如果想要在Slave上有权限执行 "LOAD TABLE FROM MASTER" 或 

"LOAD DATA FROM MASTER" 语句的话，必须授予全局的 FILE 和 SELECT 权限。

上述的語句就是進行了創建了同步數據庫用戶mysql_sync,密碼及相關權限的設定

分别修改两台服务器上面的配置文件vi /etc/my.cnf

172.16.100.69上的my.cnf：

log-bin=mysql-bin-db01

server-id=11

log-slave-updates

slave-skip-errors=all

auto_increment_increment=2

auto_increment_offset=1

172.16.100.70上的my.cnf：

log-bin=mysql-bin-db02

server-id=12

log-slave-updates

slave-skip-errors=all

auto_increment_increment=2

auto_increment_offset=2

備註：server-id两个服务器必须配置不一样，

auto_increment_increment配置每个节点中的自动增长字段每次增长的步长

auto_increment_offset配置各个节点自动增长字段的初始值从多少开始

如果我们不设置这两个变量的话，含有自动增长字段的表将在多个服务器上面各自维护，会出现重复的情况导致复制出错。

如上面的设置，A节点自增长的字段产生的值将会是 1,3,5.... 

而B节点将是2,4,6......

重启两台数据库实例

systemctl restart mysqld

在两个数据库中执行：show master status;查看主服务器状态：

172.16.100.69(節點1):

mysql> show master status;

+-----------------------+----------+--------------+------------------+-------------------+

| File                  | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |

+-----------------------+----------+--------------+------------------+-------------------+

| mysql-bin-db01.000001 |     1096 |              |                  |                   |

+-----------------------+----------+--------------+------------------+-------------------+

1 row in set (3.71 sec)

172.16.100.70(節點2):

mysql> show master status;

+-----------------------+----------+--------------+------------------+-------------------+

| File                  | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |

+-----------------------+----------+--------------+------------------+-------------------+

| mysql-bin-db02.000001 |      625 |              |                  |                   |

+-----------------------+----------+--------------+------------------+-------------------+

1 row in set (0.00 sec)

配置从服务器Slave（两个节点分别执行）

節點1：

mysql> change master to master_host='172.16.100.70',master_user='mysql_sync',

master_password='Foxconn88',master_log_file='mysql-bin-db02.000001',master_log_pos=625;

mysql> start slave;    //启动从服务器复制功能

節點2：

mysql> change master to master_host='172.16.100.69',master_user='mysql_sync',

master_password='Foxconn88',master_log_file='mysql-bin-db01.000001',master_log_pos=1096;

mysql> start slave;    //启动从服务器复制功能

檢查狀態：

mysql>show slave status\G

備註：不出問題，可以在各自的數據庫中查看到相關互備的master

因為是源碼安裝，所以需要將mysqldump添加進入服務，直接做個鏈接即可

ln /www/mysql/bin/mysqldump  /usr/bin/mysqldump

設定定時備份數據庫，採用crontab執行腳本進行

#!/usr/bin/env bash

#a

# Author:   Zhang Huangbin (zhb@iredmail.org)

# Date:     16/09/2007

KEEP_DAYS='90'

export BACKUP_ROOTDIR="/data0/db_bak/"

export MYSQL_USER="root"

export MYSQL_PASSWD="FLM@88"

export DATABASES="zgz"

export DB_CHARACTER_SET="utf8"

export PATH='/usr/bin:/bin:/usr/sbin:/sbin:/usr/local/bin:/usr/local/sbin'

export CMD_DATE='/bin/date'

export CMD_DU='du -sh'

export CMD_COMPRESS='bzip2 -9'

export COMPRESS_SUFFIX='bz2'

export CMD_MYSQLDUMP='mysqldump'

export CMD_MYSQL='mysql'

export YEAR="$(${CMD_DATE} +%Y)"

export MONTH="$(${CMD_DATE} +%m)"

export DAY="$(${CMD_DATE} +%d)"

export TIME="$(${CMD_DATE} +%H:%M:%S)"

export TIMESTAMP="${YEAR}-${MONTH}-${DAY}-${TIME}"

export BACKUP_SUCCESS='YES'

export BACKUP_DIR="${BACKUP_ROOTDIR}/mysql/${YEAR}/${MONTH}/${DAY}"

mkdir -p $BACKUP_ROOTDIR

mysqldump -h 10.134.100.174 -uroot -pFLM@88 

--events --ignore-table=mysql.event --default-character-set=UTF8 zgz>$BACKUP_ROOTDIR$TIMESTAMP.sql

上述只是相應例子，可進行適當修改即可使用。

因为做这个MySQL集群的时间有点久远的，所以现在写的可能存在一些错误，如果大家发现，欢迎指出，谢谢！