Docker-Compose實現Mysql主從

2022 年 6 月 9 日
筆記
db, DevOps, docker

1. 簡介

通過使用docker-compose 搭建一個主從資料庫，本示例為了解耦將兩個server拆分到了兩個compose文件中，當然也可以放到一個compose文件中

演示mysql版本：5.7.16

2. 部署流程

master節點：

安裝mysql-server
修改配置
創建用於同步的帳號並授權
檢查相關配置

slave節點：

安裝mysql-server
修改配置
選擇主節點
檢查相關配置並驗證同步功能

3. master節點

3.1 安裝mysql

創建mysql文件夾並進入文件夾（文件夾名稱mysql）
創建docker-compose文件內容如下
```
# docker-compose.yml
version: '3'
services:
  mysql:
    restart: "no"
    image: mysql:5.7.16
    container_name: mysql-master
    volumes:
      - ./datadir:/var/lib/mysql
      - ./conf/mysql:/etc/mysql
    environment:
      - "MYSQL_ROOT_PASSWORD=123456"
      - "TZ=Asia/Shanghai"
    ports:
      - 3306:3306
    networks:
      - mysql-net
networks:
  mysql-net:
    driver: bridge
```
注意：因為要把配置文件掛在到服務中去，所以要先把容器中的配置文件copy到宿主機上
1. 先啟動一個用於copy文件的容器
```
$ docker run --name mysql-temp -e MYSQL_ROOT_PASSWORD=root --rm -d  mysql:5.7.16
```
2. 將mysql-temp容器中的配置文件copy出來，現在conf文件夾中就是mysql自帶的所有配置文件
```
$ docker cp mysql-temp:/etc/mysql conf
```
3. 因為當前conf目錄中的my.cnf還是個link，所以直接使用當前目錄中的備份文件作為主要的配置文件
```
$ mv my.cnf.fallback my.cnf
```

修改配置文件my.cnf

在文件的最下方加入配置資訊

[mysqld]
log-bin=mysql-bin # 開啟 binlog
server-id=1 # 當前server在cluster中的id，必須保證在cluster中唯一
#只保留7天的二進位日誌，以防磁碟被日誌佔滿(可選)
expire-logs-days = 7
#不備份的資料庫 （可選）
binlog-ignore-db=information_schema  
binlog-ignore-db=performation_schema
binlog-ignore-db=sys

啟動mysql服務，通過輸出內容得知真實的網路名稱為mysql_mysql-net，也就是當前所在文件夾的名稱拼接了文件中指定的網路名稱

服務啟動完畢後，創建用於同步的用戶並授權

創建的用戶名稱為slave密碼為123456

CREATE USER 'slave' @'%' IDENTIFIED BY '123456';
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'slave' @'%';
#刷新許可權
FLUSH PRIVILEGES;

查看master狀態資訊
```
SHOW MASTER STATUS;
#查看Mater數據有哪些slave
select * from information_schema.processlist as p where p.command = 'Binlog Dump'; 
```

4. slave節點

安裝步驟同master相同，只把需要修改的展示一下，當前的目錄結構如下

docker-compose.yaml 主要修改了網路相關的資訊和container_name（網路名稱上面有解釋）

version: '3'
services:
  mysql:
    restart: "no"
    image: mysql:5.7.16
    container_name: mysql-slave
    volumes:
      - ./datadir:/var/lib/mysql
      - ./conf:/etc/mysql
    environment:
      - "MYSQL_ROOT_PASSWORD=123456"
      - "TZ=Asia/Shanghai"
    ports:
      - 3307:3306
    networks:
      - mysql_mysql-net
networks:
  mysql_mysql-net:
    external: true # 來自外部

my.cnf添加的內容如下：

[mysqld]
server-id=2
relay_log=relay-log
#開啟只讀 意味著當前的資料庫用作讀，當然這也只會影響到非root的用戶，如果使用root用戶操作本庫是不會有影響的
read_only=ON

設置完成後啟動salve server，連接slave並關聯master節點

MASTER_HOST：直接使用container_name
MASTER_LOG_FILE/MASTER_LOG_POS：直接使用安裝master步驟中的最後一步的值，其實就是指定同步的bin-log文件名稱和Offset

CHANGE MASTER TO
MASTER_HOST='mysql-master',
MASTER_USER='slave',
MASTER_PASSWORD='123456',
MASTER_LOG_FILE='mysql-bin.000001',
MASTER_LOG_POS=154;

管理完成後啟動salve

START SLAVE;

最後查看slave status

SHOW SLAVE STATUS;

5. 驗證

在master上創建test資料庫並創建user表，刷新查看salve庫，出現了對應的庫表

經驗證數據同步也沒有問題。

6. 可能遇到的問題

SHOW SLAVE STATUS時發現 slave_io_running=No salve_sql_running=No，可能的原因有很多，可以查看如下的欄位中輸出的內容

可能的原因：

主從網路不通
兩台節點的server-id重複，直接修改對應的id即可
資料庫的uuid相同（可能是因為資料庫文件是直接copy過來的導致的），在對應的庫下生成不同於master的uuid到auto.cnf中即可
sql執行失敗，可能是slave剛添加進來，也沒有master庫的資料庫instance，導致操作對應的庫時slave這邊根本沒有對應的instance或者table又或是記錄，引發的報錯。這個只能具體問題具體解決了
master和slave的MASTER_LOG_FILE/MASTER_LOG_POS值設置的有問題，在slave節點上STOP SLAVE;然後重新連接下master即可

7. 同步部分資料庫實例或表

在master節點上添加配置【可選】（如果只希望從庫讀取到部分實例）

在my.cnf文件中加入如下配置

#需要同步的資料庫名 有多個庫添加多行即可
binlog-do-db=test
binlog-do-db=test1
#排除的資料庫
binlog-ignore-db=sys

salve端：在my.cnf文件中加入如下配置，這樣的話salve只會讀取配置的db或table，master對其他db的操作也不會影響slave

#如果salve庫名稱與master庫名相同，使用本配置 
replicate-do-db=test
#如果master庫名[test]與salve庫名[test001]不同，使用以下配置[需要做映射] 
#replicate-rewrite-db = test -> test001
#如果不是要全部同步[默認全部同步]，則指定需要同步的表 
#replicate-wild-do-table=test.user
#replicate-wild-do-table=test.role

Tags: db DevOps docker