数据库运维
记录DBA学习成长历程

DM8-数据守护读写分离搭建

文章目录

环境:

主备库信息:

机器名 IP地址 初始状态 操作系统
dmprimary 10.0.0.200 主库:GRP1_RW_01 CentOS Linux release 7.5.1804 (Core)
dmstandby1 10.0.0.201 备库1:GRP1_RW_02 CentOS Linux release 7.5.1804 (Core)
dmstandby2 10.0.0.202 备库2:GRP1_RW_03 CentOS Linux release 7.5.1804 (Core)

各主备库的实例名建议采用“组名_守护环境_序号”的方式命名,方便按组区分不同 实例,注意总长度不能超过 16。本示例中组名为“GRP1”,配置为读写分离集群,主库命 名为“GRP1_RWW_01”,备库分别命名为“GRP1_RWW_02”和“GRP1_RWW_03”。

端口规划:

实例名 PORT_NUM MAL_INST_DW_PORT MAL_HOST MAL_PORT MAL_DW_PORT
GRP1_RW_01 5236 10001 10.0.0.200 10002 10003
GRP1_RW_02 5237 20001 10.0.0.201 20002 20003
GRP1_RW_03 5238 30001 10.0.0.201 30002 30003

端口说明

PORT_NUM:数据库实例监听端口,dm.ini中。

MAL_INST_DW_PORT:实例监听守护进程 TCP 连接的端口,dmmal.ini中。

MAL_PORT:MAL 系统监听 TCP 连接的端口,dmmal.ini中。

MAL_DW_PORT:实例本地的守护进程监听 TCP 连接的端口,dmmal.ini中。

准备好三台数据库:

主库数据准备

dmprimary机器上初始化库至目录/dm/data

[root@dmprimary bin]# ./dminit path=/dm/data/ db_name=DMDB instance_name=GRP1_RW_01 port_num=5236 SYSDBA_PWD="dameng123" EXTENT_SIZE=16 PAGE_SIZE=16 LOG_SIZE=300
initdb V8
db version: 0x7000a
file dm.key not found, use default license!
License will expire on 2021-02-10

log file path: /dm/data/DMDB/DMDB01.log

log file path: /dm/data/DMDB/DMDB02.log

write to dir [/dm/data/DMDB].
create dm database success. 2021-01-27 13:28:34

注册数据库:

[root@dmprimary bin]# cd /dm/script/root/
[root@dmprimary root]# ./dm_service_installer.sh -t dmserver -p DMDB -dm_ini /dm/data/DMDB/dm.ini
Created symlink from /etc/systemd/system/multi-user.target.wants/DmServiceDMDB.service to /usr/lib/systemd/system/DmServiceDMDB.service.
创建服务(DmServiceDMDB)完成

配置 dm.ini,打开 ARCH_INI 参数

[dmdba@dmprimary DMDB]$ vi dm.ini

配置 dmarch.ini

[dmdba@dmprimary DMDB]$ cat dmarch.ini 
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm/data/DMDB/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb,0 表示无限制,范围 1024~4294967294M

启动数据库:

[dmdba@dmprimary bin]$ ./DmServiceDMDB start
Starting DmServiceDMDB: [ OK ]

联机备份、脱机还原方式

为了测试,建一张表,插入几条数据:

[dmdba@dmprimary bin]$ disql sysdba/dameng123:5236

服务器[LOCALHOST:5236]:处于普通打开状态
登录使用时间: 8.257(毫秒)
disql V8
SQL> create table test(id number);
操作已执行
已用时间: 9.206(毫秒). 执行号:989.
SQL> insert into test values(1);
影响行数 1

已用时间: 2.267(毫秒). 执行号:990.
SQL> insert into test values(2);
影响行数 1

已用时间: 0.485(毫秒). 执行号:991.
SQL> insert into test values(3);
影响行数 1

已用时间: 0.678(毫秒). 执行号:992.
SQL> select * from test;

行号 ID
---------- --
1 1
2 2
3 3

已用时间: 1.131(毫秒). 执行号:993.

对主库进行联机备份操作

SQL> BACKUP DATABASE BACKUPSET '/dm/data/BACKUP_FILE_01';
操作已执行
已用时间: 00:00:01.134. 执行号:994.

准备备库1、2

1、

[root@dmstandby1 bin]# ./dminit path=/dm/data/ db_name=DMDB2 instance_name=GRP1_RW_02 port_num=5237 SYSDBA_PWD="dameng123" EXTENT_SIZE=16 PAGE_SIZE=16 LOG_SIZE=300
initdb V8
db version: 0x7000a
file dm.key not found, use default license!
License will expire on 2021-02-10

log file path: /dm/data/DMDB2/DMDB201.log

log file path: /dm/data/DMDB2/DMDB202.log

write to dir [/dm/data/DMDB2].
create dm database success. 2021-01-27 13:43:04

注册数据库

[root@dmstandby1 bin]# cd /dm/script/root/
[root@dmstandby1 root]# ./dm_service_installer.sh -t dmserver -p DMDB2 -dm_ini /dm/data/DMDB2/dm.ini
Created symlink from /etc/systemd/system/multi-user.target.wants/DmServiceDMDB2.service to /usr/lib/systemd/system/DmServiceDMDB2.service.
创建服务(DmServiceDMDB2)完成

2、

[root@dmstandby2 bin]# ./dminit path=/dm/data/ db_name=DMDB3 instance_name=GRP1_RW_03 port_num=5238 SYSDBA_PWD="dameng123" EXTENT_SIZE=16 PAGE_SIZE=16 LOG_SIZE=300
initdb V8
db version: 0x7000a
file dm.key not found, use default license!
License will expire on 2021-02-10

log file path: /dm/data/DMDB3/DMDB301.log

log file path: /dm/data/DMDB3/DMDB302.log

write to dir [/dm/data/DMDB3].
create dm database success. 2021-01-27 13:45:37

注册数据库

[root@dmstandby2 root]# ./dm_service_installer.sh -t dmserver -p DMDB3 -dm_ini /dm/data/DMDB3/dm.ini
Created symlink from /etc/systemd/system/multi-user.target.wants/DmServiceDMDB3.service to /usr/lib/systemd/system/DmServiceDMDB3.service.
创建服务(DmServiceDMDB3)完成

拷贝备份文件到备库所在机器

执行脱机数据库还原与恢复

1、

[dmdba@dmstandby1 bin]$ ./dmrman CTLSTMT="RESTORE DATABASE '/dm/data/DMDB2/dm.ini' FROM BACKUPSET '/dm/data/BACKUP_FILE_01'"
dmrman V8
RESTORE DATABASE '/dm/data/DMDB2/dm.ini' FROM BACKUPSET '/dm/data/BACKUP_FILE_01'
file dm.key not found, use default license!
RESTORE DATABASE CHECK......
RESTORE DATABASE,dbf collect......
RESTORE DATABASE,dbf refresh ......
RESTORE BACKUPSET [/dm/data/BACKUP_FILE_01] START......
total 5 packages processed...
total 7 packages processed...
RESTORE DATABASE,UPDATE ctl file......
RESTORE DATABASE,REBUILD key file......
RESTORE DATABASE,CHECK db info......
RESTORE DATABASE,UPDATE db info......
total 7 packages processed...
total 7 packages processed!
CMD END.CODE:[0]
restore successfully.
time used: 597.543(ms)

[dmdba@dmstandby1 bin]$ ./dmrman CTLSTMT="RECOVER DATABASE '/dm/data/DMDB2/dm.ini' FROM BACKUPSET '/dm/data/BACKUP_FILE_01'"
dmrman V8
RECOVER DATABASE '/dm/data/DMDB2/dm.ini' FROM BACKUPSET '/dm/data/BACKUP_FILE_01'
file dm.key not found, use default license!
Database mode = 0, oguid = 0
EP[0]'s cur_lsn[39037]
RESTORE RLOG CHECK......
RESTORE RLOG, gen tmp file......
RESTORE RLOG FROM BACKUPSET [/dm/data/BACKUP_FILE_01] START......
total 2 packages processed...
total 2 packages processed...
total 2 packages processed!
CMD END.CODE:[0]
EP:0 total 1 pkgs applied, percent: 100%
Recover from archive log finished, time used:0.005s.
recover successfully!
time used: 254.853(ms)

[dmdba@dmstandby1 bin]$ ./dmrman CTLSTMT="RECOVER DATABASE '/dm/data/DMDB2/dm.ini' UPDATE DB_MAGIC"
dmrman V8
RECOVER DATABASE '/dm/data/DMDB2/dm.ini' UPDATE DB_MAGIC
file dm.key not found, use default license!
Database mode = 0, oguid = 0
EP[0]'s cur_lsn[39037]
EP[0]'s apply_lsn[39037] >= end_lsn[39037]
recover successfully!
time used: 992.254(ms)

2、

[dmdba@dmstandby2 bin]$ ./dmrman CTLSTMT="RESTORE DATABASE '/dm/data/DMDB3/dm.ini' FROM BACKUPSET '/dm/data/BACKUP_FILE_01'"
dmrman V8
RESTORE DATABASE '/dm/data/DMDB3/dm.ini' FROM BACKUPSET '/dm/data/BACKUP_FILE_01'
file dm.key not found, use default license!
RESTORE DATABASE CHECK......
RESTORE DATABASE,dbf collect......
RESTORE DATABASE,dbf refresh ......
RESTORE BACKUPSET [/dm/data/BACKUP_FILE_01] START......
total 5 packages processed...
total 7 packages processed...
RESTORE DATABASE,UPDATE ctl file......
RESTORE DATABASE,REBUILD key file......
RESTORE DATABASE,CHECK db info......
RESTORE DATABASE,UPDATE db info......
total 7 packages processed...
total 7 packages processed!
CMD END.CODE:[0]
restore successfully.
time used: 688.247(ms)

[dmdba@dmstandby2 bin]$ ./dmrman CTLSTMT="RECOVER DATABASE '/dm/data/DMDB3/dm.ini' FROM BACKUPSET '/dm/data/BACKUP_FILE_01'"
dmrman V8
RECOVER DATABASE '/dm/data/DMDB3/dm.ini' FROM BACKUPSET '/dm/data/BACKUP_FILE_01'
file dm.key not found, use default license!
Database mode = 0, oguid = 0
EP[0]'s cur_lsn[39037]
RESTORE RLOG CHECK......
RESTORE RLOG, gen tmp file......
RESTORE RLOG FROM BACKUPSET [/dm/data/BACKUP_FILE_01] START......
total 2 packages processed...
total 2 packages processed...
total 2 packages processed!
CMD END.CODE:[0]
EP:0 total 1 pkgs applied, percent: 100%
Recover from archive log finished, time used:0.006s.
recover successfully!
time used: 270.270(ms)

[dmdba@dmstandby2 bin]$ ./dmrman CTLSTMT="RECOVER DATABASE '/dm/data/DMDB3/dm.ini' UPDATE DB_MAGIC"
dmrman V8
RECOVER DATABASE '/dm/data/DMDB3/dm.ini' UPDATE DB_MAGIC
file dm.key not found, use default license!
Database mode = 0, oguid = 0
EP[0]'s cur_lsn[39037]
EP[0]'s apply_lsn[39037] >= end_lsn[39037]
recover successfully!
time used: 00:00:01.009

配置主库GRP1_RW_01

配置 dm.ini

在dmprimary机器上配置主库的实例名为 GRP1_RT_01,dm.ini 参数修改如下:

#实例名,建议使用―组名_守护环境_序号‖的命名方式,总长度不能超过 16

INSTANCE_NAME = GRP1_RW_01
PORT_NUM = 5236 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统 DM 数据守护与读写分离集群 V4.0 160
ARCH_INI = 1 #打开归档配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息

配置 dmmal.ini

配置 MAL 系统,各主备库的 dmmal.ini 配置必须完全一致,MAL_PORT 与 dm.ini 中 PORT_NUM 使用不同的端口值,MAL_DW_PORT 是各实例 对应的守护进程之间,以及守护进程和监视器之间的通信端口,配置如下:

[dmdba@dmprimary DMDB]$ vi dmmal.ini
[dmdba@dmprimary DMDB]$ cat dmmal.ini
MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
MAL_INST_NAME = GRP1_RW_01 #实例名,和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 10.0.0.200 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 10002 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 10.0.0.200 #实例的对外服务 IP 地址
MAL_INST_PORT = 5236 #实例的对外服务端口,和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 10003 #实例本地的守护进程监听 TCP 连接的端口
MAL_INST_DW_PORT = 10001 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP1_RW_02
MAL_HOST = 10.0.0.201 
MAL_PORT = 20002
MAL_INST_HOST = 10.0.0.201
MAL_INST_PORT = 5237
MAL_DW_PORT = 20003
MAL_INST_DW_PORT = 20001
[MAL_INST3]
MAL_INST_NAME = GRP1_RW_03
MAL_HOST = 10.0.0.202
MAL_PORT = 30002
MAL_INST_HOST = 10.0.0.202
MAL_INST_PORT = 5238
MAL_DW_PORT = 30003
MAL_INST_DW_PORT = 30001

配置 dmarch.ini

修改 dmarch.ini,配置本地归档和即时归档。
除了本地归档外,其他归档配置项中的 ARCH_DEST 表示实例是 Primary 模式时,需
要同步归档数据的目标实例名。
当前实例 GRP1_RWW_01 是主库,需要向即时备库 GRP1_RWW_02/ GRP1_RWW_03
同步数据,因此即时归档的 ARCH_DEST 分别配置为 GRP1_RWW_02 和 GRP1_RWW_03。

[root@dmprimary DMDB]# vi dmarch.ini 
[root@dmprimary DMDB]# cat dmarch.ini
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_RW_02 #实时归档目标实例名

[ARCHIVE_REALTIME2]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_RW_03 #实时归档目标实例名


[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm/data/DMDB/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb,0 表示无限制,范围

配置 dmwatcher.ini

修改 dmwatcher.ini 配置守护进程,配置为全局守护类型,使用自动切换模式。

[dmdba@dmprimary DMDB]$ vi dmwatcher.ini
[dmdba@dmprimary DMDB]$ cat dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453332 #守护系统唯一 OGUID 值
INST_INI = /dm/data/DMDB/dm.ini #dm.ini 配置文件路径 
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值,默认关闭

启动主库

[dmdba@dmprimary bin]$ ./DmServiceDMDB start mount
Starting DmServiceDMDB: [ OK ]

设置 OGUID  (453332)

[dmdba@dmprimary bin]$ disql sysdba/dameng123

服务器[LOCALHOST:5236]:处于普通配置状态
登录使用时间: 7.613(毫秒)
disql V8
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
DMSQL 过程已成功完成
已用时间: 9.263(毫秒). 执行号:4.
SQL> sp_set_oguid(453332);
DMSQL 过程已成功完成
已用时间: 7.398(毫秒). 执行号:5.
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
DMSQL 过程已成功完成
已用时间: 4.551(毫秒). 执行号:7.

修改数据库模式

SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
DMSQL 过程已成功完成
已用时间: 4.985(毫秒). 执行号:8.
SQL> alter database primary;
操作已执行
已用时间: 4.185(毫秒). 执行号:0.
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
DMSQL 过程已成功完成
已用时间: 7.390(毫秒). 执行号:9.

配置备库 GRP1_RW_02

配置 dm.ini

在 dmstandby1机器上配置备库的实例名为 GRP1_RW_02,dm.ini 参数修改如下

#实例名,建议使用―组名_守护环境_序号‖的命名方式,总长度不能超过 16

INSTANCE_NAME = GRP1_RW_02
PORT_NUM = 5237 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志重演信息

配置 dmmal.ini

跟主库mal.ini必须一致

[dmdba@dmstandby1 DMDB2]$ vi dmmal.ini
[dmdba@dmstandby1 DMDB2]$ cat dmmal.ini
MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
MAL_INST_NAME = GRP1_RW_01 #实例名,和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 10.0.0.200 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 10002 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 10.0.0.200 #实例的对外服务 IP 地址
MAL_INST_PORT = 5236 #实例的对外服务端口,和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 10003 #实例本地的守护进程监听 TCP 连接的端口
MAL_INST_DW_PORT = 10001 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP1_RW_02
MAL_HOST = 10.0.0.201 
MAL_PORT = 20002
MAL_INST_HOST = 10.0.0.201
MAL_INST_PORT = 5237
MAL_DW_PORT = 20003
MAL_INST_DW_PORT = 20001
[MAL_INST3]
MAL_INST_NAME = GRP1_RW_03
MAL_HOST = 10.0.0.202
MAL_PORT = 30002
MAL_INST_HOST = 10.0.0.202
MAL_INST_PORT = 5238
MAL_DW_PORT = 30003
MAL_INST_DW_PORT = 30001

配置 dmarch.ini

[dmdba@dmstandby1 DMDB2]$ vi dmarch.ini
[dmdba@dmstandby1 DMDB2]$ cat dmarch.ini
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_RW_01 #实时归档目标实例名

[ARCHIVE_REALTIME2]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_RW_03 #实时归档目标实例名

[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm/data/DMDB2/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb,0 表示无限制,范围

配置 dmwatcher.ini

修改 dmwatcher.ini 配置守护进程,配置为全局守护类型,使用自动切换模式。

[dmdba@dmstandby1 DMDB2]$ vi dmwatcher.ini
[dmdba@dmstandby1 DMDB2]$ cat dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453332 #守护系统唯一 OGUID 值
INST_INI = /dm/data/DMDB2/dm.ini #dm.ini 配置文件路径 
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值,默认关闭

启动备库1

[dmdba@dmstandby1 bin]$ ./DmServiceDMDB2 start mount
Starting DmServiceDMDB2: [ OK ]

设置 OGUID

[dmdba@dmstandby1 bin]$ disql sysdba/dameng123:5237

服务器[LOCALHOST:5237]:处于普通配置状态
登录使用时间: 6.889(毫秒)
disql V8
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
DMSQL 过程已成功完成
已用时间: 10.428(毫秒). 执行号:1.
SQL> sp_set_oguid(453332); 
DMSQL 过程已成功完成
已用时间: 4.169(毫秒). 执行号:2.
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
DMSQL 过程已成功完成
已用时间: 8.723(毫秒). 执行号:3.

修改数据库模式

SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
DMSQL 过程已成功完成
已用时间: 5.823(毫秒). 执行号:4.
SQL> alter database standby;
操作已执行
已用时间: 4.837(毫秒). 执行号:0.
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0); 
DMSQL 过程已成功完成
已用时间: 7.322(毫秒). 执行号:5.

配置备库 GRP1_RW_03

配置 dm.ini

在 dmstandby2机器上配置备库的实例名为 GRP1_RW_03,dm.ini 参数修改如下

#实例名,建议使用―组名_守护环境_序号‖的命名方式,总长度不能超过 16

INSTANCE_NAME = GRP1_RW_03
PORT_NUM = 5238 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID 
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志重演信息

配置 dmmal.ini

必须跟主库一样

MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
MAL_INST_NAME = GRP1_RW_01 #实例名,和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 10.0.0.200 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 10002 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 10.0.0.200 #实例的对外服务 IP 地址
MAL_INST_PORT = 5236 #实例的对外服务端口,和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 10003 #实例本地的守护进程监听 TCP 连接的端口
MAL_INST_DW_PORT = 10001 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP1_RW_02
MAL_HOST = 10.0.0.201 
MAL_PORT = 20002
MAL_INST_HOST = 10.0.0.201
MAL_INST_PORT = 5237
MAL_DW_PORT = 20003
MAL_INST_DW_PORT = 20001
[MAL_INST3]
MAL_INST_NAME = GRP1_RW_03
MAL_HOST = 10.0.0.202
MAL_PORT = 30002
MAL_INST_HOST = 10.0.0.202
MAL_INST_PORT = 5238
MAL_DW_PORT = 30003
MAL_INST_DW_PORT = 30001

配置 dmarch.ini

修改 dmarch.ini,配置本地归档和即时归档。 除了本地归档外,其他归档配置项中的 ARCH_DEST 表示实例是 Primary 模式时,需 要同步归档数据的目标实例名。

当前实例 GRP1_RW_03 是备库,守护系统配置完成后,可能在各种故障处理中, GRP1_RW_03 切换为新的主库,正常情况下,GRP1_RW_01 会切换为新的备库,需要向 GRP1_RW_01 和 GRP1_RWW_02 同步数据,因此即时归档的 ARCH_DEST 分别配置为 GRP1_RW_01 和 GRP1_RW_02。

[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_RW_02 #实时归档目标实例名

[ARCHIVE_REALTIME2]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_RW_01 #实时归档目标实例名

[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm/data/DMDB3/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb,0 表示无限制,范围

配置 dmwatcher.ini

修改 dmwatcher.ini 配置守护进程,配置为全局守护类型,使用自动切换模式。

[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453332 #守护系统唯一 OGUID 值
INST_INI = /dm/data/DMDB3/dm.ini #dm.ini 配置文件路径 
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值,默认关闭

启动备库2

[dmdba@dmstandby2 bin]$ ./DmServiceDMDB3 start mount
Starting DmServiceDMDB3: [ OK ]

设置 OGUID

[dmdba@dmstandby2 bin]$ disql sysdba/dameng123:5238

服务器[LOCALHOST:5238]:处于普通配置状态
登录使用时间: 7.251(毫秒)
disql V8
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
DMSQL 过程已成功完成
已用时间: 11.777(毫秒). 执行号:1.
SQL> sp_set_oguid(453332);
DMSQL 过程已成功完成
已用时间: 4.582(毫秒). 执行号:2.
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
DMSQL 过程已成功完成
已用时间: 5.013(毫秒). 执行号:3.

修改数据库模式

SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
DMSQL 过程已成功完成
已用时间: 5.165(毫秒). 执行号:4.
SQL> alter database standby;
操作已执行
已用时间: 4.842(毫秒). 执行号:0.
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
DMSQL 过程已成功完成
已用时间: 5.167(毫秒). 执行号:5.

 

配置监视器

由于主库和实时备库的守护进程配置为自动切换模式,因此这里选择配置确认监视器。 和普通监视器相比,确认监视器除了相同的命令支持外,在主库发生故障时,能够自动通知 实时备库接管为新的主库,具有自动故障处理的功能。

修改 dmmonitor.ini 配置确认监视器,其中 MON_DW_IP 中的 IP 和 PORT 和 dmmal.ini 中的 MAL_HOST 和 MAL_DW_PORT 配置项保持一致。

[dmdba@dmstandby2 DMDB3]$ vi dmmonitor.ini
[dmdba@dmstandby2 DMDB3]$ cat dmmonitor.ini
MON_DW_CONFIRM = 1 #确认监视器模式
MON_LOG_PATH = /dm/data/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大 32M
MON_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间
[GRP1]
MON_INST_OGUID = 453332 #组 GRP1 的唯一 OGUID 值
#以下配置为监视器到组 GRP1 的守护进程的连接信息,以―IP:PORT‖的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST,PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 10.0.0.200:10003
MON_DW_IP = 10.0.0.201:20003
MON_DW_IP = 10.0.0.202:30003

启动守护进程

主库:已成功OPEN

[dmdba@dmprimary bin]$ ./dmwatcher /dm/data/DMDB/dmwatcher.ini
DMWATCHER[4.0] V8
DMWATCHER[4.0] IS READY
show
2021-01-27 15:05:03
---------------------------------------------------------------------------
GROUP_NAME TYPE MODE OGUID MPP_FLAG AUTO_RESTART DW_STATUS DW_SUB_STATUS DW_CTL_STATUS 
GRP1 GLOBAL AUTO 453332 FALSE TRUE STARTUP SUB_STATE_START VALID

INST_OK NAME SVR_MODE SYS_STATUS RTYPE FSEQ FLSN CSEQ CLSN DW_STAT_FLAG 
OK GRP1_RW_01 PRIMARY MOUNT REALTIME 3741 39378 3741 39378 0 
---------------------------------------------------------------------------

show
2021-01-27 15:05:29
---------------------------------------------------------------------------
GROUP_NAME TYPE MODE OGUID MPP_FLAG AUTO_RESTART DW_STATUS DW_SUB_STATUS DW_CTL_STATUS 
GRP1 GLOBAL AUTO 453332 FALSE TRUE OPEN SUB_STATE_START VALID

INST_OK NAME SVR_MODE SYS_STATUS RTYPE FSEQ FLSN CSEQ CLSN DW_STAT_FLAG 
OK GRP1_RW_01 PRIMARY OPEN REALTIME 3743 44104 3743 44104 0 
---------------------------------------------------------------------------

备库1:已成功OPEN

[dmdba@dmstandby1 bin]$ ./dmwatcher /dm/data/DMDB2/dmwatcher.ini
DMWATCHER[4.0] V8
DMWATCHER[4.0] IS READY
show
2021-01-27 15:05:11
---------------------------------------------------------------------------
GROUP_NAME TYPE MODE OGUID MPP_FLAG AUTO_RESTART DW_STATUS DW_SUB_STATUS DW_CTL_STATUS 
GRP1 GLOBAL AUTO 453332 FALSE TRUE OPEN SUB_STATE_START VALID

INST_OK NAME SVR_MODE SYS_STATUS RTYPE FSEQ FLSN CSEQ CLSN DW_STAT_FLAG 
OK GRP1_RW_02 STANDBY OPEN REALTIME 3737 39037 3737 39037 0

DATABASE(GRP1_RW_02) APPLY INFO:
DSC_SEQNO[0], (ASEQ, SSEQ, KSEQ)[3737, 3737, 3737], (ALSN, SLSN, KLSN)[39037, 39037, 39037], N_TSK[0], TSK_MEM_USE[0]
---------------------------------------------------------------------------

show
2021-01-27 15:05:34
---------------------------------------------------------------------------
GROUP_NAME TYPE MODE OGUID MPP_FLAG AUTO_RESTART DW_STATUS DW_SUB_STATUS DW_CTL_STATUS 
GRP1 GLOBAL AUTO 453332 FALSE TRUE OPEN SUB_STATE_START VALID

INST_OK NAME SVR_MODE SYS_STATUS RTYPE FSEQ FLSN CSEQ CLSN DW_STAT_FLAG 
OK GRP1_RW_02 STANDBY OPEN REALTIME 3737 44104 3737 44104 0

DATABASE(GRP1_RW_02) APPLY INFO:
DSC_SEQNO[0], (ASEQ, SSEQ, KSEQ)[3743, 3743, 3743], (ALSN, SLSN, KLSN)[44104, 44104, 44104], N_TSK[0], TSK_MEM_USE[0]
---------------------------------------------------------------------------

备库2:已成功OPEN

DMWATCHER[4.0] IS READY
show
2021-01-27 15:05:20
---------------------------------------------------------------------------
GROUP_NAME TYPE MODE OGUID MPP_FLAG AUTO_RESTART DW_STATUS DW_SUB_STATUS DW_CTL_STATUS 
GRP1 GLOBAL AUTO 453332 FALSE TRUE OPEN SUB_STATE_START VALID

INST_OK NAME SVR_MODE SYS_STATUS RTYPE FSEQ FLSN CSEQ CLSN DW_STAT_FLAG 
OK GRP1_RW_03 STANDBY OPEN REALTIME 3737 39037 3737 39037 0

DATABASE(GRP1_RW_03) APPLY INFO:
DSC_SEQNO[0], (ASEQ, SSEQ, KSEQ)[3737, 3737, 3737], (ALSN, SLSN, KLSN)[39037, 39037, 39037], N_TSK[0], TSK_MEM_USE[0]
---------------------------------------------------------------------------

show
2021-01-27 15:06:28
---------------------------------------------------------------------------
GROUP_NAME TYPE MODE OGUID MPP_FLAG AUTO_RESTART DW_STATUS DW_SUB_STATUS DW_CTL_STATUS 
GRP1 GLOBAL AUTO 453332 FALSE TRUE OPEN SUB_STATE_START VALID

INST_OK NAME SVR_MODE SYS_STATUS RTYPE FSEQ FLSN CSEQ CLSN DW_STAT_FLAG 
OK GRP1_RW_03 STANDBY OPEN REALTIME 3737 44104 3737 44104 0

DATABASE(GRP1_RW_03) APPLY INFO:
DSC_SEQNO[0], (ASEQ, SSEQ, KSEQ)[3743, 3743, 3743], (ALSN, SLSN, KLSN)[44104, 44104, 44104], N_TSK[0], TSK_MEM_USE[0]
---------------------------------------------------------------------------

启动监视器

[dmdba@dmstandby2 bin]$ ./dmmonitor /dm/data/DMDB3/dmmonitor.ini
[monitor] 2021-01-27 15:07:33: DMMONITOR[4.0] V8
[monitor] 2021-01-27 15:07:33: DMMONITOR[4.0] IS READY.

[monitor] 2021-01-27 15:07:33: 收到守护进程(GRP1_RW_01)消息
WTIME WSTATUS INST_OK INAME ISTATUS IMODE RSTAT N_OPEN FLSN CLSN 
2021-01-27 15:07:33 OPEN OK GRP1_RW_01 OPEN PRIMARY VALID 2 44104 44104

[monitor] 2021-01-27 15:07:33: 收到守护进程(GRP1_RW_03)消息
WTIME WSTATUS INST_OK INAME ISTATUS IMODE RSTAT N_OPEN FLSN CLSN 
2021-01-27 15:07:33 OPEN OK GRP1_RW_03 OPEN STANDBY VALID 2 44104 44104

[monitor] 2021-01-27 15:07:33: 收到守护进程(GRP1_RW_02)消息
WTIME WSTATUS INST_OK INAME ISTATUS IMODE RSTAT N_OPEN FLSN CLSN 
2021-01-27 15:07:33 OPEN OK GRP1_RW_02 OPEN STANDBY VALID 2 44104 44104

修改dm_svc.conf 配置文件中参数

参数 修改值 解释
RW_SEPARATE 1 是否启用读写分离。0:不启用;1:启用
RW_PERCENT 25 读写分离分发比例,有效值范围0~100

开启SVR日志

修改dm.ini

 SVR_LOG_NAME = SLOG_ALL          #Using which sql log sys in sqllog.ini
 SVR_LOG = 1                       #Whether the Sql Log sys Is open or close. 1:open, 0:close.

编辑sqllog.ini

[dmdba@dmprimary log]$ cat /dm/data/DMDB/sqllog.ini 
BUF_TOTAL_SIZE = 10240 #SQLs Log Buffer Total Size(K)(1024~1024000)
BUF_SIZE = 1024 #SQLs Log Buffer Size(K)(50~409600)
BUF_KEEP_CNT = 6 #SQLs Log buffer keeped count(1~100)

[SLOG_ALL]
FILE_PATH = /dm/data/log 
PART_STOR = 0 
SWITCH_MODE = 2
SWITCH_LIMIT = 200
ASYNC_FLUSH = 1
FILE_NUM = 10
ITEMS = 0
SQL_TRACE_MASK = 2:3:23:25
MIN_EXEC_TIME = 100
USER_MODE = 0
USERS =

接口说明

DM 多种客户端接口都支持读写分离集群连接设置,以下说明客户端连接服务器时如何设置读写分离属性。

JDBC 接口

在 JDBC 连接串中增加了两个连接属性:
rwSeparate 是否使用读写分离系统,默认 0;取值(0 不使用,1 使用)。
rwPercent 分发到主库的事务占主备库总事务的百分比,有效值 0~100,默认
值 25。

DPI 接口

DPI 接口的连接句柄上可设置读写分离属性:

DSQL_ATTR_RWSEPARATE:读写分离(可读写)

DSQL_ATTR_RWSEPARATE_PERCENT:读写分离比例(可读写)

DIsql 工具可以直接设置读写分离的属性:

ODBC 接口

ODBC 接口中读写分离相关的连接关键字为:

RW_SEPARATE:是否配置读写分离:TRUE,FALSE

RW_SEPARATE_PERCENT:读写分离的比例:0~100

Provider 接口

DM .NET Provider 接口主要实现了 DmConnection,DmConnection 对象表示一
个 DM 数据库打开的连接。其支持的读写分离属性包括:

RwSeparate:是否读写分离,有效值为 true 或者 false;

RwPercent:表示分发到主库的事务占主备库总事务的百分比,有效值范围:
0~100,默认值为 25。

DCI 接口

DCI 接口支持会话上的读写分离属性设置:
OCI_ATTR_RW_SEPARATE 是否读写分离,有效值为 1 或者 0,默认 0;
OCI_ATTR_RW_SEPARATE_PERCENT 表示分发到主库的事务占主备库总事务的百分比,有效值范围:0~100,默认值为 25。

赞(0)
MySQL学习笔记 » DM8-数据守护读写分离搭建