MPP主备搭建
本文以192.168.1.105/192.168.1.106 两节点MPP主备集群为例,只需将标颜色字体替换即可。
A机器上:
主库1实例路径:/home/dmdba/dmdbms/data/EP01/DAMENG/
备库2实例路径:/home/dmdba/dmdbms/data/EP02/DAMENG/
B机器上:
主库2实例路径:/home/dmdba/dmdbms/data/EP02/DAMENG/
备库1实例路径:/home/dmdba/dmdbms/data/EP01/DAMENG/
GRP1的oguid:453330
GRP2的oguid:453331
./dminit path=/home/dmdba/dmdbms/data/EP01
A机器上主库1
./dminit path=/home/dmdba/dmdbms/data/EP02
A机器上备库2
./dminit path=/home/dmdba/dmdbms/data/EP02
B机器上主库2
./dminit path=/home/dmdba/dmdbms/data/EP01
B机器上备库1
./dmserver path=/home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini
A机器上
./dmserver path=/home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini
B机器上
A机器上备份:
BACKUP DATABASE '/home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini' FULL TO BACKUP_FILE1 BACKUPSET '/home/dmdba/dmdbms/data/BACKUP_FILE_01';
scp到B机器
scp -r BACKUP_FILE_01 dmdba@192.168.1.106:/home/dmdba/dmdbms
B机器上还原到备库1:
RESTORE DATABASE '/home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini' FROM BACKUPSET '/home/dmdba/dmdbms/BACKUP_FILE_01';
因为脱机备份没有产生任何 REDO 日志,所以此处省略恢复数据库的操作步骤。
RECOVER DATABASE '/home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini' UPDATE DB_MAGIC
B机器上备份:
BACKUP DATABASE '/home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini' FULL TO BACKUP_FILE1 BACKUPSET '/home/dmdba/dmdbms/data/BACKUP_FILE_02';
scp到A机器
scp -r BACKUP_FILE_02 dmdba@192.168.1.105:/home/dmdba/dmdbms
A机器上还原到备库2:
RESTORE DATABASE '/home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini' FROM BACKUPSET '/home/dmdba/dmdbms/BACKUP_FILE_02';
因为脱机备份没有产生任何 REDO 日志,所以此处省略恢复数据库的操作步骤。
RECOVER DATABASE '/home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini' UPDATE DB_MAGIC;
恢复之后,用disql登录查看主备FLSN和CLSN以及永久魔数是否相同,相同再进行下一步。
恢复之后,用disql登录查看主备FLSN和CLSN以及永久魔数是否相同,相同再进行下一步。
./disql SYSDBA/SYSDBA@localhost:5236
./disql SYSDBA/SYSDBA@localhost:5237
./disql SYSDBA/SYSDBA@localhost:5236
./disql SYSDBA/SYSDBA@localhost:5236
select permanent_magic;
select file_LSN,cur_LSN from V$rlog;
INSTANCE_NAME = GRP1_MPP_EP01
PORT_NUM = 5236 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
MPP_INI = 1 #启用 MPP 配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息
MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
MAL_INST_NAME = GRP1_MPP_EP01 #实例名,和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 192.168.1.105 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 5337 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 192.168.1.105 #实例的对外服务 IP 地址
MAL_INST_PORT = 5236 #实例的对外服务端口,和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 5253 #实例对应的守护进程监听 TCP 连接的端口
MAL_INST_DW_PORT = 5243 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP2_MPP_EP02
MAL_HOST = 192.168.1.106
MAL_PORT = 5337
MAL_INST_HOST = 192.168.1.106
MAL_INST_PORT = 5236
MAL_DW_PORT = 5253
MAL_INST_DW_PORT= 5243
[MAL_INST3]
MAL_INST_NAME = GRP1_MPP_EP11
MAL_HOST = 192.168.1.106
MAL_PORT = 5338
MAL_INST_HOST = 192.168.1.106
MAL_INST_PORT = 5237
MAL_DW_PORT = 5254
MAL_INST_DW_PORT= 5244
[MAL_INST4]
MAL_INST_NAME = GRP2_MPP_EP22
MAL_HOST = 192.168.1.105
MAL_PORT = 5338
MAL_INST_HOST = 192.168.1.105
MAL_INST_PORT = 5237
MAL_DW_PORT = 5254
MAL_INST_DW_PORT= 5244
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_MPP_EP11 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /home/dmdba/dmdbms/data/EP01/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb, 0 表示无限制,范围 1024~4294967294M (必须改成非0)
[service_name1]
mpp_seq_no = 0
mpp_inst_name = GRP1_MPP_EP01
[service_name2]
mpp_seq_no = 1
mpp_inst_name = GRP2_MPP_EP02
./dmctlcvt TYPE=2 SRC=../data/EP01/DAMENG/dmmpp.ini DEST=../data/EP01/DAMENG/dmmpp.ctl
MPP各个节点的dmmal.ini、dmmpp.ctl必须完全一致,主库和备库的dmmpp.ctl也完必须全一致,因此直接把得到的dmmpp.ctl复制到备库和另一个节点的主备库上,也就是说,dmmal.ini和dmmpp.ctl各有四份。
scp dmmpp.ctl dmmal.ini dmdba@192.168.1.106:/home/dmdba/dmdbms/data/EP01/DAMENG/
scp dmmpp.ctl dmmal.ini dmdba@192.168.1.106:/home/dmdba/dmdbms/data/EP02/DAMENG/
scp dmmpp.ctl dmmal.ini dmdba@192.168.1.105:/home/dmdba/dmdbms/data/EP02/DAMENG/
确保复制过去了,在各个节点都检查一下文件是否存在:
ls dmdbms/data/EP01/DAMENG/ | grep dmm
ls dmdbms/data/EP02/DAMENG/ | grep dmm
修改OGUID和数据库模式
./dmserver /home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini mount
./disql SYSDBA/SYSDBA@localhost:5236 #{mpp_type=LOCAL}
SP_SET_PARA_VALUE(1,'ALTER_MODE_STATUS',1);
sp_set_oguid(45330);
SP_SET_PARA_VALUE(1,'ALTER_MODE_STATUS',0);
alter database primary;
INSTANCE_NAME = GRP2_MPP_EP02
PORT_NUM = 5236 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
MPP_INI = 1 #启用 MPP 配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息
各节点完全一致
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP2_MPP_EP22 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /home/dmdba/dmdbms/data/EP02/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb, 0 表示无限制,范围 1024~4294967294M (必须改成非0)
各节点完全一致
./dmserver /home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini mount
./disql SYSDBA/SYSDBA@localhost:5236 #{mpp_type=LOCAL}
SP_SET_PARA_VALUE(1,'ALTER_MODE_STATUS',1);
sp_set_oguid(45331);
SP_SET_PARA_VALUE(1,'ALTER_MODE_STATUS',0);
alter database primary;
INSTANCE_NAME = GRP1_MPP_EP11
PORT_NUM = 5237 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
MPP_INI = 1 #启用 MPP 配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息
各节点完全一致
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_MPP_EP01 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /home/dmdba/dmdbms/data/EP01/DAMENG/arch#本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb, 0 表示无限制,范围 1024~4294967294M (必须改成非0)
各节点完全一致
./dmserver /home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini mount
./disql SYSDBA/SYSDBA@localhost:5237 #{mpp_type=LOCAL}
SP_SET_PARA_VALUE(1,'ALTER_MODE_STATUS',1);
sp_set_oguid(45330);
SP_SET_PARA_VALUE(1,'ALTER_MODE_STATUS',0);
INSTANCE_NAME = GRP2_MPP_EP22
PORT_NUM = 5237 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
MPP_INI = 1 #启用 MPP 配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息
各节点完全一致
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP2_MPP_EP02 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /home/dmdba/dmdbms/data/EP02/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb, 0 表示无限制,范围 1024~4294967294M (必须改成非0)
各节点完全一致
./dmserver /home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini mount
./disql SYSDBA/SYSDBA@localhost:5237 #{mpp_type=LOCAL}
SP_SET_PARA_VALUE(1,'ALTER_MODE_STATUS',1);
sp_set_oguid(45331);
SP_SET_PARA_VALUE(1,'ALTER_MODE_STATUS',0);
alter database standby;
7.1A机器上的守护进程
dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45330 #守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭
[GRP2]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45331 #守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭
./dmwatcher /home/dmdba/dmdbms/dmwatcher/dmwatcher.ini
dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45330 #守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭
[GRP2]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45331 #守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭
MON_DW_CONFIRM = 1 #确认监视器模式
MON_LOG_PATH = /home/dmdba/dmdbms/dmmonitor/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大 32M
MON_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间(必须改成非0)
[GRP1]
MON_INST_OGUID = 45330 #组 GRP1 的唯一 OGUID 值 #以下配置为监视器到组 GRP1 的守护进程的连接信息,以―IP:PORT‖的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST,PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 192.168.1.105:5253
MON_DW_IP = 192.168.1.106:5254
[GRP2]
MON_INST_OGUID = 45331 #组 GRP2 的唯一 OGUID 值
#以下配置为监视器到组 GRP2 的守护进程的连接信息,以―IP:PORT‖的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST,PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 192.168.1.106:5253
MON_DW_IP = 192.168.1.105:5254
./dmmonitor /home/dmdba/dmdbms/dmmonitor/dmmonitor.ini
在监视器上执行 show 命令查看主备库实例和守护进程处于正常状态,关闭进程,注册服务。
确认WSTATUS和ISTATUS都为OPEN ,每组主备的FLSN、CLSN四个值都相同。
1.关闭监视器
2.关闭备机守护进程
3.关闭主机守护进程
4.关闭主机实例
5.关闭备机实例
A机器上:
./dm_service_installer.sh -t dmserver -dm_ini /home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini -m mount -p GRP1_MPP_EP01
./dm_service_installer.sh -t dmserver -dm_ini /home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini -m mount -p GRP2_MPP_EP22
./dm_service_installer.sh -t dmwatcher -watcher_ini /home/dmdba/dmdbms/dmwatcher/dmwatcher.ini -p dmwatcher1
B机器上:
./dm_service_installer.sh -t dmserver -dm_ini /home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini -m mount -p GRP2_MPP_EP02
./dm_service_installer.sh -t dmserver -dm_ini /home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini -m mount -p GRP1_MPP_EP11
./dm_service_installer.sh -t dmwatcher -watcher_ini /home/dmdba/dmdbms/dmwatcher/dmwatcher.ini -p dmwatcher2
C机器上:
./dm_service_installer.sh -t dmmonitor -i /home/dmdba/dmdbms/dmmonitor/monitor_nor.ini -p monitor