DM8一实时备机+一异步备机集群搭建

最新推荐文章于 2024-09-17 15:26:23 发布
原创 最新推荐文章于 2024-09-17 15:26:23 发布 · 138 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文详细指导了如何规划主机，停止和备份数据库，以及在主库和备库间进行数据迁移、恢复与配置。涉及实例操作、dmrman、dmwatcher等工具的使用，适合数据库管理员和运维人员参考。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

1 主机规划

 

主机ip

实例名

端口

主库

172.16.20.184

3DW_1

5236

实时备库

172.16.20.55

3DW_2

5236

异步备库

172.16.20.141

3DW_3

5236

2 进入/home/dmdba/dmdbms/bin停止数据库

./DmService3DW_1 stop

3 在脱机状态 使用dmrman备份主库

./dmrman ctlstmt="backup database '/home/dmdba/dmdbms/data/3DW_1/dm.ini' full to backup_3dw1 backupset '/home/dmdba/dmdbms/data/3DW_1/backup_3dw1'"

4 将备份发送到备库

scp -r /home/dmdba/dmdbms/data/3DW_1/backup_3dw1/ dmdba@172.16.20.55:/home/dmdba/dmdbms/data/3DW_2

5 脱机状态下在备库上使用dmrman还原、恢复与更新(下面是实时备库，异步备库一样)读数据文件失败--》换dmdba用户

还原：./dmrman ctlstmt="restore database '/home/dmdba/dmdbms/data/3DW_2/dm.ini' from backupset '/home/dmdba/dmdbms/data/3DW_2/backup_3dw1'"

恢复：./dmrman ctlstmt="recover database '/home/dmdba/dmdbms/data/3DW_2/dm.ini' from backupset '/home/dmdba/dmdbms/data/3DW_2/backup_3dw1'"

更新：./dmrman ctlstmt="recover database '/home/dmdba/dmdbms/data/3DW_2/dm.ini' update db_magic"

6 配置主库

6.1 dm.ini配置：

INSTANCE_NAME=3DW_1

ARCH_INI=1

MAL_INI=1

ALTER_MODE_STATUS= 0

ENABLE_OFFLINE_TS = 2

主库和实时备库新加:

TIMER_INI = 1     #配置有异步归档时，打开定时器，定时同步归档到异备库

6.2 dmmal.ini：

MAL_CHECK_INTERVAL = 5

MAL_CONN_FAIL_INTERVAL = 5

[MAL_INST1]

MAL_INST_NAME = 3DW_1

MAL_HOST = 172.16.20.184

MAL_PORT = 61141

MAL_INST_HOST = 172.16.20.184

MAL_INST_PORT = 5236

MAL_DW_PORT = 52141

MAL_INST_DW_PORT = 33141

[MAL_INST2]

MAL_INST_NAME = 3DW_2

MAL_HOST = 172.16.20.55 

MAL_PORT = 61141 

MAL_INST_HOST = 172.16.20.55 

MAL_INST_PORT = 5236

MAL_DW_PORT = 52141 

MAL_INST_DW_PORT = 33141

[MAL_INST3]

MAL_INST_NAME = 3DW_3

MAL_HOST = 172.16.20.141 

MAL_PORT = 61141 

MAL_INST_HOST = 172.16.20.141 

MAL_INST_PORT = 5236

MAL_DW_PORT = 52141 

MAL_INST_DW_PORT = 33141

6.3 dmarch.ini:

[ARCHIVE_REALTIME1]

ARCH_TYPE = REALTIME 

ARCH_DEST = 3DW_2

[ARCHIVE_LOCAL1]

ARCH_TYPE = LOCAL

ARCH_DEST = /home/dmdba/dmdbms/data/3DW_1/bak 

ARCH_FILE_SIZE = 512

ARCH_SPACE_LIMIT = 10240

异步备库不需要：

[ARCHIVE_ASYNC]
ARCH_TYPE = ASYNC #异步归档类型
ARCH_DEST = 3DW_3#异步归档目标实例名
ARCH_TIMER_NAME = RT_TIMER #定时器名称，和dmtimer.ini 中的名称一致

6.4 配置 dmtimer.ini（主和实时备库都需要）用于定时触发实例发送归档日志到异步备库

下面示例中定时器配置为每天 00:00:00 触发主库发送归档日志到异步备库，可以根据实际情况再做调整。
[RT_TIMER] #和 dmarch.ini 中的 ARCH_TIMER_NAME 一致
TYPE = 2
FREQ_MONTH_WEEK_INTERVAL = 1
FREQ_SUB_INTERVAL = 0
FREQ_MINUTE_INTERVAL = 0
START_TIME = 00:00:00
END_TIME = 00:00:00
DURING_START_DATE = 2016-02-11 17:36:09
DURING_END_DATE = 9999-12-31 23:59:59
NO_END_DATE_FLAG = 1
DESCRIBE = RT TIMER
IS_VALID = 1

6.5 dmwatcher.ini:

[GRP1]

DW_TYPE = GLOBAL

DW_MODE = AUTO

DW_ERROR_TIME = 10

INST_RECOVER_TIME = 60

INST_ERROR_TIME = 10

INST_OGUID = 453331

INST_INI = /home/dmdba/dmdbms/data/3DW_1/dm.ini

INST_AUTO_RESTART = 1

INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver

RLOG_SEND_THRESHOLD = 0

RLOG_APPLY_THRESHOLD = 0

6.6 将配置文件发送到两个备库:

scp dm.ini dmmal.ini dmarch.ini dmwatcher.ini dmdba@172.16.20.55:/home/dmdba/dmdbms/data/3DW_2

scp dm.ini dmmal.ini dmarch.ini dmwatcher.ini dmdba@172.16.20.141:/home/dmdba/dmdbms/data/3DW_3

6.7 配置主库OGUID:

①以mount模式开启主库：进入安装得bin目录，输入：

./dmserver /home/dmdba/dmdbms/data/3DW_1/dm.ini  mount

②新打开一个终端，登录disql，修改OGUID

   SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);

SQL>sp_set_oguid(453331);

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

③修改数据库模式

alter database primary;

7 配置备库

将dm.ini里面的INSTANCE_NAME设置为3DW_2  3DW_3   还有所有路径改变

配置dmarch.ini 将ARCH_DEST参数修改为除自己外的库（异步备库只保留本地归档）

Dmwatcher里面改路劲

配置备库OGUID:

①以mount模式开启备库：进入安装得bin目录，输入：

./dmserver /home/dmdba/dmdbms/data/3DW_2/dm.ini  mount

②新打开一个终端，登录disql，修改OGUID

   SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);

SQL>sp_set_oguid(453331);

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

③修改数据库模式

alter database standby;

8 配置异步备库

8.1 dmarch.ini

[ARCHIVE_LOCAL1]

ARCH_TYPE = LOCAL

ARCH_DEST = /home/dmdba/dmdbms/data/3DW_3/bak 

ARCH_FILE_SIZE = 512

ARCH_SPACE_LIMIT = 10240

8.2 dmwatcher.ini

修改 dmwatcher.ini 配置守护进程，配置为本地守护类型，异步备库不具备故障自动切换等功能，DW_MODE 配置并不起作用，此处配置为 MANUAL 即可，另外异步备库不需要配置 dmwatcher.ctl 控制文件。

[GRP1]

DW_TYPE = LOCAL #本地守护类型

DW_MODE = MANUAL #故障手动切换模式

DW_ERROR_TIME = 10 #远程守护进程故障认定时间

INST_ERROR_TIME = 10 #本地实例故障认定时间

INST_OGUID = 453331 #守护系统唯一 OGUID 值

INST_INI = /home/dmdba/dmdbms/data/3DW_3/dm.ini #dm.ini 配置文件路径   

INST_AUTO_RESTART = 1 #打开实例的自动启动功能

INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver #命令行方式启动

8.3 配置异步备库OGUID

①以mount模式开启异步备库：进入安装得bin目录，输入：

./dmserver /home/dmdba/dmdbms/data/DM3/dm.ini  mount

②新打开一个终端，登录disql，修改OGUID

   SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);

SQL>sp_set_oguid(453331);

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

③修改数据库模式

alter database standby;

9 在备库上配置监视器dmmonitor.ini

MON_DW_Confirm = 1

MON_LOG_PATH = /home/dmdba/dmdbms/data/monitor_3dw_log

MON_LOG_INTERVAL = 60

MON_LOG_FILE_SIZE = 32

MON_LOG_SPACE_LIMIT = 0

[GRP1]

MON_INST_OGUID = 453331

MON_DW_IP = 172.16.20.184:52141

MON_DW_IP = 172.16.20.55:52141

MON_DW_IP = 172.16.20.141:52141

10 启动三个库的守护进程

./dmwatcher /home/dmdba/dmdbms/data/3DW_1/dmwatcher.ini

./dmwatcher /home/dmdba/dmdbms/data/3DW_2/dmwatcher.ini

./dmwatcher /home/dmdba/dmdbms/data/3DW_3/dmwatcher.ini

11 启动监控功能

./dmmonitor /home/dmdba/dmdbms/data/dmmonitor/dmmonitor.ini

注意：记得关闭防火墙，端口号不能重，初始化实例，配置文件名不能错

推荐使用达梦的云适配中心网站了解更多使用内容：https://eco.dameng.com，或者到云适配中心的社区去提问哦！

异步备库部署
weixin_43642661的博客
05-26 213
异步备库部署 异步备库的搭建背景 异步备库一般用于历史数据统计、周期报表等对数据实时性要求不高的业务场合。异步归档时机可以选择在源库空闲的时候，可避免源库的业务高峰期同步数据对性能的影响 异步备库环境配置 primary: 10.206.5.55 10.206.5.60 HA做主：vip: 10.206.5.31 standby 10.206.5.56 10.206.5.57 一、数据准备 1.安装主库(160安装软件和实例，155安装软件) 1)安装数据库 2)初始化数据库 3)启动DM8服务器 cd /
DM数据库学习之路(七）DM8实时主备集群+异步备库部署及测试
weixin_44460848的博客
01-17 1150
异步备库支持多源配置，目的是在实时或即时主备环境中，当主备库切换或者主库故障时，备库接管以后可以继续向同一个异步备库同步数据，因此如果主库配置了异步备库，在所有备库上也需要配置相同的异步备库，备库只有在切换为主库时才会向其同步数据。
DM数据库实时主备和异步备库部署
m0_72514662的博客
08-19 1212
本文主要讲述了DM数据守护系统的相关知识和实时备库与异步备库的部署步骤。如有错误，欢迎指正。
在DMDSC下添加一个异步备库
m0_58810155的博客
09-18 118
在搭建好DMDSC之后可以将在此集群基础上创建守护集群并添加一个异步备库。具体步骤与搭建守护集群相似。搭建DMDSC可以看另一边博文。
DM数据库备份
Flora
06-13 1571
DM数据备份还原分为两种类型：逻辑导入导出命令：命令位置：${DM_HOME}/bin逻辑导入导出数据库对象分级： 备份和恢复依赖归档日志，除了表备份还原，其他的联机备份与还原必须运行在归档模式下。介质故障时如磁盘损坏，可以利用归档日志，恢复至上一次提交或指定时间DM 数据库定义了多种归档方式，包括本地归档、实时归档、即时归档、异步归档和远程归档，其中本地归档和远程归档与备份还原密切相关LSN：是由系统自动维护的bigint类型数值，具有自动递增、全局唯一的特点，每个LSN都代表着DM数据库内部产生的一
【达梦数据库】DM 实时主备+异步备库部署
weixin_44559140的博客
07-28 4531
达梦数据库的实时主备和异步备库的超小白级别部署。
达梦数据库 1实时1异步备机数据守护集群搭建
qq_44669390的博客
07-08 962
三节点 一主一实时备机一异步备机搭建
DSC+DW实时+异步搭建部署
最新发布
qq_56594426的博客
09-17 1952
配置 DMDSC+双节点节点数据守护。
达梦数据库（二）实时主备集群搭建
k15260637027的博客
04-24 3217
达梦数据库主备集群搭建
达梦8集群搭建及原理
m0_72231829的博客
10-14 1005
架构：将主库产生的REDO日志传输的备库，备库接收并重演日志，从而实现主备库的数据同步。DM数据守护的核心思想是监控数据库状态，获取主、备数据同步情况，为REDO日志传输与重演过程中出现的各种异常情况提供一系列的解决方案。监控数据库状态、发送状态信息、监控其他守护进程消息、接收监视器消息、主备库启动运行、备库故障处理、备库异常处理、主库故障处理、故障修复处理。原理：主要是基于REDO日志传输重做，主备机各有一份自己的数据，不需要额外的共享存储，利用REDO日志传输重做来实现主备机数据一致。
达梦数据库部署异步主备集群
weixin_46357988的博客
06-22 1125
本示例中数据守护进程组名为"GRP1" ，配置为实时主备，主库实例名为"NODE1" ，备库实例名为"NODE2"。如果服务器上面有多个网卡，服务ip和心跳ip可以使用不同的网卡ip，这里只有一个网卡，就是使用相同的ip进行测试使用。主备角色服务ip心跳ip（MAL_HOST）实例名实例端口主库NODE15236备库NODE25236监视器实例名PORT_NUMMAL_HOSTMAL_PORTNODE15236523752385239NODE25236。
DM8 &1实时备机1异步备机守护集群部署
oneluckydoga的博客
02-20 890
MAL_INST_NAME = GRP1_RT_01 #实例名，和 dm.ini 的 INSTANCE_NAME 一致。INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver #命令行方式启动。INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver #命令行方式启动。INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver #命令行方式启动。
DM8 数据库还原与恢复
weixin_45221114的博客
04-21 937
场景介绍： 达梦8数据库在运行时，发生了介质故障，排查后发现/dm8/data/DAMENG/下的某些dbf文件没有了。那发生如此致命的问题，你一定会庆幸自己做了全库的备份。 解决问题： 首先，通过v$datafile查看一下所有数据文件的状态 SQL> select path ,status$ from v$datafile; 你会发现通过disql登录，查看v$datafile，部分数据文件已经不能正常显示了，这时为了确认这些乱码信息，还可以登录manager管理工具来再次查看v$d.
达梦数据库 集群配置异步备库方案
weixin_46286050的博客
04-23 402
一、在实际应用中，如果数据库规模很大，并且对数据的实时性要求不是很严格，则可以配置多个异步备库用于分担统计报表等任务。 异步备库支持多源配置，目的是在实时或即时主备环境中，当主备库切换或者主库故障时，备库接管以后可以继续向同一个异步备库同步 数据，因此如果主库配置了异步备库，在所有备库上也需要配置相同的异步备库，备库只有在切换为主库时才会向其同步数据。 二、这里采用实时主备环境，增加一台机器用来部署异步备库，其他环境不变； 准备三台服务器，测试实时主备环境加入一台异步备库服务器， 三、参照官方文档，准
达梦8数据守护集群
weixin_43459159的博客
09-24 2303
前言 你好！ 配置数据守护 V4.0 之前，必须先通过备份还原方式同步各数据库的数据，确保各数据的数据保持完全一致。主库可以是新初始化的数据库，也可以是正在生产、使用中的数据库。不能使用分别初始化库或者直接拷贝数据文件的方法，原因如下： 1． 每个库都有一个永久魔数（permenant_magic），一经生成，永远不会改变，主库传送日志时会判断这个值是否一样，确保是来自同一个数据守护环境中的库，否则传送不了日志。 2． 由于 dminit 初始化数据库时，会生成随机密钥用于加密，每次生成的密钥都不相同，备库
Linux 下 DM 8 实时备库+异步备库
DHY151的博客
08-28 303
环境准备： redhat7.6 两台 test01:主库 网卡1、192.168.89.128 网卡2、192.168.206.128 内部通信 test02:实时备库 网卡1、192.168.89.129 网卡2、192.168.206.129 内部通信 test03:异步备库 网卡1、192.168.89.130 网卡2、192.168.206.130 内部通信 1、安装数据库(主&备) 环境检查 关闭防火墙 systemctl stop firew
DM8 使用dmrman工具进行备份与还原
weixin_52397268的博客
05-17 368
1.使用dmrman进行备份 1.1关闭服务,dmrman只能冷备因此需要关闭服务只需要AP服务 [dmdba@localhost bin]$ll *Dm* [dmdba@localhost bin]$ ./DmServiceDMSERVER stop 1.2备份,将源库的数据进行脱机备份 [dmdba@localhost bin]$ ./dmrman RMAN> backup database '/home/dmdba/dmdbms/data/DAMENG/dm.ini' full backu
达梦数据库配置异步备库
MooooooooooM的博客
08-14 560
达梦数据库配置异步备库 在实际应用中，如果数据库规模很大，并且对数据的实时性要求不是很严格，则可以配置多个异步备库用于分担统计报表等任务。 这里以实时主备环境为例，仍然采用 7.2 配置实时主备 小节的配置环境，对异步备库的搭建步骤做举例说明，读写分离集群和 MPP 主备的异步备库搭建步骤是相同的，只需要根据实际情况调整配置项的具体值即可。 这里以一个异步备库为例，配置在主库 GRP1_RT_01 上，异步备库实例名为GRP1_LOCAL_01。如果需要配置多个异步备库，对应的源实例配置可以参考主库GRP1
达梦数据库DM8实时主备集群安装部署过程
csyup1的博客
02-23 1390
1部署规划 1.1配置环境说明 1.2端口规划 2主库、备库和确认监视器准备 根据前期所讲解的DM8单机版的安装过程安装主库、备库和确认监视器的数据库软件以及主库、备库做相同路径和参数的初始化。 达梦数据库DM8单机版的命令行方式部署实施与测试过程： https://blog.csdn.net/csyup1/article/details/113996671 达梦数据库DM8单机版的图形界面方式部署实施与测试过程： https://editor.csdn.net/md/?articleId=11358844
使用docker搭建dm8 实时主备
05-24
要使用 Docker 搭建 DM8 实时主备，可以按照以下步骤进行： 1. 安装 Docker 和 Docker Compose 首先需要安装 Docker 和 Docker Compose，可以参考 Docker 官方文档进行安装。 2. 下载 DM8 镜像文件 可以从 DM 官网下载 DM8 镜像文件，也可以使用以下命令从 Docker Hub 上下载： ``` docker pull pingcap/dm:latest ``` 3. 创建 DM8 配置文件 在本地创建一个名为 `dm-master.yaml` 的文件，用于配置 DM8 的主节点。以下是一个示例配置文件： ```yaml master-addr: 172.20.0.2:8261 name: master1 data-dir: /home/data/master1 log-file: /home/logs/master1.log log-level: "info" discovery-mode: "static" static-nodes: - 172.20.0.2:8291 - 172.20.0.3:8291 - 172.20.0.4:8291 web-port: 8281 ``` 其中，`master-addr` 表示当前节点的地址和端口号，`name` 是节点的名称，`data-dir` 是数据存储的目录，`log-file` 是日志文件的路径，`log-level` 是日志级别。 `discovery-mode` 表示节点发现的模式，这里使用静态模式，`static-nodes` 是静态模式下所有节点的地址和端口号。 `web-port` 是 DM8 的 Web 界面端口号。 在本地创建一个名为 `dm-worker.yaml` 的文件，用于配置 DM8 的工作节点。以下是一个示例配置文件： ```yaml name: worker1 data-dir: /home/data/worker1 log-file: /home/logs/worker1.log log-level: "info" server-id: 101 relay-dir: /home/relay_log meta: case-sensitive: true worker-addr: 172.20.0.2:8262 master-addr: 172.20.0.2:8261 relay-binlog-name: mysql-binlog relay-binlog-gtid: "" source-id: "mysql-replica-01" from: host: "172.20.0.5" user: "root" password: "password" routes: route-rule-1: schema-pattern: "test" target-schema: "test" target-instance: "mysql-replica-02" enable-sharding: false ``` 其中，`name` 是节点的名称，`data-dir` 是数据存储的目录，`log-file` 是日志文件的路径，`log-level` 是日志级别。 `server-id` 是工作节点的 ID，`relay-dir` 是中继日志的存储路径。 `worker-addr` 是当前节点的地址和端口号，`master-addr` 是主节点的地址和端口号。 `relay-binlog-name` 是指定中继日志的文件名，`relay-binlog-gtid` 是中继日志的 GTID。 `source-id` 是源实例的 ID，`from` 是源实例的连接信息。 `routes` 是数据路由的配置，这里只配置了一个路由规则，将 `test` 库的数据路由到名为 `mysql-replica-02` 的实例中。 4. 创建 Docker Compose 配置文件 在本地创建一个名为 `docker-compose.yaml` 的文件，用于启动 DM8 的主节点和工作节点。以下是一个示例配置文件： ```yaml version: "3.7" services: dm-master: image: pingcap/dm:latest container_name: dm-master volumes: - ./dm-master.yaml:/etc/dm-master/dm-master.yaml ports: - "8261:8261" - "8281:8281" dm-worker: image: pingcap/dm:latest container_name: dm-worker volumes: - ./dm-worker.yaml:/etc/dm-worker/dm-worker.yaml depends_on: - dm-master ports: - "8262:8262" ``` 其中，`dm-master` 是 DM8 主节点的容器，`dm-worker` 是 DM8 工作节点的容器。`volumes` 挂载了之前创建的两个 YAML 配置文件，`ports` 映射了节点的端口号。 5. 启动 Docker Compose 在命令行中执行以下命令，启动 Docker Compose： ``` docker-compose up -d ``` 6. 验证 DM8 实时主备 使用浏览器访问 `http://localhost:8281`，可以查看 DM8 的 Web 界面。在界面上可以查看主备节点的状态，以及数据同步的情况。可以在主节点上进行写入操作，验证数据同步是否正常。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

记忆无法磨灭

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值