Doris:跨集群数据同步(CCR)

一、CCR介绍        

        CCR(Cross Cluster Replication) 是跨级群数据同步,能够在库/表级别将源集群的数据变更同步到目标集群,可用于在线服务的数据可用性、隔离在离线负载、建设两地三中心。CCR 通常被用于容灾备份、读写分离、集团与公司间数据传输和隔离升级等场景。

        CCR 工具主要依赖一个轻量级进程:Syncers。Syncers 会从源集群获取 binlog,直接将元数据应用于目标集群,通知目标集群从源集群拉取数据。从而实现全量和增量迁移。

1.1使用约束

  • 网络约束:需要 Syncer 与上下游的 FE 和 BE 都是通的;下游 BE 与上游 BE 是通的。
  • ThriftPool 限制:开大 thrift thread pool 大小,最好是超过一次 commit 的 bucket 数目大小
  • 版本最低要求:v2.0.3

二、实现跨集群数据同步

2.1 部署源、目标doris集

搭建环境06:部署Doris_doris部署-CSDN博客

2.2 打开集群binlog

# 在源集群和目标集群的 fe.conf 和 be.conf 中配置如下信息:</

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

m0_37559973

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值