MySQL 定时循环同步数据到clickHouse

本文详细介绍使用TreeSoft软件进行MySQL和clickHouse间的数据同步步骤。包括配置数据库连接、设置数据同步任务、运用日期函数查询增量数据及使用cron表达式灵活设定调度计划。通过实际操作验证任务效果,展示其高效的数据处理能力。

1、安装TreeSoft软件后,登录并分别配置MySQL、clickHouse连接信息,并测试连接成功!


2、进行数据同步任务的配置,指定来源库、目标库、查询SQL、调度计划
     查询SQL是关键,可以在where条件中使用日期函数用于查询出增量数据。
     调度计划使用的是cron表达式,可以百度一下,可以十分灵活的配置计划规则


3、【运行一次】任务验证效果,可查看执行日志确认。如果循环执行,就点【运行任务】。


4、直接写一个查询SQL命令并运行,测试环境有5千多万行数据,速度真是非常非常快。


  

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值