DML语句binlog信息详解

最新推荐文章于 2023-10-23 14:56:35 发布
原创 最新推荐文章于 2023-10-23 14:56:35 发布 · 492 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mysql

本文详细解析了MySQL binlog中GTID事件的结构与内容，包括时间戳、serverid、事件类型、线程id、执行时间和错误码等关键信息，深入探讨了binlog在事务复制中的作用。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

首先一个insert语句插入4条数据，binlog解析后信息如下：
mysqlbinlog -vvv --base64-output='decode-rows’在这里插入图片描述第一部分：GTID_EVENT
DDL和DML的第一个EVENT，包含的信息主要

		时间：200512 13:44:22
		server id: 622（生成event的server）
		event类型：GTID
		last_committed:13 (逻辑时钟)
		sequence_number:14	
		rbr_only:yes（是否基于row复制）	
		GTID的值：e0860904-7eff-11ea-989d-5254010ec9c8:83800

第二部分：QUERY_EVENT

		时间：200512 13:44:22
		server id: 622（生成event的server）
		event类型：QUERY
		thread_id: 28713(线程id)
		exec_time:0 （执行语句的时间）
			DML:时间比较短，第一条数据更改后的时间
			DDL:实际执行时间
		error_code:0（执行语句的错误码）
		GTID的值：e0860904-7eff-11ea-989d-5254010ec9c8:83800
		执行语句：SET TIMESTAMP=1589262262 +
			DML:begin;
			DDL:实际执行SQL

第三部分：MAP_EVENT
行模式下特有的event,主要作用是able id和访问表的映射

		时间：200512 13:44:22
		server id: 622（生成event的server）
		Table_map：`test`.`te` mapped to number 507 （table id和访问表的映射）

第四部分：W_EVNET/D_EVENT/U_EVENT

		时间：200512 13:44:22
		server id: 622（生成event的server）
		Write_rows：table id 507 （写入表的table id）
		flags: STMT_END_F （标记本EVENT是本DML最后一个EVENT）
		变更语句：INSERT INTO

第五部分：XID_EVENT
事物提交的标志

		时间：200512 13:44:22
		server id: 622（生成event的server）
		Xid: 673133 （单个binlog内唯一的，不连续且不是递增）
		执行语句：COMMIT
Java实现从mysql5.5的binlog日志解析文件中获取mysql的DDL和DML
S_First的博客
09-01 834
前言 今天一不小心在正式环境执行了一条delete语句，这尼玛如果不恢复回来是要跑路的进奏了啊，赶紧去看MySQL的binlog日志。当然前提是你的MySQL开启了binlog，如果没有开启的话那下面就不用看了（拜拜了您呢）。 一.开启binlog方法 找到mysql的安装路径下的my.ini，一打开就能看到，不用多说。然后在 [mysqld] 下面添加一段话： #binlog日志文件,以mysql-bin开头，默认在C:\ProgramData\MySQL\MySQL S...
DM 源码阅读系列文章（五）Binlog replication 实现丨TiDB 工具
weixin_42241611的博客
04-14 187
文内涉及到 shard merge 相关逻辑功能，如 column mapping、shard DDL 同步处理，会在 shard merge 篇单独详细讲解，这里就不赘述了。
通过DML语句浅谈binlog和redo log
老叶茶馆
01-17 270
本文首发于GreatSQL社区原创内容未经授权不得随意使用，转载请联系小编并注明来源1. 导言2. binlog和redo log2.1 binlog2.2 redo log2.3 bin...
DM 源码阅读系列文章（五）Binlog replication 实现
weixin_33921089的博客
05-08 154
作者：lan 本文为 DM 源码阅读系列文章的第五篇。上篇文章 介绍了 dump 和 load 两个数据同步处理单元的设计实现，对核心 interface 实现、数据导入并发模型、数据导入暂停或中断的恢复进行了分析。本篇文章将详细地介绍 DM 核心处理单元 Binlog replication，内容包含 binlog 读取、过滤、路由、转换，以及执行等逻辑。 文内涉及到 shard merge 相...
MySQL binlog分析DML脚本
雪辉博客
03-14 424
#!/usr/bin/python # -*- coding: utf-8 -*- #python binlog_analyze.py binlog.000008 '2020-03-01 00:00:00' '2022-03-01 00:00:00' import os,sys binlog_name = sys.argv[1] start_datetime = sys.argv[2] stop_datetime = sys.argv[3] binlog_command = "mysqlbinlog --
mysql插入二进制命令_MySQL将语句写入到binlog二进制日志中
weixin_35529551的博客
01-19 350
由于二进制日志是公共资源，所有线程都要写二进制日志，所以一定要避免两个线程同时更新二进制日志。因此，在事件组写二进制日志时，二进制日志将获得一个互斥锁LOCK_log,然后在事件组写完后释放，由于服务器所有的会话都向二进制日志写事务，所以这个锁经常会阻塞某些会话线程1 写入DML语句通常是指DELETE/INSERT/UPDATE语句，为保证一致性，MySQL在写入二进制日志时同时获得事务级锁，写...
mysql binlog 统计_统计MySQL binlog中的DML语句
weixin_32820457的博客
01-19 305
统计MySQL binlog中的DML语句 MASTER@root@test 07:44:52gt;create table tab02(id int(10) primary key,name varchar(20)); Q统计MySQL binlog中的DML语句MASTER@root@test 07:44:52>create table tab02(id int(10) primary ...
mysql 实例启动利用binlog恢复_初识Mysql binlog日志及利用binlog恢复数据库操作
weixin_42297605的博客
01-26 248
初识MySQL 日志binlogMySQL重要log，二进制日志文件，记录所有DDL和DML语句(除select)，事件形式记录，包含语句所执行的消耗时间，事务安全型。DDL(数据库定义语言)，主要命令有create、alter、drop等。DDL主要定义或改变表table的结构、数据类型。建表时使用。MDL(数据操纵语言)，主要命令有select、update、insert、delete。my...
简明binlog event解析
老叶茶馆
12-06 952
用一个简明、清晰的步骤来解析一下DML操作产生的binlog event。主要是 TABLE_MAP_EVENT 和 UPDATE_ROWS_EVENT 类型的event。使用语法简单易上手的Golang来编码。数据库使用的是MySQL 5.7.34版本， Golang 1.15版本。获取binlog event获取binlog一般是模拟成从库封装通讯 package 向主库发送binlog du...
tidb-dm同步报错binlog checksum mismatch, data may be corrupted
line_on_database的博客
08-19 522
问题原因： binlog查过4G 处理方式： https://docs.pingcap.com/zh/tidb-data-migration/v1.0/error-handling relay 处理单元报错 event from * in * diff from passed-in event * 或迁移任务中断并包含 get binlog error ERROR 1236 (HY000)、binlog checksum mismatch, data may be corrupted 等 binlog 获取
达梦数据同步
03-04
达梦数据同步软件(Heterogeneous database Synchronization for DM，缩写为DMHS)是达梦公 司推出的新一代支持异构环境的高性能、高可靠、高可扩展数据库实时同步系统。该产品基于成熟 的关系数据模型和标准接口，跨越多种软硬件平台，支持强大而灵活的拓扑结构，能以极少的系统 开支实现秒级数据实时同步，可广泛应用于应急系统、容灾备份、负载均衡、数据移植、联机维 护、订阅分发、多业务中心等业务领域
达梦DM8使用低版本bin目录启动数据库报错分析
weixin_52814866的博客
06-06 831
前期测试达梦数据库DM8使用替换bin目录的方式升级主备集群环境，运行一段时间后，现在想测试下：还能不能使用低版本的bin目录来启动主备集群了，启动主备集群OK后，使用非确认监视器发现：集群状态异常，主库自动关闭，备库也处于mount状态，看来还是需要通过其他手段来实现版本降级启动集群。【故障现象】说明：可以看到通过非确认监视器发现主备集群节点状态异常；说明：通过检查log/目录下的dm_DW1_01_202206.log日志：发现是：[ERROR] Server DM8_DCT_VERSION misma
MySQL(七)：六大日志
Edwin_Hu的博客
05-17 2234
六大日志支撑MySQL服务的实现与运行
Mysql和达梦数据库备份与恢复
weixin_42123075的博客
05-08 498
本文介绍了Mysql数据库和达梦数据库全量、增量、自定义备份与恢复。 以及文件资源以压缩包的形式实现备份与恢复。 使用java定时任务实现备份与恢复操作。
达梦8数据库使用canal adapter配置同步MySQL的方案
typ2004的专栏
09-10 4009
canal是阿里巴巴抽取同步 MySQL binlog 的开源工具，有cannel deployer、adapter、admin等多个组件。 开源地址见：https://github.com/alibaba/canal/releases 参考：https://blog.csdn.net/u014730658/article/details/108399658 参考：https://blog.csdn.net/q936889811/article/details/95745721 其中，deploy.
达梦数据库开启sql日志及配置
不定期分享数据库相关内容。
03-19 6678
达梦数据库sql日志开启之后可以抓取数据库中运行的sql语句，并且包含了sql执行的耗时，sql日志还包括参数信息，错误信息等，对于排除数据库执行过的SQL语句或者批量优化SQL语句时此功能尤为重要。修改之后的文件，只要调用过程 SP_REFRESH_SVR_LOG_CONFIG() 就会生效。建议开启sql日志时开启异步SQL，这样对数据库系统运行的影响较小。设置sql日志为异步，按照文件大小进行切换，每个256M，6个文件循环写。检查SVR_LOG参数是否为1，该参数的相关取值含义如下图。
达梦数据库：mysql -dm数据同步dmhs工具搭建
qq_41592403的博客
08-13 2665
注意 Dmhs对mysql的 支持：表的ddl 操作，注释，索引，数据同步，支持装载和增量同步； 对于其它对象如触发器，函数，存储过程，不能装载和使用增量同步。建议表结构迁移使用达梦迁移工具（dts ）进行创建。 数据库版本 达梦 V8 ，mysql 8.0.15 源端操作 1设置 MYSQL 本地链接库路径 DMHS 在运行时，需要加载本地 MYSQL 动态库，linux/unix 平台下为 libmysqlclient.so。 在部署 DMHS 之前，需将 libmysqlclient.so 所在目录添
达梦数据库监视器
最新发布
weixin_47469872的博客
10-23 961
和单实例监视器配置文件不同，多实例监视器配置文件需要额外填写若干确认监视器参数和监视器组参数，额外的确认监视器参数包括 MON_INST_NUM 表示多实例监视器中实例的总个数，MON_HB_INTERVAL 表示各实例通信心跳校验间隔，MON_BRO_INTERVAL 表示各实例通信的心跳间隔，MOIN_ID 表示该监视器实例在该多实例监视器系统中的唯一标识，MON_MID 编号相同的表示属于同一个数据守护系统。需要注意的是，上述的任期号和日志信息由多实例确认监视器内部进行维护，对于用户是不可见的。
MySQL数据库Binlog日志详解与应用
MySQL的binlog日志是一种记录所有数据修改操作的二进制日志，包括INSERT、UPDATE、DELETE等，以及可能影响数据的非DML语句，如DDL（数据定义语言）操作。binlog以事件的形式存储，确保了数据变化的历史记录，这对于...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值