Skip to main content
MySQL binlog

简介

Binlog（Binary Log）是MySQL数据库中的一种日志文件，它记录了数据库中所有修改数据的操作，包括插入（INSERT）、更新（UPDATE）、删除（DELETE）以及数据定义语言（DDL）操作，如创建（CREATE）、修改（ALTER）和删除（DROP）表等。。

配置参数

查看BINLOG文件

MarshioAbout 5 minMySQLbinlogMySQL
MySQL binlog 解析

mysqlbinlog

前提

  • binlog_format=row
  • binlog_row_image=full
  • binlog_rows_query_log_events=off

命令

输出详细的 SQL

# 解析binlog
mysqlbinlog --base64-output=DECODE-ROWS -v binlog.000008

# ***********************输出如下***********************

# at 2607 --表示这是一个 position
#240717 13:52:04 server id 1  end_log_pos 2686 CRC32 0xd673a51b         Anonymous_GTID  last_committed=5        sequence_number=6       rbr_only=yes    original_committed_timestamp=1721195524808310   immediate_commit_timestamp=1721195524808310     transaction_length=357
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
# original_commit_timestamp=1721195524808310 (2024-07-17 13:52:04.808310 CST)
# immediate_commit_timestamp=1721195524808310 (2024-07-17 13:52:04.808310 CST)
/*!80001 SET @@session.original_commit_timestamp=1721195524808310*//*!*/;
/*!80014 SET @@session.original_server_version=80037*//*!*/;
/*!80014 SET @@session.immediate_server_version=80037*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
# at 2686
#240717 13:52:04 server id 1  end_log_pos 2772 CRC32 0xc813e61b         Query   thread_id=22    exec_time=0     error_code=0
SET TIMESTAMP=1721195524/*!*/;
BEGIN
/*!*/;
# at 2772
#240717 13:52:04 server id 1  end_log_pos 2847 CRC32 0x3ce01deb         Table_map: `mybatis`.`role` mapped to number 108
# has_generated_invisible_primary_key=0
# at 2847
#240717 13:52:04 server id 1  end_log_pos 2933 CRC32 0x63218733         Write_rows: table id 108 flags: STMT_END_F
### INSERT INTO `mybatis`.`role`
### SET
###   @1=2
###   @2='TEACHAER'
###   @3='Teacher'
###   @4='教师'
###   @5='老师'
###   @6=b'1'
###   @7='2024-07-17 13:52:04'
###   @8='2024-07-17 13:52:04'
# at 2933
#240717 13:52:04 server id 1  end_log_pos 2964 CRC32 0xfe84517b         Xid = 413
COMMIT/*!*/;
# at 2964
#240717 15:26:09 server id 1  end_log_pos 3043 CRC32 0x23b7e7b1         Anonymous_GTID  last_committed=6        sequence_number=7       rbr_only=yes    original_committed_timestamp=1721201169478520   immediate_commit_timestamp=1721201169478520     transaction_length=427
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
# original_commit_timestamp=1721201169478520 (2024-07-17 15:26:09.478520 CST)
# immediate_commit_timestamp=1721201169478520 (2024-07-17 15:26:09.478520 CST)
/*!80001 SET @@session.original_commit_timestamp=1721201169478520*//*!*/;
/*!80014 SET @@session.original_server_version=80037*//*!*/;
/*!80014 SET @@session.immediate_server_version=80037*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
# at 3043
#240717 15:26:09 server id 1  end_log_pos 3138 CRC32 0xd7ffff4a         Query   thread_id=22    exec_time=0     error_code=0
SET TIMESTAMP=1721201169/*!*/;
BEGIN
/*!*/;
# at 3138
#240717 15:26:09 server id 1  end_log_pos 3213 CRC32 0x0e6db3ba         Table_map: `mybatis`.`role` mapped to number 108
# has_generated_invisible_primary_key=0
# at 3213
#240717 15:26:09 server id 1  end_log_pos 3360 CRC32 0xba48de84         Update_rows: table id 108 flags: STMT_END_F
### UPDATE `mybatis`.`role`
### WHERE
###   @1=2
###   @2='TEACHAER'
###   @3='Teacher'
###   @4='教师'
###   @5='老师'
###   @6=b'1'
###   @7='2024-07-17 13:52:04'
###   @8='2024-07-17 13:52:04'
### SET
###   @1=2
###   @2='TEACHAER'
###   @3='Teacher'
###   @4='教师'
###   @5='老师，教师'
###   @6=b'1'
###   @7='2024-07-17 13:52:04'
###   @8='2024-07-17 15:26:09'
# at 3360
#240717 15:26:09 server id 1  end_log_pos 3391 CRC32 0x5086dcb7         Xid = 447
COMMIT/*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
MarshioAbout 2 minMySQLbinlogMySQL
DDL?? DML?? D...??

DML（数据操纵语言）

  • 目的：用于对数据库中的数据进行检索、插入、更新和删除。
  • 常用语句：
    • SELECT：从数据库中检索数据。
    • INSERT：向数据库表中添加新的数据行。
    • UPDATE：修改数据库表中的现有数据。
    • DELETE：从数据库表中删除数据。
  • 特点：DML操作直接影响数据库的数据内容，但不改变表的结构。
MarshioAbout 2 minMySQLbinlogMySQL
MySQL update 不支持子查询

背景：业务需要将一批误操作的数据状态还原，由于系统还不是很成熟，所以批量接口还不支持，所以只能从数据库层面进行操作。

数据准备

  • MySQL 版本：8.0.25
  • 服务器：2c2G （负载很低）

表结构

create table case_update_self
(
    id           int unsigned auto_increment
        primary key,
    global_id    varchar(64) not null,
    status       varchar(16) not null,
    publish_time datetime    null,
    constraint global_id
        unique (global_id)
);
MarshioLess than 1 minuteMySQLMySQL小技巧
记一次MySQL查询深入优化--索引类型

前言

书接上回，记一次MySQL查询深入优化--类型不匹配，我们通过修改查询条件里的条件右侧的类型是索引生效了，但是我们知道，优化效果其实不是很明显，:han。

环境及数据准备

  • MySQL 版本：8.0.25
  • 服务器：2c2G （负载很低）

表结构

CREATE TABLE `a` (
  `id` bigint NOT NULL AUTO_INCREMENT ,
  -- ...
  -- 业务数据
  -- ...
  `publish_time` varchar(19) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NOT NULL ,
  `create_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ,
  `update_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP ,
  PRIMARY KEY (`id`),
  KEY `idx_update_time` (`update_time`),
  KEY `idx_publish_time` (`publish_time`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci;
MarshioAbout 2 minMySQL查询深入优化源码阅读MySQL索引优化
MySQL8.0.x 源码阅读问题汇总

CMake Error

在解决问题前，我们需要先了解下什么是cmake文件.

CMake is the de-facto standard for building C++ code, with over 2 million downloads a month. It’s a powerful, comprehensive solution for managing the software build process. Get everything you need to successfully leverage CMake by visiting our resources section.

简译即：cmake是构建c++代码的标准，我感觉可以理解为Java中的Maven（某种程度上）。

MarshioLess than 1 minuteMySQL源码阅读MySQLC++
Datetime Index

为什么要写这篇文章？因为我遇到一个奇怪的问题，如下。

我有一张表，有200w数据，

MarshioLess than 1 minuteMySQLindexMySQLdatetime index
记一次MySQL查询深入优化--类型不匹配

前言

某一天，产品经理找到我说，我们收到上级反馈，说这个页面的响应有些让人抓狂（修饰后的说法doge），我打开F12查看了响应时间，enmmm，竟然需要耗时12s+。

话不多说，准备动手。

环境及数据准备

由于这里涉及到了业务数据，所以我在这里只能模拟数据进行演示。

MySQL版本：8.0.25

表结构

CREATE TABLE `a` (
  `id` bigint NOT NULL AUTO_INCREMENT ,
  -- ...
  -- 业务数据
  -- ...
  `publish_time` varchar(19) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NOT NULL ,
  `create_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ,
  `update_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP ,
  PRIMARY KEY (`id`),
  KEY `idx_update_time` (`update_time`),
  KEY `idx_publish_time` (`publish_time`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci;
MarshioAbout 4 minMySQL查询深入优化源码阅读MySQL索引优化