MySQL多版本并发控制机制(MVCC)-源码浅析

MySQL多版本并发控制机制(MVCC)-源码浅析

前言

作为一个数据库爱好者，自己动手写过简单的SQL解析器以及存储引擎，但感觉还是不够过瘾。<>诚然讲的非常透彻，但只能提纲挈领，不能让你玩转某个真正的数据库。感谢cmake,能够让我在mac上用x...

文章

无毁的湖光

2018-08-22

8877浏览量

【从入门到放弃-MySQL】数据库连接过程分析

前言

上周出现了几次连接超时、连接池满还有dbc连接事务模板失败的问题。所以有必要深入了解下MySQL的连接过程。

正好，上周研究了怎么用Clion调试MySQL源码，接下来通过调试来研究一下吧。

服务端

启动

sql/main.cc

extern int mysqld_main(int argc...

文章

aloof_

2019-05-29

740浏览量

[MySQL 学习] Innodb锁系统(2)关键函数路径

前提：

以下分析基于标准的配置选项：

tx_isolation = REPEATABLE-READ

innodb_locks_unsafe_for_binlog = OFF

lock->type_mode用来表示锁的类型，实际上lock->type_mode包含了几乎所有锁的模式信息，...

文章

zhaiwx_yinfeng

2016-05-10

2128浏览量

万券齐发助力企业上云，爆款产品低至2.2折起！

限量神券最高减1000，抢完即止！云服务器ECS新用户首购低至0.95折！

广告

MySQL 8.0 新的火山模型执行器

MySQL的总体架构

通常我们认为MySQL的整体架构如下，

官方10年前开始就一直在致力于优化器代码的重构工作，目的是能确保在SQL的执行过程中有清晰的阶段，包括分离Parse和Resolve阶段、更好的支持更多新的语法、保证Name和Type的解析、尽量在Prepare阶段做完Transfo...

文章

悟道之客

2020-09-09

613浏览量

InnoDB事务结构体代码变量列表

事务结构 struct trx_t

写在前面

InnoDB是MySQL的一个存储引擎，支持事务，支持非堵塞的一致性读，物理存储结构是Page，每个事务都有回滚日志，重做日志，事务还会有死锁检测，各种各样不同的锁等等等等

翻看innodb的源码，发现数下来开启一个事务的时候，InnoDB需要处理63...

文章

yangdehua

2016-12-23

2105浏览量

InnoDB事务结构体代码变量列表

事务结构 struct trx_t

写在前面

InnoDB是MySQL的一个存储引擎，支持事务，支持非堵塞的一致性读，物理存储结构是Page，每个事务都有回滚日志，重做日志，事务还会有死锁检测，各种各样不同的锁等等等等

翻看innodb的源码，发现数下来开启一个事务的时候，InnoDB需要处理...

文章

yangdehua

2016-12-23

1343浏览量

[MySQL 5.6] GTID内部实现、运维变化及存在的bug

由于之前没太多深入关注gtid，这里给自己补补课，本文是我看文档和代码的整理记录。

本文的主要目的是记下跟gtid相关的backtrace，用于以后的问题排查。另外也会讨论目前在MySQL5.6.11版本中存在的bug。

本文讨论的内容包括

一.主库上的gtid产生及记录

二.备库如何...

文章

zhaiwx_yinfeng

2016-05-10

1690浏览量

数据库内核月报 － 2015 / 10-MySQL · 捉虫动态 · start slave crash 诊断分析

问题现象

研发同学执行下列语句序列

stop slave; set global slave_parallel_workers=0; start slave;

后程序 hang 住，不一会返回了2013 错误，即服务器连接异常中断，检查 mysqld error log, 发现在mysqld在将...

文章

db匠

2016-05-23

1379浏览量

TokuDB · 源码分析 · 一条query语句的执行过程

Mysql是基于代价cost来选择索引，如果一个表有好几个索引，optimizer会分别计算每个索引访问的代价，选择代价最小的索引进行访问，这个索引也被称为access path。

Pickup index

Mysql在执行query语句的时候会在server层计算每个可选索引的代价，并选择代...

文章

db匠

2017-03-08

1263浏览量

MySQL InnoDB事务结构体代码变量全攻略(附源码)

写在前面  ​

InnoDB是MySQL的一个存储引擎，支持事务，支持非堵塞的一致性读，物理存储结构是Page，每个事务都有回滚日志，重做日志，事务还会有死锁检测，各种各样不同的锁等等。

翻看InnoDB的源码，发现数下来开启一个事务的时候，InnoDB需要处理63个变量，变量类型纷繁复杂，结...

文章

稀奇古怪

2017-05-12

2028浏览量

MySQL的handler接口

是比较偏的部分，可能是因为不是标准SQL，生产环境或者线上很少看到有人使用。本文以‘小白’视角，记录下如何使用HANDLER，以及相关的代码简单介绍。

本文的源码部分基于5.7.5，从5.7开始也支持对分区表的HANDLER操作了。

1.使用

具体的参考官方文档：http://dev.m...

文章

zhaiwx_yinfeng

2016-05-10

1566浏览量

Mysql一分钟定位 Next-Key Lock，你需要几分钟

连接与线程

查看连接信息 show processlist

+----+------+------------------+------+---------+------+----------+------------------+

| Id | User | Host |...

文章

王清培

2020-01-27

514浏览量

MYSQL merge union merge sort_union 的不同

今天看到MYSQL手册的Index Merge Optimization，不禁有一些想法，所以记录如下文

先来解释下2种方式不同：

这两种方式都使用一个table中的不同二级索引进行，注意是单个表。

merge union :在使用or的时候如果二级索引包含了所有的key part,那么就可以得到...

文章

重庆八怪

2016-11-20

852浏览量

[MySQL学习] Innodb锁系统(4) Insert/Delete 锁处理及死锁示例分析

A.INSERT

插入操作在函数btr_cur_optimistic_insert->btr_cur_ins_lock_and_undo->lock_rec_insert_check_and_lock这里进行锁的判断，我们简单的看看这个函数的流程：

1.首先先看看欲插入记录之后的数据上...

文章

zhaiwx_yinfeng

2016-05-10

4229浏览量

二十三：从库的SQL 线程(MTS协调线程)和sql_slave_skip_counter参数(笔记)

一、调用流程大概如下

handle_slave_sql

->是否开启了slave_preserve_commit_order和log_slave_updates参数，开启的话需要设置提交顺序管理器

if (opt_slave_preserve_commit_order &&a...

文章

重庆八怪

2019-11-22

416浏览量

MySQL semisync replication配置及源代码实现

之前一直没有对semi sync做太多的关注，原因是线上的生产环境使用的非常少，最近需要提升semisync的生产环境优先级，以适应数据保护非常严格的场景，借此机会了解一下semisync，顺便过了一下大部分代码，以帮助后续的性能优化工作，以下分析基于代码MySQL5.6.13

如何配置

...

文章

zhaiwx_yinfeng

2016-05-10

2209浏览量

MySQL：RR分析死锁一列

水平有限 有误请指出版本：Percona MySQL 5.7.22对于锁的学习我做了一些输出详细参考如下：https://github.com/gaopengcarl/percona-server-locks-detail-5.7.22.git其中有readme

本文也是一个朋友问我死锁问题。@...

文章

重庆八怪

2019-03-14

8317浏览量

MariaDB · 源码分析 · thread pool

1. thread pool 简介

MariaDB 共有三种线程调度方式

one-thread-per-connection 每个连接一个线程

no-threads 所有连接共用一个线程

pool-of-threads 线程池

no...

文章

db匠

2018-03-22

1177浏览量

【原创】MySQL Proxy - Administration Interface

mysql-proxy 的 administration 接口可以通过任何 MySQL 客户端按照标准协议进行访问。你可以通过 administration 接口获取 proxy 服务器的整体信息 - 向 proxy 建立的标准连接是处于隔离状态的，其模拟了直接连接到后端 MySQL...

文章

摩云飞

2016-05-11

1546浏览量

二十五：从库的关闭和恢复流程(笔记)

一、stop slave流程

用户线程：

stop_slave

-> terminate_slave_threads

->带入参数rpl_stop_slave_timeout设置，作为等待SQL线程退出的超时时间。

SQL:

-> 设置SQL线程终止，mi-&gt...

文章

重庆八怪

2019-11-22

368浏览量

MySQL · TokuDB · 事务子系统和 MVCC 实现

前言

之前有篇月报是关于innodb事务子系统的《MySQL · 引擎特性 · InnoDB 事务子系统介绍》 里面较详细的讲述了 MySQL 如何开启一个事务，感兴趣的同学可以先阅读那篇温习一下。

TokuDB 引擎也支持事务，保证一个事务内的所有操作都执行成功或者都未被执行。TokuDB中的事...

文章

db匠

2016-05-23

1248浏览量

MySQL · TokuDB · TokuDB索引结构--Fractal Tree

背景介绍

TokuDB采用的是Fractal Tree作为索引的数据组织方式。它是一种面向磁盘I/O优化的数据结构，采用“分期偿还”策略减少在数据插入过程中从root节点到leaf节点的搜索过程。这种搜索过程可以简称为locate_position，就是寻找要插入key在Tree中位置的过程。

一...

文章

db匠

2016-04-21

2409浏览量

MySQL · TokuDB · TokuDB索引结构--Fractal Tree

背景介绍

TokuDB采用的是Fractal Tree作为索引的数据组织方式。它是一种面向磁盘I/O优化的数据结构，采用“分期偿还”策略减少在数据插入过程中从root节点到leaf节点的搜索过程。这种搜索过程可以简称为locate_position，就是寻找要插入key在Tree中位置的过程。

一...

文章

db匠

2016-05-23

2732浏览量

一次诡异的数据库死锁问题排查过程

GitHub 1.8k Star 的Java工程师成神之路 ，不来了解一下吗?

GitHub 1.8k Star 的Java工程师成神之路 ，真的不来了解一下吗?

GitHub 1.8k Star 的Java工程师成神之路 ，真的确定不来了解一下吗?

现象

某天晚上，同事正在发布，突然线上大量报警...

文章

Hollis

2019-04-10

1446浏览量

MySQL · TokuDB · 日志子系统和崩溃恢复过程

TokuDB日志子系统

MySQL重启后自动加载InnoDB和其他的动态plugin，包括TokuDB。每一plugin在注册的时候指定init和deinit回调函数。TokuDB的init/deinit函数分别是tokudb_init_func和tokudb_done_func。

MySQL重启...

文章

db匠

2016-05-19

1362浏览量

MySQL · TokuDB · 日志子系统和崩溃恢复过程

TokuDB日志子系统

MySQL重启后自动加载InnoDB和其他的动态plugin，包括TokuDB。每一plugin在注册的时候指定init和deinit回调函数。TokuDB的init/deinit函数分别是tokudb_init_func和tokudb_done_func。

MySQL重启...

文章

db匠

2016-05-23

1229浏览量

MySQL性能分析和优化-part 1

MySQL性能优化

平时我们在使用MySQL的时候，怎么评估系统的运行状态，怎么快速定位系统瓶颈，又如何快速解决问题呢？

本文总结了多年来MySQL优化的经验，系统介绍MySQL优化的方法。

OS性能分析

使用top观察top cpu／memory进程

~ top

top - 09:34:29...

文章

lazydba

2016-04-29

6203浏览量

MyRocks监控信息

title: MySQL · myrocks · myrocks监控信息

author: 张远

rocksdb本身提供了丰富的监控信息，myrocks通过information_schema下的表和show命令等将这些信息展示出来，下面主要以示例的形式来简单介绍下

先创建测试表

CREATE TA...

文章

zysql

2017-03-21

1805浏览量

MySQL · myrocks · myrocks监控信息

rocksdb本身提供了丰富的监控信息，myrocks通过information_schema下的表和show命令等将这些信息展示出来，下面主要以示例的形式来简单介绍下

先创建测试表

CREATE TABLE t1 (a INT, b CHAR(8), pk INT AUTO_INCREMEN...

文章

db匠

2017-03-21

1566浏览量

【MySQL】如何阅读死锁日志

一 前言

工欲善其事必先利其器，前面分析了很多死锁案例，并没有详细的介绍如何通过死锁日志来诊断死锁的成因。本文将介绍如何读懂死锁日志，尽可能的获取信息来辅助我们解决死锁问题。二 日志分析

2.1 场景

为了更好的学习死锁日志，我们需要提前了解死锁场景MySQL 5.6 事务隔离级别为RR

...

文章

yangyi_dba

2017-09-18

3037浏览量