MySQL8.0中Online DDL也要在业务低峰期执行

这篇具有很好参考价值的文章主要介绍了MySQL8.0中Online DDL也要在业务低峰期执行。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

一、背景

MySQL5.6开始引入了Online DDLalter操作不再阻塞dml。在MySQL 8.0中,针对Online DDL做了进一步优化,alter table加列操作支持INSTANT算法,意思就是使用这个算法进行加列操作只需要修改表的元数据信息,操作瞬间就完成了。在MySQL 8.0.30以后,instant算法支持加列加到表的任一位置,并且也支持删列、重命名表等DDL操作。实际DDL中支持Online DDL的操作默认都会使用 ALGORITHM=INSTANT

二、问题

那么既然现在MySQLDDL这么快,我们是不是随便什么时候都可以去数据库中对表进行DDL呢?其实不是的,即使是Online DDL也要在业务低峰期进行。如果在对表进行Online DDL的时候刚好这个表有个慢查询在执行,那么DDL语句将等待这个查询的元数据锁(metadata_lock),后续对这个表的所有DML语句都将被这个DDL阻塞,进而很容易造成连环堵塞和CPU飙升的状况,对业务系统产生极大的影响。

三、实验

下面,将实际演示一下Online DDL引发的阻塞问题:

会话A:开启一个事务,执行一条select不提交,那这个事务将一直持有表notest的元数据锁。

mysql> begin;
Query OK, 0 rows affected (0.00 sec)

mysql> select * from test.notest where id=1;
Empty set (0.00 sec)

会话B:对表进行加列的DDL操作,可以看到该操作被堵塞,其实就是在等待会话A的元数据锁。

mysql> alter table test.notest add age int;

会话C、会话D:再开启两个会话,对该表进行简单的查询,该查询也在等待锁,没有返回结果。

mysql> select * from test.notest;

查看processlist,可以看到ddldml都在等待表的元数据锁:

mysql> show processlist;
+-------+-----------------+--------------------+------+------------------+-------+-----------------------------------------------------------------+-------------------------------------+
| Id    | User            | Host               | db   | Command          | Time  | State                                                           | Info                                |
+-------+-----------------+--------------------+------+------------------+-------+-----------------------------------------------------------------+-------------------------------------+
|     5 | event_scheduler | localhost          | NULL | Daemon           | 15986 | Waiting on empty queue                                          | NULL                                |
|    33 | repl            | 10.2.111.193:33644 | NULL | Binlog Dump GTID | 15964 | Source has sent all binlog to replica; waiting for more updates | NULL                                |
| 17805 | root            | localhost          | test | Query            |    64 | Waiting for table metadata lock                                 | alter table test.notest add age int |
| 17814 | root            | localhost          | test | Sleep            |   346 |                                                                 | NULL                                |
| 17973 | root            | localhost          | NULL | Sleep            |   368 |                                                                 | NULL                                |
| 18370 | root            | localhost          | NULL | Query            |    42 | Waiting for table metadata lock                                 | select * from test.notest           |
| 18393 | root            | localhost          | NULL | Query            |    24 | Waiting for table metadata lock                                 | select * from test.notest           |
| 18418 | root            | localhost          | NULL | Query            |     0 | init                                                            | show processlist                    |
+-------+-----------------+--------------------+------+------------------+-------+-----------------------------------------------------------------+-------------------------------------+
8 rows in set (0.00 sec)

查看元数据锁监控表performance_schema.metadata_locks表信息,可以看到当前数据库中存在的元数据锁以及元数据锁的对象和锁类型(在MySQL中,为了提高数据库的并发度,元数据锁被细分为了11种类型)。可以看到DDL语句给表带来的元数据锁类型为EXCLUSIVE,元数据EXCLUSIVE锁被持有期间任何其他的元数据锁都不能被授予,所以就阻塞了后续对表的所有DML操作,也包括select

mysql> select * from performance_schema.metadata_locks;
+-------------+--------------------+----------------+-------------+-----------------------+---------------------+---------------+-------------+--------------------+-----------------+----------------+
| OBJECT_TYPE | OBJECT_SCHEMA      | OBJECT_NAME    | COLUMN_NAME | OBJECT_INSTANCE_BEGIN | LOCK_TYPE           | LOCK_DURATION | LOCK_STATUS | SOURCE             | OWNER_THREAD_ID | OWNER_EVENT_ID |
+-------------+--------------------+----------------+-------------+-----------------------+---------------------+---------------+-------------+--------------------+-----------------+----------------+
| TABLE       | test               | notest         | NULL        |       140139226332208 | SHARED_READ         | TRANSACTION   | GRANTED     | sql_parse.cc:6085  |           18049 |              5 |
| GLOBAL      | NULL               | NULL           | NULL        |             132890928 | INTENTION_EXCLUSIVE | STATEMENT     | GRANTED     | sql_base.cc:5476   |           17881 |             21 |
| BACKUP LOCK | NULL               | NULL           | NULL        |             123469776 | INTENTION_EXCLUSIVE | TRANSACTION   | GRANTED     | sql_base.cc:5483   |           17881 |             21 |
| SCHEMA      | test               | NULL           | NULL        |             125839424 | INTENTION_EXCLUSIVE | TRANSACTION   | GRANTED     | sql_base.cc:5463   |           17881 |             21 |
| TABLE       | test               | notest         | NULL        |             125839520 | SHARED_UPGRADABLE   | TRANSACTION   | GRANTED     | sql_parse.cc:6085  |           17881 |             21 |
| TABLESPACE  | NULL               | test/notest    | NULL        |             130194048 | INTENTION_EXCLUSIVE | TRANSACTION   | GRANTED     | lock.cc:808        |           17881 |             21 |
| TABLE       | test               | #sql-5246_458d | NULL        |             124845680 | EXCLUSIVE           | STATEMENT     | GRANTED     | sql_table.cc:17024 |           17881 |             21 |
| TABLE       | test               | notest         | NULL        |             126124176 | EXCLUSIVE           | TRANSACTION   | PENDING     | mdl.cc:3754        |           17881 |             22 |
| TABLE       | test               | notest         | NULL        |       140138743169920 | SHARED_READ         | TRANSACTION   | PENDING     | sql_parse.cc:6085  |           18446 |              3 |
| TABLE       | performance_schema | metadata_locks | NULL        |       140138825181536 | SHARED_READ         | TRANSACTION   | GRANTED     | sql_parse.cc:6085  |           17890 |             26 |
| TABLE       | test               | notest         | NULL        |       140139414229984 | SHARED_READ         | TRANSACTION   | PENDING     | sql_parse.cc:6085  |           18469 |              3 |
+-------------+--------------------+----------------+-------------+-----------------------+---------------------+---------------+-------------+--------------------+-----------------+----------------+
11 rows in set (0.00 sec)

同时,可以查询sys.schema_table_lock_waits视图,该视图显示了当前元数据锁的锁等待信息。可以看到等待和阻塞的会话ID,并且kill掉阻塞会话的语句也直接在sql_kill_blocking_connection这一列给出来了,非常方便。

mysql> select * from sys.schema_table_lock_waits;
+---------------+-------------+-------------------+-------------+-----------------+-------------------+-----------------------+-------------------------------------+--------------------+-----------------------------+-----------------------------+--------------------+--------------+------------------+--------------------+------------------------+-------------------------+------------------------------+
| object_schema | object_name | waiting_thread_id | waiting_pid | waiting_account | waiting_lock_type | waiting_lock_duration | waiting_query                       | waiting_query_secs | waiting_query_rows_affected | waiting_query_rows_examined | blocking_thread_id | blocking_pid | blocking_account | blocking_lock_type | blocking_lock_duration | sql_kill_blocking_query | sql_kill_blocking_connection |
+---------------+-------------+-------------------+-------------+-----------------+-------------------+-----------------------+-------------------------------------+--------------------+-----------------------------+-----------------------------+--------------------+--------------+------------------+--------------------+------------------------+-------------------------+------------------------------+
| test          | notest      |             17881 |       17805 | root@localhost  | EXCLUSIVE         | TRANSACTION           | alter table test.notest add age int |                 53 |                           0 |                           0 |              18049 |        17973 | root@localhost   | SHARED_READ        | TRANSACTION            | KILL QUERY 17973        | KILL 17973                   |
| test          | notest      |             18446 |       18370 | root@localhost  | SHARED_READ       | TRANSACTION           | select * from test.notest           |                 47 |                           0 |                           0 |              18049 |        17973 | root@localhost   | SHARED_READ        | TRANSACTION            | KILL QUERY 17973        | KILL 17973                   |
| test          | notest      |             18469 |       18393 | root@localhost  | SHARED_READ       | TRANSACTION           | select * from test.notest           |                 44 |                           0 |                           0 |              18049 |        17973 | root@localhost   | SHARED_READ        | TRANSACTION            | KILL QUERY 17973        | KILL 17973                   |
| test          | notest      |             17881 |       17805 | root@localhost  | EXCLUSIVE         | TRANSACTION           | alter table test.notest add age int |                 53 |                           0 |                           0 |              17881 |        17805 | root@localhost   | SHARED_UPGRADABLE  | TRANSACTION            | KILL QUERY 17805        | KILL 17805                   |
| test          | notest      |             18446 |       18370 | root@localhost  | SHARED_READ       | TRANSACTION           | select * from test.notest           |                 47 |                           0 |                           0 |              17881 |        17805 | root@localhost   | SHARED_UPGRADABLE  | TRANSACTION            | KILL QUERY 17805        | KILL 17805                   |
| test          | notest      |             18469 |       18393 | root@localhost  | SHARED_READ       | TRANSACTION           | select * from test.notest           |                 44 |                           0 |                           0 |              17881 |        17805 | root@localhost   | SHARED_UPGRADABLE  | TRANSACTION            | KILL QUERY 17805        | KILL 17805                   |
+---------------+-------------+-------------------+-------------+-----------------+-------------------+-----------------------+-------------------------------------+--------------------+-----------------------------+-----------------------------+--------------------+--------------+------------------+--------------------+------------------------+-------------------------+------------------------------+
6 rows in set (0.01 sec)

 文章来源地址https://www.toymoban.com/news/detail-424658.html

四、结论

通过以上的实验,可以得出结论,如果在对表进行Online DDL时,该表上存在元数据锁,那么DDL将一直等待元数据锁释放,直到超过参数lock_wait_timeout的超时时间,并且该DDL会阻塞后续对该表的所有操作。因此,即使现在支持instant算法的Online DDL可以秒加列,也要在业务低峰期进行,并且执行DDL前,最好查询一下performance_schema.metadata_locks,检查是否存在元数据锁。

 

到了这里,关于MySQL8.0中Online DDL也要在业务低峰期执行的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • MySQL 8.0 Reference Manual(读书笔记83节-- InnoDB and Online DDL (3))

    The following table provides an overview of online DDL support for foreign key operations. An asterisk【ˈæstərɪsk 星号(置于词语旁以引起注意或另有注释);】 indicates additional information, an exception, or a dependency. Operation Instant In Place Rebuilds Table Permits Concurrent DML Only Modifies Metadata Adding a foreign key constrain

    2024年04月08日
    浏览(42)
  • mysql统计所有分类下的数量,没有的也要展示

    要求统计所有分类下的数量,如果分类下没有对应的数据也要展示。这种问题在日常的开发中很常见,每次写每次忘,所以在此记录下。 这种统计往往不能直接group by,因为有些类别可能没有对应的数据 这里有两个思路(如果您有更好的方法,请一定要告诉我,求求了):

    2024年03月28日
    浏览(51)
  • MySQL DDL语法

    MySQL DDL(Data Definition Language)是用于定义和管理数据库结构的语言。它包括创建、修改和删除数据库、表、视图、索引和其他数据库对象的语句。DDL语法的重要性如下: 数据库结构定义:DDL语句用于创建和定义数据库对象的结构,例如创建表和定义字段、数据类型、约束和索

    2024年02月15日
    浏览(44)
  • MySQL DDL 通用语法

    🌹作者主页:青花锁 🌹简介:Java领域优质创作者🏆、Java微服务架构公号作者😄 🌹简历模板、学习资料、面试题库、技术互助 🌹文末获取联系方式 📝 专栏 描述 Java项目实战 介绍Java组件安装、使用;手写框架等 Aws服务器实战 Aws Linux服务器上操作nginx、git、JDK、Vue Jav

    2024年04月25日
    浏览(37)
  • MySQL操作DDL

    目录 1.概述 2.数据库的增删改查 3.表的增删改查 3.1.创建和查看表结构 3.2.修改表 3.3.查看所有的表 3.4.删除表 4.用户 5.DDL在实际应用场景中的作用 5.1.数据库设计 5.2.数据库维护 ​​​​​​​5.3.数据库迁移或重置 ​​​​​​​5.4.优化性能 ​​​​​​​5.5.小结      

    2024年04月12日
    浏览(37)
  • 【MySQL】DDL和DML

    我们先来学习DDL来操作数据库。而操作数据库主要就是对数据库的增删查操作。 4.1 查询 查询所有的数据库 运行上面语句效果如下: 上述查询到的是的这些数据库是mysql安装好自带的数据库,我们以后不要操作这些数据库。 4.2 创建数据库 创建数据库 : 运行语句效果如下:

    2024年02月14日
    浏览(32)
  • 01:mysql基本操作---DDL

    目录 前言: 1:SQL分类 2:类型 3:sql表的创建----简单版本 前言: 1:SQL语句可以单行或多行书写,以分号结尾。 2:SQL语句可以使用空格/缩进来增强语句的可读性。 3:MySQL数据库的SQL语句不区分大小写,建议使用大写 4:注释: 单行注释:-- 注释内容或#注释内容(MySQL特有) 多行注释

    2024年02月04日
    浏览(38)
  • mysql 数据库定义语言(DDL)

    目录 库的操作 数据库创建 数据库编码集 数据库删除 数据库修改 数据库查询 数据库备份 表的操作 表的创建 查询表 删除表 修改表 这里先声明一下,这篇文章主要是讲数据库表的定义操作,也就是 DDL,只要是对数据库以及表结构操作的 SQL 数据库的创建,其实在之前我们浅

    2024年02月12日
    浏览(41)
  • MySQL小记——DDL、DML、DQL

    目录 数据库概念 关系型数据库 MySQL使用 SQL语言 sql分类 DDL:操作数据库和表 操作数据库 操作表 DML:数据操作语言,用来增删改数据库记录 1.插入数据 2.删除数据 3.修改数据 DQL:查询 条件查询 模糊查询 字段的运算和去重 排序 order by 聚合函数 分组 group by  分页 limit 存储数

    2024年02月05日
    浏览(79)
  • MySQL-DDL-表结构操作

    以具体代码的显示展示如何进行数据表的创建 具体代码示例: 运行结果如下   约束:约束是作用在表中 字段上 的规则,用于限制存储在表中的数据 1.PRIMARY KEY:用于指定列作为主键,保证其唯一性和非空性。 2. UNIQUE:用于指定列的值必须是唯一的,但可以为空。 3. NOT N

    2024年02月16日
    浏览(52)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包