Mysql Online DDL的使用详解
网络编程 2021-07-05 14:37www.168986.cn编程入门
在日常DBA运维过程中,对表结构进行变更算是个普遍的需求了。如果操作的对象是个热表、大表,难免心里一怵,这些DDL操作是否可以直接执行,哪些会影响线上读写,哪些会影响主从,甚至导致服务器压力骤升,本文做了梳理,希望对大家有所帮助。
正文
Online DDL在MySQL 5.6才开始支持的,在5.5及之前版本,使用alter table/create index等命令进行表结构修改操作均会锁表,这在生产环境上明显是不可接受的。
在MySQL 5.7,Online DDL在性能和稳定性上不断得到优化,性能有显著优势,且对业务负载影响小,停写时间可控,相对pt-osc/gh-ost来说,无需安装第三方依赖包,支持Inplace算法的Online DDL,由于无需拷表,所需磁盘空间也更小。
先来看一个常见的DDL语句
ALTER TABLE tbl_name ADD PRIMARY KEY (column), ALGORITHM=INPLACE, LOCK=NONE;
其中,LOCK描述了DDL期间运行的并发程度,ALGORITHM描述了DDL的实现方式
LOCK参数
- LOCK=NONE:允许并发的查询和DML操作
- LOCK=SHARED:允许并发的查询,但阻塞DML操作
- LOCK=DEFAULT: 由系统决定,允许尽可能多的并发性(并发查询、DML或两者)。如果省略LOCK子句相当于指定LOCK=DEFAULT
- LOCK=EXCLUSIVE:阻塞并发查询和DML操作。
ALGORITHM参数
- ALGORITHM=COPY采用拷表方式进行表变更,与pt-osc/gh-ost类似;
- ALGORITHM=INPLACE仅需要进行引擎层数据改动,不涉及Server层;
COPY TABLE流程
- 建立临时表,表结构为ALTAR TABLE更改后的结构
- 将原表中数据导入到临时表(server层创建临时表,会有显示的IBD文件)
- 删除原表
- 将临时表rename为原来的表名
这一过程中,为了保持数据的一致性,中间复制数据时(Copy Table)全程锁表只读,如果有写请求进来将无法提供服务,将导致连接数爆张。
IN-PLACE流程
- 建立一个临时文件,扫描原表主键的所有数据页
- 用数据页中原表记录生成B+树,存储到临时文件中(innodb_temp_data_file_path临时表空间下创建临时文件)
- 生成临时文件的过程中,将所有对原表的操作记在一个日志文件(rowlog)中
- 临时文件生成后,将日志文件中的操作应用到临时文件,得到一个辑数据上与原表相同
- 数据文件(日志文件记录和重放操作)
- 用临时文件替换原表数据文件
这一过程中,alter 语句在启动的时候获取MDL写锁,这个写锁在真正拷贝数据之前就退化成读锁,也就是说在最耗时的copy数据到临时文件的过程中,原表是可以进行dml操作的,仅仅会在的新旧表切换阶段加锁,这个rename的时间就非常快了。
允许并发DML的DDL操作
- 创建/新增二级索引
- 重命名二级索引
- 删除二级索引
- 改变索引类型(USING {BTREE | HASH})
- 添加主键(expensive cost)
- 删除主键并增加另一个(expensive cost)(ALTER TABLE tbl_name DROP PRIMARY KEY, ADD PRIMARY KEY (column), ALGORITHM=INPLACE, LOCK=NONE;)
- 新增列 (expensive cost)
- 删除列 (expensive cost)
- 重命名列
- 列重新排序 (expensive cost)
- 改变列默认值
- 删除列默认值
- 改变列自增值
- 设置列属性null/not null (expensive cost)
- 修改枚举或集合列的定义
- Change ROW_FORMAT
- Change key block size
标记为expensive cost的操作虽然允许OnlineDDL,但本身对服务器IO,CPU都会造成较高负担,会导致复制阻塞,造成另一种形式的从库复制延迟,所以如果是大表,建议业务低峰期执行
不允许并发DML的DDL操作
- 添加全文索引
- 添加空间索引
- 删除主键
- 改变列数据类型
- 添加自增列(新增列->变为自增列)
- 变更表字符集
- 修改数据类型长度
- 特例varchar字符长度从10变更到小于255 采用inplace方式不会锁表;从255变更到10会锁表;
以上就是Mysql Online DDL的使用详解的详细内容,更多关于Mysql Online DDL的使用的资料请关注狼蚁SEO其它相关文章!
上一篇:MySQL 8.0 之不可见列的基本操作
下一篇:MySQL 存储过程的优缺点分析
编程语言
- 如何快速学会编程 如何快速学会ug编程
- 免费学编程的app 推荐12个免费学编程的好网站
- 电脑怎么编程:电脑怎么编程网咯游戏菜单图标
- 如何写代码新手教学 如何写代码新手教学手机
- 基础编程入门教程视频 基础编程入门教程视频华
- 编程演示:编程演示浦丰投针过程
- 乐高编程加盟 乐高积木编程加盟
- 跟我学plc编程 plc编程自学入门视频教程
- ug编程成航林总 ug编程实战视频
- 孩子学编程的好处和坏处
- 初学者学编程该从哪里开始 新手学编程从哪里入
- 慢走丝编程 慢走丝编程难学吗
- 国内十强少儿编程机构 中国少儿编程机构十强有
- 成人计算机速成培训班 成人计算机速成培训班办
- 孩子学编程网上课程哪家好 儿童学编程比较好的
- 代码编程教学入门软件 代码编程教程