首页/新闻资讯/正文详情

gh-ost 与 pt-online-schema-change 选型:在线改表的工程决策

发布时间:2026/11/20 2:52:38 来源:云帆数科 栏目:资讯中心
gh-ost 与 pt-online-schema-change 选型:在线改表的工程决策
个人主页 for_ever_love__ 欢迎各位大佬莅临其他栏目: 大模型开发从0到1 其他栏目: iOS项目总结大全 其他栏目: 我想学python了 其他栏目: iOS UI 文章目录gh-ost 与 pt-online-schema-change 选型在线改表的工程决策一、先理解为什么直接 ALTER 不行二、pt-osc影子表 触发器三、gh-ostbinlog 增量回放四、六维对比五、四个决策场景六、通用操作规范两个工具都适用七、排错速查八、小结gh-ost 与 pt-online-schema-change 选型在线改表的工程决策线上要给一张两亿行的订单表加索引直接ALTER TABLE会锁表半小时业务崩给你看。上在线改表工具——pt-online-schema-changept-osc和gh-ost是唯二的标准答案。但两者原理不同、坑点不同、适用场景也不同。这篇文章把选型逻辑讲透各自的工作机制、六维对比、四个决策场景、以及两类工具都不该用的例外。一、先理解为什么直接 ALTER 不行MySQL 的ALTER TABLE改表结构传统路径是重建表建新表 → 拷贝数据 → 锁原表做最终增量同步 → 表名切换。这个过程中原表长时间不可写老版本或者可写但延迟高InnoDB 在线 DDL取决于操作类型和版本。关键事实InnoDB 从 5.6 起支持在线 DDL很多ALTER其实可以不锁表ALTERTABLEt_bigADDINDEXidx_user(user_id),ALGORITHMINPLACE,LOCKNONE;ALGORITHMINPLACE原地改不重建全表LOCKNONE不阻塞读写能cover加索引、加列末尾、改字符集部分等场景。能用原生在线 DDL 的场景优先用原生——不引入外部工具就是最低风险。但两类操作原生 DDL 搞不定改列类型、改主键以及 5.5/5.6 老版本——这时才轮到 pt-osc / gh-ost。二、pt-osc影子表 触发器pt-online-schema-change是 Percona Toolkit 的组件工作流程是经典的三步1. 建影子表 t_new新结构 2. 以块为单位从原表拷贝数据到影子表chunked copy 同时在原表上创建 AFTER INSERT/UPDATE/DELETE 三个触发器 拷贝期间的增量变更实时同步到影子表 3. 数据追平后RENAME TABLE t TO t_old, t_new TO t 名字切换是瞬时的原子操作 最后删掉 t_old 和触发器一条命令长这样pt-online-schema-change\Dprod,tt_order\--alterADD INDEX idx_user_id (user_id)\--execute\--chunk-size2000\--max-lag 5s\--critical-loadThreads_running50\--check-interval 2s参数解释这些是保命参数不是可选项参数作用--chunk-size 2000每批搬 2000 行太小慢、太大锁行长--max-lag 5s从库延迟超过 5 秒就暂停防止把从库拖死--critical-load主库负载超过阈值就暂停Threads_running50 是常用线--check-interval每隔多久检查一次上述两个阈值--no-drop-old-table切换后保留旧表人工确认没问题再删优势功能全、生态成熟、支持 swap 前的检查、有 swap 期间的可控回滚--swap-tables前的 checks、--dry-run预演。坑点触发器是硬伤。三个触发器让每次原表写入都变成写原表 写影子表写入吞吐下降明显实测 20%~50%看负载如果原表上已有触发器pt-osc 会直接拒绝或产生触发器嵌套混乱外键表 RENAME 可能违反 FK 约束--alter-foreign-keys-method处理复杂。三、gh-ostbinlog 增量回放gh-ost是 GitHub 开源的方案思路完全不同不碰原表的写入路径。1. 建影子表 t_ghost新结构从原表拷历史数据同样的 chunked copy 2. 把自己伪装成 MySQL 从库订阅主库 binlog 把原表相关的 binlog 事件翻译成对影子表的操作并回放 3. 数据追平后执行与 pt-osc 相同的 RENAME 切换cutovergh-ost\--hostprod-master\--userghost--passwordxxx\--databaseprod--tablet_order\--alterADD INDEX idx_user_id (user_id)\--execute\--chunk-size2000\--max-lag-millis5000\--critical-loadThreads_running50\--initially-drop-ghost-table\--cut-overcritical-load\--nice-ratio0.5--nice-ratio是 gh-ost 的独家能力控制自己最多占用多少比例的写入能力0.5 最多占一半动态降速把影响压在可预期范围内。优势零触发器不在原表挂任何触发器写入性能几乎无感这是最大卖点可暂停可恢复任务随时Ctrl-C重启用相同参数会接着上次进度内部状态在_t_order_gho表可测试--test-on-replica在从库演练不影响生产binlog 即真相它消费真实 binlog连并发冲突都模拟得和主库一致而且因为它是从库天然融入现有复制拓扑从库上观察到的行为与生产一致。坑点要求 binlog 是 ROW 格式statement 格式下没法精确回放基本出局依赖主库 binlog 可用权限REPLICATION SLAVEREPLICATION CLIENT把心跳写进目标库时多一点点开销cutover 阶段仍需要短暂锁RENAME期间大表 cutover 要做好预案gh-ost 会等一个低负载窗口再切可以配置。四、六维对比维度pt-oscgh-ost增量同步机制触发器伪装从库消费 binlog对原表写入影响触发器开销 20%~50%几乎无已有触发器的表❌ 拒绝/混乱✅ 无所谓binlog 格式要求无必须 ROW任务恢复从头再来断点续传演练能力--dry-run较浅--test-on-replica深再加两条实操差异权限pt-osc 需要PROCESS、SUPER部分场景gh-ost 需要REPLICATION SLAVE、REPLICATION CLIENT、CREATE/DROP/ALTER。安全团队的偏好有时决定选型。生态pt-osc 是 Percona Toolkit 全家桶一员和 pt-query-digest、pt-table-checksum 一起用是经典 DBA 组合gh-ost 社区活跃、文档好、GitHub issue 响应快。五、四个决策场景场景 1默认情况直接选 gh-ost。新系统、 MySQL 8.0、binlogROW默认就是 ROW、团队第一次引入在线 DDL 工具。无触发器、可恢复、可演练三个优势全部命中。pt-osc 唯一赢面是团队已经有成熟的 pt-osc 脚本体系和 runbook。场景 2表上已有触发器只能 gh-ost。pt-osc 遇到已有触发器会直接拒绝执行或产生不可控的触发器叠加。如果业务合理要求表上有触发器审计类表pt-osc 出局。当然也可以临时删触发器→改表→重建触发器但那风险更大。场景 3binlog 是 STATEMENT/MIXED或拿不到复制权限 → pt-osc。gh-ost 强依赖 ROW binlog。老库还是 statement 格式的、或者云 RDS 限制了REPLICATION SLAVE权限某些托管实例限制自建从库gh-ost 直接不可用用 pt-osc。顺便说一句还在用 statement binlog 的系统本来就有数据一致性隐患升级 ROW 应该排上日程。场景 4极端大表 极端敏感写入 → gh-ost nice-ratio。几十亿行、写入密集型、对延迟极度敏感的表比如交易流水gh-ost 的--nice-ratio能精细控制资源占用pt-osc 的触发器在大写上太伤了。都不用的场景表小百万行以下、读写低谷期、操作是纯在线 DDL能 cover 的加索引、末尾加列——直接用ALTER TABLE ... ALGORITHMINPLACE, LOCKNONE几秒完成引工具反而是负担。工具链越重操作风险越大。六、通用操作规范两个工具都适用工具选好只是开始执行纪律才是保命的预演在生产同规格的从库/预发环境完整跑一遍计时、看负载曲线低峰执行虽然是在线工具cutover 仍是瞬时操作选业务低谷限速护从库--max-lagpt-osc--max-lag 5sgh-ost--max-lag-millis 5000必须配把从库延迟当红线保压--critical-load配置主库 Threads_running 阈值超了就自动暂停别让 DDL 把生产压垮不自动删旧表pt-osc--no-drop-old-tablegh-ost 默认--initially-drop-ghost-table删的是自己的影子表旧表由 gh-ost 在 cutover 后保留。旧表至少观察一天再删备份先行改表前确认有可恢复的全备 binlog验证改完对比行数、CHECKSUM TABLE、抽查结构SHOW CREATE TABLE回滚预案如果是删索引这类操作回滚 重新加索引时间成本要先算清避开批量窗口别跟大促前的数据迁移、月度结算这类任务撞车单个跑一张表一个任务别并发改多张表触发器/binlog 消费互相干扰负载叠加。执行后的标准观察项主库 QPS/TPS 曲线、从库延迟Seconds_Behind_Master、错误日志、慢查询突增、以及业务侧接口成功率。这些监控改表前就该打开。七、排错速查症状大概率原因处理任务频繁 pause/resume--max-lag太严或从库本身慢放宽到 10s先查从库延迟根因拷贝阶段极慢chunk 太大锁行长 / chunk 太小往返多2000~5000 行试gh-ost 调--nice-ratiocutover 卡住等一个无长事务写入窗口找长事务源information_schema.innodb_trx杀掉或等gh-ost 启动即失败binlog 非 ROW / 权限不足SHOW VARIABLES LIKE binlog_format授权pt-osc 报触发器冲突原表已有触发器换 gh-ost从库延迟飙高不降速度超过从库回放能力降速等延迟恢复八、小结在线改表选型的三句话能用原生ALGORITHMINPLACE, LOCKNONE就不引工具工具链是最后手段默认选 gh-ost零触发器、可恢复、可演练唯一硬要求是 binlogROWpt-osc 的保留场景statement binlog 老库、无复制权限的托管实例、已有 pt 工具链的团队——但已有触发器的表它直接出局。下一篇讲表空间加密InnoDB 静态加密怎么配、master key 怎么轮换、以及它和备份加密的关系。

相关推荐

Folia 全屏歌词动画播放器从下载到跑通第一首歌的完整安装指南
Folia 全屏歌词动画播放器从下载到跑通第一首歌的完整安装指南

Folia 全屏歌词动画播放器从下载到跑通第一首歌的完整安装指南 【免费下载链接】folia-major 专注于绚丽的歌词动画效果的本地音乐/navidrome/第三方多平台在线音乐播放器 项目地址: https://gitcode.com/GitHub_Trending/fo/folia-major Folia 是一款把歌词做成全屏动画… · 2026/11/2 22:34:59

Expo MCP Server 服务说明文档
Expo MCP Server 服务说明文档

1. 服务概述一句话简介:提供Expo开发服务器管理的MCP服务器,支持React Native应用的文件操作、服务器监控和日志管理服务名称:Expo MCP Server版本号:最新版本开发者/提供方:mattlemmone协议类型:MCP (Mode… · 2026/11/16 11:58:28

OpenSpeedy开源游戏变速:3步接管进程,免费加减速
OpenSpeedy开源游戏变速:3步接管进程,免费加减速

OpenSpeedy开源游戏变速:3步接管进程,免费加减速 【免费下载链接】OpenSpeedy 🎮 An open-source game speed modifier. 项目地址: https://gitcode.com/gh_mirrors/op/OpenSpeedy 日常副本要刷 20 分钟、Boss 机制快得看不清&#xf… · 2026/11/5 12:15:46

岳阳湘阴考电工证通过率揭秘:工地太忙根本没时间复习考试?这些经验你必须知道
岳阳湘阴考电工证通过率揭秘:工地太忙根本没时间复习考试?这些经验你必须知道

岳阳湘阴考电工证通过率揭秘:工地太忙根本没时间复习考试?这些经验你必须知道 工地太忙根本没时间复习考试,这是很多电工朋友的真实写照,尤其是那些在岳阳湘阴地区从事建筑、电力、维修工作的电工师傅们。电工证是特种作业操作证的一种,是从事电气作业的… · 2026/11/20 2:52:03

赤峰电工证办理流程含金量高吗?学历不高也能报上名
赤峰电工证办理流程含金量高吗?学历不高也能报上名

赤峰电工证办理流程含金量高吗?学历不高也能报上名 你是不是也这样想: 学历不高怕报不上名 ?别急,我来告诉你赤峰电工证办理流程到底怎么样,含金量到底高不高,还有你关心的报名条件、考试内容、电子证书怎么查,全在这里,一点不藏。… · 2026/11/20 2:52:03

广东电工证哪里拿千万别踩坑,应届生怎么选培训机构
广东电工证哪里拿千万别踩坑,应届生怎么选培训机构

广东电工证哪里拿千万别踩坑,应届生怎么选培训机构 你正愁找不到电工证,担心拿不到证就找不到工作,对吧?别急,先搞清楚【广东电工证哪里拿】才是关键, 千万别踩坑 ,选错了培训机构,不仅浪费钱,还可能耽误你入职的机会。 广东电工证报考人群现状… · 2026/11/20 2:52:03

海城电工证培训机构在哪考?别被中介坑了,这几点必须知道
海城电工证培训机构在哪考?别被中介坑了,这几点必须知道

海城电工证培训机构在哪考?别被中介坑了,这几点必须知道 不知道去哪报名怕被中介坑?你不是一个人。很多想考电工证的朋友,第一步就卡在“ 在哪考 ”这个问题上,结果被各种培训机构、中介套路,花冤枉钱还拿不到证。别急, 海城电工证培训机构… · 2026/11/20 2:52:03

几种电工证可以通用 全流程办理指南 上岗必备实操经验
几种电工证可以通用 全流程办理指南 上岗必备实操经验

几种电工证可以通用 全流程办理指南 上岗必备实操经验 实操考试心里没底怕挂科?别担心,这是大多数初次报考特种作业证的学员都会遇到的问题。尤其是像低压电工、高压电工这类 上岗必备… · 2026/11/20 2:52:03

岳阳湘阴考电工证官方回应实操考试心里没底怕挂科怎么办
岳阳湘阴考电工证官方回应实操考试心里没底怕挂科怎么办

岳阳湘阴考电工证官方回应实操考试心里没底怕挂科怎么办 实操考试心里没底怕挂科,岳阳湘阴考电工证的小伙伴,别急,官方回应来了,咱们一步步来,别让怕挂科的情绪毁了你的机会。 案例背景:一个普通电工的实操考试… · 2026/11/20 2:50:55

长春初级电工证怎么考?通过率揭秘全在这里
长春初级电工证怎么考?通过率揭秘全在这里

长春初级电工证怎么考?通过率揭秘全在这里 之前考的证在外省能不能转过来?这几乎是每个想从事电工工作的人都会问的问题。特别是那些在外地打拼多年、手里握着一张“外地电工证”的人,到了长春想继续干这一行,第一反应就是“我的证能用吗?”。今天我们就… · 2026/11/19 16:06:02

国内电工证报考条件与考试时间
国内电工证报考条件与考试时间

低压电工证怎么考?学历不高也能报名,官方报名入口全在这 你是不是经常听说“电工证是入行门槛”,但又担心自己学历不够、经验不足,根本报不了名?别急,今天就带你从零了解【国内电工证】的报考流程、考试内容,还有怎么在 官方报名入口… · 2026/11/19 17:40:37

电工作业时如何断电?电子证书到底能不能全国通用?
电工作业时如何断电?电子证书到底能不能全国通用?

电工作业时如何断电?电子证书到底能不能全国通用? 实操考试心里没底怕挂科,特别是电工作业时如何断电这一操作,不仅关系到你能不能拿到证书,更关系到以后能不能顺利上岗。很多人觉得这不过就是“断个电”,但其实这里面的门道可不少,稍有不慎就可能出错… · 2026/11/19 17:50:07

建设厅特种工周三报名怎么弄?上岗必备别被中介坑
建设厅特种工周三报名怎么弄?上岗必备别被中介坑

建设厅特种工周三报名怎么弄?上岗必备别被中介坑 不知道去哪报名怕被中介坑?作为商丘某高校工程类应届毕业生,小李最近就遇到了这样的困扰。他刚毕业,正在找实习岗位,发现很多工地都要求持有特种作业操作证,尤其是【建设厅特种工周三报名】这个时间点,… · 2026/11/20 0:00:54

中专考的中级电工证内部消息全攻略
中专考的中级电工证内部消息全攻略

中专考的中级电工证内部消息全攻略 你中专毕业,手头有中级电工证,但不知道从哪开始报名,怕被中介坑?别急,这篇文章就是为你量身定制的“内部消息”,帮你避开报名陷阱,稳稳拿到证书。… · 2026/11/20 0:00:54

外省电工证能转过来吗?电子证书怎么查电工作业教学效果评价
外省电工证能转过来吗?电子证书怎么查电工作业教学效果评价

外省电工证能转过来吗?电子证书怎么查电工作业教学效果评价 之前考的证在外省能不能转过来?这几乎是所有在外地打拼的电工从业者最关心的问题。特别是像洛阳这样的工业城市,很多电工证是在外地考的,现在想在当地用,流程是不是很复杂?其实,只要搞清楚… · 2026/11/20 0:00:54

双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试
双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 6:33:25

STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析
STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 6:33:32

DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案
DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 0:22:38

了解更多?预约专属演示

我们的顾问将为您一对一讲解产品与方案

企业微信二维码