https://blog.kalend.top/tags/devops/Recent content in Devops on Kalend's BlogHugo -- gohugo.iozhhttps://blog.kalend.top/wiki/entities/gh-ost/Mon, 01 Jan 0001 00:00:00 +0000https://blog.kalend.top/wiki/entities/gh-ost/<h1 id="gh-ost">gh-ost </h1><h2 id="概述">概述 </h2><p>GitHub 开发的无触发器在线 MySQL 表变更工具。⭐ 13,300+ Stars。通过解析 binlog 实现增量数据同步，对主库性能影响极小。</p> <h2 id="核心原理">核心原理 </h2><ol> <li>创建幽灵表（ghost table）</li> <li>在幽灵表上执行DDL变更</li> <li>解析binlog获取增量变更，应用到幽灵表</li> <li>分块拷贝历史数据</li> <li>RENAME TABLE原子交换</li> </ol> <h2 id="核心优势">核心优势 </h2><ul> <li>无触发器，主库性能影响极小</li> <li>支持暂停/恢复/动态调参</li> <li>可在从库先测试</li> <li>支持回滚</li> </ul> <h2 id="相关实体">相关实体 </h2><ul> <li>[[mysql-big-table-ddl]] — 大表DDL操作方案</li> <li>[[pt-online-schema-change]] — Percona的替代方案</li> </ul> <h2 id="来源">来源 </h2><ul> <li>GitHub: github.com/github/gh-ost</li> </ul>https://blog.kalend.top/wiki/concepts/mysql-big-table-ddl/Mon, 01 Jan 0001 00:00:00 +0000https://blog.kalend.top/wiki/concepts/mysql-big-table-ddl/<h1 id="mysql大表ddl操作">MySQL大表DDL操作 </h1><h2 id="概述">概述 </h2><p>MySQL大表（千万级+行）执行DDL操作（如添加字段）时的快速方案选择。核心问题是传统DDL会锁表和全表复制，导致线上服务中断。</p> <h2 id="mysql版本演进">MySQL版本演进 </h2><table> <thead> <tr> <th>版本</th> <th>特性</th> <th>说明</th> </tr> </thead> <tbody> <tr> <td>5.5及以前</td> <td>COPY算法</td> <td>全表复制，全程锁表</td> </tr> <tr> <td>5.6+</td> <td>Online DDL (INPLACE)</td> <td>允许并发DML，但仍需重建数据</td> </tr> <tr> <td>8.0.12+</td> <td>INSTANT ADD COLUMN</td> <td>只改元数据，毫秒级，仅限末尾加列</td> </tr> <tr> <td>8.0.29+</td> <td>INSTANT任意位置加列</td> <td>放宽了位置限制</td> </tr> </tbody> </table> <h2 id="instant的限制">INSTANT的限制 </h2><ul> <li>❌ 添加列的同时添加索引</li> <li>❌ 列涉及外键</li> <li>❌ ROW_FORMAT=COMPRESSED</li> <li>❌ 表含全文索引</li> <li>❌ 临时表</li> </ul> <h2 id="第三方工具">第三方工具 </h2><h3 id="gh-ostgithub">gh-ost（GitHub） </h3><ul> <li>解析binlog同步增量数据，无触发器</li> <li>⭐ 13,300+ Stars</li> <li>适合高并发写入场景</li> <li>支持暂停/恢复/回滚</li> </ul> <h3 id="pt-online-schema-changepercona">pt-online-schema-change（Percona） </h3><ul> <li>使用触发器同步增量数据</li> <li>高并发写入时触发器开销较大</li> <li>上手简单，Percona Toolkit的一部分</li> </ul> <h3 id="对比">对比 </h3><ul> <li>高并发 → gh-ost（无触发器）</li> <li>低并发/已有经验 → pt-osc</li> <li>MySQL 8.0+ → 优先INSTANT</li> </ul> <h2 id="操作前检查清单">操作前检查清单 </h2><ol> <li>表大小、行数、索引大小</li> <li>外键约束</li> <li>主从延迟状态</li> <li>磁盘剩余空间（至少表大小的2倍）</li> </ol> <h2 id="相关实体">相关实体 </h2><ul> <li>[[mysql]] — 数据库系统</li> <li>[[gh-ost]] — GitHub开源DDL工具</li> <li>[[pt-online-schema-change]] — Percona DDL工具</li> </ul> <h2 id="来源">来源 </h2><ul> <li>IMA知识库「κ的知识库」原始收藏</li> <li>MySQL 8.0 Reference Manual</li> </ul>