介绍
本次MySQL迁移过程的目标是将Database A和Database B的部分数据迁移到新建的Database C中，业务允许停机时间最长为2小时。本文将详细介绍三次迁移的方案及流程，并分析瓶颈和优化过程。
方案
第一次迁移
测试目的：搭建测试环境供业务测试使用，对数据准确性无要求。硬件条件以及时间需求限制，无法采用物理备份/复制等手段。采用mysqldump进行拆分导出导入
由于导入时会创建大量索引，索引创建过程无法并行，总体耗时约40小时，无法满足业务需求。
第二次迁移
测试目的：优化第一次迁移的问题，采用传输表空间方式
流程：备份表结构及A/B的数据结构，传输ibd文件，恢复表结构并导入传输过来的ibd文件，替换表空间。
虽然测试耗时约6小时，但仍然无法满足业务要求。分析瓶颈在传输文件和mysql更新ibd文件每个page的lsn耗时较多。
第三次迁移
测试目的：优化第二次迁移的问题，采用物理备份方式
流程：
- 备份Database A/B的物理结构
- 在线传输备份文件到Server C
- 在线恢复Database B的物理结构
- 在线升级Database B
- 在线清理不需要的数据
- 在线创建Database A
- 在线恢复Database A
- 在线配置多源复制
- 在线正式割接断开复制，并修改Database C参数
- 对A/B数据库进行物理备份并恢复
- 升级Database C
- 清理多余数据
- 配置复制
通过以上方式，仅需几分钟的业务停机时间即可满足业务需求。
结论
通过三次迁移过程，我们发现物理备份方式最为可靠且高效。同时，根据瓶颈分析，我们可以优化迁移过程中的传输文件和mysql更新ibd文件每个page的lsn操作。
原创文章，作者：小编小本本，如若转载，请注明出处：https://www.benjiyun.com/yunzhujiyunwei/vps-yunwei/5890.html
相关推荐
-
Trace目录异常增长分析
问题现象 本次核心库的日常巡检中，发现Trace目录大小异常增长，该目录是通过自动化运维平台定期清理的，不应该占用这么大的空间。 问题分析 该目录下面最早的文件是上个月1号的，存在…
-
DG备库读写测试方案
DG备库读写测试方案 本文将介绍DG备库读写测试方案，确保在测试过程中不会对生产造成影响。步骤包括评估风险、设置备库参数、停止日志传输、创建闪回点等操作。测试完成后，还将介绍回退步…
-
跨境电商入门教程(抖音跨境电商入门完整教程？)
抖音跨境电商入门完整教程 我是本际云服务器推荐网的小编小本本，今天给大家带来抖音跨境电商入门完整教程。 一、轻松注册tiktok新
-
Python3.9用pip安装wordcloud库不成功的处理全过程
Python3.9用pip安装wordcloud库不成功的处理全过程 作为本际云服务器推荐网的小编小本本，今天给大家分享一下如何解决Python3.9用pip安装wordcloud…
-
DBA新人成长系列-Linux系统Mysql数据库主从架构搭建步骤
Linux系统Mysql数据库主从架构搭建步骤 作为DBA新人，学习如何搭建数据库主从架构是非常重要的，本文将记录在Linux系统下搭建Mysql数据库主从架构的步骤，以方便新手学…
-
超融合架构的优缺点
超融合架构的优点 随着科技的不断进步，超融合架构已经成为了主流。这种技术有着许多优点和缺点，其中最主要的就是它可以使得计算速度更快更精确。超融合架构可以充分利用多个计算资源，降低应…
-
PostgreSQL数据库免密登录配置
关于PG数据库免密登录配置 本文介绍了几种PG配置免密的方法，以方便在维护和操作数据库时不受密码输入的限制。PG数据库在登录时需要输入密码，这在很多操作中不太方便，比如定时备份脚本…
-
ElasticSearch全文搜索进阶
什么是ElasticSearch ElasticSearch是一个分布式、开源的全文搜索和分析引擎，支持实时搜索、分布式搜索、结构化和非结构化搜索，可实现海量数据快速存储、检索和分…
-
ASM磁盘管理
ASM磁盘管理：分层次架构实现数据写入平衡 小编今天要和大家介绍的是ASM磁盘管理。由于客户在进行压测时出现了并发进程减少、IO变慢等问题，导致压测不过关。通过这个案例我们可以看到…
-
分布式事务锁介绍及一般处理方法
分布式事务介绍 分布式事务是指一个事务在本地和远程执行，本地需要等待确认远程的事务结束后，进行下一步本地的操作。分布式事务所持有的锁之所以堵塞读操作，是因为数据无法确定显示哪个版本…