MySQL中间件集群平滑迁移的初步方案

yumo6663个月前 (03-28)技术文章31

最近有一套MySQL集群环境的服务器即将过保,为了避免后续带来的一些额外问题,需要提前考虑服务器的迁移计划,但是现在的线上业务,申请维护时间是比较困难的,而且在线变更的容忍时间是很短暂的,一般在业务层也有容错机制,比如超时时间,容错次数等,所以希望整个方案是可控并且变更时间对于业务侧是清晰的。


整个集群的迁移计划是按照1:1的模式进行服务器对等替换,也就意味着原来有30个服务器,要对等30个服务器来进行平移,按照之前的实践来看,整体的迁移时间基本控制字5秒以内。

集群的整体部署架构如下,连接层使用了基于Consul的负载均衡机制,数据分片节点使用了一主一从的模式。



在迁移中,因为从库默认是不接入业务的,所以相应的从库的替换可以平滑实现,即用新的服务器顶上去成为新的从库,如果可以保证IP不变,整体的拓扑结构是没有任何变化的。

接下来,考虑的是要新增一个数据从库节点,这个节点是基于新的从库节点进行的级联复制,整体结构如下:

在迁移前,需要对已有的中间件进行缩容,先能够逐步减少为1个中间件节点,这个过程可以使用备用连接池技术实现,也可以主动触发应用重连机制实现。

在切换的过程中,可以把原本的Consul模式降级为基于IP的模式,中间件P1连接的数据分片节点会在切换中可以先映射为S1-S4,这个过程简单理解就是重启中间件节点P1,在重启的过程中会逐步释放M1-M4上面的连接,为了保证数据的一致性,需要配置M1-S1,M2-S2,M3-S3,M4-S4之间的数据双向复制。


切换完成后就成为简单的一主一从的拓扑结构,整体来说还是比较好理解的,这样就整合到了新的服务器组中。


增加中间件节点,并且开启Consul服务,这样业务就又恢复成为和之前对等的使用模式。



当然整个过程中都是最简化的步骤,在每个步骤中都需要有严谨的思考和验证。

相关文章

如何将服务器数据迁移到另一台服务器

将服务器数据迁移到另一台服务器可以通过以下几种常见的方法实现:首先购买一台服务器,可以在网址栏搜索 218.0.48.3:8801购买。1、直接复制文件通过网络连接(如 SSH、FTP 等)将数据从源...

VMware替代实战手册:更高效的MySQL数据库迁移方案

数据库作为数字化用户的核心资产,其迁移是一项复杂且重要的任务,特别是在VMware平台替换及IT基础设施更新换代之时,尤其需要保障数据库迁移过程的平稳、流畅。深信服推出的数据库管理平台(DMP)是为关...

MySQL 导出数据

MySQL中你可以使用SELECT...INTO OUTFILE语句来简单的导出数据到文本文件上。使用 SELECT ... INTO OUTFILE 语句导出数据以下实例中我们将数据表 w3csch...

技术干货 | 独家揭秘 数据库跨平台迁移原来这么轻松

Oracle跨平台迁移——面临严峻挑战高复杂性 高成本数万行pl/sql代码,大量的存储过程、触发器、函数、包、计划任务、视图,各种基于Oracle独有特性的语法表达,以及应用开发商们基于Oracle...

MySQL数据库使用pg_chameleon迁移至openGauss

pg_chameleon介绍pg_chameleon是一个用Python 3编写的实时复制工具,经过内部适配,目前支持MySQL迁移到openGauss。工具使用mysql-replication库从...