news 2026/6/10 16:37:03

面试题:如何实现丝滑般的数据库扩容

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
面试题:如何实现丝滑般的数据库扩容

引言

初版

如果我们的线上服务不重要,一般来个单体的数据库DB来存储数据即可来。

单体应用


优点:简单,省事,方便。
缺点:数据并发性,稳定性都有问题。

进阶

随着数据量的不断增大,一般我们要对数据进行水平切分,水平切分的规则你可以简单根据用户id或者用户IP对数据进行取模,实现路由功能。当然也可以增加Slave跟KeepAlived来实现高可用。

主从+路由


但问题是,如果随着业务发展,目前我们2个库的性能扛不住了,还要继续水平拆分,造出更多库咋办?你一般是如何实现丝滑扩容的呢?

扩容

第一版:停机扩容

停机扩容


简单直接暴力的方法。

  1. APP通知用户在某个时间段停机维护升级。

  2. 新建若干个具有高可用的库。

  3. 停止当前服务,然后写个数据迁移程序,实现把老库数据全部迁移到新库中。

  4. 修改代码路由规则后重新对外提供服务。

优点:简单
缺点:中间停服务了,无法保证高可用。数据切换前跟切换过程中需确保无任何出错。

第二版:在线双写

在线双写

  1. 建立好新到数据库,然后接下来用户在写原有数据库到同时也写一份数据到我们的新库中。

  2. 写个数据迁移程序,实现旧库中的历史数据迁移到新库中。

  3. 迁移过程中,每次插入数据时,需检测数据的更新情况。比如,如果新的表中没有当前的数据,则直接新增;如果新表有数据并没有我们要迁移的数据新的话,我们就更新为当前数据,只能允许新的数据覆盖旧的数据,推荐使用Canal这样到中间件。

  4. 经过一段时间后需要校验新库跟旧库两边数据是否一样。如果检查到一样了,则直接切换即可。

优点:高可用了。
缺点:不够丝滑,来回挪动数据较大。

第三版:丝滑般扩容

目标:打算将原来到两个数据库扩容到4个。

第一步:修改配置

修改配置

  1. 修改配置信息,注意旧库跟新库之间到映射关系。确保扩容后数据可以正确路由到服务器。

  • Id % 2 = 0 的库变为了 id % 4 = 0 或 id % 4 = 2

  • Id % 2 = 1 的库变为了 id % 4 = 1 或 id % 4 = 3

第二步:reload配置

服务层reload配置,可以重启服务,也可以CLoud那样配置中心发送信号来实现重读配置文件。

至此,数据库的2 --> 4 扩容完成,原来是2个数据库实例提供服务,现在变为4个数据库实例提供服务。

第三步:收缩数据

丝滑扩容


此时 id % 4 = 0 跟 id % 4 = 2 的两个DB 还在同步数据。id % 4 = 1 跟 id % 4 = 3的两个DB还在同步数据。需做一些收尾操作。

  1. 接触上面的两个同步操作。

  2. 对新库新建高可用。

  3. 删除冗余数据,比如id % 4 = 0的机器中删除id % 4 = 2的冗余数据,只为id % 4 = 0的数据提供服务,其余三个类似操作。

  4. 至此实现成倍扩容,还避免来数据迁移。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/10 15:55:07

LeCroy CP150 力科CP150 10M 150A 示波器电流探头

‌ 力科CP150电流探头 ‌是一款高性能的电流测量工具,由 Teledyne LeCroy 生产。该探头基于霍尔效应和变压器技术,适用于高精度的交流和直流电流测量。CP150电流探头无需在电路中插入并联分流电路,直接通过 ProBus接口 供电,并与示…

作者头像 李华
网站建设 2026/6/10 18:45:26

KEYSIGHT N2782A 是德科技N2782B电流探头

‌ Keysight N2782B电流探头 是一种精确可靠的交流和直流电流测量解决方案‌。它使用霍尔效应传感器和交流电流互感器的混合技术,能够精确测量长达30安培的直流或交流电流‌主要特性 ‌平坦的频率响应‌:从直流到50 MHz的平坦带宽,适用于各种…

作者头像 李华
网站建设 2026/5/21 19:56:57

OpenCode 企业级 Docker 部署完整指南

OpenCode 是一个开源的 AI 编程助手与代码代理(coding agent),旨在让开发者在终端、IDE 或桌面环境下高效地与 AI 协同开发、分析、生成和重构代码。它支持多种大型语言模型(LLM),包括 Claude、OpenAI、Goo…

作者头像 李华
网站建设 2026/6/10 13:37:47

TRELLIS.2:采用 O-Voxel 技术,高效生成复杂 3D 几何与材质;Patient Churn Prediction 数据集:帮助识别有流失风险的患者

当前,从图片生成可用 3D 模型仍然费时费力,传统流程耗时且高度依赖专业建模师手动操作。即便有 AI 辅助,处理复杂形状、透明材质或开放表面时,模型常效果不佳或出现异常结构,且难以生成可直接用于游戏、电商的带逼真材…

作者头像 李华
网站建设 2026/6/5 19:00:49

医疗器械包装运输试验:DC13 周期核心测试指南

一、DC13 周期核心定义与适用范围 ASTM D4169 标准中的 DC13 周期,专为 “城际航空 本地陆运” 的单包裹运输场景设计,适用于重量不超过 150 磅(68.1kg)的医疗器械包装。该周期明确适配小型轻量化包裹,即重量低于 10…

作者头像 李华