news 2026/5/11 0:08:10

MySQL 无法“跳过”中间行,必须物理扫描所有前置行的庖丁解牛

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
MySQL 无法“跳过”中间行,必须物理扫描所有前置行的庖丁解牛

“MySQL 无法‘跳过’中间行,必须物理扫描所有前置行”是深度分页(LIMIT offset, size)性能灾难的根本原因。这并非 MySQL 的设计缺陷,而是由其存储引擎架构与 SQL 语义决定的必然结果


一、B+ 树结构:为什么不能“跳过”?

▶ 1.InnoDB 聚簇索引布局
  • 数据存储
    • 行数据按主键顺序存储在B+ 树叶子节点
    • 叶子节点通过双向链表连接
  • 示例
    [1] ↔ [2] ↔ [3] ↔ ... ↔ [1000000] ↔ [1000001] ↔ ...
▶ 2.LIMIT 1000000, 10的执行路径

定位 id=1

遍历链表到 id=1000000

继续读取 10 行

返回结果

  • 关键限制
    • B+ 树不存储“第 N 行的物理位置”
    • 必须从头(或上一次位置)顺序遍历链表

💡核心认知
B+ 树优化的是“范围查询”,而非“随机跳转”


二、执行模型:SQL 语义的约束

▶ 1.SQL 标准的要求
  • ORDER BY+LIMIT语义
    • 必须返回排序后第 (offset+1) 到 (offset+size) 行
    • 无法假设数据分布(如自增 ID 连续)
▶ 2.执行器的工作方式
  • 步骤
    1. 打开表扫描(Table Scan)或索引扫描(Index Scan)
    2. 逐行读取并计数
    3. 当计数 > offset 时开始收集结果
  • 伪代码
    intcount=0;while(row=fetch_next_row()){if(count>=offset){result.add(row);if(result.size()==size)break;}count++;}

📌关键点
执行器必须保证结果的正确性,无法“猜测”跳过行


三、替代方案:如何实现真正的“跳过”?

▶ 方案 1:游标分页(推荐)
  • 原理
    • 利用已知的排序字段值直接定位起始点
  • 示例
    -- 上一页最后 id=1000000SELECT*FROMordersWHEREid>1000000ORDERBYidLIMIT10;
  • 执行计划
    • type: range→ 直接跳转到 B+ 树的id=1000000位置
    • 仅扫描 10 行
▶ 方案 2:延迟关联(Deferred Join)
  • 原理
    • 先通过覆盖索引获取主键,再回表
  • 示例
    SELECTt.*FROMorders tINNERJOIN(SELECTidFROMordersORDERBYidLIMIT1000000,10)tmpONt.id=tmp.id;
  • 适用场景
    • 主键为聚簇索引(InnoDB)
    • 覆盖索引可避免回表
▶ 方案 3:记录偏移量(静态数据)
  • 原理
    • 预先计算每页的起始主键,存储到缓存
  • 示例
    // Redis 存储第 100000 页起始 ID$startId=Redis::get('page_100000_start_id');$rows=DB::select("SELECT * FROM orders WHERE id >= ? ORDER BY id LIMIT 10",[$startId]);

四、避坑指南

陷阱破局方案
忽略排序字段唯一性复合排序末尾加主键确保连续
未使用覆盖索引确保WHERE+ORDER BY字段有联合索引
盲目使用 OFFSET深度分页必用游标方案

五、终极心法

**“跳过不是功能,
而是索引的舞蹈——

  • 当你利用游标
    你在跳过扫描;
  • 当你延迟关联
    你在减少回表;
  • 当你预计算偏移
    你在铸造缓存。

真正的查询优化,
始于对存储的敬畏,
成于对细节的精控。”


结语

从今天起:

  1. 深度分页必用游标方案(WHERE id > last_id
  2. EXPLAIN验证执行计划(type=range)
  3. 监控慢查询日志(long_query_time=1

因为最好的分页,
不是跳过百万行,
而是精准定位下一程。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/5/10 11:19:13

用恋爱脑解释AI:原来算法追人和你追crush一模一样!

当你的心跳加速时,AI的神经网络也在“怦然心动” 开篇:那个让你失眠的crush 上周,朋友小李凌晨三点给我发消息:“她给我朋友圈点赞了!但没回我微信…AI能分析出她到底喜不喜欢我吗?” 我看着他发来的密密麻…

作者头像 李华
网站建设 2026/5/10 18:55:47

Scaling Laws for Neural Language Models

第001/30页(英文原文) Scaling Laws for Neural Language Models Jared Kaplan ∗ Johns Hopkins University, OpenAI Abstract We study empirical scaling laws for language model performance on the cross-entropy loss. The loss scales as a power-law with model…

作者头像 李华
网站建设 2026/5/7 4:04:35

基于springboot的博客管理系统设计实现

技术背景 SpringBoot作为Java生态中主流的快速开发框架,其自动化配置、内嵌服务器和约定优于配置的特性显著简化了传统Spring应用的搭建流程。博客管理系统作为内容创作与分享的典型应用场景,采用SpringBoot可快速实现模块化开发,集成数据库…

作者头像 李华
网站建设 2026/5/9 21:13:51

AI写论文新选择!4款AI论文生成利器,高效完成各类学术论文!

撰写期刊论文、毕业论文或职称论文的过程中,许多学者常常面临各种挑战。人工写作时,需要在海量文献中寻找相关资料,真可谓是大海捞针;而繁琐的格式要求则让人倍感压力,常常忙得不可开交。内容反复修改的过程更是磨光了…

作者头像 李华
网站建设 2026/5/6 8:46:13

AI写论文实用指南!这4款AI论文写作工具,让论文写作更简单!

引言 在 2025 年,学术写作正在经历一场智能化的革命,越来越多的人开始借助 AI 论文写作工具来进行论文创作。当谈到硕士和博士论文等较为复杂的长篇论文时,许多工具却面临着理论深度不足和逻辑结构松散的问题。普通的 AI 写论文工具往往无法…

作者头像 李华