Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >InnoDB一棵B+树可以存放多少行数据?

InnoDB一棵B+树可以存放多少行数据?

作者头像
哲洛不闹
发布于 2019-10-24 07:31:07
发布于 2019-10-24 07:31:07
76000
代码可运行
举报
文章被收录于专栏:java一日一条java一日一条
运行总次数:0
代码可运行

一个问题?

InnoDB 一棵 B + 树可以存放多少行数据?这个问题的简单回答是:约 2 千万

为什么是这么多呢?因为这是可以算出来的,要搞清楚这个问题,我们先从 InnoDB 索引数据结构、数据组织方式说起。

我们都知道计算机在存储数据的时候,有最小存储单元,这就好比我们今天进行现金的流通最小单位是一毛。

在计算机中磁盘存储数据最小单元是扇区,一个扇区的大小是 512 字节,而文件系统(例如 XFS/EXT4)他的最小单元是块,一个块的大小是 4k

而对于我们的 InnoDB 存储引擎也有自己的最小储存单元------页(Page),一个页的大小是 16K。

下面几张图可以帮你理解最小存储单元:

文件系统中一个文件大小只有 1 个字节,但不得不占磁盘上 4KB 的空间。

innodb 的所有数据文件(后缀为 ibd 的文件),他的大小始终都是 16384(16k)的整数倍。

磁盘扇区、文件系统、InnoDB 存储引擎都有各自的最小存储单元。

MySQL 中我们的 InnoDB 页的大小默认是 16k,当然也可以通过参数设置:

数据表中的数据都是存储在页中的,所以一个页中能存储多少行数据呢?假设一行数据的大小是 1k,那么一个页可以存放 16 行这样的数据。

如果数据库只按这样的方式存储,那么如何查找数据就成为一个问题

因为我们不知道要查找的数据存在哪个页中,也不可能把所有的页遍历一遍,那样太慢了。

所以人们想了一个办法,用 B + 树的方式组织这些数据。如图所示:

我们先将数据记录按主键进行排序,分别存放在不同的页中(为了便于理解我们这里一个页中只存放 3 条记录,实际情况可以存放很多)

除了存放数据的页以外,还有存放键值 + 指针的页,如图中 page number=3 的页,该页存放键值和指向数据页的指针,这样的页由 N 个键值 + 指针组成。

当然它也是排好序的。这样的数据组织形式,我们称为索引组织表。

现在来看下,要查找一条数据,怎么查?

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
如:select * from user where id=5;

这里 id 是主键, 我们通过这棵 B + 树来查找,首先找到根页,你怎么知道 user 表的根页在哪呢?

其实每张表的根页位置在表空间文件中是固定的,即 page number=3 的页(这点我们下文还会进一步证明)

找到根页后通过二分查找法,定位到 id=5 的数据应该在指针 P5 指向的页中,那么进一步去 page number=5 的页中查找,同样通过二分查询法即可找到 id=5 的记录:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
5    zhao2    27

现在我们清楚了 InnoDB 中主键索引 B + 树是如何组织数据、查询数据的,我们总结一下:

1、InnoDB 存储引擎的最小存储单元是页,页可以用于存放数据也可以用于存放键值 + 指针,在 B + 树中叶子节点存放数据,非叶子节点存放键值 + 指针。

2、索引组织表通过非叶子节点的二分查找法以及指针确定数据在哪个页中,进而在去数据页中查找到需要的数据;

那么回到我们开始的问题,通常一棵 B + 树可以存放多少行数据?

这里我们先假设 B + 树高为 2,即存在一个根节点和若干个叶子节点,那么这棵 B + 树的存放总记录数为:根节点指针数 * 单个叶子节点记录行数。

上文我们已经说明单个叶子节点(页)中的记录数 = 16K/1K=16。(这里假设一行记录的数据大小为 1k,实际上现在很多互联网业务数据记录大小通常就是 1K 左右)。

那么现在我们需要计算出非叶子节点能存放多少指针?

其实这也很好算,我们假设主键 ID 为 bigint 类型,长度为 8 字节,而指针大小在 InnoDB 源码中设置为 6 字节,这样一共 14 字节

我们一个页中能存放多少这样的单元,其实就代表有多少指针,即 16384/14=1170。

那么可以算出一棵高度为 2 的 B + 树,能存放 1170*16=18720 条这样的数据记录。

根据同样的原理我们可以算出一个高度为 3 的 B + 树可以存放:1170117016=21902400 条这样的记录。

所以在 InnoDB 中 B + 树高度一般为 1-3 层,它就能满足千万级的数据存储

在查找数据时一次页的查找代表一次 IO,所以通过主键索引查询通常只需要 1-3 次 IO 操作即可查找到数据。

怎么得到 InnoDB 主键索引 B + 树的高度?

上面我们通过推断得出 B + 树的高度通常是 1-3,下面我们从另外一个侧面证明这个结论。

在 InnoDB 的表空间文件中,约定 page number 为 3 的代表主键索引的根页,而在根页偏移量为 64 的地方存放了该 B + 树的 page level。

如果 page level 为 1,树高为 2,page level 为 2,则树高为 3。即 B + 树的高度 = page level+1;下面我们将从实际环境中尝试找到这个 page level。

在实际操作之前,你可以通过 InnoDB 元数据表确认主键索引根页的 page number 为 3,你也可以从《InnoDB 存储引擎》这本书中得到确认。

可以看出数据库 dbt3 下的 customer 表、lineitem 表主键索引根页的 page number 均为 3,而其他的二级索引 page number 为 4。

关于二级索引与主键索引的区别请参考 MySQL 相关书籍,本文不在此介绍。

下面我们对数据库表空间文件做想相关的解析:

因为主键索引 B + 树的根页在整个表空间文件中的第 3 个页开始,所以可以算出它在文件中的偏移量:16384*3=49152(16384 为页大小)。

另外根据《InnoDB 存储引擎》中描述在根页的 64 偏移量位置前 2 个字节,保存了 page level 的值

因此我们想要的 page level 的值在整个文件中的偏移量为:16384*3+64=49152+64=49216,前 2 个字节中。

接下来我们用 hexdump 工具,查看表空间文件指定偏移量上的数据:

linetem 表的 page level 为 2,B + 树高度为 page level+1=3;

region 表的 page level 为 0,B + 树高度为 page level+1=1;

customer 表的 page level 为 2,B + 树高度为 page level+1=3;

这三张表的数据量如下:

总结:

lineitem 表的数据行数为 600 多万,B + 树高度为 3,customer 表数据行数只有 15 万,B + 树高度也为 3。可以看出尽管数据量差异较大,这两个表树的高度都是 3

换句话说这两个表通过索引查询效率并没有太大差异,因为都只需要做 3 次 IO。那么如果有一张表行数是一千万,那么他的 B + 树高度依旧是 3,查询效率仍然不会相差太大。

region 表只有 5 行数据,当然他的 B + 树高度为 1。

最后回顾一道面试题

有一道 MySQL 的面试题,为什么 MySQL 的索引要使用 B + 树而不是其它树形结构? 比如 B 树?

现在这个问题的复杂版本可以参考本文;

他的简单版本回答是:

因为 B 树不管叶子节点还是非叶子节点,都会保存数据,这样导致在非叶子节点中能保存的指针数量变少(有些资料也称为扇出)

指针少的情况下要保存大量数据,只能增加树的高度,导致 IO 操作变多,查询性能变低;

小结

本文从一个问题出发,逐步介绍了 InnoDB 索引组织表的原理、查询方式,并结合已有知识,回答该问题,结合实践来证明。

当然为了表述简单易懂,文中忽略了一些细枝末节,比如一个页中不可能所有空间都用于存放数据,它还会存放一些少量的其他字段比如 page level,index number 等等,另外还有页的填充因子也导致一个页不可能全部用于保存数据。

关于二级索引数据存取方式可以参考 MySQL 相关书籍,他的要点是结合主键索引进行回表查询。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2019-10-21,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 java一日一条 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
B+Tree index structures in InnoDB(7.InnoDB中B+树的索引结构)
这篇文章引用的是2014年2月3日的innodb_ruby 0.8.8版本。 在《学习InnoDB:核心之旅》中,我介绍了innodb_diagrams项目来描述InnoDB的内部结构,它提供了这篇文章中用到的所有图表。在对innodb_ruby的快速介绍一文中,我介绍了innodb_space命令行工具的安装和一些快速演示。 在InnoDB索引页的物理结构中描述了InnoDB索引页的物理结构。现在,我们将通过一些实际示例来研究InnoDB如何在逻辑上构造索引。
冬天里的懒猫
2020/08/26
8460
B+Tree index structures in InnoDB(7.InnoDB中B+树的索引结构)
MySQL:InnoDB一棵B+树可以存放多少行数据?
1千万,2千万,或者上亿条数据?具体的答案不重要,当然肯定也不会是一个固定的数目,今天我们就一起来探讨探讨这个问题。
崔笑颜
2020/12/15
1.4K0
MySQL:InnoDB一棵B+树可以存放多少行数据?
心态崩了,我怎么知道实际生产环境的 B+ 树索引有多少层?
关于这个问题最近好像在牛客上经常看到,感觉没啥意义,可能主要考察的是对 B+ 索引的理解吧。先上答案:
飞天小牛肉
2022/02/23
4620
心态崩了,我怎么知道实际生产环境的 B+ 树索引有多少层?
阿里二面:MySQL索引是怎么支撑千万级表的快速查找?
在 MySQL 官方提到,改善操作性能的最佳方法 SELECT 在查询中测试的一个或多个列上创建索引。索引条目的作用类似于指向表行的指针,从而使查询可以快速确定哪些行与WHERE子句中的条件匹配,并检索这些行的其他列值。所有MySQL数据类型都可以建立索引。
Java程序猿
2022/06/10
1.1K0
MySQL索引底层:B+树详解(修正版)
当我们发现SQL执行很慢的时候,自然而然想到的就是加索引。对于范围查询,索引的底层结构就是B+树。今天我们一起来学习一下B+树哈~
捡田螺的小男孩
2021/03/16
1K0
MySQL索引底层:B+树详解(修正版)
为什么 MySQL 使用 B+ 树
首先需要澄清的一点是,MySQL 跟 B+ 树没有直接的关系,真正与 B+ 树有关系的是 MySQL 的默认存储引擎 InnoDB,MySQL 中存储引擎的主要作用是负责数据的存储和提取,除了 InnoDB 之外,MySQL 中也支持 MyISAM 作为表的底层存储引擎。
大忽悠爱学习
2023/02/26
4850
为什么 MySQL 使用 B+ 树
MySQL与InnoDB(下)-B+树与索引
本文主要介绍了MySQL与InnoDB存储引擎中的索引机制,包括聚集索引、非聚集索引、B+树索引和索引查找算法等。聚集索引是一种基于B+树的索引,将每张表的数据存储顺序与索引顺序对应,以最大程度地提高查找效率。非聚集索引则将索引字段值与数据行存储在一起,每个叶子节点存储一个键值对。B+树是一种平衡树,每个节点包含关键字和指针,并且叶子节点包含数据行。索引查找算法主要包括顺序查找、二分查找、二叉树查找等,每种算法都有其优缺点和适用场景。
企鹅号小编
2018/01/02
9550
MySQL与InnoDB(下)-B+树与索引
mysql为什么用B+树,innodb和myisam的区别?
同学B:因为索引其实就是一种优化查询的数据结构,比如Mysql中的索引是用B+树实现的,而B+树就是一种数据结构,可以优化查询速度,可以利用索引快速查找数据,所以能优化查询。
kiki.
2022/09/29
7320
mysql为什么用B+树,innodb和myisam的区别?
InnoDB为什么使用B+树实现索引?
InnoDB 为什么使用 B+树实现索引?说到这个话题,就需要先聊一聊 InnoDB 的索引类型有哪些?
@派大星
2024/05/29
1970
InnoDB为什么使用B+树实现索引?
换一个角度看 B+ 树
大家背八股文的时候,都知道 MySQL 里 InnoDB 存储引擎是采用 B+ 树来组织数据的。
小林coding
2021/12/16
6260
换一个角度看 B+ 树
堂妹问我:innodb是如何插入数据的?
上周系统上线,发现数据量大的时候查询较慢。经过调查发现,负责该功能的妹妹建表时没有指定主键。
敖丙
2021/01/08
8550
堂妹问我:innodb是如何插入数据的?
MySQL底层概述—4.InnoDB数据文件
一个表空间会包含多个段,一个段会包含多个区(256个区就是一个组);一个区又会包含64个页,一个页里面又会包含一行一行的记录Row。
东阳马生架构
2025/02/11
2090
是什么影响了MySQL索引B+树的高度?
提到MySQL,想必大多后端同学都不会陌生,提到B+树,想必还是有很大部分都知道InnoDB引擎的索引实现,利用了B+树的数据结构。
架构精进之路
2022/12/21
5980
是什么影响了MySQL索引B+树的高度?
MySql进阶索引篇01——深度讲解索引的数据结构:B+树
索引是存储引擎中一种用于快速找到数据的存储结构,他就像《新华字典》的目录,可以使我们查每个字的速度大大提升。
半旧518
2022/10/26
2.5K0
MySql进阶索引篇01——深度讲解索引的数据结构:B+树
MySQL十四:单表最大2000W行数据
在互联网技术圈中有一个说法:「MySQL 单表数据量大于 2000 W行,性能会明显下降」。网传这个说法最早由百度传出,真假不得而知。但是却成为了行业内一个默认的标准。
云扬四海
2022/09/26
5.3K0
B+树的结构
B+树由内部节点(非叶子节点)和叶子节点组成,所有叶子节点位于同一层,形成平衡结构
麦辣鸡腿堡
2025/03/18
2090
你不知道的B+树索引
(1)页头: 页 ID, 指向前一页和后一页的指针, 存储的数据类型等信息, 共 38B;
一个架构师
2022/06/20
2600
你不知道的B+树索引
MySQL 索引(3)
索引是对数据库表中一列或多列的值进行排序的一种结构,使用索引可快速访问数据库表中的特定信息。
兜兜毛毛
2020/08/11
4550
MySQL 索引(3)
100w的数据表比1000w的数据表查询更快吗?
从Innodb存储引擎的逻辑存储结构来看,所有数据都被逻辑的放在一个表空间(tablespace)中,默认情况下,所有的数据都放在一个表空间中,当然也可以设置每张表单独占用一个表空间,通过innodb_file_per_table来开启。
架构师修炼
2022/07/30
5140
100w的数据表比1000w的数据表查询更快吗?
MySQL的B+树如何存储主键和数据?
文章的起源是一位网友的评论,问的问题比较犀利且分散。借着这个机会研究下这些问题,分别作答一下。
码农编程进阶笔记
2022/04/08
1.9K0
MySQL的B+树如何存储主键和数据?
相关推荐
B+Tree index structures in InnoDB(7.InnoDB中B+树的索引结构)
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
本文部分代码块支持一键运行,欢迎体验
本文部分代码块支持一键运行,欢迎体验