热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

MySQL运行原理[数据页]

文章根据《MySQL技术内幕:InnoDB存储引擎(第二版)》、掘金小册《MySQL是怎样运行的:从根儿上理解MySQL》两本书得到的总结文章参考淘宝数据库内核组月报文章中的图均截






文章根据《MySQL技术内幕:InnoDB存储引擎(第二版)》、掘金小册《MySQL是怎样运行的:从根儿上理解MySQL》 两本书得到的总结




文章参考 淘宝数据库内核组月报

文章中的图均截自《MySQL技术内幕:InnoDB存储引擎(第二版)》

概述

之前在介绍表的那篇文章里,简单的介绍到了 数据页 ,关于数据页一点半点的文字根本介绍不清楚,所以单开一篇文章来介绍数据页。

一切对数据库的操作归根到底就是对索引页(Index page,文章中的数据页都指的是索引页)的操作,常见的页类型有数据页、undo页、系统页、事务数据页、插入缓冲位图页等等,我们这篇文章只单单介绍数据页。


页结构

数据页包括七个部分,数据页文件头,数据页头,最大最小记录,用户记录,空闲空间,数据目录,数据页尾部。数据页简单的分为两大部分,一部分存储数据记录,按照记录的大小通过记录的指针连接起来,另一部分存储数据页的目录。


1ACHqlVSda.png!large

文件头(File Header)

File Header 主要用于存储表空间相关信息,组成部分如下:


cQsFjFssUL.png!large

  • FIL_PAGE_SPACE_OR_CHKSUM:主要用于存储数据页的 checksum

  • FIL_PAGE_OFFSET:这个对应数据页的 page number,每个表空间从 0 开始

  • FIL_PAGE_ARCH_LOG_NO_OR_SPACE_ID:现版本用于存储 spaceid


数据页头(Page Header)

Page Header 主要用于存储数据页的元信息,组成部分如下:


Byt6COXO0q.png!large

  • PAGE_N_DIR_SLOTS:用于存放数据页条目的个数,一个新建的初始数据页就会有两条记录,分别指向最大最小记录,在非空的数据页中,第一条记录永远指向最小记录,最后一条永远指向最大记录

  • PAGE_HEAP_TOP:指向数据页中空闲空间的起始地址,由于有 PAGE_FREE 的记录存在,小于 PAGE_HEAP_TOP 地址的也可以被重用

  • PAGE_N_HEAP:目前数据页空间中的记录数量,正常来说记录着正常记录和删除记录,所以说这个数不会减小只会增加,一个新建的初始数据页的 PAGE_N_HEAP 的默认值为 2 ,即为最大最小记录

  • PAGE_FREE:记录被删除会进入这个删除链表,如果有记录插入,可以先从这个空间进行分配,若这个空间不够用,则在 PAGE_HEAP_TOP 空间中分配

  • PAGE_DIRECTION:最后一个记录插入的方向,从左插入从右插入,为了加速后续插入速度

  • PAGE_N_RECS:该页中记录的数量,不包括最大值最小值两条记录数


最大最小记录(Infimum and superfimum records)

每个数据页中有两个虚拟行记录用来限定记录的边界,infimum record 是数据页上最小的记录,所有用户的记录都大于它,superfimum record 是数据页上最大的记录,所有用户的记录都小于它,即他们两为数据页上的最大值最小值的边界。


用户记录(User record)

用户所有插入的数据记录都被存放在此,每个数据记录都有指向下一个记录的指针,但是没有指向上一个记录的指针。记录按照主键顺序排序,即用户可以从最小数据记录开始遍历,直到最大数据记录,其中包括了所有正常数据记录和被 delete-mark 的记录,但是不会访问到被标记删除的记录。


空闲空间(Free space)

在一条数据记录被删除后,该空间会被加入到空闲链表中。从 PAGE_HEAP_TOP 开始到最后一个数据目录,这之间就是空闲空间,都被重置为 0,当用户插入记录的时候会首先从被删除的记录空间中查找,若没有合适的位置,则从空闲空间中分配,插入记录后会递增 PAGE_HEAP_TOP、PAGE_N_RECS 两个值。


页目录(Page directory)


这里强烈推荐看小册的数据页结构中页目录这一块

页目录中存放了记录的相对位置,这些记录指针有时也被称为槽(slots),并不是每个记录都有槽,InnoDB存储引擎中的槽是一个稀疏的目录,这就代表了一个槽拥有多个记录。由于在InnoDB存储引擎中页目录是稀疏目录,二叉查找的结果只是一个粗略的结果,因此InnoDB存储引擎必须通过 recorder header 中的 next_record 来继续查找相关记录。


需要注意的是,B+树索引并不能找到具体的一条记录,能找到的只是该记录的页,数据库把页加载到内存,然后通过页目录进行二叉查找,因为二叉查找时间复杂度非常低,又在内存中进行查找,所以这部分的查找时间可以忽略不计。



文件结尾信息(File trailer)

这部分信息处于数据页的最后位置,只有 8 个字节,为了检测页是否完整的刷新至磁盘,其中只有一个 FIL_PAGE_END_LSN 部分,前 4 字节代表该页的 checksum 值,后 4 字节和 file header 中的 FIL_PAGE_LSN 值相同。




mysql


推荐阅读
  • 如何在php文件中添加图片?
    本文详细解答了如何在php文件中添加图片的问题,包括插入图片的代码、使用PHPword在载入模板中插入图片的方法,以及使用gd库生成不同类型的图像文件的示例。同时还介绍了如何生成一个正方形文件的步骤。希望对大家有所帮助。 ... [详细]
  • 安装mysqlclient失败解决办法
    本文介绍了在MAC系统中,使用django使用mysql数据库报错的解决办法。通过源码安装mysqlclient或将mysql_config添加到系统环境变量中,可以解决安装mysqlclient失败的问题。同时,还介绍了查看mysql安装路径和使配置文件生效的方法。 ... [详细]
  • 本文介绍了如何使用php限制数据库插入的条数并显示每次插入数据库之间的数据数目,以及避免重复提交的方法。同时还介绍了如何限制某一个数据库用户的并发连接数,以及设置数据库的连接数和连接超时时间的方法。最后提供了一些关于浏览器在线用户数和数据库连接数量比例的参考值。 ... [详细]
  • 本文介绍了在SpringBoot中集成thymeleaf前端模版的配置步骤,包括在application.properties配置文件中添加thymeleaf的配置信息,引入thymeleaf的jar包,以及创建PageController并添加index方法。 ... [详细]
  • 本文详细介绍了MysqlDump和mysqldump进行全库备份的相关知识,包括备份命令的使用方法、my.cnf配置文件的设置、binlog日志的位置指定、增量恢复的方式以及适用于innodb引擎和myisam引擎的备份方法。对于需要进行数据库备份的用户来说,本文提供了一些有价值的参考内容。 ... [详细]
  • 图解redis的持久化存储机制RDB和AOF的原理和优缺点
    本文通过图解的方式介绍了redis的持久化存储机制RDB和AOF的原理和优缺点。RDB是将redis内存中的数据保存为快照文件,恢复速度较快但不支持拉链式快照。AOF是将操作日志保存到磁盘,实时存储数据但恢复速度较慢。文章详细分析了两种机制的优缺点,帮助读者更好地理解redis的持久化存储策略。 ... [详细]
  • 本文介绍了在Mac上搭建php环境后无法使用localhost连接mysql的问题,并通过将localhost替换为127.0.0.1或本机IP解决了该问题。文章解释了localhost和127.0.0.1的区别,指出了使用socket方式连接导致连接失败的原因。此外,还提供了相关链接供读者深入了解。 ... [详细]
  • HDU 2372 El Dorado(DP)的最长上升子序列长度求解方法
    本文介绍了解决HDU 2372 El Dorado问题的一种动态规划方法,通过循环k的方式求解最长上升子序列的长度。具体实现过程包括初始化dp数组、读取数列、计算最长上升子序列长度等步骤。 ... [详细]
  • 本文介绍了Java工具类库Hutool,该工具包封装了对文件、流、加密解密、转码、正则、线程、XML等JDK方法的封装,并提供了各种Util工具类。同时,还介绍了Hutool的组件,包括动态代理、布隆过滤、缓存、定时任务等功能。该工具包可以简化Java代码,提高开发效率。 ... [详细]
  • [译]技术公司十年经验的职场生涯回顾
    本文是一位在技术公司工作十年的职场人士对自己职业生涯的总结回顾。她的职业规划与众不同,令人深思又有趣。其中涉及到的内容有机器学习、创新创业以及引用了女性主义者在TED演讲中的部分讲义。文章表达了对职业生涯的愿望和希望,认为人类有能力不断改善自己。 ... [详细]
  • Android Studio Bumblebee | 2021.1.1(大黄蜂版本使用介绍)
    本文介绍了Android Studio Bumblebee | 2021.1.1(大黄蜂版本)的使用方法和相关知识,包括Gradle的介绍、设备管理器的配置、无线调试、新版本问题等内容。同时还提供了更新版本的下载地址和启动页面截图。 ... [详细]
  • 解决Cydia数据库错误:could not open file /var/lib/dpkg/status 的方法
    本文介绍了解决iOS系统中Cydia数据库错误的方法。通过使用苹果电脑上的Impactor工具和NewTerm软件,以及ifunbox工具和终端命令,可以解决该问题。具体步骤包括下载所需工具、连接手机到电脑、安装NewTerm、下载ifunbox并注册Dropbox账号、下载并解压lib.zip文件、将lib文件夹拖入Books文件夹中,并将lib文件夹拷贝到/var/目录下。以上方法适用于已经越狱且出现Cydia数据库错误的iPhone手机。 ... [详细]
  • 拥抱Android Design Support Library新变化(导航视图、悬浮ActionBar)
    转载请注明明桑AndroidAndroid5.0Loollipop作为Android最重要的版本之一,为我们带来了全新的界面风格和设计语言。看起来很受欢迎࿰ ... [详细]
  • 本文介绍了在mac环境下使用nginx配置nodejs代理服务器的步骤,包括安装nginx、创建目录和文件、配置代理的域名和日志记录等。 ... [详细]
  • SpringMVC接收请求参数的方式总结
    本文总结了在SpringMVC开发中处理控制器参数的各种方式,包括处理使用@RequestParam注解的参数、MultipartFile类型参数和Simple类型参数的RequestParamMethodArgumentResolver,处理@RequestBody注解的参数的RequestResponseBodyMethodProcessor,以及PathVariableMapMethodArgumentResol等子类。 ... [详细]
author-avatar
手机用户2502911627_202
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有