MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

0    106    1

Tags:

👉 本文共约3437个字,系统预计阅读时间或需13分钟。

问题:内部临时表会使用多少内存呢?

MySQL 在处理临时结果集(UNION 运算 / 聚合运算等)时,会用到内部临时表(internal temporary table)。

那么内部临时表会使用多少内存呢?

实验:

我们先创建一个测试用的数据库,

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

然后准备好数据,

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

我们使用一个带 UNION 的子表,使执行计划会使用内部临时表:

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

可以看到执行计划确实使用了临时表:

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

下面我们另起一个 session,用 performance_schema 对内存进行观察:

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

在主 session 中,探查其连接号,并找到线程号:

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

在 performance_schema 中,确认其内存分配的统计初始状态:

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

在主 session 中执行 SQL:

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

在 performance_schema 中,查看其内存分配:

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

可知在这个 SQL 的处理过程中,总共分配了 4M 多的内存用于内部临时表:

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

我们都知道内存临时表是 memory(heap) 引擎格式的表,那我们手工建一个显式的内存表,应当和内存临时表使用的内存相同,来试验一下。

在主 session 中创建一张内存表,将数据插入到内存表中:

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

观察 performance_schema 可知:内存表驻留在内存里的字节数与之前临时表使用的字节数相同。

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

结论

我们通过 performance_schema 观察了 memory 引擎的内存分配,由此推算了内部临时表的内存占用情况。

MySQL 在其他元数据中,诸如 information_schema.INNODB_TEMP_TABLE_INFO 中,并不展示内部临时表的信息,如图:

MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?

另外值得注意的是:memory 引擎会多划分出不少空间,比如本例中我们的数据是 300025 行 * 4 字节 =~ 1.2M,而引擎分出了 4M 多的内存来进行存储。

因此如果进行估算时,需要将数据量乘以一个较大的系数,才能准确估算。

我们是第二次用到了 dbdeployer,介绍一下其身世:

dbdeployer 的前身是著名的 mysql-sandbox,是著名博主 Giuseppe Maxia 的扛鼎之作(http://datacharmer.blogspot.com),可以极其方便地搭建 MySQL 多种架构的测试环境,命令简单优雅。

今后在实验中,我们会多次用到 dbdeployer,或者使用 MySQL 容器进行快速搭建和试验。

问题:内部临时表何时使用磁盘?

在前边的实验中中,我们看到了内部临时表会使用到不少内存。

那么如果需要的临时表再大一些,必然要使用到磁盘来承载,那么内部临时表是何时使用磁盘的?

实验

我们仍使用 实验 05 中的环境,略去准备数据的过程。

本人提供Oracle(OCP、OCM)、MySQL(OCP)、PostgreSQL(PGCA、PGCE、PGCM)等数据库的培训和考证业务,私聊QQ646634621或微信db_bao,谢谢!
MySQL 在处理临时结果集时,内部临时表会使用多少内存?内部临时表何时使用磁盘?后续精彩内容已被小麦苗无情隐藏,请输入验证码解锁本站所有文章
验证码:
请关注本站微信公众号,回复“小麦苗博客”,获取验证码。在微信里搜索“DB宝”或者“www_xmmup_com”或者微信扫描右侧二维码都可以关注本站微信公众号。

标签:

Avatar photo

小麦苗

学习或考证,均可联系麦老师,请加微信db_bao或QQ646634621

您可能还喜欢...

发表回复

嘿,我是小麦,需要帮助随时找我哦
  • 18509239930
  • 个人微信

  • 麦老师QQ聊天
  • 个人邮箱
  • 点击加入QQ群
  • 个人微店

  • 回到顶部