MySQL 5.7临时表空间的使用方法
这篇文章将为大家详细讲解有关MySQL 5.7临时表空间的使用方法,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。
导读
MySQL 5.7的目标是成为发布以来最安全的MySQL服务器,其在SSL/TLS和全面安全开发方面有一些重要的改变。
MySQL 5.7起支持独立临时表空间,但个别时候也可能会踩坑的。
MySQL 5.7起,开始采用独立的临时表空间(和独立的undo表空间不是一回事哟),命名ibtmp1文件,初始化12M,且默认无上限。
选项 innodb_temp_data_file_path 可配置临时表空间相关参数。
innodb_temp_data_file_path=ibtmp1:12M:autoextend
临时表空间的几点说明
临时表空间不像普通InnoDB表空间那样,不支持裸设备(raw device)。
临时表空间使用动态的表空间ID,因此每次重启时都会变化(每次重启时,都会重新初始化临时表空间文件)。
当选项设置错误或其他原因(权限不足等原因)无法创建临时表空间时,mysqld实例也无法启动。
临时表空间中存储这非压缩的InnoDB临时表,如果是压缩的InnoDB临时表,则需要单独存储在各自的表空间文件中,文件存放在 tmpdir(/tmp)目录下。
临时表元数据存储在 INFORMATION_SCHEMA.INNODB_TEMP_TABLE_INFO 视图中。
有时执行SQL请求时会产生临时表,极端情况下,可能导致临时表空间文件暴涨,帮人处理过的案例中最高涨到快300G,比以前遇到的 ibdata1 文件暴涨还要猛…
临时表使用的几点建议
设置 innodb_temp_data_file_path 选项,设定文件最大上限,超过上限时,需要生成临时表的SQL无法被执行(一般这种SQL效率也比较低,可借此机会进行优化)。
检查 INFORMATION_SCHEMA.INNODB_TEMP_TABLE_INFO,找到最大的临时表对应的线程,kill之即可释放,但 ibtmp1 文件则不能释放(除非重启)。
择机重启实例,释放 ibtmp1 文件,和 ibdata1 不同,ibtmp1 重启时会被重新初始化而 ibdata1 则不可以。
定期检查运行时长超过N秒(比如N=300)的SQL,考虑干掉,避免垃圾SQL长时间运行影响业务。
附:临时表测试案例
表DDL
CREATETEMPORARYTABLE`tmp1`(`id`int(10)unsignedNOTNULLDEFAULT'0',`name`varchar(50)NOTNULLDEFAULT'',`aid`int(10)unsignedNOTNULLAUTO_INCREMENT,`nid`int(11)unsignedGENERATEDALWAYSAS((`id`+1))VIRTUALNOTNULL,`nnid`int(11)unsignedGENERATEDALWAYSAS((`id`+1))STOREDNOTNULL,PRIMARYKEY(`aid`),KEY`name`(`name`),KEY`id`(`id`),KEY`nid`(`nid`))ENGINE=InnoDBDEFAULTCHARSET=utf8
原表大小只有 120MB,从这个表直接 INSERT…SELECT 导数据到tmp1表。
-rw-r-----1yejrimysql120MApr1410:52/data/mysql/test/sid.ibd
生成临时表(去掉虚拟列,临时表不支持虚拟列,然后写入数据),还更大了(我也不解,以后有机会再追查原因)。
-rw-r-----1yejrimysql140MJun2509:55/Users/yejinrong/mydata/ibtmp1
查看临时表元数据信息
yejr@imysql.com[test]>select*fromINFORMATION_SCHEMA.INNODB_TEMP_TABLE_INFO\G***********************1.row***********************TABLE_ID:405NAME:#sql14032_300000005_3N_COLS:6SPACE:421PER_TABLE_TABLESPACE:FALSEIS_COMPRESSED:FALSE
再删除索引,结果,又更大了
-rw-r-----1yejrimysql204MJun2509:57/data/mysql/ibtmp1
第二次测试删除索引后,变成了200M(因为第二次测试时,我设置了临时表最大200M)
innodb_temp_data_file_path=ibtmp1:12M:autoextend:max:200M
-rw-r-----1yejrimysql200MJun2510:15/data/mysql/ibtmp1
执行一个会产生临时表的慢SQL。
注:MySQL 5.7起,执行UNION ALL不再产生临时表(除非需要额外排序)。
yejr@imysql.com[test]>explainselect*fromtmp1unionselectid,name,aidfromsid\G***************************1.row***************************id:1select_type:PRIMARYtable:tmp1partitions:NULLtype:ALLpossible_keys:NULLkey:NULLkey_len:NULLref:NULLrows:3986232filtered:100.00Extra:NULL***************************2.row***************************id:2select_type:UNIONtable:sidpartitions:NULLtype:ALLpossible_keys:NULLkey:NULLkey_len:NULLref:NULLrows:802682filtered:100.00Extra:NULL***************************3.row***************************id:NULLselect_type:UNIONRESULTtable:<union1,2>partitions:NULLtype:ALLpossible_keys:NULLkey:NULLkey_len:NULLref:NULLrows:NULLfiltered:NULLExtra:Usingtemporary
文件涨到588M还没结束,我直接给卡了
-rw-r-----1yejrimysql588MJun2510:07/data/mysql/ibtmp1
第二次测试时,设置了临时表空间文件最大200M,再执行会报错:
yejr@imysql.com[test]>select*fromtmp1unionselectid,name,aidfromsid;ERROR1114(HY000):Thetable'/var/folders/bv/j4tjn6k54dj5jh2tl8yn6_y00000gn/T/#sql14032_5_8'isfull
关于“MySQL 5.7临时表空间的使用方法”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。
声明:本站所有文章资源内容,如无特殊说明或标注,均为采集网络资源。如若本站内容侵犯了原著者的合法权益,可联系本站删除。