亚洲中字慕日产2020,大陆极品少妇内射AAAAAA,无码av大香线蕉伊人久久,久久精品国产亚洲av麻豆网站

資訊專欄INFORMATION COLUMN

MYSQL的ibtmp1文件太大問(wèn)題

IT那活兒 / 2071人閱讀
MYSQL的ibtmp1文件太大問(wèn)題

點(diǎn)擊上方“IT那活兒”,關(guān)注后了解更多內(nèi)容,不管IT什么活兒,干就完了?。?!

認(rèn)識(shí)ibtmp1

該參數(shù)是5.7的新特性。

針對(duì)臨時(shí)表及相關(guān)對(duì)象引入新的“non-redo” undo log,存放于臨時(shí)表空間。該類型的undo log非 redolog 因?yàn)榕R時(shí)表不需崩潰恢復(fù)、也就無(wú)需redo logs,但卻需要 undo log用于回滾、MVCC等。

默認(rèn)的臨時(shí)表空間文件為ibtmp1,位于數(shù)據(jù)目錄在每次服務(wù)器啟動(dòng)時(shí)被重新創(chuàng)建,可通過(guò)innodb_temp_data_file_path指定臨時(shí)表空間。

ibtmp1是非壓縮的innodb臨時(shí)表的獨(dú)立表空間,通過(guò)innodb_temp_data_file_path參數(shù)指定文件的路徑,文件名和大小,默認(rèn)配置為ibtmp1:12M:autoextend,也就是說(shuō)在支持大文件的系統(tǒng)這個(gè)文件大小是可以無(wú)限增長(zhǎng)的。


常見(jiàn)的使用tmp臨時(shí)表空間的場(chǎng)景

當(dāng)EXPLAIN 查看執(zhí)行計(jì)劃結(jié)果的 Extra 列中,如果包含 Using Temporary 就表示會(huì)用到臨時(shí)表,例如如下幾種常見(jiàn)的情況通常就會(huì)用到:
1、UNION查詢(MySQL 5.7起,執(zhí)行UNION ALL不再產(chǎn)生臨時(shí)表,除非需要額外排序);
2、用到TEMPTABLE算法或者是UNION查詢中的視圖;
3、ORDER BY和GROUP BY的子句不一樣時(shí);
4、表連接中,ORDER BY的列不是驅(qū)動(dòng)表中的;
5、DISTINCT查詢并且加上ORDER BY時(shí);
6、SQL中用到SQL_SMALL_RESULT修飾符的查詢;
7、FROM中的子查詢(派生表);
8、子查詢或者semi-join時(shí)創(chuàng)建的表;

9、評(píng)估多表UPDATE語(yǔ)句。


實(shí)例分析

1、問(wèn)題現(xiàn)象

Mysql服務(wù)磁盤(pán)空間告警,經(jīng)過(guò)排查發(fā)現(xiàn)ibtmp1文件非常大,已經(jīng)超過(guò)TB級(jí)別,其他能清理的數(shù)據(jù)已經(jīng)做了清理。
ll -h ibtmp1
-rw-r----- 1 mysql mysql 1.2T Aug 15 16:17 ibtmp1

2、問(wèn)題分析

通過(guò)了解了ibtmp1是非壓縮的innodb臨時(shí)表的獨(dú)立表空間,而且檢查配置發(fā)現(xiàn)為ibtmp1:12M:autoextend,也就是支持無(wú)限擴(kuò)大的,才導(dǎo)致了ibtmp1文件增加打了非常大的一個(gè)數(shù)值。

3、解決方案

重啟數(shù)據(jù)庫(kù),釋放臨時(shí)表空間,同時(shí)為了避免臨時(shí)表空間再次膨脹,可以將其設(shè)置一個(gè)最大的值。
--操作流程:
1)關(guān)閉數(shù)據(jù)庫(kù)實(shí)例。
關(guān)閉后ibtmp1文件會(huì)自動(dòng)清理。
2)修改my.cnf配置文件,限制tmp表空間的大小。
為了避免ibtmp1文件無(wú)止境的暴漲導(dǎo)致再次出現(xiàn)此情況,可以修改參數(shù),限制其文件最大尺寸。
如果文件大小達(dá)到上限時(shí),需要生成臨時(shí)表的SQL無(wú)法被執(zhí)行(一般這種SQL效率也比較低,可借此機(jī)會(huì)進(jìn)行優(yōu)化)。
innodb_temp_data_file_path = ibtmp1:12M:autoextend:max:50G # 12M代表文件初始大小,50G代表最大size
3)啟動(dòng)mysql服務(wù),查一下是否生效。
show  variables like innodb_temp_data_file_path;
+----------------------------+-------------------------------+
| Variable_name | Value |
+----------------------------+-------------------------------+
| innodb_temp_data_file_path | ibtmp1:12M:autoextend:max:50G |
+----------------------------+-------------------------------+


臨時(shí)表使用的幾點(diǎn)建議

1、設(shè)置innodb_temp_data_file_path選項(xiàng),設(shè)定文件最大上限(innodb_temp_data_file_path = ibtmp1:12M:autoextend:max:200M),超過(guò)上限時(shí),需要生成臨時(shí)表的SQL無(wú)法被執(zhí)行(一般這種SQL效率也比較低,可借此機(jī)會(huì)進(jìn)行優(yōu)化)。
2、檢查INFORMATION_SCHEMA.INNODB_TEMP_TABLE_INFO,找到最大的臨時(shí)表對(duì)應(yīng)的線程,kill之即可釋放,但ibtmp1文件則不能釋放(除非重啟)。
3、擇機(jī)重啟實(shí)例,釋放ibtmp1文件,和ibdata1不同,ibtmp1重啟時(shí)會(huì)被重新初始化而ibdata1則不可以。
4、定期檢查運(yùn)行時(shí)長(zhǎng)超過(guò)N秒(比如N=300)的SQL,考慮清理,避免垃圾SQL長(zhǎng)時(shí)間運(yùn)行影響業(yè)務(wù)。


本文作者:徐林

本文來(lái)源:IT那活兒(上海新炬王翦團(tuán)隊(duì))

文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請(qǐng)注明本文地址:http://www.ezyhdfw.cn/yun/129633.html

相關(guān)文章

  • Docker Compose 1.18.0 之服務(wù)編排詳解

    摘要:新建一個(gè)你能記住的目錄,這個(gè)目錄是應(yīng)用鏡像的上下文,該目錄用于存放構(gòu)建該鏡像的資源在這個(gè)目錄里面將會(huì)新建一個(gè)文件進(jìn)入目錄創(chuàng)建一個(gè)文件,將啟動(dòng)您的博客和一個(gè)單獨(dú)的實(shí)例并掛載數(shù)據(jù)持久化到宿主機(jī)內(nèi)容如下指定服務(wù)的鏡像名稱或鏡像。 一個(gè)使用Docker容器的應(yīng)用,通常由多個(gè)容器組成。使用Docker Compose,不再需要使用shell腳本來(lái)啟動(dòng)容器。在配置文件中,所有的容器通過(guò)servic...

    Seay 評(píng)論0 收藏0

發(fā)表評(píng)論

0條評(píng)論

最新活動(dòng)
閱讀需要支付1元查看
<