這一篇mysql優化是注重於查詢優化,根據mysql的執行情況,判斷mysql什麼時候需要優化,關於數據庫開始階段的數據庫邏輯、物理結構的設計結構優化不是本文重點,下次再談
查看mysql語句的執行情況,判斷是否需要進行優化
當感覺操作數據庫查詢語句速度變慢,不符合生產效率要求時,可按照以下步驟進行查看
1、 慢查詢的開啓與捕獲,查看可能是哪些SQL語句造成的查詢速度慢
2、 explain+SQL語句
3、 show profile分析SQL語句在服務器內執行細節和生命週期情況
4、 通過以上三個步驟大致確定問題SQL之後,可聯繫運維人員或者DBA進行數據庫服務器參數的調整優化
以下分別通過java程序員可分析的前三個方面來討論mysql語句的查詢優化
一、慢查詢
慢查詢日誌是mysql的一個日誌記錄,可以用來記錄mysql語句執行時間超過指定的long_query_time的SQL語句,long_query_time的默認值是10s
慢查詢日誌默認情況下是不開啓的,因爲將數據保存到日誌會對性能有一定影響,測試環境下可手動打開,但注意手動開啓之後只對本次啓動生效,mysql關閉之後重啓恢復默認狀態,要想持久生效要改變my.ini配置文件(Window系統下),其他系統變量也如此
可通過show varaibles like '%slow_query_log%'來查看日誌開啓情況
可以用set long_query_time = 3;語句來改變默認的閥值,然後我們可以用show varaiables like 'long_query_
time'來查看是否更改生效,若沒有生效,可嘗試重啓一下mysql客戶端即可
然後我們現在來測試一下,因爲我們平時個人測試學習的數據庫及其簡單的SQL語句可能沒有造成很慢的查詢,我們可以採用 select sleep(time)來模擬測試
(這個函數類似於java線程中的sleep函數)
執行該函數之前slow.log文件:
執行sleep(4)函數,因爲要讓你設置的這個time大於記錄到日誌裏面的時間閥值
可已看到這條慢查詢話費的具體時間是4.041230,也可以看到是哪個用戶在哪個數據庫操作的哪條具體SQL語句,我們開啓慢查詢日誌的目的就是找到這樣的造成查速度減慢的SQL語句,爲第二步的explain提供基礎
mysqldumpslow日誌分析工具
在實際的數據庫使用過程中可能會有多條日誌記錄,數據複雜,人工分析費事費力,mysql提供了一個日誌分析工具mysqldumpslow
可以根據你設定的參數查詢出滿足條件的日誌記錄,方便查看
可用的參數有
-s, 是表示按照何種方式排序
排序方式有
c: 訪問計數
l: 鎖定時間
r: 返回記錄
t: 查詢時間
al:平均鎖定時間
ar:平均返回記錄數
at:平均查詢時間
-t, 是top n的意思,即爲返回前面多少條的數據;
-g, 後邊可以寫一個正則匹配模式,大小寫不敏感的;
示例
得到返回記錄集最多的10個SQL。
mysqldumpslow -s r -t 10 /database/mysql/mysql06_slow.log
得到訪問次數最多的10個SQL
mysqldumpslow -s c -t 10 /database/mysql/mysql06_slow.log
得到按照時間排序的前10條裏面含有左連接的查詢語句。
mysqldumpslow -s t -t 10 -g “left join” /database/mysql/mysql06_slow.log
另外建議在使用這些命令時結合 | 和more 使用 ,否則有可能出現刷屏的情況。
mysqldumpslow -s r -t 20 /mysqldata/mysql/mysql06-slow.log | more
二、explain+SQL語句
執行這個語句可以讓開發人員看到select語句執行的詳細信息,開發人員可以將上一步慢查詢中捕獲的慢查詢SQL語句進行分析,判斷查詢效率低的可能原因
可以幫助選擇更好的索引和寫出優化的查詢語句
使用explain我們可以得到以下信息
表的讀取順序
數據讀取操作的類型
哪些索引可以使用
哪些索引實際被使用
表之間的引用
每張表有多少行被優化器掃描
示例
我們來逐個分析各字段
id:select查詢的序列號,代表的是select執行的順序,主要有以下三種情況
id相同時,則按照從上到下依次執行
id不同時,id值越大優先級越高,越先被執行
id有相同有不同,則相同的id爲一個組,不同組的id值按照規則二的優先級執行,同組id則按照規則一依次執行
select_type:select查詢的類型,有以下常用幾種
simple:表示該查詢沒有子查詢和UNION連接查詢
primary:有子查詢時的最外層查詢
subquery:有子查詢時的內層嵌套查詢
derived:在from中包含的select就稱爲derived(衍生) ,mysql會遞歸這些子查詢,把結果放在臨時表中
union:union的第二個或者最後一個
union result:union的結果
table:執行當前SQL語句用到的表
partitions:代表當前表所使用的分區
type:顯示使用了何種查詢,按照常見的幾種查詢最好到最壞排序爲system>const>eq_ref>ref>range>index>all
system,const:mysql能夠對這部分進行查詢優化使能夠將其轉換成一個常量(system只返回一行,const有多行),如某一行的主鍵放入WHERE子句裏的方式來選取此行的主鍵,MySQL就能將這個查詢轉換成一個常量。然後就可以高效的將表從聯接執行中移除
eq_ref:使用該索引查找,mysql知道最多返回一條數據,可以在使用主鍵或者唯一性索引查找時用到
ref:非唯一性索引的索引查找
range:範圍掃描,例如帶有between或者>,<,in等
index:掃描所有索引行
all:掃描所有數據行
possible_keys/kesy:代表可能用到的索引和實際用到的索引
key_len:在索引中使用的字節數
ref:顯示了之前的表在key列記錄的索引中查找值所用的列或常量
rows:mysq估計的要找到滿足條件的行所需要掃描的行數
filtered:給出了一個百分比的值,這個百分比的值和rows列的值一起使用,可以估計出那些將要和QEP中的前一個表進行連接的行的數目。前一個表就是指id列的值比當前表的id小的表
extra:給出一些額外但重要的信息,常見重要的信息有
using index:使用了覆蓋索引,以避免掃描表(良好情況)
using filesort:索引創建數據排序方式不滿足要求,mysql在外部重新排序(嚴重,需要優化)
using temporary:mysql創建使用了臨時表來保存信息(嚴重,需要優化)
using where:使用了where
using join buffer:在獲取連接條件時沒有使用索引,並且需要連接緩衝區來存儲中間結果(需要增加索引進行優化)
這個裏面我們需要重點關注的屬性是type,keys,row,extra來判斷是否爲一個良好的查詢
更多栗子及分析見下一篇文章索引詳解
三、show profile
show profile是mysql用來分析SQL查詢語句的資源使用情況的工具
使用方法:
1、 因爲mysql這個功能默認是關閉的,所以先查看一下並開啓
(與開啓慢查詢日誌類似,可能需要重啓mysql客戶端才能生效)
2、 我們執行一些測試的SQL語句之後運行show profiles語句
3、 我們可以選擇指定項指定SQL語句來分析
一般我們查看的屬性就是cpu和block io兩個模塊
注意:
若出現以下任意一個情況,都表示這是一個糟糕的SQL語句,需要優化
1、 convering heap to MyIsam查詢結果過大,內存不夠,需要記錄到磁盤上
2、 creating tmp table創建臨時表儲存數據,用完之後刪除
3、 copying to tmp table on disk將臨時表中的數據儲存到磁盤上