91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

SQL優(yōu)化指南:慢查詢?nèi)罩鹃_啟撒網(wǎng)模式

電子工程師 ? 來(lái)源:未知 ? 作者:李倩 ? 2018-11-08 14:25 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

慢查詢?nèi)罩?開啟撒網(wǎng)模式

開啟了MySQL慢查詢?nèi)罩局?,MySQL會(huì)自動(dòng)將執(zhí)行時(shí)間超過(guò)指定秒數(shù)的SQL統(tǒng)統(tǒng)記錄下來(lái),這對(duì)于搜羅線上慢SQL有很大的幫助。

SHOW VARIABLES LIKE 'slow%'

以我剛安裝的mysql5.7為例 查詢結(jié)果是這樣子的:

slow_launch_time:表示如果建立線程花費(fèi)了比這個(gè)值更長(zhǎng)的時(shí)間,slow_launch_threads 計(jì)數(shù)器將增加

slow_query_log:是否開啟慢查詢?nèi)罩?ON開啟,OFF關(guān)閉 默認(rèn)沒有開啟

slow_query_log_file:日志保存路徑

SHOW VARIABLES LIKE 'long%'

long_query_time:達(dá)到多少秒的sql就記錄日志

客戶端可以用set設(shè)置變量的方式讓慢查詢開啟,但是個(gè)人不推薦,因?yàn)檎鎸?shí)操作起來(lái)會(huì)有一些問(wèn)題,比如說(shuō),重啟MySQL后就失效了,或者是開啟了慢查詢,我又去改變量值,它就不生效了。

編輯MySQL的配置文件:

vim /etc/my.cnf

加入如下三行:

slow_query_log=ON

slow_query_log_file=/var/lib/mysql/localhost-centos-slow.log

long_query_time=3

我這里設(shè)置的是3秒

重啟MySQL

systemctl restart mysqld;

服務(wù)器開一個(gè)監(jiān)控:

tail -f /var/lib/mysql/localhost-centos-slow.log

客戶端走一條SQL:

SELECT SLEEP(3)

此時(shí)發(fā)現(xiàn)sql已經(jīng)被記錄到日志里了。(有時(shí)候不一定,我看到很多博客講的是超過(guò)指定秒數(shù),但我實(shí)驗(yàn)得出的結(jié)果是達(dá)到指定秒數(shù))

EXPLAIN 點(diǎn)對(duì)點(diǎn)分析

explain是一個(gè)神奇的命令,可以查看sql的具體的執(zhí)行計(jì)劃。

以一條聯(lián)查sql為例:

SELECTa.id,a.cn_name,a.role_id,r.name

FROM tb_usr_adminsa

INNER JOIN tb_base_rolesrONr.id=a.role_id

WHEREa.cn_name="接單人員"

查詢結(jié)果是:

加上explain命令來(lái)執(zhí)行:

EXPLAIN

SELECTa.id,a.cn_name,a.role_id,r.name

FROM tb_usr_adminsa

INNER JOIN tb_base_rolesrONr.id=a.role_id

WHEREa.cn_name="接單人員"

查詢結(jié)果是:

這就是這條SQL的執(zhí)行計(jì)劃,下面來(lái)說(shuō)明一下這個(gè)執(zhí)行計(jì)劃怎么看

id:代表優(yōu)先級(jí) id值越大,越先執(zhí)行,id值相同,從上往下執(zhí)行。(比如示例的這條sql的執(zhí)行計(jì)劃,就是先執(zhí)行第一行,再執(zhí)行第二行)

select_type:表示select類型 取值如下

simple 簡(jiǎn)單表 即不使用表連接或者子查詢

primary 包含union或者子查詢的主查詢 即外層的查詢

union UNION中的第二個(gè)或者后面的查詢語(yǔ)句

subquery 一般子查詢中的子查詢被標(biāo)記為subquery,也就是位于select列表中的查詢

derived 派生表 該臨時(shí)表是從子查詢派生出來(lái)的

等等

type:表示MySQL在表中查找數(shù)據(jù)的方式,或者叫訪問(wèn)類型,以下對(duì)于type取值的說(shuō)明 從上往下性能由最差到最好

all:全表掃描,MySQL遍歷全表來(lái)找到匹配的行

index:索引全掃描,MySQL遍歷掙個(gè)索引來(lái)查詢匹配的行

range:索引范圍掃描,常見于<、<=、>、>=、between等操作符

ref:使用非唯一索引或唯一索引的前綴掃描,返回匹配的單行數(shù)據(jù)

eq_ref:類似ref,區(qū)別就在于使用的索引是唯一索引,簡(jiǎn)單來(lái)說(shuō),就是多表連接中使用primary key或者unique index作為關(guān)聯(lián)條件。

const/system:?jiǎn)伪碇凶疃嘤幸粋€(gè)匹配行,查詢起來(lái)非常迅速,常見于根據(jù)primary key或者唯一索引unique index進(jìn)行的單表查詢

null:mysql不用訪問(wèn)表或者索引,直接就能夠得到查詢的結(jié)果,例如select 1+2 as result。

possible_keys:表示查詢時(shí)可能使用的索引

key:表示實(shí)際使用的索引

key_len:使用到索引字段的長(zhǎng)度

rows:掃描數(shù)量

Extra:執(zhí)行情況的說(shuō)明和描述,包含不適合在其他列中顯示但是對(duì)執(zhí)行計(jì)劃非常重要的額外信息,常用取值如下:

Using index:直接訪問(wèn)索引就取到了數(shù)據(jù),高性能的表現(xiàn)。

Using where:直接在主鍵索引上過(guò)濾數(shù)據(jù),必帶where子句,而且用不上索引

Using index condition:先條件過(guò)濾索引,再查數(shù)據(jù),

Using filesort:使用了外部文件排序 只要見到這個(gè) 就要優(yōu)化掉

Using temporary:創(chuàng)建了臨時(shí)表來(lái)處理查詢 只要見到這個(gè) 也要盡量?jī)?yōu)化掉

優(yōu)化爭(zhēng)議無(wú)數(shù)的count()

統(tǒng)計(jì)列與統(tǒng)計(jì)行?

COUNT()是一個(gè)特殊的函數(shù),有兩種不同的作用,它可以統(tǒng)計(jì)某個(gè)列值的數(shù)量,也可以統(tǒng)計(jì)行數(shù)。

在統(tǒng)計(jì)列值的時(shí)候要求列值是非空的,也就是不統(tǒng)計(jì)null。

當(dāng)我們統(tǒng)計(jì)行的時(shí)候,常見的是COUNT(*),這種情況下,通配符*并不會(huì)像我們猜想的那樣擴(kuò)展成所有的列,實(shí)際上,它會(huì)忽略所有的列而直接統(tǒng)計(jì)所有的行數(shù)

解密MyiSAM的‘快’

這是一個(gè)容易產(chǎn)生誤解的事情:MyiSAM的count()函數(shù)總是非??臁?/p>

不過(guò)它是有前提條件的,條件是沒有任何where條件的count(*)才非???,因?yàn)榇藭r(shí)無(wú)須實(shí)際的去計(jì)算表的行數(shù),mysql可以利用存儲(chǔ)引擎的特性直接獲得這個(gè)值,如果mysql知道某列不可能有null值,那么mysql內(nèi)部會(huì)將count(列)表達(dá)式優(yōu)化為count(*)。

當(dāng)統(tǒng)計(jì)帶有where條件的查詢,那么mysql的count()和其他存儲(chǔ)引擎就沒有什么不同了。

COUNT(1)、COUNT(*)、COUNT(列)

(先提前申明,本人是在innodb庫(kù)里做的實(shí)驗(yàn)。)

1.count(1)和count(*)直接就是統(tǒng)計(jì)主鍵,他們兩個(gè)的效率是一樣的。如果刪除主鍵,他們都走全表掃描。

2.如果count(列)中的字段是索引的話,count(列)和count(*)一樣快,否則count(列)走全表掃描。

優(yōu)化order by 語(yǔ)句

MySQL的排序方式

優(yōu)化order by語(yǔ)句就不得不了解mysql的排序方式。

1.第一種通過(guò)有序索引返回?cái)?shù)據(jù),這種方式的extra顯示為Using Index,不需要額外的排序,操作效率較高。

2.第二種是對(duì)返回的數(shù)據(jù)進(jìn)行排序,也就是通??吹降腢sing filesort,filesort是通過(guò)相應(yīng)的排序算法,將數(shù)據(jù)放在sort_buffer_size系統(tǒng)變量設(shè)置的內(nèi)存排序區(qū)中進(jìn)行排序,如果內(nèi)存裝載不下,它就會(huì)將磁盤上的數(shù)據(jù)進(jìn)行分塊,再對(duì)各個(gè)數(shù)據(jù)塊進(jìn)行排序,然后將各個(gè)塊合并成有序的結(jié)果集。

filesort的優(yōu)化

了解了MySQL排序的方式,優(yōu)化目標(biāo)就清晰了:盡量減少額外的排序,通過(guò)索引直接返回有序數(shù)據(jù)。where條件和order by使用相同的索引。

1.創(chuàng)建合適的索引減少filesort的出現(xiàn)。

2.查詢時(shí)盡量只使用必要的字段,select 具體字段的名稱,而不是select * 選擇所有字段,這樣可以減少排序區(qū)的使用,提高SQL性能。

優(yōu)化group by 語(yǔ)句

為什么order by后面不能跟group by ?

事實(shí)上,MySQL在所有的group by 后面隱式的加了order by ,也就是說(shuō)group by語(yǔ)句的結(jié)果會(huì)默認(rèn)進(jìn)行排序。

如果你要在order by后面加group by ,那結(jié)果執(zhí)行的SQL是不是這樣:select * from tb order by … group by … order by … ? 這不是搞笑嗎?

禁止排序

既然知道問(wèn)題了,那么就容易優(yōu)化了,如果查詢包括group by但又不關(guān)心結(jié)果集的順序,而這種默認(rèn)排序又導(dǎo)致了需要文件排序,則可以指定order by null 禁止排序。

例如:

select * from tb group by name order by null;

優(yōu)化limit 分頁(yè)

一個(gè)非常常見又非常頭痛的場(chǎng)景:‘limit 1000,20’。

這時(shí)MySQL需要查詢1020條記錄然后只返回最后20條,前面的1000條都將被拋棄,這樣的代價(jià)非常高。如果所有頁(yè)面的訪問(wèn)頻率都相同,那么這樣的查詢平均需要訪問(wèn)半個(gè)表的數(shù)據(jù)。

第一種思路 在索引上分頁(yè)

在索引上完成分頁(yè)操作,最后根據(jù)主鍵關(guān)聯(lián)回原表查詢所需要的其他列的內(nèi)容。

例如:

SELECT * FROM tb_user LIMIT 1000,10

可以優(yōu)化成這樣:

SELECT *FROM tb_useru

INNER JOIN(SELECT id FROM tb_user LIMIT1000,10)ASbONb.id=u.id

第二種思路 將limit轉(zhuǎn)換成位置查詢

這種思路需要加一個(gè)參數(shù)來(lái)輔助,標(biāo)記分頁(yè)的開始位置:

SELECT * FROM tb_user WHERE id > 1000 LIMIT 10

優(yōu)化子查詢

子查詢,也就是查詢中有查詢,常見的是where后面跟一個(gè)括號(hào)里面又是一條查詢sql

盡可能的使用join關(guān)聯(lián)查詢來(lái)代替子查詢。

當(dāng)然 這不是絕對(duì)的,比如某些非常簡(jiǎn)單的子查詢就比關(guān)聯(lián)查詢效率高,事實(shí)效果如何還要看執(zhí)行計(jì)劃。

只能說(shuō)大部分的子查詢都可以優(yōu)化成Join關(guān)聯(lián)查詢。

改變執(zhí)行計(jì)劃

提高索引優(yōu)先級(jí)

use index 可以讓MySQL去參考指定的索引,但是無(wú)法強(qiáng)制MySQL去使用這個(gè)索引,當(dāng)MySQL覺得這個(gè)索引效率太差,它寧愿去走全表掃描。。。

SELECT * FROM tb_user USE INDEX (user_name)

注意:必須是索引,不能是普通字段,(親測(cè)主鍵也不行)。

忽略索引

ignore index 可以讓MySQL忽略一個(gè)索引

SELECT * FROM tb_user IGNORE INDEX (user_name) WHERE user_name="張學(xué)友"

強(qiáng)制使用索引

使用了force index 之后 盡管效率非常低,MySQL也會(huì)照你的話去執(zhí)行

SELECT * FROM tb_user FORCE INDEX (user_name) WHERE user_name="張學(xué)友"

個(gè)人分享

查看執(zhí)行計(jì)劃時(shí)建議依次觀察以下幾個(gè)要點(diǎn):

1.SQL內(nèi)部的執(zhí)行順序。

2.查看select的查詢類型。

3.實(shí)際有沒有使用索引。

4.Extra描述信息

PS:一定要養(yǎng)成查看執(zhí)行計(jì)劃的習(xí)慣,這個(gè)習(xí)慣非常重要。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 數(shù)據(jù)
    +關(guān)注

    關(guān)注

    8

    文章

    7339

    瀏覽量

    94831
  • MySQL
    +關(guān)注

    關(guān)注

    1

    文章

    909

    瀏覽量

    29592

原文標(biāo)題:SQL 優(yōu)化指南

文章出處:【微信號(hào):DBDevs,微信公眾號(hào):數(shù)據(jù)分析與開發(fā)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    MariaDB查詢日志的配置

    傳統(tǒng)IDC部署網(wǎng)站(MariaDB查詢日志,Tomcat_JDK部署)
    發(fā)表于 05-10 14:54

    SQL查詢的原因分析總結(jié)

    sql 查詢的48個(gè)原因分析 1、沒有索引或者沒有用到索引(這是查詢最常見的問(wèn)題,是程序設(shè)計(jì)的缺陷)。 2、I/O吞吐量小,形成了瓶頸效
    發(fā)表于 03-08 11:58 ?0次下載

    對(duì)于大規(guī)模系統(tǒng)日志日志模式提煉算法的優(yōu)化

    提煉算法將大量的過(guò)往系統(tǒng)日志記錄縮減為少量的日志模式集合。然而隨著日志規(guī)模的增長(zhǎng)以及messages日志文件的特殊性,原有的
    發(fā)表于 11-21 14:54 ?7次下載
    對(duì)于大規(guī)模系統(tǒng)<b class='flag-5'>日志</b>的<b class='flag-5'>日志</b><b class='flag-5'>模式</b>提煉算法的<b class='flag-5'>優(yōu)化</b>

    SQL優(yōu)化器原理 - 查詢優(yōu)化器綜述

    摘要:?本文主要是對(duì)數(shù)據(jù)庫(kù)查詢優(yōu)化器的一個(gè)綜述,包括查詢優(yōu)化器分類、查詢優(yōu)化器執(zhí)行過(guò)程和CBO框
    發(fā)表于 07-24 17:38 ?553次閱讀
    <b class='flag-5'>SQL</b><b class='flag-5'>優(yōu)化</b>器原理 - <b class='flag-5'>查詢</b><b class='flag-5'>優(yōu)化</b>器綜述

    數(shù)據(jù)庫(kù):為什么SQL使用了索引,卻還是查詢?

    經(jīng)常有同學(xué)問(wèn)我,我的一個(gè)SQL語(yǔ)句使用了索引,為什么還是會(huì)進(jìn)入到查詢之中呢?今天我們就從這個(gè)問(wèn)題開始來(lái)聊一聊索引和查詢
    發(fā)表于 08-10 16:09 ?1443次閱讀
    數(shù)據(jù)庫(kù):為什么<b class='flag-5'>SQL</b>使用了索引,卻還是<b class='flag-5'>慢</b><b class='flag-5'>查詢</b>?

    SQL查詢優(yōu)化是怎么回事

    查詢 (Subquery)的優(yōu)化一直以來(lái)都是 SQL 查詢優(yōu)化中的難點(diǎn)之一。 關(guān)聯(lián)子查詢的基本
    的頭像 發(fā)表于 02-01 13:55 ?2762次閱讀
    <b class='flag-5'>SQL</b>子<b class='flag-5'>查詢</b><b class='flag-5'>優(yōu)化</b>是怎么回事

    SQL優(yōu)化技巧分享

    一、查詢SQL盡量不要使用select *,而是具體字段
    的頭像 發(fā)表于 09-06 10:24 ?2115次閱讀

    SQL優(yōu)化思路與經(jīng)典案例分析

    如何定位SQL呢、我們可以通過(guò)慢查詢日志來(lái)查看SQL。默認(rèn)的情況下呢,MySQL數(shù)據(jù)庫(kù)是不
    的頭像 發(fā)表于 10-27 13:16 ?1654次閱讀

    sql優(yōu)化常用的幾種方法

    前言 1.SQL優(yōu)化思路。 1.1 查詢日志記錄
    的頭像 發(fā)表于 11-14 15:04 ?6407次閱讀

    一文終結(jié)SQL查詢優(yōu)化

    查詢(Subquery)的優(yōu)化一直以來(lái)都是 SQL 查詢優(yōu)化中的難點(diǎn)之一。關(guān)聯(lián)子查詢的基本執(zhí)行
    的頭像 發(fā)表于 04-28 14:19 ?1474次閱讀
    一文終結(jié)<b class='flag-5'>SQL</b>子<b class='flag-5'>查詢</b><b class='flag-5'>優(yōu)化</b>

    一條本該記錄到日志SQL是如何被漏掉的?

    生產(chǎn)環(huán)境中 select count(*) from table 語(yǔ)句執(zhí)行很慢,已經(jīng)遠(yuǎn)超 long_query_time 參數(shù)定義的查詢時(shí)間值,但是卻沒有記錄到日志中。
    的頭像 發(fā)表于 06-05 10:40 ?1056次閱讀
    一條本該記錄到<b class='flag-5'>慢</b><b class='flag-5'>日志</b>的<b class='flag-5'>SQL</b>是如何被漏掉的?

    深入分析SQL的排查、解決思路

    出于一些歷史原因有的SQL查詢可能非常復(fù)雜,需要同時(shí)關(guān)聯(lián)非常多的表,使用一些復(fù)雜的函數(shù)、子查詢,這樣的SQL在項(xiàng)目初期由于數(shù)據(jù)量比較少,不會(huì)對(duì)數(shù)據(jù)庫(kù)造成較大的壓力,但是隨著時(shí)間的積累以
    的頭像 發(fā)表于 10-31 10:29 ?2872次閱讀
    深入分析<b class='flag-5'>慢</b><b class='flag-5'>SQL</b>的排查、解決思路

    oracle執(zhí)行sql查詢語(yǔ)句的步驟是什么

    Oracle數(shù)據(jù)庫(kù)是一種常用的關(guān)系型數(shù)據(jù)庫(kù)管理系統(tǒng),具有強(qiáng)大的SQL查詢功能。Oracle執(zhí)行SQL查詢語(yǔ)句的步驟包括編寫SQL語(yǔ)句、解析
    的頭像 發(fā)表于 12-06 10:49 ?1859次閱讀

    MySQL查詢終極優(yōu)化指南

    作為一名在生產(chǎn)環(huán)境摸爬滾打多年的運(yùn)維工程師,我見過(guò)太多因?yàn)?b class='flag-5'>慢查詢導(dǎo)致的線上故障。今天分享一套經(jīng)過(guò)實(shí)戰(zhàn)檢驗(yàn)的MySQL查詢分析與索引優(yōu)化方法
    的頭像 發(fā)表于 08-13 15:55 ?863次閱讀

    數(shù)據(jù)庫(kù)查詢分析與SQL優(yōu)化實(shí)戰(zhàn)技巧

    今天,我將分享我在處理數(shù)千次數(shù)據(jù)庫(kù)性能問(wèn)題中積累的實(shí)戰(zhàn)經(jīng)驗(yàn),幫助你系統(tǒng)掌握查詢分析與SQL優(yōu)化的核心技巧。無(wú)論你是剛?cè)腴T的運(yùn)維新手,還是有一定經(jīng)驗(yàn)的工程師,這篇文章都將為你提供實(shí)用的
    的頭像 發(fā)表于 09-08 09:34 ?1027次閱讀