一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

SQL優(yōu)化指南:慢查詢?nèi)罩鹃_啟撒網(wǎng)模式

電子工程師 ? 來源:未知 ? 作者:李倩 ? 2018-11-08 14:25 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

慢查詢?nèi)罩?開啟撒網(wǎng)模式

開啟了MySQL慢查詢?nèi)罩局螅琈ySQL會(huì)自動(dòng)將執(zhí)行時(shí)間超過指定秒數(shù)的SQL統(tǒng)統(tǒng)記錄下來,這對于搜羅線上慢SQL有很大的幫助。

SHOW VARIABLES LIKE 'slow%'

以我剛安裝的mysql5.7為例 查詢結(jié)果是這樣子的:

slow_launch_time:表示如果建立線程花費(fèi)了比這個(gè)值更長的時(shí)間,slow_launch_threads 計(jì)數(shù)器將增加

slow_query_log:是否開啟慢查詢?nèi)罩?ON開啟,OFF關(guān)閉 默認(rèn)沒有開啟

slow_query_log_file:日志保存路徑

SHOW VARIABLES LIKE 'long%'

long_query_time:達(dá)到多少秒的sql就記錄日志

客戶端可以用set設(shè)置變量的方式讓慢查詢開啟,但是個(gè)人不推薦,因?yàn)檎鎸?shí)操作起來會(huì)有一些問題,比如說,重啟MySQL后就失效了,或者是開啟了慢查詢,我又去改變量值,它就不生效了。

編輯MySQL的配置文件:

vim /etc/my.cnf

加入如下三行:

slow_query_log=ON

slow_query_log_file=/var/lib/mysql/localhost-centos-slow.log

long_query_time=3

我這里設(shè)置的是3秒

重啟MySQL

systemctl restart mysqld;

服務(wù)器開一個(gè)監(jiān)控:

tail -f /var/lib/mysql/localhost-centos-slow.log

客戶端走一條SQL:

SELECT SLEEP(3)

此時(shí)發(fā)現(xiàn)sql已經(jīng)被記錄到日志里了。(有時(shí)候不一定,我看到很多博客講的是超過指定秒數(shù),但我實(shí)驗(yàn)得出的結(jié)果是達(dá)到指定秒數(shù))

EXPLAIN 點(diǎn)對點(diǎn)分析

explain是一個(gè)神奇的命令,可以查看sql的具體的執(zhí)行計(jì)劃。

以一條聯(lián)查sql為例:

SELECTa.id,a.cn_name,a.role_id,r.name

FROM tb_usr_adminsa

INNER JOIN tb_base_rolesrONr.id=a.role_id

WHEREa.cn_name="接單人員"

查詢結(jié)果是:

加上explain命令來執(zhí)行:

EXPLAIN

SELECTa.id,a.cn_name,a.role_id,r.name

FROM tb_usr_adminsa

INNER JOIN tb_base_rolesrONr.id=a.role_id

WHEREa.cn_name="接單人員"

查詢結(jié)果是:

這就是這條SQL的執(zhí)行計(jì)劃,下面來說明一下這個(gè)執(zhí)行計(jì)劃怎么看

id:代表優(yōu)先級 id值越大,越先執(zhí)行,id值相同,從上往下執(zhí)行。(比如示例的這條sql的執(zhí)行計(jì)劃,就是先執(zhí)行第一行,再執(zhí)行第二行)

select_type:表示select類型 取值如下

simple 簡單表 即不使用表連接或者子查詢

primary 包含union或者子查詢的主查詢 即外層的查詢

union UNION中的第二個(gè)或者后面的查詢語句

subquery 一般子查詢中的子查詢被標(biāo)記為subquery,也就是位于select列表中的查詢

derived 派生表 該臨時(shí)表是從子查詢派生出來的

等等

type:表示MySQL在表中查找數(shù)據(jù)的方式,或者叫訪問類型,以下對于type取值的說明 從上往下性能由最差到最好

all:全表掃描,MySQL遍歷全表來找到匹配的行

index:索引全掃描,MySQL遍歷掙個(gè)索引來查詢匹配的行

range:索引范圍掃描,常見于<、<=、>、>=、between等操作符

ref:使用非唯一索引或唯一索引的前綴掃描,返回匹配的單行數(shù)據(jù)

eq_ref:類似ref,區(qū)別就在于使用的索引是唯一索引,簡單來說,就是多表連接中使用primary key或者unique index作為關(guān)聯(lián)條件。

const/system:單表中最多有一個(gè)匹配行,查詢起來非常迅速,常見于根據(jù)primary key或者唯一索引unique index進(jìn)行的單表查詢

null:mysql不用訪問表或者索引,直接就能夠得到查詢的結(jié)果,例如select 1+2 as result。

possible_keys:表示查詢時(shí)可能使用的索引

key:表示實(shí)際使用的索引

key_len:使用到索引字段的長度

rows:掃描數(shù)量

Extra:執(zhí)行情況的說明和描述,包含不適合在其他列中顯示但是對執(zhí)行計(jì)劃非常重要的額外信息,常用取值如下:

Using index:直接訪問索引就取到了數(shù)據(jù),高性能的表現(xiàn)。

Using where:直接在主鍵索引上過濾數(shù)據(jù),必帶where子句,而且用不上索引

Using index condition:先條件過濾索引,再查數(shù)據(jù),

Using filesort:使用了外部文件排序 只要見到這個(gè) 就要優(yōu)化掉

Using temporary:創(chuàng)建了臨時(shí)表來處理查詢 只要見到這個(gè) 也要盡量優(yōu)化掉

優(yōu)化爭議無數(shù)的count()

統(tǒng)計(jì)列與統(tǒng)計(jì)行?

COUNT()是一個(gè)特殊的函數(shù),有兩種不同的作用,它可以統(tǒng)計(jì)某個(gè)列值的數(shù)量,也可以統(tǒng)計(jì)行數(shù)。

在統(tǒng)計(jì)列值的時(shí)候要求列值是非空的,也就是不統(tǒng)計(jì)null。

當(dāng)我們統(tǒng)計(jì)行的時(shí)候,常見的是COUNT(*),這種情況下,通配符*并不會(huì)像我們猜想的那樣擴(kuò)展成所有的列,實(shí)際上,它會(huì)忽略所有的列而直接統(tǒng)計(jì)所有的行數(shù)

解密MyiSAM的‘快’

這是一個(gè)容易產(chǎn)生誤解的事情:MyiSAM的count()函數(shù)總是非常快。

不過它是有前提條件的,條件是沒有任何where條件的count(*)才非常快,因?yàn)榇藭r(shí)無須實(shí)際的去計(jì)算表的行數(shù),mysql可以利用存儲(chǔ)引擎的特性直接獲得這個(gè)值,如果mysql知道某列不可能有null值,那么mysql內(nèi)部會(huì)將count(列)表達(dá)式優(yōu)化為count(*)。

當(dāng)統(tǒng)計(jì)帶有where條件的查詢,那么mysql的count()和其他存儲(chǔ)引擎就沒有什么不同了。

COUNT(1)、COUNT(*)、COUNT(列)

(先提前申明,本人是在innodb庫里做的實(shí)驗(yàn)。)

1.count(1)和count(*)直接就是統(tǒng)計(jì)主鍵,他們兩個(gè)的效率是一樣的。如果刪除主鍵,他們都走全表掃描。

2.如果count(列)中的字段是索引的話,count(列)和count(*)一樣快,否則count(列)走全表掃描。

優(yōu)化order by 語句

MySQL的排序方式

優(yōu)化order by語句就不得不了解mysql的排序方式。

1.第一種通過有序索引返回?cái)?shù)據(jù),這種方式的extra顯示為Using Index,不需要額外的排序,操作效率較高。

2.第二種是對返回的數(shù)據(jù)進(jìn)行排序,也就是通??吹降腢sing filesort,filesort是通過相應(yīng)的排序算法,將數(shù)據(jù)放在sort_buffer_size系統(tǒng)變量設(shè)置的內(nèi)存排序區(qū)中進(jìn)行排序,如果內(nèi)存裝載不下,它就會(huì)將磁盤上的數(shù)據(jù)進(jìn)行分塊,再對各個(gè)數(shù)據(jù)塊進(jìn)行排序,然后將各個(gè)塊合并成有序的結(jié)果集。

filesort的優(yōu)化

了解了MySQL排序的方式,優(yōu)化目標(biāo)就清晰了:盡量減少額外的排序,通過索引直接返回有序數(shù)據(jù)。where條件和order by使用相同的索引。

1.創(chuàng)建合適的索引減少filesort的出現(xiàn)。

2.查詢時(shí)盡量只使用必要的字段,select 具體字段的名稱,而不是select * 選擇所有字段,這樣可以減少排序區(qū)的使用,提高SQL性能。

優(yōu)化group by 語句

為什么order by后面不能跟group by ?

事實(shí)上,MySQL在所有的group by 后面隱式的加了order by ,也就是說group by語句的結(jié)果會(huì)默認(rèn)進(jìn)行排序。

如果你要在order by后面加group by ,那結(jié)果執(zhí)行的SQL是不是這樣:select * from tb order by … group by … order by … ? 這不是搞笑嗎?

禁止排序

既然知道問題了,那么就容易優(yōu)化了,如果查詢包括group by但又不關(guān)心結(jié)果集的順序,而這種默認(rèn)排序又導(dǎo)致了需要文件排序,則可以指定order by null 禁止排序。

例如:

select * from tb group by name order by null;

優(yōu)化limit 分頁

一個(gè)非常常見又非常頭痛的場景:‘limit 1000,20’。

這時(shí)MySQL需要查詢1020條記錄然后只返回最后20條,前面的1000條都將被拋棄,這樣的代價(jià)非常高。如果所有頁面的訪問頻率都相同,那么這樣的查詢平均需要訪問半個(gè)表的數(shù)據(jù)。

第一種思路 在索引上分頁

在索引上完成分頁操作,最后根據(jù)主鍵關(guān)聯(lián)回原表查詢所需要的其他列的內(nèi)容。

例如:

SELECT * FROM tb_user LIMIT 1000,10

可以優(yōu)化成這樣:

SELECT *FROM tb_useru

INNER JOIN(SELECT id FROM tb_user LIMIT1000,10)ASbONb.id=u.id

第二種思路 將limit轉(zhuǎn)換成位置查詢

這種思路需要加一個(gè)參數(shù)來輔助,標(biāo)記分頁的開始位置:

SELECT * FROM tb_user WHERE id > 1000 LIMIT 10

優(yōu)化子查詢

子查詢,也就是查詢中有查詢,常見的是where后面跟一個(gè)括號(hào)里面又是一條查詢sql

盡可能的使用join關(guān)聯(lián)查詢來代替子查詢。

當(dāng)然 這不是絕對的,比如某些非常簡單的子查詢就比關(guān)聯(lián)查詢效率高,事實(shí)效果如何還要看執(zhí)行計(jì)劃。

只能說大部分的子查詢都可以優(yōu)化成Join關(guān)聯(lián)查詢。

改變執(zhí)行計(jì)劃

提高索引優(yōu)先級

use index 可以讓MySQL去參考指定的索引,但是無法強(qiáng)制MySQL去使用這個(gè)索引,當(dāng)MySQL覺得這個(gè)索引效率太差,它寧愿去走全表掃描。。。

SELECT * FROM tb_user USE INDEX (user_name)

注意:必須是索引,不能是普通字段,(親測主鍵也不行)。

忽略索引

ignore index 可以讓MySQL忽略一個(gè)索引

SELECT * FROM tb_user IGNORE INDEX (user_name) WHERE user_name="張學(xué)友"

強(qiáng)制使用索引

使用了force index 之后 盡管效率非常低,MySQL也會(huì)照你的話去執(zhí)行

SELECT * FROM tb_user FORCE INDEX (user_name) WHERE user_name="張學(xué)友"

個(gè)人分享

查看執(zhí)行計(jì)劃時(shí)建議依次觀察以下幾個(gè)要點(diǎn):

1.SQL內(nèi)部的執(zhí)行順序。

2.查看select的查詢類型。

3.實(shí)際有沒有使用索引。

4.Extra描述信息

PS:一定要養(yǎng)成查看執(zhí)行計(jì)劃的習(xí)慣,這個(gè)習(xí)慣非常重要。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 數(shù)據(jù)
    +關(guān)注

    關(guān)注

    8

    文章

    7254

    瀏覽量

    91791
  • MySQL
    +關(guān)注

    關(guān)注

    1

    文章

    856

    瀏覽量

    27887

原文標(biāo)題:SQL 優(yōu)化指南

文章出處:【微信號(hào):DBDevs,微信公眾號(hào):數(shù)據(jù)分析與開發(fā)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    MariaDB查詢日志的配置

    傳統(tǒng)IDC部署網(wǎng)站(MariaDB查詢日志,Tomcat_JDK部署)
    發(fā)表于 05-10 14:54

    SQL查詢的原因分析總結(jié)

    sql 查詢的48個(gè)原因分析 1、沒有索引或者沒有用到索引(這是查詢最常見的問題,是程序設(shè)計(jì)的缺陷)。 2、I/O吞吐量小,形成了瓶頸效
    發(fā)表于 03-08 11:58 ?0次下載

    對于大規(guī)模系統(tǒng)日志日志模式提煉算法的優(yōu)化

    提煉算法將大量的過往系統(tǒng)日志記錄縮減為少量的日志模式集合。然而隨著日志規(guī)模的增長以及messages日志文件的特殊性,原有的
    發(fā)表于 11-21 14:54 ?7次下載
    對于大規(guī)模系統(tǒng)<b class='flag-5'>日志</b>的<b class='flag-5'>日志</b><b class='flag-5'>模式</b>提煉算法的<b class='flag-5'>優(yōu)化</b>

    SQL優(yōu)化器原理 - 查詢優(yōu)化器綜述

    摘要:?本文主要是對數(shù)據(jù)庫查詢優(yōu)化器的一個(gè)綜述,包括查詢優(yōu)化器分類、查詢優(yōu)化器執(zhí)行過程和CBO框
    發(fā)表于 07-24 17:38 ?414次閱讀
    <b class='flag-5'>SQL</b><b class='flag-5'>優(yōu)化</b>器原理 - <b class='flag-5'>查詢</b><b class='flag-5'>優(yōu)化</b>器綜述

    數(shù)據(jù)庫:為什么SQL使用了索引,卻還是查詢?

    經(jīng)常有同學(xué)問我,我的一個(gè)SQL語句使用了索引,為什么還是會(huì)進(jìn)入到查詢之中呢?今天我們就從這個(gè)問題開始來聊一聊索引和查詢。
    發(fā)表于 08-10 16:09 ?1190次閱讀
    數(shù)據(jù)庫:為什么<b class='flag-5'>SQL</b>使用了索引,卻還是<b class='flag-5'>慢</b><b class='flag-5'>查詢</b>?

    SQL查詢優(yōu)化是怎么回事

    查詢 (Subquery)的優(yōu)化一直以來都是 SQL 查詢優(yōu)化中的難點(diǎn)之一。 關(guān)聯(lián)子查詢的基本
    的頭像 發(fā)表于 02-01 13:55 ?2327次閱讀
    <b class='flag-5'>SQL</b>子<b class='flag-5'>查詢</b><b class='flag-5'>優(yōu)化</b>是怎么回事

    詳解MySQL三大日志的作用

    MySQL日志 主要包括錯(cuò)誤日志、查詢日志、查詢日志
    的頭像 發(fā)表于 07-22 14:44 ?1624次閱讀

    SQL優(yōu)化技巧分享

    一、查詢SQL盡量不要使用select *,而是具體字段
    的頭像 發(fā)表于 09-06 10:24 ?1661次閱讀

    SQL優(yōu)化思路與經(jīng)典案例分析

    如何定位SQL呢、我們可以通過慢查詢日志來查看SQL。默認(rèn)的情況下呢,MySQL數(shù)據(jù)庫是不
    的頭像 發(fā)表于 10-27 13:16 ?1234次閱讀

    sql優(yōu)化常用的幾種方法

    前言 1.SQL優(yōu)化思路。 1.1 查詢日志記錄
    的頭像 發(fā)表于 11-14 15:04 ?5982次閱讀

    一文終結(jié)SQL查詢優(yōu)化

    查詢(Subquery)的優(yōu)化一直以來都是 SQL 查詢優(yōu)化中的難點(diǎn)之一。關(guān)聯(lián)子查詢的基本執(zhí)行
    的頭像 發(fā)表于 04-28 14:19 ?1003次閱讀
    一文終結(jié)<b class='flag-5'>SQL</b>子<b class='flag-5'>查詢</b><b class='flag-5'>優(yōu)化</b>

    一條本該記錄到日志SQL是如何被漏掉的?

    生產(chǎn)環(huán)境中 select count(*) from table 語句執(zhí)行很慢,已經(jīng)遠(yuǎn)超 long_query_time 參數(shù)定義的查詢時(shí)間值,但是卻沒有記錄到日志中。
    的頭像 發(fā)表于 06-05 10:40 ?695次閱讀
    一條本該記錄到<b class='flag-5'>慢</b><b class='flag-5'>日志</b>的<b class='flag-5'>SQL</b>是如何被漏掉的?

    深入分析SQL的排查、解決思路

    出于一些歷史原因有的SQL查詢可能非常復(fù)雜,需要同時(shí)關(guān)聯(lián)非常多的表,使用一些復(fù)雜的函數(shù)、子查詢,這樣的SQL在項(xiàng)目初期由于數(shù)據(jù)量比較少,不會(huì)對數(shù)據(jù)庫造成較大的壓力,但是隨著時(shí)間的積累以
    的頭像 發(fā)表于 10-31 10:29 ?2235次閱讀
    深入分析<b class='flag-5'>慢</b><b class='flag-5'>SQL</b>的排查、解決思路

    sql語句where條件查詢

    的細(xì)節(jié),包括使用的操作符、條件的組合、多張表的查詢、條件的性能優(yōu)化等方面。 首先,讓我們了解一下WHERE子句中常用的操作符。在SQL中,常用的操作符包括: 比較操作符: 等于(=):用于判斷兩個(gè)值是否相等。 不等于( ):用于
    的頭像 發(fā)表于 11-23 11:28 ?1666次閱讀

    oracle執(zhí)行sql查詢語句的步驟是什么

    Oracle數(shù)據(jù)庫是一種常用的關(guān)系型數(shù)據(jù)庫管理系統(tǒng),具有強(qiáng)大的SQL查詢功能。Oracle執(zhí)行SQL查詢語句的步驟包括編寫SQL語句、解析
    的頭像 發(fā)表于 12-06 10:49 ?1344次閱讀