MySQL limit使用方法以及超大分頁問題解決
前言
日常開發(fā)中,我們使用mysql來實(shí)現(xiàn)分頁功能的時候,總是會用到mysql的limit語法.而怎么使用卻很有講究的,今天來總結(jié)一下.
limit語法
limit語法支持兩個參數(shù),offset和limit,前者表示偏移量,后者表示取前l(fā)imit條數(shù)據(jù).
例如:
## 返回符合條件的前10條語句 select * from user limit 10 ## 返回符合條件的第11-20條數(shù)據(jù) select * from user limit 10,20
從上面也可以看出來,limit n 等價于limit 0,n.
性能分析
實(shí)際使用中我們會發(fā)現(xiàn),在分頁的后面一些頁,加載會變慢,也就是說:
select * from user limit 1000000,10
語句執(zhí)行較慢.那么我們首先來測試一下.
首先是在offset較小的情況下拿100條數(shù)據(jù).(數(shù)據(jù)總量為200左右).然后逐漸增大offset.
select * from user limit 0,100 ---------耗時0.03s select * from user limit 10000,100 ---------耗時0.05s select * from user limit 100000,100 ---------耗時0.13s select * from user limit 500000,100 ---------耗時0.23s select * from user limit 1000000,100 ---------耗時0.50s select * from user limit 1800000,100 ---------耗時0.98s
可以看到隨著offset的增大,性能越來越差.
這是為什么呢?因?yàn)閘imit 10000,10的語法實(shí)際上是mysql查找到前10010條數(shù)據(jù),之后丟棄前面的10000行,這個步驟其實(shí)是浪費(fèi)掉的.
優(yōu)化
用id優(yōu)化
先找到上次分頁的最大ID,然后利用id上的索引來查詢,類似于select * from user where id>1000000 limit 100.
這樣的效率非?？?因?yàn)橹麈I上是有索引的,但是這樣有個缺點(diǎn),就是ID必須是連續(xù)的,并且查詢不能有where語句,因?yàn)閣here語句會造成過濾數(shù)據(jù).
用覆蓋索引優(yōu)化
mysql的查詢完全命中索引的時候,稱為覆蓋索引,是非?？斓?因?yàn)椴樵冎恍枰谒饕线M(jìn)行查找,之后可以直接返回,而不用再回數(shù)據(jù)表拿數(shù)據(jù).因此我們可以先查出索引的ID,然后根據(jù)Id拿數(shù)據(jù).
select * from (select id from job limit 1000000,100) a left join job b on a.id = b.id;
耗時0.2秒.
總結(jié)
用mysql做大量數(shù)據(jù)的分頁確實(shí)是有難度,但是也有一些方法可以進(jìn)行優(yōu)化,需要結(jié)合業(yè)務(wù)場景多進(jìn)行測試.
當(dāng)用戶翻到10000頁的時候,不如我們直接返回空好了,這么無聊的嗎...
好了，以上就是這篇文章的全部內(nèi)容了，希望本文的內(nèi)容對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，謝謝大家對腳本之家的支持。
相關(guān)文章
一文搞定MySQL binlog/redolog/undolog區(qū)別
這篇文章主要介紹了一文搞定MySQL binlog/redolog/undolog區(qū)別,作為開發(fā)，我們重點(diǎn)需要關(guān)注的是二進(jìn)制日志(binlog)和事務(wù)日志(包括redo log和undo log)，本文接下來會詳細(xì)介紹這三種日志，需要的朋友可以參考下2023-04-04
MySQL表LEFT JOIN左連接與RIGHT JOIN右連接的實(shí)例教程
這篇文章主要介紹了MySQL表LEFT JOIN左連接與RIGHT JOIN右連接的實(shí)例教程,表連接操作是MySQL入門學(xué)習(xí)中的基礎(chǔ)知識,需要的朋友可以參考下2015-12-12
關(guān)于MySQL數(shù)據(jù)庫死鎖的案例和解決方案
MySQL Update語句防止死鎖是指在修改MySQL數(shù)據(jù)庫的數(shù)據(jù)時,為避免多個進(jìn)程同時修改同一數(shù)據(jù)行而造成死鎖的情況,引入了一些機(jī)制來防止死鎖的產(chǎn)生,本文介紹了一個 MySQL 數(shù)據(jù)庫死鎖的案例和解決方案,需要的朋友可以參考下2023-09-09
MySQL 8.0.18使用clone plugin重建MGR的實(shí)現(xiàn)
這篇文章主要介紹了MySQL 8.0.18使用clone plugin重建MGR的實(shí)現(xiàn),文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-12-12
這篇文章主要為大家詳細(xì)介紹了MySQL為例講解JDBC數(shù)據(jù)庫連接步驟，感興趣的小伙伴們可以參考一下2016-08-08
MySQL依據(jù)一些規(guī)則，竭盡全力的把這些很糟糕的語句轉(zhuǎn)換成某種可以比較高效執(zhí)行的形式，這個過程也可以被稱作查詢重寫，本章主要就是詳細(xì)講解下這些比較重要的重寫規(guī)則，感興趣的小伙伴可跟著小編一起來學(xué)習(xí)2023-05-05
看到張宴的博客上關(guān)于"http/rest客戶端的文章"，怎樣安裝啥的直接都跳過，下面直接進(jìn)入測試階段。2011-08-08
這篇文章主要介紹了mysql啟動服務(wù)報1058錯誤的解決方法,需要的朋友可以參考下2014-03-03
詳解MySQL中Order By排序和filesort排序的原理及實(shí)現(xiàn)
這篇文章主要為大家詳細(xì)介紹了MySQL的Order By排序的底層原理與filesort排序，以及排序優(yōu)化手段，文中的示例代碼講解詳細(xì)，感興趣的小編可以跟隨小編一起學(xué)習(xí)一下2022-08-08
這篇文章主要介紹了mysql分表和分區(qū)的區(qū)別淺析,并對它們之間的相同做了分析,需要的朋友可以參考下2014-07-07