紙上得來終覺淺，絕知此事多宕機...記錄一下自己很蠢的一次故障處理過程。

上周的時候，一個剛上線的系統(tǒng)又開始反映登不上了，因為最近這個系統(tǒng)也老是出現(xiàn)這個問題，開發(fā)也一直在找問題中，所以也沒太在意。于是登上操作系統(tǒng)，mysql -uroot -p登錄數(shù)據(jù)庫，然后就一直沒反應(yīng)，登不上...

交代一下，mysql是裝在mysql用戶下的，裝的時候雖然對數(shù)據(jù)庫參數(shù)有進行調(diào)優(yōu)，但是操作系統(tǒng)層面沒做調(diào)整，所以mysql用戶的最大文件打開數(shù)限制為默認的1024，用ulimit -n可以查詢。然后我在用mysql的root賬號登錄數(shù)據(jù)庫的時候也是在mysql這個系統(tǒng)用戶下登錄的，然后看了下當時服務(wù)器的負載，cpu和內(nèi)存這些都很正常，但是存在大量應(yīng)用到數(shù)據(jù)庫的連接。

到這兒問題應(yīng)該就很清楚了，系統(tǒng)用戶mysql文件打開數(shù)可能達到了最大限制，當然不能打開更多的連接。

然而當時我并沒有想到這一點，我想到的不是換個系統(tǒng)用戶登錄，不是停掉應(yīng)用，而是重啟數(shù)據(jù)庫。。。而且這個數(shù)據(jù)庫跑的不只這一個業(yè)務(wù)，雖然也都不是什么重要的業(yè)務(wù)。。。

于是我就準備重啟數(shù)據(jù)庫，仍然是在mysql用戶下執(zhí)行mysqladmin -uroot -p shutdown。毫無疑問，這肯定也是沒有反應(yīng)的，道理跟前面root賬號連不上數(shù)據(jù)庫是一樣的，ctrl+C后有以下報錯

^Cmysqladmin: connect to server at 'localhost' failed
error: 'Lost connection to MySQL server at 'waiting for initial communication packet', system error: 4'

然后我就做了個更蠢的操作，雖然想著可能會丟數(shù)據(jù)，殺掉了mysql進程。。。然后重啟mysql，系統(tǒng)也就可用了。是真的很蠢，做完之后馬上就想起有多種更好的處理方法，卻選擇了最蠢的一種。

今天再登上數(shù)據(jù)庫看的時候，發(fā)現(xiàn)有幾個參數(shù)跟我配置文件里寫的不一樣，比如max_connections、table_open_cache等，都是設(shè)置的默認值，看了下上次啟動日志，確實也有告警

2019-03-15T08:14:03.038750Z 0 [Warning] Changed limits: max_open_files: 1024 (requested 12010)
2019-03-15T08:14:03.038911Z 0 [Warning] Changed limits: max_connections: 214 (requested 2000)
2019-03-15T08:14:03.038916Z 0 [Warning] Changed limits: table_open_cache: 400 (requested 5000)

很明顯，mysql根據(jù)參數(shù)設(shè)置計算了實例需要打開的最大文件數(shù)超過了當前系統(tǒng)用戶的最大限制，于是沒有使用該參數(shù)而使用了默認值。當然啟動起來數(shù)據(jù)庫也是可用的，啟起來后也可以手動把設(shè)置參數(shù)

set global max_connections=2000;
set global table_open_cache=5000;

只不過就很有可能出現(xiàn)我之前出現(xiàn)的問題了，也就是數(shù)據(jù)庫連接數(shù)并沒有達到max_connections的限制，用戶仍然連接不上。需要說明的是，正常情況下就算連接數(shù)滿了，mysql仍然會為root用戶保留一個連接，也就是root用戶是可以登錄數(shù)據(jù)庫查看問題的。

要解決也很簡單，增大操作系統(tǒng)用戶mysql的限制值就行了，在配置文件/etc/security/limits.conf后面加上新的限制值就行了。

mysql  soft  nofile 32768
mysql  hard  nofile 65535

以上所述是小編給大家介紹的mysql 系統(tǒng)用戶最大文件打開數(shù)限制詳解整合，希望對大家有所幫助，如果大家有任何疑問請給我留言，小編會及時回復(fù)大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持！

最新評論