背景

最近一個(gè)任務(wù)是優(yōu)化一個(gè)導(dǎo)出的功能，但是點(diǎn)擊功能時(shí)發(fā)現(xiàn)，程序長(zhǎng)時(shí)間無反應(yīng)，過一段時(shí)間又有反應(yīng)，通過查看服務(wù)的監(jiān)控發(fā)現(xiàn)，服務(wù)存在cpu持續(xù)100%的情況，下面分享一下我的處理方案和過程

處理過程

1.程序cpu監(jiān)控圖

2. 定位 通過查看cpu的使用率發(fā)現(xiàn)服務(wù)cpu100%的情況，卻在兩個(gè)節(jié)點(diǎn)上都存在問題，于是查看cpu情況

a. 登錄服務(wù)器執(zhí)行top命令,查看cpu使用率

-- 此圖非100%時(shí)截圖

b. 使用to -Hp [pid] 命令查看具體的線程占用cpu情況

我們可以看到506和856較高

c. 執(zhí)行 printf "%x\n" [線程id] 將線程id轉(zhuǎn)換成16進(jìn)制,并在前綴前+0x,目的是等下在線程日志里面找到對(duì)應(yīng)的線程具體信息，cpu最高時(shí)當(dāng)時(shí)我得到的線程16進(jìn)制為0x1a8

d. 執(zhí)行jstack [pid] > jstack.txt

e. 通過c步驟得到的0x1a8查詢jstack.txt

線程日志發(fā)現(xiàn)，這個(gè)線程其實(shí)是GC線程，也就說明存在fullgc導(dǎo)致了cpu持續(xù)過高，而fullgc都是由大對(duì)象導(dǎo)致的，這就以為這系統(tǒng)中存在著大對(duì)象。

f. 查看jvm內(nèi)存情況

存在內(nèi)存快照上找到了大對(duì)象

g. 查看程序日志

發(fā)現(xiàn)這個(gè)定時(shí)任務(wù)一直在執(zhí)行，在類中發(fā)現(xiàn)了和大對(duì)象相同的類

e. 找到原因，此定時(shí)任務(wù)一次性查詢20多萬條數(shù)據(jù)到對(duì)象中，導(dǎo)致fullgc，關(guān)掉定時(shí)任務(wù)，服務(wù)恢復(fù)正常

結(jié)語

本次問題的原因是fullgc導(dǎo)致cpu使用率過高，對(duì)于cpu過高的異常很多都是偶現(xiàn)的，所以不太容易排查，因?yàn)榛径家诔霈F(xiàn)100%時(shí)才能看到哪些線程出問題。

以上就是Java服務(wù)cpu100%的解決過程分享的詳細(xì)內(nèi)容，更多關(guān)于Java服務(wù)cpu100%的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章！

最新評(píng)論