【求助】OOM的時候kill進程失敗

bfdhczw

發(fā)生OOM的時候使用force_sig向進程發(fā)送SIGKILL，結(jié)果進程并沒有終止，一直在task list里面，導(dǎo)致內(nèi)存不能釋放，系統(tǒng)卡住。

有人遇到過這樣的問題？

kerryxi

最終結(jié)果這個進程狀態(tài)是不是ZOMBIE狀態(tài)？

nswcfd

進程是不是只有在被調(diào)度之后才能響應(yīng)信號？

bfdhczw

回復(fù) 2# kerryxi

狀態(tài)是D，不是Z，看起來好像進程一直沒有被調(diào)度，所以一直沒有退出。
   

bfdhczw

回復(fù) 3# nswcfd


    是的，只有被調(diào)度之后才能響應(yīng)信號，現(xiàn)在看起來就是進程沒有被調(diào)度。
現(xiàn)在我發(fā)完SIGKILL之后，強制修改進程狀態(tài)為TASK_INTERRUPTIBLE，設(shè)置優(yōu)先級最高，如果當(dāng)前進程不是要被kill的進程就執(zhí)行schedule()，有所改善，但有時候還是會卡住。

nswcfd

D是在等待外部事件，只能被所等待的事件源來wakeup，調(diào)度器幫不了忙。
這個進程在等待什么？可以看看ps/top看看其wait address / wchan。

bfdhczw

回復(fù) 6# nswcfd


    請教下，wait address要怎么看？

nswcfd

ps -O wchan #-O 增加輸出列

top -> f(選列) -> y(選擇wchan)

kerryxi

方法1：cat /proc/[pid]/wchan
只能看到最后的address

方法2：
echo 't' > /proc/sysrq-trigger
能夠在dmesg里面看到所有任務(wù)的堆棧

方法3：
cat /proc/[pid]/stack
這個在早期的linux UP kernel能夠顯示，在SMP下面需要修改內(nèi)核stack的代碼，就能夠看到完整的堆棧

bfdhczw

回復(fù) 6# nswcfd


    非常感謝，知道在哪里可以看到wait address了。

前段時間事情太多，這個問題就擱置了一段時間，現(xiàn)在繼續(xù)跟進這個問題。

我這里出現(xiàn)卡死的時候這個系統(tǒng)都不響應(yīng)了，所以我改了內(nèi)核，在卡死的時候直接把wait address打印出來，目前正在調(diào)試，還沒抓到地址，比較懷疑是卡在磁盤IO，因為我們這個進程需要較多磁盤操作。

再請教下，如果我找到了wait address，有辦法**這個進程，進而將其kill嗎？