linux nat 不支持雙cpu？

ippen

我用linux做nat，服務(wù)器是intel的雙至強64位的3Gcpu，內(nèi)存1G，軟件系統(tǒng) centos3.6，將流量加上后，用top檢測CPU的狀態(tài)，發(fā)現(xiàn)四個內(nèi)核cpu只用了一個（64位至強CPU有兩個內(nèi)核），即有一個內(nèi)核是滿負載，其他三個完全空閑，但只要將NAT取消，4個cpu就平均分配任務(wù)，非常不解，各位老大有何辦法？
在網(wǎng)上搜索了一下，可以確認netfilter是支持多CPU的

[ 本帖最后由 ippen 于 2006-5-11 23:48 編輯 ]

platinum

原帖由 ippen 于 2006-5-11 23:47 發(fā)表
在網(wǎng)上搜索了一下，可以確認netfilter是支持多CPU的

哪里有提到？我去看一下

ippen

http://lists.netfilter.org/piper ... 02-June/008198.html

platinum

http://www.google.com/url?sa=t&a ... k9-me4iP_UrHnndC-xg

獨孤九賤

原帖由 platinum 于 2006-5-12 00:45 發(fā)表

哪里有提到？我去看一下

至少Netfilter代碼上邊是支持的……
沒有親自試過

看了你貼的那篇文章，很有參考價值，只是可惜沒有看到作者測試的是哪個版本的，也不知到目前的內(nèi)核/Netfilter有沒有改進……

但是從作者的實驗當(dāng)中來看，Netfilter肯定是支持多處理器的，樓主是不是哪兒沒有配置好啊……呵呵

[ 本帖最后由 獨孤九賤 于 2006-5-12 09:09 編輯 ]

ippen

多謝白金老大！
從文章結(jié)論看，單cpu比雙cpu要好 ,真是郁悶，我的雙cpu機子白買了
to 九賤兄：
你建議要調(diào)整哪些地方？我將系統(tǒng)裝好后，只做了簡單的一些調(diào)整---- 參數(shù) ip_conntrack_max，route/max_size，kernel/shmmax，kernel/shmall

ippen

貼個top狀態(tài)，可以看見第四個cpu是滿負載，其他空閑，cpu會輪換----過一段時間后會變?yōu)榈谝粋�cpu滿負載

09:55:02  up 20:06,  1 user,  load average: 0.99, 0.95, 0.83
33 processes: 31 sleeping, 2 running, 0 zombie, 0 stopped
CPU states:  cpu    user    nice  system    irq  softirq  iowait    idle
           total    0.0%    0.0%    0.0%   0.0%    25.3%    0.0%   74.6%
           cpu00    0.1%    0.0%    0.0%   0.0%     0.0%    0.0%   99.8%
           cpu01    0.0%    0.0%    0.0%   0.0%     0.3%    0.0%   99.6%
           cpu02    0.0%    0.0%    0.0%   0.0%     1.0%    0.0%   99.0%
           cpu03    0.0%    0.0%    0.0%   0.0%   100.0%    0.0%    0.0%
Mem:  1009404k av,  451252k used,  558152k free,       0k shrd,    1312k buff
        20976k active,               6428k inactive
Swap:       0k av,       0k used,       0k free                   23980k cached

  PID USER     PRI  NI  SIZE  RSS SHARE STAT %CPU %MEM   TIME CPU COMMAND

platinum

wc -l /proc/net/ip_conntrack
iptables-save
貼一下兩個結(jié)果
你的網(wǎng)絡(luò)帶寬多大，大概有多少個用戶？

ippen

# Generated by iptables-save v1.2.8 on Fri May 12 10:54:35 2006
*nat
REROUTING ACCEPT [3073422:457854968]
OSTROUTING ACCEPT [2305671:391634389]
:OUTPUT ACCEPT [78:12168]
-A POSTROUTING -o eth1 -p tcp -m tcp --dport 25 -j RETURN
-A POSTROUTING -o eth1 -p udp -m udp --dport 25 -j RETURN
-A POSTROUTING -o eth1 -p tcp -m tcp --dport 110 -j RETURN
-A POSTROUTING -o eth1 -p udp -m udp --dport 110 -j RETURN
-A POSTROUTING -o eth1 -p tcp -m tcp --sport 25 -j RETURN
-A POSTROUTING -o eth1 -p udp -m udp --sport 25 -j RETURN
-A POSTROUTING -o eth1 -p tcp -m tcp --sport 110 -j RETURN
-A POSTROUTING -o eth1 -p udp -m udp --sport 110 -j RETURN
-A POSTROUTING -o eth1 -p tcp -m tcp --sport 80 -j RETURN
-A POSTROUTING -s 211.156.xxx.xxx -o eth1 -j RETURN
-A POSTROUTING -d 210.17.209.0/255.255.255.0 -o eth1 -j RETURN
-A POSTROUTING -d 202.106.168.0/255.255.255.0 -o eth1 -j RETURN
-A POSTROUTING -d 202.108.44.0/255.255.255.0 -o eth1 -j RETURN
-A POSTROUTING -d 61.135.159.0/255.255.255.0 -o eth1 -j RETURN
-A POSTROUTING -d 219.142.91.0/255.255.255.0 -o eth1 -j RETURN
-A POSTROUTING -d 203.166.128.137 -o eth1 -j RETURN
-A POSTROUTING -s 211.156.xxx.xxx/255.255.240.0 -o eth1 -j SNAT --to-source 221.xxx.xxx.xxx-221.xxx.xxx.xxx
-A POSTROUTING -s 210.xxx.xxx.xxx/255.255.192.0 -o eth1 -j SNAT --to-source 221.xxx.xxx.xxx-221.xxx.xxx.xxx
-A POSTROUTING -s 61.xxx.xxx.xxx/255.255.192.0 -o eth1 -j SNAT --to-source 221.xxx.xxx.xxx-221.xxx.xxx.xxx
-A POSTROUTING -s 125.xxx.xxx.xxx/255.255.0.0 -o eth1 -j SNAT --to-source 221.xxx.xxx.xxx-221.xxx.xxx.xxx
COMMIT
# Completed on Fri May 12 10:54:35 2006

wc -l /proc/net/ip_conntrack

121382

這個數(shù)在高峰時到190000


網(wǎng)路帶寬峰值大約在150M，用戶數(shù)不太好統(tǒng)計，因為nat是為了解決到網(wǎng)通速度的問題，無法確認有多少用戶訪問網(wǎng)通

platinum

策略有問題，你應(yīng)該在 filter 表的 FORWARD 鏈做處理
因為，如果你在 POSTROUTING 鏈做處理的話，所有數(shù)據(jù)包都要先經(jīng)過 Linux 的路由機制，從而導(dǎo)致了性能下降
另外，你應(yīng)該減少 tcp 的 established 時間，縮短其在連接追蹤表中的殘留時間
如果方便的話，我能登錄到你的服務(wù)器看一下比較好