help 服务器内存占用经常100%

entsee

物理内存用完了就占用SWAP,SWAP都满了就假死机,网站打开慢的要死,大家帮忙看看是什么问题!


TOP如下

ghd75hjk# top
last pid: 23514;  load averages:  0.47,  0.48,  0.40                                                  up 6+13:41:43  20:02:30
239 processes: 1 running, 238 sleeping
CPU states: 16.2% user,  0.0% nice,  3.4% system,  1.5% interrupt, 78.9% idle
Mem: 453M Active, 257M Inact, 235M Wired, 30M Cache, 110M Buf, 12M Free
Swap: 2048M Total, 2152K Used, 2046M Free

  PID USERNAME  THR PRI NICE   SIZE    RES STATE    TIME   WCPU COMMAND
17976 mysql      13  20    0   400M   150M kserel   4:08  6.84% mysqld
23455 www         1   4    0 23320K 13232K accept   0:00  0.54% httpd
23460 www         1   4    0 23036K 12924K accept   0:00  0.18% httpd
23436 www         1  96    0 22492K 12392K select   0:00  0.12% httpd
  808 root        1 113    0  1460K   892K select   1:06  0.00% inetd
  541 root        1  96    0  1376K   704K select   0:35  0.00% syslogd
  758 root        1   8    0  1388K   804K nanslp   0:01  0.00% cron
21267 root        1   8    0 22268K 12008K nanslp   0:01  0.00% httpd
21912 www         1  96    0 23000K 12972K select   0:01  0.00% httpd
22221 www         1   4    0 22676K 12676K kqread   0:01  0.00% httpd
22636 www         1   4    0 23004K 13148K accept   0:01  0.00% httpd
22305 www         1  96    0 30020K 19948K select   0:01  0.00% httpd
21814 www         1  96    0 30004K 19916K select   0:01  0.00% httpd
21657 www         1  96    0 23292K 13200K select   0:01  0.00% httpd
22637 www         1  96    0 23000K 12932K select   0:01  0.00% httpd
21313 www         1   4    0 27448K 17528K accept   0:00  0.00% httpd
23230 www         1   4    0 22528K 12444K accept   0:00  0.00% httpd
22422 www         1  96    0 22564K 12512K select   0:00  0.00% httpd
22230 www         1  96    0 23576K 13500K select   0:00  0.00% httpd
21391 www         1  96    0 23324K 13212K select   0:00  0.00% httpd
21321 www         1  96    0 23328K 13408K select   0:00  0.00% httpd
22933 www         1   4    0 27468K 17416K accept   0:00  0.00% httpd
15627 entsee      1  96    0  6252K  2436K select   0:00  0.00% sshd
21371 www         1  96    0 22592K 12496K select   0:00  0.00% httpd
21924 www         1  96    0 27452K 17368K select   0:00  0.00% httpd
22277 www         1  96    0 23332K 13268K select   0:00  0.00% httpd
21663 www         1  96    0 23588K 13512K select   0:00  0.00% httpd
21271 www         1   4    0 23352K 13432K accept   0:00  0.00% httpd
22224 www         1  96    0 22560K 12700K select   0:00  0.00% httpd
23070 www         1  96    0 22572K 12508K select   0:00  0.00% httpd
22232 www         1   4    0 22520K 12616K accept   0:00  0.00% httpd
22246 www         1  96    0 23324K 13292K select   0:00  0.00% httpd
21899 www         1  96    0 23296K 13204K select   0:00  0.00% httpd
21945 www         1  96    0 23312K 13232K select   0:00  0.00% httpd
21360 www         1  96    0 23324K 13192K select   0:00  0.00% httpd
21600 www         1  96    0 23340K 13436K select   0:00  0.00% httpd
21337 www         1  96    0 23008K 12888K select   0:00  0.00% httpd
23296 www         1  96    0 22472K 12292K select   0:00  0.00% httpd

brokencluster

这么多httpd进程,
netstat -an |grep :80看看.都是什么连接状态.
sockstat -4看看.

entsee

netstat -an |grep :80 没有反应

sockstat -4 显示的大多是http的连接

www      httpd      25226 16 tcp4   125.91.6.154:80       124.234.37.149:1927
www      httpd      25225 3  tcp4   *:80                  *:*
www      httpd      25225 16 tcp4   125.91.6.154:80       125.112.253.251:2410
www      httpd      25224 3  tcp4   *:80                  *:*
www      httpd      25224 16 tcp4   125.91.6.154:80       218.109.19.118:4310
www      httpd      25223 3  tcp4   *:80                  *:*
www      httpd      25222 3  tcp4   *:80                  *:*
www      httpd      25221 3  tcp4   *:80                  *:*
www      httpd      25221 16 tcp4   125.91.6.154:80       66.249.70.155:39172
www      httpd      25220 3  tcp4   *:80                  *:*
www      httpd      25218 3  tcp4   *:80                  *:*
www      httpd      25218 16 tcp4   125.91.6.154:80       222.129.209.129:3789
www      httpd      25217 3  tcp4   *:80                  *:*
www      httpd      25217 16 tcp4   125.91.6.154:80       222.173.10.36:3115
www      httpd      25216 3  tcp4   *:80                  *:*
www      httpd      25216 16 tcp4   125.91.6.154:80       218.64.38.14:2241
www      httpd      25215 3  tcp4   *:80                  *:*
www      httpd      25215 16 tcp4   125.91.6.154:80       124.224.176.50:1274
www      httpd      25212 3  tcp4   *:80                  *:*
www      httpd      25211 3  tcp4   *:80                  *:*
www      httpd      25208 3  tcp4   *:80                  *:*
www      httpd      25204 3  tcp4   *:80                  *:*
www      httpd      25203 3  tcp4   *:80                  *:*
www      httpd      25203 16 tcp4   125.91.6.154:80       60.164.120.96:2850
www      httpd      25201 3  tcp4   *:80                  *:*
www      httpd      25199 3  tcp4   *:80                  *:*
www      httpd      25199 16 tcp4   125.91.6.154:80       61.135.166.232:47572
www      httpd      25199 18 udp4   125.91.6.154:61473    202.96.144.47:53
www      httpd      25198 3  tcp4   *:80                  *:*
www      httpd      25195 3  tcp4   *:80                  *:*
www      httpd      25195 16 tcp4   125.91.6.154:80       58.34.67.197:4826
www      httpd      25191 3  tcp4   *:80                  *:*
root     pure-ftpd  25164 0  tcp4   125.91.6.154:21       61.149.18.23:3277
root     pure-ftpd  25164 1  tcp4   125.91.6.154:21       61.149.18.23:3277
root     pure-ftpd  25164 2  tcp4   125.91.6.154:21       61.149.18.23:3277
root     pure-ftpd  25156 0  tcp4   125.91.6.154:21       222.64.57.169:1069
root     pure-ftpd  25156 1  tcp4   125.91.6.154:21       222.64.57.169:1069
root     pure-ftpd  25156 2  tcp4   125.91.6.154:21       222.64.57.169:1069
www      httpd      25143 3  tcp4   *:80                  *:*
www      httpd      25143 16 tcp4   125.91.6.154:80       61.135.166.233:37496
www      httpd      25143 17 tcp4   125.91.6.154:64559    221.231.130.177:80
www      httpd      25115 3  tcp4   *:80                  *:*
www      httpd      25115 16 tcp4   125.91.6.154:80       60.175.20.75:1840
www      httpd      25114 3  tcp4   *:80                  *:*
www      httpd      25114 16 tcp4   125.91.6.154:80       218.109.19.118:4256
www      httpd      25112 3  tcp4   *:80                  *:*
www      httpd      25112 16 tcp4   125.91.6.154:80       60.175.20.75:1846
www      httpd      25110 3  tcp4   *:80                  *:*
www      httpd      25109 3  tcp4   *:80                  *:*
root     pure-ftpd  25105 0  tcp4   125.91.6.154:21       218.69.214.108:1040
root     pure-ftpd  25105 1  tcp4   125.91.6.154:21       218.69.214.108:1040
root     pure-ftpd  25105 2  tcp4   125.91.6.154:21       218.69.214.108:1040
www      httpd      25100 3  tcp4   *:80                  *:*
www      httpd      25100 16 tcp4   125.91.6.154:80       218.75.110.133:3070
www      httpd      25097 3  tcp4   *:80                  *:*
www      httpd      25091 3  tcp4   *:80                  *:*
www      httpd      25091 16 tcp4   125.91.6.154:80       125.112.253.251:2405
www      httpd      25064 3  tcp4   *:80                  *:*
www      httpd      25064 16 tcp4   125.91.6.154:80       61.135.166.233:38998
www      httpd      25061 3  tcp4   *:80                  *:*
www      httpd      25061 16 tcp4   125.91.6.154:80       222.173.10.36:3118
www      httpd      25055 3  tcp4   *:80                  *:*
www      httpd      25055 16 tcp4   125.91.6.154:80       125.41.245.224:61693
www      httpd      25052 3  tcp4   *:80                  *:*
www      httpd      25052 16 tcp4   125.91.6.154:80       61.180.25.203:15102
www      httpd      25050 3  tcp4   *:80                  *:*
www      httpd      25035 3  tcp4   *:80                  *:*
root     pure-ftpd  25033 0  tcp4   125.91.6.154:21       218.69.214.108:2000
root     pure-ftpd  25033 1  tcp4   125.91.6.154:21       218.69.214.108:2000
root     pure-ftpd  25033 2  tcp4   125.91.6.154:21       218.69.214.108:2000
www      httpd      25031 3  tcp4   *:80                  *:*
www      httpd      25031 16 tcp4   125.91.6.154:80       211.139.116.250:5463
www      httpd      25027 3  tcp4   *:80                  *:*
www      httpd      25027 16 tcp4   125.91.6.154:80       222.213.93.92:29656
www      httpd      24983 3  tcp4   *:80                  *:*
www      httpd      24983 16 tcp4   125.91.6.154:80       60.175.20.75:1845
www      httpd      24982 3  tcp4   *:80                  *:*
www      httpd      24979 3  tcp4   *:80                  *:*
www      httpd      24977 3  tcp4   *:80                  *:*
www      httpd      24977 16 tcp4   125.91.6.154:80       61.174.209.234:2399
www      httpd      24976 3  tcp4   *:80                  *:*
www      httpd      24974 3  tcp4   *:80                  *:*
www      httpd      24974 16 tcp4   125.91.6.154:80       61.180.25.203:15107
www      httpd      24973 3  tcp4   *:80                  *:*
www      httpd      24972 3  tcp4   *:80                  *:*
www      httpd      24972 16 tcp4   125.91.6.154:80       60.175.20.75:1839
www      httpd      24971 3  tcp4   *:80                  *:*
www      httpd      24961 3  tcp4   *:80                  *:*
www      httpd      24961 16 tcp4   125.91.6.154:80       222.173.10.36:3112
www      httpd      24958 3  tcp4   *:80                  *:*
www      httpd      24955 3  tcp4   *:80                  *:*
www      httpd      24955 16 tcp4   125.91.6.154:80       221.221.39.161:4146
www      httpd      24953 3  tcp4   *:80                  *:*
www      httpd      24950 3  tcp4   *:80                  *:*
www      httpd      24950 16 tcp4   125.91.6.154:80       61.180.25.203:15104
www      httpd      24947 3  tcp4   *:80                  *:*
www      httpd      24947 16 tcp4   125.91.6.154:80       60.191.80.72:50991
root     pure-ftpd  24881 0  tcp4   125.91.6.154:21       222.64.57.169:1137
root     pure-ftpd  24881 1  tcp4   125.91.6.154:21       222.64.57.169:1137
root     pure-ftpd  24881 2  tcp4   125.91.6.154:21       222.64.57.169:1137
www      httpd      24853 3  tcp4   *:80                  *:*
www      httpd      24851 3  tcp4   *:80                  *:*
www      httpd      24851 16 tcp4   125.91.6.154:80       221.221.39.161:4071
www      httpd      24850 3  tcp4   *:80                  *:*
www      httpd      24850 16 tcp4   125.91.6.154:80       218.109.19.118:4244
www      httpd      24845 3  tcp4   *:80                  *:*
www      httpd      24845 16 tcp4   125.91.6.154:80       220.168.186.179:4263
www      httpd      24841 3  tcp4   *:80                  *:*
www      httpd      24841 16 tcp4   125.91.6.154:80       61.135.166.233:59741
www      httpd      24841 17 tcp4   125.91.6.154:64517    221.231.130.177:80
www      httpd      24837 3  tcp4   *:80                  *:*
www      httpd      24837 16 tcp4   125.91.6.154:80       61.135.166.232:46797
www      httpd      24835 3  tcp4   *:80                  *:*
www      httpd      24835 16 tcp4   125.91.6.154:80       218.75.110.133:3046
www      httpd      24832 3  tcp4   *:80                  *:*
www      httpd      24832 16 tcp4   125.91.6.154:80       218.109.19.118:4337
www      httpd      24830 3  tcp4   *:80                  *:*
www      httpd      24830 16 tcp4   125.91.6.154:80       61.135.166.233:39857
www      httpd      24830 18 udp4   125.91.6.154:61666    202.96.144.47:53
www      httpd      24829 3  tcp4   *:80                  *:*
www      httpd      24826 3  tcp4   *:80                  *:*
www      httpd      24826 16 tcp4   125.91.6.154:80       121.34.132.39:2075
www      httpd      24824 3  tcp4   *:80                  *:*
www      httpd      24824 16 tcp4   125.91.6.154:80       222.173.10.36:3116
www      httpd      24821 3  tcp4   *:80                  *:*
www      httpd      24821 16 tcp4   125.91.6.154:80       125.112.253.251:2413
www      httpd      24820 3  tcp4   *:80                  *:*
www      httpd      24820 16 tcp4   125.91.6.154:80       222.92.139.12:3411
www      httpd      24815 3  tcp4   *:80                  *:*
www      httpd      24814 3  tcp4   *:80                  *:*
www      httpd      24812 3  tcp4   *:80                  *:*
www      httpd      24812 16 tcp4   125.91.6.154:80       222.92.139.12:3410
www      httpd      24809 3  tcp4   *:80                  *:*
www      httpd      24809 16 tcp4   125.91.6.154:80       124.234.37.149:1941
www      httpd      24807 3  tcp4   *:80                  *:*
www      httpd      24807 16 tcp4   125.91.6.154:80       218.75.110.133:2990
www      httpd      24805 3  tcp4   *:80                  *:*
www      httpd      24805 16 tcp4   125.91.6.154:80       222.129.209.129:3788
www      httpd      24799 3  tcp4   *:80                  *:*
www      httpd      24796 3  tcp4   *:80                  *:*
www      httpd      24796 16 tcp4   125.91.6.154:80       222.212.209.44:1335
www      httpd      24794 3  tcp4   *:80                  *:*
www      httpd      24794 16 tcp4   125.91.6.154:80       61.180.25.203:15103
www      httpd      24791 3  tcp4   *:80                  *:*
www      httpd      24791 16 tcp4   125.91.6.154:80       218.75.110.133:2986
www      httpd      24788 3  tcp4   *:80                  *:*
www      httpd      24788 16 tcp4   125.91.6.154:80       60.164.120.96:2851
root     pure-ftpd  24780 0  tcp4   125.91.6.154:21       222.64.57.169:1955
root     pure-ftpd  24780 1  tcp4   125.91.6.154:21       222.64.57.169:1955
root     pure-ftpd  24780 2  tcp4   125.91.6.154:21       222.64.57.169:1955
www      httpd      24764 3  tcp4   *:80                  *:*
www      httpd      24761 3  tcp4   *:80                  *:*
www      httpd      24736 3  tcp4   *:80                  *:*
www      httpd      24735 3  tcp4   *:80                  *:*
www      httpd      24725 3  tcp4   *:80                  *:*
www      httpd      24725 16 tcp4   125.91.6.154:80       125.112.253.251:2406
www      httpd      24724 3  tcp4   *:80                  *:*
www      httpd      24724 16 tcp4   125.91.6.154:80       125.112.253.251:2401
www      httpd      24721 3  tcp4   *:80                  *:*
www      httpd      24721 16 tcp4   125.91.6.154:80       121.34.132.39:2077
www      httpd      24720 3  tcp4   *:80                  *:*
www      httpd      24720 16 tcp4   125.91.6.154:80       124.234.37.149:1943
www      httpd      24719 3  tcp4   *:80                  *:*
www      httpd      24719 16 tcp4   125.91.6.154:80       218.109.19.118:4245
www      httpd      24718 3  tcp4   *:80                  *:*
www      httpd      24718 16 tcp4   125.91.6.154:80       124.205.128.2:3514
www      httpd      24712 3  tcp4   *:80                  *:*
www      httpd      24712 16 tcp4   125.91.6.154:80       121.33.65.238:2134
www      httpd      24706 3  tcp4   *:80                  *:*
www      httpd      24598 3  tcp4   *:80                  *:*
www      httpd      24598 16 tcp4   125.91.6.154:80       211.139.116.250:5525
root     pure-ftpd  24563 0  tcp4   125.91.6.154:21       218.69.214.108:1661
root     pure-ftpd  24563 1  tcp4   125.91.6.154:21       218.69.214.108:1661
root     pure-ftpd  24563 2  tcp4   125.91.6.154:21       218.69.214.108:1661
www      httpd      24510 3  tcp4   *:80                  *:*
www      httpd      24510 16 tcp4   125.91.6.154:80       60.216.105.226:38547
www      httpd      24506 3  tcp4   *:80                  *:*
www      httpd      24506 16 tcp4   125.91.6.154:80       125.112.253.251:2409
www      httpd      24503 3  tcp4   *:80                  *:*
www      httpd      24502 3  tcp4   *:80                  *:*
www      httpd      24502 16 tcp4   125.91.6.154:80       83.44.156.202:2855
www      httpd      24434 3  tcp4   *:80                  *:*
www      httpd      24434 16 tcp4   125.91.6.154:80       61.135.166.232:48735
www      httpd      24434 18 udp4   125.91.6.154:55553    202.96.144.47:53
www      httpd      24394 3  tcp4   *:80                  *:*
www      httpd      24394 16 tcp4   125.91.6.154:80       121.33.65.238:2135
www      httpd      24393 3  tcp4   *:80                  *:*
www      httpd      24393 16 tcp4   125.91.6.154:80       218.109.19.118:4309
www      httpd      24392 3  tcp4   *:80                  *:*
www      httpd      24392 16 tcp4   125.91.6.154:80       60.175.20.75:1842
www      httpd      24338 3  tcp4   *:80                  *:*
www      httpd      24338 16 tcp4   125.91.6.154:80       222.67.231.118:1663
www      httpd      24214 3  tcp4   *:80                  *:*
www      httpd      24214 16 tcp4   125.91.6.154:80       222.67.231.118:1655
www      httpd      24164 3  tcp4   *:80                  *:*
www      httpd      24164 16 tcp4   125.91.6.154:80       221.3.99.151:1697
www      httpd      24126 3  tcp4   *:80                  *:*
www      httpd      24126 16 tcp4   125.91.6.154:80       125.118.139.223:2113
www      httpd      24054 3  tcp4   *:80                  *:*
www      httpd      24054 16 tcp4   125.91.6.154:80       125.112.253.251:2407
www      httpd      24050 3  tcp4   *:80                  *:*
www      httpd      24050 16 tcp4   125.91.6.154:80       222.67.231.118:1666
www      httpd      23974 3  tcp4   *:80                  *:*
www      httpd      23974 16 tcp4   125.91.6.154:80       60.175.20.75:1843
www      httpd      23951 3  tcp4   *:80                  *:*
www      httpd      23951 16 tcp4   125.91.6.154:80       122.0.93.154:51720
www      httpd      23765 3  tcp4   *:80                  *:*
www      httpd      23753 3  tcp4   *:80                  *:*
www      httpd      23753 16 tcp4   125.91.6.154:80       218.109.19.118:4248
www      httpd      23737 3  tcp4   *:80                  *:*
www      httpd      23737 16 tcp4   125.91.6.154:80       222.173.10.36:3117
root     pure-ftpd  23718 0  tcp4   125.91.6.154:21       122.88.6.69:2020
root     pure-ftpd  23718 1  tcp4   125.91.6.154:21       122.88.6.69:2020
root     pure-ftpd  23718 2  tcp4   125.91.6.154:21       122.88.6.69:2020
www      httpd      23582 3  tcp4   *:80                  *:*
www      httpd      23582 16 tcp4   125.91.6.154:80       122.0.93.154:51741
www      httpd      23424 3  tcp4   *:80                  *:*
www      httpd      23424 16 tcp4   125.91.6.154:80       222.173.10.36:3113
www      httpd      22998 3  tcp4   *:80                  *:*
www      httpd      22998 16 tcp4   125.91.6.154:80       220.181.38.200:40120
www      httpd      22998 17 tcp4   125.91.6.154:64566    221.231.130.209:80
www      httpd      21924 3  tcp4   *:80                  *:*
www      httpd      21924 16 tcp4   125.91.6.154:80       222.213.93.92:29680

brokencluster

netstat -an |grep :80 没有反应,应该是被ddos了。 把httpd和pure都停了。看看。

entsee

停apache和pure后，内存占用马上降下去了

有没有可能是我apache没优化好导致的，我的网站应该没什么人来攻击的

Ericzhao82

＊nix和windows系统不同的，*nix系统一开始就会把内存分配的托托当当，而不是跟M$等到用时才去申请内存。

你的swap几乎没有用到，说明你的物理内存没有吃紧呀。

有时间看看*nix基础

[ 本帖最后由 Ericzhao82 于 2007-7-5 16:18 编辑 ]

lsstarboy

应该是apache出问题了。
mysql占的内存也不少。

isjfk

lz的情况不正常。建议贴出来负载最严重时的top、netstat输出，以及apache和mysql配置情况。

entsee

原帖由 Ericzhao82 于 2007-7-5 16:17 发表
＊nix和windows系统不同的，*nix系统一开始就会把内存分配的托托当当，而不是跟M$等到用时才去申请内存。

你的swap几乎没有用到，说明你的物理内存没有吃紧呀。

有时间看看*nix基础

我上面贴的时候SWAP是没有用到啊，但是物理内存占用99%以上啊

查看dmesg.today，显示的全是下面的内容

swap_pager_getswapspace(2): failed
swap_pager_getswapspace(2): failed
swap_pager_getswapspace(2): failed
swap_pager_getswapspace(2): failed
swap_pager_getswapspace(2): failed
swap_pager_getswapspace(4): failed
swap_pager_getswapspace(3): failed
swap_pager_getswapspace(2): failed
swap_pager_getswapspace(: failed
swap_pager_getswapspace(4): failed
swap_pager_getswapspace(3): failed
swap_pager_getswapspace(2): failed
swap_pager_getswapspace(4): failed
pid 19066 (httpd), uid 80, was killed: out of swap space
pid 19066 (httpd), uid 80, was killed: out of swap space
pid 19066 (httpd), uid 80, was killed: out of swap space
swap_pager_getswapspace(16): failed
swap_pager_getswapspace(16): failed
swap_pager_getswapspace(16): failed
swap_pager_getswapspace(16): failed
swap_pager_getswapspace(16): failed
swap_pager_getswapspace(15): failed
swap_pager_getswapspace(16): failed

entsee

原帖由 isjfk 于 2007-7-5 18:44 发表
lz的情况不正常。建议贴出来负载最严重时的top、netstat输出，以及apache和mysql配置情况。

mysql的my.cnf配置如下

是从网上找的配置

[mysqld]
skip-networking
skip-innodb
skip-bdb
skip-name-resolve
skip-locking
#log-bin
key_buffer=256M
max_allowed_packet=4M
table_cache=1024
thread_cache=64
join_buffer_size=32M
sort_buffer=32M
record_buffer=32M
max_connections=512
wait_timeout=120
interactive_timeout=120
max_connect_errors=30000
long_query_time=1
max_heap_table_size=256M
tmp_table_size=128M
thread_concurrency=8
myisam_sort_buffer_size=128M


apache用的是prefork

<IfModule mpm_prefork_module>
    StartServers         10
    MinSpareServers      10
    MaxSpareServers      15
    ServerLimit        2000
    MaxClients         1000
    MaxRequestsPerChild   5000
</IfModule>

现在物理内存一直都是90-100%，但是一重启apache马上就降到40%左右，不过一会马上又升回去了