免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: ronton

[新手入门] 各位兄弟帮我看看系统瓶颈在哪里? [复制链接]

论坛徽章:
0
发表于 2008-12-01 22:56 |显示全部楼层
spook兄 我也知道是系统IO瓶颈。
但处理起来真的很难,一来麻烦,二来心里没底,计划等IBM工程师过来看了在说。
被用友NC搞死!

论坛徽章:
0
发表于 2008-12-01 23:38 |显示全部楼层
1. hdisk2 /hdisk3 的负载太大,你的DS4700的配置是什么?
2. 主要是I/O的性能不足,内存的问题不大.
3. 慢的问题是一个趋势造成,你的系统上线使用多久时间了?

论坛徽章:
0
发表于 2008-12-19 13:00 |显示全部楼层
继续
修改了 lru_file_repage=0    ——>  lru_file_repage=0

minperm%=3   ——>  minperm%=5

maxclient%=?           ——>  maxclient%=90

maxperm%=8           ——>  maxperm%=90

把paging01从rootvg迁出,系统速度有明显改善,但今天开始又卡的利害。

io状况
tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0        1776.6               15.5   2.5   50.1     32.0

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk0           0.0       0.0       0.0          0         0
hdisk1           0.0       3.2       0.2          0        16
dac1             0.0     1373.3     124.0       6868         0
dac1-utm         0.0       0.0       0.0          0         0
dac0             0.0     23076.6     675.8      22308     93104
dac0-utm         0.0       0.0       0.0          0         0
hdisk2         100.0     23076.6     675.8      22308     93104
hdisk3         100.0     1373.3     124.0       6868         0
cd0              0.0       0.0       0.0          0         0
hdisk5           0.0       0.0       0.0          0         0

论坛徽章:
0
发表于 2008-12-20 23:05 |显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽

论坛徽章:
0
发表于 2008-12-21 11:33 |显示全部楼层
内存,差点

论坛徽章:
2
2015年迎新春徽章
日期:2015-03-04 09:49:45IT运维版块每日发帖之星
日期:2016-07-29 06:20:00
发表于 2008-12-21 12:20 |显示全部楼层
既然用了文件系统,还用了aio,那么用了cio dio了么? 后端瓶颈,aio再多也是白搭,反而增加io延迟。
看你topas里面第一块盘,io size很小,后端存储设备有什么表现么?贴一下后端存储的数据。 然后iostat -D,lsattr -El hidskx。 另外,thread被block完全是因为io瓶颈,提高主频到10G也没用,加cpu也没用。 vmstat里面wa一列标明io wait。调查此时sql在做什么,为何io size如此小,随机度如何(存储段cache hit调查),如果随机度确实很大,那谁也没治。

论坛徽章:
1
操作系统版块每日发帖之星
日期:2016-02-18 06:20:00
发表于 2008-12-23 14:24 |显示全部楼层

楼上有没有想过某个表锁了

其他要用这个表的都跟着在等待,这个情况在老应用升级上来非常明显,因为以前是锁表,现在是锁行……
你看这个
System configuration: lcpu=16 mem=15840MB

kthr    memory              page              faults        cpu
----- ----------- ------------------------ ------------ -----------
r  b   avm   fre  re  pi  po  fr   sr  cy  in   sy  cs us sy id wa
1 31 3186109  4864   0   0   0 3875 11070   0 1103 8570 3162  8  2 45 45
1 28 3181874  4992   0   0   0 3962 11509   0 1049 7301 2989  5  2 49 44
1 30 3174477 10207   0   0   0 4367 34837   0 1259 9679 3598  9  2 42 47
1 28 3161998  5200   0   0   0 1735 14209   0 1014 8571 2805  6  2 43 49
1 30 3162230  4885   0   0   0 4728 16126   0 946 7775 2776  7  2 42 48
0 33 3162193  4951   0   0   0 5345 16937   0 1016 8721 2667  8  2 44 46
1 30 3162412  4885   0   0   0 5203 17389   0 1116 11452 2961  9  2 42 47
1 31 3163238  5183   0   0   0 6091 51325   0 1171 12981 3149  9  3 41 46
1 32 3163286  4786   0   0   0 4869 15468   0 1077 11616 2978 12  2 41 44
3 30 3163271  4807   0   0   0 3858 16053   0 846 10725 5104 13  3 40 44

基本上都是1个线程,有可能这么夸张吗?

论坛徽章:
0
发表于 2008-12-29 14:34 |显示全部楼层
原帖由 冬瓜头 于 2008-12-21 12:20 发表
既然用了文件系统,还用了aio,那么用了cio dio了么? 后端瓶颈,aio再多也是白搭,反而增加io延迟。
看你topas里面第一块盘,io size很小,后端存储设备有什么表现么?贴一下后端存储的数据。 然后iostat -D ...


冬瓜兄,你是高手。 小弟拜读你的帖子,看不懂啊 。后端存储设备用什么命令显示 ?

论坛徽章:
0
发表于 2008-12-29 16:38 |显示全部楼层
看看存储的catch打开了没有?

论坛徽章:
0
发表于 2009-02-04 15:12 |显示全部楼层
继续贴上
# iostat -D

System configuration: lcpu=16 drives=11 paths=2 vdisks=0

hdisk0         xfer:  %tm_act      bps      tps      bread      bwrtn
                         0.0     38.6      0.0       30.0        8.6
               read:      rps  avgserv  minserv  maxserv   timeouts      fails
                         0.0      1.4      0.3     47.1           0          0
              write:      wps  avgserv  minserv  maxserv   timeouts      fails
                         0.0      8.1      0.9    182.6           0          0
              queue:  avgtime  mintime  maxtime  avgwqsz    avgsqsz     sqfull
                         0.4      0.0     89.3      0.0        0.0        1618
hdisk1         xfer:  %tm_act      bps      tps      bread      bwrtn
                         0.0      1.4K     0.1       57.2        1.3K
               read:      rps  avgserv  minserv  maxserv   timeouts      fails
                         0.0      1.0      0.2    208.7           0          0
              write:      wps  avgserv  minserv  maxserv   timeouts      fails
                         0.1      3.4      0.8    274.1           0          0
              queue:  avgtime  mintime  maxtime  avgwqsz    avgsqsz     sqfull
                         0.2      0.0    226.2      0.0        0.0        9333
dac1           xfer:  %tm_act      bps      tps      bread      bwrtn
                         0.0    640.9K    22.6      568.2K      72.7K
               read:      rps  avgserv  minserv  maxserv   timeouts      fails
                        20.8     11.8      0.1      2.1S          0          0
              write:      wps  avgserv  minserv  maxserv   timeouts      fails
                         1.8      1.2      0.3      3.3S          0          0
              queue:  avgtime  mintime  maxtime  avgwqsz    avgsqsz     sqfull
                         1.1      0.0      2.6S     0.0        0.0           0
dac1-utm       xfer:  %tm_act      bps      tps      bread      bwrtn
                         0.0      0.0      0.0        0.0        0.0
               read:      rps  avgserv  minserv  maxserv   timeouts      fails
                         0.0      0.0      0.0      0.0           0          0
              write:      wps  avgserv  minserv  maxserv   timeouts      fails
                         0.0      0.0      0.0      0.0           0          0
              queue:  avgtime  mintime  maxtime  avgwqsz    avgsqsz     sqfull
                         0.0      0.0      0.0      0.0        0.0           0
dac0           xfer:  %tm_act      bps      tps      bread      bwrtn
                         0.0    792.2K    23.2      645.5K     146.7K
               read:      rps  avgserv  minserv  maxserv   timeouts      fails
                        20.7     12.6      0.1      2.2S          0          0
              write:      wps  avgserv  minserv  maxserv   timeouts      fails
                         2.5      1.6      0.3      2.9S          0          0
              queue:  avgtime  mintime  maxtime  avgwqsz    avgsqsz     sqfull
                         1.8      0.0      1.9S     0.0        0.0           0
dac0-utm       xfer:  %tm_act      bps      tps      bread      bwrtn
                         0.0      0.0      0.0        0.0        0.0
               read:      rps  avgserv  minserv  maxserv   timeouts      fails
                         0.0      0.0      0.0      0.0           0          0
              write:      wps  avgserv  minserv  maxserv   timeouts      fails
                         0.0      0.0      0.0      0.0           0          0
              queue:  avgtime  mintime  maxtime  avgwqsz    avgsqsz     sqfull
                         0.0      0.0      0.0      0.0        0.0           0
cd0            xfer:  %tm_act      bps      tps      bread      bwrtn
                         0.0      0.0      0.0        0.0        0.0
hdisk5         xfer:  %tm_act      bps      tps      bread      bwrtn
                         0.0      0.0      0.0        0.0        0.0
               read:      rps  avgserv  minserv  maxserv   timeouts      fails
                         0.0     22.5      4.8     56.6           0          0
              write:      wps  avgserv  minserv  maxserv   timeouts      fails
                         0.0      0.0      0.0      0.0           0          0
              queue:  avgtime  mintime  maxtime  avgwqsz    avgsqsz     sqfull
                         0.0      0.0      0.0      0.0        0.0           0
hdisk2         xfer:  %tm_act      bps      tps      bread      bwrtn
                         7.4    792.2K    23.2      645.5K     146.7K
               read:      rps  avgserv  minserv  maxserv   timeouts      fails
                        20.7     12.6      0.1      2.2S          0          0
              write:      wps  avgserv  minserv  maxserv   timeouts      fails
                         2.5      1.6      0.3      2.9S          0          0
              queue:  avgtime  mintime  maxtime  avgwqsz    avgsqsz     sqfull
                         1.8      0.0      1.9S     0.0        0.0    26622384
hdisk3         xfer:  %tm_act      bps      tps      bread      bwrtn
                         6.8    640.9K    22.6      568.2K      72.7K
               read:      rps  avgserv  minserv  maxserv   timeouts      fails
                        20.8     11.8      0.1      2.1S          0          0
              write:      wps  avgserv  minserv  maxserv   timeouts      fails
                         1.8      1.2      0.3      3.3S          0          0
              queue:  avgtime  mintime  maxtime  avgwqsz    avgsqsz     sqfull
                         1.1      0.0      2.6S     0.0        0.0    24789662
hdisk4         xfer:  %tm_act      bps      tps      bread      bwrtn
                         0.0      0.0      0.0        0.0        0.0
               read:      rps  avgserv  minserv  maxserv   timeouts      fails
                         0.0      0.0      0.0      0.0           0          0
              write:      wps  avgserv  minserv  maxserv   timeouts      fails
                         0.0      0.0      0.0      0.0           0          0
              queue:  avgtime  mintime  maxtime  avgwqsz    avgsqsz     sqfull
                         0.0      0.0      0.0      0.0        0.0           0
--------------------------------------------------------------------------------
#


# lsdev -C |grep hdisk
hdisk0     Available 03-08-00-4,0  16 Bit LVD SCSI Disk Drive
hdisk1     Available 0A-08-00-4,0  16 Bit LVD SCSI Disk Drive
hdisk2     Available 0C-08-02      1814     DS4700 Disk Array Device
hdisk3     Available 0C-08-02      1814     DS4700 Disk Array Device
hdisk4     Available 0C-08-02      1814     DS4700 Disk Array Device
hdisk5     Available 0C-08-02      1814     DS4700 Disk Array Device
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP