请高手赶紧帮忙！！！！！！！！！iowait比较高

miaohuil

原帖由 ga0feng 于 2006-5-11 14:35 发表\r\n# vmstat 1\r\nprocs     memory            page            disk          faults      cpu\r\nr b w   swap  free  re  mf pi po fr de sr s0 s1 s6 s3   in   sy   cs us sy id\r\n0 0 0 14569024 8617176 0 0  0   ...

\r\n\r\n\r\nDB管理员上午我找过他（当时我怀疑是数据库的错误引起的IOWAIT过高），他也分析了数据库的一些状态，没有发现异常。\r\n\r\n这个block值太高是否是说CPU坏了，还是informix进程把CPU给拖垮了？我应该怎么定位问题的所在呢？？

miaohuil

原帖由 ga0feng 于 2006-5-11 14:36 发表\r\n内存跟swap看起来还好。如果你对DB不懂的话，重起一下DB看一下

\r\n上面有应用在跑，重启数据库需要打报告，还要有准确的分析才行啊！

ga0feng

一切皆有可能。\r\n\r\n用排除法。\r\n1。先把DB关掉，看看performance会不会变好\r\n2。不行的话，再关掉别的几个服务。\r\n\r\n\r\n我认为，跟DB的关系特别大。\r\n不知道你用过lsof跟truss吗？\r\n可以跟踪一下几个可疑进程的状态跟相关的文件打开情况

ga0feng

嗯，看来只能先用lsof跟truss看看了，真手痒。

ga0feng

把输出贴一下\r\n1。/usr/ucb/ps -auxww

miaohuil

原帖由 ga0feng 于 2006-5-11 14:47 发表\r\n一切皆有可能。\r\n\r\n用排除法。\r\n1。先把DB关掉，看看performance会不会变好\r\n2。不行的话，再关掉别的几个服务。\r\n\r\n\r\n我认为，跟DB的关系特别大。\r\n不知道你用过lsof跟truss吗？\r\n可以跟踪一下几个可疑进程的状态 ...

\r\n没有用过啊，是需要安装的吗？如果需要安装新程序也要打报告啊！

miaohuil

原帖由 ga0feng 于 2006-5-11 14:53 发表\r\ntruss是自带的

\r\n怎么用呢？有风险吗？

ga0feng

没有风险的，你有ICQ吗？还方便些\r\n\r\n我看了一下，process共有四个用户的\r\n\r\nnmosuser的可疑进程是dbaccess\r\nnpmuser的进程是几个perl的程序，有可能有问题\r\nroot的进程有vcs还有一些系统进程，先不怀疑\r\n\r\ninformix的进程只有oninit，而最可疑的是root的进程里也有oninit。\r\n\r\n不明白为什么\r\n而且root的oninit进程时间只有0.0几，而informix的进程时间都是上百上千的。\r\n\r\n\r\n初步怀疑是root的oninit进程的问题\r\n\r\nbash-2.03$ cat trouble.log |grep oninit\r\ninformix  1829  0.4 27.849146964476368 ?        S   Apr 21 1531:42 oninit\r\ninformix  1837  0.4 24.849127443996856 ?        S   Apr 21 1467:54 oninit\r\nroot      1958  0.2  0.74914880104360 ?        S   Apr 21 729:05 oninit\r\ninformix  1836  0.2 24.949131604000792 ?        S   Apr 21 2040:13 oninit\r\ninformix  1838  0.1 24.749122003982368 ?        S   Apr 21 923:42 oninit\r\ninformix  1840  0.0 24.449117043930872 ?        S   Apr 21 393:31 oninit\r\nroot      1835  0.0  0.94907904134728 ?        S   Apr 21 10:53 oninit\r\ninformix  1839  0.0 24.649119923961136 ?        S   Apr 21 582:18 oninit\r\ninformix  1841  0.0 24.349113363909816 ?        S   Apr 21 291:03 oninit\r\nroot      1842  0.0  0.04907904  928 ?        S   Apr 21  0:02 oninit\r\nroot      1843  0.0  0.04907904  888 ?        S   Apr 21  0:03 oninit\r\nroot      1844  0.0  0.84907904124448 ?        S   Apr 21 458:13 oninit\r\nroot      1845  0.0  0.7490795299680 ?        S   Apr 21  7:02 oninit\r\nroot      1872  0.0  0.5490790482472 ?        S   Apr 21  1:00 oninit\r\nroot      1876  0.0  0.3490790437632 ?        S   Apr 21  0:09 oninit\r\nroot      1877  0.0  0.1490790414688 ?        S   Apr 21  0:04 oninit\r\nroot      1878  0.0  0.14907904 6984 ?        S   Apr 21  0:03 oninit\r\nroot      1889  0.0  0.14907904 5808 ?        S   Apr 21  0:03 oninit\r\nroot      1902  0.0  0.14907904 5288 ?        S   Apr 21  0:03 oninit\r\nroot      1912  0.0  0.14907904 5320 ?        S   Apr 21  0:03 oninit\r\nroot      1928  0.0  0.14907904 4672 ?        S   Apr 21  0:02 oninit\r\nroot      1929  0.0  0.14907904 4584 ?        S   Apr 21  0:02 oninit\r\nroot      1930  0.0  0.14907904 4248 ?        S   Apr 21  0:02 oninit\r\nroot      1932  0.0  0.14907904 2752 ?        S   Apr 21  0:02 oninit\r\nroot      1933  0.0  0.14907904 3376 ?        S   Apr 21  0:02 oninit\r\nroot      1934  0.0  0.14907904 3776 ?        S   Apr 21  0:02 oninit\r\nroot      1935  0.0  0.04907904 2192 ?        S   Apr 21  0:02 oninit\r\nroot      1936  0.0  0.14907904 4000 ?        S   Apr 21  0:02 oninit\r\nroot      1937  0.0  0.04907904 1488 ?        S   Apr 21  0:02 oninit\r\nroot      1938  0.0  0.04907904 1496 ?        S   Apr 21  0:02 oninit\r\nroot      1944  0.0  0.14907904 2520 ?        S   Apr 21  0:02 oninit\r\nroot      1945  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit\r\nroot      1946  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit\r\nroot      1947  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit\r\nroot      1948  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit\r\nroot      1949  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit\r\nroot      1950  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit\r\nroot      1951  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit\r\nroot      1952  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit\r\nroot      1953  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit\r\nroot      1954  0.0  0.04907904 1960 ?        S   Apr 21  0:02 oninit\r\nroot      1955  0.0  0.04907904  896 ?        S   Apr 21  0:02 oninit\r\nroot      1956  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit\r\nroot      1957  0.0  0.04907904  920 ?        S   Apr 21  0:02 oninit

ga0feng

你问一下db的管理员，看看这种情况是否是正常的。\r\n如果不正常的话，把下面的输出贴出来\r\nps -ef |grep oninit\r\n看看这些oninit的进程pid之间的关系，父进程跟子进程

miaohuil

dmesg中有这样的报错，是不是硬盘有一些缺陷？这些缺陷是否也会造成iowait较高呢？\r\n\r\nMay 10 11:05:51 sc3db1 scsi: [ID 107833 kern.warning] WARNING: /ssm@0,0/pci@19,600000/fibre-channel@1/sd@1,1 (sd100):\r\nMay 10 11:05:51 sc3db1  Error for Command: read(10)                Error Level: Retryable\r\nMay 10 11:05:51 sc3db1 scsi: [ID 107833 kern.notice]    Requested Block: 255881512                 Error Block: 255881512\r\nMay 10 11:05:51 sc3db1 scsi: [ID 107833 kern.notice]    Vendor: DGC                                Serial Number: 030000160ACL\r\nMay 10 11:05:51 sc3db1 scsi: [ID 107833 kern.notice]    Sense Key: Unit Attention\r\nMay 10 11:05:51 sc3db1 scsi: [ID 107833 kern.notice]    ASC: 0x2a (<vendor unique code 0x2a>), ASCQ: 0x81, FRU: 0x0\r\nMay 10 11:06:53 sc3db1 scsi: [ID 107833 kern.warning] WARNING: /ssm@0,0/pci@19,700000/lpfc@1/sd@0,1 (sd60):\r\nMay 10 11:06:53 sc3db1  Error for Command: read(10)                Error Level: Retryable\r\nMay 10 11:06:53 sc3db1 scsi: [ID 107833 kern.notice]    Requested Block: 281044020                 Error Block: 281044020\r\nMay 10 11:06:53 sc3db1 scsi: [ID 107833 kern.notice]    Vendor: DGC                                Serial Number: 030000160ACL\r\nMay 10 11:06:53 sc3db1 scsi: [ID 107833 kern.notice]    Sense Key: Unit Attention\r\nMay 10 11:06:53 sc3db1 scsi: [ID 107833 kern.notice]    ASC: 0x2a (<vendor unique code 0x2a>), ASCQ: 0x81, FRU: 0x0\r\nMay 10 11:06:53 sc3db1 scsi: [ID 107833 kern.warning] WARNING: /ssm@0,0/pci@19,600000/fibre-channel@1/sd@1,1 (sd100):\r\nMay 10 11:06:53 sc3db1  Error for Command: read(10)                Error Level: Retryable\r\nMay 10 11:06:53 sc3db1 scsi: [ID 107833 kern.notice]    Requested Block: 281044048                 Error Block: 281044048\r\nMay 10 11:06:53 sc3db1 scsi: [ID 107833 kern.notice]    Vendor: DGC                                Serial Number: 030000160ACL\r\nMay 10 11:06:53 sc3db1 scsi: [ID 107833 kern.notice]    Sense Key: Unit Attention\r\nMay 10 11:06:53 sc3db1 scsi: [ID 107833 kern.notice]    ASC: 0x2a (<vendor unique code 0x2a>), ASCQ: 0x81, FRU: 0x0\r\nMay 10 15:06:14 sc3db1 scsi: [ID 107833 kern.warning] WARNING: /ssm@0,0/pci@19,600000/fibre-channel@1/sd@0,3 (sd94):\r\nMay 10 15:06:14 sc3db1  Error for Command: write                   Error Level: Retryable\r\nMay 10 15:06:14 sc3db1 scsi: [ID 107833 kern.notice]    Requested Block: 73741                     Error Block: 73741\r\nMay 10 15:06:14 sc3db1 scsi: [ID 107833 kern.notice]    Vendor: DGC                                Serial Number: 0100001381CL\r\nMay 10 15:06:14 sc3db1 scsi: [ID 107833 kern.notice]    Sense Key: Unit Attention\r\nMay 10 15:06:14 sc3db1 scsi: [ID 107833 kern.notice]    ASC: 0x2a (<vendor unique code 0x2a>), ASCQ: 0x81, FRU: 0x0\r\nMay 10 15:06:17 sc3db1 scsi: [ID 107833 kern.warning] WARNING: /ssm@0,0/pci@19,700000/lpfc@1/sd@1,3 (sd70):\r\nMay 10 15:06:17 sc3db1  Error for Command: write                   Error Level: Retryable\r\nMay 10 15:06:17 sc3db1 scsi: [ID 107833 kern.notice]    Requested Block: 9984                      Error Block: 9984\r\nMay 10 15:06:17 sc3db1 scsi: [ID 107833 kern.notice]    Vendor: DGC                                Serial Number: 0100001381CL\r\nMay 10 15:06:17 sc3db1 scsi: [ID 107833 kern.notice]    Sense Key: Unit Attention\r\nMay 10 15:06:17 sc3db1 scsi: [ID 107833 kern.notice]    ASC: 0x2a (<vendor unique code 0x2a>), ASCQ: 0x81, FRU: 0x0\r\nMay 11 11:42:13 sc3db1 explorer: [ID 702911 daemon.notice] Explorer started\r\nMay 11 11:45:53 sc3db1 explorer: [ID 702911 daemon.notice] Explorer finished\r\nMay 11 12:30:44 sc3db1 explorer: [ID 702911 daem