AIX系统日志报错，请过来看看

zmvb

IBM S85小型机，AIX4.3.3,存储设备为shark f20\r\n从昨天下午到今天早上6点一直报错，如下：\r\n一、errpt\r\nA7212C7B   0910063005 P H hdisk156 : 0x  DEVICE ACCESS PROBLEM\r\n3074FEB7   0910063005 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910020005 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910020005 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910020005 T H fscsi0         ADAPTER ERROR\r\nA7212C7B   0910020005 P H hdisk141 : 0x  DEVICE ACCESS PROBLEM\r\n3074FEB7   0910020005 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910020005 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910010505 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910010505 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910010505 T H fscsi0         ADAPTER ERROR\r\nF1F33C8F   0910010505 I H hdisk61 : 0x   FE50\r\nA39F8A49   0910010505 T S syserrlg       ERROR LOGGING BUFFER OVERFLOW\r\n3074FEB7   0910001705 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910001705 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910001705 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910001705 T H fscsi0         ADAPTER ERROR\r\n3074FEB7   0910001705 T H fscsi0         ADAPTER ERROR\r\n二、errpt -aj A7212C7B:\r\nLABEL:          VPATH_DEVICE_OFFLIN\r\nIDENTIFIER:     A7212C7B\r\n\r\nDate/Time:       Fri Sep  9 15:56:31\r\nSequence Number: 18444\r\nMachine Id:      0001534A4C00\r\nNode Id:         sjz2q_jf2\r\nClass:           H\r\nType:            PERM\r\nResource Name:   hdisk220 : 0x\r\nResource Class:  NONE\r\nResource Type:   NONE\r\nLocation:        NONE\r\nVPD:\r\n\r\nDescription\r\nDEVICE ACCESS PROBLEM\r\n\r\nProbable Causes\r\nDISK\r\nSCSI ADAPTER\r\nSCSI CABLE\r\nFailure Causes\r\nDISK\r\nSCSI ADAPTER\r\nCABLE LOOSE OR DEFECTIVE\r\n\r\n        Recommended Actions\r\n        PERFORM PROBLEM DETERMINATION ON SCSI TARGET DEVICE\r\n        PERFORM PROBLEM DETERMINATION ON HOST SCSI ADAPTER\r\n                REPLACE SCSI CABLE\r\n\r\nDetail Data\r\nSENSE DATA\r\n0000 0002 00C7 5579 0000 0003 0000 0000\r\n三、errtp -aj 3074FEB7:\r\nLABEL:          FSCSI_ERR4\r\nIDENTIFIER:     3074FEB7\r\n\r\nDate/Time:       Fri Sep  9 20:52:19\r\nSequence Number: 20374\r\nMachine Id:      0001534A4C00\r\nNode Id:         sjz2q_jf2\r\nClass:           H\r\nType:            TEMP\r\nResource Name:   fscsi0\r\nResource Class:  driver\r\nResource Type:   efscsi\r\nLocation:        30-70-01\r\n\r\nDescription\r\nADAPTER ERROR\r\n\r\nProbable Causes\r\nADAPTER HARDWARE OR CABLE\r\nADAPTER MICROCODE\r\nFIBRE CHANNEL SWITCH OR FC-AL HUB\r\nFailure Causes\r\nADAPTER\r\nCABLES AND CONNECTIONS\r\nDEVICE\r\n\r\n        Recommended Actions\r\n        PERFORM PROBLEM DETERMINATION PROCEDURES\r\n        CHECK CABLES AND THEIR CONNECTIONS\r\n        VERIFY DEVICE CONFIGURATION\r\n\r\nDetail Data\r\nSENSE DATA\r\n0000 0000 0000 00B1 0000 0045 0200 0000 0000 0000 0000 0000 0000 0000 0000 0000\r\n0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0001 1700 0000 0000\r\n0001 1200 7D7B 02A6 0000 0000 0000 0000 0000 0000 4814 5A62 3980 10B2 0000 0000\r\n0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000\r\n0000 0000 422F 0000 5112 0002 0000 0100 0000 0000 0000 0000 0000 0000 0000 0000\r\n0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0069 1000 0000\r\nC926 0A96 5005 0763 00C0 84F3 0300 0000 0000 0000 0000 0000 0000 0000 0000 0000\r\n3002 C000\r\n四、errpt -aj F1F33C8F:\r\nLABEL:          VPATH_DEVICE_ONLINE\r\nIDENTIFIER:     F1F33C8F\r\n\r\nDate/Time:       Fri Sep  9 15:56:56\r\nSequence Number: 18451\r\nMachine Id:      0001534A4C00\r\nNode Id:         sjz2q_jf2\r\nClass:           H\r\nType:            INFO\r\nResource Name:   hdisk91 : 0x\r\nResource Class:  NONE\r\nResource Type:   NONE\r\nLocation:        NONE\r\nVPD:\r\n\r\nDescription\r\nFE50\r\nProbable Causes\r\nDISK\r\nSCSI ADAPTER\r\nSCSI CABLE\r\n\r\nFailure Causes\r\nDISK\r\nSCSI ADAPTER\r\nCABLE LOOSE OR DEFECTIVE\r\n\r\n        Recommended Actions\r\n        PERFORM PROBLEM DETERMINATION ON SCSI TARGET DEVICE\r\n        PERFORM PROBLEM DETERMINATION ON HOST SCSI ADAPTER\r\n                REPLACE SCSI CABLE\r\n\r\nDetail Data\r\nSENSE DATA\r\n0000 0001 068A 1BB8 0000 0000 0000 0000\r\n五、errpt -aj A39F8A49:\r\nLABEL:          LOST_EVENTS\r\nIDENTIFIER:     A39F8A49\r\n\r\nDate/Time:       Fri Sep  9 15:56:31\r\nSequence Number: 18432\r\nMachine Id:      0001534A4C00\r\nNode Id:         sjz2q_jf2\r\nClass:           S\r\nType:            TEMP\r\nResource Name:   syserrlg\r\n\r\nDescription\r\nERROR LOGGING BUFFER OVERFLOW\r\n\r\nProbable Causes\r\nEXCESSIVE LOGGING BY SOFTWARE PROGRAM\r\n\r\nInstall Causes\r\nBUFFER SIZE SET TOO SMALL\r\n\r\n        Recommended Actions\r\n        INCREASE BUFFER SIZE\r\nFailure Causes\r\nEXCESSIVE LOGGING BY SOFTWARE PROGRAM\r\n\r\n        Recommended Actions\r\n        IDENTIFY OFFENDING SOFTWARE COMPONENT\r\n        CORRECT THEN RETRY OFFENDING SOFTWARE COMPONENT\r\n\r\nDetail Data\r\nERROR ID OF FIRST EVENT DISCARDED\r\n3074FEB7\r\nERROR ID OF LAST EVENT DISCARDED\r\nA7212C7B\r\nNUMBER OF EVENTS DISCARDED\r\n10\r\n六、lsvpcfg:\r\nvpath0 (Avail pv vg_jf4) 50018267 = hdisk2 (Avail ) hdisk123 (Avail ) hdisk244 (Avail ) hdisk365 (Av\r\nail )\r\nvpath1 (Avail pv vg_jf5) 50118267 = hdisk3 (Avail ) hdisk124 (Avail ) hdisk245 (Avail ) hdisk366 (Av\r\nail )\r\nvpath2 (Avail pv vgoffline_bak) 50218267 = hdisk4 (Avail ) hdisk125 (Avail ) hdisk246 (Avail ) hdisk\r\n367 (Avail )\r\nvpath3 (Avail pv vgoffline) 50318267 = hdisk5 (Avail ) hdisk126 (Avail ) hdisk247 (Avail ) hdisk368\r\n(Avail )\r\nvpath4 (Avail pv vgoffline) 50418267 = hdisk6 (Avail ) hdisk127 (Avail ) hdisk248 (Avail ) hdisk369\r\n(Avail )\r\nvpath5 (Avail pv vg_jf7) 50518267 = hdisk7 (Avail ) hdisk128 (Avail ) hdisk249 (Avail ) hdisk370 (Av\r\nail )\r\nvpath6 (Avail pv vg_jf6) 50618267 = hdisk8 (Avail ) hdisk129 (Avail ) hdisk250 (Avail ) hdisk371 (Av\r\nail )\r\nvpath7 (Avail ) 50818267 = hdisk9 (Avail pv ) hdisk130 (Avail pv ) hdisk251 (Avail pv ) hdisk372 (Av\r\nail pv )\r\nvpath8 (Avail ) 50918267 = hdisk10 (Avail pv ) hdisk131 (Avail pv ) hdisk252 (Avail pv ) hdisk373 (A\r\nvail pv )\r\nvpath9 (Avail ) 50A18267 = hdisk11 (Avail pv ) hdisk132 (Avail pv ) hdisk253 (Avail pv ) hdisk374 (A\r\nvail pv )\r\nvpath10 (Avail ) 50B18267 = hdisk12 (Avail pv ) hdisk133 (Avail pv ) hdisk254 (Avail pv ) hdisk375 (\r\nAvail pv )\r\n七、datapath query device:\r\n================================================================\r\nPath#              Adapter/Hard Disk    State     Mode     Select     Errors\r\n    0                  fscsi0/hdisk2     DEAD   NORMAL   51116333         13\r\n    1                fscsi0/hdisk123     DEAD   NORMAL   51297361          9\r\n    2                fscsi1/hdisk244     OPEN   NORMAL   52338582          0\r\n    3                fscsi1/hdisk365     OPEN   NORMAL   52481340          0\r\n\r\nDEV#:   1  DEVICE NAME: vpath1  TYPE: 2105F20   SERIAL: 50118267\r\nPOLICY:    Optimized\r\n================================================================\r\nPath#              Adapter/Hard Disk    State     Mode     Select     Errors\r\n    0                  fscsi0/hdisk3     DEAD   NORMAL   21086155          5\r\n    1                fscsi0/hdisk124     DEAD   NORMAL   21159271         11\r\n    2                fscsi1/hdisk245     OPEN   NORMAL   21274539          0\r\n    3                fscsi1/hdisk366     OPEN   NORMAL   21335545          0\r\n\r\nDEV#:   2  DEVICE NAME: vpath2  TYPE: 2105F20   SERIAL: 50218267\r\nPOLICY:    Optimized\r\n================================================================\r\n是不是shark的一条光纤通路有问题？想请教到底是哪的问题，会不会对应用或数据造成影响。谢谢

li

一般shark和主机连接的san拓扑应该是这样：\r\n\r\nfcs0 ---->; switch1 ---->; cluster1 HBA1\r\n                            ---->; cluster2 HBA1\r\nfcs1 ---->; switch2 ---->; cluster1 HBA2\r\n                            ---->; cluster2 HBA2\r\n\r\n根据拓扑分析,因该不是shark的问题,故障应该处在fcs0或者switch1上。估计交换机的面大，建议你登录到交换机看看错误日志。

新手上路samson

兄弟无知 shark 是什么呀？？？

zlg88

第一个光纤通道有问题,由于Shark中的两个Host BAY不可能同时坏,且另一个光纤通道也可以证明Host BAY是正常的,因此初步诊断为:\r\n不是光交换机就是HBA卡的问题,要不就是光纤交换机到HOST的光纤断了!!!

zmvb

谢谢楼上的帮助，今天IBM工程师过来看看，我会及时将结果公布。

zmvb

昨天我下到机房看了看，是S85上的一块网卡坏了。我们两台S85为OPS，做着HA，只有一台报错，其实就可以说明SHARK、光电交换机及连线应该没问题，应该是小型机本身的原因，是我没有把情况说清楚。明天IBM来人换网卡。谢谢大家的关注。\r\n另外，问一下datapath query adapter中的state有几种状态？DEGARAD是什么意思？\r\n# datapath query adapter\r\n\r\nActive Adapters :2\r\n\r\nAdpt#     Adapter Name   State     Mode     Select     Errors  Paths  Active\r\n    0           fscsi0  DEGRAD   ACTIVE  548297959       1190    398      36\r\n    1           fscsi1  NORMAL   ACTIVE 1729653468          0    398     210

xmubeta

看错误报告，和网卡一点关系都没有。\r\n\r\n  0           fscsi0  DEGRAD   ACTIVE  548297959       1190    398      36 \r\n这表示fscsi0性能下降。这一路肯定有问题。

zlg88

是FC卡吧??怎么会是网卡坏了呢!!!

sunbeat

hehe\r\n头痛医脚\r\n不过这里可不行，FC卡有问题

xmubeta

为什么把FC卡叫做网卡呢，真是够晕的啊。