call trace 分析疑问

bgsmgrx

服务器从凌晨开始出现无法访问的现象，ping也不通，直接接显示器操作非常慢，当时操作人员直接重启了服务器，时候看日志的时候看到了许多call trace的信息；
在网上查了一下资料：
所谓，soft lockup就是说，这个bug没有让系统彻底死机，但是若干个进程（或者kernel thread）被锁死在了某个状态（一般在内核区域），很多情况下这个是由于内核锁的使用的问题；
但是如何从call trace的信息中查询到有关进程的信息，“NETDEV WATCHDOG: eth3: transmit timed out”会不会有影响，因为每一次出现这个信息就会有soft locakup

Feb 12 03:39:45 byweb01 kernel: NETDEV WATCHDOG: eth3: transmit timed out
Feb 12 03:39:53 byweb01 kernel: NETDEV WATCHDOG: eth3: transmit timed out
Feb 12 03:39:53 byweb01 kernel: BUG: soft lockup detected on CPU#2!
Feb 12 03:39:53 byweb01 kernel:
Feb 12 03:39:53 byweb01 kernel: Call Trace:
Feb 12 03:39:53 byweb01 kernel:  [<a000000100014140>] show_stack+0x40/0xa0
Feb 12 03:39:53 byweb01 kernel:                                 sp=e00000031b19f720 bsp=e00000031b199660
Feb 12 03:39:53 byweb01 kernel:  [<a0000001000141d0>] dump_stack+0x30/0x60
Feb 12 03:39:53 byweb01 kernel:                                 sp=e00000031b19f8f0 bsp=e00000031b199648
Feb 12 03:39:53 byweb01 kernel:  [<a0000001000e3fc0>] softlockup_tick+0x200/0x240
Feb 12 03:39:53 byweb01 kernel:                                 sp=e00000031b19f8f0 bsp=e00000031b199600
Feb 12 03:39:53 byweb01 kernel:  [<a000000100096b30>] run_local_timers+0x30/0x60
Feb 12 03:39:53 byweb01 kernel:                                 sp=e00000031b19f8f0 bsp=e00000031b1995e0
Feb 12 03:39:53 byweb01 kernel:  [<a000000100096be0>] update_process_times+0x80/0x100
Feb 12 03:39:53 byweb01 kernel:                                 sp=e00000031b19f8f0 bsp=e00000031b1995b0
Feb 12 03:39:53 byweb01 kernel:  [<a0000001000377c0>] timer_interrupt+0x180/0x360
Feb 12 03:39:53 byweb01 kernel:                                 sp=e00000031b19f8f0 bsp=e00000031b199570
Feb 12 03:39:53 byweb01 kernel:  [<a0000001000e4630>] handle_IRQ_event+0x90/0x120
Feb 12 03:39:53 byweb01 kernel:                                 sp=e00000031b19f8f0 bsp=e00000031b199530
Feb 12 03:39:54 byweb01 kernel:  [<a0000001000e47f0>] __do_IRQ+0x130/0x420
Feb 12 03:39:54 byweb01 kernel:                                 sp=e00000031b19f8f0 bsp=e00000031b1994e8
Feb 12 03:39:54 byweb01 kernel:  [<a000000100011c50>] ia64_handle_irq+0xf0/0x1a0
Feb 12 03:39:54 byweb01 kernel:                                 sp=e00000031b19f8f0 bsp=e00000031b1994b8
Feb 12 03:39:54 byweb01 kernel:  [<a00000010000c700>] __ia64_leave_kernel+0x0/0x280
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19f8f0 bsp=e00000031b1994b8
Feb 12 03:39:55 byweb01 kernel:  [<a000000100054f90>] smp_call_function+0x330/0x400
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fac0 bsp=e00000031b199448
Feb 12 03:39:55 byweb01 kernel:  [<a000000100086680>] on_each_cpu+0x40/0xe0
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fae0 bsp=e00000031b199408
Feb 12 03:39:55 byweb01 kernel:  [<a000000100054150>] smp_flush_tlb_all+0x30/0x60
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fae0 bsp=e00000031b1993e8
Feb 12 03:39:55 byweb01 kernel:  [<a000000100060360>] ia64_global_tlb_purge+0x60/0x120
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fae0 bsp=e00000031b1993b0
Feb 12 03:39:55 byweb01 kernel:  [<a0000001000607f0>] flush_tlb_range+0x1b0/0x240
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fae0 bsp=e00000031b199368
Feb 12 03:39:55 byweb01 kernel:  [<a00000010012a7b0>] page_mkclean+0x390/0x4c0
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fae0 bsp=e00000031b199318
Feb 12 03:39:55 byweb01 kernel:  [<a0000001001052a0>] clear_page_dirty_for_io+0x140/0x240
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fb20 bsp=e00000031b1992f0
Feb 12 03:39:55 byweb01 kernel:  [<a0000001001b2090>] mpage_writepages+0x3d0/0x8a0
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fb20 bsp=e00000031b199278
Feb 12 03:39:55 byweb01 kernel:  [<a0000001001057d0>] do_writepages+0xd0/0x120
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fbc0 bsp=e00000031b199250
Feb 12 03:39:55 byweb01 kernel:  [<a0000001001ae580>] __writeback_single_inode+0x400/0x7e0
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fbc0 bsp=e00000031b199200
Feb 12 03:39:55 byweb01 kernel:  [<a0000001001af140>] sync_sb_inodes+0x480/0x660
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fc00 bsp=e00000031b1991a0
Feb 12 03:39:55 byweb01 kernel:  [<a0000001001afc40>] writeback_inodes+0x140/0x260
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fc00 bsp=e00000031b199168
Feb 12 03:39:55 byweb01 kernel:  [<a000000100106530>] wb_kupdate+0x170/0x280
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fc00 bsp=e00000031b199130
Feb 12 03:39:55 byweb01 kernel:  [<a000000100107450>] pdflush+0x370/0x560
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fc50 bsp=e00000031b199110
Feb 12 03:39:55 byweb01 kernel:  [<a0000001000af790>] kthread+0x230/0x2c0
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fd50 bsp=e00000031b1990c8
Feb 12 03:39:55 byweb01 kernel:  [<a0000001000126b0>] kernel_thread_helper+0x30/0x60
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fe30 bsp=e00000031b1990a0
Feb 12 03:39:55 byweb01 kernel:  [<a0000001000090c0>] start_kernel_thread+0x20/0x40
Feb 12 03:39:55 byweb01 kernel:                                 sp=e00000031b19fe30 bsp=e00000031b1990a0

gongjitie

掩了隔窗纱，隔了月中牙

dengbao2001

不知这个思路是否可行

用strace 追踪下系统调用，记录到某个文件中

如果是系统的bug, 有否尝试升级新版本？