免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: mycoding
打印 上一主题 下一主题

分享一起经典故障案例 [复制链接]

论坛徽章:
0
41 [报告]
发表于 2010-04-02 17:00 |只看该作者
看样子千兆网络该升级了,单块硬盘的顺序读取速度现在都有100MB了,如果存储有多块硬盘,并且是顺序读写,千兆的网卡确实是个瓶颈。

论坛徽章:
0
42 [报告]
发表于 2010-04-02 18:02 |只看该作者
回复 41# sanyork


    恩,相应的网络设备也需要升级,不过这需要一段时间。

论坛徽章:
1
2015年辞旧岁徽章
日期:2015-03-03 16:54:15
43 [报告]
发表于 2010-04-02 22:35 |只看该作者
确实罕见,值得好好研究

论坛徽章:
0
44 [报告]
发表于 2010-04-02 23:01 |只看该作者
确实少见...
学习了...
谢谢分享!!!

论坛徽章:
0
45 [报告]
发表于 2010-04-05 10:39 |只看该作者
呵呵,还真是看出来了..

论坛徽章:
0
46 [报告]
发表于 2010-04-05 14:01 |只看该作者
0问题简化及归类
从目前信息可以,就与A机通讯故障来说, B机,C机可能做为代表来专门研究。


1硬件排查
因为B机与A机通讯正常,换C ,B 交换机上端口, 如果发现换端口后,C机与A通讯正常则检查交换机设置。

2 VIP 设置检查

暂时禁掉相关VIP设置,看看B机,C机与A机通讯是否正常。

3. DNS 检查
如果以前是主机名,则换为IP再试

4. 关掉所有节点上QOS,防火墙,网络统计等。

5. 拔掉所有交换机端口上网线,只保留,A C ,检查问题,如无问题则加入B机并启用VIP再检查。

6. 检查A机上iptables ,ionice 等等设置

7. A机上抓包,看看是否有异常的广播风暴或其它。

9. 把SAN存储换为本地存储等.

论坛徽章:
0
47 [报告]
发表于 2010-04-05 14:10 |只看该作者
原来是网卡到了瓶颈

这是什么原因造成的? A,B负载均衡失败?
不可能当初规划时没有考虑到流量问题吧。

像您这样场景,最好用10G 卡,最少也得NIC bonding + DNSRound-robin

论坛徽章:
0
48 [报告]
发表于 2010-04-06 09:01 |只看该作者
原来是网卡的瓶颈效应,那为什么服务器B没有这种问题呢?

论坛徽章:
0
49 [报告]
发表于 2010-04-06 09:24 |只看该作者
切换后B服务器还没有达到峰值
B服务器还是正常的
过一段时间
B服务器也可能不正常了

所以楼主那边调整应该是包含业务层面上的调整(例如client的连接释放或者连接数)或者流量上的调整了

论坛徽章:
0
50 [报告]
发表于 2010-04-06 09:38 |只看该作者
回复 49# woluty


    嗯,业务层面做了调整,因为之前其他城市的流量没有切换到此IDC,切换后流量增加了很多,之前业务层旧的配置无法适应新的业务架构导致问题出现。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP