忘记密码   免费注册 查看新帖 | 论坛精华区

ChinaUnix.net

  平台 论坛 博客 认证专区 大话IT 视频 徽章 文库 沙龙 自测 下载 频道自动化运维 虚拟化 储存备份 C/C++ PHP MySQL 嵌入式 Linux系统
最近访问板块 发新帖
楼主: 王楠w_n

【盖楼活动】程序员亲启!当你的新年遭遇BUG(获奖名单已公布) [复制链接]

论坛徽章:
1
2017金鸡报晓
日期:2017-02-08 10:39:42
发表于 2017-01-20 14:41 |显示全部楼层
印象很深刻,时间2015年5月的一个周天的中午正在吃饭。
有一天早上用户打电话过来说系统有问题,起初也没有引起很大的重视以为就是简单的性能问题而已,然后打开电脑一看服务器居然登录不了。顿时感觉不太妙,然后又连接了其他的服务器,发现了一个神奇的现象有的服务器能登录,有的服务器不能登录。
顿时慌了,发生了什么。
紧接着马上打网络组的同事,原来他们在前几分钟也发现了问题,经过排除发现机房停电了。
机房放在工业园,离办公的地方大约有100公里,80分钟的路程。
吃了几口饭之后,叫了部车,直接到机房,发现机房局部位置的温度超过了40度了。
一些服务器由于温度过高直接关机了,包括监控平台,早早的也宕机了,没有完成监控的使命。

经过询问后得知电还不确定什么时候能输送到,就赶紧立刻把还在运行的服务器全部正常关机了,避免数据的丢失。

经过2个小时后,终于来电了,这时候就是打开服务器,同时还要保佑那些数据库能够正常启动。

刚开始还是挺顺利的,但是到核心的一台服务器的时候,发现启动不起来了。报的是操作系统的操作,这个时候整个头都大了,赶紧联系厂家和其他技术人员进行处理。经过3个小时的抢救,系统终于恢复正常了。

这是我们经历的最为惊险的一次问题,当然也有很多巧合在里面,
首先是停电没有及时的通知到it部门,
第二是供电的告警短信欠费导致预警短信不能发出,
第三是监控的平台第一时间宕机了。

这次的停电直接导致宕机7个小时,整年的it非停机时间都在这次中用完了。

论坛徽章:
1
2017金鸡报晓
日期:2017-02-08 10:39:42
发表于 2017-01-20 14:42 |显示全部楼层
公司春节出了bug,又可以去公司打台球了!!!

论坛徽章:
1
2017金鸡报晓
日期:2017-02-08 10:39:42
发表于 2017-01-20 14:42 |显示全部楼层
回复 1# 王楠w_n

印象很深刻,时间2015年5月的一个周天的中午正在吃饭。
有一天早上用户打电话过来说系统有问题,起初也没有引起很大的重视以为就是简单的性能问题而已,然后打开电脑一看服务器居然登录不了。顿时感觉不太妙,然后又连接了其他的服务器,发现了一个神奇的现象有的服务器能登录,有的服务器不能登录。
顿时慌了,发生了什么。
紧接着马上打网络组的同事,原来他们在前几分钟也发现了问题,经过排除发现机房停电了。
机房放在工业园,离办公的地方大约有100公里,80分钟的路程。
吃了几口饭之后,叫了部车,直接到机房,发现机房局部位置的温度超过了40度了。
一些服务器由于温度过高直接关机了,包括监控平台,早早的也宕机了,没有完成监控的使命。
经过询问后得知电还不确定什么时候能输送到,就赶紧立刻把还在运行的服务器全部正常关机了,避免数据的丢失。
经过2个小时后,终于来电了,这时候就是打开服务器,同时还要保佑那些数据库能够正常启动。
刚开始还是挺顺利的,但是到核心的一台服务器的时候,发现启动不起来了。报的是操作系统的操作,这个时候整个头都大了,赶紧联系厂家和其他技术人员进行处理。经过3个小时的抢救,系统终于恢复正常了。
这是我们经历的最为惊险的一次问题,当然也有很多巧合在里面,
首先是停电没有及时的通知到it部门,
第二是供电的告警短信欠费导致预警短信不能发出,
第三是监控的平台第一时间宕机了。
这次的停电直接导致宕机7个小时,整年的it非停机时间都在这次中用完了。

论坛徽章:
1
2017金鸡报晓
日期:2017-02-08 10:39:42
发表于 2017-01-20 14:42 |显示全部楼层
回复 1# 王楠w_n

印象很深刻,时间2015年5月的一个周天的中午正在吃饭。
有一天早上用户打电话过来说系统有问题,起初也没有引起很大的重视以为就是简单的性能问题而已,然后打开电脑一看服务器居然登录不了。顿时感觉不太妙,然后又连接了其他的服务器,发现了一个神奇的现象有的服务器能登录,有的服务器不能登录。
顿时慌了,发生了什么。
紧接着马上打网络组的同事,原来他们在前几分钟也发现了问题,经过排除发现机房停电了。
机房放在工业园,离办公的地方大约有100公里,80分钟的路程。
吃了几口饭之后,叫了部车,直接到机房,发现机房局部位置的温度超过了40度了。
一些服务器由于温度过高直接关机了,包括监控平台,早早的也宕机了,没有完成监控的使命。
经过询问后得知电还不确定什么时候能输送到,就赶紧立刻把还在运行的服务器全部正常关机了,避免数据的丢失。
经过2个小时后,终于来电了,这时候就是打开服务器,同时还要保佑那些数据库能够正常启动。
刚开始还是挺顺利的,但是到核心的一台服务器的时候,发现启动不起来了。报的是操作系统的操作,这个时候整个头都大了,赶紧联系厂家和其他技术人员进行处理。经过3个小时的抢救,系统终于恢复正常了。
这是我们经历的最为惊险的一次问题,当然也有很多巧合在里面,
首先是停电没有及时的通知到it部门,
第二是供电的告警短信欠费导致预警短信不能发出,
第三是监控的平台第一时间宕机了。
这次的停电直接导致宕机7个小时,整年的it非停机时间都在这次中用完了。

论坛徽章:
1
2017金鸡报晓
日期:2017-02-08 10:39:42
发表于 2017-01-20 14:43 |显示全部楼层
回复 1# 王楠w_n

印象很深刻,时间2015年5月的一个周天的中午正在吃饭。
有一天早上用户打电话过来说系统有问题,起初也没有引起很大的重视以为就是简单的性能问题而已,然后打开电脑一看服务器居然登录不了。顿时感觉不太妙,然后又连接了其他的服务器,发现了一个神奇的现象有的服务器能登录,有的服务器不能登录。
顿时慌了,发生了什么。
紧接着马上打网络组的同事,原来他们在前几分钟也发现了问题,经过排除发现机房停电了。
机房放在工业园,离办公的地方大约有100公里,80分钟的路程。
吃了几口饭之后,叫了部车,直接到机房,发现机房局部位置的温度超过了40度了。
一些服务器由于温度过高直接关机了,包括监控平台,早早的也宕机了,没有完成监控的使命。
经过询问后得知电还不确定什么时候能输送到,就赶紧立刻把还在运行的服务器全部正常关机了,避免数据的丢失。
经过2个小时后,终于来电了,这时候就是打开服务器,同时还要保佑那些数据库能够正常启动。
刚开始还是挺顺利的,但是到核心的一台服务器的时候,发现启动不起来了。报的是操作系统的操作,这个时候整个头都大了,赶紧联系厂家和其他技术人员进行处理。经过3个小时的抢救,系统终于恢复正常了。
这是我们经历的最为惊险的一次问题,当然也有很多巧合在里面,
首先是停电没有及时的通知到it部门,
第二是供电的告警短信欠费导致预警短信不能发出,
第三是监控的平台第一时间宕机了。
这次的停电直接导致宕机7个小时,整年的it非停机时间都在这次中用完了。

论坛徽章:
16
处女座
日期:2014-07-18 14:50:542017金鸡报晓
日期:2017-02-08 10:33:212017金鸡报晓
日期:2017-01-10 15:13:2915-16赛季CBA联赛之深圳
日期:2016-12-15 17:55:53C
日期:2016-10-25 16:00:1515-16赛季CBA联赛之新疆
日期:2016-07-21 14:02:0415-16赛季CBA联赛之江苏
日期:2016-06-30 12:15:04shanzhi
日期:2016-06-17 17:59:31平安夜徽章
日期:2015-12-26 00:06:30综合交流区版块每日发帖之星
日期:2015-10-10 06:20:00IT运维版块每日发帖之星
日期:2015-09-01 06:20:002015七夕节徽章
日期:2015-08-21 11:06:17
发表于 2017-01-20 15:03 |显示全部楼层
本帖最后由 shenlanyouyu 于 2017-01-21 21:32 编辑

水水,抢一个,春节期间无bug,程序员过一个安心年。

论坛徽章:
7
2015年中国系统架构师大会
日期:2015-06-26 14:01:38技术图书徽章
日期:2015-12-15 16:42:2715-16赛季CBA联赛之辽宁
日期:2015-12-16 11:01:33shanzhi
日期:2016-06-17 17:59:312017金鸡报晓
日期:2017-01-10 15:19:562017金鸡报晓
日期:2017-02-08 10:39:42
发表于 2017-01-20 15:26 |显示全部楼层
明天回家,今天下午还在改BUG,心里着急,但效率非常高,赞!!!

论坛徽章:
68
15-16赛季CBA联赛之上海
日期:2017-03-03 11:03:3615-16赛季CBA联赛之佛山
日期:2015-12-28 13:15:4015-16赛季CBA联赛之山西
日期:2015-12-28 12:10:1015-16赛季CBA联赛之广东
日期:2015-12-26 16:27:3815-16赛季CBA联赛之福建
日期:2015-12-26 16:27:2715-16赛季CBA联赛之吉林
日期:2015-12-22 14:49:3515-16赛季CBA联赛之佛山
日期:2015-12-22 14:49:1215-16赛季CBA联赛之新疆
日期:2015-12-22 14:48:5515-16赛季CBA联赛之山西
日期:2015-12-10 13:15:2715-16赛季CBA联赛之吉林
日期:2015-12-10 13:15:17白银圣斗士
日期:2015-12-03 14:56:15技术图书徽章
日期:2015-12-03 14:56:09
发表于 2017-01-20 16:36 |显示全部楼层

论坛徽章:
11
CU大牛徽章
日期:2013-04-17 11:20:362017金鸡报晓
日期:2017-02-08 10:39:422017金鸡报晓
日期:2017-01-10 15:13:29IT运维版块每日发帖之星
日期:2016-03-15 06:20:01IT运维版块每日发帖之星
日期:2015-10-02 06:20:00CU十二周年纪念徽章
日期:2013-10-24 15:41:34CU大牛徽章
日期:2013-09-18 15:15:45CU大牛徽章
日期:2013-09-18 15:15:15CU大牛徽章
日期:2013-04-17 11:46:39CU大牛徽章
日期:2013-04-17 11:46:2815-16赛季CBA联赛之福建
日期:2017-03-13 11:33:44
发表于 2017-01-21 08:28 |显示全部楼层
被安排信息值班,哎

论坛徽章:
54
2017金鸡报晓
日期:2017-02-08 10:39:42操作系统版块每日发帖之星
日期:2016-03-08 06:20:00操作系统版块每日发帖之星
日期:2016-03-07 06:20:00操作系统版块每日发帖之星
日期:2016-02-22 06:20:00操作系统版块每日发帖之星
日期:2016-01-29 06:20:00操作系统版块每日发帖之星
日期:2016-01-27 06:20:00操作系统版块每日发帖之星
日期:2016-01-20 06:20:00操作系统版块每日发帖之星
日期:2016-01-06 06:20:0015-16赛季CBA联赛之江苏
日期:2015-12-21 20:00:24操作系统版块每日发帖之星
日期:2015-12-21 06:20:00IT运维版块每日发帖之星
日期:2015-11-17 06:20:002015亚冠之广州恒大
日期:2015-11-12 10:58:02
发表于 2017-01-21 20:34 |显示全部楼层
我偷偷在外网口接了个三层交换机,并且偷偷从服务器上调了一个IP上去,然后偷偷弄了个家用UPS,基本上可以安心过年了,除非硬件出大问题,否则手机不能解决。
您需要登录后才可以回帖 登录 | 注册

本版积分规则

  

北京皓辰网域网络信息技术有限公司. 版权所有 京ICP证:060528号 北京市公安局海淀分局网监中心备案编号:1101082001
广播电视节目制作经营许可证(京) 字第1234号 中国互联网协会会员  联系我们:
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP