第二十八章,重大事故-《与沙共舞》
第(1/3)页
第二天中午,曹松和钱旦站在“st电信”的楼下准备打电话叫兄弟们一起去吃饭。
曹松拨着手机,越拨越紧张:“旦哥,我打楼上几个人的电话打不通了。”
钱旦掏出手机:“我打下林汉的电话。”
那天林汉不在“st电信”,在“伟中”的办公室里。
钱旦也紧张了:“打不通。”
曹松说:“旦哥,我打你电话。”
说罢他拨了钱旦的电话。
两个人面对面站着,尽管曹松没有用免提,钱旦还是清清楚楚地听见他手机里的忙音。
没有风,时间凝固,两个人背上直冒汗,转身“噔噔噔”往楼上跑。
他俩冲进机房,就见甘法斯和两个客户围着小伟,小伟专注地盯着维护终端。曹松叫:“小伟,怎么回事?”
小伟的声音颤抖:“不知道,好像业务全断了,我在跟踪消息、看日志。”
“你怎么不通知我们?”
“我不知道你们在哪儿,打你们电话打不通。”
曹松看了一眼维护终端,当机立断:“别找原因了,你把几个业务进程重启一下,我去把交换机的几块板子倒换了。”
他俩分头操作,一个重启主机上的软件进程,一个倒换交换机上的主备板,然后,几个人焦急地等待着,几十秒的时间特别漫长。
小伟喊:“哎,应该是好了,我拨测看看。”
话音未落,老钟黑着脸冲了进来,陈永生紧跟在后面。
老钟大声说:“怎么回事?我正在见‘ceo’,说业务全断了,是我们预付费系统的问题?!”
曹松赶紧说:“好了,好了,我们正在拨测,已经恢复了。”
老钟连着发问:“断了多久?断了多少用户?什么原因?”
曹松回答:“看日志断了三十分钟,还不知道原因。”
老钟很不满意:“不知道原因?你们断了也不知道怎么断的?好了也不知道怎么好的?”
钱旦解释说:“钟总,我们先通过重启、复位把业务恢复了,接下来再找原因。我们处理重大事故应该是优先恢复业务、然后再找原因这个顺序的。”
老钟身后的陈永生发言:“不知道事故原因?那事故会不会重现?”
钱旦赶紧表态:“我们守着,找到原因之前我们全部守在这里。已经向家里通报事故,拉研发的专家上来分析了。”
老钟要求:“向家里哪个领导通报事故了?给你们王总打电话没有?马上安排最牛的研发专家支持,赶紧查清楚原因,我先回‘ceo’那里去,有进展第一时间打电话给我。”
陈永生跟着老钟走出去又折返回来,把钱旦拉到一旁,压低声音说:“最好别是‘伟中’的原因,尤其不能是现场导致的人为事故,即使‘是’,你也要弄成‘不是’,不然要‘死人’的!”
通信网络的重大事故通常指的是因为设备故障导致电话打不通、短信发不出、上网上不了等业务中断的情况。这样的重大事故不仅会给电信运营商造成经济损失、品牌伤害,还可能带来恶劣的社会影响。
一张通信网络不可能永远是零事故,但必须能够及时恢复事故,必须避免同样的事故一再发生,“伟中”作为设备供应商,有理所当然的责任和义务。
“伟中”有严格的事故处理以及回溯的机制,在每一起重大事故处理完成后都必须先进行技术回溯,找到导致事故发生的所有原因,识别出根因,然后在技术回溯的基础上进行管理回溯,找到在业务流程、管理机制上的改进点,并且对责任人进行相应的问责。
第(1/3)页