第二十八章,重大事故-《与沙共舞》


    第(1/3)页

    第二天中午,曹松和钱旦站在“st电信”的楼下准备打电话叫兄弟们一起去吃饭。

    曹松拨着手机,越拨越紧张:“旦哥,我打楼上几个人的电话打不通了。”

    钱旦掏出手机:“我打下林汉的电话。”

    那天林汉不在“st电信”,在“伟中”的办公室里。

    钱旦也紧张了:“打不通。”

    曹松说:“旦哥,我打你电话。”

    说罢他拨了钱旦的电话。

    两个人面对面站着,尽管曹松没有用免提,钱旦还是清清楚楚地听见他手机里的忙音。

    没有风,时间凝固,两个人背上直冒汗,转身“噔噔噔”往楼上跑。

    他俩冲进机房,就见甘法斯和两个客户围着小伟,小伟专注地盯着维护终端。曹松叫:“小伟,怎么回事?”

    小伟的声音颤抖:“不知道,好像业务全断了,我在跟踪消息、看日志。”

    “你怎么不通知我们?”

    “我不知道你们在哪儿,打你们电话打不通。”

    曹松看了一眼维护终端,当机立断:“别找原因了,你把几个业务进程重启一下,我去把交换机的几块板子倒换了。”

    他俩分头操作,一个重启主机上的软件进程,一个倒换交换机上的主备板,然后,几个人焦急地等待着,几十秒的时间特别漫长。

    小伟喊:“哎,应该是好了,我拨测看看。”

    话音未落,老钟黑着脸冲了进来,陈永生紧跟在后面。

    老钟大声说:“怎么回事?我正在见‘ceo’,说业务全断了,是我们预付费系统的问题?!”

    曹松赶紧说:“好了,好了,我们正在拨测,已经恢复了。”

    老钟连着发问:“断了多久?断了多少用户?什么原因?”

    曹松回答:“看日志断了三十分钟,还不知道原因。”

    老钟很不满意:“不知道原因?你们断了也不知道怎么断的?好了也不知道怎么好的?”

    钱旦解释说:“钟总,我们先通过重启、复位把业务恢复了,接下来再找原因。我们处理重大事故应该是优先恢复业务、然后再找原因这个顺序的。”

    老钟身后的陈永生发言:“不知道事故原因?那事故会不会重现?”

    钱旦赶紧表态:“我们守着,找到原因之前我们全部守在这里。已经向家里通报事故,拉研发的专家上来分析了。”

    老钟要求:“向家里哪个领导通报事故了?给你们王总打电话没有?马上安排最牛的研发专家支持,赶紧查清楚原因,我先回‘ceo’那里去,有进展第一时间打电话给我。”

    陈永生跟着老钟走出去又折返回来,把钱旦拉到一旁,压低声音说:“最好别是‘伟中’的原因,尤其不能是现场导致的人为事故,即使‘是’,你也要弄成‘不是’,不然要‘死人’的!”

    通信网络的重大事故通常指的是因为设备故障导致电话打不通、短信发不出、上网上不了等业务中断的情况。这样的重大事故不仅会给电信运营商造成经济损失、品牌伤害,还可能带来恶劣的社会影响。

    一张通信网络不可能永远是零事故,但必须能够及时恢复事故,必须避免同样的事故一再发生,“伟中”作为设备供应商,有理所当然的责任和义务。

    “伟中”有严格的事故处理以及回溯的机制,在每一起重大事故处理完成后都必须先进行技术回溯,找到导致事故发生的所有原因,识别出根因,然后在技术回溯的基础上进行管理回溯,找到在业务流程、管理机制上的改进点,并且对责任人进行相应的问责。
    第(1/3)页