主控核心在0.5秒内检测到了故障,将原本分配给这台机柜的存储请求,全部重新路由到了其他五台机柜。
终端屏幕上的任务输出没有中断,甚至没有任何延迟。
吴国华走到故障机柜前面,打开柜门,检查了一遍,确认没有硬件损坏,然后重新推上电源。
机柜启动,自检,重新上线。
诊断系统自动将这台机柜加入存储池,恢复数据同步。
整个过程不到五分钟。
单机柜断电,系统无感知恢复,4分50秒。
……
全系统级灾难,这是技术故障演练的最后一个场景,也是最极端的一个。
模拟主控核心软件死锁。
郑长枫在终端上敲了一个命令,模拟主核心进入死循环。
辅核心在3个心跳周期后检测到了异常,自动接管了控制权。
黄色的“接管”指示灯亮了,绿色的“运行”灯没有灭。
终端屏幕上的任务输出没有中断。
然后是模拟全厂断电。
郑长枫拉下了机房的的总配电开关。
所有的灯光、所有的指示灯、所有的风扇,在一瞬间全部熄灭了。
机房陷入了短暂的黑暗,只有应急灯昏黄的光。
然后,柴油发电机组启动了。
轰鸣声从地下传来,像一头被惊醒的巨兽。
35台机柜的绿色指示灯依次亮起来,像多米诺骨牌。
从一号机柜到三十五号机柜,从左边传到右边,用了不到30秒。
系统从最后一次检查点恢复了任务。
终端屏幕上的数值继续跳动,仿佛那场断电只是一次短暂的眨眼。
如此每日循环往复,持续做了七八十轮。
整个集成组50多名成员,加上昆仑1机的机组人员,轮番上阵。
吕辰甚至把在红星轧钢厂防静电车间组装的测试机柜般了来,配置了一个最小系统,进行各种极端故障抢修模拟。
安全威胁类,是纯军事环节。
这是昆仑1机验收前新增的硬性要求,国防科委明确指示,昆仑1机是国防重点工程,必须具备应对各种安全威胁的能力。
钟汉成亲自带队,从军区抽调了一个警卫排,配合演练。
演练地点从机房扩展到整个计算机所厂区,从白天的正常工况到夜间的战备状态,全程模拟。
第一个科目,防空袭演练。
“呜——”
防空警报在清晨六点整拉响,尖锐的声音划破了中关村的天空。
这是不预告的突击演练。
机组值班人员听到警报,第一反应不是跑,而是冲到机柜前面。
他按照《战备操作手册》的流程,在45秒内完成了全部操作。
按下“状态保存”按钮,系统自动将内存数据写入磁带;关闭所有机柜的电源开关;拉下机房的总配电闸;将关键备份磁带装入防磁防火的保险柜。
然后值班小组撤离到昆仑1机房的地下管廊。
从警报响起到最后一个人进入地下管廊,用时2分18秒。
钟汉成站在地下管廊的作战室里,掐着秒表,面无表情。
“防空警报响应,2分18秒。合格。”
“今晚进行夜间空袭模拟,不预告时间。”
当天夜里零点,防空警报再次拉响。
这一次是在深夜,大部分人在睡梦中被惊醒。
值班机组接班不到一小时,听到警报后几乎是本能地冲向机柜。
他的手在抖,但动作没有变形。
状态保存、断电、拉闸、备份入柜,一气呵成。
2分35秒。
比白天慢了17秒,但仍然在3分钟的指标以内。
夜间反应速度需加强训练,目标提到2分15秒。
第二个科目是防火演练。
机房火灾是数据中心最大的噩梦。
钟汉成设计了一个极端场景,模拟机柜内部电路短路起火。
消防小组在机房外待命,值班人员先期处置。
演练在下午两点开始。
郑长枫在机柜背板的一个隐蔽位置,用做了一个短路点火模拟,点燃了一小片烟雾棉。
烟雾从机柜顶部冒出,天花板的烟雾探测器在8秒后报警。
值班人员看到烟雾,先按下了机柜的紧急断电按钮,然后拿起二氧化碳灭火器,对准烟雾源头喷射。
从烟雾报警到火源扑灭,用时47秒。
消防小组在1分20秒后赶到现场,接手了后续处置。
整个过程中,相邻机柜没有一台断电,系统没有中断运行。
钟汉成检查了现场后,问了一句:“为什么不启动自动灭火系统?”
秦无功道:“自动灭火系统启动条件是‘烟感+温度’双重确认。烟雾已经触发,但温度还没到阈值。手动优先,避免误喷。”
第三个科目,防暴演练,模拟破坏份子冲击机房。
钟汉成从军区调来一个班的战士扮演破坏份子,着便装,手持武器,试图强行闯入机房。
保卫科在两分钟内完成了人员集结和防线布设。
这章没有结束,请点击下一页继续阅读!
喜欢四合院:我是雨水表哥请大家收藏:(m.qbxsw.com)四合院:我是雨水表哥全本小说网更新速度全网最快。