2021年7月20日18點(diǎn)14分,位于鄭州大學(xué)南校區(qū)逸夫樓一層的CERNET鄭州核心節(jié)點(diǎn)機(jī)房因?yàn)橥k娨黄岷?,樓前水位已達(dá)100厘米,開始倒灌樓內(nèi)……鄭州節(jié)點(diǎn)和賽爾網(wǎng)絡(luò)有限公司河南分公司的工作人員,看著依然沒有停歇跡象的暴雨心急如焚。
他們都明白,河南節(jié)點(diǎn)牽一發(fā)而動(dòng)全身,一旦斷掉,不但會“阻塞”中國教育和科研計(jì)算網(wǎng)CERNET這條國家信息化基礎(chǔ)設(shè)施的主動(dòng)脈,更有可能影響當(dāng)下正在如火如荼進(jìn)行的高考招生,繼而影響社會穩(wěn)定。所以,河南節(jié)點(diǎn)不容有失!
這一晚,注定是一個(gè)不眠之夜!
一場罕見的特大暴雨
7月18日開始,河南省多地發(fā)生連續(xù)降雨。20日更是遭遇“千年一遇”特大暴雨,往常來看,日降雨量達(dá)到250毫米已屬于大暴雨級別,而這一天的小時(shí)降雨量就達(dá)到201毫米,打破歷史極值。
鄭州大學(xué)校園內(nèi)有一條貫穿鄭州東西的金水河,但從20日下午開始,整個(gè)校園一片汪洋,那條河已經(jīng)看不見了。16點(diǎn)39分,鄭州節(jié)點(diǎn)機(jī)房由于暴雨沖斷主電纜而突然停電,改由學(xué)校發(fā)電機(jī)緊急供電。17點(diǎn)02分,因暴雨鄭州大學(xué)全校停電,發(fā)電機(jī)機(jī)房也進(jìn)水,節(jié)點(diǎn)機(jī)房又改為UPS供電,但僅能應(yīng)急2個(gè)小時(shí)左右。此時(shí),鄭州大學(xué)機(jī)房的發(fā)電機(jī)房水位達(dá)30厘米,省網(wǎng)節(jié)點(diǎn)門前水位已達(dá)70厘米。
電力供應(yīng)迫在眉睫,網(wǎng)絡(luò)暢通萬分火急。在市政供電恢復(fù)之前,如何保證備用發(fā)電機(jī)的正常使用?如何保證網(wǎng)絡(luò)的正常運(yùn)行?鄭州核心節(jié)點(diǎn)迅速把險(xiǎn)情上報(bào)CERNET網(wǎng)絡(luò)中心。
17點(diǎn)剛過,北京。接到鄭州節(jié)點(diǎn)緊急通報(bào)后,剛剛分管CERNET通信運(yùn)行工作的王繼龍教授迅速上報(bào):鄭州目前暴雨,水位過高。學(xué)校市電由于天氣原因已停,緊急啟用油機(jī)供電,但發(fā)電機(jī)的機(jī)房已經(jīng)進(jìn)水,且水位上漲較快,發(fā)電機(jī)也要馬上斷電,節(jié)點(diǎn)將啟用UPS繼續(xù)供電,預(yù)計(jì)能支撐2小時(shí),一旦徹底失電,南北互聯(lián)將僅剩合肥至天津路段,網(wǎng)絡(luò)將出現(xiàn)擁塞情況。
CERNET網(wǎng)絡(luò)中心主任吳建平迅速作出指示:迅速制定底線應(yīng)急方案,確保網(wǎng)絡(luò)安全通暢!
緊急預(yù)案隨之迅速啟動(dòng):一方面部署網(wǎng)絡(luò)調(diào)度,力保教育網(wǎng)的整體通暢;另一方面要求打好CERNET鄭州保衛(wèi)戰(zhàn),在確保人員安全的前提下,全力解決供電問題。
一次艱難的保電行動(dòng)
“暴雨沖斷了學(xué)校附近橋梁,金水河倒灌,核心節(jié)點(diǎn)機(jī)房附近被過膝的洪水圍困,交通基本中斷,既不能進(jìn)也不能出;至晚間機(jī)房內(nèi)已經(jīng)全面斷電,現(xiàn)場一片漆黑。”
據(jù)賽爾河南分公司總經(jīng)理李路路介紹,包括她在內(nèi)的所有工作人員,都在堅(jiān)守崗位,但只能摸黑排查。更讓她揪心的,是發(fā)電機(jī)的柴油緊缺問題。
在這一場事關(guān)網(wǎng)絡(luò)安全暢通的戰(zhàn)役中,電是根本問題。怎么保電成為鄭州保衛(wèi)戰(zhàn)的關(guān)鍵。當(dāng)務(wù)之急是找到柴油,保證當(dāng)天及第二天的使用。但此時(shí)整個(gè)鄭州大水漫漫,交通中斷。
“我們不斷聯(lián)系附近的加油站,但全市很多地方停電無法購買柴油。”李路路說。此時(shí)發(fā)電機(jī)房水位距地面60厘米,節(jié)點(diǎn)中心門口水位距地面100厘米。水位很高,并開始往樓里灌水。
18點(diǎn)24分,節(jié)點(diǎn)向北京匯報(bào)搶險(xiǎn)進(jìn)展,根據(jù)CERNET網(wǎng)絡(luò)中心的意見,開始停用優(yōu)先級靠后的設(shè)備,降低負(fù)載以使得UPS電源能支撐更久的運(yùn)行。
在持續(xù)尋求購買柴油途徑的同時(shí),分公司同事和節(jié)點(diǎn)老師們協(xié)助學(xué)校相關(guān)部處人員,利用舊書本、泥土、沙袋等對電源間等重要地點(diǎn)進(jìn)行擋水,以保護(hù)機(jī)房重要設(shè)備。
19點(diǎn),有消息證實(shí),學(xué)校南校區(qū)跨金水河橋被沖斷,主電纜在水中漂浮,短時(shí)間無法恢復(fù)市政供電。此時(shí),節(jié)點(diǎn)老師把僅剩的三桶柴油加入油箱,并不斷關(guān)注著市政供電情況。
“晚些時(shí)候,核心節(jié)點(diǎn)機(jī)房的4G/5G信號完全中斷,只能依靠WiFi支持的互聯(lián)網(wǎng)保持通訊,但由于手機(jī)沒法充電,也存在著失聯(lián)的危險(xiǎn)。在不斷接聽各方面問候支持以及電量不斷見底的焦慮中,更憂心的則是鄭州節(jié)點(diǎn)的通斷問題。” 鄭州核心節(jié)點(diǎn)的焦志杰老師說。
對于網(wǎng)絡(luò)通斷狀況,CERNET鄭州核心節(jié)點(diǎn)NOC運(yùn)行部主任陳剛一直揪著心,他發(fā)現(xiàn)有好幾段省網(wǎng)路線通信質(zhì)量有所下降,“在這個(gè)關(guān)鍵時(shí)刻,我們必須守好CERNET主干大動(dòng)脈”。
“當(dāng)日20點(diǎn),同事們再次前往斷橋地點(diǎn)查看,橋面已被水吞沒,市政供電短時(shí)間顯然無法恢復(fù)。我們一直在聯(lián)系是否能協(xié)調(diào)外部人員送油,但當(dāng)時(shí)整個(gè)城市被大水圍困,城市交通已基本中斷,甚至求助于兄弟分公司幫助發(fā)送信息給民間救援組織,也都沒有實(shí)現(xiàn)。”李路路說。
夜晚,往常燈火通明的機(jī)房幾乎一片漆黑,黑暗中人們卻一點(diǎn)也沒放棄。“20日半夜時(shí)分,分公司終于聯(lián)系到有柴油的加油站,幾位節(jié)點(diǎn)老師和分公司員工非要冒著危險(xiǎn)用小推車去取油”賽爾網(wǎng)絡(luò)公司副總經(jīng)理金立科提到,“我們經(jīng)過商量,為了大家的安全,勸阻了他們。但干部員工在危急時(shí)刻,所爆發(fā)出的不怕苦、不畏險(xiǎn)、負(fù)責(zé)任的力量和對CERNET的熱愛都讓我很感動(dòng)。”
21日凌晨3點(diǎn)30分,因燃油耗盡,鄭州大學(xué)發(fā)電機(jī)停止運(yùn)作,鄭州核心節(jié)點(diǎn)的傳輸設(shè)備由UPS電源供電。4點(diǎn),鄭州核心節(jié)點(diǎn)的老師和賽爾通信運(yùn)行部同事制作接線排,用在CERNET主干網(wǎng)的核心路由器上進(jìn)行單獨(dú)供電。
凌晨5點(diǎn),傳輸設(shè)備由UPS電源供電,負(fù)載49A,此時(shí)電池電量還剩90%。
5點(diǎn)以后,大雨漸小,大家查看金水河情況,發(fā)現(xiàn)水已退回,橋面已剛剛露出,接著又聯(lián)系電工班。
6點(diǎn)半,傳輸設(shè)備電池供電,負(fù)載49A,還剩80%的電量。
7點(diǎn)15分,鄭州節(jié)點(diǎn)終于聯(lián)系到一家可以提供柴油的加油站。但此時(shí),所有人員的車子都被水浸泡無法使用。
“關(guān)鍵時(shí)刻,鄭州節(jié)點(diǎn)的李正磊老師讓他父親從家開車過來,幫忙運(yùn)送柴油。分兩次運(yùn)了6桶后,柴油基本充足了。”陳剛介紹說。
一場保電保衛(wèi)戰(zhàn)落下帷幕。
一場網(wǎng)上高招的應(yīng)急護(hù)航
7月,也是高考招生錄取的關(guān)鍵時(shí)期。
7月20日前后,高招錄取進(jìn)入到最繁忙、緊張的階段,大部分省市提前批錄取已經(jīng)結(jié)束,本科批正在進(jìn)行中。
這也是一年一度最受國人關(guān)注,事關(guān)百萬家庭以及諸多學(xué)子命運(yùn)的重要時(shí)段。
當(dāng)考生拿到錄取通知書舉家歡慶時(shí),很少有人知道,高招錄取的平穩(wěn)有序與一張大網(wǎng)密切相關(guān)。
從1999年起,中國教育和科研計(jì)算機(jī)網(wǎng)CERNET開始支持網(wǎng)上高招錄取的試點(diǎn)工作。從2002年起,全國招生錄取工作全部由網(wǎng)上完成,而支撐這項(xiàng)工作的網(wǎng)絡(luò),就是CERNET。
每年上千萬考生的資料信息通過CERNET與各地考試院交換到各高校。迄今為止,這也是世界上規(guī)模最大的教育應(yīng)用之一。
CERNET網(wǎng)絡(luò)的通暢、安全,直接影響著全國高考網(wǎng)上錄取工作的安全與順利!
在落實(shí)保障措施的同時(shí),賽爾各部門也迅速行動(dòng)起來,主動(dòng)聯(lián)系各高校,詢問網(wǎng)絡(luò)保障需求與情況。
這其中,河南省招辦是一個(gè)重要的節(jié)點(diǎn)。
因?yàn)楫?dāng)?shù)匾苿?dòng)網(wǎng)絡(luò)癱瘓,無法聯(lián)系上具體的負(fù)責(zé)人,王繼龍教授希望盡快聯(lián)系河南省招辦,做好針對性保障工作。21號上午,賽爾公司相關(guān)負(fù)責(zé)人緊急聯(lián)系河南省招辦信息處的領(lǐng)導(dǎo)詢問網(wǎng)絡(luò)狀況,對方向CERNET和賽爾公司在高招保障方面的重視和保障力度表示了感謝。
不僅僅是鄭州,河南全境普降大雨,各種基礎(chǔ)設(shè)施遭受巨大的破壞。針對河南境內(nèi)部分高校出現(xiàn)的網(wǎng)絡(luò)故障情況,CERNET與賽爾公司及時(shí)提供高招相關(guān)系統(tǒng)域名解析切換服務(wù),確保了網(wǎng)上招生工作的順利進(jìn)行。
21日中午塵埃落定,河南省招辦與教育部相關(guān)部門相繼反饋:網(wǎng)上招生未受影響。
一張大網(wǎng)的最后勝利
鄭州核心節(jié)點(diǎn)對于CERNET而言意味著什么?
據(jù)CERNET鄭州核心節(jié)點(diǎn)主任李占波介紹,鄭州節(jié)點(diǎn)是CERNET北環(huán)與西環(huán)匯聚轉(zhuǎn)發(fā)的大動(dòng)脈,也是CERNET流量最繁忙的京漢廣線路的關(guān)鍵節(jié)點(diǎn)之一。
鄭州節(jié)點(diǎn)的通斷不但影響自身通信,還影響到北環(huán)、西環(huán)甚至南環(huán)相關(guān)節(jié)點(diǎn)的暢通和運(yùn)行質(zhì)量。一旦鄭州節(jié)點(diǎn)中斷,西環(huán)、北環(huán)、南環(huán)的流量都會壓到北京-合肥段,不但整個(gè)網(wǎng)絡(luò)將出現(xiàn)擁塞情況,還會對當(dāng)前正在進(jìn)行的高招保障造成影響。
因此,鄭州核心節(jié)點(diǎn)的安全穩(wěn)定運(yùn)行非常重要。吳建平院士提出,在重大災(zāi)害面前,要以底線思維確保網(wǎng)絡(luò)暢通,全力確保CERNET這張大網(wǎng)的穩(wěn)定運(yùn)行。
CERNET掀起了全網(wǎng)保衛(wèi)戰(zhàn),在北京到武漢和北京到上海臨時(shí)開通了兩條100G的備份線路,即便河南節(jié)點(diǎn)暫時(shí)斷網(wǎng)也能保障整個(gè)教育網(wǎng)的網(wǎng)絡(luò)通暢。同時(shí)使用未來互聯(lián)網(wǎng)試驗(yàn)設(shè)施FITI通信通道作為機(jī)動(dòng)信道,根據(jù)實(shí)際流量情況對擁堵段落進(jìn)行臨時(shí)增加帶寬和疏導(dǎo),確保高招正常進(jìn)行。
截至21日上午10點(diǎn),鄭州市區(qū)供電終于恢復(fù),CERNET鄭州核心節(jié)點(diǎn)的險(xiǎn)情逐漸解除,CERNET全網(wǎng)運(yùn)行未受影響。
在這次特大暴雨災(zāi)害中,CERNET網(wǎng)絡(luò)中心統(tǒng)一部署,賽爾公司以及核心節(jié)點(diǎn)高校的協(xié)同作戰(zhàn),打贏了一場驚心動(dòng)魄的網(wǎng)絡(luò)保衛(wèi)戰(zhàn),保證了CERNET鄭州核心節(jié)點(diǎn)的正常運(yùn)行,確保了CERNET主干網(wǎng)的安全通暢和高招網(wǎng)絡(luò)保障的順利進(jìn)行。
一位高校的領(lǐng)導(dǎo)說,“沒有想到,你們的網(wǎng)沒有斷!”海南教育廳副廳長、來自河南的陶洪建說:“河南的父老鄉(xiāng)親感謝 CERNET!”