8月21日4時(shí)35分，陸梁油田作業(yè)區(qū)中控室報(bào)告稱，陸9井區(qū)7#、7-1#站計(jì)量站無通訊，還有11個(gè)站的23口單井無通訊
歷經(jīng)近4個(gè)小時(shí)的細(xì)心排查，該作業(yè)區(qū)自動(dòng)化運(yùn)行維護(hù)中心值班員工何文強(qiáng)和陳磊，最終發(fā)現(xiàn)問題原因是LU24#匯聚點(diǎn)的點(diǎn)對(duì)點(diǎn)網(wǎng)橋狀態(tài)信息出現(xiàn)故障
兩位儀修人員邊上網(wǎng)查資料，邊跟廠家及其他廠處網(wǎng)絡(luò)技術(shù)人員請(qǐng)教，12時(shí)20分，陸9井區(qū)網(wǎng)絡(luò)全線恢復(fù)
“何師傅，陸9井區(qū)7#、7-1#站計(jì)量站無通訊，還有11個(gè)站的23口單井無通訊?！?/span>
8月21日4時(shí)35分，陸梁油田作業(yè)區(qū)自動(dòng)化運(yùn)行維護(hù)中心值班干部何文強(qiáng)接到中控室的故障電話。他心里一驚，忙問：“井區(qū)停電了嗎？”
當(dāng)?shù)弥锌厥乙雅c調(diào)度室聯(lián)系過，井區(qū)沒有發(fā)生停電或跳閘后，何文強(qiáng)的眉頭皺了起來：眼下正值該作業(yè)區(qū)夏季勞動(dòng)競(jìng)賽之際，如果這些井出現(xiàn)停機(jī)或生產(chǎn)數(shù)據(jù)異常，中控室就無法及時(shí)監(jiān)測(cè)，勢(shì)必會(huì)影響作業(yè)區(qū)奪油上產(chǎn)的步伐。
何文強(qiáng)立即起身，叫上搭檔陳磊，兩人趁著蒙蒙夜色，驅(qū)車趕往LU7#站。
遭遇險(xiǎn)情
自動(dòng)化運(yùn)維中心肩負(fù)著該作業(yè)區(qū)120余座計(jì)量站及近2000口油水井生產(chǎn)數(shù)據(jù)的實(shí)時(shí)監(jiān)控，總監(jiān)控?cái)?shù)據(jù)點(diǎn)多達(dá)近20000個(gè)，在陸梁油田生產(chǎn)中，該中心監(jiān)控崗是油田生產(chǎn)的“千里眼”，而儀修工則像是“眼科醫(yī)生”。每一臺(tái)自動(dòng)化設(shè)備是否正常運(yùn)行、每一個(gè)儀器儀表是否正常傳輸，每一個(gè)IP地址網(wǎng)絡(luò)是否正常……這所有的一切都離不開儀修工的精心護(hù)理。
經(jīng)過查看，何文強(qiáng)和陳磊發(fā)現(xiàn)7#、7-1#站與23口井均從屬于2409#網(wǎng)橋主站。剛到2409#主站門口，中控室的電話再次響起，告知陸9井區(qū)除了151井區(qū)、陸15井區(qū)、陸12井區(qū)及11#、12#、13#、17#、21#、22#站的通訊正常外，其余的計(jì)量站和單井均無通訊。
聞聽此消息，他們沒有慌亂，經(jīng)過仔細(xì)排查，最后發(fā)現(xiàn)點(diǎn)對(duì)點(diǎn)網(wǎng)絡(luò)傳輸中斷，影響了十幾個(gè)網(wǎng)橋主站的通訊傳輸，而每個(gè)網(wǎng)橋主站下都會(huì)有二三十個(gè)相應(yīng)的從站，也就意味著至少有近四五百個(gè)網(wǎng)橋從站無法正常工作。
摸索癥結(jié)
四五百個(gè)網(wǎng)橋從站通訊中斷意味著五六百個(gè)井站無通訊，這給油田生產(chǎn)和遠(yuǎn)程計(jì)量工作都會(huì)帶來很大的風(fēng)險(xiǎn)。面對(duì)緊急情況，他們的首要任務(wù)是盡快恢復(fù)點(diǎn)對(duì)點(diǎn)的網(wǎng)絡(luò)傳輸問題。
說起來容易做起來難，自參加工作以來，他們這是第一次遇到點(diǎn)對(duì)點(diǎn)網(wǎng)絡(luò)故障。兩人一時(shí)間不知該從哪里下手。
沒有任何可以借鑒的經(jīng)驗(yàn)，只能自己摸索了。面對(duì)著布線密密麻麻的自動(dòng)化設(shè)備，他們靜下心來，逐一檢查每一根導(dǎo)線、每一臺(tái)通訊設(shè)備、每一個(gè)網(wǎng)絡(luò)節(jié)點(diǎn)，用盡各種手段，最終發(fā)現(xiàn)LU24#匯聚點(diǎn)的點(diǎn)對(duì)點(diǎn)網(wǎng)橋狀態(tài)信息出現(xiàn)了故障。此時(shí)天已經(jīng)大亮，距離大面積無通訊發(fā)生已經(jīng)近4個(gè)小時(shí)了。
“啃硬骨頭”
為了不影響自動(dòng)化實(shí)時(shí)數(shù)據(jù)的遠(yuǎn)程監(jiān)控，他們決定做好兩手準(zhǔn)備——一邊啟用備用從站網(wǎng)絡(luò)傳輸，一邊繼續(xù)查找點(diǎn)對(duì)點(diǎn)網(wǎng)絡(luò)中斷的原因。他們通過筆記本把該作業(yè)區(qū)通訊塔的匯聚點(diǎn)的從站連接到LU24#網(wǎng)絡(luò)匯聚點(diǎn)主站，登錄主站注冊(cè)從站，然后再把LU24#站匯聚點(diǎn)的所有網(wǎng)絡(luò)通過臨時(shí)備用的從站傳輸回來。
由于備用從站網(wǎng)絡(luò)的不穩(wěn)定性，雖然大部分井站的通訊得以恢復(fù)，但LU2#、7#、7-1#站以及其它站的53口單井依然沒有通訊。
他們顧不上休息，一個(gè)上網(wǎng)查資料，一個(gè)跟廠家及其他廠處網(wǎng)絡(luò)技術(shù)人員請(qǐng)教，想盡一切辦法都要“啃”下這塊“硬骨頭”。
后來，他們?cè)诘卿浘W(wǎng)橋時(shí)發(fā)現(xiàn)一條狀態(tài)信息，通過代碼查詢得知，可能是同步器或同步電纜發(fā)生了故障。通過廠家技術(shù)人員得知可以通過重啟同步器來解決。
于是，何文強(qiáng)先把同步器斷電，然后在匯聚點(diǎn)把主站和點(diǎn)對(duì)點(diǎn)的電一一下電，稍后重新上電，登錄點(diǎn)對(duì)點(diǎn)及2409#主站，發(fā)現(xiàn)狀態(tài)欄報(bào)警消除進(jìn)入運(yùn)行模式，在同步器無干擾的情況下，主站和點(diǎn)對(duì)點(diǎn)就可以正常傳輸，最后恢復(fù)同步器供電，從而使整個(gè)網(wǎng)絡(luò)正常運(yùn)行。
當(dāng)天12時(shí)20分，陸9井區(qū)網(wǎng)絡(luò)全線恢復(fù)。