愛北大 唯讀圖書館

停電備援系統的問題--以我們辦公室大樓為鑑

2012-07-17 19:14 · 樓主
由於辦公室附近挖地,挖斷電纜
於是今天整區停電
辦公室柴油發電機自動發電
可能是過熱,將配電設施的變壓器烤到燒起而爆炸
或許在近日的高溫下,冷卻系統會不堪負荷,無能降溫所致
北市府消防車近7輛來救助
整個大樓全員疏散
許多同仁在30層的高度摸索著沿梯而行,於暗黑中手機的照明發揮了很大的功能
雖然下午外電已接上,但是配電設備已毀
市電無法橋接,縱使有電也是枉然
全天停班

另因龐大的資料庫有UPS做備援,原規格可挺30分鐘
但或許使用壽命較長,所以實際上無法支撐15分鐘
由於系統複雜,關機程序冗繁,
找到關機SOP時,運作的時間也不夠完成程序作業
於是系統在無保護狀態下直接切機(硬著陸)
就算能供電,系統啟動的損害也是難以估算

從以上經驗,可以反省我們社區大樓的緊急發電系統
雖然有定期演習發動,
但很少有在高溫且長時發電的實戰測試
尤其平常只是啟動發電的功能測試,這樣短時間的運作,會累積汽缸的積碳
作業溫度會較高
在惡質環境的實際演練才能發現一般無由發現的突發狀況
最近室外溫度持續偏高,或許是主因之一
許多在常溫下所驗測的設施規格,可能都會受到挑戰
另外也不要全然相信資訊設備的最高規格
寧可打5折來抓安全係數,否則可能無法可靠的達成預定功能
尤其UPS的電池會隨時間的充放電而減損容量
這次辦公室大樓的斷電經驗,或許可以作為社區設施的借鏡
2012-07-18 07:07 · 2樓
謝謝分享!
2012-07-18 07:36 · 3樓
🔧 本帖最後由 桂格 於 2012-7-18 07:37 編輯


許多同仁在30層的高度摸索著沿梯而行,於暗黑中手機的照明發揮了很大的功能

{:4_176:} {:4_176:} {:4_176:}
想必同仁們都受驚了......


希望貴單位的資料都有確實backup....
現在頻寬越來越便宜, 異地備援或往雲端送應該是趨勢了.

敝公司也已經把全球各據點的資料Centralized 到台灣了.
2012-07-18 08:58 · 4樓
🔧 本帖最後由 LSP000 於 2012-7-18 09:06 編輯


桂格 發表於 2012-7-18 07:36
想必同仁們都受驚了......




桂格兄內行.

UPS 問題應該不是造成 [資料難以復原的損失] 的唯一原因. {:1_755:}

災害難以避免, infrastructure team 能夠做的就是讓災難一旦發生時的損害儘量減到最小.
2012-07-18 09:08 · 5樓
所以緊急發電設備跟ups都要吹冷氣^^
2012-07-19 10:15 · 6樓
🔧 本帖最後由 阿慌 於 2012-7-19 12:10 編輯


桂格 發表於 2012-7-18 07:36
想必同仁們都受驚了......





資料庫除local外並在深坑及台中存有異地備援
由於機房資料庫量大,
只我們這一部門(資訊室除外)當初建置硬軟體系統就好幾個E
機房就約80坪。不易移出委外或雲端
2012-07-19 10:19 · 7樓
{:14_852:}
2012-07-19 10:19 · 8樓
🔧 本帖最後由 阿慌 於 2012-7-19 10:27 編輯


文兒 發表於 2012-7-18 09:08
所以緊急發電設備跟ups都要吹冷氣^^


事後檢討
1.發電機散熱不夠,機件沒有定期更新(發電機冷卻風散故障)
2.發電機機房周遭堆放閒雜物品,影響散熱及易燃
3.發電排煙不順暢,地上出口未清理(部分排管阻塞)
2012-07-19 10:22 · 9樓
LSP000 發表於 2012-7-18 08:58
桂格兄內行.

UPS 問題應該不是造成 [資料難以復原的損失] 的唯一原因.


平常沒有危機意識
相關危機處理雖有SOP
但無實際演練及確認機會
這次正好做個檢驗
2012-07-19 10:24 · 10樓
文兒 發表於 2012-7-18 09:08
所以緊急發電設備跟ups都要吹冷氣^^


由於緊急發電設備大多位於地下室
通風及散熱機制很重要
尤其長時運作,更要能安全持久
2012-07-19 10:29 · 11樓
阿慌 發表於 2012-7-19 10:24
由於緊急發電設備大多位於地下室
通風及散熱機制很重要
尤其長時運作,更要能安全持久 ...


真的^^我們公司也要注意這樣的事
2012-07-19 10:37 · 12樓
講兩個例子好了, 十幾年前 1999年 921地震, 全台大停電, 考驗辦公大樓與社區大樓的柴油發電機.....

當時, 宏碁電腦已經是個全球性企業, 其總部卻無足夠電力可用, 全球連線掛點很多天, 問題大了..... 後來, 就在大樓旁租地蓋了一間大型的柴油發電所, 來解決機房於天災時無電可用問題.

2000年象神颱風, 還有 2001年納莉颱風, 汐止因為淹水陷入大停電, 只有宏碁電腦的總部大樓有電 (旁邊的發電所全力運作), 連政府的救災總部都設在這邊一樓.....

當然...因為 acer HQ自己有電, 所以當時我當然要去上班, 但是冷氣卻是管制的, 差點沒熱死~~ (我已經離開那家公司很久了..呵呵)


致於社區嗎....

921地震大停電很多天時, 我當時住的社區, 發電機有供應電梯與走廊用電, 但運作了一天後, 發現....太耗油了且黑煙太多, 最後修改成早/中/晚各啟動兩小時, 供上/下班與中午用餐使用....不過, 家裏當然還是都沒電的.....
2012-07-19 10:50 · 13樓
🔧 本帖最後由 阿慌 於 2012-7-19 10:56 編輯


文兒 發表於 2012-7-19 10:29
真的^^我們公司也要注意這樣的事


發電機是因斷電而自行啟動的
但這一部份平常甚少有人關注或聞問
尤其會疏於查檢小流量的滴漏機油

所以平常要做好安檢(由原廠人員進行,事後簽結保證,一如電梯安檢般審慎)
保全人員例行安全巡邏,宜將發電機列入要項
(在前後原廠檢驗之空窗期,能適時檢視及發覺漏油與冷卻水等問題)
排煙出口要確實驣空,煙管有無破損
清空機房附近雜物
特別是所儲備用燃油或機油,宜作好隔離與防火設備與材質

這些都是事情瞬間發生
一連串事故的成因
有時停電並不可怕
而是相關自動啟動機制,或為釀災的禍首
且我們平常於春花秋月的生活,
因無必要性的當然,致疏於注意

以上作為各社區管委會的參考
2012-07-19 10:55 · 14樓
麥克 發表於 2012-7-19 10:37
講兩個例子好了, 十幾年前 1999年 921地震, 全台大停電, 考驗辦公大樓與社區大樓的柴油發電機.....

當時, ...


謝謝提供這麼寶貴的經驗
及相關因應的資訊{:4_113:}
2012-07-19 11:56 · 15樓
阿慌大有沒有賺到一天的停班假啊? {:1_767:}
2012-07-19 12:52 · 16樓
🔧 本帖最後由 阿慌 於 2012-7-19 15:37 編輯


芳草 發表於 2012-7-19 11:56
阿慌大有沒有賺到一天的停班假啊?


那天也被弄得高高興興的
大家於大樓鳥獸散後,就各奔前程
我很膽小又呆笨,在附近等進一步消息
大太陽下的高溫馬上就汗流夾背
所以躲到隔了一條街(一個區塊停電)的麥當勞討杯可樂納涼
部分智商高及有遠見的同事一看瞄頭就瞭然於心,
立馬即擬定了一日遊計畫,或回家休養

就這樣耗到中午,邀了還在附近躊躇徘徊的傻呆同事
用行軍的方式約15分鐘走到公車站
(平常很少在外鬼混,臨時也沒工具上網查尋地圖,連車站都差一點找不到),
坐到101對面的南村小吃店(小凱悅)打牙祭
這樣在外蒸籠般的氣溫活動,可真是有很深的刻骨銘心的體認
餐畢再循原路回辦公室
知道下午停班,這才開始佩服那些藝高人膽大,以及有高瞻遠囑見地的先知同仁
不敢等一小時1班的939
由捷運轉916約3:30分回北大
回家首務就是開冷氣,透涼一陣
回過魂來這才想到在南村小吃,於亂軍之中可能付錢超過了
這一天脫水粉嚴重,也擔誤了許多工作
2012-07-19 13:53 · 17樓
阿慌 發表於 2012-7-19 10:50
發電機是因斷電而自行啟動的
但這一部份平常甚少有人關注或聞問
尤其會疏於查檢小流量的滴漏機油


阿慌大說的很有道理,這種小細節卻攸關社區安全的大問題,的確很容易被忽略,謝謝阿慌大的提醒,回頭我也要提醒管委會多加注意,另外,在平時沒有遇到停電的時候,是否也要啟動一下緊急發電機約半個小時,以利及早發現問題,並讓住戶習慣防災演練。
2012-07-19 15:49 · 18樓
阿慌 發表於 2012-7-19 12:52
那天也被弄得高高興興的
大家於大樓鳥獸散後,就各奔前程
我很膽小又呆笨,在附近等進一步消息


那麼熱的天還跑到南村? 呆坐在麥當當裡小瞇半個小時再手機連絡公司情況就好了, 以後大家隨時也要準備一份個人應變計劃才是.{:1_751:}
2012-07-19 16:03 · 19樓
🔧 本帖最後由 阿慌 於 2012-7-19 16:05 編輯


芳草 發表於 2012-7-19 15:49
那麼熱的天還跑到南村? 呆坐在麥當當裡小瞇半個小時再手機連絡公司情況就好了, 以後大家隨時也要準備一份 ...


所言極是{:1_756:}
由於彼時麥鼠俗家裡遍及同事,塞滿了,
(我們大樓約1000人),顧及其他,閒坐太久也是不仁不義
剛好前段時間閒聊,有介紹同仁去南村
這麼大熱天,猜他也是聽聽而已
為了證明所言不差,所以
約期不如撞期,就
義無反顧、義憤填膺、義告奮勇、義字當頭
幹了這段傻事
2012-07-19 23:00 · 20樓
一般備用發電機都要定期保養測試起動.就如同車子沒開也要定時去發動一樣...
澈底執行一般都跟發電機廠商簽約由專業廠商來執行
可以分每週起動測試
每月有載測試及保養.這樣才能保障萬一停電時發電機才能發揮應有功能
2012-07-20 13:51 · 21樓
🔧 本帖最後由 不要問我 於 2012-7-20 13:53 編輯


發電機冷卻系統,和一般柴油車一樣是水冷式(水箱),而非氣冷式,與風傘好壞並無太大關聯,

水冷式系統要等引擎工作到達一定溫度,溫度調節器(一般師父叫水龜)才會開啟,水箱的水才會進入大循環,

一般社區發電月發電機保養,發動10分鐘左右,工作溫度尚未到達即又關機,不太可能發現冷卻系統是否正常,

要等到年度保養,或每2年保養,運作長時間才可發覺問題。

但若每月保養時,發動長時間,因會產生長時間黑煙,物管又會被住戶罵…真是兩難!
2012-07-20 14:08 · 22樓
不要問我 發表於 2012-7-20 13:51
發電機冷卻系統,和一般柴油車一樣是水冷式(水箱),而非氣冷式,與風傘好壞並無太大關聯,

水冷式系統要等 ...


水箱的風扇因軸承故障
脫飛出來
2012-07-20 14:42 · 23樓
🔧 本帖最後由 不要問我 於 2012-7-20 14:43 編輯


阿慌 發表於 2012-7-20 14:08
水箱的風扇因軸承故障
脫飛出來


哇!

那就太扯了!

平時保養的機電在睡覺嗎?

飛脫之前的保養,一定會有異音!才對
2012-07-20 15:00 · 24樓
不要問我 發表於 2012-7-20 14:42
哇!

那就太扯了!


所言極是
所以要檢討的可多啦!!