iT邦幫忙

19

[感想]沒有演練過的備援機制,不過是安慰劑而已

中華電信金門機房設備故障新聞引發的感想
大部份的IT人
都對所謂的備援機制不陌生
不但認同其重要性
而且也大都能說得頭頭是道
隨時隨地講出一番道理

而我的感想是
「沒有演練過的備援機制
不過是安慰劑而已」
因為沒有人能確定到底有沒有效用

不管設計得再好
考慮再周詳的備援機制
如果都只是用想的
在建置之後,從來沒有使用過
第一次使用就是在真正出事的緊急狀況
我都覺得
這算是很冒險的行為

我在jamesjan大大的分享中有提到
我朋友的公司
每半年會做一次實際的異地備援切換
應該可以算是蠻精實的例子

一般的備援機制
最主要是「怕麻煩」
要不是怕「切過去切不回來」
或是怕「切過去反而掛了」
都是備而不用
等到實際狀況發生了
再來打算

這種管理方式的備援機制
我覺得就有點像是「保險」或是「汽車安全氣囊」
在買(建置)的時侯「什麼都可以」
等到在用(狀況發生)的時侯
不一定「什麼都不可以」
但一定是搏杯靠運氣
運氣好就過關
運氣不好就倒楣

IT的備援機制
不像「保險」或是「汽車安全氣囊」(完全不能測試)
所以
應該要定期或不定期
進行實際切換(而不是模擬或紙上作業)
以確保機制無誤
以及人員對備援作業的熟悉度

以上純為個人感想
看完後
請勿一時衝動
跑去機房
拔RAID 5 HotSwap的硬碟(看看會不會自動take over)
或是
關掉防火牆或Router(看看另一台會不會take over)
以免
還沒吃尾牙
工作就game over了
逃跑


0
plums
iT邦高手 1 級 ‧ 2010-12-09 10:15:29

24小時運作的企業面對這樣的狀況都會有點棘手,基本上是沒啥時間可以讓IT人員進行測試的,所以我只能利用整個公司放假的時候來進行一些特殊的設置,另外,我的作法是走「雙系統」的方式來運行(比較笨一點),也就是任何一個服務都會有第二台機器保持一模一樣的設置,平時不運行,如原服務出現異常則會自動或手動切換至第二台機器運作,服務中斷如果超過四個小時,我大概就得提前回家吃自己了,所以啦,半夜被叫起來是很正常的事...無言

嗯...
能夠做cold standby也已經很不錯了吧

這次中華電信應該也是採用類似的做法
然後啟動備援放大器時
才發現備援放大器也動不了
落寞

0
echen688
iT邦研究生 1 級 ‧ 2010-12-09 11:30:53

海綿大所言甚是. .... 拍手

0
鐵殼心
iT邦高手 1 級 ‧ 2010-12-09 12:31:49

antijava提到:
請勿一時衝動
跑去機房
拔RAID 5 HotSwap的硬碟

據說年初的大當機是關總電源測UPS...無言

看更多先前的回應...收起先前的回應...
echen688 iT邦研究生 1 級‧ 2010-12-09 12:54:14 檢舉

tecksin提到:
據說年初的大當機是關總電源測UPS...

鐵大是指中X信X嗎? ....... 偷笑

找出舊新聞來參考

根據報導內容
是應該給中信鼓勵鼓勵的
噎到

賽門 iT邦超人 1 級‧ 2010-12-09 13:23:39 檢舉

echen688提到:
中X信X

還選在當月五日測試, 也不想想一大票人的薪資都那天發放, 大伙興沖沖打算提錢回家打打牙, 結果....

還有要轉帳還卡款的一大票人也都卡住, 害好多人都延遲繳款被扣違約金...

事後, 這家銀行一句道歉也沒說, 還過了好幾月後才打電話來說當天因而產生的延繳違約金不會扣帳......可是....聯徵戶的個人信用記錄就是多了一次延遲繳款的記錄...還引起幾家銀行的信用卡服務中心打電話來關心....

真不知道那個服務最優獎是頒好看的是不是??翻桌

echen688 iT邦研究生 1 級‧ 2010-12-09 13:40:47 檢舉

antijava提到:
根據報導內容
是應該給中信鼓勵鼓勵的

是要鼓勵他們7年不換電池的愛地球環保作為嗎? ....... 偷笑

鄉民說得好

人在江湖飄,那有不挨刀

同樣是服務中斷
原因是主動做備援機制演練
還是比
被動發生異常狀況,備援機制不作用

好上那麼一點點點啦
暈

echen688提到:
是要鼓勵他們7年不換電池的愛地球環保作為嗎? ...

傳說是預算問題...

echen688 iT邦研究生 1 級‧ 2010-12-09 15:25:28 檢舉

antijava提到:
人在江湖飄,那有不挨刀

人若不挨刀, 那會江湖飄...... 失神

echen688提到:
人若不挨刀, 那會江湖飄...

不過是晚七天回家嘛...

0
msit
iT邦高手 1 級 ‧ 2010-12-09 15:14:01

不知道金門的軍線,是否也跟著跟台灣中斷連線

看更多先前的回應...收起先前的回應...
echen688 iT邦研究生 1 級‧ 2010-12-09 15:27:58 檢舉

那是在演練備援機制....... 偷笑

將在外,君命有所不受!
所以就開火了...

msit iT邦高手 1 級‧ 2010-12-10 11:19:56 檢舉

echen688提到:
那是在演練備援機制..

所以說軍線有下車功能,不知道能不能轉撥skype

echen688 iT邦研究生 1 級‧ 2010-12-10 11:44:04 檢舉

msit提到:
所以說軍線有下車功能,不知道能不能轉撥skype

乾脆 PO 到臉書上好了....... XD

player iT邦大師 1 級‧ 2010-12-10 15:04:32 檢舉

洩漏軍事機密
該當何罪?
PO 到臉書?
不如 PO 到 Wikileaks(維基解密)

總裁 iT邦好手 1 級‧ 2010-12-10 16:12:13 檢舉

msit提到:
所以說軍線有下車功能

縱貫線也可以下車....冷

我要留言

立即登入留言