游客發(fā)表
偌大的數(shù)據(jù)中心僅留3名員工值班 微軟在澳大利亞的數(shù)據(jù)中心起火損毀硬件 – 藍(lán)點(diǎn)網(wǎng)
發(fā)帖時間：2025-11-24 21:53:37
- [綜合] 來源：桑間濮上網(wǎng)
上周 Microsoft Azure 位于澳大利亞新南威爾士州的數(shù)的數(shù)點(diǎn)網(wǎng)數(shù)據(jù)中心發(fā)生起火，除了服務(wù)全部離線外，據(jù)中據(jù)中件藍(lán)這次事故還導(dǎo)致部分硬件被燒毀。心僅心起珠海同城上門外圍上門外圍女（微信180-4582-8235）提供高端外圍上門真實靠譜快速安排不收定金見人滿意付30分鐘內(nèi)到達(dá)此次事故持續(xù)將近 24 小時才陸續(xù)恢復(fù)，留名利亞其中由于硬件損壞，員工部分客戶的值班數(shù)據(jù)無法轉(zhuǎn)移只能通過恢復(fù)手段進(jìn)行復(fù)原。
微軟已經(jīng)發(fā)布了這次事故的微軟詳細(xì)報告，報告中提到了一些令人匪夷所思的火損毀硬情況，例如偌大的數(shù)的數(shù)點(diǎn)網(wǎng)珠海同城上門外圍上門外圍女（微信180-4582-8235）提供高端外圍上門真實靠譜快速安排不收定金見人滿意付30分鐘內(nèi)到達(dá)數(shù)據(jù)中心，在夜間竟然只有 3 名工程師值班，據(jù)中據(jù)中件藍(lán)盡管這 3 名工程師已經(jīng)盡力，心僅心起但面對這種情況時仍然忙不過來，留名利亞進(jìn)而導(dǎo)致事故變得更嚴(yán)重。員工
澳大利亞東區(qū)數(shù)據(jù)中心概況：由多個機(jī)房組成、值班使用水冷系統(tǒng)、微軟有 7 臺水冷設(shè)備其中 5 臺為常開機(jī) 2 臺為備用。
事故時間線：
事故觸發(fā)原因是新南威爾士州的市電供應(yīng)出現(xiàn)問題 (8 月 30 日 08:41，注意是 UTC+0 時間非當(dāng)?shù)貢r間)，導(dǎo)致 5 臺常開水冷機(jī)組全部掛掉，只有 1 臺備用機(jī)組自動開機(jī)，另一臺開機(jī)了但又跳閘了。
現(xiàn)場值班工程師按照緊急操作程序試圖恢復(fù)常開水冷機(jī)組但失敗了，微軟承認(rèn)由于數(shù)據(jù)中心園區(qū)的規(guī)模，夜間團(tuán)隊配備的人手不足以及時重啟水冷機(jī)組，為此微軟臨時將夜間值班工程師由 3 名增加到 7 名。
在水冷機(jī)組歇菜后，存儲和 SQL 服務(wù)器發(fā)出了告警，此時距離市電供應(yīng)問題已經(jīng)過去了 1 個小時 50 分鐘。隨著水冷機(jī)組的歇菜，服務(wù)器的溫度也越來越高。
接著工程師繼續(xù)嘗試啟動水冷機(jī)組，但依然沒能成功，到 11:20 水冷機(jī)組的 OEM 支持工程師抵達(dá)現(xiàn)場進(jìn)行處理，到 11:34 現(xiàn)場工程師最終決定關(guān)閉兩個受影響的數(shù)據(jù)大廳的基礎(chǔ)設(shè)施。
到 12:12 五臺常開水冷機(jī)組終于手動重啟成功，接著數(shù)據(jù)中心溫度開始逐漸下降，隨后工程師開始為受影響的基礎(chǔ)設(shè)施恢復(fù)供電，最終到次日 06:40 所有設(shè)施恢復(fù)、所有數(shù)據(jù)恢復(fù)。
微軟大客戶受影響嚴(yán)重：
新南威爾士州數(shù)據(jù)中心托管著微軟多個大客戶的數(shù)據(jù)，包括但不限于昆士蘭銀行、捷星航空 (澳航旗下子公司) 等，這次事故導(dǎo)致微軟的這些大客戶受到嚴(yán)重影響。
從事故報告來看，故障自動轉(zhuǎn)移進(jìn)行的似乎并不是很順利，按照設(shè)計邏輯，一旦出現(xiàn)故障，服務(wù)會自動轉(zhuǎn)移到其他數(shù)據(jù)中心確保客戶不受影響。
此次故障 Azure 的故障轉(zhuǎn)移也進(jìn)行了，但效果好像并不是很好，微軟表示后續(xù)要重新改進(jìn)。
微軟的事后反思：
1. 由于數(shù)據(jù)中心規(guī)模較大，夜間團(tuán)隊人員配備不足，無法及時重啟水冷機(jī)組，微軟暫時將夜間值班人員從 3 名增加到 7 名。
2. 對于這類大型事故，重啟水冷機(jī)組的經(jīng)濟(jì)操作程序執(zhí)行速度很慢，微軟正在探索改進(jìn)自動化方案用來應(yīng)對供電等問題。
3. 展望未來，微軟正在評估各種方法確保可以對各個水冷機(jī)組的子集負(fù)載曲線進(jìn)行優(yōu)先級排序，以便掛了的時候先將負(fù)載最高的機(jī)組重啟。
4. 利用流程表對工作負(fù)載故障轉(zhuǎn)移和設(shè)備關(guān)閉進(jìn)行排序，用來確定不同的優(yōu)先級，同時微軟正在改進(jìn)水冷溫度報告，以便更好的根據(jù)溫度閾值來決定何時進(jìn)行故障轉(zhuǎn)移或關(guān)閉服務(wù)器。
5. 五臺水冷機(jī)組沒有重啟，因為相應(yīng)的水泵沒有收到水冷機(jī)組的運(yùn)行信號，這很重要，因為水泵對水冷機(jī)組的成功啟動至關(guān)重要，為此微軟正在找水冷機(jī)組 OEM 調(diào)查為什么水冷機(jī)組沒有命令各自的水泵重啟。
6. 由于未知錯誤，一臺備用水冷機(jī)組就是跳閘那個沒能自動重啟，微軟正在找 OEM 診斷。
寧波外圍（寧波外圍女）（電話微信181-2989-2716）一二線城市外圍預(yù)約、空姐、模特、留學(xué)生、熟女、白領(lǐng)、老師、優(yōu)質(zhì)資源
貴陽包夜美女全套外圍上門外圍女（電話微信181-2989-2716）提供頂級外圍女上門，伴游，空姐，網(wǎng)紅，明星，車模等優(yōu)質(zhì)資源，可滿足你的一切要求
相關(guān)內(nèi)容
- 《戀與建制人》bai ?起逝世日慶典 以愛為翼天下風(fēng)遠(yuǎn)
- 劇版《凡人修仙傳》曝新海報 楊洋版韓立踏山而來！
- 游仄易遠(yuǎn)晨播報：Xbox新串流設(shè)備疑暴光 SE受特利我工做室改名為Studio Onoma
- 倪妮稱沒有走性感線路 教玉朱走路會挨爸爸挨
- 聚焦當(dāng)下 探尋未來｜ CDEC高峰論壇圓滿召開
- 當(dāng)貝投影NEW D3X新品發(fā)布：煥新體驗，年輕人的幸福神器
- 國慶假期海內(nèi)旅游出游4.22億人次 已規(guī)復(fù)至2019年的60%
- TCL華星發(fā)布屏幕內(nèi)CSPI高速點(diǎn)對點(diǎn)傳輸技術(shù)，國標(biāo)P2P協(xié)議實現(xiàn)量產(chǎn)
隨機(jī)閱讀
- 《英魂之刃心袋版》細(xì)英聯(lián)賽出色時候 趙云bai ?馬銀槍大年夜招一控四
- 庫克稱蘋果目標(biāo)是產(chǎn)品不用地球任何資源 用“廢品”造手機(jī)
- 2022成都車展探館：福特電馬GT Twister特別版實車
- EA×名看版怪獵新游《WILD HEARTS》28分鐘新真機(jī)演示：暢快淋漓的三場挨獵戰(zhàn)
- 《爐石傳說》國服宣布9月25日回歸
- 玩的便是心跳！realme真我618狂悲夜5月24日開啟 -
- 《燕云十六聲》開辟團(tuán)隊沒有到百人 游戲輿圖沒有竭更新
- 光枯Play5支撐66W超等快充，新品尾收盡正在京東618 -
- 《巫師3：狂獵》和《賽博朋克2077》仍有彩蛋可供玩家尋找
- 順峰山荷花池噴霧時候2022
- 2022成都車展探館：現(xiàn)代Nexo中國版實車
- 熱劇《龍之家族》第二季曝正式預(yù)告 腥風(fēng)血雨鐵王座
- 《陽陽師》齊新結(jié)界皮膚·華夜楓舞 即將上線！
- 鄧超：孫儷規(guī)復(fù)快隨時可復(fù)出 她只是舍沒有得孩子
熱門排行