2024 年 9 月 10 日上午，阿里云新加坡可用區(qū) C 數據中心突發(fā)火災，主要科技公司服務中斷。火災原因確定為鋰電池爆炸。據外媒報道，10 日早上約 8 點火災發(fā)生，截至 11 日下午 8 點，已持續(xù) 36 小時仍未完全撲滅。
一、火災影響及進展
阿里云發(fā)布官方聲明，關鍵云產品如云數據庫 Redis、MongoDB、RDS MySQL 等受到影響。今日凌晨更新進展，稱大部分受網絡影響的云產品已恢復正常運行，但部分業(yè)務因機房斷電需等物理條件恢復。“昨晚 20:23，消防部門仍在現場處理大樓安全風險，運維工程師等待進入機房許可。若現場評估不具備原地恢復條件，應急小組將執(zhí)行服務器設備遷移恢復方案。” 此次事件不僅影響阿里云服務，還對托管在該機房的 Lazada 和字節(jié)跳動等科技公司造成嚴重服務中斷。Lazada 和 TikTok Shop 電商平臺賣家反饋無法同步訂單信息，用戶稱小黃車功能無法正常使用。兩平臺已對受影響訂單延期處理。部分 TikTok 用戶反饋新加坡發(fā)布的視頻無法獲得正常流量。該數據中心還托管其他跨國公司服務器，有用戶報告 Digital Ocean、IaaS 服務 Coolify 以及 Cloudflare 出現宕機或服務降級，似乎與此次火災有關。AWS 銷售趁機安利自家服務。
二、火災詳情及挑戰(zhàn)
機房火災由鋰電池爆炸引發(fā)，持續(xù)超 30 小時。據當地媒體報道，該數據中心屬美國數據中心房地產投資信托 Digital Realty 名下。火災始于當地時間周二上午，群眾事發(fā)前聽到爆炸聲，隨后數據中心冒濃煙，有嗆鼻燒焦味。鋰電池爆炸威力巨大，瞬間引發(fā)火災并迅速蔓延。Digital Realty 公司發(fā)言人表示，“2024 年 9 月 10 日上午 7：45，SIN11 數據中心觸發(fā)火災警報。8：15 前所有現場人員安全撤離，事故未造成人員受傷。” 事故發(fā)生在數據中心一棟建筑的電池室。新加坡民防部隊公告稱，火患波及數據中心三樓閣樓內兩個電池房、兩個電源房和一個設備儲藏室。滅火手段包括四個水槍、房內灑水滅火系統(tǒng)、滅火機器人等。為防復燃，消防人員留守數據中心外面，“需降溫和澆濕控制連鎖反應”。但截至 11 日晚，失火數據中心仍有兩處冒煙。滅火面臨諸多挑戰(zhàn)，鋰離子電池火災難撲滅，內部化學反應會持續(xù)生熱提供燃料致自燃復燃；會釋放有毒氣體增加消防員風險且使滅火復雜；數據中心封閉式設計通風有限不利煙霧排出。業(yè)界對用水滅火有爭議，認為可能導致電池短路加劇火勢，全氟己酮滅火劑則效果優(yōu)異。9 月 11 日晚 8 點，消防員仍在現場澆濕作業(yè)。大樓建筑結構受損，建設局對部分區(qū)域發(fā)出危樓令和封閉令。
三、阿里云業(yè)務受影響情況
受到火災影響的企業(yè)被告知啟動災難事態(tài)下業(yè)務連續(xù)性計劃。阿里云狀態(tài)報告稱，周二 10：20 檢測到新加坡區(qū)域 C 可用區(qū)異常，“部分云服務無法正常運行”。后續(xù)更新指出異常由鋰電池爆炸引發(fā)，爆炸導致現場起火及溫度升高。作為中國云服務頭部廠商之一，阿里云稱其災難恢復與故障轉移程序按預期運行，高可用性云產品達承諾服務水平，但部分用戶須手動遷出工作負載。目前阿里云等待數據中心恢復正常，部分服務和產品被迫下線。截至周二晚 20：04，“火災警報尚未完全消除”，工作人員無法進入著火建筑，數據中心內一些網絡設備 “在高溫環(huán)境下已出現異常”，影響部分云產品網絡連接。客戶收到警告，稱 “新加坡 C 可用區(qū)遭遇網絡完全中斷可能性增加”，通知建議 “業(yè)務部署在該區(qū)域應盡快遷移”。周三凌晨 1：46 情況惡化，阿里巴巴表示 “機房開始出現積水和泄漏，電路存在短路風險”，對新加坡 C 可用區(qū)一棟建筑緊急斷電。其他建筑網絡服務逐步恢復。Digital Realty 證實，截至周三凌晨 1：45，部分電氣系統(tǒng)已關閉。
四、數據中心火災頻發(fā)
數據中心作為數據存儲和處理的關鍵基礎設施，其安全性至關重要。近年來，全球范圍內的數據中心火災已造成巨大的經濟損失。回顧近年的數據中心火災事故，充分顯示出這一問題的嚴重性和緊迫性。
2022 年 8 月，位于美國愛荷華州康瑟爾布拉夫斯的谷歌數據中心發(fā)生爆炸，造成 3 人受傷。該數據中心是谷歌最大的數據中心之一，于 2009 年首次啟用。事故發(fā)生后，據宕機追蹤網站?
Downdetector.com?數據顯示，美國有超過 4 萬人報告無法使用谷歌搜索。
因電池起火造成的意外事故并不鮮見。2022 年 10 月，韓國 SK 公司 C&C 板橋數據中心發(fā)生火災，大火在大約 8 小時后被撲滅。經調查發(fā)現，安裝在地下三層電氣設備室的 5 個電池機架全部燒毀，電池和機架附近似乎因電氣因素失火。本次火災導致約 3.2 萬個服務器癱瘓，數千萬用戶服務受到影響。數據中心失火后，包括 Kakao Talk 在內的 Kakao 系列服務中斷了一天左右才逐步恢復。火災之后，韓國科技部長官李宗昊就數據中心失火導致網絡平臺癱瘓一事致歉，幾天之后，Kakao 聯席 CEO 也因此引咎辭職。
法國云巨頭 OVH 也曾因 UPS（不間斷電源）起火導致一處數據中心下線。2021 年 3 月，這家法國運營商的 SBG2 數據中心發(fā)生波及整棟大樓的起火事故，導致該區(qū)域的 4 個數據中心，一個被完全燒毀，另有一個部分受損。起火后，癱瘓的法國政府、企業(yè)與公共事業(yè)網站達到約 360 萬個，一些游戲開發(fā)商在歐洲的業(yè)務也受到影響，部分位于該數據中心的服務器被燒毀，其中游戲《Rust》表示，25 臺歐洲服務器完全損毀，沒有備份，數據無法被修復。事后，超過 130 名客戶加入了集體訴訟，指責 OVHcloud 未盡充分義務，且沒有為受損失的企業(yè)提供足夠的賠償。該公司遲遲不披露起火原因，并堅稱必須等待官方報告。在火災發(fā)生一年后，Bas-Rhin 消防局發(fā)布了一份調查報告，強烈批評這家法國運營商的設施。由事故調查報告可知，這座數據中心存在相當多的消防隱患，包括采用標稱耐火僅一小時的木質天花板、未配備自動滅火裝置、也沒有通用電氣切斷開關。更讓消防人員遺憾的是，這處設施還有一種自然冷卻設計，這也創(chuàng)造了可增加火勢的 “煙囪效應”。
