2024 年 9 月 10 日上午，阿里云新加坡可用區(qū) C 數(shù)據(jù)中心突發(fā)火災(zāi)，主要科技公司服務(wù)中斷。火災(zāi)原因確定為鋰電池爆炸。據(jù)外媒報(bào)道，10 日早上約 8 點(diǎn)火災(zāi)發(fā)生，截至 11 日下午 8 點(diǎn)，已持續(xù) 36 小時(shí)仍未完全撲滅。

一、火災(zāi)影響及進(jìn)展
阿里云發(fā)布官方聲明，關(guān)鍵云產(chǎn)品如云數(shù)據(jù)庫 Redis、MongoDB、RDS MySQL 等受到影響。今日凌晨更新進(jìn)展，稱大部分受網(wǎng)絡(luò)影響的云產(chǎn)品已恢復(fù)正常運(yùn)行，但部分業(yè)務(wù)因機(jī)房斷電需等物理?xiàng)l件恢復(fù)。“昨晚 20:23，消防部門仍在現(xiàn)場(chǎng)處理大樓安全風(fēng)險(xiǎn)，運(yùn)維工程師等待進(jìn)入機(jī)房許可。若現(xiàn)場(chǎng)評(píng)估不具備原地恢復(fù)條件，應(yīng)急小組將執(zhí)行服務(wù)器設(shè)備遷移恢復(fù)方案。” 此次事件不僅影響阿里云服務(wù)，還對(duì)托管在該機(jī)房的 Lazada 和字節(jié)跳動(dòng)等科技公司造成嚴(yán)重服務(wù)中斷。Lazada 和 TikTok Shop 電商平臺(tái)賣家反饋無法同步訂單信息，用戶稱小黃車功能無法正常使用。兩平臺(tái)已對(duì)受影響訂單延期處理。部分 TikTok 用戶反饋新加坡發(fā)布的視頻無法獲得正常流量。該數(shù)據(jù)中心還托管其他跨國公司服務(wù)器，有用戶報(bào)告 Digital Ocean、IaaS 服務(wù) Coolify 以及 Cloudflare 出現(xiàn)宕機(jī)或服務(wù)降級(jí)，似乎與此次火災(zāi)有關(guān)。AWS 銷售趁機(jī)安利自家服務(wù)。

二、火災(zāi)詳情及挑戰(zhàn)
機(jī)房火災(zāi)由鋰電池爆炸引發(fā)，持續(xù)超 30 小時(shí)。據(jù)當(dāng)?shù)孛襟w報(bào)道，該數(shù)據(jù)中心屬美國數(shù)據(jù)中心房地產(chǎn)投資信托 Digital Realty 名下。火災(zāi)始于當(dāng)?shù)貢r(shí)間周二上午，群眾事發(fā)前聽到爆炸聲，隨后數(shù)據(jù)中心冒濃煙，有嗆鼻燒焦味。鋰電池爆炸威力巨大，瞬間引發(fā)火災(zāi)并迅速蔓延。Digital Realty 公司發(fā)言人表示，“2024 年 9 月 10 日上午 7：45，SIN11 數(shù)據(jù)中心觸發(fā)火災(zāi)警報(bào)。8：15 前所有現(xiàn)場(chǎng)人員安全撤離，事故未造成人員受傷。” 事故發(fā)生在數(shù)據(jù)中心一棟建筑的電池室。新加坡民防部隊(duì)公告稱，火患波及數(shù)據(jù)中心三樓閣樓內(nèi)兩個(gè)電池房、兩個(gè)電源房和一個(gè)設(shè)備儲(chǔ)藏室。滅火手段包括四個(gè)水槍、房內(nèi)灑水滅火系統(tǒng)、滅火機(jī)器人等。為防復(fù)燃，消防人員留守?cái)?shù)據(jù)中心外面，“需降溫和澆濕控制連鎖反應(yīng)”。但截至 11 日晚，失火數(shù)據(jù)中心仍有兩處冒煙。滅火面臨諸多挑戰(zhàn)，鋰離子電池火災(zāi)難撲滅，內(nèi)部化學(xué)反應(yīng)會(huì)持續(xù)生熱提供燃料致自燃復(fù)燃；會(huì)釋放有毒氣體增加消防員風(fēng)險(xiǎn)且使滅火復(fù)雜；數(shù)據(jù)中心封閉式設(shè)計(jì)通風(fēng)有限不利煙霧排出。業(yè)界對(duì)用水滅火有爭(zhēng)議，認(rèn)為可能導(dǎo)致電池短路加劇火勢(shì)，全氟己酮滅火劑則效果優(yōu)異。9 月 11 日晚 8 點(diǎn)，消防員仍在現(xiàn)場(chǎng)澆濕作業(yè)。大樓建筑結(jié)構(gòu)受損，建設(shè)局對(duì)部分區(qū)域發(fā)出危樓令和封閉令。

三、阿里云業(yè)務(wù)受影響情況
受到火災(zāi)影響的企業(yè)被告知啟動(dòng)災(zāi)難事態(tài)下業(yè)務(wù)連續(xù)性計(jì)劃。阿里云狀態(tài)報(bào)告稱，周二 10：20 檢測(cè)到新加坡區(qū)域 C 可用區(qū)異常，“部分云服務(wù)無法正常運(yùn)行”。后續(xù)更新指出異常由鋰電池爆炸引發(fā)，爆炸導(dǎo)致現(xiàn)場(chǎng)起火及溫度升高。作為中國云服務(wù)頭部廠商之一，阿里云稱其災(zāi)難恢復(fù)與故障轉(zhuǎn)移程序按預(yù)期運(yùn)行，高可用性云產(chǎn)品達(dá)承諾服務(wù)水平，但部分用戶須手動(dòng)遷出工作負(fù)載。目前阿里云等待數(shù)據(jù)中心恢復(fù)正常，部分服務(wù)和產(chǎn)品被迫下線。截至周二晚 20：04，“火災(zāi)警報(bào)尚未完全消除”，工作人員無法進(jìn)入著火建筑，數(shù)據(jù)中心內(nèi)一些網(wǎng)絡(luò)設(shè)備 “在高溫環(huán)境下已出現(xiàn)異常”，影響部分云產(chǎn)品網(wǎng)絡(luò)連接。客戶收到警告，稱 “新加坡 C 可用區(qū)遭遇網(wǎng)絡(luò)完全中斷可能性增加”，通知建議 “業(yè)務(wù)部署在該區(qū)域應(yīng)盡快遷移”。周三凌晨 1：46 情況惡化，阿里巴巴表示 “機(jī)房開始出現(xiàn)積水和泄漏，電路存在短路風(fēng)險(xiǎn)”，對(duì)新加坡 C 可用區(qū)一棟建筑緊急斷電。其他建筑網(wǎng)絡(luò)服務(wù)逐步恢復(fù)。Digital Realty 證實(shí)，截至周三凌晨 1：45，部分電氣系統(tǒng)已關(guān)閉。