阿里云香港區(qū)于2022年12月18日出現(xiàn)故障，多個(gè)香港和澳門的網(wǎng)站受到影響，包括Linux中國(guó)的官網(wǎng)（https://linux.cn/）、澳門金融管理局、澳門銀河、蓮花衛(wèi)視、澳門水泥廠等關(guān)鍵基礎(chǔ)設(shè)施營(yíng)運(yùn)者的網(wǎng)站、澳覓和MFood等外賣平臺(tái)、以及澳門日?qǐng)?bào)等APP一度無法正常訪問使用。

阿里云宕機(jī)事故發(fā)生后，最高興的莫屬各大公有云廠商的朋友圈了，瘋搶客戶的節(jié)奏：

事后阿里云官網(wǎng)立即發(fā)布關(guān)于宕機(jī)事故發(fā)布的公告

后經(jīng)排查，阿里云香港地域故障確認(rèn)系香港PCCW機(jī)房制冷設(shè)備故障所致。

2022年12月19日下午，根據(jù)最新的更新進(jìn)展顯示，目前阿里云所租用的香港電訊盈科公司機(jī)房已修復(fù)制冷設(shè)備故障，阿里云香港地域所有可用區(qū)云產(chǎn)品功能正在陸續(xù)恢復(fù)正常。

此次故障，影響香港地域可用區(qū)C的云服務(wù)器ECS、云數(shù)據(jù)庫(kù)、存儲(chǔ)產(chǎn)品（對(duì)象存儲(chǔ)、表格存儲(chǔ)等）、云網(wǎng)絡(luò)產(chǎn)品（全球加速、NAT網(wǎng)關(guān)、VPN網(wǎng)關(guān)等）等云產(chǎn)品使用。這一故障也影響了香港地域控制臺(tái)訪問和API調(diào)用操作。

對(duì)于受本次故障影響的產(chǎn)品，阿里云將根據(jù)相關(guān)產(chǎn)品的SLA協(xié)議進(jìn)行賠付。

可見，這次已超過24小時(shí)的服務(wù)器宕機(jī)，為各網(wǎng)站及平臺(tái)造成巨大損失，讓阿里云慘遭滑鐵盧。

在我們的運(yùn)維技術(shù)社群多位阿里云用戶宕機(jī)時(shí)間超過24小時(shí)，部分用戶直到19日中午才得以恢復(fù)。另有電商用戶表示，其宕機(jī)超過28小時(shí)仍未恢復(fù)?！皬淖蛱煸缟?1點(diǎn)開始，打了11次售后電話。但卻一直無人回電?！?/p>

按照阿里云官網(wǎng)對(duì)云服務(wù)器ECS的服務(wù)可用性等級(jí)指標(biāo)及賠償方案，用戶獲得的賠償方式，僅限于用于購(gòu)買ECS產(chǎn)品的代金券，且賠償總額不超過月度服務(wù)費(fèi)。

其實(shí)大家大可不必互相嘲笑對(duì)方，誰知道下一次大規(guī)模公有云宕機(jī)事件的主角是誰呢?

qidao123.com梳理了近年來著名宕機(jī)事件

01.2017年 1月26日，IBM

今年年初，IBM云的信用度受到影響，客戶用于訪問其Bluemix云基礎(chǔ)架構(gòu)(以前稱為SoftLayer)的一個(gè)管理網(wǎng)站服務(wù)中斷了數(shù)小時(shí)。

雖然底層基礎(chǔ)架構(gòu)沒有真的出現(xiàn)故障，但用戶發(fā)現(xiàn)他們無法管理自身的應(yīng)用程序，添加或刪除支持工作負(fù)載的云資源。

IBM表示該問題是由于一次接口升級(jí)造成，只是間歇性的。

02.2017年 1月31日，GitLab

GitLab極受歡迎的線上代碼庫(kù)——GibLab.com遭遇了18小時(shí)的服務(wù)中斷，最終無法完全修復(fù)。故障原因是員工在維護(hù)過程中從錯(cuò)誤的數(shù)據(jù)庫(kù)服務(wù)器中刪除了數(shù)據(jù)庫(kù)目錄。

一些客戶的生產(chǎn)數(shù)據(jù)最終丟失，包括對(duì)項(xiàng)目，評(píng)論與帳戶的修改。

該公司在事件后表示：“我們最合理的估計(jì)是此次影響了約5000個(gè)項(xiàng)目，5000個(gè)評(píng)論和700個(gè)新用戶帳戶。“

GitLab CEO在向用戶道歉時(shí)稱，“丟失生產(chǎn)數(shù)據(jù)是讓人無法接受的”。

03.2017年 2月9日,Instapaper

亞馬遜RDS服務(wù)上的MySQL數(shù)據(jù)庫(kù)文件大小限制引發(fā)了Pinterest服務(wù)器的長(zhǎng)時(shí)間宕機(jī)。

之后，這家社交化書簽網(wǎng)站稱，其工程師從來不知曉在2014年4月之前創(chuàng)建的數(shù)據(jù)庫(kù)RDS容量限制為2TB，并且AWS服務(wù)也沒有發(fā)出表內(nèi)存儲(chǔ)其“書簽”即將超過該限制容量的警告信息。

經(jīng)過一天多的時(shí)間，Instapaper(Pinterest在2016年收購(gòu)的閱后即焚服務(wù)提供商)的服務(wù)恢復(fù)了對(duì)存檔資料的受限訪問，同時(shí)工程師們盡力恢復(fù)數(shù)據(jù)庫(kù)的其它部分，四天后Instapaper完全恢復(fù)。

04.2017年 2月24日，F(xiàn)acebook

世界各地的一些用戶Facebook賬戶被鎖定了近三個(gè)小時(shí)，這讓他們擔(dān)心自己的帳戶被劫持了。

Facebook給出的解釋是為了預(yù)防黑客錯(cuò)將用戶發(fā)送到恢復(fù)界面，讓人覺得其他人登錄了他們的帳戶。而受影響的用戶被阻止立即重新登錄。

Facebook確認(rèn)沒有出現(xiàn)實(shí)際的安全漏洞。

這是那一周Facebook出現(xiàn)的第二次問題。幾天前，有人還稱他們無法看到自己發(fā)的動(dòng)態(tài)。

05.2017年 2月28日, AWS

這次宕機(jī)事件極為轟動(dòng)，相信大家對(duì)此記憶尤深。當(dāng)時(shí)是一位AWS工程師試圖調(diào)試亞馬遜的弗吉尼亞數(shù)據(jù)中心S3存儲(chǔ)系統(tǒng)，但輸入了一個(gè)錯(cuò)誤指令，導(dǎo)致許多互聯(lián)網(wǎng)——包括諸如Slack，Quora和Trello等眾多企業(yè)平臺(tái)宕機(jī)4個(gè)小時(shí)。

亞馬遜在事件后分析表示，該員工當(dāng)時(shí)當(dāng)時(shí)打算將一小部分用于計(jì)費(fèi)過程的托管子系統(tǒng)服務(wù)器刪除。然而，錯(cuò)誤命令導(dǎo)致了更多的服務(wù)器脫機(jī)，包括為數(shù)據(jù)存儲(chǔ)功能提供特定請(qǐng)求所需的一個(gè)子系統(tǒng)和另一個(gè)分配新存儲(chǔ)空間的子系統(tǒng)。

亞馬遜坐擁約三分之一的全球云市場(chǎng)，因此這次宕機(jī)事件重新引發(fā)了關(guān)于公有云的風(fēng)險(xiǎn)論。

06.2017年 3月16日，Microsoft Azure

微軟Azure公有云出現(xiàn)超過8小時(shí)的存儲(chǔ)可用性問題，主要影響到美國(guó)東部的客戶。有些用戶無法配置新的存儲(chǔ)空間或訪問本地現(xiàn)有資源。之后，一個(gè)微軟工程團(tuán)隊(duì)確認(rèn)原因?yàn)閿嚯妼?dǎo)致的存儲(chǔ)集群不可用。

除此之外，微軟還在Azure狀態(tài)頁(yè)上列出了一個(gè)軟件錯(cuò)誤，該錯(cuò)誤影響跨多個(gè)服務(wù)的存儲(chǔ)配置超過一個(gè)小時(shí)。

07.2017年 3月21日，Microsoft Office 365

由于用戶身份驗(yàn)證問題，一些微軟業(yè)務(wù)和消費(fèi)者云服務(wù)，包括Office 365存儲(chǔ)和電子郵件服務(wù)都無法訪問。

宕機(jī)事件還使得客戶無法訪問OneDrive存儲(chǔ)，Skype協(xié)作，Outlook電子郵件和Xbox Live等消費(fèi)產(chǎn)品。

08.2017年 5月22日，在IBM云上的Lululemon

熱門瑜伽網(wǎng)站Lululemon出現(xiàn)服務(wù)中斷問題，其CEO將主要責(zé)任歸咎于IBM的托管云服務(wù)。

Lululemon CEO，Laurent Potdevin在接受CNBC(美國(guó)全國(guó)廣播公司財(cái)經(jīng)頻道)采訪時(shí)直接指責(zé)在IBM云環(huán)境下電子商務(wù)銷售額遭受了損失。并表示他的團(tuán)隊(duì)由于這個(gè)問題連續(xù)工作了36個(gè)小時(shí)，并已經(jīng)向IBM CEO，Ginni Rometty表達(dá)了不滿。

Potdevin在談及對(duì)IBM云計(jì)算時(shí)稱，“我們正在考慮我們的選擇”。

09.2017年 6月19日，Microsoft Skype

主要分布在歐洲的微軟Skype用戶由于遭受明顯的分布式阻斷服務(wù)，接連出現(xiàn)宕機(jī)問題。

6月19日，Skype用戶開始抱怨多個(gè)小時(shí)的宕機(jī)問題。這次宕機(jī)持續(xù)到次日，用戶在通信平臺(tái)上無法連接，交流信息受阻。

雖然微軟沒有立即確認(rèn)DDoS的報(bào)道，但一個(gè)名為CyberTeam的黑客組織承認(rèn)該事件是他們所為。

10.2017年 6月28日, 蘋果iCloud

多個(gè)社交媒體反饋蘋果iCloud Backup服務(wù)的可用性問題。蘋果在系統(tǒng)狀態(tài)頁(yè)表示，iCloud Backup出現(xiàn)宕機(jī)的用戶數(shù)量?jī)H不到1%。

受影響的人無法從之前的備份中恢復(fù)iOS設(shè)備，問題持續(xù)了至少36個(gè)小時(shí)。而在未完成修復(fù)時(shí)會(huì)掛起恢復(fù)進(jìn)程，開啟設(shè)備保護(hù)數(shù)據(jù)的新備份沒是有問題的。

11.谷歌云, 2月15日

2月15日，谷歌應(yīng)用開發(fā)平臺(tái)的出現(xiàn)了數(shù)據(jù)庫(kù)故障引發(fā)了不少該平臺(tái)客戶的煩惱。

該問題于接近于中午12點(diǎn)時(shí)發(fā)生在Google Cloud Datastore上，這是為規(guī)模型用戶設(shè)計(jì)的一款非關(guān)系型數(shù)據(jù)庫(kù)。

在事故中，谷歌PaaS服務(wù)Google App Engine的用戶經(jīng)歷了長(zhǎng)達(dá)一小時(shí)的錯(cuò)誤與延遲情況。

游戲玩家在這次事件中受波及最為嚴(yán)重，因?yàn)椴簧俚臒衢T在線游戲使用了谷歌服務(wù)。而像Pokemon Go和Snapchat也備受沖擊。

12.AWS，2018年 3月2日

3月2日，AWS的宕機(jī)廣泛影響了大量的Alexa語音助手的用戶，并波及到了很多熱門在線服務(wù)商，如Atlassian、Slack和Twilio。

稍后，亞馬遜表示他們位于弗吉尼亞數(shù)據(jù)中心在早上遇到了強(qiáng)烈東北風(fēng)暴的沖擊，而使得網(wǎng)絡(luò)連接出現(xiàn)了問題。

這場(chǎng)風(fēng)暴切斷了AWS北弗吉尼亞地區(qū)與兩個(gè)東海岸運(yùn)營(yíng)商Equinix和CoreSite連接。

13.微軟Office 365，2018年 4月6日

4月6日，大量歐洲、亞州和美國(guó)的微軟客戶的電子郵件賬戶出現(xiàn)了問題。

其中英國(guó)受影響最為巨大，由于Office 365的宕機(jī)，許多企業(yè)無法發(fā)送郵件與登錄Skype。

一些用戶報(bào)告說他們只能使用單點(diǎn)登錄來登錄那些辦公生產(chǎn)力套件。

有些諷刺的是，這次事件距離微軟發(fā)布全新Office 365安全保護(hù)功能后僅一天。

14.AWS，2018年 5月31日

5月31日，因北弗吉尼亞地區(qū)的數(shù)據(jù)中心中的硬件問題，該云巨頭又一次出現(xiàn)了連接問題。

其影響時(shí)間大約為30分鐘，在此期間用戶報(bào)告說因硬件錯(cuò)誤，所有的數(shù)據(jù)不能得以被全部再存儲(chǔ)。

該宕機(jī)是“由數(shù)據(jù)中心和一些網(wǎng)絡(luò)設(shè)備中的一些物理服務(wù)器上的電力事件引起的”，AWS在事后報(bào)告中寫到。

AWS的核心EC2服務(wù)，Workspaces 虛擬桌面服務(wù)以及Redshift數(shù)據(jù)倉(cāng)庫(kù)服務(wù)都受到了影響。

15.微軟Azure，2018年 6月17日

由熱浪而引發(fā)的存儲(chǔ)和網(wǎng)絡(luò)中斷使得歐洲的許多微軟云客戶在17，18日兩日間與他們的數(shù)據(jù)分開了超過5小時(shí)的時(shí)間。

微軟表示，在愛爾蘭特別炎熱的夏季里，一個(gè)在愛爾蘭的數(shù)據(jù)中心恒溫系統(tǒng)出現(xiàn)了問題。

16.谷歌，2018年 7月17日

在7月17日的下午，谷歌云的宕機(jī)使得Spotify和Snapchat等熱門服務(wù)又不得不中斷。

谷歌方面稱，他們?cè)谥形缇鸵庾R(shí)到了其負(fù)責(zé)均衡器的問題。宕機(jī)影響了谷歌的開發(fā)平臺(tái)App Engine、Cloud Networking和Stackdriver，后者旨在為公有云用戶提供績(jī)效與數(shù)據(jù)診斷服務(wù)。

之后，谷歌發(fā)布了一項(xiàng)更新，表示由該事件導(dǎo)致的502問題已在下午1:05時(shí)得到解決。

17.亞馬遜，2018年 7月16日

如同國(guó)內(nèi)電商們的雙十一一樣，亞馬遜在美國(guó)也創(chuàng)造了自己的購(gòu)物節(jié)日Amazon Prime Day(亞馬遜會(huì)員日)。

但是，在第四屆亞馬遜會(huì)員日當(dāng)日的開幕儀式后幾分鐘，大規(guī)模的故障使得7月16日的銷售陷入了癱瘓。

AWS的發(fā)言人表示，這些問題與AWS無關(guān)。

但是對(duì)于全球電商網(wǎng)站來說，失敗就是失敗了，這個(gè)網(wǎng)站是在據(jù)說是世界上最領(lǐng)先的云上托管的。許多消費(fèi)者乘興而來敗興而歸，得到的只有一個(gè)宕機(jī)通知。

但盡管如此，但該客戶日的銷售業(yè)績(jī)?nèi)匀黄屏思o(jì)錄

18.微軟，2018年 9月5日

微軟發(fā)現(xiàn)自己在9月的一周就在兩個(gè)方面出現(xiàn)了問題。

其一個(gè)，9月5日全世界用戶都遇到了部分時(shí)間時(shí)無法訪問365 Outlook或Skype for Business的情況。用戶報(bào)告說，當(dāng)他們嘗試登錄微軟時(shí)，他們會(huì)受到一條錯(cuò)誤消息，說“受到限制”。

微軟將這次終端歸咎于Azure后端身份驗(yàn)證系統(tǒng)的更新問題。

與此同時(shí)，在4日到5日兩天里，微軟在圣安東尼奧的數(shù)據(jù)中心遭遇了雷擊，這導(dǎo)致了美國(guó)中南部區(qū)域中Azure和Office 365服務(wù)的中斷。

19.Facebook 2018年 11月12日、11月20日

對(duì)于社交網(wǎng)絡(luò)巨頭來說，11月是糟糕的一月，兩次宕機(jī)事件影響了大量的企業(yè)協(xié)同產(chǎn)品用戶。

包括Workplace協(xié)同工具在內(nèi)的Facebook服務(wù)在11月12日出現(xiàn)宕機(jī)，在服務(wù)恢復(fù)前，其收到了數(shù)千起投訴。

短時(shí)間內(nèi)，“FacebookDOWN”成為了Twitter上的熱門話題。

僅僅一個(gè)多星期后，11月20日，F(xiàn)acebook又出現(xiàn)了一起宕機(jī)事件，這是Facebook自8月以來出現(xiàn)的第三起重大停機(jī)事件。

有3/4的用戶報(bào)告稱從早上8點(diǎn)到下午早些時(shí)候，他們遇到了全面宕機(jī)或登錄困難問題。

20.微軟，2018年 11月18日

據(jù)微軟披露，11月18日，一些用戶無法登錄Azure和Office 365服務(wù)。

這次宕機(jī)影響了許多需要身份驗(yàn)證而登錄云服務(wù)的用戶，并橫跨整個(gè)歐洲、亞太和美洲地區(qū)，從當(dāng)?shù)貢r(shí)間周日晚上11：39起開始影響Azure和Offic 365服務(wù)。

可見，公有云服務(wù)每年都會(huì)或多或少出現(xiàn)一些故障，人為原因、機(jī)器故障、軟件bug……等等

雖然原因不同，但是導(dǎo)致的結(jié)果只有一個(gè)——相關(guān)云平臺(tái)上的客戶遭殃。或丟失數(shù)據(jù)，或停止服務(wù)，或影響創(chuàng)新。

業(yè)內(nèi)人士戲言：“世上沒有不宕機(jī)的云。”對(duì)于用戶來說，選擇多云做好互備和災(zāi)難應(yīng)急建設(shè)才是一勞永逸的，畢竟沒人知道：

下一次大規(guī)模公有云宕機(jī)什么時(shí)候發(fā)生？

IT人關(guān)注并加入我們加*防走丟

企業(yè)服務(wù)IT圈：聚焦全球ToB領(lǐng)域：甲方. 廠商. 集成商. 服務(wù)商. 渠道. ISV等生態(tài)，分享業(yè)內(nèi)干貨，打造中國(guó)第一企業(yè)服務(wù)技術(shù)內(nèi)容社區(qū)和社交平臺(tái)。我們根據(jù)粉絲真實(shí)崗位情況，分別設(shè)置：創(chuàng)業(yè)高管微信群/運(yùn)維技術(shù)專家群/架構(gòu)師之家/DevOps技術(shù)專家匯/ToB企業(yè)銷售互助會(huì)/ToB廠商市場(chǎng)人俱樂部，并為大家提供技術(shù)咨詢,營(yíng)銷策劃.招聘及工作推薦等服務(wù)。請(qǐng)大家掃碼或者添加微信：tian1tiant,(備注個(gè)人真實(shí)職業(yè)身份信息邀請(qǐng)不同崗位微信群）。公眾號(hào)官方網(wǎng)站：qidao123.com，了解更多，ToB企業(yè)服務(wù)之家,社交平臺(tái),限時(shí)注冊(cè)體驗(yàn)更多服務(wù)！