對于全球數(shù)以百萬計的網(wǎng)站運營者與網(wǎng)民來說，本周的周二，注定又是一個難忘的一天。

如我們所見（在新聞上所見），在這一天的短短數(shù)小時內(nèi)，包括X（原Twitter）、ChatGPT、Spotify等（海外）常用巨頭服務(wù)在內(nèi)，海外互聯(lián)網(wǎng)領(lǐng)域幾乎陷入癱瘓。無論刷新多少次，映入眼前的都是同樣的“InternalServerError”報錯頁面。但后來總結(jié)來看，這并不是一次外部攻擊導致的人為事故，而是一場由Cloudflare內(nèi)部引發(fā)的全球性技術(shù)故障。

事情的起因源于一次再常規(guī)不過的例行升級。正常情況下，每天，Cloudflare都會為其Bot管理模塊生成一個“特征文件”，用來幫助識別惡意機器人。這本是一項普通的后臺流程，但當天文件的生成程序因為數(shù)據(jù)庫權(quán)限調(diào)整出現(xiàn)異常，意外重復寫入部分內(nèi)容，文件體積因此比平時大了整整一倍。這看上去可能只是一個細小的問題，但對于系統(tǒng)層面來說，卻足以成為徹底擊穿代理層的導火索。

眼熟么？

按照Cloudflare的說法，Cloudflare的網(wǎng)絡(luò)結(jié)構(gòu)決定了這種配置文件需要在全球所有邊緣節(jié)點同步。也就是說，一旦生成，它會被迅速推送至遍布世界的數(shù)千臺服務(wù)器。而當這些節(jié)點接收到異常文件后，負責處理全部HTTP請求的核心程序沒能成功解析，直接崩潰。由于文件同步速度極快，多個國家、多個地區(qū)的節(jié)點幾乎在相近時刻出現(xiàn)同樣的故障，也就形成了用戶看到的“全球同步掉線”的奇怪場景。

更讓情況復雜的，是系統(tǒng)還會每隔幾分鐘自動檢查更新。這意味著，舊的正確文件偶爾會讓部分節(jié)點短暫恢復，但很快又會被新的錯誤文件覆蓋，再次宕機。自然而然的，外界當時看到的也就是網(wǎng)站“恢復—再報錯—再恢復”的循環(huán)。

這一劇本直到工程師們最終追蹤到特征文件本身，并暫停了錯誤文件的更新，情況才逐漸穩(wěn)定下來。當天稍晚時間，Cloudflare開始向全球節(jié)點重新推送正常版本，各地的代理服務(wù)陸續(xù)恢復，錯誤量在短時間內(nèi)迅速下降。不久后，Cloudflare宣布所有系統(tǒng)回到正常狀態(tài)，但這次宕機的影響已經(jīng)被記錄為近期互聯(lián)網(wǎng)基礎(chǔ)設(shè)施事故中“規(guī)模最為罕見的之一”。

Cloudflare：“Cloudflare網(wǎng)絡(luò)處理的5xx錯誤HTTP狀態(tài)代碼的數(shù)量。通常情況下，這個數(shù)值應(yīng)該非常低，而且在故障發(fā)生前也確實如此。”

作為全球互聯(lián)網(wǎng)基礎(chǔ)設(shè)施的重要組成部分，Cloudflare此次大規(guī)模宕機迅速引發(fā)了各界的關(guān)注和反響。而事發(fā)當日，Cloudflare盤前股價也一度下跌超過2%。Cloudflare首席技術(shù)官Dane Knecht隨后在X上公開致歉，承認網(wǎng)絡(luò)在當天出現(xiàn)嚴重問題，“辜負了依賴我們的客戶和整個互聯(lián)網(wǎng)···”但回到事故本身，不難發(fā)現(xiàn)，它之所以引發(fā)如此強烈的討論，很大程度上是因為于此揭示出的是一個越來越需要回應(yīng)的問題。

你猜這張圖我們還能再看到幾遍？

當下，越來越多的平臺將性能優(yōu)化、安全防護、訪問控制等關(guān)鍵能力托付給行業(yè)巨頭——以Cloudflare本身為例，其承載著全球大約五分之一的互聯(lián)網(wǎng)流量。在這樣的結(jié)構(gòu)下，一旦核心代理層出現(xiàn)故障，它所依賴的多個產(chǎn)品鏈路會同時失效，而這里承載的成千上萬家服務(wù)也會在極短時間內(nèi)同步感受到?jīng)_擊。

而這也正像我們在上個月前剛看到的那樣。彼時，互聯(lián)網(wǎng)的另一大基礎(chǔ)構(gòu)成——AWS也經(jīng)歷了一次的中斷。根據(jù)監(jiān)測平臺數(shù)據(jù)，當時共有超過兩千家服務(wù)受到影響，累計超過八百萬條用戶報錯被記錄。此次Cloudflare的事故，則再次讓““互聯(lián)網(wǎng)的命運，過度依附于少數(shù)幾家巨頭”這個問題放置在了人們的面前。當然，在這個面前的是這樣的一組數(shù)據(jù)，就云計算領(lǐng)域而言，全球前三家巨頭（AWS、微軟Azure和谷歌云）掌控了超過其中近七成的基礎(chǔ)設(shè)施。

Cloudflare：我知道誰在點我名

當然，也正是基于這一點，不難預料，無論是AWS還是Cloudflare，在此之后，我們顯然還會再度經(jīng)歷同樣的經(jīng)歷。但，當這些這些故障越來越多的發(fā)生時，這些問題也注定會隨之變得越來越無法回避。

本文為動點科技記者原創(chuàng)文章，未經(jīng)授權(quán)不得轉(zhuǎn)載，如需轉(zhuǎn)載或開白請在后臺回復“轉(zhuǎn)載”。

- - - - - - - - END - - - - - - - -

互動話題

你能接受“互聯(lián)網(wǎng)短暫消失”幾個小時嗎？

快來評論區(qū)留下你的觀點吧！
*想要獲取行業(yè)資訊、和志同道合的科技愛好者們分享心得，那就趕快掃碼添加“動點君”加入群聊吧！群里更有不定期福利發(fā)放！

精彩好文值得推薦！

一鍵轉(zhuǎn)發(fā)，戳個在看！