Salesforce 因舊版登入服務發生資源耗盡級聯故障,導致全球服務中斷。根本原因被確定為資源耗盡級聯故障,其中連接池或執行緒等共享資源被耗盡。在早期的快速重啟嘗試失敗後,SRE 團隊目前正在其整個機隊中實施緩慢的滾動修復。修復策略涉及緩慢的滾動部署,以避免在其他服務中觸發類似的耗盡模式。

事件背景

資源耗盡級聯故障發生在一個元件耗盡共享資源,導致依賴該資源的服務連鎖失效時。在多租戶環境中這很常見,因為許多應用程式會共享記憶體或資料庫連接等基礎設施資源。

社群觀察

社群成員指出運行擁有數百萬客戶應用程式的 PaaS 的複雜性,並讚賞 SRE 團隊在停擺期間的專業能力。部分評論強調緩慢修復的時間點恰逢 Dreamforce 大會,颇具諷刺意味,而其他用戶則感謝詳細的狀態頁面更新。