春節是中華民族最重要的傳統節日,人們在與親友團聚中,回到家鄉和家人,獲得情感滋養,規劃未來。 隨著城市數字生態的快速發展,流浪者返鄉、家庭團聚、朋友見面、表達親情、談友情、表達懷舊之情等新年禮儀習俗,在“雲端”上解鎖了新的表達方式,“雲端新年”也成為見證中國經濟奇蹟和國家文化與時俱進的最佳視窗。
新年的烟花最能撫慰凡人的心靈。 無論是熙熙攘攘的街市、歡聲笑語,還是燈火通明的夜晚,豐富多彩的市民生活被深度“雲化”,音訊、社交、高速、文旅、物流、汽車、教育等行業的雲業務流量高位疊加,流量高峰不同,給城市雲服務的穩定性帶來了不確定的風險和巨大挑戰。
春節對社會穩定和諧具有重要意義,城政雲服務承載著春節期間與民生相關的公用事業。 因此,確保城市“雲上春節”的穩定,為政府客戶創造“確定性”的服務質量成果,是華為e-CLOUD SRE義不容辭的責任和追求。
為做好嘉辰春節期間城市雲平台保障服務,政府雲上網從11月起提前100天進入“戰鬥狀態”華為雲確定性運維體系和解決方案,將雲服務的不確定性轉化為SLA“確定性”,實現全棧可觀測性、故障快速恢復、變更風險管理、彈性評估與優化依託一體化運控平台,聯動質量、技術、研發、合規等專家,組成春節安全團隊,根據政務服務特點沉澱出一套重大安全解決方案,通過“強超前部署”的“保障三部曲”,為政務客戶雲業務保駕護航。 活動期間嚴格把控,活動結束後服務繁重”。
提前“強力部署”:墨菲定律指出,“凡是可能出錯的,出錯的概率都很高”,這提醒我們,只要任何事件的發生概率大於零,就應該採取預防和緩解措施來預防和減少事故的發生和影響。 因此,政府雲保障團隊提前梳理了國家基地的重點業務,並利用雲分析技術對架構、安全評估、可用性檢查、容量分析和資源監控等進行架構優化,對雲平台的穩定性進行評估,識別風險並優化資源,從而確保系統的最佳執行狀態。 對全網進行深度巡查,對設施、工具和服務進行風險隱患檢查,通過重點調研、專項優化、加固支撐、風險整改等措施,開展風險清零化解。同時,根據“因地制宜”,根據各基地氣象和業務特點,制定基地應急預案和故障恢復方案,提前部署演練,降低故障發生概率和影響。
此事“嚴控”如果無法快速識別、響應、恢復和解決現網業務,則會在小範圍內影響使用者體驗,並可能造成經濟損失甚至社會負面影響。 正如老話所說,“和平不忘危、生存不忘死、治理不忘亂”,在保障過程中,既要高度警惕“黑天鵝”事件,也要防範“灰犀牛”事件;不僅要帶頭防範風險,而且要有控制和化解風險的過程。 春節關鍵保障活動期間,近1000名現場運維工程師7*24小時值班,借助華為雲SRE全面協調的關鍵保障體系,對現場進行24/7全天候監控巡檢。 來自習、廊坊、深圳三大運維中心的1000多名SRE專家遠端工作,全天候響應待命,一旦發生報警,能力團隊快速響應,快速定位分析報警問題,快速實施應急預案, 客戶的業務可以快速恢復。同時,通過變更控制、許可權控制、網路關閉等措施,降低可能觸發變更等操作的風險。 每天推送保障報告,及時交換事件資訊,聯動多方資源,做好化危為災、化危為安的遭遇戰準備始終尊重商家和直播網路,實現“零重大問題、零重大事故、零投訴”的保障目標。
事後的“繁重服務”保障成功的背後,要靠不斷總結和提公升“能力”,提高應對風險、迎接挑戰、化危為救的能力。 因此,在春節再險結束後,政府雲保障團隊將重新審視安全亮點和問題,將最佳實戰實踐固化為經驗庫和支援操作手冊,並與政府客戶分享華為雲保障經驗和建議,為下一次重大保障沉澱“教科書”。 而類似的“風險”可以直接“複製答案”,提公升整體支撐能力。
回首2023年,在確定性運維理念的指引下,華為雲上網服務已為全國160多個城市提供超過300項運維保障服務。
龍年,城市雲經濟全面復甦,推廣促銷、重要節日、線上服務開通、雲展等各類城市活動如火如荼,業務穩定、可靠、安全運營,為觀眾提供優質體驗,是社會形象的視窗,也是商業價值的基礎。 為了更好地服務政務客戶,政務雲SRE將溢位行業領先的運維技術能力和多年實踐經驗,沉澱覆蓋政務客戶全週期的專業運維服務,為政務雲服務創造“確定性”價值。 新的一年,政雲SRE將始終保持“零”心態,拼搏進取,以穩定可靠、資源高效、安全可信、業務敏捷為目標,守護數字城市每時每刻的運營,時刻助力數位化轉型,共築數字中國美好未來,讓運維成為智慧型世界的加速器