摘要: 深圳,坂田。冬日清晨的陽光,透過綠意盎然的樹梢照在C區數據中心,一切很安靜。成千上萬臺設備穩健運轉著,如同華為一顆跳動的心臟,用信息流連接并協同全球一百多個代表處7*24小時全球化業務的運作。這背后是一 ...
深圳,坂田。
冬日清晨的陽光,透過綠意盎然的樹梢照在C區數據中心,一切很安靜。成千上萬臺設備穩健運轉著,如同華為一顆跳動的心臟,用信息流連接并協同全球一百多個代表處7*24小時全球化業務的運作。這背后是一群默默支撐和堅守的華為IT人。
財報!財報!
10月1日國慶,22:30,A10,IT保障團隊辦公區燈火通明,財報支持組的十多位同事正在為季度財報的輸出緊張忙碌著。一份財報到底要處理多少數據?團隊中曾有人做過一個有趣的測算,如果A4紙每頁厚度為0.09mm,將季報處理的數據用A4紙打印,即使是雙面打印其高度也有1萬7千多千米,這接近2000座珠穆朗瑪峰的高度!本季報首次基于華為自產一體機承載,如此龐大的數據量對一體機運行是極為嚴峻的考驗。大家充滿了緊張與期待。
應用支持工程師周立平緊盯著電腦屏幕,上面不停滾動刷新著監控數據。不同IT系統中的數據流,就像小溪匯入江河湖海一樣,快速匯聚到華為數據中心的財報系統,最后形成薄薄幾頁紙的財報。50GB/s,60GB/s,70GB/s……隨著信息洪峰的到來,財報平臺的數據量逐步增長,接近警戒值。
突然,一個報警郵件發來:某子公司存貨減值變動XX億。怎么這么大的差異?已經連續奮戰了14個小時的周立平不敢有一絲懈怠,馬上通過eSpace組織在線會議,保障團隊中十幾年支持經驗的耿成江、和數據庫一體機朝夕相處的廖汐汶、深入了解業務邏輯的孫建華等迅速加入,一隊人馬兵分三路:問題定位、規避方案、資源協調。不到片刻,問題定位組便確認了底層平臺無異常,是數據處理邏輯出現問題。
10月2日凌晨1:50,問題終于解決。周立平臉上洋溢出勝利的喜悅,eSpace群組里的戰友們也紛紛冒泡點贊!
10月6日8:00,一條短信出現在她的手機上:Q3季報順利輸出,訂單量增長35%,系統零故障……謝謝大家支持!周立平長舒一口氣:華為一體機爭氣啦,比計劃提前了一天時間,還有兩天假期,終于可以在家好好陪陪寶寶了… …
穩定?效率?
10月24日,成研A1食堂廣場。WIFI接入、AnyOffice、云盤、手機W3、手機eSpace、移動審批、測試移動化…… “有了研發IT2.0,在家辦公、測試、與會統統不是夢!”IT人員向來往的同事熱情地推介。
然而,這邊在宣傳研發IT2.0的夢想,另一邊,存儲卻出問題了——2周內故障反復爆發,導致2次服務癱瘓。
存儲系統工程師張帆緊鎖眉頭,梳理解決方案的每一個細節。研發辦公應用基于桌面云、計算云的支撐,資源共享越大,效率越高。IT聯合產品線設計實施“超大存儲資源池”的試點方案,但超大存儲資源池受瞬時大流量沖擊出現大面積癱瘓。要效率,還是要穩定?存儲解決方案到底該如何優化?
張帆試圖找到一個兩全之策。他找到存儲建設和運維方面資深工程師吳家漢、汪自強,充分聽取了他們的建議,又和產品線同事反復討論,分析細節:超大資源池相當于“把雞蛋放到一個籃子里”,風險太過集中。最后大家決定參考“故障隔離、快速降級”的互聯網架構,建立“雞蛋分籃”的小資源池方案,即使一戶出現問題,其他用戶可確保正常運作,影響被控制在最小范圍。兵貴神速,當成研路演隊伍剛返回深圳,存儲方案優化已完成,并迅速實施。基于效率與穩定的優化方案成為后續IT2.0項目順利推行的保障。截至目前,華為內部IT網絡提供了800+應用,已上線20萬虛擬機(桌面云10萬,計算云10萬),全球帶寬總容量達到58Gbps,全球的存儲容量超過60PB。
問題解決了,張帆在記事本上寫下這樣一句話:“技術也有博弈,有時候最好的方法并非做到某一方面的極致,而是在諸多方面中找到一個制衡點!”
IT系統雙活
春節IT容災演練后,信息技術工程部便決定策劃和實施IT關鍵系統雙活改造。系統雙活指業務系統在兩套系統上同時運行,兩套系統通常部署在不同的數據中心,當某套系統出現問題時,另一套系統仍不間斷地提供服務。如果成功,將使系統應用的可用性提升10倍以上,提升業務連續性保障水平。
如果把華為的IT產品看成一個個棋子,那么IT系統雙活就相當于布局一盤大棋。由IT七級專家劉明榮牽頭,開始新一輪緊鑼密鼓的奮戰。面對這個挑戰,老劉還是有信心的,他在數據中心摸爬滾打了17年,還有精通數據庫且熟悉業界雙活方案的蘇燕強、對軟件包功能特性了如指掌的熊建湘、全面掌握Web平臺架構的鄭學文、熟悉公司自產產品又清楚應用場景的陳紹元等強強聯手的兄弟連。從方案探討、測試、論證到試點、上線,系統團隊奮戰了整整9個月,梳理了12個關鍵源系統與上百個周邊系統千絲萬縷的聯系,完成了鏡像系統的架構設計,采取集成驗證、分批上線的策略,在系統正式啟動雙活前做好了充分準備。
11月, IT系統雙活進入倒計時:源系統退出,鏡像系統穩健地承載了業務運行!關鍵業務悄無聲息的改變運行狀態:系統雙活運行成功!老劉和他的兄弟連開心地笑了,這9個月來辛苦付出都在這一瞬間仿佛得到了最好的獎賞。因華為IT率先在業界取得突破,不僅再一次證明了華為IT從應用軟件到網絡、存儲、計算等系統平臺的綜合解決方案實力,也將更穩定、高效支撐華為全球業務連續運營。
陽光下華為數據中心,靜靜佇立。這個全球業務復雜性最高的專業平臺,培育了一批批勇于追夢的IT人,以安全、穩定、高效的運作支撐了公司的業務發展;它又像是全球最大的一塊試驗田,無數華為自產產品正在這里孵化、催熟、走向卓越,插上夢想的翅膀飛向全世界!
鮮花
握手
雷人
路人
雞蛋
發布評論請先 登錄
相關推薦
評論