“行,采集基站的標口……再把基站的一鍵式日志發回來。”
“這么多數據你一個人看?”
“是的,放心,一定給你搞定!”
作為一名維護工程師,遇到這樣的問題,我已經能夠自信滿滿地應對。我要感謝這三年的歷練。
2016年8月,我來到了華為,加入了后端維護部門。原本以為技術類的工作應該是在安靜的環境下進行的,就像是學校實驗室那樣,可沒想到,進部門第一天,我感覺進了一個“菜市場”,一路上各種打電話的聲音此起彼伏,完全顛覆了我對工作場景的想象。
做技術發言人不容易
初入部門,我的主要任務是處理異系統互操作的問題,也就是2/3/4G的移動性相關事務。
2017年7月,西方運營商一年一度的大考——“P3測試”正式進入了沖刺階段。P3比拼是由《Connect》雜志組織的第三方網絡比拼測試,按同樣標準對運營商網絡打分排名。這是一套完善的用戶體驗模擬測試,結果公開發布。由于雜志巨大影響力,比拼結果對運營商口碑、市場品牌、用戶選網以及管理層評價具有極大影響,被運營商視為大考,因此也自然成為對其供應商的大考。
沒想到的是,所有P3項目的CSFB(電路交換回退)語音與移動性策略都被分配給我完成。之后的三個月,各種P3的分析和優化需求,就如雪花般從全世界各地飛了過來。我一天要同時處理來自七八個局點的問題。在這個過程中,我慢慢開始了解歐洲、澳洲乃至非洲各國的主流運營商。由于時差,需要經常與歐洲一線開會,工作到半夜,壓力很大。
印象最深的是A國某局,為了提升CSFB語言時延,一線給客戶推薦了自適應盲切換的策略,根據用戶所在的信道條件,選擇是基于測量的切換還是直接盲切換。可沒曾想,開啟這個策略后,友商的手機終端竟然出現了大面積的切換失敗問題,而采用華為Mate系列終端測試則沒有問題。
客戶的高級技術顧問怒氣沖沖地要求我們給出解釋。我們最初解釋,華為終端沒問題,可見是與基站產品無關,需要排查一下友商終端是否存在兼容性的問題。然而,客戶不認可我們的說法,認為華為終端很可能針對華為基站做了某些特殊優化,規避了這個問題。
至此,事情陷入了僵局,如果我們不把問題解釋清楚,客戶就不允許華為實施后續的優化措施。好在經過長時間對比分析切換成功和失敗的Log(呼叫記錄),我們發現了一個規律,每次切換失敗的時候,問題終端的調測日志里都會有一個搜索3G小區徑能量的記錄,值為0,而成功的Log則沒有。在我們嚴謹的分析下,客戶專家終于被說服,認可了華為的技術實力,我們也得以實施所有的優化措施,達成既定的比拼目標。
P3比拼的一系列經歷讓我認識到,在客戶界面,我們是華為技術能力的發言人,必須具備足夠深厚的技術功底和嚴謹的分析能力,才能打消客戶對華為產品技術的疑慮。
發現問題和解決問題一樣重要
從2017年底開始,我正式轉入5G,投入5G第一個商用版本的交付工作。很快,我們就迎來了首次大考——5·17世界電信日演示,坐標中國杭州,打造“5G第一城”。
項目伊始,我問身邊的小伙伴: “5G是啥你知道不?”“啊~5G~你比4G多1G~”身邊的小伙伴露出尷尬的微笑,唱起了“5G之歌”。這就是項目開始時我們對5G認知的真實寫照。5G在現網中該如何部署,又能給這個世界帶來什么,我們心里都沒底,也沒有任何經驗可循。
困難很大,但軍令在前,不容退卻。我們制定了以天為單位的迭代優化計劃,每天大量的測試數據反饋回來,當天完成分析出報告,優化措施第二天就要求落地。高強度快節奏的工作讓我想起了支撐P3比拼時的工作狀態,只不過這次的對手不是友商,而是時間和我們自己的產品。
幾輪迭代下來,很多的問題擺在了我們的面前:一切換吞吐率就掉個大坑,車一跑又是劇烈波動。眼看著演示的日子一天天臨近,我有些慌了神:“演示日期越來越近了,這么多問題我們搞不定怎么辦?”
好在主管很淡定:“慌什么?發現問題多對我們來說是好事!我們身后有產品各個領域的專家,有問題我們才能夠驅動這些專家跟我們一起投入這個項目中來。”
于是,針對切換和移動速率掉坑的問題,我們成立了攻關組,聯合各個領域的專家夜以繼日連續攻關,挖掘并解決了多個深層次的問題,路測速率也從過山車式的曲線變得平緩了許多。
5月17日電信日當天,無人機視頻直播、AR/VR演示、遠程維修、1Gbps極致體驗區等眾多奪人眼球的Case憑借5G的第一個商用版本成功實現,向世界展現了5G所帶來的無限可能,演示圓滿完成!
憑借此次保障工作所總結的第一手的5G現網優化經驗以及推動產品所做的眾多改進,從第二個5G演示項目開始,我們只需要幾個人就可以完成研發保障工作,再也無需調動大量的人力。
支撐一線,隨時隨地準備著
作為后端,ITR(問題到解決)管理升級是讓我們最緊張的事。管理升級,意味著更高級別的領導會關注這個問題,也意味著要以天甚至以小時為單位通報問題的進展,讓人頭疼。本以為5G初期,沒什么用戶,即使出了什么問題也不打緊,可以暫時告別管理升級的煩惱,哪料到現實還是狠狠地抽了我一個大嘴巴。
某天早晨7點,主管的一通電話把我叫醒:“盡快趕到公司,中東S局有一個緊急的開站問題。”
“這離上班也沒差多久了啊,有多緊急一定要立刻趕過去?”我迷迷糊糊地小聲埋怨。
“一線已經管理升級到二級ITR了!”一聽這個,我整個人一個激靈就醒了。二級管理升級,這在LTE一年也就一兩次,哪能料到,5G的首個ITR管理升級就是二級。
8點鐘不到,我趕到了維護網上問題專用會議室——“作戰室”。還沒邁進作戰室大門,已經聽到里面人聲鼎沸,仿佛聞到了彌漫的硝煙。
“現在一線是什么情況?小區狀態已經正常了沒?”
“小區已經好了,但是用戶無法接入。”一線的聲音都有些顫抖。中東比我們晚5個小時,當地是半夜3點,想必一線也連續奮戰了很長的時間,聲音中帶著明顯的緊張和疲憊。之前在LTE,我是新員工,這種緊急問題根本不需要我,而到了5G,我一轉身也成了“元老”。
仔細了解才知道,一線第二天要給客戶演示5G,之前小區存在問題,目前小區問題已經解決,但是現在用戶還接不進去。
“明天上午就要給客戶VIP演示,北京時間11點前必須解決,否則要1級管理升級!”一線在電話里下最后通牒了,讓本就沉重的空氣更加凝固了。
仔細分析當前的信令后,接入卡在測量流程,我根據經驗判斷,這種問題絕大多數是配置導致的。“大家別慌,我們盡快核查一下NSA(非獨立組網)接入相關的配置。”
一群人對著同一份配置文件一條條排查,場面倒也是頗為壯觀。
“這個頻點號好像跟前面的對不上啊!”終于有人發現了蹊蹺,我揉了揉眼睛,還真是有兩位數字不太一樣,不仔細看確實容易疏忽,趕緊通知一線修改配置。
“接入了!速率正常!”電話里傳來了一線興奮的聲音。此時才10點鐘不到,距離我起床也才3個小時。而這短短3個小時讓我對5G的快節奏有了更深層次的認知。
總結此次處理的經驗,我們制作了NSA接入配置核查工具,從根本上解決了問題。這樣一來,一群人盯著配置逐條核查的場景也成為了歷史。
當然,各種演示局點緊急問題還是會接踵而至。常見的就是“明天上午要給客戶演示了,這個問題今天必須搞定”。雖然有時我也會埋怨一線經常火燒眉毛了才找過來,但是我更清楚,一線要面對的是客戶各種不期而至的訴求,我們的職責就是支撐一線在客戶界面最好地呈現華為產品。我們是一條戰壕的戰友。
入職兩年多,我經歷過很多次從睡夢中被叫到公司攻關,也見過上海凌晨四點鐘的太陽。因為需要面對來自全球的5G商用問題,我必須不停地擴充自己的知識面。工作固然辛苦,但看到保障的局點成功商用5G的報道,還是會有很大的成就感。
客戶眼中的專家,是對我們技術嚴謹性的考驗;開發眼中的藍軍,要求我們能夠洞察產品所有可能的問題點和優化點;一線眼中的戰友,需要我們成為一切問題的終結者,并要把能力傳遞到一線……5G巨輪正在起航,考驗才也剛剛開始,但我堅信:道阻且長,行則將至。
本文來自《華為人》,轉載請注明出處。