擇壺杯搖

月黃昏,鎖煙霞,桂樹晚開花。半生戎馬半白發,歸山陪讀涯。院籬菊前,一盞清茶。悠悠風來,吹我衣裟。
正文

中國芯點燃冬天裏的一把火

(2016-03-28 13:03:09) 下一個

      2000年,22歲的我本科畢業來到深圳,成為華為一名硬件工程師。因為工作努力,很快成為交換機S8500產品的項目經理,研發出華為交換機的第一個10GE。2003年,我又調入了IP核心路由器團隊,從此與路由器結下不解之緣,開啟了我在IP路由器的十幾年奮鬥之旅。
 
      進入IP之後才了解到,IP技術是一項非常高端的技術。到目前為止,全球也隻有為數不多的幾家廠商掌握,而回到2003年的華為,我們還處於不斷追趕國際先進水平的階段。限於技術積累不足,當友商在路由器市場上開始推銷40G新產品時,我們隻有10G、20G老產品。客戶對我們不屑一顧,市場一線的同事們對產品競爭力落後抱怨很大。一開始我們路由器沒有自己的IP芯片,不得不從西方廠家外購,而外購的芯片往往在功能規格上比競爭對手落後一代,公司下決心要發展的自己的40G IP芯片,掌握核心技術。
 
      40G芯片凝聚著我們對整個IP網絡的理解、定義和構想。為了在規格和性能上大幅提升,我們采用了全新的架構、算法、幾億門電路、業界最新的半導體工藝,也帶來了前所未有的技術挑戰。團隊成員很多是新加入的,分布在北京、深圳、成都、美國矽穀等地,大家邊幹邊學,在奮鬥中成長。大容量表項的算法優化和物理設計的極限約束,一度使的團隊深陷困境。我們集中了芯片和軟件專家和骨幹,聯合攻關,第一次采用了套片建模仿真性能和虛擬布局布線的方法,對設計方案進行了充分的模擬和驗證,最終攻克了技術難題,鋪平了後續芯片開發和應用的道路。
 
      在2009年底,40G樣片試產完成準備調試。大夥一商量,幹脆都集中到深圳,第一時間讓核心路由器裝上中國芯,快速提升產品競爭力。春節前一周,40G IP芯片在海外加工完成投遞到深圳。芯片一過海關,同事們爭分奪秒送到深圳研發中心實驗室裏,開始上板調試。大家圍坐在一起,遇到問題馬上討論,有問題立刻修改。實驗室裏一會兒討論得熱火朝天,一會兒安靜得隻能聽到鍵盤的“噠噠”聲。夜裏11點鍾,40G IP芯片實現首個數據報文轉發成功,隨後一個又一個測試用例順利通過。淩晨1點多鍾,大夥的興奮勁兒還未消退,在實驗室精神抖擻地測試。領導心疼大家,趕大家回去休息:“芯片關鍵用例已經測試通過,先回去好好睡一覺,明天再繼續”。
 
      大年三十晚上,公司附近的一家酒店裏,固定網絡產品線總裁查鈞和我們一起過大年,他把父母、愛人和女兒一起都帶來了,四歲大的女兒滿心歡喜和爸爸一起表演節目,唱起了國歌。漸漸的大家都跟著唱起來,隨著歌聲越來越大,很多人的眼睛濕潤了……那個晚上大家又哭又笑,喝了很多酒,唱了很多歌。一個萬家團圓的傳統節日,一群熱情的年輕人,一個“讓核心路由器擁有更強中國芯”夢想,點燃了“冬天裏的一把火”,也點亮了我們一顆顆年輕的心。
 
      大年初一,我們去了一趟深圳華僑城風景區,作了短暫休整。年初二,我們又投入到緊張的芯片調試戰鬥中。年初八,全國人民正式上班的第一天,我們按時交付了核心路由器第一代IP芯片。

      自此,華為核心路由器的中國芯,全麵具備了趕超世界一流IP芯片的能力,使路由器硬件競爭力顯著提升。在芯片眾多關鍵技術點上突破,使我們掌握了核心技術,真正具備了趕超業界最佳水平的能力,為後繼在400G的超越打下堅實的基礎。
 
      即使許多年過去了,每每想起那個春節,那些一起唱過的歌一起吃過的年夜飯,想起和大夥一起奮鬥的日子,還是讓人心潮澎湃,久久揮之不去。


        挺進集群路由器三家俱樂部
 

      歲月匆匆而去,挑戰滾滾而來。為了趕上中國電信國家幹線網絡核心節點的建設,我作為產品負責人接到任務,一年內做出集群路由器。
 
      國家幹線網絡的核心節點作為區域信息交換中心,負責周邊多個省份城市的流量匯集和轉發交換,數據洪流非常大且每年以50%速度持續增長,單機框無法滿足這些超級核心節點容量快速增長要求。隻能通過多個單機框級聯方式,組成一個大的集群係統,支撐網絡擴容演進。長期以來多框集群係統被兩個美國公司(Cisco和Juniper)把持,廣泛應用於中國、美國等國國家幹線網絡。作為全球最複雜的IP係統,集群路由器代表了一個設備廠商最高的IP技術水平,毫不誇張的說是IP領域的“珠穆拉瑪峰之巔”。
 
      公司對集群項目很重視,給予很大支持,在架構設計階段,快速集結了10多個跨領域專家:硬件大牛大軍,交換網專家小楊,主控專家老周,軟件SE老範和毛師傅,整機專家大田等,陣容相當豪華。在北京研究所的一間會議室裏,七八台電腦,兩三個白板,開始了集群路由器的架構設計。集群路由器技術難度大,由傳統的1台獨立設備變成了8+64集群係統,硬件和軟件複雜度均是成百上千倍增加,這意味著現有知識和架構無法滿足要求,必須從頭開始。手頭可參考的材料極少,隻能靠專家們多年的積累去碰撞和討論。會議室的白板成為最稀缺資源,大家突然迸出的一個點子要快速畫下來,不行了擦掉,擦幹淨了再畫,一次次思想的碰撞和一個多月內部反複討論,最終經過IP領域fellow鄧抄軍評審和拍板,我們自己的路由器集群係統架構誕生了。
 
      產品正式研發過程中遇到了我們從未想象到的艱辛,太多新技術是首次應用,中央框、級聯光纖、集群控製平麵、分布式計算……都是新的,有大量技術難點需要攻克。集群中央交換框第一批硬件返回後,由於係統設計偏差,導致了大批單板倒針和壞板,工作一度無法開展下去;底層VxWorks操作係統不支持集群形態,軟件進行大規模切換整改;集群係統板卡數量成倍增加後,軟件性能嚴重下降,進行多次優化……。
 
      在最艱難的時刻,我們就給大家鼓勁兒:“把衛星送上天的隻有四個國家。目前能做出全球最複雜的集群路由器隻有美國的兩家公司。如果我們能把集群路由器做出來,那我們就進入全球僅有的三家集群俱樂部。看我們有多牛!”當大家反複攻關進入困境時,試圖放棄的時候,想起這些話,咬咬牙就堅持下來了。有人說這是 “畫餅”,有人說是“吹牛”,有人說是“夢想”,但不管怎樣,人總是要有夢的,總是要追夢的。吹過的牛皮都實現了,那叫真牛。但光靠吹牛可不行,一步一步拚才是實實在在的。
 
      進入係統聯調階段,一套路由器集群係統測試動輒需要幾百上千個端口,對儀表資源需求巨大。但資源有限,項目組就兩班倒地攻關解決問題,做到人休設備不休。一幫人晚上加班幹得熱火朝天,也饑腸轆轆,開始隻能靠吃方便麵充饑。負責集群係統硬件測試主管陶淳父母正好在深圳,老兩口是東北人,每晚做一鍋春餅,雷打不動地九點半送到公司門口,再由陶淳拿到實驗室。兄弟們吃的那叫香啊。後來項目組流行一句話:“吃完一鍋春餅,解決一鍋問題”。攻關結束後,大家最想念的是陶淳父母做的那一鍋春餅。
 
      也就在那個節骨眼,我的女兒出生了。在醫院裏,我一邊為女兒的出生喜悅,一邊為項目的進度著急。太太看著我不停的撥打電話接聽電話,就說“你趕緊去看看你的‘兒子’,這兒有爸媽照顧,你就放心吧”。我看太太這麽善解人意,趕緊回到了工作崗位。同事遇到我問,“怎麽這麽快就回來了”。我順口說了一句,“這裏也有我的孩子,離不開啊!”。的確,大家把這款產品當作是親生骨肉,傾注了大量心血,背後更有來自每位家屬默默無聞的理解和支持。
 
      集群係統的開發難度,遠超出了我們預期。項目進展幾次延遲,市場一線傳來工作聯絡單要求加快進度,必須通過當年運營商集采入網測試。這讓我倍感壓力,運營商集采測試堪比當年高考,一次測試機會,考試時間也是固定死的,隻有測試通過才能參與第二年網絡建設機會。一旦測試不通過,回家準備一年後再來。失敗意味著我們將錯過電信骨幹網絡建設的契機,無疑對整個團隊士氣將會是個巨大的打擊。狹路相逢勇者勝,最終我們的團隊頂住巨大市場壓力,集群路由器首次亮相廣東電信研究院,經曆了長達3個月的大壓力,滿規格測試,順利通過,拿到了進軍國家骨幹網絡市場的入場券,正式成為集群路由器三家俱樂部中的一員。
 
      直到今天,我太太還會開玩笑說一句 “你在公司的那個兒子現在怎麽樣了?”。我告訴太太,我那兒子可有出息了!西安電信的全球首個核心路由器2+4集群成功商用,吹響了我們進軍國家幹線核心節點的號角;2013年全球最大容量集群搬遷工程—中國聯通169無錫節點的成功搬遷,證明了華為集群路由器上不僅有能力新建,還有能力搬遷;現在中國電信163、中國聯調169和移動CMNET國家骨幹網都有我司集群路由器的身影,占據了中國國家骨幹網絡的半壁江山,為國家信息網絡建設保駕護航。其實我更想對家人說:“要感謝你和項目組所有家屬們,沒有你們的理解支持,我們不可能渡過產品最艱難的時段,不可能打造出全球最尖端的IP集群係統,軍功章有我的一半,更有你們的一半!”


        千錘百煉的IP軟件操作係統


      有些事使人難忘,有些人使人敬重。

      IP網絡的另外一個核心競爭力是運行在路由器設備上的IP軟件操作係統VRP。在硬件競爭力提升的同時,還要考慮軟件競爭力的提升。

      剛一開始,在設計新一代IP軟件操作係統VRP8時,整體方案商量了很多次,一部分專家認為在原有操作係統的基礎上持續演進;另一種觀點認為,老的係統已經不能支持新的客戶對網絡性能的要求,需要重新開發一套新的軟件操作係統經。通過嚴格的論證和慎重決策,最終選擇重新開發一套係統,要支撐公司IP操作係統長期未來發展,成為公司網絡設備下一代軟件平台。

      正式的架構設計是在北京研究所,一共21名架構師,就在這裏開始封閉做架構設計。每個架構師立下了軍令狀,每位架構師都收到了一個精致的水晶相框,上麵寫著“我鄭重承諾全身心投入,為VRP8架構質量終身負責!” 。

      大家來自五湖四海,來之前都是各領域的頂級專家,個頂個的牛。這些專家從骨子裏都有著相互比比看誰更強的念頭,把架構當成工藝品,反複雕琢,精益求精。評審過程非常嚴格,大家在精益求精的基礎上,把“精”做到極致的地步。每一次方案的評審,架構團隊總是能夠提出更高的要求,一口氣追問你十幾個Why(為什麽),直被問得啞口無言。有些專家麵子薄,奪門而去,閉門練功以圖下次前來“雪恥”。

      2010年夏天,VRP8軟件操作係統迎來它人生中的第一次大考——濟南電信商用實驗局。對於VRP8的首次上網開局,產品線非常重視,擔心客戶對第一個“吃螃蟹”,使用VRP8版本開局有顧慮,黃河帶著幾位專家去濟南考察商用環境,與客戶交流,給客戶講VRP8先進性和可靠性、開局風險應對預案,最終濟南客戶同意了。2010年9月9日淩晨全球第一個VRP8商用局在濟南電信割接上線,穩定運行。這次成功開局大大提升了VRP8的團隊士氣,證明了VRP8架構是經得起考驗的。

      2010年底核心路由器承載VRP8的軟件版本首次亮相國內運營商的高端數據集采測試,在路由協議收斂性能、協議倒換時間這些曆史上落後的性能項目中,測試結果排名第一。VRP8軟件操作係統從誕生之日起,就瞄準了IP網絡操作係統性能第一的目標,高標準、嚴要求,一開始定下的各項最高目標都達成了。很多架構師在回憶這段激情歲月時,激動之情溢於言表。


        厚積薄發,核心路由器400G激情超越
 

      2011年底我開始擔任路由器產品線總裁,擺在我麵前的首要問題是如何超越。
 
      4K、2K視頻和雲業務的到來,運營商對帶寬的訴求越來越高,要構建像太平洋一樣寬的管道。麵對這些大機會,我們在芯片、軟件操作係統以及路由器集群的十多年壓強投入,具備了做到業界領先的研發實力。能否抓住這個千載難逢的曆史機遇,厚積薄發,實現幾代IP人超越夢想。

      2012年夏天的北京異常得悶熱,北京研究所西山腳下的大覺寺,一座有幾百年曆史的古剎,紅牆綠樹,禪意十足,可以靜下心來,討論超越大計。產品線市場、MKT、研發的管理團隊成員齊聚一堂,進行了激烈的討論。MKT通過競爭分析得出判斷,如果我們將400G核心路由器上市時間比原計劃提前半年,我們就有機會在400G時代實現超越領先。然而有人認為這是Impossible Mission(不可能完成的任務),要做的任務太多,不可能再提前半年交付。經過一天PK,產品線達成共識,十多年來我們在IP芯片、軟件操作係統的持續投入,具備了做世界第一的實力。即使MKT提供的競爭分析隻有50%把握,我們也要全力爭勝。錯過這個機會窗,我們將抱憾終身。我們決定砍掉與核心路由器400G非相關的需求,聚集研發資源飽和攻擊,把核心路由器400G至少提前半年商用上市,實現400G的超越領先。會議結束後我們一起在大覺寺吃了一頓齋飯,感覺比吃肉還香,大家看到了全力一搏超越的希望。臨行前我們一起在大覺寺門口合照留念,戲稱400G超越了,要記得是從這一天開始的。
 
      核心路由器400G的研發,按照研發能力,產品要到2013年下半年才能達到商用標準,現在交付時間提前到5月,對研發團隊無疑是個很大挑戰。需要400G芯片導入一次成功、硬件投板一次成功、軟件開發效率大幅提升。為了達成挑戰時間,研發提出了 “零調試、零等待、零缺陷”目標。

      為了真正把芯片開發和產品導入融為一體,當時提出了“One Team One Dream”口號。加拿大的400G芯片架構師Paul Nadj總是說“遇到困難,我們就要回退一步想想問題的核心是什麽,根因是什麽,仔細分析找到關鍵,猛擊痛點。”經過這樣一絲不苟的細致工作,使得關鍵技術點快速收斂,質量得以保證,為芯片產品化落地打下堅實基礎。2012年10月8日,400G芯片到達深圳實驗室,在芯片回片9個小時後,我們就完成零調試既定的目標,大家都很興奮。2012年10月25日,在相同的實驗室,驅動軟件、芯片、轉發軟件、上層軟件等各領域團隊骨幹早已齊聚一堂,緊張的400G軟硬件聯調開始了。時間在一分一秒的過去,第一天CPU小係統啟動運行,第二天NP調通,但是到TM卻卡住了。所有專家們聚集在白板前,逐條列舉各種可能,逐條分析和驗證,終於所有業務全部打通。看著儀表上跳動的收發包計數,丟包數穩穩地定格在“0”,在場人員激動不已,擊掌相慶。
 
      2013年5月路由器400G產品比原計劃提前7個月商用,比友商領先了一年半。
 
      同年8月,400G核心路由器在沙特Mobily成功開局商用,震撼了整個全球運營商市場。據專業評測,華為NE5000E路由器400G單框與業界同等容量的2+4 100G集群路由器相比,功耗僅是後者的1/8,體積僅1/6,重量僅1/12。在技術可獲得性上領先了業界一年半,以曆史最好成績,跑贏了這場高手的競賽。

      華為400G核心路由器以其領先的線卡能力、更高的性能、更低的功耗以及安全可靠的質量成為國家最高端數據幹線的主力設備,結束了國幹核心路由器依賴歐美廠商的曆史,並引爆了全球市場。截至目前,華為核心路由器400G已在全球5大洲, 60多個國家,服務於十幾億人口。華為400G核心路由器的成功是勇於抓住機會窗,厚積薄發堅忍不拔的勝利。十多年來,IP幾代人在關鍵技術上聚集力量,壓強投入,密集投資,最終抓住了機會窗,實現了超越領先。


        致青春·執著與夢想
 
      2016年巴展展台上,我司新一代P比特級核心路由器NE9000和業界迄今最快的2T比特路由線卡首次亮相。當看到全球TOP運營商CEO/CTO在新一代產品前駐足停留聽取匯報,表示出讚許和肯定時,自豪感油然而生。憑借我們最新一代IP芯片和多個關鍵技術的突破,我司的IP產品進入“無人區”。
 
      驀然回首,因機緣巧合使我進入了IP通信這個領域,沒想到一幹就是十幾年。這十多年來,我們堅持在IP芯片、軟件操作係統、路由器集群係統等核心關鍵技術上聚集力量、密集投資,我們努力追趕競爭對手,隱忍堅守、厚積薄發,最終抓住機會實現了400G超越領先。此時此刻,心中燃起幾許豪情,幾多喜悅,又有幾分感慨交織在一起……。
 
      以前常聽人說“通信行業太殘酷了,你根本無法預測明天會發生什麽,下個月會發生什麽”。當時不覺得,身臨其境中才明白這句話意味著什麽,在這樣高科技含量又競爭激烈變幻莫測的行業裏,每個玩家當初都自信滿滿,實力雄厚,可走到如今的還有幾家?我一直在想,是什麽讓我們最終實現超越摘取到勝利的果實?是什麽讓我們願意為不確定的未來努力奮鬥?又是什麽讓我們十幾年如一日的執著堅守?
 
      我知道,華為公司給我們搭建了一個巨大的舞台,包容成長的代價,持續投資、壓強投入,讓我們盡情演繹華為IP的樂章;我知道,是愛我們的家人、可愛的同伴給我們一片溫馨的港灣,彼此溫暖、相互鼓勵,讓我們熬過孤獨、邁過坎坷,擁抱晴朗的天空;我知道,是一群懷揣夢想的年輕人,為了 “做世界第一的產品”無怨無悔地揮灑著青春熱血,即使再苦再累再艱辛也一往無前;我知道,我們是青春,是天邊執著的飛鷹,選擇了藍天,也就選擇了飛翔,飛向遠方……

 

蓋剛

[ 打印 ]
閱讀 ()評論 (9)
評論
walterloo 回複 悄悄話 Cisco 以後日子不好過:).
rty 回複 悄悄話 Huawei is really good. Not exaggerating. Exempt employee in US has no overtime pay.
可憐無數山 回複 悄悄話 詬病文風問題的,隻能證明他是屁股決定大腦的人物,不是看內容如何,隻是為反而反。
johnfox8888 回複 悄悄話 曾在中興的4G通信部分幹過,據熟悉華為的同事說,我們那個部門比華為大部分部門都累。實際也差不多吧,一部分同事要進行下一代的新產品開發進行封閉式開發,另一部分同事包括我要維護已經在場外運行的無線網絡。我基本是從每天早八點上班,到晚11點下班,不停的添加代碼,debug故障。那些封閉開發的同事,據他們說有點象瘋了一些,早上一睜眼就是代碼什麽的,其它什麽都不知道了。這樣的時間大概過了半年,也覺得自己被激情燃燒著,有點為了產品開發,或解決故障,忘乎了一切,包括自己,心想這我們的產品超過摩托羅拉了,超過三星了,也挺自豪的,當然,自己的水平也增進不少。為了這繁忙甚至拚命的工作,已退休的父親從廣州跑到深圳照顧我。度過了這段歲月,當然我和任何去封閉式開發的同事都沒有任何加班費,什麽感覺呢?既懷念又痛恨,感覺象牲口一般的時光,人有點瘋了,除了代碼,什麽都不知道了。我領導的太太,每周日下午,唯一的休息時間去封閉式開發的培訓中心,跟著領導一起進行同行評審,代碼走查。等完了,他們再開房。我想說:“向你們致敬,表示崇高的敬意,中興的員工們。是你們的血汗,使中興的無線通信水平進了一大步,真是舍小家,顧大家。”但另一方麵,我爸卻罵:“中興孬孫!用你們這麽恨,為啥連個加班費也不給?”我聽後也覺得中興應該按國家的勞動法規定給加班費,畢竟是國家的標杆企業,員工也可算上中國的知識菁英了。怎麽說呢,中興,華為是國家的旗幟,中國有這樣的企業,我為之自豪。但員工的權益是否也應該得到尊重,國家的法律當然也應該遵守了。多少父親沒有在子女出生時守護在妻子身邊,多少女員工僅休息了一兩星期就又投入到研發繁忙的過程中,為民族通訊產業奉獻的同時,個人的生活是否也應該得到保障。任正非,侯為貴自己可以不要命,不顧家庭,是否也這樣要求下麵的員工們都這麽拚,合理嗎?國家不是有勞動法嗎,為什麽中國旗幟性企業的員工得不到最基本的法律保護?身在異國他鄉,在中興遭受美國商務部製裁之際,忠心祝願中興能度過這關,有更好的發展。同時,也想以前的同事們加班能有加班費,他們的合法權益能得到保障。畢竟,一個偉大的公司在振興民族通信產業的同時,更應該守法,而不是明目張膽的違法!
r4f 回複 悄悄話 如果在高科技界幹過,就會體會到華為的趕超是多麽不易。如果願意看到中國進步,就會為華為的成功高興。能為自己工作的公司成功而感到榮譽和驕傲是應該的!祝賀你!
至於文風嘛,是有點像什麽官方報告文學似的,but so what??學理工的能把尖端科技搞出來,還能把這寫出來感動人,又有多少人行呢?!Funny? 您行嗎?
擇壺杯搖 回複 悄悄話 回複 '曲肱而枕' 的評論 : 就是,理工男能搞出頂尖項目還能寫出《政府工作報告》和《新聞聯播》也是件很不容易的事。
曲肱而枕 回複 悄悄話 文風歸文風。不過華為確實在路由器這方麵在業界有很強的地位,是中國公司裏比較注重技術投入的公司之一。我覺得不容易。
誠信 回複 悄悄話 Very funny! A typical Chinese advertisement.

中國大陸的廣告帖,文風也具有《政府工作報告》和《新聞聯播》稿件的文字風格,確實很搞笑。
DD1122 回複 悄悄話 讚一個
登錄後才可評論.