淘寶網(wǎng)林昊: 追求技術(shù)巔峰

林昊用分布式架構(gòu)應(yīng)對(duì)了“秒殺”活動(dòng)，這是淘寶網(wǎng)技術(shù)轉(zhuǎn)變的一個(gè)案例。林昊決定繼續(xù)像網(wǎng)站“前輩”學(xué)習(xí)，早晚有一天要超越它們。

林昊還不到30歲，已經(jīng)名揚(yáng)業(yè)內(nèi)。

他是中國(guó)OSGi第一人，創(chuàng)辦了中國(guó)OSGi網(wǎng)站，出過(guò)相關(guān)書(shū)籍; 他又是淘寶網(wǎng)的系統(tǒng)架構(gòu)工程師，維護(hù)萬(wàn)臺(tái)服務(wù)器的穩(wěn)定。

林昊領(lǐng)導(dǎo)的是淘寶網(wǎng)“秒殺”活動(dòng)的技術(shù)支持團(tuán)隊(duì)。在此次“戰(zhàn)役”之后，林昊對(duì)淘寶網(wǎng)的技術(shù)實(shí)力有了更清晰的認(rèn)識(shí)，他更要學(xué)習(xí)國(guó)外頂尖的網(wǎng)站，幫助淘寶網(wǎng)更上一層樓。

放眼國(guó)內(nèi)，他說(shuō): “能與淘寶網(wǎng)相提并論的網(wǎng)站還沒(méi)看到。”

林昊就這么自信，他要做系統(tǒng)架構(gòu)技術(shù)的“巔峰者”。

狙擊“秒殺”

畢玄是武俠小說(shuō)《大唐游俠傳》中的絕頂高手。林昊進(jìn)入淘寶網(wǎng)之后，選擇了此ID。從此，淘寶無(wú)“林昊”，只有畢玄。業(yè)內(nèi)不知“林昊”和畢玄，只知道Blue Davy，這是林昊“行走江湖的另一個(gè)馬甲”。

“畢玄”是淘寶網(wǎng)的系統(tǒng)架構(gòu)師。他的本科學(xué)的是生物專(zhuān)業(yè)，研究生學(xué)的是軟件工程專(zhuān)業(yè)，是典型的“半路出家”。他對(duì)互聯(lián)網(wǎng)和技術(shù)感興趣，從事過(guò)政府行業(yè)的技術(shù)工作，在互聯(lián)網(wǎng)企業(yè)做過(guò)，2007年進(jìn)入淘寶網(wǎng)。

Blue Davy則是《OSGi實(shí)戰(zhàn)》和《OSGi進(jìn)階》兩篇國(guó)內(nèi)Opendoc的作者，籌辦了OSGi的中文官方網(wǎng)站，是全球第六個(gè)國(guó)家級(jí)別的User Group性質(zhì)的站點(diǎn)。Blue Davy于2009年出版了據(jù)稱(chēng)為“全球第二本OSGi書(shū)籍或國(guó)內(nèi)第一本中文OSGi書(shū)籍”的《OSGi原理與最佳實(shí)踐》。

林昊則是“畢玄+Blue Davy”的集合體。他在阿里集團(tuán)內(nèi)部推廣OSGi，并應(yīng)用在淘寶網(wǎng)、支付寶、阿里巴巴網(wǎng)絡(luò)中，他扎根在淘寶網(wǎng)，為該網(wǎng)站的系統(tǒng)架構(gòu)出謀劃策。

淘寶網(wǎng)以前的規(guī)模像是便利店—小、物品少而雜，流量有限; 現(xiàn)在的淘寶網(wǎng)更像是沃爾瑪—大、物品品類(lèi)多，流量巨大。淘寶的員工中有一半是技術(shù)人員，大概有1500名支撐著淘寶網(wǎng)的方方面面，而林昊則是其中的1/1500。

讓林昊對(duì)技術(shù)更自信的是淘寶網(wǎng)的“秒殺”活動(dòng)。

所謂“秒殺”，就是淘寶網(wǎng)絡(luò)在首頁(yè)發(fā)布一些物美價(jià)廉的商品，所有買(mǎi)家在同一時(shí)間網(wǎng)上搶購(gòu)。由于商品價(jià)格低，往往一上架就被搶購(gòu)一空，有時(shí)只用一秒鐘，故稱(chēng)“秒殺”。

除去“秒殺”活動(dòng)的爭(zhēng)議性之外，該活動(dòng)給淘寶網(wǎng)的服務(wù)器帶來(lái)巨大壓力。林昊形容:“就如一秒鐘山洪爆發(fā)那樣”，大量數(shù)據(jù)紛蜂擁而至，猶如DDoS攻擊淘寶網(wǎng)，甚至嚴(yán)重阻礙了正常交易的進(jìn)行。

林昊說(shuō)，由于淘寶網(wǎng)的“秒殺”活動(dòng)在中央電視臺(tái)刊登了廣告，點(diǎn)擊量超出預(yù)期的10倍。就在秒殺的當(dāng)天，林昊和部門(mén)20多人整夜不合眼，守在服務(wù)器旁邊，調(diào)整架構(gòu)，分流數(shù)據(jù)，緩解壓力。

最后的解決辦法是，林昊將“秒殺”的流量與正常業(yè)務(wù)的流量隔離開(kāi)，增加了服務(wù)器的投入，避免了對(duì)正常業(yè)務(wù)的影響。這也是林昊一直在嘗試做的事情—服務(wù)器上采用的云計(jì)算技術(shù)。

架構(gòu)發(fā)展方向

林昊擔(dān)任系統(tǒng)架構(gòu)師至今，首次挑戰(zhàn)即是將淘寶網(wǎng)單系統(tǒng)轉(zhuǎn)向分布式系統(tǒng)。

那是淘寶網(wǎng)系統(tǒng)架構(gòu)最艱難的時(shí)候，“如果系統(tǒng)不改造，按照當(dāng)時(shí)的發(fā)展速度，淘寶網(wǎng)會(huì)在2008年完全掛掉。”林昊解釋說(shuō)，業(yè)務(wù)量的增加迫使淘寶增加服務(wù)器，“之前是不斷加服務(wù)器，但系統(tǒng)仍舊是一個(gè)。結(jié)果是系統(tǒng)越來(lái)越龐大，這種增加服務(wù)器的做法馬上遇到了瓶頸。”

在該次重構(gòu)后，淘寶網(wǎng)采用了分布式服務(wù)平臺(tái)，將原有系統(tǒng)區(qū)隔成200個(gè)左右的小系統(tǒng)。這種分布式服務(wù)承擔(dān)了淘寶幾乎所有Java遠(yuǎn)程調(diào)用的支撐及管理。而林昊則負(fù)責(zé)將這一全亞洲最大的Java系統(tǒng)調(diào)理順當(dāng)，并逐步提高淘寶網(wǎng)的系統(tǒng)可用性和運(yùn)行效率。

工程師對(duì)技術(shù)是敏感的。在談及淘寶網(wǎng)系統(tǒng)架構(gòu)水平在同行中的位置時(shí)，林昊想都沒(méi)想就說(shuō)在國(guó)內(nèi)沒(méi)有同行者，至于亞馬遜與eBay，他稍微停頓說(shuō): “淘寶網(wǎng)的架構(gòu)與亞馬遜有較大的差距，而與eBay已經(jīng)相對(duì)接近”。

事實(shí)上，淘寶網(wǎng)從創(chuàng)立伊始就沒(méi)有停止對(duì)領(lǐng)先者的追趕，從商業(yè)模式、網(wǎng)站規(guī)模到技術(shù)，一直在跟進(jìn)。“分布式、自動(dòng)化和智能化是互聯(lián)網(wǎng)技術(shù)發(fā)展的一個(gè)常見(jiàn)發(fā)展模式，當(dāng)然，這其中涉及到了非常多的技術(shù)。”林昊經(jīng)常趴在國(guó)外網(wǎng)站上學(xué)習(xí): “前不久在關(guān)于eBay技術(shù)發(fā)展的PPT上，學(xué)習(xí)了該網(wǎng)站的技術(shù)。而我覺(jué)得除了智能化以外，虛擬化或者云計(jì)算、節(jié)能技術(shù)也將成為后續(xù)互聯(lián)網(wǎng)技術(shù)的重點(diǎn)。”

而eBay的“優(yōu)雅降級(jí)”、Facebook的“自愈”系統(tǒng)、Twitter的“資源劣化”等功能也相繼從概念轉(zhuǎn)化為淘寶特色的功能。“只要能讓淘寶網(wǎng)系統(tǒng)架構(gòu)更穩(wěn)更快更省，合適的技術(shù)就可以用于淘寶。”林昊說(shuō)。

與此同時(shí)，淘寶網(wǎng)正聯(lián)合阿里云計(jì)算公司進(jìn)行云計(jì)算開(kāi)發(fā)。

為了應(yīng)對(duì)數(shù)據(jù)大并發(fā)量的壓力與成本控制，淘寶網(wǎng)的中間件系統(tǒng)、文件儲(chǔ)存系統(tǒng)、搜索、分布式框架、緩存系統(tǒng)都采用了自主開(kāi)發(fā)的產(chǎn)品，而不是采用商用產(chǎn)品。同時(shí)這也給像林昊這樣的工程師以大量的機(jī)會(huì)，可以讓他們看到軟件的源碼，研究了解軟件內(nèi)部的工作過(guò)程和原理，這對(duì)于網(wǎng)站的應(yīng)用設(shè)計(jì)、開(kāi)發(fā)、查錯(cuò)、優(yōu)化都是非常有益的。

淘寶體驗(yàn)

由于淘寶網(wǎng)系統(tǒng)架構(gòu)的龐大與復(fù)雜，對(duì)于很多工程師來(lái)說(shuō)“僅僅是看一看淘寶網(wǎng)的系統(tǒng)架構(gòu)，就算得上是一個(gè)心愿了。”

“也許你很了解理論技術(shù)，但平臺(tái)是更稀缺的資源。”林昊說(shuō)，淘寶網(wǎng)最吸引他的就是能在這里處理業(yè)界最復(fù)雜的難題，“無(wú)論是對(duì)于技術(shù)了解多少，看過(guò)多少本書(shū)，在這樣一個(gè)系統(tǒng)面前，你只有動(dòng)手才會(huì)感到興奮。”

“很多架構(gòu)師不知道如何應(yīng)對(duì)大型、高并發(fā)的場(chǎng)景，最主要的原因是沒(méi)有這樣實(shí)踐的機(jī)會(huì)，畢竟目前只有在大型企業(yè)系統(tǒng)或互聯(lián)網(wǎng)才能獲得這類(lèi)難得的實(shí)踐機(jī)會(huì)。架構(gòu)師如果沒(méi)有實(shí)踐機(jī)會(huì)，他們是很難完全理解這些技術(shù)的。多數(shù)情況下，互聯(lián)網(wǎng)中的技術(shù)方案都是在多次血淚宕機(jī)下成長(zhǎng)起來(lái)的。”林昊總結(jié)說(shuō)。

“我經(jīng)歷了淘寶網(wǎng)的點(diǎn)擊量從3億猛增到8億，這段時(shí)間面臨的技術(shù)挑戰(zhàn)對(duì)個(gè)人而言是最寶貴的。有幸站在了這次變革的前線讓我獲得了很多寶貴的經(jīng)驗(yàn)。如果我今天才加入淘寶網(wǎng)，那么這個(gè)8億點(diǎn)擊量對(duì)我來(lái)說(shuō)就是零，這個(gè)數(shù)字是沒(méi)有意義的。如果我再晚幾年加入，那我不知道又浪費(fèi)了多少次成長(zhǎng)的機(jī)會(huì)，工程師的成長(zhǎng)就是經(jīng)歷過(guò)程”。林昊說(shuō)，“能給工程師這樣經(jīng)歷的公司全世界都屈指可數(shù)，在中國(guó)就更少了。”

如論如何，隨著淘寶網(wǎng)發(fā)展的加速，趕超老師eBay的趨勢(shì)已非常明顯，對(duì)于工程師來(lái)說(shuō)，這就意味著再也不能簡(jiǎn)單地亦步亦趨，“淘寶網(wǎng)正在長(zhǎng)大，更多時(shí)候我們必須獨(dú)立面對(duì)問(wèn)題，”畢玄語(yǔ)氣里更多的是興奮，“我們希望更多的同道能來(lái)到淘寶網(wǎng)，體驗(yàn)巔峰。”說(shuō)完他又很樂(lè)觀地笑了，似乎他的團(tuán)隊(duì)已經(jīng)從20人擴(kuò)展到30人了。

鏈接

林昊的招聘理念

林昊是淘寶網(wǎng)校園招聘的面試官之一。他接觸過(guò)一位閱讀了jdk、開(kāi)源框架上spring DI等源代碼的學(xué)生，他認(rèn)為，這樣的學(xué)生才是典型的技術(shù)愛(ài)好者。另外一位讓他看好的學(xué)生雖然不懂Java框架，但掌握各類(lèi)Java包，如ArrayList、HashMap等等。

他說(shuō): “很多應(yīng)屆生會(huì)覺(jué)得是因?yàn)榇髮W(xué)中沒(méi)教這些，所以導(dǎo)致他們面試很難通過(guò)。其實(shí)，實(shí)力是對(duì)技術(shù)的興趣以及自學(xué)能力等決定的。大學(xué)中最不缺的是時(shí)間，學(xué)生應(yīng)該有足夠的時(shí)間看一些源碼，為自己的技術(shù)增加實(shí)力。”(文/吳玉征)

征集CIO線索

本欄目定位是: 結(jié)合CIO(信息主管)職業(yè)生涯，探討如何推進(jìn)信息化的方法。為此，本欄目長(zhǎng)期征集各領(lǐng)域CIO采訪線索，在展現(xiàn)他們的思想智慧，做到“他山之石”的同時(shí)，共同推進(jìn)中國(guó)信息化發(fā)展。讀者有任何想法和推薦，可聯(lián)系編輯: 010-68130909-1101 wu_yuzheng@ccw.com.cn。