天貓雙11壓測(cè)現(xiàn)場(chǎng)直擊：工程師說(shuō)比往年輕松

雙 11 這個(gè)關(guān)于購(gòu)物的狂歡節(jié)，到今年已經(jīng)是第九年。從 2009 年的 5000 萬(wàn)元到去年(2016)的 1207 億元銷(xiāo)售額，不到十年時(shí)間，它見(jiàn)證了中國(guó)人消費(fèi)習(xí)慣的遷移。這背后，是移動(dòng)互聯(lián)網(wǎng)崛起、消費(fèi)升級(jí)、服務(wù)業(yè)轉(zhuǎn)變等多層面的巨大變化。

這一場(chǎng)幾乎是全民參與的最大規(guī)模的網(wǎng)絡(luò)盛會(huì)背后，緊貼的是和我們生活最近的場(chǎng)景之一——購(gòu)物。如果你參與過(guò)多年雙 11，也許會(huì)對(duì)曾經(jīng)的服務(wù)器擁堵、環(huán)節(jié)不流暢印象深刻，而現(xiàn)如今，這樣阻礙「買(mǎi)買(mǎi)買(mǎi)」的情況卻越來(lái)越少。這背后讓人好奇的就是，雙 11 是怎么變成現(xiàn)在這樣的?

帶著這個(gè)疑問(wèn)，雙 11 前夕，極客公園前往寧波海關(guān)、保稅區(qū)倉(cāng)庫(kù)以及阿里巴巴技術(shù)部等重要環(huán)節(jié)，采訪(fǎng)到在雙 11 前進(jìn)行「壓測(cè)」的工作者，聽(tīng)他們聊了聊在大家盡情買(mǎi)買(mǎi)買(mǎi)背后的秘密。

看不見(jiàn)的爭(zhēng)分奪秒

壓測(cè)，全稱(chēng)壓力測(cè)試，是對(duì)系統(tǒng)進(jìn)行針對(duì)性測(cè)試，以此發(fā)現(xiàn)和解決問(wèn)題，為正式活動(dòng)做好準(zhǔn)備。通俗點(diǎn)說(shuō)，就是實(shí)戰(zhàn)演練，「磨刀不誤砍柴工」。

極客公園來(lái)到的第一站是寧波海關(guān)，這里是目前全國(guó)跨境物流包裹量最大的進(jìn)口口岸之一。在歷年雙 11 中，這里承擔(dān)了全國(guó)將近 50% 的跨境包裹量。面對(duì)現(xiàn)今日益完善的跨境電商業(yè)務(wù)，今年雙 11 能否處理更海量的包裹單量申報(bào)，就成為其壓測(cè)的目的。

「現(xiàn)在日平均處理單量大約是 10 到 20 萬(wàn)單，如果按照綜合預(yù)測(cè)今年雙 11 真的有 700 萬(wàn)單，就是平時(shí)的 30 多倍。」寧波海關(guān)技術(shù)處劉陽(yáng)科長(zhǎng)介紹，相比去年 雙 11 不到三百萬(wàn)單的量，今年壓力的確很大。

有海淘網(wǎng)購(gòu)經(jīng)歷的用戶(hù)應(yīng)該比較清楚，在購(gòu)買(mǎi)海外商品后，海關(guān)要對(duì)入境貨物進(jìn)行審核，完成備案，這一環(huán)節(jié)中，地方海關(guān)要在初次審核后進(jìn)一步上報(bào)至海關(guān)總署，經(jīng)過(guò)總署審核后才能夠進(jìn)行下一步動(dòng)作。因此在面對(duì)雙 11 這樣的大型線(xiàn)上交易活動(dòng)時(shí)，對(duì)于系統(tǒng)的考驗(yàn)更加巨大。而對(duì)于電商企業(yè)來(lái)說(shuō)，要想讓境外商品更快更高效送到用戶(hù)手中，也需要和海關(guān)默契配合。

從九月份開(kāi)始，寧波海關(guān)就和阿里巴巴對(duì)接，阿里巴巴會(huì)生成上百萬(wàn)份虛擬申報(bào)單，以測(cè)試海關(guān)系統(tǒng)能否在短時(shí)間內(nèi)處理通關(guān)，并且頂住峰值壓力。這一過(guò)程可以發(fā)現(xiàn)系統(tǒng)需要多長(zhǎng)時(shí)間處理完大量數(shù)據(jù)、哪些環(huán)節(jié)比較慢等問(wèn)題。經(jīng)過(guò)十月份的第一輪準(zhǔn)備，目前寧波海關(guān)已經(jīng)可以在 24 小時(shí)內(nèi)處理 700 萬(wàn)左右的單量，這意味著雙 11 當(dāng)天，即便大家都從海外買(mǎi)買(mǎi)買(mǎi)，海關(guān)處理起來(lái)也不會(huì)慢。

從海關(guān)采訪(fǎng)結(jié)束，我們來(lái)到寧波保稅東區(qū)的跨境電商專(zhuān)用倉(cāng)庫(kù)。雖然還有二十多天才到雙 11，但這里 30 多個(gè)保稅倉(cāng)庫(kù)不少都已經(jīng)堆滿(mǎn)貨物，貨車(chē)進(jìn)進(jìn)出出，工人們忙著理貨、貼碼、上架、包裝等工作。

寧波保稅區(qū)海關(guān)物流監(jiān)控科科長(zhǎng)孫長(zhǎng)偉告訴極客公園，再有一個(gè)多星期，這些倉(cāng)庫(kù)應(yīng)該就能完成所有備貨上架，預(yù)包裝工作也將基本完成。根據(jù)預(yù)測(cè)，今年寧波關(guān)區(qū) 700 萬(wàn)單的包裹量中，保稅區(qū)將達(dá) 560 萬(wàn)單以上，這些貨物預(yù)計(jì)可以在 10 天內(nèi)全部完成發(fā)貨。

但倉(cāng)庫(kù)的壓測(cè)和別處不同，倉(cāng)庫(kù)管理人員告訴我們，在雙 11 來(lái)臨前，倉(cāng)庫(kù)也會(huì)進(jìn)行實(shí)戰(zhàn)演練來(lái)測(cè)試短時(shí)間內(nèi)處理貨物的能力。白天先將貨物累積起來(lái)，到晚上十二點(diǎn)再集中處理，并預(yù)測(cè)包裹處理能力，發(fā)現(xiàn)其中可能出現(xiàn)的問(wèn)題，包括人員效率，也包括機(jī)器是否正常運(yùn)轉(zhuǎn)等。

這和平常有所不同，平時(shí)用戶(hù)白天的訂單包裹，會(huì)在下午四點(diǎn)前發(fā)出，四點(diǎn)以后的包裹會(huì)在第二天早上發(fā)出，到雙 11 這天，所有包裹都是晚上十二點(diǎn)下單之后就開(kāi)始上線(xiàn)發(fā)貨，所以考驗(yàn)的就是十二點(diǎn)以后的處理能力。

倉(cāng)庫(kù)管理人員告訴極客公園，用戶(hù)下單之后，倉(cāng)庫(kù)在半小時(shí)以?xún)?nèi)就會(huì)接到物流信息，而寧波保稅區(qū)的海外商品提前已經(jīng)準(zhǔn)備就緒，所以相比過(guò)去，如今即便是在雙 11 期間人們大量購(gòu)買(mǎi)的海外商品，出貨時(shí)間也和國(guó)內(nèi)商品基本相同，到收貨點(diǎn)不會(huì)超過(guò) 10 天。

人變少，壓力卻變小了

每年雙 11 這一天的零點(diǎn)，大量用戶(hù)會(huì)進(jìn)入阿里平臺(tái)，選購(gòu)商品。這里包含的不僅僅是不同地區(qū)用戶(hù)復(fù)雜的使用習(xí)慣，同時(shí)也需要電商/海關(guān)/銀行/物流等各方面的快速協(xié)作，從這一層面來(lái)說(shuō)，即便雙 11 已經(jīng)到第九個(gè)年頭，也仍然會(huì)有挑戰(zhàn)。

「當(dāng)流量大的時(shí)候機(jī)器性能會(huì)達(dá)到一個(gè)瓶頸，突破這個(gè)瓶頸就會(huì)影響用戶(hù)體驗(yàn)，引起一系列異常。」

經(jīng)歷過(guò)八年雙 11 的天貓雙 11 技術(shù)大隊(duì)長(zhǎng)霜波告訴極客公園，系統(tǒng)要處理幾億用戶(hù)同時(shí)下單，要保障這一點(diǎn)是很難的，所以壓測(cè)這件事從第一次雙 11 開(kāi)始做到現(xiàn)在。但最初幾年的壓測(cè)是在線(xiàn)下，之后發(fā)現(xiàn)線(xiàn)下壓測(cè)很難找到線(xiàn)上的問(wèn)題，因?yàn)榫€(xiàn)下壓測(cè)要另外搭一套系統(tǒng)，這套系統(tǒng)里的機(jī)器/容量都和線(xiàn)上很難匹配，所以到 2013 年，阿里做了線(xiàn)上全鏈路壓測(cè)，技術(shù)人員會(huì)模擬雙 11 當(dāng)天用戶(hù)所有行為，直接在線(xiàn)上機(jī)器去下單。和線(xiàn)下壓測(cè)相比，線(xiàn)上壓測(cè)按照鏈路走，這個(gè)鏈路可以很深很深。

「比如你在淘寶下一個(gè)單，然后可以馬上支付，可以發(fā)出物流單，然后商家就可以立即操作發(fā)貨，這就可以看作一個(gè)完整鏈路，我們可以把這個(gè)鏈路完全走完?！固熵堧p 11 穩(wěn)定性負(fù)責(zé)人叔同表示，之前壓測(cè)時(shí)，要對(duì)系統(tǒng)一個(gè)一個(gè)壓測(cè)，之后會(huì)知道哪個(gè)部分該加服務(wù)器，哪個(gè)該擴(kuò)容。但這種分而治之的策略像堆積木一樣，不牢靠。如果一個(gè)應(yīng)用和后面三個(gè)有關(guān)系，那聯(lián)系起來(lái)就會(huì)出很多問(wèn)題。

「全鏈路就是把一整套串起來(lái)壓測(cè)，把支付寶/菜鳥(niǎo)這些也都串起來(lái)，打通消息交互和服務(wù)調(diào)用，都可以直接測(cè)試。這樣能夠達(dá)到跟雙 11 類(lèi)似的壓力環(huán)境。我們第一年做全鏈路壓測(cè)發(fā)現(xiàn)五百多個(gè)問(wèn)題，后來(lái)分析過(guò)，如果這里面有兩三個(gè)問(wèn)題爆發(fā)，整個(gè)雙 11 就是失敗的，但通過(guò)這樣的機(jī)制，能讓它把問(wèn)題提前暴露提前解決?！?/p>

從 2013 年開(kāi)始，全鏈路測(cè)試為雙 11 當(dāng)天解決了不少問(wèn)題之后，到今年，阿里開(kāi)始嘗試的，是如何能在效率提升的基礎(chǔ)上，讓更少的人，投入更少精力去參與雙 11 測(cè)試，所以就有了「尖兵計(jì)劃」，讓機(jī)器代替人去解決一部分壓測(cè)問(wèn)題。

「我們?cè)诰€(xiàn)上，白天會(huì)有百分之五十的量跑真實(shí)用戶(hù)，另外隔離出百分之五十的量去跑壓測(cè)數(shù)據(jù)，這樣就能自動(dòng)去跑壓測(cè)數(shù)據(jù)，也不會(huì)對(duì)線(xiàn)上造成影響，今年尖兵計(jì)劃中，我們提前發(fā)現(xiàn)了一些系統(tǒng) bug 還有硬件資源 bug，所以到晚上壓測(cè)時(shí)壓力就更小一些?！?/p>

霜波表示，之前的壓測(cè)都在晚上進(jìn)行，為了不影響用戶(hù)使用，去年雙 11 前工程師對(duì)系統(tǒng)進(jìn)行了 8 次壓測(cè)，而今年通過(guò)模型上新的算法，加上大數(shù)據(jù)的分析，壓測(cè)實(shí)際上在白天就自動(dòng)完成了一部分，而另一部分也幫工程師解決了很多問(wèn)題。10 月 20 日晚上，一輪新的壓力測(cè)試開(kāi)始，當(dāng)屏幕上的數(shù)據(jù)突破某一峰值后，曲線(xiàn)出現(xiàn)了一次小幅度的下跌，幾分鐘后，數(shù)字又恢復(fù)了平穩(wěn)，看似普通的壓測(cè)，卻和往年有所不同。

「剛才我們的一臺(tái)機(jī)器就出現(xiàn)了過(guò)載，分配到這臺(tái)服務(wù)器的訂單都出現(xiàn)了交易失敗的情況。如果是去年，就能聽(tīng)到有人說(shuō)，要把這臺(tái)機(jī)器下線(xiàn)，但是今年你會(huì)發(fā)現(xiàn)這個(gè)過(guò)程是自動(dòng)的，系統(tǒng)自動(dòng)發(fā)現(xiàn)了這臺(tái)服務(wù)器的問(wèn)題，自動(dòng)把它下線(xiàn)，修復(fù)問(wèn)題之后會(huì)自動(dòng)把這臺(tái)服務(wù)器重新上線(xiàn)?！顾ū硎?，像這樣的人工決策點(diǎn)，今年有一半都交給了機(jī)器，壓測(cè)的次數(shù)也從 8 次減少到了 3 次，「工程師的工作量減少了 30%，輕松很多。」這不僅僅是減少工程師熬夜，也是自動(dòng)化算法的優(yōu)勢(shì)。

壓測(cè)不斷改進(jìn)也在提升著雙 11 當(dāng)天的峰值處理能力，叔同表示，在 2015 年雙 11，系統(tǒng)峰值處理能力是 8.6 萬(wàn)次/秒，到 2016 年就達(dá)到 17.5 萬(wàn)次/秒，盡管今年雙 11 具體情況尚不可知，但至少在壓測(cè)當(dāng)中，系統(tǒng)的自動(dòng)調(diào)配處理能力在不斷增強(qiáng)。

在我們能夠感知的維度，大多數(shù)人看到的雙 11 僅僅是一次普普通通的網(wǎng)購(gòu)，可當(dāng)互聯(lián)網(wǎng)用戶(hù)群越來(lái)越大，網(wǎng)上購(gòu)物的行為越來(lái)越普遍時(shí)，要怎樣連接各個(gè)環(huán)節(jié)，讓所有人都能感知到體驗(yàn)升級(jí)，怎樣確保大量用戶(hù)參與也不至于出現(xiàn)問(wèn)題，這里面不僅僅是不同領(lǐng)域的協(xié)作，也是技術(shù)的進(jìn)步。而當(dāng)你再下單參加雙 11 狂歡時(shí)，也許會(huì)有更進(jìn)一步的體會(huì)。

生成海報(bào)

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。