阿里雙11集團技術總指揮湯興：一場不亞于移動化的變革已經(jīng)發(fā)生

推薦導語：

2019年11月11日，阿里巴巴所有技術人經(jīng)歷了第11次技術大考。這一年，阿里巴巴實現(xiàn)了核心交易系統(tǒng) 100% 上云，總銷售額達2684億元。核心交易系統(tǒng)百分百上云可以說是整個基礎設施最大的變化以及技術突破，在此之外，阿里巴巴的整個業(yè)務形態(tài)也發(fā)生了巨大改變。在QCon全球軟件開發(fā)大會(北京站)2020 即將召開之際，InfoQ采訪到了擔任此次大會聯(lián)席主席的阿里巴巴副總裁、2019年雙11集團技術總指揮湯興(花名：平疇)。本文將與你分享這場意義非凡的變革以及阿里新零售的技術方向。

1. 從愛奇藝CTO到淘系技術掌門人

2019年，湯興正式加入阿里巴巴集團，任職阿里巴巴集團副總裁，花名平疇。整體負責包括淘寶技術、天貓技術、農(nóng)村淘寶技術、閑魚、躺平 等多個團隊組成的新零售技術事業(yè)群淘系技術部。

翻開平疇的履歷，他擁有超過十年全球 TOP IT 公司研發(fā)及管理方面的工作經(jīng)驗。加入阿里之前，平疇最近的一份工作經(jīng)歷是任職愛奇藝 CTO，他帶領愛奇藝技術團隊建立起全球首個基于視頻數(shù)據(jù)理解人類行為的視頻大腦——愛奇藝大腦，讓機器能夠理解視頻內(nèi)容，并領導在視頻社交領域推出愛奇藝泡泡，開創(chuàng)了視頻社交先河。

雙11現(xiàn)場的平疇

雙11之前，阿里宣布由平疇擔任本屆雙 11集團技術總指揮，從視頻領域到新零售領域，角色轉變的同時，還要帶領技術團隊面對雙11流量高峰的挑戰(zhàn)，壓力可想而知，但平疇很快就適應了這種變化。

看懂兩者之間的內(nèi)在聯(lián)系與差異，就很容易在兩個領域切換和適應。

采訪中，平疇表示，視頻是內(nèi)容行業(yè)，本質(zhì)上是內(nèi)容虛擬商品的供給與需求匹配。阿里是電商行業(yè)，主要是實物商品的供給與需求匹配，兩者既有相同之處也有不同之處，比如一個沒有庫存，一個有庫存;一個通過線下物流履約，一個通過線上數(shù)字媒體傳送;一個側重營銷交易活動運營，一個側重主題運營活動等。無論是虛擬數(shù)字經(jīng)濟還是實物經(jīng)濟，都脫離不了零售的本質(zhì)，供給與需求的有效匹配，而技術體系的框架也基本類似。

2. 第11個“雙11”：一場堪比無線化的變革

2019 年，雙 11 直播已成為淘寶內(nèi)容生態(tài)里程碑式的節(jié)點，其意義可對標當年的無線化變革。

回憶起2019年的11月11日，平疇表示，淘寶經(jīng)歷了一場意義完全不亞于無線化的變革，那就是直播。

如今，不知還有多少人對淘寶當年的那場無線化變革印象深刻。

2013年，移動化的浪潮來了，所有人都感受到了移動化即將帶來的巨變。阿里集團一聲令下，正式宣布“ALL IN 無線”戰(zhàn)略，很多人被從原有部門放到戰(zhàn)場最前線，有人不適應走掉了，后續(xù)的再補上，就這樣不斷調(diào)整和優(yōu)化。

2016年，現(xiàn)任阿里巴巴CEO張勇正式向外宣布淘寶網(wǎng)與無線淘寶合并，淘寶成功從PC時代轉型為移動時代。事后證明，如果不是這場變革，我們很難見到如今的淘寶。

業(yè)務形態(tài)在變，技術必須跟上

“在云原生的大潮下，新一代的技術變更可能才剛剛開始，核心交易系統(tǒng)百分百上云可以說是整個基礎設施最大的變化以及技術突破。但是，在基礎設施的變化之外，整個業(yè)務形態(tài)也發(fā)生了巨大改變。”

平疇在采訪中對InfoQ表示，這種業(yè)務形態(tài)的改變指的就是直播。淘寶從2015年就開始做直播，短短四年打造了一個年成交千億的行業(yè)。

2019 年，雙 11 直播已成為淘寶內(nèi)容生態(tài)里程碑式的節(jié)點，其意義可對標 2015 年的淘寶無線化。當天，淘寶直播成交近 200 億 (2019年雙11總交易額為2684億元)，超過 50% 的品牌商家通過直播獲得增長。

如今，直播已經(jīng)成為天貓雙11商家的標配，直播的內(nèi)容形式與圖文截然不同，更強調(diào)實時互動和流暢的觀看體驗，而這些特點對消息通道、網(wǎng)絡和 CDN 等軟硬件資源 提出了苛刻的要求。

既要保證用戶體驗，又要追求技術上的最低成本，包括最小帶寬消耗、最大機型覆蓋等。平疇帶領的技術團隊遇到了很大挑戰(zhàn)。

為了解決直播中可能遇到的問題，淘寶直播技術團隊自研音視頻實時通信引擎，采用去中心化的設計方式，支持橫向級聯(lián)，實現(xiàn)大規(guī)模低延時直播，時延從原先的5到7秒降低至 1 秒內(nèi)，并在弱網(wǎng)下有更好的表現(xiàn)。

雖然做足了準備，但平疇回想起當下，坦言還是有些擔心：“很怕發(fā)生預期外的問題，尤其是新場景、新用戶動線和新架構。”

實踐證明，歷年雙11期間產(chǎn)生的相對嚴重問題，往往都不是我們預先最擔心的問題，甚至絕大多數(shù)可能不在預期內(nèi)。

道理很簡單，無論項目的挑戰(zhàn)或風險有多大，只要在雙11前能預想到，技術側就一定會做好預案應對最差情況，并且做好演練工作。對于預期外的問題，往往是沒有準備預案或者預案有效性沒有經(jīng)過驗證，遇到這種情況就非常挑戰(zhàn)整個技術團隊應急解決問題的能力了。不過，這也是雙11的魅力所在：

我們永遠沒有辦法對所有問題做好預案，永遠有未知的挑戰(zhàn)在前方等待，而我們唯有通過技術升級去不斷地逼近那個能夠做到的最好的極限。

所以，對技術人來說，雙11永遠沒有做的最好，只有做的更好。

3. 提前一年，決定上云

今年雙11，我們把“最要命”的系統(tǒng)全都放在云上。

這是當時阿里巴巴集團CTO、阿里云智能總裁行癲在雙11當晚說的一句話。如開篇所言，2019年雙11，阿里實現(xiàn)了核心交易系統(tǒng) 100% 上云，而這個決定早在一年前就做出了。

“每年雙11結束，全集團都會進行一次全面的技術復盤，除了復盤在整個雙11過程中的得與失，更重要的是，確定下一年雙11技術的整體方向。2018年雙11復盤時，集團就整體確定了將核心電商搬到云上的大策略。”

2019年1月份，上云項目正式啟動，這個項目在阿里內(nèi)部被稱為“云創(chuàng)未來”。電商核心鏈路全面上云意味著沒有云下的資源做切換與互備，平疇表示，這涉及到阿里電商數(shù)百個核心應用，上萬臺物理機臺，總核數(shù)過百萬核?？上攵?，這其中的挑戰(zhàn)有多大。

分步遷移：Q3季度進入大規(guī)模應用開發(fā)

為了實現(xiàn)這個目標，從機房到軟件部署、網(wǎng)絡拓撲、中間件等一系列基礎設施都要先行準備并且在更早一些的大促，比如618大促中驗證有效性。平疇透露，除基礎設施外，每年上半年是業(yè)務上各類技術平臺與框架升級迭代的黃金期，等到7、8月份，再結合雙11業(yè)務的具體玩法逐步進入業(yè)務應用的大規(guī)模開發(fā)期間。

按階段來看，平疇表示，雙11上云在技術層面可以分為如下三個部分：

1、平穩(wěn)遷移上云;

2、穩(wěn)定使用云服務;

3、結合云技術探索新的高效研發(fā)方式。

第一階段：應用遷移上云。

平疇表示，在這個過程中，最大的風險來源于云上基礎設施和中間件等產(chǎn)品的變化，應用需要配合這些變化進行改造和升級。

梳理清楚這些變化后，技術團隊才有依據(jù)判斷需要進行哪些相關的應用改造與升級工作，來規(guī)避重大風險。在這個過程中，淘系技術推動了中間件二方庫升級、版本檢測、日志異步化改造、緩存集群遷移等工作，建立了一套應用升級檢測的自動化機制和升級流程管理，確保所有應用升級到位，并在云上布署最小業(yè)務集群，能夠通過自動化業(yè)務功能回歸來驗證遷移后的業(yè)務功能一致性。

其次，遷移過程必須有很強的可控性，具備快速容災能力。平疇表示，淘系技術會通過線上流量的復制進行壓測，全量回歸云上的應用確保不出現(xiàn)性能退化。壓測的同時，技術團隊準備好快速切流逃逸的方案，在原有的異地多活的容災基礎上把中心機房建立成4個邏輯機房, 實現(xiàn)一鍵在同城4個邏輯機房之間的容災逃逸能力，并經(jīng)過多次驗證。在具體遷移的過程中，小步驟切流，同時加強云上監(jiān)控，避免突發(fā)性大面積問題出現(xiàn)。

第二個階段，建立上云保障小組。

淘系內(nèi)部將云和電商相關的研發(fā)一起拉通，明確響應機制和負責人，打通兩邊的變更系統(tǒng)和告警系統(tǒng)，細化云告警信息中明確關于電商應用相關的信息。通過不定時的模擬攻擊云環(huán)境，推動兩邊對故障處理的應急能力提升。

新零售線專門成立了上云、用云項目組，阿里云也有專門的項目成員進行對接。同時，我們有專業(yè)的PMO來保障跨團隊的項目合作，保障日常的周/月例會進行信息同步以及項目推進，針對演練中不同的線上問題有專門的應急機制，雙11項目的橫向拉通保障工作也隨著多年的技術升級而不斷沉淀經(jīng)驗。

為了保障云上的容載能力，雙11技術項目組組織了多次云上突襲演練，演練云上單元機房不可用情況下的應急手段。通過持續(xù)迭代逐步將核心業(yè)務搬到云上，過程中持續(xù)進行云上回歸測試以及切流演練，在雙11前的幾次大促中也驗證了線上的用云穩(wěn)定性。

第三個階段，結合云技術探索新的研發(fā)方式。

上云的過程中，云技術在向云原生發(fā)展。除了神龍服務器(阿里云彈性裸金屬服務器)之外，新的ASI容器也大規(guī)模使用。為了探索Serverless的價值，淘系技術結合云技術構建了自己的函數(shù)平臺FaaS，覆蓋淘寶互動、閑魚、導購、躺平等多個業(yè)務場景。這個平臺一方面大幅提升了研發(fā)效率，另一方面提供了云端一體的輕量級研發(fā)方式。

(淘系自研云端一體函數(shù)平臺 Gaia架構圖)

在上云的過程中，我們看到基礎設施變厚了，研發(fā)變得輕了，推動業(yè)務研發(fā)從Procode走向Lowcode，進而聚焦業(yè)務研發(fā)，可以更大地釋放研發(fā)生產(chǎn)力。

4. 端側AI決策140億次

上云、做AI，這是近兩年所有重視技術研發(fā)的科技公司的大主題。在上云之前，阿里淘系就開始研發(fā)端側的智能應用，這也符合當下國人的消費習慣，大部分消費者習慣通過移動端進行交易。

2019年，手淘大規(guī)模使用端上AI技術，在客戶端實現(xiàn)對用戶行為的實時感知，應用深度神經(jīng)網(wǎng)絡進行用戶意圖識別，并根據(jù)識別結果進行智能決策，做到推薦內(nèi)容的實時更新，大幅提升個性化推薦效果和用戶體驗。

2019年雙11當天，端側AI決策一共運行了140億次， 對于信息流的個性化推薦、消息的智能投遞、直播的商品智能檢測，效果上都有非常大幅度的提升。平疇表示，淘系技術部的輕量級深度學習端側推理引擎MNN已經(jīng)開源，這種有效利用云與端的各自數(shù)據(jù)和計算優(yōu)勢的方式一定是未來的發(fā)展趨勢。

除了端側的AI技術研發(fā)，阿里淘系也正在將深度學習、機器視覺和3D技術結合在一起，形成3D AI的方向，并將之應用于躺平家裝和家居領域。

最近五到十年，人工智能技術有了突飛猛進的進展，集中表現(xiàn)在深度學習，以及深度學習和人工智能問題的結合上，但是越來越多人對于人工智能技術是否可以再取得突破有所疑慮。平疇坦言，過去兩三年，業(yè)界對人工智能的作用有過度夸大。人工智能提升甚至創(chuàng)造新的場景需要和業(yè)務、產(chǎn)品、工程的深度結合，這需要較長的時間摸索。理想和現(xiàn)實的差距讓人們轉而認為人工智能達到了瓶頸，這是缺少對技術到產(chǎn)品轉化規(guī)律的耐心和尊重的表現(xiàn)。

新的人工智能應用場景的出現(xiàn)不僅需要人工智能技術發(fā)展這單一的條件，更是依賴數(shù)據(jù)、業(yè)務和產(chǎn)品的發(fā)展。因此，開發(fā)人工智能新場景不僅僅是人工智能技術團隊的工作，也不是簡單的理論結合實際，而是需要打造基礎設施、新產(chǎn)品、新的數(shù)據(jù)的積累。有了這些條件，人工智能的新場景才會源源不斷的孕育出來。

人工智能是戰(zhàn)術，核心還是具體場景的需求滿足，如何準確定義場景和相應的衡量體系才是人工智能發(fā)揮所長的前提。

5. 未來規(guī)劃

2019年的雙 11 過后，阿里內(nèi)部同樣召開了一場復盤會。平疇透露，2019年的雙11是技術歷史上消費者最順滑的一次，交易核心鏈路全面上云，淘寶直播的同時在線人數(shù)也創(chuàng)了歷史新高。未來，阿里會持續(xù)不斷提升購物車、下單等核心鏈路的消費體驗，同時通過技術升級的手段大幅優(yōu)化整體資源使用效率，降低大促過程中的技術資源使用成本。

接下來，阿里淘系的研發(fā)重點會聚焦在5G可能帶來的技術創(chuàng)新。平疇補充道，隨著5G的發(fā)展，網(wǎng)絡速度越來越快，視頻和直播的普及度越來越高。對于淘寶和阿里來說，傳統(tǒng)的電商是基于圖文和用戶進行交互，5G會帶來新的購物方式。目前來看，直播是一種新的變化，5G的部署可能會讓直播上出現(xiàn)AR互動，底層的低延時直播相關技術(編解碼、低延時通信)應該也會給消費者帶來新的消費體驗。

此外，AI、端計算、基于物理的3D渲染等技術在業(yè)務上的實施和應用也是十分值得關注的技術。比如，阿里巴巴旗下家居家裝平臺躺平，將AI技術應用到智能家居、家裝領域，智能化、自動化地為用戶提供專業(yè)設計師水準的軟硬裝設計方案，并且基于物理的3D渲染技術能夠將設計師的設計方案渲染出照片級的逼真效果。同時，以全鏈路數(shù)字化改造為基礎，以用戶定制化、場景化為消費者提供服務，形成端到端的解決方案，提供一站式全屋解決方案。這些技術的高度結合才能創(chuàng)造極致的用戶體驗。

# 采訪嘉賓 #

湯興博士，現(xiàn)任阿里巴巴副總裁，領導包括淘寶技術、天貓技術、農(nóng)村淘寶技術、閑魚、躺平 等多個團隊組成的新零售技術事業(yè)群淘系技術部，致力于打造消費者和商家一體化的新零售智能商業(yè)平臺，開創(chuàng)場景化新賽道。湯興博士擁有超過十年全球 TOP IT 公司研發(fā)及管理方面的工作經(jīng)驗，曾任谷歌上海研發(fā)中心技術總監(jiān)，負責了 Google 視頻搜索業(yè)務及參與 YouTube 視頻搜索服務的研發(fā)，后加入愛奇藝擔任 CTO，全面推動了視頻行業(yè)產(chǎn)品技術用戶體驗的創(chuàng)新和發(fā)展。——文章轉載自InfoQ

生成海報

免責聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏，概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權或存在不實內(nèi)容時，應及時向本網(wǎng)站提出書面權利通知或不實情況說明，并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關文章源頭核實，溝通刪除相關內(nèi)容或斷開相關鏈接。