天天看點

從更高到更好 揭秘2021阿裡雙11背後的技術亮點

作者 | Alibaba Tech

來源 | 阿裡技術公衆号

今年,是阿裡巴巴第13個雙11。

今年雙11,阿裡巴巴大促峰值的計算成本相比去年下降50%;

截至11日,小蠻驢無人車在雙11期間累計配送快遞已超過100萬件。

更多的阿裡自研技術投入到雙11,在晶片、伺服器等硬核技術攻堅的同時,技術也在推動全鍊路的降本增效。

除了深耕自立自強的高科技,阿裡還在踐行“人人受益、責任擔當、開放共享”的好科技,希望用技術給客戶創造更好的價值,為社會創造更大的貢獻。

從更高到更好,今年雙11,阿裡巴巴的技術有什麼不一樣?

從更高到更好 揭秘2021阿裡雙11背後的技術亮點

綠色低碳

1 綠色科技 助力每筆訂單碳排放量持續下降

交易背後的碳成本主要有三部分:一是商品交易/數字交易本身的碳成本;二是物流運輸中的碳成本;三是商品生産和消費中的碳成本。

低碳雙11,必須解答好三個考題:首先,如何讓資料中心變得更“綠”、更加節能;其次,如何通過算力共享,提升資源統一排程效率;再次,如何讓機關算力的效率和價值最大化。

在綠色資料中心方面,阿裡雲以低碳選址、清潔能源、液冷技術等融合AI應用,加速綠色節能技術創新及疊代更新,做到“少用電、用好電、用綠電”;在綠色計算方面,通過技術創新實作資源使用率顯著提升、助力自身節能減排,今年每一筆訂單在交易環節的碳排放進一步減少;在綠色算力方面,雲提供了算力充分複用、高效利用的技術架構與經濟模式,讓算力本身更綠色;在綠色數字供應鍊方面,以算法驅動,采用預測+決策的算法體系,從機器學習向深度學習技術棧演進,實作資料驅動的預測決策一體化優化,持續優化、創新供應鍊計劃和運配等環節,降低貨損、提升運配效率,幫助商家降低碳排放。

從更高到更好 揭秘2021阿裡雙11背後的技術亮點

2 技術驅動,建設阿裡巴巴綠色數字供應鍊

今年雙11,數字供應鍊采用預測+決策的算法體系,實作資料驅動的預測決策一體化優化,降低貨損,統一排程減少浪費;在運配場景,提升車輛裝載率及運輸效率;通過建設一盤貨、全鍊路可售能力,幫助商家庫存共享,更精準地進行補貨備貨,助力商家多端銷售,降低滞銷。

3 阿裡雲資料中心大規模使用綠電,為“雙11減碳計劃”提供綠色“後盾”

為助力資料中心低碳綠色發展,近年來,阿裡巴巴積極響應國家“雙碳”戰略要求,開展清潔能源電力交易。2018年,張北資料中心加入張家口“四方協作機制”風電交易,率先在全國資料中心行業開展非水可再生能源電力交易。今年9月,作為首批全國綠色電力交易主體,達成1億千瓦時光伏電力交易,成為本次交易中網際網路行業最大的綠色電力購買主體,踐行了綠色發展的理念,探索了通過新交易品種獲得綠色電力的路徑。雙11期間,預計阿裡張北資料中心将使用綠電近3000萬千瓦時,減排二氧化碳2.6萬噸。公開資料顯示,2021年1-9月,阿裡巴巴共交易綠電2.48億千瓦時。自2018年至2021年9月,僅張北資料中心就累計交易約6億千瓦時新能源電量,累計實作二氧化碳減排近52.3萬噸。

值得一提的是,阿裡巴巴張北資料中心成為行業内首個碳普惠試點項目,獲評2020年國家綠色資料中心,入選2021年國家生态環境部低碳綠色典型案例。

4 統一排程、統一資源池穩定、高效、低成本支撐雙 11

在應用側,針對高并發場景,在保障消費體驗的同時,阿裡技術大幅優化交易鍊路,應對脈沖式流量。在軟體側,通過統一資源池進行統一排程,支撐大規模的離線上混部,實作線上業務優先排程。在雲方面,基于阿裡自研的神龍雲伺服器、自研的資料庫PolarDB等,大大提升了伺服器資源使用效率,可搭建百萬級規模的容器叢集,大規模釋放雲原生的技術紅利。

5 綠色物流全面更新,通過智能切箱、綠色回箱、碳賬單等讓綠色心智充分觸達消費者,打造人人都能參與的綠色雙11

通過優化紙箱型号和推薦合理的裝箱方案,菜鳥智能切箱算法支援菜鳥全行業倉内包材推薦,平均減少使用15%包材,僅在菜鳥倉一年可為5.3億個包裹“瘦身”。

通過碳排放測算和綠色物流各環節的資訊化盤查,在2021年天貓雙11期間推出了物流行業首個“個人減碳賬單”,并在6萬個菜鳥驿站發起“快遞包裝回收 全面換雞蛋”、1萬個菜鳥驿站試行舊包裝循環寄件項目,打通消費者可感覺、可參與的快遞包裝循環使用閉環。

從更高到更好 揭秘2021阿裡雙11背後的技術亮點

技術創新

1 平頭哥晶片含光800規模化支援搜尋推薦等場景

2021雙11期間,含光800通過阿裡雲平台支援了淘寶搜尋、推薦等業務,其中淘寶主搜100%的AI算力由該晶片提供。實際應用情況顯示,含光800有效發揮了晶片與雲計算環境融合的優勢,既提升了系統的性能又降低了整體能耗,以搜尋場景為例,相比傳統GPU,使用含光800運作的算法效率最高可提升近2倍,機關算力能耗降低58%。

從更高到更好 揭秘2021阿裡雙11背後的技術亮點

2 自研磐久伺服器新一代硬體技術全新上陣

磐久伺服器新一代硬體和技術全新應用于雙11,提供行業領先的計算及存儲生産力,場景化性能提升30%以上。今年雲栖大會上,阿裡巴巴釋出自研磐久伺服器系列,包括高性能計算系列、高性能存儲系列、大容量存儲系列。采用統一的方升架構,實作從晶片、部件到整機的技術及架構創新和自研,使用靈活子產品化與全棧軟硬體融合技術,提供多種通用和異構計算、多層級存儲解決方案,為客戶帶來行業領先的、更高可靠性和更極緻的性能體驗。

3 雙11雲原生技術實作自研、開源、商業化三位一體

中間件邁向産品三位一體架構進行演進,後端BaaS化,運作時Mesh化,業務Serverless化,做到開箱即用,按量付費,全面提升研發運維效率。其中基礎中間件進行BaaS改造,微服務更新到MSE,消息更新到MQ,可觀測更新到ARMS,高可用更新到AHAS,全鍊路壓測更新到PTS,更新成公有雲産品,極緻彈性,大促分鐘級建站和擴容,大大提升建站效率。Mesh化在國際化大規模落地,把非業務邏輯下沉到Sidecar,讓業務聚焦業務開發。業務Serverless化,淘寶導購前端100%上FC函數計算雲産品,實作快速擴容、快速響應,幫助業務提升運維效率。未來預計将有更多企業采用阿裡雙十一同款中間件支撐業務峰值,快速共享中間件沉澱的技術和能力。

4 多模态大模型M6首次支援雙11 落地40多個業務場景

超大規模模型成為人工智能領域的焦點。近期,阿裡達摩院實作了全球首個10萬億參數的多模态大模型M6,并釋出了對外平台,涵蓋各項單模态和跨模态的了解及生成任務。作為國内首個商業化落地的多模态大模型,M6已在阿裡巴巴超40個業務場景中應用,日調用量超5億。

今年,大模型首次支援雙11。依靠多模态了解能力,M6正在增進淘寶、支付寶等平台的搜尋及内容認知精度;憑借流暢的寫作能力,M6正為天貓虛拟主播等創作劇本和文案;M6已在犀牛智造上崗,其高清圖像生成能力讓設計師工作效率提升5倍,新款服飾開發周期從過去的1-3個月降低到最快2周,首批AI設計服裝已在淘寶上線。

尤其值得一提的是,M6做到了業内極緻的低碳高效,相比去年釋出的大模型GPT-3,M6實作同等參數規模,能耗僅為其1%,極大降低了大模型實作門檻,并推動了普惠AI的發展。

從更高到更好 揭秘2021阿裡雙11背後的技術亮點

5 IPv6大規模應用于雙11

在過去三年多時間,阿裡巴巴在技術生态中積極推動IPv6超大規模部署和應用,截止2021年10月,集團應用月活IPv6使用者已經超過6億。雙11期間電商APP淘寶,天貓,閑魚,考拉的移動網際網路IPv6流量占比超過76%。淘寶的核心業務功能 "交易訂單"鍊路已經完成IPv6改造并有1/3 流量通過IPv6承載,首次支撐雙11大促。此外,釘釘已完成IPv6全鍊路改造,是國内首款端到端全鍊路支援IPv6-only的試點應用。

6 全棧式數字供應鍊技術創新,助力提升商業效率

數字供應鍊為行業與商家提供端到端的數字供應鍊解決方案,實作從采購到流通、從商家到消費者的全鍊路場景的覆寫。

今年雙11數字供應鍊不斷技術創新,自研深度時序預測算法Falcon,幫助商家進行智能的銷量預測及補貨入庫,并打造了智能時序預測機器人産品DChain Forecast,讓商家也具備高準确度的時序預測能力;持續建設供應鍊仿真平台,實作供應鍊全鍊路高保真仿真,支援品倉部署、網絡規劃等沙盤推演,優化庫存管理,提升在架;提供智能履約決策能力,實作對倉配路由、訂單集批、配送排程等作業場景的覆寫,保障遠近場、标品生鮮等不同時效要求的服務目标達成。

本次大促,數字供應鍊驅動了超過數以億件商品與訂單的流動,以數字化技術助力提升商業效率與經濟活力。

7 阿裡靈傑産品全面擁抱雲原生,性能和可用性全面提升

阿裡靈傑全面擁抱雲原生,包括MaxCompute上線統一排程、實時計算Flink版 VVP平台更新Serverless、Hologres 全面上線到雲原生平台,帶來叢集穩定性和資源彈性能力的提升。MaxCompute統一排程叢集承擔了交易量的40%,性能也是混部叢集中最高的,實時計算Flink版 引擎優化、Hologres高可用能力建設等幫助核心業務營銷活動分析、生意參謀等節省大促資源的同時,可用性也有大的提升。

8 雲原生架構在國際化全面鋪開,結合業務架構創新進一步實踐雲原生價值

雙11期間國際化所有核心應用100%雲原生,100%ASI開啟Mesh資料面能力,Mesh控制面下沉覆寫核心交易鍊路大部分核心系統,雲原生去中心化網關架構成功在AE規模化落地,承接大促流量,并經受雙11峰值流量考驗;

業務架構:為提升架構持續演進能力,将網關類元件實作容器化剝離,基于容器編排部署,實作去中心化網關架構,為雲原生業務架構演進樹立新的标杆。

基礎架構:以服務網格為底座,實作企業級流量治理标準與産品架構,支援了雙十一數千應用服務級别流量管控與治理,實作了流量治理規則上線由以天為機關應用次元更新到秒級上線生效,人均效率提升1倍以上。

體驗更新

1 淘寶3D沉浸式直播間、虛拟主播 打造沉浸式消費新體驗

雙11期間,淘寶直播融合3D沉浸式直播間、3D化商品與虛拟主播(AI數字人)為消費者帶來全新的沉浸式消費新體驗。

淘寶直播3D沉浸式直播間基于全球首個影視級擴充現實的雲拍攝技術,突破了以往影視級XR直播拍攝中雲渲染、AI、複雜光影模拟、雲3D資産庫等關鍵技術,支援主播僅用普通綠幕就可虛拟出上千平米的直播會場、近千盞舞台燈光、特種攝像裝置的直播效果,成為首個具有低成本、可複用、低碳環保等優勢的商家自播影視級拍攝解決方案。

與此同時,淘寶直播不僅利用先進的3D模組化技術,将海量線下商品線上上實作3D化呈現,更在大資料與多模态技術的支援下,讓直播間裡的虛拟主播根據商家全量多模态商品介紹劇本,在直播過程中圖文并貌地進行商品的講解、對話互動、問題解答,為消費者帶來數字空間消費新互動體驗。

2 多語言技術創新促進跨境電商商家銷售

創譯技術融合改寫和翻譯能力,緩解低品質源語言商品資訊的影響,顯著提升了使用者語言體驗,目前已支援AliExpress、ICBU在十多個國家、數千萬跨境商品資訊的國際化;圖像翻譯技術自動定位、識别翻譯區域,将中文圖檔自動轉化為英文圖檔,将創意輕松國際化,實作了Lazada百萬商品圖檔資訊的國際化,圖檔翻譯及編輯工具已賦能上千頭部跨境商家;多語言生成技術還能整合碎片、零散的資訊,生成富有吸引力的素材,為消費者提供及時豐富的訊息。

3 業務中台助力雙11更加開放與保障

業務中台通過中台能力更新,為消費者和商家提供更好的購物體驗。

消費者側,不斷打磨消費者購買鍊路細節來提升購買體驗。在聯想詞推薦、自适應索引選擇的加持下,使用者可以快速搜尋到已購買目标商品,加購好物且可以購物車一鍵分享,直播間多樣商品也能組合下單;同時,業務中台通過電商&支付能力開放,助力多支付多優惠管道打通,縮短使用者整體支付路徑,降低交易時長5.5s,提升使用者支付體驗。

商家側,通過中台智能算法,包括商品庫存預警、尖貨爆品提前關注,0秒退款等能力,助力商家高效合理備貨;同時針對直播間的權益投放,促進下單轉化率最高提升6%,直播間主播戰績再攀高峰。

4 首創跨境B2B直播 優化音視訊體驗

2021下半年,新冠疫情反複、線下展會和跨境物流遇阻、匯率和上遊原材料價格波動,外貿行業面臨多重不确定性。阿裡巴巴國際站去年首創跨境B2B直播,至今已累計進行30多萬場。

為給客戶更好的跨境直播和客服體驗,達摩院XG實驗室與視訊雲、企業智能等團隊合作,通過音視訊應用與網絡傳輸優化跨層融合,實作極端弱網對抗能力,優化面向QoE的帶寬估計、抗丢包技術,實作70%丢包對抗能力;通過深耕帶寬估計、SVC、抗丢包等二十餘項傳輸技術,保障了多種弱網場景下的音視訊體驗,音視訊清晰度、卡頓率等核心體驗名額均有所提升,視訊卡頓率下降達80%,在極端弱網場景下表現尤為突出。

從更高到更好 揭秘2021阿裡雙11背後的技術亮點

5 雲原生資料倉庫AnalyticDB:大幅提升查詢分析實時性

阿裡雲資料庫已連續多年穩定支撐雙11,曆經極端流量場景淬煉。除了保障穩定順滑的基本盤,今年大促期間資料庫通過全面雲原生化,大幅提升使用者體驗,讓技術幫助業務産生更有價值的消費者體驗,持續通過技術創新賦能使用者,引領技術發展路徑。

今年,阿裡集團通過引入阿裡雲原生關系型資料庫PolarDB+雲原生資料倉庫AnalyticDB(ADB)+一站式線上資料管理平台DMS,賦能交易業務中台實作對全量訂單進行便捷搜尋,實作個性化的聯想詞推薦,讓檢索效率大大提升,有效提升了手淘使用者的搜尋體驗。

此外,AnalyticDB今年還新增了數百個系統核心名額。通過豐富的工具以及不斷沉澱的能力,提前發現風險,保障雙11大促絲般順滑,寫入峰值百萬級TPS無延時,同時大幅減少工程師工作量。

PolarDB+AnalyticDB+DMS還支撐了實時買賣家庫同步、曆史訂單搜尋等雙11核心業務場景。

從更高到更好 揭秘2021阿裡雙11背後的技術亮點

6 雲原生記憶體資料庫Tair:確定購物車實時顯示使用者到手價

阿裡雲原生記憶體資料庫Tair作為曆年雙11大促承載流量洪峰的利器,不僅在數十億QPS的峰值下保持着亞毫秒級别的順滑延遲,同時在電商交易核心體驗場景上也做出了技術創新。

通過原生持久記憶體存儲結構,Tair助力購物車場景實作了高并發流量下、實時顯示動态優惠和券後到手價,讓使用者對商品實付價一目了然,顯著提升消費者購買體驗。

據悉,阿裡自研記憶體資料庫Tair誕生于2010年,是一種支援高并發低延遲通路的雲原生記憶體資料庫,完全相容Redis,已曆經多年雙11大促考驗,提供核心線上通路加速能力,顯著提升系統吞吐量。

7 科技适老,讓數字服務不産生數字鴻溝

目前,阿裡巴巴12款APP加入了無障礙行動,讓每個人都平等享受技術帶來的紅利。淘寶“長輩模式”,通過引入字型大小适配,個性化推薦,ASR語音轉化等技術,消除數字鴻溝,幫助老年朋友看得清,看得懂,看得放心;

淘菜菜針對老年群體提供“銀發版”,字号更大,操作更簡便,同時優化低端機使用者體驗,小程式打開速度提升50%,加購性能提升30%;

餓了麼持續優化銀發使用者和殘障人士的使用體驗,覆寫導購、搜尋、下單全流程。在研發長輩模式過程中,優化了字型大小和銀發人群常使用的功能子產品。此外,餓了麼還專門為無聲藍騎士上線了無障礙溝通系統,以及通過智能排程系統,為殘障騎手比對接單,過去一年,智能排程系統讓這些騎手單均跑單距離減少7%,讓數十萬障礙和銀發使用者更好地享受本地生活服務。

産業智能

1 AI圖像生成技術助力快反時裝設計

在時裝行業,如何高效、準确地量産符合市場趨勢的創新設計款式,縮短新款培育周期與庫存風險,一直是商家的痛點難題。

通過AI圖像生成技術,阿裡技術研發了一套智能趨勢設計解決方案,可根據趨勢描述,實時産出高分辨率款式設計圖,支援不同層次的編輯操作,并通過個性化分發降低品牌同質化,進而提高了新品的研發速度與精準度,讓品牌與消費者的需求對接更順暢。

在今年的“雙11”應用中,多家鞋靴商家應用并上架了幾千款AI設計商品。

2 小蠻驢無人車實作大規模配送

今年雙11,350多輛阿裡“小蠻驢”攜手菜鳥驿站,開進全國高校,每天配送快遞5萬多件,預計配送快遞超100萬件。“小蠻驢”将自動駕駛技術與菜鳥末端物流場景、即時配送場景相結合,實作了産品驅動的自動駕駛規模化落地。在物流産業中,末端物流一直是整個物流體系中成本最高、效率最低的環節,無人車開在非結構化的末端場景,需要識别處理大量的交通參與者,比如機動車、非機動車、行人、動物等,以及其他的突發狀況。100萬單的背後,是小蠻驢的算法技術、營運技術和安全保障能力在做支撐,以算法為例,小蠻驢目前每天單車日均識别障礙物約4000萬,日均處理與其他交通參與者的互動約5000次。

從更高到更好 揭秘2021阿裡雙11背後的技術亮點