編輯:編輯部
【新智元導讀】這個天貓雙11,酷炫的AI技術,為你我打造了一場如夢似幻的沉浸式購物之旅。
今年雙11,你買什麼了?
有沒有發現,現在上淘寶天貓購物,跟以前有了很大的變化——
有了一個巨好玩的沉浸式購物模式!
想送她一個口紅做禮物,但又分不清色号怎麼辦?
沒關系,打開淘寶,可以先在這裡練習一下嘛。
這不比去專櫃試色,往手背上塗省心多了!
沉浸式購物:想試就試!
如果說,過去的購物是關于售貨員、櫥窗、櫃台的,今天的櫃台已經挪到了手機app上,櫥窗變成了一張張圖檔和一段段視訊,售貨員變成了一個個帶貨主播。
過去購物是溜達着逛商店,挑好了東西排隊結賬。
現在的雙十一是躺着床上動手指,挑好了東西等收快遞。
有進步嗎?有。體驗好嗎?真不一定。
同一件衣服,店家的模特穿上和我穿上怎麼差這麼多?尺碼不合适要退換?沒問題,快遞一來一回,再多等十天半個月吧。
實體店購物雖然累,但可以踏踏實實試衣服,尺碼不合适立馬調換。
作為「雙十一」頂流平台之一,天貓每年其實都在做一件事:讓網上購物向實體店體驗靠攏,最好是能無縫對接。
所謂「沉浸式購物體驗」大概就是這個意思。要是能在手機上找到逛實體店的感覺,還不用排隊,誰會不喜歡呢?
不過,要想讓原本是3D的商品在手機上動起來,光靠拍幾段動畫是不行的,這裡說的「動」,是按照顧客的意願,想怎麼動,就怎麼動。
最好是能讓顧客把手指放上來自己動,或者隻要動動手指,就能搬動場景中的寶貝。
如果相中了準備買,隻要簡單一劃,就直接跳轉到購買頁面了,剁手比過去更友善了有友善了有沒有!
就比如說,現在的電視一個比一個大,我怎麼知道挂在我家的牆上效果如何?
打開手機天貓app,看看這個AR場景,尺寸和效果展示都在,你甚至可以想象坐在沙發上看這個電視的感覺,有點上頭是吧?
講到大促活動,少了美女主播怎麼行,這次雙11,美女主播在3D直播間等着各位!
不要跟我說「你這背景也太假了」,搭一個這樣的背景也是很不容易的。
過去小姐姐直播,把手機拿在手上展示,你們老說看不清,這下看清了吧?不考慮剁個手嗎?
如果你是一位露營和遠足愛好者,選購裝備時總想看看野外使用時的場景夠不夠炫酷是吧?
隻要你想,天貓可以帶你去一個秋日的午後,山腳下的帳篷已經為你準備好,帳篷外全套裝備一應俱全,要不要進去歇歇腳?
夕陽西下,又到了野餐晚飯時間,桌椅已經齊備,把食物端上來,大快朵頤吧。
任意門背後有什麼?
那麼,3D購物體驗到底能幹嘛呢?
讓我們走進任意門,看看會通向哪裡?
進入了一個很酷炫的虛拟空間。
讓我們選擇這個空間。隻見一座缥缈的水雲閣樓,煙斜霧橫,廊腰缦回,還有一棵紅葉古樹。竟然是……
小蘭花的司命殿!
讓我們再進一個空間,進入了一個廚房。随手可見各種高科技小廚電,地上還有掃地機器人在遊走。
點進商品櫥窗,就能浏覽各種廚電啦。
再進一個空間,映入眼簾的,是數字作品館。
這個無垠的宇宙空間也太酷炫了吧。
比如這幅《畫貓系列之朱淑真》——
古雅的風韻,美輪美奂的場景,太讓人心癢了!
天貓頁面上還有個臻品館,進入之後仿佛身處褐色的海底世界。
忽然,天空飄來一隻華麗麗的腕表,這貴氣簡直讓小編閃瞎了眼。
轉動這個表,表盤、齒輪、旋鈕、甚至表帶上的紋理,都清晰可見。
擡頭看一眼價格:1570000,是咱買不起的價格了。但是不妨礙我們通過3D技術,來感受一下豪華奢侈品令人回味無窮的魅力。
還有宇樹科技的這隻仿生互動機械狗,安防巡檢、勘測救援樣樣拿手,還能幫你取快遞。用VR看一看,這四肢有多靈活。
「撐起」天貓雙11的硬核技術
說來,天貓怎麼就忽然做起沉浸式購物了?
其實在過去的13個雙11裡,天貓的底層技術基礎設施得到了深厚的積累。而現在随着AI技術的革新,産品形态的創新,也變得千變萬化。
如今這個時代,恐怕很少有人沒在直播間買過東西了。這種邊看邊買的購物體驗,越來越被大家廣泛接受。我們也都越來越習慣于通過直播、短視訊這樣的内容形态去種草。
天貓的開發者們,也一直在思考如何更好地滿足消費者的各種需求。
天貓依托底層3D引擎(AceNNR)、AI引擎(MNN)、AR引擎、多媒體等技術,讓我們能通過AR應用、3D展示等各種方法,看到各種産品的形态。
而其中沉浸式體驗最關鍵的技術,就是NeRF 3D模組化、虛實融合和雲技術了。
1. 3D模組化
衆所周知,手機螢幕是個平面,而商店裡的東西是立體的。
如果想要在手機上講沉浸體驗,從2D到3D的更新是基礎,也是重中之重。
那麼問題來了,商家該如何打造一個體驗堪比實體店的虛拟3D空間?
為此,阿裡想到了學術界研究已久的神經渲染算法(NeRF),并在之後首次實作了在工業界的規模化落地。
通過結合自研的AceNNR推理引擎和工具鍊,打造了一個高精度、低成本的3D商品制作工作流,快速實作商品模組化到手機端展示。
其實,在去年的時候,阿裡就推出了相關的技術——Object Drawer。
整套流程下來可謂是相當簡單。
首先,對商品進行拍攝并生成一系列照片。
然後,把照片上傳到雲端,讓三維重建算法進行訓練計算。
最後,就可以得到渲染好的模型啦。
基于RGBD的自動化拍攝裝置和神經渲染模組化算法,整個方案僅在拍攝階段需要少量人工參與,模組化完成後無需修模,是以可以實作低成本的模組化,相比原有模組化能力平均有70%的成本降低。
而且還原出的「虛拟商品」,不僅精度很高,而且表面細節的材質和紋理都無限逼近真實照片。
目前,這套三維重建方案已經覆寫了鞋、包等超過十個類目。之後,阿裡還會嘗試利用多種差異化的拍攝裝置和算法能力,來完整地解決所有商品品類的模組化問題。
對于消費者來說,通過3D模型可以知道商品準确的外觀顔色、形狀結構、實體材質等資訊。
以服裝為例,除了可以看外觀顔色,還可以仿真不同衣服的材質屬性,無論是棉、麻還是滌綸,對應材質等都有不同表達。
未來,結合使用者的3D數字分身,可以以非常逼真的形式超前體驗商品,比如穿上衣服之後是不是漂亮,是否與身材貼合,進而避免尺碼不合等問題 。
使用者甚至可以通過手機看到3D衣服的自定義編輯紋理貼圖,實作衣服的外觀和細節的定制,即所謂「所改即所見,所見即所得」。
2. 虛實融合
在有了商品的模型之後,接下來要做的,就是想辦法把真實的人「傳送」到虛拟的3D空間裡。
為此,阿裡正在加速建構低成本、高保真、部署簡單的虛實融合技術。
具體來說,這項技術包含了虛拟場景生成、光影和諧算法、虛實相機鏡頭同步技術等核心子產品。
基于該技術方案,可以把真實的使用者身臨其境地帶入到3D虛拟世界中,而且使用者還可以在這個3D虛拟空間中自由走動和互動。
這一技術将被用于虛拟直播間、T台走秀等場景搭建,可讓商家更輕松地建構符合品牌調性的3D内容。
比如,作為背景的火星就是一個3D的虛拟場景,而前景依然是真人模特。
可以說,前景和背景的光影,完全是無縫融合。
而想要實作如此酷炫的效果,隻需要在前期用綠幕進行拍攝即可。
當真人模特在「火星」穿梭時,商家就可以全方位、動态地展現品牌服飾了。
既然已經有了3D消費場景,那麼裡面的内容素材,比如3D模型,是不是也需要頻繁地更新疊代了?
對于這點,阿裡也将為廣大商家準備超低門檻的3D内容編輯和營運工具。
特别是對期望擁有自己3D品牌館的商家,這套編輯工具通過模闆方式可以快速支援商家實作從0到1搭建3D店鋪、裝修店鋪、批量上新商品等各種功能。
就比如上面這樣一個淘寶人生風格的虛拟3D店鋪,商家可以選擇合适的3D商品在貨架上進行展示,也可以根據不同的消費季節一鍵替換店鋪風格。
而使用者也可以通過自己的虛拟數字分身,身臨其境地逛3D店鋪,自由試穿試戴,一鍵下單購買。
3. 雲技術
要實作雙十一期間的完美「沉浸式購物」,離不開海量算力資源的支援,而說到算力支撐和排程配置,繞不開的核心業務就是阿裡雲。
可以說,正是雙十一大促對算力資源和配置的巨大壓力和苛刻要求,催生了阿裡雲的「百煉成鋼」,也正是阿裡雲一步一個腳印的提升,讓雙十一成為「剁手愛好者」們一年一度的盛宴。
通過全面上雲和深度用雲,為阿裡業務的靈活創新及消費體驗的變革奠定了堅實基礎,也讓阿裡的技術架構不斷向serverless的方向演進。
阿裡是全球首家将全部業務放在公共雲上的科技企業,過去十年裡,已經完成了雲計算能力從單點試驗到規模化應用的「躍遷式變革」。
從2015年起,為了适應業務的快速增長,阿裡在「雙11」活動中開始将電商核心業務彈性上雲,以解決大促期間的算力缺口問題。
2019年,實作核心系統上雲。
2020年,實作雲技術的全面原生化。
2021年,完成了包括電商主營業務在内的數千萬核心算力、30餘萬應用的全面上雲。
在經曆過去三年的堅實「三步走」之後,今年雙11成為阿裡全面serverless、深度用雲的元年。
另外,今年阿裡将自研CPU大規模應用于雙11活動,首次實作了晶片、計算架構及作業系統的協同優化,機關算力功耗降低了60%。
最初,阿裡下定決心搞自研CPU的起因,也是為了滿足計算場景的實際需要。
因為第三方制造商所産出的伺服器晶片,并不能很好地與雲廠商各自的技術架構相融,隻能滿足最基礎的算力要求,很難提高特定業務及場景的性能。
怎麼辦?隻能自己搞。
于是,平頭哥,應運而生。
搞自研晶片,對于阿裡而言,看起來隻是順勢而行。
2019年,成立僅僅一年的平頭哥,釋出阿裡第一顆晶片「含光800」。
2021年,倚天710正式亮相。無論在性能和能效上均領先全行業。
今年,阿裡自研CPU已經實作全面助力雙11。
截至目前,阿裡已經使用了60多款重點雲産品,這些産品支援集團業務在全球多個可用區實作「開箱即用」,不但大幅降低了運維成本,也可實作随時彈性算力資源配置。
阿裡CTO程立表示:「從硬體算力提升到基礎設施系統層優化,雲基礎技術釋放出巨大的紅利,讓雙11更靈活、更經濟、更綠色。一個全面深度用雲、加速技術架構重塑的時代正在到來。」
阿裡,站在沉浸式網際網路的起點
在過去,我們曾經曆了從PC網際網路到移動網際網路的變遷。
而在天貓雙11技術負責人餘剛眼裡,沉浸式網際網路将開啟下一個網際網路時代,電商、娛樂、社交等線上場景都将被重塑。
現在,我們正站在沉浸式網際網路的起點。
而阿裡,就誓要抓住這股浪潮,去自我變革。
從上面我們可以看到,天貓已經在緊鑼密鼓地啟動這個大計劃了。
當然,目前的沉浸式體驗,也還面臨着一些困難。比如,硬體裝置的限制、互動方式的變革、内容載體的變革、場景的變革,這些還存在一些瓶頸。
就比如說,現在的VR裝置和AR裝置還無法給我們完美的沉浸式體驗,價格還動辄上千。這就要看,未來幾年内硬體廠商會如何改進産品了。
不過,通過這次雙11,我們可以看到,阿裡已經在很多關鍵技術上蓄勢待發,為我們打開了全新的想象空間。
在天貓,中國的消費者第一次看到了,沉浸式購物在未來可能是什麼樣子的。
而在未來,我們可以大膽地放飛想象,那時的娛樂、社交、電商等場景,都會發生線上上虛拟空間。我們可以和朋友一起在虛拟空間裡看電影、蹦迪、逛街。
三年?五年?也許不會遠了。