天天看點

深度回顧!30篇好文,解析曆年雙十一背後的阿裡技術秘籍 | 雙11特别策劃之一

深度回顧!30篇好文,解析曆年雙十一背後的阿裡技術秘籍 | 雙11特别策劃之一

系列文章點選檢視:

96秒100億!哪些“黑科技”支撐全球最大流量洪峰?| 雙11特别策劃之二
一年一度的剁手日即将到來!

在雙十一龐大的資料處理量面前,使用者在使用感上卻絲毫不受影響。阿裡技術團隊通過不斷的探索,在交易洪峰面前仍然保障着系統絲般順滑地運作。世界紀錄的背後究竟有哪些技術支撐?今天我們将從 雲計算、新零售&支付、安全 和 物流 四大方向帶給大家雙十一技術全解密!

雲計算篇:

> 剖析AliSQL X-Cluster|基于X-Paxos的高性能強一緻MySQL資料庫

MySQL資料庫從誕生以來就以其簡單、易用、開源為其主打特點,成為不少開發者首選的資料庫系統。

> 直擊阿裡雙11神秘技術:PB級大規模檔案分發系統“蜻蜓”

蜻蜓,通過解決大規模檔案下載下傳以及跨網絡隔離等場景下各種難題,大幅提高資料預熱、大規模容器鏡像分發等業務能力。月均分發次數突破20億次,分發資料量3.4PB。其中容器鏡像分發比natvie方式提速可高達57倍,registry網絡出口流量降低99.5%以上。

> 技術如何秒懂你?阿裡百萬級QPS資源排程系統揭秘

TPP(Taobao Personalization Platform, 也稱阿裡推薦平台 ) 平台承接了阿裡集團300+重要個性化推薦場景,包括手淘首頁猜你喜歡、首圖個性化、購物鍊路等。除了提供應用層面的支援和封裝,還肩負着機器配置設定和維護各場景運作穩定的重任。

> 雙11黑科技,阿裡百萬級伺服器自動化運維系統StarAgent揭秘

還記得那些年我們半夜爬起來重新開機伺服器的黑暗曆史嗎?雙11期間,阿裡巴巴百萬量級主機管理能安全、穩定、高效,如絲般順滑是如何做到的?這歸功于StarAgent,它可以當之無愧的說是阿裡巴巴IT運維的基礎設施。

> 獨家揭秘 | 阿裡怎麼做雙11全鍊路壓測?

全鍊路壓測是阿裡的首創,我們将從工作内容、操作過程、運作總結等多個方向來介紹下阿裡内部典型電商活動(如雙11準備),以給大家展示一個完整的壓測流程,幫助更多的企業和使用者更好的完成性能測試。

> 直擊阿裡新一代資料庫技術:如何實作極緻彈性能力?

張瑞,阿裡巴巴研究員,阿裡集團資料庫技術團隊負責人,經曆阿裡資料庫技術變革曆程,連續六年作為資料庫總負責人參與雙 11 備戰工作。這篇文章将分享新一代資料庫技術在雙 11 中的應用。

> 阿裡釋出品牌資料銀行!能像貨币一樣儲蓄和增值

2017年6月7日,阿裡巴巴集團正式釋出服務于品牌的消費者資料資産管理中心——品牌資料銀行(Brand Databank),将幫助品牌建立全面的消費者資料資産管理,是國内首個實作品牌全域資料資産管理的平台。

> OceanBase實踐入門:高可用原理和容災方案

OceanBase的高可用可以做到自動故障切換和不丢一點資料,即使是異地多機房部署也是如此。這是OceanBase的特性之一。OceanBase的高可用機制是資料庫核心能力不可分割的一部分,且是常态運作不存在需要的時候才發現失效了。

> OSDI '18重磅解密:螞蟻金服實時金融級分布式圖資料庫GeaBase

GeaBase是具備高性能、高可用、高擴充性及可移植性強的實時金融級分布式圖資料庫,廣泛應用于螞蟻金服風控、社交、推薦等技術場景。“過無人區” 、“Made in China” 、“反哺”是GeaBase的幾個耀眼标簽。每年的支付寶春節紅包、每一筆交易的反洗錢識别等等,背後的技術都少不了它的身影。

> 資料中心日均 CPU 使用率 45% 的運作之道--阿裡巴巴規模化混部技術演進

混部技術的出發點,源自于對不斷增長的業務和日益攀升的資源成本如何平衡的思考,我們希望用最小的資源成本,支撐更大的業務需求。是否能夠複用已有的存量資源,來滿足新增的業務,這就是混部技術發展的思想源頭。

> 阿裡雲彈性計算ECS

阿裡雲ECS可以在5分鐘内支付一個中型網際網路公司規模的計算平台,助力平穩承接雙十一期間數十倍甚至百倍于平時的業務資料量。使用者的每一次點選浏覽背後都有ECS提供高性能、穩定算力的支撐。

> 阿裡雲資料庫RDS

大促期間,商家訂單量較平時提高數十倍甚至百倍,RDS的靈活彈性更新能力幫助商家瞬間提升RDS能力,應對并發訂單流量。

> 阿裡雲内容分發網絡CDN

将源站内容分發至最接近使用者的節點,使使用者可就近取得所需内容,提高使用者通路的響應速度和成功率。解決因分布、帶寬、伺服器性能帶來的通路延遲問題,适用于站點加速、點播、直播等場景。

新零售 & 支付篇:

> 20萬天貓智慧門店背後的商業思考和技術重構

如何助力零售企業完成數字化轉型,用大資料和雲計算的力量幫助品牌更好地洞察消費者、連接配接消費者、服務消費者,是一個重要的課題。

> 時尚電商新賽道:揭秘 FashionAI 技術

“今天吃什麼”依舊每天困擾着我們,但“今天穿什麼”的問題,阿裡巴巴想通過技術來幫我們解決。阿裡巴巴 FashionAI 時尚大腦,借助 AI 技術,為我們提供服飾搭配的參考方案,這也是阿裡一直強調的“新零售”的具體展現之一。

> 新零售浪潮下,人貨動作如何數字化?

本文讨論其中的三個關鍵的技術點:基于圖像的顧客動作檢測算法;基于射頻信号的商品翻動檢測算法;基于二部圖比對的人貨關聯算法。

> 如何用人機協同提高客服效率?阿裡巴巴客服助手誕生了

阿裡巴巴經濟體每天都在服務着數以億計的會員,每天會員求助的進線量巨大,盡管機器人的解決能力已經很強大,但是以目前技術人工客服依然無法完全被替代,龐大的阿裡人工客服在保障會員體驗的任務中仍扮演着十分重要的角色。阿裡巴巴新零售技術事業群-CCO技術部打造了一款助手在客服工作中予以輔助,實作人機協同。

> 如何解決移動電商平台中的“僞曝光”?

線上推薦服務根據商品的特征和使用者的資訊推薦多個商品。 現如今很大比例的使用者通過手機通路電商平台。 但是一些推薦的商品并沒有被使用者看到。為了解決線上推薦場景中的僞曝光問題并提高推薦商品的CTR,我們首次嘗試了bandit架構,并且在傳統的bandit算法上進行了多項改進,取得了不錯的效果。

> 為電商而生的知識圖譜,如何感應使用者需求?

本文從需求分析和體系化建構的角度出發,闡述在電商這一特殊領域的知識圖譜建構過程中,形成的一整套概念體系,還有在此過程中,通過算法、工程、産品、營運和外包團隊投入大量精力,通過不斷磨合逐漸完善的平台架構和稽核流程。

> 如何增加使用者的參與感?互動式推薦來了!

一方面,互動能讓使用者感受到更多的參與感,并能一定程度上幹預推薦結果,而不隻是被動接受推薦結果;另一方面,系統通過與使用者的互動能更加了解使用者的偏好,進而提升推薦效果。那麼,我們是如何讓使用者和推薦系統互動起來的呢?且看下文。

> “為你推薦”背後的算法探秘

我們希望營銷場景作為卡片的形式插入到現有的為你推薦裡,一方面是為這些場景分發流量,一方面是希望提高整體的坑位曝光收益。今天,我們就來探秘如何插入這些營銷場景卡片。

安全篇:

> 異常檢測的N種方法,阿裡工程師都盤出來了

網際網路黑産盛行,其作弊手段層出不窮,導緻廣告效果降低,APP推廣成本暴增。精準識别作弊是網際網路公司和廣告主的殷切期望。今天我們将從時間序列、統計、距離、線性方法、分布、樹、圖、行為序列、有監督機器學習和深度學習模型等多個角度探讨異常檢測。

> 揭秘阿裡雲WAF背後神秘的AI智能防禦體系

阿裡雲WAF AI核心為雲WAF提供核心機器智能能力,為客戶提供精細化個性化智能化的防護,最大程度降低安全風險。AI驅動的智能安全系統趨勢明顯,所帶來的收益也會越來越大。

> 阿裡雲安全肖力:雲上資料安全體系建設的六要素

高等級的雲上資料安全體系到底是如何做的?6月29日,在第二屆資料安全峰會上,阿裡雲智能安全事業部總經理肖力給出了答案。肖力指出,雲上資料安全建設是一個系統工程,最主要的六大方面是減少攻擊面、正确的産品安全政策配置、統一的身份認證授權、資料加密、資料防洩漏、日志審計。

> 阿裡安全工程師首度揭秘智能風控平台MTEE3

“太刺激了,太刺激了!如果那個48%真出問題,整個安全部的雙11就可能是3.25!”阿裡安全業務安全産品技術進階專家知命推了推眼鏡。MTEE3是什麼?那個48%又是什麼鬼?

> 阿裡安全技術平台資深專家玄泰解密:“如何防止資訊洩露”

近年來,大規模的個人資訊洩漏事件不斷發生,由此引發的精準詐騙也經常被媒體報道。有着龐大使用者群體和海量交易的阿裡巴巴卻能獨善其身,這背後有什麼獨門秘籍呢?阿裡安全技術平台資深專家玄泰反複提到“禦城河”三個字。

> 轉賬的 0.1秒,支付寶對你做了什麼?

0.1 秒能做什麼?眨一下眼睛,或者什麼也幹不了? 對于螞蟻神盾局來說,0.1 秒内要做的事太多了,它能在0.1秒内檢測詐騙,盜号甚至非法集資,這個看似不太可能的任務,他們依靠了一個秘密武器 —— CTU智能風控大腦。

物流篇:

> 菜鳥雙11“十億級包裹”之戰

本文将主要從包裹預測、供應鍊入庫、訂單下沉、訂單路由排程、電子面單及智能分單,以及在末端小件員方面的一些技術探索實踐,通過資料和技術的力量,捍衛這場十億級包裹的雙11之戰。

> 首次公開!菜鳥彈性排程系統的架構設計

在彈性排程出現之前,菜鳥整體資源使用率都處于一個比較低的水準,對于菜鳥來說,彈性排程是提升資源使用率最為行之有效的一種方式。方舟平台提供了可靠、高效的擴縮容能力,真正意義上實作資源的“按需使用”。

看完了如此詳細的解析,大家一定需要一套實踐方法論。這裡有一篇深度好文:

雙十一解決方案應用全揭秘

,這套解決方案将選取以往雙十一期間出現頻率較高的一些問題(如:大促流量高峰無法應對、資料意外丢失,無法及時恢複、獲客難,會員營銷如何更智能及企業内部溝通如何更安全更高效等)提出切實可行的解決方案,為大家分享阿裡巴巴實踐經驗及産品化解決方案,并提供爆炸式支付增長的保障。

深度回顧!30篇好文,解析曆年雙十一背後的阿裡技術秘籍 | 雙11特别策劃之一

2017年天貓雙十一全棧技術架構圖