天天看點

阿裡10年分布式技術沉澱:阿裡高可用體系核心締造者、全鍊路壓測創始人告訴你!

本次活動看點十足,大咖齊聚、純正幹貨,下面給大家做下詳解介紹,相信看後定會讓你動心!

雙11核武器全鍊路壓測——張軍 / 阿裡巴巴中間件進階技術專家

阿裡巴巴雙11備戰期間,保障系統穩定性最大的難題在于容量規劃,而容量規劃最大的難題在于準确評估從使用者登入到完成購買的整個鍊條中,核心頁面和交易支付的實際承載能力。全鍊路壓測的誕生改變了這一現狀,通過對雙11進行模拟,支援線上不影響正常使用者通路的叢集讀寫壓測,獲得最真實的線上承載能力資料。全鍊路壓測開啟了大促穩定性保障的新紀元,被譽為備戰核武器。 聽衆收益:

阿裡為什麼要做全鍊路壓測,全鍊路壓測解決什麼問題;

全鍊路壓測的核心流程和實作機制;

全鍊路壓測給雙11系統穩定性帶來的改變和價值;

alisql:引領開源技術變革之路——何登成 / 阿裡巴巴資料庫資深技術專家

alisql,阿裡巴巴的開源mysql分支,從2010年開始研發,至今已經走過了7個年頭,成功支援了曆年阿裡雙11購物狂歡節、螞蟻新春紅包的大促活動。在阿裡巴巴業務飛速發展的驅動下,相對于開源mysql,alisql在性能優化、功能增強、可運維性提升等方面都做了大量改進。2016年我們在percona live上完成分享後,percona首席布道師colin charles聽完後大加贊賞。而從2016年初開始,alisql的發展在原有基礎上更進一步,一舉推出了多個創新性的産品和功能:高性能通路接口x-kv,高性能可全球化部署的alisql多副本強一緻叢集x-cluster,融合了rocksdb存儲引擎的alisql(rocksdb)等等。

簡單總結分享alisql從2010年到2015年這段時間的性能優化、功能增強和可運維性提升

重點分享alisql在最近兩年的技術和産品突破:x-kv、x-cluster、alisql(rocksdb)。分享我們為什麼會做x-kv接口?我們在技術上做了什麼,使得x-cluster相對于mysql官方的group replication有着近5倍的性能提升?等

總結我們的分享,簡單探讨阿裡資料庫未來發展的一些規劃。

阿裡巴巴海量資料場景下的olap解決方案——焦方飛 / 阿裡巴巴中間件技術專家

針對阿裡巴巴集團海量資料環境下準實時多元ad-hoc查詢以及存儲成本高的問題,中間件團隊研發了兩款資料庫産品:

histore(高性能olap列式存儲資料庫):作為阿裡巴巴集團規模最大的olap列式存儲資料庫,是一款分布式低成本分析型olap資料庫産品, 它基于獨特的知識網格技術,有效的解決了海量資料存儲的成本問題,以及在百億資料場景下支援實時高效的多元度ad-hoc查詢。histore在阿裡内部已經應用于多個核心應用,也應用于很多外部使用者,場景包括資料倉庫、商業智能、使用者畫像、報表分析、物聯網等等,無論成本、性能、穩定性都表現完美。

hitsdb(時間序列資料庫):是一種高性能、低成本、穩定可靠的線上時序資料庫服務。hitsdb 廣泛應用于物聯網、工業制造、電力、化工以及it運維等行業海量裝置資料實時運作監測、趨勢展現分析、故障診斷、業務預研等場景。hitsdb 提供百萬級時序資料别秒級寫入、高壓縮比低成本存儲、預降精度、插值、多元聚合計算、查詢結果可視化等功能,解決由于裝置采集點數量巨大、資料采集頻率高,造成的存儲成本高、寫入和查詢分析效率低的問題。

1.如果你對海量資料olap領域感興趣,并希望需求在資料倉庫、商業智能、使用者畫像、報表分析、物聯網等領域尋找高效的存儲解決方案,而且對海量資料下的存儲成本感到頭痛,histore将會使你受益匪淺。

2.如果你對時間序列資料領域感興趣,并且對監控領域、iot物聯網等領域的metrics名額、海量裝置資料等與時間相關的資料存儲和高效分析感興趣,那hitsdb将是你不二的選擇。

雙11高可用架構演進之路——周洋 / 阿裡巴巴中間件技術專家

阿裡從09年開始做雙11,日交易額從09年的5.9億漲到15年的912億,訂單建立峰值從400漲到14萬每秒,規模增長上百倍,系統的複雜度更是以指數級攀升,面對業界前所未有的挑戰,技術團隊走上了自主創新的道路,建設了大量高可用性技術産品,經曆了幾個階段的技術架構演進。 聽衆收益:

1.阿裡曆屆雙11的技術架構演進。

2.高可用技術産品發展之路。

3.雙11保障的最佳實踐。

萬億級資料洪峰下的消息引擎——馮嘉 / 阿裡巴巴中間件架構師

2016年,阿裡巴巴将自主研發的第三代分布式消息引擎rocketmq捐贈給apache軟體基金會。作為近些年雙十一大促核心基礎産品,它的架構演進是怎麼樣的?面對雙十一萬億級洪峰,它是如何保證穩定性和可用性的,都有哪些借鑒思想?面對分布式經典問題 - 慢請求,它是如何做到99.996%的延遲落在了10ms以内,而99.6%的延遲在1ms以内的?進入apache後,我們是如何發展社群的,下一代消息規劃是什麼樣的?本次分享将為大家帶來分布式消息引擎在存儲上的低延遲優化分享,高吞吐的性能優化以及apache社群發展動态。

1.了解雙十一海量分布式消息引擎背後的設計哲學。

了解萬億級資料洪峰下分布式系統的高可靠,高可用建設之道。

了解apache rocketmq的發展規劃、生态建設,下一代消息規範演進等。

微服務架構上雲的最佳實踐——李顔良 / 阿裡巴巴中間件技術專家

edas 誕生兩年多以來,接觸了上千的客戶;在幫助傳統企業向網際網路轉型的過程中,積累了大量微服務實踐的經驗;在我們接觸的研發團隊中,有一些問題是由于開發環境或者開發模式的轉變而帶來的。

這一次分享圍繞着微服務上雲的場景,跟大家分享幾個典型的案例;跟大家探讨如何避免類似的場景在自身的研發團隊中發生。

如果您是涉足微服務領域不太久的同學,通過這次分享可以解開部分疑惑如:如何對服務進行重構、拆分。

如果您的服務即将上雲,這次分享會告訴您服務上雲時一些典型的容易踩到的坑。

如果您是微服務領域的老司機,這次分享的案例或許能讓你有種似曾相似的感覺

分布式資料庫:從線性擴充談分布式join——孫夢石 / 阿裡巴巴資料庫技術專家

分布式join,在分布式資料庫中是一個很常見的需求,但分布式join絕非隻是一個詞,他有很多的政策、很多的變種。那麼如何評價一個分布式join是否适合去做,是大家學習drds等分布式資料庫一個重要的課題。

我們會從使用drds等分布式資料庫的最原始的初衷,實作系統的線性擴充說起,來為大家分析分布式join到底是怎麼一回事。

聽衆能夠了解到以下為:

1.什麼樣的分布式資料庫設計,才能做到線性擴充;

2.分布式join是怎麼一回事,有哪些種類,适合什麼場景;

3.與分布式join非常相關的一個東西,分布式索引應該如何設計。

阿裡電商架構演變之路——謝吉寶 / 阿裡巴巴中間件進階技術專家

阿裡巴巴是全球規模最大的電子商務平台,也是國内網際網路業界最早實踐soa理念的公司之一。依托于其所帶來的巨大流量和海量資料,以及對于電子商務平台固有的穩定性要求,使得團隊有機會去面對一個又一個技術難題,創造一個又一個技術奇迹。從一個初創型業務,到一個高速發展型業務,再到一整個生态體系。阿裡的技術體系架構經曆了無數嚴酷的考驗:去ioe,雙11,異地容災。在這個topic中,讓我們一起溫故知新,看看阿裡電商架構演變曆程。 聽衆受益:

了解阿裡巴巴核心架構的演變曆程;

了解阿裡中間件的發展曆程;

阿裡10年分布式技術沉澱:阿裡高可用體系核心締造者、全鍊路壓測創始人告訴你!

馮嘉,阿裡巴巴中間件架構師,apache rocketmq聯合創始人、openmessaging規範聯合發起人。具有豐富的分布式軟體架構、高并發網站設計、性能調優經驗,擁有多項分布式、推薦領域的專利。開源愛好者,關注分布式、雲計算、大資料領域。目前主要負責阿裡巴巴消息中間件生态輸出、mq商業化,apache rocketmq社群步道。

阿裡10年分布式技術沉澱:阿裡高可用體系核心締造者、全鍊路壓測創始人告訴你!

焦方飛,阿裡巴巴中間件技術專家,9年技術開發和系統架構經驗,2014年加入阿裡巴巴中間件團隊,從事分布式服務架構、分布式鍊路跟蹤系統的研發和架構演進工作,多次參與雙11關鍵服務的保障工作,随後從事olap資料庫領域的研發和推廣工作,從無到有見證了阿裡巴巴海量資料olap場景下以及時序資料場景下新産品的誕生和成功,完美的解決了集團海量資料存儲成本高、查詢性能不足的問題。

阿裡10年分布式技術沉澱:阿裡高可用體系核心締造者、全鍊路壓測創始人告訴你!

李顔良,阿裡巴巴中間件技術專家,edas團隊技術專家,近十年的軟體開發經驗,先後參與過外企、中大型網際網路企業團隊、創業團隊的研發,在服務化領域積累了大量的實戰經驗;目前參與企業級分布式應用服務 edas 的核心研發,緻力将 edas 打造為微服務領域的超級 paas 平台。

阿裡10年分布式技術沉澱:阿裡高可用體系核心締造者、全鍊路壓測創始人告訴你!

周洋,阿裡巴巴中間件技術專家,8年技術研發和架構經驗,全程參與阿裡高可用體系的建設和演進,主導了阿裡巴巴強弱依賴治理、灰階釋出、線上故障演練等多款高可用産品的研發和落地。深度參與大促、常态穩定性保障工作,積累豐富架構和穩定性經驗。2015 年作為共享事業部的大促pm,負責大促和常态穩定性的保障工作。目前主要工作在高可用産品體系雲化輸出和集團常态化穩定性保障方面。

阿裡10年分布式技術沉澱:阿裡高可用體系核心締造者、全鍊路壓測創始人告訴你!

孫夢石,阿裡巴巴資料庫技術專家,分布式關系型資料庫服務drds與tddl負責人,從0開始設計并開發了分布式資料庫drds,在分布式系統架構設計、分布式資料庫使用及優化,都有很多的經驗。參與淘寶每年的雙十一,成功支援蝦米、優酷等子公司使用drds,融入阿裡技術體系,支援雲上衆多使用者實作資料庫的線性擴充。

阿裡10年分布式技術沉澱:阿裡高可用體系核心締造者、全鍊路壓測創始人告訴你!

謝吉寶,阿裡巴巴中間件進階技術專家,2010年加入阿裡巴巴集團,10餘年技術研發和系統架構經驗。2012年加入中間件技術部高可用架構團隊,一直從事高可用建設相關工作,主導設計了灰階釋出系統、共享服務化平台、中間件運維平台、建站平台以及異地多活的架構演進。見證了阿裡巴巴的高可用産品體系從1.0到3.0的整個發展曆程,積累了豐富的架構和穩定性經驗,多次參與雙11負責穩定性保障工作,目前負責阿裡異地多活和同城雙活的高可用體系建設和中間件的devops。

阿裡10年分布式技術沉澱:阿裡高可用體系核心締造者、全鍊路壓測創始人告訴你!

張軍,阿裡巴巴中間件進階技術專家,阿裡高可用體系核心締造者,全鍊路壓測創始人,具備多年的大型erp軟體、金融領域和電商領域的高可用架構經驗,11年加入阿裡巴巴中間件&高可用架構團隊,在高可用領域積累了豐富的實戰經驗。上司設計和建設了阿裡的容量規劃體系、全鍊路壓測體系、限流降級體系、開關預案體系、流量排程體系等衆多高可用架構基礎設施,成為阿裡雙11大促備戰必不可少的核心利器,為阿裡數十個業務單元,上千個系統提供高可用的基礎技術支撐。

阿裡10年分布式技術沉澱:阿裡高可用體系核心締造者、全鍊路壓測創始人告訴你!

何登成,

資深資料庫核心研發專家,從04年開始從事資料庫核心研發達10+年以上。先後參與并主導過國産神舟oscar資料庫,網易自研存儲引擎ntse/tnt等資料庫産品的研發。同時也作為資料庫總負責人參與了多年阿裡巴巴雙11購物狂歡節,螞蟻新春紅包的備戰保障工作。有着豐富的資料庫核心研發經驗和資料庫應用架構經驗。目前為阿裡巴巴資料庫核心研發團隊負責人,主導alisql的産品研發(alisql:開源mysql的阿裡分支)以及下一代資料庫系統的規劃和研發工作。工作之餘,喜歡通過微網誌平台(微網誌賬号:何_登成)跟大家交流探讨資料庫技術以及高性能、分布式、軟硬體結合等技術。