很開心在這麼冷的天和大家相聚在熟悉的 3W 咖啡聊大資料,感謝北京小夥伴踩着冰渣子來參加本場大資料為主題的 D-Day 活動。此次沙龍由 SegmentFault 家 Adele 主持,這一次選擇了一個相對陌生的主題,但仍然吸引了很多對大資料感興趣的觀衆,不少業内人士也紛紛趕到現場向大咖提問。

現場回顧
第一位分享嘉賓是個推技術總監袁凱,分享的議題是《個推 Spark 應用與實踐》,主要内容包括 Spark 簡介,為什麼選擇 Spark,以及 Spark 在個推的應用實踐:
- 個推資料處理架構
- Spark Streaming 部署情況
- 應用 Spark 的業務舉例
- Spark Streaming 實作熱力圖
第二位嘉賓是 @藍海訊通OneAPM 大資料架構師劉麒贇,劉老師分享的議題是《大資料實時分析利器 Druid 的應用》。不光講了選擇 Druid 的背景,Druid 的基本介紹,以及對 Durid 的展望,還舉例說明了 OneAPM 目前基于 Druid 的應用:
- 利用 Druid 存儲查詢 Saas 資料
- OneAPM Druid 叢集概況、叢集拓撲
- OneAPM 金字塔結構的 Druid DateSources
- OneAPM Druid 叢集監控方案
中場休息結束後,接下來為大家分享的嘉賓是
@友盟資料平台架構師展一楠,議題為《友盟 Spark 和 Elasticsearch 實踐》。簡單介紹什麼是 Elasticsearch,Es的優點,局限,友盟 Es 使用情況後,展老師還結合友盟執行個體進行分析,包括:
- 友盟 Hadoop & Spark 使用情況
- 友盟使用 Spark 的一點不太明顯的原因:函數式程式設計
- Spark 與 Es 在技術上結合解決的問題
- 使用搜尋引擎後,可能是給自己挖坑
本場最後一位分享的嘉賓是小米公司研發架構師,負責小米廣告平台的架構和資料的歐陽辰,這一次分享議題是《小米大資料技術小實踐》,關鍵詞為小米、大資料、技術小實踐,比如:
- 小米大資料技術架構、大資料應用
- 為何青睐 HBase,HBase 在小米的改進,如何從 MyAQL 平滑遷移到 HBase
- 小米廣告的實時統計
圓桌環節
四位嘉賓演講結束後是圓桌環節,本次圓桌由小米公司研發架構師歐陽辰主持,現場來了很多專業的觀衆,就平台架構選型及個人使用過程的疑問和嘉賓們進行讨論交流。圓桌結束後有些聽衆意猶未盡,紛紛找嘉賓老師私聊。此次 D-Day 足以見開發者們對大資料這一前沿領域技術的興趣。後期 SegmentFault D-Day 會對每年前沿技術保持關注,為大家帶來更多有趣的技術交流活動。
本場 D-Day 結束,馬上就要 12 月了,希望大家帶着 D-Day 上 get 的新知識,進入全新的一個月。
幹貨已出↓↓↓
現場幹貨整理
嘉賓 Slides:
嘉賓現場速記: