天天看點

12月5日Spark社群直播【是時候改變你數倉的增量同步方案了】

議題:

是時候改變你數倉的增量同步方案了

直播間直達(回看)連結:

https://tianchi.aliyun.com/course/live?&liveId=41124

簡介:

本分享會先介紹傳統資料增量同步方案,之後對比新方案(完全基于Spark無需額外元件),介紹新方案如何結合最新的資料湖(delta lake)實作,同時引入spark-binlog,極大的簡化了資料增量的門檻和架構。如果時間允許,我們也會簡單介紹開源項目spark-binlog,delta-plus等的内部設計是如何支援我們新的資料增量方案的。

講師:

祝威廉,資深資料架構,11年研發經驗。同時維護和開發多個開源項目。擅長大資料/AI領域的一些思路和工具。現專注于建構集大資料和機器學習于一體的綜合性平台,降低AI落地成本相關工作上。

時間:

2019年12月5日 19:30-20:30

請釘釘掃碼至群内觀看直播,與嘉賓互動有機會獲得社群禮物一份。

12月5日Spark社群直播【是時候改變你數倉的增量同步方案了】

繼續閱讀