天天看點

從消息到資料湖:看 Apache RocketMQ、Hudi、Kyuubi 最新進展

上海的開發者小夥伴們,12 月 18 号,Apache RocketMQ & Apache Hudi & Apache Kyuubi (Incubating)三社群 Meetup 來了,打造最強消息傳輸、實時計算、資料入湖一體化解決方案專場。

本場活動聚焦 Apache  RocketMQ 及 Hudi,Kyuubi 資料湖結合,幫助開發者能更好地應對業務挑戰。活動将邀請喜馬拉雅、平安證券、網易、阿裡雲的衆多技術專家,共同為大家分享 Apache RocketMQ with hudi & Kyuubi 實踐與應用。

從消息到資料湖:看 Apache RocketMQ、Hudi、Kyuubi 最新進展

相關項目介紹

Apache RocketMQ

Apache RocketMQ 是由阿裡巴巴開源的消息産品,曆經多年雙十一流量洪峰嚴苛考驗,具有低延遲、高性能、高可靠性、萬億級容量和靈活的可擴充性。目前,全球超過上萬家企業都在使用 Apache RocketMQ,不僅包括位元組、快手、小米、滴滴、同城藝龍等來自網際網路的頭部企業,也包括來自于頭部銀行、券商、保險,基金等一系列要求極為嚴苛的金融公司。

Apache RocketMQ 經過過去幾年的發展,已經成為微服務領域業務消息的首選,伴随着雲原生時代的到來以及實時計算的興起, 生于雲、長于雲的 Apache RocketMQ 5.0 應運而生,全新更新為雲原生消息、事件、流融合處理平台,幫助使用者更容易地建構下一代事件驅動和流處理應用。

Github 位址:

https://github.com/apache/rocketmq

Apache Hudi

Apache Hudi 是 Apache 軟體基金會頂級項目,是新一代的流式資料湖平台,支援資料插入、更新、删除和增量資料處理;可助力建構高效的企業級資料湖。

GitHub 位址:

http://github.com/apache/hudi

Apache Kyuubi(Incubating)

Apache Kyuubi (Incubating)是一個 Thrift JDBC/ODBC 服務,目前對接了 Apache Spark 計算架構,支援多租戶和分布式等特性,可以滿足企業内諸如 ETL、BI 報表等多種大資料場景的應用。Kyuubi 可以為企業級資料湖探索提供标準化的接口,賦予使用者調動整個資料湖生态的資料的能力,使得使用者能夠像處理普通資料一樣處理大資料。項目已于 2021 年 6 月 21 号正式進入 Apache 孵化器。從社群目前階段的發展目标來看,它的主要方向是依托本身的架構設計,圍繞各類主流計算架構,打造一個面向 Serverless SQL on Lakehouse 的服務。Apache Kyuubi (Incubating)是一個 Thrift JDBC/ODBC 服務,目前對接了 Apache Spark 計算架構,支援多租戶和分布式等特性,可以滿足企業内諸如 ETL、BI 報表等多種大資料場景的應用。Kyuubi 可以為企業級資料湖探索提供标準化的接口,賦予使用者調動整個資料湖生态的資料的能力,使得使用者能夠像處理普通資料一樣處理大資料。項目已于 2021 年 6 月 21 号正式進入 Apache 孵化器。從社群目前階段的發展目标來看,它的主要方向是依托本身的架構設計,圍繞各類主流計算架構,打造一個面向 Serverless SQL on Lakehouse 的服務。

https://github.com/apache/incubator-kyuubi

立即點選

此處

參與活動吧!

往期推薦

從消息到資料湖:看 Apache RocketMQ、Hudi、Kyuubi 最新進展
RocketMQ 5.0 POP 消費模式探秘
從消息到資料湖:看 Apache RocketMQ、Hudi、Kyuubi 最新進展
2021雲栖大會開源引力峰會重磅釋出的戰略合作,Grafana服務到底是什麼? 演進實錄|不同階段的企業如何搭建監控體系?

了解更多相關資訊,請掃描下方二維碼或搜尋微信号(AlibabaCloud888)添加雲原生小助手!擷取更多相關資訊!

從消息到資料湖:看 Apache RocketMQ、Hudi、Kyuubi 最新進展