天天看點

Flink被阿裡收購4年,最開心的卻是Spark背後的Databricks

作者:麥聰軟體

最近,Flink Forward Asia(FFA)峰會成功舉行,有關Flink的讨論,又開始在國内熱鬧起來。

Flink被阿裡收購4年,最開心的卻是Spark背後的Databricks
  • 2022 年,Apache Flink 社群保持快速發展:GitHub Star 數突破 2 萬,單月下載下傳量突破 1400 萬次;
  • Apache Flink 項目所有 PR 中有 45% 來自中國開發者;
  • Apache Flink 已成為實時流計算全球範圍事實标準。

從峰會給出的資料來看:Flink确實已經發展的越來越好,無論是技術層面還是使用規模。

但要指望Flink哪天能夠像Spark背後的母公司Databricks那樣,估值幾百億美金,估計有點難。

因為從Flink被阿裡收購的那一刻起,它的商業化就充滿了困難。

01

Flink商業前景為何不如Spark

2019年,阿裡巴巴以9000萬歐元收購了Flink背後的公司 Data Artisans。

Flink被阿裡收購4年,最開心的卻是Spark背後的Databricks

阿裡收購Data Artisans

作為阿裡掌管的Flink,開源版本到底做什麼不做什麼,阿裡就有很大的發言權和控制權。

阿裡巴巴如果要說服其他雲廠商,比如騰訊雲、華為雲,或者AWS、 Azure等都上一個好用的Flink服務,其他人就會在想,你阿裡巴巴掌握了開源,還能夠在自己的雲上做一個更好的閉源系統,我們怎麼和你做競争。

Flink被阿裡收購4年,最開心的卻是Spark背後的Databricks

21年全球雲計算市場佔有率

開源項目由一家公有雲公司主導,還是一個計算引擎,直接的結果,就是各大公有雲公司都覺得沒辦法玩了。

所有的雲廠商都有顧慮,都很難推出自己的針對開源Flink的增強版本。

而阿裡巴巴當然是有機會推出針對Flink的增強的商業版本的,而且還能夠很好相容開源的Flink,但是客戶未必敢用了。

Flink被阿裡收購4年,最開心的卻是Spark背後的Databricks

知乎關于Flink的讨論

客戶覺得,我一方面用了你的商業版本,一方面又必須/不得不上你的公有雲,被你綁得死死的,那我怎麼辦?

是以:客戶肯定是不到萬不得已絕不上Flink,先用其他工具吧。萬不得已要上Flink,最好也就上一個自己搭的開源版了。

02

Spark為什麼能成功

Spark的母公司,Databricks之是以能成功,有一個很重要的因素,它是雲廠商中立的。它既存在于AWS,也上了Azure,也登入了GCP甚至阿裡巴巴的雲端。

Flink被阿裡收購4年,最開心的卻是Spark背後的Databricks

Azure Databricks

這樣的做法,可以讓很多企業放心,包括可以讓各大雲廠商放心使用。

Databricks可以搞一個商業版,裡面有更多的功能,更好的和Spark相容但是提供更高效的處理引擎等等,這沒什麼問題。

各大雲廠商,也可以自己搞Spark的增強版,互相之間在不同雲平台PK,問題都不大。

因為開源的Spark,還是在一家雲中立公司的掌控中。這家公司本身,并沒有特别偏好某個雲。

03

Flink技術上确實已經足夠強大

Flink憑借 " 有狀态的流計算 " 這個核心理念和特色,誕生之初就快速打敗了上一代流計算引擎 Storm。

通過合流式計算和狀态管理兩項技術,Flink 不僅提供了高性能的純流式計算,同時也在架構層通過分布式一緻性快照技術,為使用者提供了資料精準一緻性保證。

Flink被阿裡收購4年,最開心的卻是Spark背後的Databricks

目前支援應用場景

而在批計算方面,Flink 已經完成絕大部分工作,并日益成熟。目前 Flink 已經能夠完整跑通批處理标準測試集 TPC-DS,已經達到主流批處理引擎水準。

此外:Flink 在 SQL 層提供了流批一體語義表達能力,即使用者可以寫一套 SQL,進而同時用在實時和離線兩個場景,進而得到全增量一體化的資料開發體驗。

Flink被阿裡收購4年,最開心的卻是Spark背後的Databricks

新功能

這幾年,Flink 社群在國内外技術會議上不斷宣傳推廣,讓 Flink 得到大量采用,各種應用場景也變得更加廣泛,生态快速發展。

Flink 不再僅僅是流計算引擎,而是讓絕大部分資料分析師都可以利用 Flink批流一體 API 搭建實時資料內建、分析、風控和線上機器學習場景解決方案。

04

總結

綜上,Flink的技術是牛的,未來能發展的更好,但如果一個很好的計算引擎,沒辦法做到公有雲廠商中立,那麼在雲計算市場的商業化就會難一點。

Flink被阿裡收購4年,最開心的卻是Spark背後的Databricks

Databricks年度融資及估值變化

自從阿裡巴巴買了Flink以後,也許最開心的就是Databricks。(19年阿裡收購Flink,Databricks估值27.5億美元,21年其估值達到380億美元)

大家怎麼看,會建議自己的公司用Flink嗎?

麥聰軟體,全球領先軟體廠商,國家高新技術企業。核心産品麥聰DaaS平台具備資料內建、資料開發、資料品質、資料服務相關功能,世界500強集團中已有30多家選用,兩年内幫助近400家企業數字化轉型更進一步。歡迎大家帶着企業數字化問題與我們一起讨論。

繼續閱讀