天天看點

公司的業務可以分為兩類:一類是OLTP型的業務,一類是OLAP型的業務。當今的大資料架構師需要掌握大資料采集、ETL、計

作者:架構筆記

公司的業務可以分為兩類:一類是 OLTP型 的業務,一類是 OLAP型 的業務。

當今的大資料架構師需要掌握大資料采集、ETL、計算、存儲、模組化、智能分析等多項技術能力,其中最核心的就是以 Flink 為首的大資料計算引擎。

計算引擎是整個大資料生态非常重要的一環,根據業務需求不同,大資料計算又分為離線批量計算和線上實時計算。比如基于 MapReduce 的海量計算屬于離線計算範疇;基于 Doris 或 ClickHouse 的計算屬于實時線上計算範疇。

Flink就是一款既支援離線批量計算又支援實時線上計算引擎。

公司的業務可以分為兩類:一類是OLTP型的業務,一類是OLAP型的業務。當今的大資料架構師需要掌握大資料采集、ETL、計
公司的業務可以分為兩類:一類是OLTP型的業務,一類是OLAP型的業務。當今的大資料架構師需要掌握大資料采集、ETL、計
公司的業務可以分為兩類:一類是OLTP型的業務,一類是OLAP型的業務。當今的大資料架構師需要掌握大資料采集、ETL、計

繼續閱讀