天天看點

官宣!Taier1.3 新版本正式釋出,新鮮功能搶先體驗

2022 年 11 月 7 日,Taier1.3 版本正式釋出!

Taier 是一個大資料分布式可視化的 DAG 任務排程系統,旨在降低 ETL 開發成本、提高大資料平台穩定性,大資料開發人員可以在 Taier 直接進行業務邏輯的開發,而不用關心任務錯綜複雜的依賴關系與底層的大資料平台的架構實作,将工作的重心更多地聚焦在業務之中。

Taier 自今年 2 月份開源之後,得到了社群開發者的廣泛支援,我們積極吸收社群開發者的意見建議,不斷疊代版本,目前已釋出了 Taier1.1、Taier1.2 這兩個大的版本更新。

本次釋出的 Taier1.3 版本,我們新增了 Flink Standalone 元件,融合了 DataSourceX 的子產品,并新增了 Python、Shell、ClickHouse、Doris SQL 等多種任務,任務資料源綁定,任務支援指定隊列運作,并進行了部署優化,同時對官網社群的 UI 進行了全新的更新改造。

目前新版本已在 Github 與 Gitee 上線,同時使用文檔也在社群推送,大家可以随時下載下傳查閱,歡迎大家前往體驗(喜歡我們的項目歡迎大家點個 Star),體驗位址:

Github:

​​https://github.com/DTStack/Taier​​

Gitee:

​​https://gitee.com/dtstack_dev_0/taier​​

社群官網:

​​https://dtstack.github.io/Taier/​​

同時為了友善沒有釘釘的開發者們更好的交流 Taier 開源技術,我們建立了 Taier 開源技術微信交流群,歡迎大家加入一起探讨開源技術~

Taier1.3 版本詳解

01 新增 Flink Standalone

新增 Flink Standalone 元件,可以通過 Flink Standalone 使用 Flink SQL、資料同步、實時采集等任務相關功能。移除 Taier 對 Hadoop 元件的強依賴,支援輕量化的資料處理。

官宣!Taier1.3 新版本正式釋出,新鮮功能搶先體驗

02 DataSourceX 融合

Taier 融合 DataSourceX 子產品,移除 Taier 外部插件依賴。新增資料源插件相關特性,支援後續 Taier 對接更多的 RDBMS 類型的 SQL 任務。

03 新增 Python、Shell 任務

新增 Script 元件,支援 Python、Shell 任務類型,可以在 Taier 上通過腳本類型任務進行操作。

官宣!Taier1.3 新版本正式釋出,新鮮功能搶先體驗
官宣!Taier1.3 新版本正式釋出,新鮮功能搶先體驗

04 新增 ClickHouse、Doris SQL 任務

新增 ClickHouse、Doris SQL 任務類型,支援資料同步腳本模式到 ClickHouse、Doris,再進行任務排程處理。

05 任務資料源綁定

控制台元件移除 SQL 類型元件配置,SQL 任務直接和資料源互相綁定,支援任務和資料源一對一的執行,将 SQL 執行域細分到具體的單個資料源。

官宣!Taier1.3 新版本正式釋出,新鮮功能搶先體驗

06 任務支援指定隊列運作

Hadoop 類型任務支援指定隊列運作,隊列資源隔離細分到任務級别。

07 部署優化

Taier 優化單機部署,優化前後端部署操作,簡化 docker 鏡像部署流程,降低上手難度。

08 官網更新

Taier 社群新官網上線,UI 設計全面更新。

官宣!Taier1.3 新版本正式釋出,新鮮功能搶先體驗

後續版本規劃

Taier 今年更新了 3 個大的版本,按照社群規劃,後續版本我們計劃重點圍繞關鍵點:

● 完善 Taier Datasource 模闆支援 SQL 任務

● HadoopMR、Spark Jar、PySpark 任務支援

● 任務告警