天天看點

AutoML 2.0:資料科學家過時了嗎?

雲栖号資訊:【 點選檢視更多行業資訊

在這裡您可以找到不同行業的第一手的上雲資訊,還在等什麼,快來!

在過去幾年裡,AutoML快速增長。而且目前看來,經濟衰退無可避免,人工智能(AI)和機器學習自動化開發的觀念也必将越來越有吸引力。業界現在推出的各種新平台(

https://dotdata.com

)都具有更多的自動化功能。人工智能現在可以驅動所謂的要素工程(Feature Engineering),允許使用者自動發現和建立資料科學處理功能。這種做法開啟了一種全新的資料科學方法,似乎會威脅到資料科學家的作用。

那麼,資料科學家需要關注這些發展嗎?資料科學家在自動化過程中的作用是什麼呢?鑒于這種新發現的自動化技術,企業又将如何發展呢?

AutoML 2.0:資料科學家過時了嗎?

傳統的資料科學過程(圖;dotData公司)

AutoML 2.0必将令資料科學更加自動化

第一代AutoML平台的重點主要放在自動化資料科學過程中的機器學習部分。但在傳統的資料科學工作流程裡,最冗長和最具挑戰性的部分則是被稱之為是要素工程的部分,要素工程是高度手動的一步,主要涉及到連接配接資料源及建構寬大的“要素表”,需包含豐富多樣的“要素”。與此同時,這些要素還需要針對多種機器學習算法進行評估。

目前,要素工程面臨的挑戰是,隻有用更高水準領域的專業知識才能“醞釀”新的要素,而且這一過程需要在評估、拒絕或選擇要素時反複地做。但最近業界出現了新平台,這些新平台可以提供旨在解決這一挑戰的附加功能及自動化功能。現在一些具有“自動要素工程”功能的平台可以從關系資料源以及無結構檔案裡自動建立要素表。這種能夠在資料科學過程中“自動生成”要素的方法,可以說是個改變遊戲規則的功能。

于是,突然之間,“公民”資料科學家開始成為組織開發ML和AI模型的有價值貢獻者。一般來說,「公民資料科學家」指的是商業智能(BI)分析師、資料工程師群組織中其他具有深厚領域知識的、精通技術的成員。借助于機器學習,BI團隊利用自動化要素工程可以在幾天之内開發出複雜的預測分析算法,無需資料科學家幫忙就可以極大地提高生産力。

自動化資料科學:平民化

AutoML 2.0平台的主要好處之一是可以用于真正的資料科學平民化。

資料科學自動化可以加速發現要素和建立功能的過程,而且是自動的,如此一來,更多的使用者群體就可以為資料科學過程做貢獻。要素建立的自動化使得“公民”資料科學家能夠建立極有用的、高度優化的用例。而且公民資料科學家通常具有高度的“專業領域知識”,是以他們基本無需資料科學團隊的幫助就可以将重點放在對組織具有高價值的用例上。

開啟公民資料科學家的另一個好處在于,企業無需擔心招不到資料科學家而一樣可以開拓資料科學的使用。2018年 LinkedIn的一項研究表明,美國的組織在雇用資料科學家方面遇到困難。鑒于此,能夠發掘新的資料科學貢獻者就顯得尤為重要。

眼下,全球經濟面臨着諸多不确定性,在這種情況下能以最少的投資發掘出幾類新的AI/ML開發人員,必将成為改變遊戲規則的價值主張,在維持或增加競争優勢上意義重大。

自動化資料科學:生産力而非替代

但任何AutoML 2.0平台如果将定位的重點放在替換或更替資料科學家上就大錯特錯了。大多數資料科學家都将要素工程視為工作中的最大障礙之一。自動化可以幫助加快要素工程的流程,靠的就是自動化可以提供令人難以置信的生産率提升,這種提升若無自動化是不可能實作的。

對于資料科學家來說,利用AutoML 2.0通常可以極大地加快自己的工作,縮短的工作時間從幾天到幾個月不等。而且,資料科學家在AutoML 2.0平台上使用基于AI的要素工程還可以發現他們從未考慮過的要素。基于AI的要素工程可以自動建構、評估和開通要素,而且可以結合來自基于多列的資料(通常是跨越不同的表和源)。

此外,AutoML 2.0還具有自我發現要素的功能,資料科學家借此功能可以探索所謂的“未知的未知數”,這種“未知的未知數”屬于那些資料科學家由于缺乏時間或缺乏領域專業知識而從未考慮過的要素。

AutoML 2.0:建立更高效、更具包容性的AI / ML程式

是以,AutoML 2.0平台并沒有威脅到資料科學家的生計,反而有助于加速資料科學過程及令資料科學平民化。與此同時, AutoML 2.0也為資料科學家提高生産力提供了必要的加速和自動化手段,令資料科學家能夠擴充工作規模并為業務帶來更大的效益。AutoML 2.0平台具有推動資料科學平民化和加速資料科學流程的雙重優勢,也是其最重要的賣點,這種雙重優勢是現代組織擴充資料科學流程規模的關鍵。

【雲栖号線上課堂】每天都有産品技術專家分享!

課程位址:

https://yqh.aliyun.com/zhibo

立即加入社群,與專家面對面,及時了解課程最新動态!

【雲栖号線上課堂 社群】

https://c.tb.cn/F3.Z8gvnK

原文釋出時間:2020-04-08

本文作者:Forbes

本文來自:“

至頂網

”,了解相關資訊可以關注“

繼續閱讀