落地DataOps，必須克服的挑戰有哪些？

導讀：DataOps 是一種最新的高效使用資料和改進資料驅動決策的新工具。企業應該為迎接DataOps帶來的挑戰做好準備，并學習如何克服它們。

近年來，随着資料量的爆炸式增長，高管們面臨着巨大的壓力，要求他們充分利用所有資料。然而，他們的努力經常受阻。根據 NewVantage Partners“2022 年資料和人工智能高管調查”，97% 的受訪企業表示他們正在投資資料計劃，但隻有 47.4% 的企業在資料和分析方面展開競争；隻有 39.7% 的人将資料作為企業業務資産進行管理，隻有 26.5% 的人表示擁有資料驅動的企業。

為了應對如此糟糕的表現，負責人正在使用 DataOps中的原則和實踐來幫助企業高效地使用資料做出決策、提升企業的洞察力并推動自動化和智能計劃。

根據 ESG于2022年4月釋出的“DataOps狀況”報告顯示，在 403名技術和業務資料專業人士中，90% 的受訪者表示計劃在來年對 DataOps進行适度或廣泛的投資。

但是，企業引入DataOps就萬事大吉了，在這個過程中可能會遭遇哪些挑戰呢？

企業的資料負責人列舉了圍繞確定合規性、遵守治理标準和及時通路新資料等方面面臨的挑戰，作為采用 DataOps 的主要驅動力。然而，資料負責人、研究人員和執行顧問表示，企業在成功采用和完善DataOps的過程中也面臨着多重挑戰。

具體來說，在企業内實施、使用和擴充DataOps面臨的主要挑戰包括以下五條：

## 1. 不清楚 DataOps 的含義

DataOps 的概念已經存在了近十年，但是就像它的表親 DevOps 一樣，沒有單一的公式或包羅萬象的指南來準确說明它的含義。IBM 負責資料和人工智能的産品管理副總裁 Jay Limburn 說，事實上，技術供應商通常對一個新概念都要求有自己獨特的看法。

是以，學習制造商 Skillsoft 技術與開發産品副總裁 Mike Hendrickson 表示，企業資料負責人必須确定正在出現的最佳實踐和開始标準化的方法，以建立适合其企業的 DataOps 計劃管理系統軟體和内容。

另外，企業的資料負責人也應該是靈活的，是以他們準備好随着學科的成熟和新的支援技術進入市場而适應它們。

DataOps 仍處于成熟周期的早期階段。從工具和流程的角度來看，預計會有很多變化和進步。

附：重申一下什麼是DataOps？

DataOps即資料操作的縮寫，是一系列實踐、原則、技術和人員職位的集合，旨在建立有效的資料處理。

“DataOps 的核心和靈魂是編排。通過管道移動、處理和豐富資料需要一個複雜的任務工作流程，并具有許多依賴項，”專業服務企業Genpact的資料咨詢和架構負責人Neel Shapur說。

DataOps借鑒了軟體開發領域的概念，例如DevOps的疊代和協作方法，旨在通過打破資料孤島、增加自動化和執行治理規則，幫助企業内的資料負責人在正确的時間安全地将正确的資料傳遞給正确的使用者。

“DataOps 提供了以快速可靠的方式查找、信任和了解資料的能力，”咨詢企業和 IT服務管理企業 Kalypso的資料管理實踐負責人 JP Romero 說。

## 2. 無法找到從哪裡開始，如何開始

根據研究機構IDC的資料，到2020 年全世界建立或複制了64.2澤位元組的資料。預計到 2025 年，全球資料建立和複制的年複合增長率将達到 23%。

盡管沒有任何企業能夠掌握如此多的數量，但大多數企業仍然無法很好地管理自己的資料。其中，最典型的困惑就是不知道從哪裡開始應用DataOps 原則以及如何使它們逐漸成熟起來。

IT 服務管理企業 TEKsystems 的實踐咨詢總監 Ramesh Vishwanathan 說，“定義DataOps成功與否的關鍵問題是企業應該從哪裡開始，如何開始。這對所有企業都是一樣的。

企業首先應該确定的是，在哪些領域進行試點和實踐 DataOps，然後再将其擴充到企業内的所有資料和資料使用。換句話說，采取最小可行的産品（MVP）方法并從那裡發展和衍生。

正如Kalypso資料科學技術經理 Hector Rueda所說，将DataOps專注于解決從基礎元素到價值傳遞的一組有限資料用例的MVP。一旦 DataOps的最小可行産品證明了它的價值，就可以通過擴大範圍來橫向擴充。

當然，企業還應該找到衡量其DataOps計劃有效性的方法。“這将幫助企業知道自己是否朝着正确的方向前進”Vishwanathan 說。

## 3.缺乏資料基礎

DataOps 将人員、流程和技術結合在一起，以協調企業内高效且安全的資料流。為此，企業必須在所有領域都具備适當的關鍵元件。

更具體地說，尋求利用DataOps的企業應了解以下内容：

擁有哪些資料資産以及該資料的品質；

該資料目前如何流經企業；

資料孤島是否繼續存在以及如何消除它們；

企業希望如何使用資料；

存在哪些資料治理；

如何支援所有這些元素的技術元件和人才。

DataOps 需要技術投資、企業重組和變革管理相結合。是以，必定會存在技術、營運以及人力和文化障礙，然而，許多企業缺乏部分或全部這些元素。他們還缺乏資料文化和資料政策，而缺乏這些基礎知識可能會阻礙在企業内成功實施 DataOps的嘗試。

為了解決這個問題，資料負責人應該專注于建構資料程式的基礎元素，這樣他們就有了采用 DataOps 所需的東西。

Protiviti 技術咨詢實踐進階總監 Dan Sutherland 表示，企業需要将資料和資料事實部署放在首位和中心位置，而不是将其視為軟體開發周期中的“事後考慮”。企業需要更加關注資料生命周期的所有元素，包括資料管道、存儲、資料模組化和消費模式的設計和開發。

此外，企業的資料負責人應該優先考慮以下事項：

用提供資料管道完整可見性的現代技術棧替換遺留資料技術棧；

投資于整個企業的資料素養教育訓練；

提高資料團隊的技能，是以他們準備好在這個新環境中工作。

建立一個可靠的資料戰略，強調縮小目前狀态與企業需要使用資料來實作關鍵目标之間的差距的好處是關鍵。

“确定可以支援該計劃的進階管理人員，”JP Romero說。“接觸那些對引入 DataOps 有積極響應的人，投資于可以培養健康資料文化的資料素養計劃。”

4. 缺乏上司認同

企業遇到的另一個挑戰是如何說服上司層支援 DataOps 工作。企業圍繞資料的文化越成熟就越容易實作。

“對于每天使用資料的人來說，說出‘我們需要這個’這句話很容易，但上司層有時并不總是能看到需要。是以，得讓上司層看懂采用 DataOps 的意義，”Kalypso資料管理實踐主管JP Romero說。

這一觀點得到大多數人的贊同。企業中沒有成熟資料文化或從資料驅動的洞察力中獲益的高管，通常企業都不願支援對 DataOps 的投資。

“企業正在慢慢意識到必須将資料視為戰略資産，”JP Romero說。“那些将他們的資料工作與其業務戰略需求聯系起來的人，會發現更容易從他們的資料中釋放價值并為他們的資料項目提供資金。”

麥聰軟體積極擁抱DataOps新概念，為客戶建構輕量級的資料中台，提升企業資料統一管理和服務能力，支援中繼資料管理、資料開發、資料治理、資料市場、資料服務化等功能。僅僅兩年多的時間裡，麥聰軟體已經赢得了400多家企業客戶，其中30多家為國際500強，行業覆寫汽車、重型裝備、電力、軍工、政府等。

5. 管理變革的問題