2022年9月初,中國國際服務貿易交易會(簡稱“服貿會”)上,AI資料服務領域頭部企業雲測資料首次釋出了面向AI工程化的新一代資料解決方案,成為AI資料服務市場步入成熟期的标志。
這是雲測資料第三次參加服貿會,有趣的是,我們可以通過市場引領者雲測資料三年來在會上釋出的成果進階,以小窺大,探尋AI資料服務市場的發展脈絡,進而解鎖市場新趨勢。
三年三變化,引領AI資料服務市場新變革
雲測資料參加服貿會的三次重大成果釋出,可以說是雲測資料不斷深入市場動态趨勢,積累技術經驗後對外送出的三次行動“答卷”。莊子《齊物論》中有“論而不議,議而不辯”一說,代表不同階段做該做的事,将它放到AI資料服務市場也許同樣适用。
起初,AI資料服務經曆了從小作坊到規模化生産,從實驗室到實際場景的變革,由于企業需要更多的高品質資料作為“底層”燃料進行訓練和部署機器學習模型,高品質資料在一定程度上甚至決定了項目的成敗。雲測資料在早期就已關注到AI資料服務的需求缺口和潛在的應用市場,立足高品質、場景化的AI訓練資料服務,對AI資料的品質、效率、場景化方面提出高要求,緻力于推動資料标椎品質的進一步發展。
2020年的服貿會上,雲測資料首次對外宣布其AI資料項目傳遞精準度最高達到99.99%,是當時資料标注領域可達到的最高服務标準。與此同時,雲測資料還釋出了智慧城市、智能家居、智能駕駛、智慧金融等不同行業的AI訓練資料服務方案。
接下來,當企業擷取了高品質資料,如何管理資料資産,針對其特定場景更好地發掘資料價值成為AI産業化的難題。比如在訓練過程中,規模化的資料資産往往出現無法充分利用、管理方式不完備等問題。
于是雲測資料從助力企業進行資料管理,提升資料訓練的比對度角度出發,專注AI訓練資料全生命周期程序,形成了一套完整的資料服務實踐方法論,并在2021年的服貿會上正式釋出了“AI資料集管理系統”,支援資料的上傳、管理、存儲、分享還有資料類型标簽化管理,标注結果存儲和可視化呈現,幫助企業可持續管理、挖掘AI資料價值,助力企業快速開展模型訓練,完成對應的資料流轉閉環。
2022年,從AI工程化資料處理三大趨勢看新一代資料解決方案
資料集管理既成體系,随着AI技術與産業的深度融合,需要進一步關注産品的疊代程序,加速AI産業化。行業的AI産品疊代過程通常是算法研發流程,然後嵌入到軟體工程裡完成對應的聯調測試、灰階釋出再釋出到實際生産環境中去使用,通過在生産環境中持續回流的線上資料和使用者回報進行産品疊代,與此同時再用相應資料進行算法模型的持續調優。
其中資料處理伴随研發疊代,并基于對資料需求不同分為三個階段——算法預研期,針對何種具體場景解決方案進行相關算法探索,這一階段下需要開源資料集和商業成品資料集幫助企業快速完成産品驗證。
第二階段是在算法研發期,企業明确了處理的場景和對傳感器算力的需求,需要基于定制化場景和對應傳感器進行相關資料采集、清洗和标注服務。
第三階段則是算法持續優化期。企業擁有了相對完整的資料模型,這時需要的資料偏向支援持續內建和疊代算法的資料即MLOps(人工智能研發營運一體化)所需要的資料,引入類似軟體DevOps的概念。
而第三階段的資料需求變化意味着傳統軟體工程的瀑布式開發逐漸轉化為資料的持續流轉,通過體系、流程推動算法與應用的有效開發和疊代,實作AI的靈活開發,即實作AI工程化。
賈宇航還指出了AI工程化資料處理的三大特征——API協同中台化,支援與不同企業數字底座無縫對接;專業的人工處理流程,随着AI融入更多行業應用,其處理内容也變得越來越複雜,需要專業人員進行高時效、高品質的人工處理流程;還有就是資料安全性。
基于這三大特征,雲測資料釋出了面向AI工程化的新一代資料解決方案,從平台工具、管理體系、資料安全三個次元延展産品服務。
平台工具提供企業資料處理的各種工具和模闆,并通過高度內建API實作資料底座無縫對接,幫助企業持續發掘資料價值。項目管理方面,針對人工資料處理流程中關于招聘、教育訓練、績效考核及對應項目管理、安全、企業責任、安全體系、相關行業知識背景教育訓練,雲測資料總結出了一套完善的實踐方法路,包括一套完整的項目管理看闆、績效看闆持續追蹤對應的項目進度、任務進度和資料品質。
資料安全則是通過硬體配置、網絡安全、實體安全和人員安全管理實作,完成了一套基于網絡VPN專線連接配接到雲測自建資料标注基地的端到端資料标注安全傳遞方法,幫助企業完成資料合規、資料安全的相關資料操作流程。
雲測資料還針對隐私安全設定了一系列嚴格措施,力圖做到步步保護、層層把關,完善布局AI資料處理對實效性、準确率和安全性的進一步要求。同時雲測資料還是滿足ISO27001和ISO27701标準的人工智能資料服務廠商,此外,雲測資料還先後獲得ISO9001、ISO20000、CMMI3等相關認證。
總結
每一家AI科技企業從初創到發展成熟,面對市場變化可能會經曆以上的産品研發階段。雲測資料将企業不同階段面臨的挑戰轉化為産品輸出,提供了一套全方位覆寫的資料解決方案,未來随着AI工程化快速落地,将助力越來越多的企業抓住市場機遇實作智能化疊代。