天天看點

大資料技術帶來的那些常見挑戰

大資料研究領域可謂炙手可熱,然而對資料中的價值加以利用仍然充滿挑戰。今天,我們将對此類挑戰進行詳盡解析。

大資料的生成速度令人錯愕,事實上90%的可用資料是在過去兩年當中才剛剛出現。如今我們需要努力分析大資料,進而發現其中可用以指導決策及戰略性業務轉型的洞察結論。

大資料應用已經開始在改進産品、提升服務水準及客戶服務等領域發揮作用。下面來看一組具體數字:隻有17%的企業尚無任何計劃建立大資料項目,而超過70%的企業已經開始使用大資料——包括将其整合至業務當中,或者作為試水性項目。資料技術正在逐漸成熟,亦有越來越多組織機構準備将其納入資訊管理與分析基礎設施當中。

大資料技術帶來的那些常見挑戰

  然而,以下大資料帶來的“大挑戰”同樣不容忽視。

找到用于交流大資料的語言

各類科學,包括化學乃至數學都憑借着一種特定語言的出現而獲得巨大的推動作用。很明顯,我們必須在大資料找到同樣值得依賴的特定語言,進而像使用代數符号以及合适的程式設計語言那樣更好地對其加以分析。

提升資料可靠性

随着可用資料量的不斷增長,我們必須有效區分“資料”的“信号”以及“有價值資訊”。遺憾的是,截至目前仍有很多企業難以找到最理想的資料以及具體使用方式。這區分“垃圾資料”與保障資料品質已經成為一大關鍵性難題。

資料通路

資料通路與連接配接性同樣是一大障礙。麥肯錫公司調查顯示,目前仍有大量資料點未能接入網絡,是以企業往往還不具備管理整體業務所必需的資料平台。

将更多複雜資料納入進來

如果說大資料的起步階段是在同“簡單”資料作鬥争(例如數字表以及圖形等),那麼如今需要處理的資料正變得愈發複雜:圖檔、視訊以及對實體乃至生活環境的描述等等。是以,我們有必要重新審視并建構大資料工具及架構,用以捕捉、存儲并分析多樣性資料。

更好地整合時間變量

時間次元亦是大資料發展中的一大重要挑戰,即如何分析長期因果關系,而不僅僅是處理實時資料流。最後,這一問題亦會給存儲領域帶來挑戰。我們需要認真選擇以切實承載如此龐大的資料存儲量。

it架構

資料世界的技術環境正在快速發展,是以能夠有價值資料的前提在于同擁有強大創新能力的技術夥伴開展合作,進而建立正确的it架構以高效适應各類變化因素。

安全性

最後但同樣的重要的是安全問題。我們需要利用團隊中每位成員的對應身份進行資料通路管理,同時配合适當的資料加密機制,進而避免各類潛在風險。

大資料技術帶來的規模化趨勢同樣給科學、經濟以及政治等領域帶來深遠影響,甚至給人類的發展軌迹打上了深深的烙印。

大資料正挑戰我們的分析能力以及對世界的認知方式。是以在迎接變化及不斷成長的同時,我們亦應當堅守以人為本的原則,立足精益、與時俱進、秉持誠信并服務于整個世界。

本文轉自d1net(轉載)

繼續閱讀