軟體初創廠商AtScale公司去年年底釋出了其年度大資料成熟度調查報告(以前稱為“Hadoop成熟度調查”)，顯示商業智能大資料是首要任務，并正處于雲計算的快速發展階段，資料治理越來越受到關注。
該報告及其結果在最近ODPi使用者顧問委員會(UAB)的會議上成為了一個主要的讨論話題，ODPi使用者顧問委員會(UAB)是由來自汽車，技術和娛樂行業等使用Apache Hadoop和其他大資料技術的大型企業的代表組成。ODPi UAB十分認同報告中所提出的日益增長的資料治理問題。自助服務通路大資料和這種自助服務的治理确實觸動了人們的心弦。行業專家讨論了讓人們幫助推動自助服務通路政策的概念，這反映出越來越多的資料科學家是業務部門的一部分，而不是IT部門。該小組一緻認為，僅持有治理和安全控制的IT目前的狀态是不具成本效益的，而自治可能是一種幫助規模使用的政策。
關于雲計算中大資料的主題，ODPi UAB在混合雲模型中看到了他們的未來。雖然他們認為人們将在未來三年内看到雲計算更多的應用，但他們将會在現有投資的基礎上開展，而不是完全取代現有的投資。此外，ODPi UAB認為現有的中央處理與本地處理節點相輔相成，以幫助擴大需求，更好地遵守法規。目前，UAB成員看到全面擴充到雲計算成本過高，但随着物聯網資料本身運作的用例開始增長，雲計算将變得更加有趣。
在ODPiUAB闡述之後，然後回到企業自己的使用模式。在本文中将介紹這些使用模式，ODPiUAB提供的見解以及雲計算在Hadoop和大資料中的作用的體驗。預生産和生産Hadoop之間有明顯的差別。
表1概述了随着企業使用情況的變化，營運Hadoop的核心差異。
AtScale公司的報告指出，73%的受訪者在使用生産，與2015年同期相比增長了8%。調研機構Gartner公司的業務調查報告為15%以上。由于在數量上有如此大的差異，很明顯在行業中部署階段的基線定義并不明确。UAB和ODPi成員在這裡已經提出了這個詳細的部署，認為它們與市場準确比對。
企業Hadoop部署連續性
繪制出适合于連續性的位置，可以更客觀地看待生産使用情況。
分析大資料的雲計算
雖然72%的受訪者表示計劃在雲端實施大資料，但更深入的分析可能會顯示出一些重要的細微差别。UAB成員希捷技術公司企業分析總監Nicholas Berg表示：“要進行深入研究，人們還會問：企業的應用程式和IT在本地部署資料中心和雲計算中的比例是多少?企業的大資料在本地部署資料中心和雲計算中的比例是多少?最後，企業在雲中的實際生産有多少?我敢打賭這個百分比要小得多。”
另一個ODPiUAB成員評論說：“我認為很多公司隻是在雲中進行概念驗證(POC)測試，但仍然在内部資料中心進行生産部署。”UAB認為，這裡的主要驅動力是人們認識到IT需要最大限度地降低風險和成本。
這引出了雲計算中最大的沒有解決的問題：成本。多年來，雲計算供應商一直在推動“降低成本和複雜性-走向雲”的叙述，“避免伺服器采購的資本支出-隻是利用雲”等等。然而，ODPiUAB明确的一個因素是，當企業擴大規模時，雲計算将變得更昂貴。
ODPi UAB一位成員談到自己的經驗，并表示，“最近，我們已經對數字不起作用做了一些成本分析，而不是當人們談論入口或出口資料量時重新考慮。這就是雲供應商的成本真正開始飛漲的地方，是以，當企業完全轉向雲端時數字不起作用。是以我們仍然在考慮實驗的目的，但是沒有看到人們如何完全移動到雲端，甚至考慮把大量的系統移到那裡。我發現雲端工作适用于小規模的子集，如果企業願意，這可能是一種聚合，但是一旦試圖進行長期的存儲，它将使成本增加的非常快速。”
這是否意味着ODPi UAB成員感覺到Hadoop和雲中的大資料是注定失敗的，除非成本下降?當然不是。對他們來說，問題在于雲計算的叙述，而在場景上，不斷被認為是““非此即彼”的讨論，而不是“兩者兼用”的讨論。
雲計算：物聯網資料的用例
ODPi UAB的一位成員分享了一個物聯網資料的使用情況，“當企業正在考慮解決某些問題時，将不同區域的資料轉移到雲計算中處理，雲計算開始變得更有意義。當人們開始談論物聯網時尤其如此，企業難道真的想在自己的資料中心運作所有的物聯網資料嗎?人們檢視一下描述的用例，就會發現所有的資料在自己的資料中心将面臨一些問題，無論是在數量上還是在法律上。例如德國等一些國家，除非要在這些國家建立資料中心。”而其他專家也贊同這種看法。他說：”我們認為雲平台的存在也是一個挑戰，特别是作為一家在全球各地設有辦事處的全球性公司，如果不想在每個國家和地我建立資料中心，那麼采用雲計算是一個很好的選擇。”
從上述所有ODPi UAB回報意見來看，很明顯，雲計算将繼續成為Hadoop和大資料的一個組成部分，但與組織的成本和效率需求保持一緻。換句話說，就像其他技術轉向雲端一樣，最現實的答案往往在某種形式的混合中。Nicholas Berg說，“我想随着時間的推移，Hadoop将在雲中的應用更加廣泛，希望其成本結構變得更加合理，事情就會開始轉變。我認為這是會發生的，隻是時間問題。我們可能總是有某種混合部署，随着經濟和用例更好地随着時間的推移，雲計算的使用率可能會更高。”
下一件大事
人們生活在行業中，坦率地說是一個世界中-而尋求下一件大事情，将會激發行業人士成長和發展的願望。行業先鋒經常拒絕接受現狀，認識到完美從未實作，并總是不斷追求。正如Vince Lombardi曾經說過，“完美是無法實作的，但如果我們追求完美，那麼我們可以實作卓越。”
話雖如此，有一件很少有成果的事情就是強化創新。順應技術潮流，應對現代生活的挑戰和機遇，如果你聽過專業運動員的采訪，他們總是會說下一步要達到什麼目标，技術也是如此，但規模更大，人們對此并不總是很清楚。
原文釋出時間為：2017-10-26
本文作者：佚名
本文來自雲栖社群合作夥伴“51CTO”，了解相關資訊可以關注。