正在快速興起的雲資料架構

雲資料架構的日益流行表明了一個主題：在未來幾年，越來越多的企業将把他們的資料中心業務完全遷移到雲平台上，因為内部部署資料中心設施具有一些固有的優勢。數字時代的業務已經成為向雲遷移的代名詞。

當企業希望以可承受的成本獲得無限的資料存儲和卓越的計算能力時，他們會轉向用于企業資料管理的雲資料架構。

想要更好地控制資料的企業可以建立自定義的内部私有雲服務。私有雲和公共雲都是複雜的分布式系統，它們更适合使用将處理和資料分解為不同元件的應用程式架構。

雲資料架構的可負擔資料通路

雲資料平台提供了對大量資料管理資源(如伺服器、存儲、應用程式和服務)的通路，這些資源可以快速部署和使用，而無需服務提供商的任何互動。

雲計算資料架構包含代表企業或組織在雲計算環境中進行資料采集、存儲、分析和管理的規則、政策和模型。此外，現代雲架構将計算層與實際硬體分離，進而使最終使用者可以通過前端與雲計算環境進行互動。

雲計算的存儲元件提供在雲端存儲和管理資料的能力。第三方雲存儲提供商，例如AWS公司的S3存儲、Microsoft Azure和谷歌雲存儲能夠管理和維護資料，并提供遠端備份服務。

虛拟化軟體将雲中的資料存儲和計算層與硬體層分離，使用者通過圖形使用者界面(GUI)與雲計算基礎設施互動。虛拟化通過在雲中分離硬體和軟體層，使得雲計算提供商可以輕松有效地管理所有類型的軟體，無論是應用程式軟體還是存儲系統。

雲計算環境還通過自動化響應生成有效地處理資料安全事件。當使用雲計算服務并遵循推薦的實踐來處理和管理資料時，可以提高資料安全性。

雲資料架構的優勢和挑戰

雲資料架構的最大優勢在于，它為所有複雜的大資料項目提供了無限的資料存儲和強大的計算能力。AWS、微軟Azure或谷歌雲平台等知名雲提供商為各種形态和規模的企業提供了變革性的大資料管理功能。

根據大多數已經投資于雲資料架構的全球企業提供的資訊，在過渡過程中，他們所獲得的優勢在某種程度上被技術挑戰沖淡了。在推出雲資料架構環境期間，資料架構師通常會面臨挑戰。其中一些技術挑戰包括資料重力、資料安全問題、現有投資、資料品質和遵從性需求以及不完整的資料遷移。例如：

• 在資料攝取、轉換和分析階段，資料引力問題在多雲環境中浮出水面。獨立的資料存儲、事件驅動的體系結構、邊緣計算和批處理通常可以緩解這些挑戰。
• 通過使用強大的資料安全和資料治理政策，雲資料架構可以應對圍繞資料控制、分類和生命周期的資料安全挑戰。
• 現有投資總是會與新的雲資料架構計劃競争。減輕這一挑戰的最佳方法是用一個實際的業務案例來驗證雲資料架構的有用性，該業務案例概述了詳細的成本效益分析。
• 資料品質和監管要求可能會對雲資料環境構成嚴重威脅，但有足夠的用例證明雲資料架構已經提供了足夠的責任保護。
• 不完整的資料遷移是一個挑戰，許多企業由于這樣或那樣的原因有未完成的資料遷移項目。

建構成功雲資料架構的秘密

關于建構雲資料架構的技術讨論超出了本文的範圍，但在進行規劃時，資料架構師應該牢記以下考慮事項：

• 一個可靠的提案或業務案例可以作為雲架構計劃的起點。如果有一個特定的用例，就很容易制定一個有效的體系結構計劃。有了手頭的業務用例，企業團隊可以将用例的需求與雲資料架構的選擇元件相比對。通過實際業務應用推動的計劃，更有可能獲得企業高層的準許。
• 由于雲架構範式是廣泛而開放式的，衆多的排列、無窮無盡的可用技術選項以及廣泛的硬體和軟體平台選擇可能令人生畏。在進入一個不确定且代價高昂的環境(可能無法傳遞預期結果)之前，先對一些場景進行試點測試當然更實際，也更劃算。
• 非結構化資料管理一直是企業面臨的嚴峻挑戰。雲資料架構環境為試驗非結構化資料提供了可能性。在傳統資料庫環境中無法做到的事情，現在都可以做到。
• 重點應該放在簡化資料工作流上，因為它們比資料管理技術和工具更重要。從長遠來看，這種方法将有利于資料分析應用程式。
• 開始的成本與性能名額最終可以節省大量營運成本，這在雲計算中非常容易增加。資料管理應該是一種分層的實踐，這樣昂貴的資源就隻保留給少數幾個程序。

雲服務傳遞選項：它們如何影響資料

在平台即服務(PaaS)模型中，雲提供商提供作業系統、中間件和運作時，以及硬體層(伺服器、網絡硬體、虛拟化功能、資料和軟體層)。

在基礎設施即服務(IaaS)模型中，使用者角色包括管理應用程式、中間件和作業系統，而雲服務提供商負責硬體，包括伺服器、硬碟、資料存儲等。

軟體即服務(SaaS)服務模式允許雲計算提供商在雲平台上安裝和維護軟體，而使用者則通過網際網路從他們的桌面通路軟體。

公共雲提供商使用“多租戶”模式，這基本上意味着将相同的伺服器空間用于存儲和計算服務租給多個客戶，以降低每個客戶的成本。在此場景中，使用相同的伺服器向多個客戶傳遞服務。

在私有雲部署中，企業通常使用專用伺服器來滿足資料存儲和計算需求。他們通常有更高的交易量，并将受益于專用的私有雲部署。它們能夠內建應用程式，無論應用程式是在雲中還是在内部部署設施，并且它們能夠在它們之間不受幹擾地進行資料流動。客戶可以非常靈活地通路雲托管的資料，然後将資料與部署在同一環境中的其他資料或應用程式內建。

責任編輯：華軒來源： e-works

航天雲網，國家工業網際網路平台