天天看點

概述 | 學習筆記

開發者學堂課程【SaaS  模式雲資料倉庫系列課程 —— 2021數倉必修課:概述】學習筆記,與課程緊密聯系,讓使用者快速學習知識。

課程位址:

https://developer.aliyun.com/learning/course/55/detail/1192

概述

内容簡介:

一.日志分析

二.使用者畫像

三.資料化營運

了解 MaxCompute 産品使用及架構

它是安全可靠,高效能,低成本的大資料計算服務能夠快速解決使用者海量資料計算問題;降低企業大資料計算平台總體擁有成本;提升大資料應用開發效率;保障資料的雲上安全。

(Log)+MaxCompute/DataWorks+Quick BI

Fluentd/Flume/Logstash+DataHub+MaxCompute/DataWorks+Quick BI

MaxCompute/DataWorks+MaxCompute+PAI+Quick BI

如:通過 Quick BI 進行分類,分級,偏好,業務經營狀況分析;

MaxCompute :一種全新的大資料計算服務。

它能提供快速,完全托管的PB級資料倉庫解決方案,不用花大錢建資料中心,就能分析處理高達 PB 級的海量資料。

MaxCompute 獨創地底層存儲技術,采用列壓縮存儲格式,超強5倍的壓縮能力,大大提高了資料壓縮比,提升了磁盤 IO 性能,節省了使用者成本。

此外 MaxCompute 計算能力表現也更加強勁。

MaxCompute 是一種全新分布式資料存儲計算引擎,所有功能以 ALL in ONE BOX方式提供服務,不僅可以在上面做基本的資料導入,導出, SQL 查詢, ETL 處理,還可以使用機器學習算法,來模組化做進階資料分析,豐富的使用者接口使使用者輕松與 ESC,RDS ,分析型資料庫,以及其他BI報表等工具配合使用,完成 BI 分析。

MaxCompute 不僅在計算性能上突出,服務上也更加專業,專業的服務就是相容開放。

MaxCompute 集多種計算模型于一身,支援 SQL,MapReduce,Graph 以及 MPI 疊代類算法,并與開源的大資料處理軟體變成接口高度相容。

使用者不再煩心修改程式,所有應用都可輕松地從 Hadoop 遷移到 MaxCompute上。

MaxCompute 開箱即用,擁有內建化操作頁面,不必擔心機群搭建,配置和運維工作。僅需簡單點選滑鼠,幾步操作,就可上傳資料,分析資料并得到分析結果。

MaxCompute 安全可靠,它是首家通過國内 CSA—STAR 和 ISO27001 兩項國際雲安全認證的産品。

各個環節都采用了國際最先進的資料安全管理标準,完整的認證和鑒權解決方案。真正做到自主可靠,體驗金融級可靠性,多租戶機制,保證使用者資料隔離。同時采用三重備份,讀寫請求鑒權,應用沙箱,系統沙箱等多層次資料存儲,和通路安全機制保障使用者資料安全。

靈活的資料授權,可以讓組織中多名資料分析師協同工作,并且每人僅能通路自己權限許可内的資料,在保障資料安全的前提下,最大化工作效率。

價格方面:MaxCompute 不用為了 Hadoop 人才難覓而發愁,先省下一個運維團隊,MaxCompute 按量付費成本更低,它憑借更高效的計算及存儲能力,能夠降低企業20%~30%的采購成本,性能卻提升2.5倍。