天天看點

《Spark大資料處理:技術、應用與性能優化》——1.6 本章小結

本節書摘來自華章計算機《spark大資料處理:技術、應用與性能優化》一書中的第1章,第1.6節,作者:高彥傑 更多章節内容可以通路雲栖社群“華章計算機”公衆号檢視。

本章首先介紹了spark分布式計算平台和bdas。bdas的核心架構spark為使用者提供了系統底層細節透明、程式設計接口簡潔的分布式計算平台。spark具有計算速度快、實時性高、容錯性好等突出特點。基于spark的應用已經逐漸落地,尤其是在網際網路領域,如淘寶、騰訊、網易等公司的發展已經成熟。同時電信、銀行等傳統行也開始逐漸試水spark并取得了較好效果。本章也對spark的基本情況、架構、運作邏輯等進行了介紹。最後介紹了spark在工業界的應用,讀者可以看到spark的蓬勃發展以及在大資料分析平台中所處的位置及重要性。

讀者通過本章可以初步認識和了解spark,更為底層的細節将在後續章節詳細闡述。

相信讀者已經想搭建自己的spark叢集環境一探究竟了,接下來将介紹spark的安裝與配置。

繼續閱讀