天天看點

Spark綜合學習筆記(四)流式計算應用場景和處理模式

流式計算應用場景

介紹

Spark綜合學習筆記(四)流式計算應用場景和處理模式

1.雙十一大屏

Spark綜合學習筆記(四)流式計算應用場景和處理模式

2.商品推薦

Spark綜合學習筆記(四)流式計算應用場景和處理模式

3.工業大資料

4.叢集監控

針對各種資料庫,包括MySQL,HBase等進行監控

針對應用進行監控,例如Tomcat,Nginx,Node.js

針對硬體的一些名額進行監控,例如CPU,記憶體,磁盤等

Spark綜合學習筆記(四)流式計算應用場景和處理模式

5.火車站,汽車站的班次資訊牌

6.地震預警

7.支付寶異地付款

Streaming計算模式

模式一、原生流處理

Spark綜合學習筆記(四)流式計算應用場景和處理模式

模式二、微批處理(Batch)

Spark綜合學習筆記(四)流式計算應用場景和處理模式

就像是動畫書一樣,連起來就是動畫;同樣地,微批處理連起來就相當于實時流處理