storm模式
log -> flume -> kafka -> storm -> spout -> bolt(redis) -> bolt(mysql) -> bolt(hbase)
spark streaming模式
log -> flume -> kafka -> spark streaming-> map -> reduce -> redis(mysql)
資料源
clicks(點選流),sensor(傳感器),log(日志)
ELK模式
log -> ELK架構
storm模式
log -> flume -> kafka -> storm -> spout -> bolt(redis) -> bolt(mysql) -> bolt(hbase)
spark streaming模式
log -> flume -> kafka -> spark streaming-> map -> reduce -> redis(mysql)
資料源
clicks(點選流),sensor(傳感器),log(日志)
ELK模式
log -> ELK架構