天天看點

【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進

本講義出自<b>ruben pulido和behar veliqi</b>在spark summit eu 2016上的演講,主要介紹了ibm公司的沃森媒體分析系統,介紹了該系統之前針對于單租戶的架構,所需面對的多租戶挑戰和面對該挑戰産生出的新系統架構。

在講義的最後ruben pulido和behar veliqi總結了從沃森媒體分析系統架構演變過程中所擷取的經驗,新的發展途徑可能會基于spark、kafka和zookeeper,并将具有健壯性的特點,能夠滿足延遲和吞吐量的需求,并且能夠支援更多的分析。

【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進
【Spark Summit EU 2016】沃森媒體分析系統:從單租戶Hadoop到3000租戶Spark的架構演進

繼續閱讀