天天看點

【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame

本講義出自<b>oscar castaneda</b>在spark summit eu上的演講,主要介紹了将在excel電子表格制作的spark原型轉化為spark程式的sparksheet,其可以看做是excel編譯器,可以建構從excel轉化為spark程式的直接通路,本講義還介紹了sparksheet的架構體系以及整個的編譯過程。

spark程式的原型可以使用excel對其進實作,但是将excel形式手動轉化成為spark程式卻非常繁瑣并且容易出錯。建構excel形式與spark程式之間轉化的直接路徑可以利用dataframe api實作excel編譯器。

【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame
【Spark Summit EU 2016】SparkSheet:将電子表格轉化進Spark DataFrame

繼續閱讀