你不得不知道的Iceberg的配置Configuration

​​全網最全大資料面試提升手冊！​​

Configuration

1.table properties

1.1 Read properties

因為Iceberg在HDFS上的data檔案，通常都是一個個的小檔案，是以讀取的時候會先進行combine，然後再傳回資料。下面是進行combine的一些配置

1.2 Write properties

1.3 Table behavior properties

1.4 Reserved table properties

隻在建立或更新表的時候使用，并不會作為表metadata儲存下來

1.5 Compatibility flags

2.Catalog properties

2.1 Lock catalog properties

關于catalog lock相關的配置，用來控制commit期間的lock行為

3.Hadoop configuration

用于Hive Metastore connector