天天看點

kettle增量抽取資料

這一章主要講的是資料的增量抽取,以及不同資料庫之間的互相抽取.

kettle增量抽取資料

這個就是實作資料同步最基本的狀态

表輸入就是不管你從哪個資料庫抽取,隻要是資料由表輸入抽入到kettle的工作空間其他的都不用害怕了.

不同的是後面的字段選擇與插入更新.

先來說說字段選擇吧,字段選擇就是為了避免不同資料之間的字段類型不一緻導緻資料抽取失敗的.

kettle增量抽取資料

點選擷取字段--->中繼資料

kettle增量抽取資料

當到了中繼資料這個界面的時候就需要注意了,

擷取到目前全部的字段後,有一個類型 這個選項

這裡就是用來轉換類型的,我當時項目中就是sqlserver的資料庫的資料需要定時增量抽取到oracle資料庫中,當時的時間類型不比對.是以在這個地方給修改了

再來看看插入/更新

kettle增量抽取資料

這裡主要就是做 資料的同步了,上面的選擇 ID=ID , 是 為了确認主鍵,友善來确定是插入還是更新.

更新字段下面的主要的就是對于資料的抽取了,确認要抽取 哪些資料,一般的我們是全部選擇的,但是要注意, 主鍵一定 不可以選擇更新.

繼續閱讀