天天看點

Hive 生産中資料問題踩的坑

生産環境使用的時Sqoop 從Oracle 抽數

經曆過錯行----去掉一些特殊字元解決

大字段錯行----https://blog.csdn.net/u012422198/article/details/84662691

長數字資料重複,特别是金融資料的各種号,長長的一串

當Hive上資料處理時,去重發現Hive比Oracle資料少很多。

因為Hive預設的長數字顯示為科學技術法,把字段類型改為字元型。

繼續閱讀