資料查重去重,資料比對過程

幫助更多需要自動化解決工作的人們。

步驟：不完整，重複，錯誤，格式不規範資料 -> 資料清洗 -> 正确規範資料 -> 資料去重技術 -> 資料比對。

使用過的一些相關軟體，檢視它們各自的缺陷：

缺陷：1.人工幹預多； 2.資料率(資料品質)不高； 3.過于依賴位址，電話資訊。

維護：資料在不斷使用和變化的過程中，如果不維護，資料品質會不斷下降(資料重複，格式不一緻問題)。-> 資料清理，資料比對，資料查重