如何選擇正確的數據集成工具?
在選擇數據集成工具前,先要了解自身企業現有的應用系統的業務邏輯,要知道都有哪些系統、哪些數據、哪些要集成。大多數人認為數據集成就是將各系統數據整合到一處,這里很容易忽略一點,就是數據的準確性、唯一性和權威性。想要數據集成就先要進行數據治理,如果數據源頭都不準確,是臟數據,那將數據集成起來也就大打折扣了。
所以說對于選擇數據集成工具時,最好選用可以先治理數據后集成數據的工具,保證數據集成贏在起跑線。而現在大多數數據集成工具,都停留在只集不治的狀態,所以需要我們企業從實際情況出發,合理選擇數據集成工具。通常來說應用系統之間集成選用ESB、流程數據集成選BPM、數倉項目建設選擇ETL工具如Kettle,主數據治理項目選擇MDM產品、跨網絡數據傳輸選擇DXP數據交換平臺、數據分析項目選擇DAP數據分析平臺、大數據項目數據集成選擇Sqoop、FlumeNG等。
在綜合數據治理分析項目過程中要強調數據質量、多端展現(手機、PC、大屏)、數據挖掘預測,數通暢聯推薦MDM+DBP+DAP三款產品組合,MDM實現基礎數據的治理,保障數據源頭的質量;DBP數據總線平臺實現數據數據分發同步、數據交換傳輸、大數據的ETL處理;DAP數據分析平臺實現元數據管理、數據調度監控、數據分析可視化,預制各種算法庫、以數據超市方式提供各種OpenAPI供業務系統使用,三個產品組合相互協作實現數據跟業務的深度融合,真正實現數據的價值。