達夢DMETL與其它主流ETL對比 整體效能優勢明顯
達夢DMETL與其它主流ETL對比 整體效能優勢明顯
文章轉載自：http://www.prnews.cn/press_release/86144.htm
達夢資料交換平臺（DM Extract、Transform、Loading，縮寫DMETL)是國內知名資料庫廠商達夢資料庫有限公司在上十年資料處理經驗的基礎上，研製開發的具有自主版權的、商品化的資料交換與處理平臺。DMETL創新地將傳統的ETL工具與分散式訊息平臺相結合，實現了對資料抽取、傳輸、整合、以及裝載的一站式支援，是構建資料中心、資料倉庫、資料交換和資料同步等資料整合類應用的理想平臺，同時也可以作為資料加工處理工具由業務人員直接使用。
經過與市場上其他主流ETL工具測試對比之後發現，DMETL從功能效能上已經完全能夠滿足使用者需求，並且在易用性方便更具有獨特的優勢。
1.測試物件
-
SSIS：SQL Server Integration Services。微軟的資料整合工具
-
KETTLE：主流開源ETL工具
-
POERCENTER：業界領先的ETL工具，已被oracle公司收購
-
DMETL：達夢資料交換平臺
2.測試環境
- ETL工具主要執行環境
IP:223.254.112.1
CPU Intel 雙核 E2160 主頻1.8G
記憶體 2G
作業系統 MS server2003
- 資料來源伺服器A主要環境
IP:223.254.102.21
CPU Intel雙核 E5300 主頻2.6G
記憶體 2G
作業系統 MS XP
資料庫：SQLSERVER，ORACLE
- 資料目的伺服器B主要環境
223.254.110.136
CPU Intel雙核 E5400 主頻2.7G
記憶體 4G
作業系統 MS server2003
資料庫：SQLSERVER，ORACLE
3.功能對比
（注：√—支援 ×—不支援）
4.效能對比
四種ETL工具在10W條和1000W條不同資料量下進行效能測試。
資料容量(10W記錄)=945100000/(10241024)=90.1M
資料容量(1000W記錄)=94510000000/(10241024)=9012.2M
- DMETL效能測試記錄
-
SSIS 效能測試記錄
-
KETTLE效能測試記錄
-
INFORMATIC POERCENTER效能測試記錄
-
效能測試資料彙總
(單位：條/秒)
5.結論
效能上INFORMATIC POWERCENTER總體效能最優；DMETL效能比較穩健，優於KETTLE和微軟的SSIS。
功能上DMETL和INFORMATIC POWERCENTER兩者最為豐富，KETTLE次之，SSIS較弱。
易用性方面DMETL是最好的，SSIS次之，KETTLE和INFORMATIC POWERCENTER使用最為複雜。