數(shù)據(jù)提取、轉(zhuǎn)換與加載(ETL，Extract-Transform-Load)工具能夠使組織內(nèi)的不同數(shù)據(jù)更易于訪問、更有意義、也更能被其他數(shù)據(jù)系統(tǒng)所使用。通常情況下，面對(duì)由此產(chǎn)生的自寫代碼、自建系統(tǒng)的相關(guān)成本和復(fù)雜性時(shí)，企業(yè)會(huì)直接去選擇購置ETL工具。
Information Builders的iWay集成套件具有將應(yīng)用程序與數(shù)據(jù)相集成的功能?？蛻艨梢允褂盟鼈儊砉芾斫Y(jié)構(gòu)化、與非結(jié)構(gòu)化的信息。該套件包括有iWay數(shù)據(jù)遷移器、iWay服務(wù)管理器和iWay通用適配器框架。
Pitney Bowes能夠提供大量針對(duì)數(shù)據(jù)集成的工具和解決方案。其Sagent Data Flow是一款靈活的整合引擎，它能夠采集不同來源的數(shù)據(jù)，并提供一套全面的數(shù)據(jù)轉(zhuǎn)換工具，以增強(qiáng)其核心的業(yè)務(wù)價(jià)值。
以前被稱為Business Objects Data Integrator的SAP業(yè)務(wù)對(duì)象數(shù)據(jù)服務(wù)(BODS)是一款可被用于數(shù)據(jù)集成、質(zhì)量控制、分析和處理的ETL工具。它能夠幫助您將可信的數(shù)據(jù)整合并轉(zhuǎn)換到各個(gè)數(shù)據(jù)倉庫的系統(tǒng)之中， 以產(chǎn)生分析報(bào)告。
Sun的ETL與數(shù)據(jù)集成工具是大型Java復(fù)合應(yīng)用程序平臺(tái)套件(CAPS)中的一部分。它是Oracle公司的一款標(biāo)準(zhǔn)化企業(yè)服務(wù)總體套件(Enterprise Service Bus software suite)。Java CAPS的組件能夠整合現(xiàn)有應(yīng)用程序，并能在面向服務(wù)的架構(gòu)環(huán)境中提供新的業(yè)務(wù)服務(wù)。
Sybase ETL Development是一款用于創(chuàng)建和設(shè)計(jì)數(shù)據(jù)轉(zhuǎn)換項(xiàng)目與作業(yè)的GUI工具。該工具提供了一個(gè)完整的模擬與調(diào)試環(huán)境，旨在加速ETL轉(zhuǎn)換流程的開發(fā)。Sybase ETL Development包含有一臺(tái)用于控制實(shí)際處理流程的ETL開發(fā)服務(wù)器，它能夠連接到各個(gè)數(shù)據(jù)庫，并執(zhí)行相關(guān)過程。
數(shù)據(jù)批處理與轉(zhuǎn)換工具很難實(shí)現(xiàn)跨平臺(tái)的數(shù)據(jù)源采集，特別是在涉及到變更數(shù)據(jù)捕獲(CDC，Change Data Capture)的情況時(shí)。當(dāng)上傳批量數(shù)據(jù)出現(xiàn)問題時(shí)，您需要跟蹤問題、排除故障并盡快重新提交作業(yè)。而這種批量處理方式是非常致命的，因?yàn)槿绻跀?shù)據(jù)倉庫中存在著超過24小時(shí)的、被API調(diào)用與分配的數(shù)據(jù);或者需要同時(shí)備份傳入的數(shù)據(jù)，那么這些CDC信息就可能因此而丟失或被覆蓋，從而造成巨大的問題。
隨著對(duì)實(shí)時(shí)數(shù)據(jù)訪問需求的出現(xiàn)，諸如Kafka之類的最新模型，都能夠?qū)崿F(xiàn)基于數(shù)據(jù)流的處理和分布式的消息隊(duì)列。以Alooma為代表的公司，通過新的技術(shù)提供了基于SaaS平臺(tái)和本地的解決方案。面對(duì)數(shù)據(jù)流，最新的ETL平臺(tái)能夠在完成加載的數(shù)據(jù)倉庫內(nèi)部，進(jìn)行不同級(jí)別的轉(zhuǎn)換，并通過Python、Java等代碼以實(shí)現(xiàn)完全控制。
Alooma是一個(gè)為云服務(wù)構(gòu)建的企業(yè)數(shù)據(jù)管道(data pipeline)平臺(tái)。Alooma能夠提供一種現(xiàn)代的、可擴(kuò)展的、基于云端的ETL解決方案，它可以實(shí)時(shí)地將來自任何數(shù)據(jù)源的數(shù)據(jù)匯集到任何一個(gè)數(shù)據(jù)倉庫之中。
