構(gòu)建基于工作流引擎和元數(shù)據(jù)驅(qū)動的數(shù)據(jù)倉庫ETL工具.pdf

1、隨著互連網(wǎng)和數(shù)據(jù)庫技術(shù)的不斷發(fā)展,經(jīng)濟全球化帶來的企業(yè)競爭不斷加劇,越來越多的企業(yè)想構(gòu)建自己的數(shù)據(jù)倉庫系統(tǒng),對企業(yè)大量分散和異構(gòu)的數(shù)據(jù)進行整合,期望從中獲得更多有用的信息,來提升企業(yè)的競爭力.但是,手工編碼實現(xiàn)的ETL使構(gòu)建數(shù)據(jù)倉庫系統(tǒng)的周期拉長,數(shù)據(jù)倉庫的數(shù)據(jù)質(zhì)量不高,針對這種情況,該文提出了構(gòu)建基于工作流引擎和元數(shù)據(jù)驅(qū)動的數(shù)據(jù)倉庫ETL工具的解決方案.這種解決方案大大縮短了數(shù)據(jù)倉庫系統(tǒng)的開發(fā)周期,確保了數(shù)據(jù)倉庫的數(shù)據(jù)質(zhì)量,使新的業(yè)務(wù)

2、數(shù)據(jù)自動的源源不斷的進入數(shù)據(jù)倉庫.這種基于工作流引擎和元數(shù)據(jù)驅(qū)動的數(shù)據(jù)倉庫ETL工具是由工作流引擎負(fù)責(zé)抽取任務(wù)的管理、抽取任務(wù)的指派、抽取任務(wù)的依賴和約束關(guān)系檢查,這樣解決了抽取任務(wù)之間的復(fù)雜調(diào)度關(guān)系.而且,該ETL工具把所有跟數(shù)據(jù)抽取有關(guān)的數(shù)據(jù)以元數(shù)據(jù)的形式保存在元數(shù)據(jù)庫,以元數(shù)據(jù)驅(qū)動數(shù)據(jù)抽取,實現(xiàn)了具體抽取程序跟具體業(yè)務(wù)的分離,使抽取程序靈活的適應(yīng)具體業(yè)務(wù)邏輯的變化,不會因為具體的業(yè)務(wù)發(fā)生變化而改變抽取程序.該文首先在分析數(shù)據(jù)倉庫的