1、當(dāng)今社會(huì)，隨著信息技術(shù)的不斷發(fā)展，企業(yè)為了適應(yīng)彼此間日趨頻繁的業(yè)務(wù)活動(dòng)和提高自身競(jìng)爭(zhēng)力，投入大量資源研發(fā)針對(duì)各部門(mén)需求的業(yè)務(wù)系統(tǒng)。然而這些業(yè)務(wù)系統(tǒng)功能各異，彼此之間相互獨(dú)立，各自的數(shù)據(jù)存儲(chǔ)和訪問(wèn)方式都不相同。隨著企業(yè)的日益壯大，企業(yè)內(nèi)部數(shù)據(jù)呈現(xiàn)出數(shù)據(jù)量越來(lái)越大，數(shù)據(jù)來(lái)源與數(shù)據(jù)存儲(chǔ)格式越來(lái)越多樣化以及數(shù)據(jù)存儲(chǔ)位置越來(lái)越離散化等特點(diǎn)。對(duì)一個(gè)企業(yè)來(lái)說(shuō),如何有效利用這些數(shù)據(jù)信息以及如何快速在的海量數(shù)據(jù)中獲取對(duì)企業(yè)商業(yè)決策有利的信息，直接關(guān)乎企業(yè)

2、的生死存亡，所以企業(yè)越來(lái)越重視如何將數(shù)據(jù)在邏輯上或者物理上有機(jī)地集中在一起，從而能為企業(yè)和部門(mén)提供更加全面的數(shù)據(jù)共享，使得企業(yè)能對(duì)商業(yè)信息的快速變化做出決策。實(shí)時(shí)數(shù)據(jù)集成技術(shù)是解決上述問(wèn)題的關(guān)鍵技術(shù)。
　　課題以數(shù)據(jù)集成作為研究背景，闡述了國(guó)內(nèi)外數(shù)據(jù)集成技術(shù)的研究現(xiàn)狀，并對(duì)課題相關(guān)技術(shù)做了簡(jiǎn)要介紹。在分析現(xiàn)有數(shù)據(jù)集成技術(shù)基礎(chǔ)上，針對(duì)當(dāng)今大數(shù)據(jù)環(huán)境下企業(yè)對(duì)數(shù)據(jù)實(shí)時(shí)性的需求，研究實(shí)現(xiàn)一個(gè)實(shí)用可靠的支撐大數(shù)據(jù)的實(shí)時(shí)數(shù)據(jù)集成系統(tǒng)。系統(tǒng)主要

3、就集成數(shù)據(jù)實(shí)時(shí)性保障和對(duì)大量數(shù)據(jù)實(shí)時(shí)集成過(guò)程中系統(tǒng)穩(wěn)定性保證兩方面做相關(guān)研究。
　　本文首先在研究傳統(tǒng)數(shù)據(jù)集成系統(tǒng)架構(gòu)和分析實(shí)時(shí)數(shù)據(jù)集成的功能和應(yīng)用需求的基礎(chǔ)上，提出一個(gè)通用的實(shí)時(shí)數(shù)據(jù)集成架構(gòu)。然后從實(shí)時(shí)數(shù)據(jù)集成過(guò)程上分析，實(shí)時(shí)數(shù)據(jù)集成主要分為數(shù)據(jù)實(shí)時(shí)抽取、實(shí)時(shí)轉(zhuǎn)換和實(shí)時(shí)加載三部分。在數(shù)據(jù)實(shí)時(shí)抽取問(wèn)題上，通過(guò)分析在異構(gòu)多源環(huán)境下數(shù)據(jù)實(shí)時(shí)抽取的過(guò)程與難點(diǎn)，提出了基于消息中間件的數(shù)據(jù)實(shí)時(shí)抽取方法，能快速有效的對(duì)不同數(shù)據(jù)源實(shí)現(xiàn)實(shí)時(shí)數(shù)據(jù)增