技術(shù)總結(jié)
本發(fā)明提供一種高效歸集多系統(tǒng)大數(shù)據(jù)的實(shí)現(xiàn)方法,屬于數(shù)據(jù)庫領(lǐng)域,本發(fā)明包括:對于多系統(tǒng)數(shù)據(jù)庫的多種數(shù)據(jù)庫鏈接方式的支持,并在數(shù)據(jù)抽過程中建立數(shù)據(jù)庫鏈接信息設(shè)置表對多數(shù)據(jù)庫的詳細(xì)鏈接配置信息進(jìn)行記錄;在多系統(tǒng)數(shù)據(jù)庫的數(shù)據(jù)抽過程中建立數(shù)據(jù)抽取表設(shè)置表對數(shù)據(jù)抽取詳細(xì)信息進(jìn)行記錄;通過在抽取數(shù)據(jù)前刪除影響抽取速度的表索引;通過對數(shù)據(jù)更新速度的分類,同時結(jié)合數(shù)據(jù)抽取表設(shè)置表中的過濾條件字段,對不同數(shù)據(jù)進(jìn)行分時分批分過濾條件的數(shù)據(jù)抽取方式實(shí)現(xiàn)大數(shù)據(jù)量的數(shù)據(jù)高效抽取。與現(xiàn)有技術(shù)相比,本發(fā)明具有數(shù)據(jù)歸集量大、歸集速度快、歸集的數(shù)據(jù)可用性強(qiáng)等特點(diǎn)。
技術(shù)研發(fā)人員:王濤威;馬娟;于超;李冉冉
受保護(hù)的技術(shù)使用者:濟(jì)南浪潮高新科技投資發(fā)展有限公司
文檔號碼:201610842169
技術(shù)研發(fā)日:2016.09.22
技術(shù)公布日:2017.03.08