1.一種基于云計(jì)算技術(shù)的數(shù)據(jù)集成方法,其特征在于,應(yīng)用于云計(jì)算平臺(tái),所述云計(jì)算平臺(tái)運(yùn)行在基礎(chǔ)設(shè)施上,所述基礎(chǔ)設(shè)施包括設(shè)置在不同區(qū)域的多個(gè)數(shù)據(jù)中心,每個(gè)數(shù)據(jù)中心包括多個(gè)服務(wù)器,其中,所述云計(jì)算平臺(tái)上包括:數(shù)據(jù)讀取端、數(shù)據(jù)寫入端、進(jìn)度存儲(chǔ)端和數(shù)據(jù)提交端;
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,在所述數(shù)據(jù)讀取端將所述至少一批變更數(shù)據(jù)中每批數(shù)據(jù)的第一標(biāo)識(shí)均傳輸至所述進(jìn)度存儲(chǔ)端,以及,將所述至少一批變更數(shù)據(jù)傳輸至所述數(shù)據(jù)寫入端之前,還包括:
3.根據(jù)權(quán)利要求1或2所述的方法,其特征在于,所述數(shù)據(jù)寫入端向目標(biāo)數(shù)據(jù)源寫入所述至少一批變更數(shù)據(jù),包括:
4.根據(jù)權(quán)利要求1或2所述的方法,其特征在于,所述數(shù)據(jù)寫入端為多個(gè);
5.根據(jù)權(quán)利要求1-4任一所述的方法,其特征在于,在所述數(shù)據(jù)提交端將所述第二標(biāo)識(shí)提交至所述變更數(shù)據(jù)抓取組件之前,還包括:
6.根據(jù)權(quán)利要求1-5任一所述的方法,其特征在于,在所述數(shù)據(jù)提交端將所述第二標(biāo)識(shí)提交至所述變更數(shù)據(jù)抓取組件之后,還包括:
7.根據(jù)權(quán)利要求1-6任一所述的方法,其特征在于,目標(biāo)批變更數(shù)據(jù)的第一標(biāo)識(shí)至少由所述目標(biāo)批變更數(shù)據(jù)在所述源數(shù)據(jù)源中的起始偏移量和結(jié)束偏移量組成,其中,所述目標(biāo)批變更數(shù)據(jù)為所述至少一批變更數(shù)據(jù)中的任意一批數(shù)據(jù)。
8.一種基于云計(jì)算技術(shù)的數(shù)據(jù)集成裝置,其特征在于,配置于云計(jì)算平臺(tái),所述云計(jì)算平臺(tái)運(yùn)行在基礎(chǔ)設(shè)施上,所述基礎(chǔ)設(shè)施包括設(shè)置在不同區(qū)域的多個(gè)數(shù)據(jù)中心,每個(gè)數(shù)據(jù)中心包括多個(gè)服務(wù)器;
9.根據(jù)權(quán)利要求8所述的裝置,其特征在于,所述數(shù)據(jù)讀取模塊在將所述至少一批變更數(shù)據(jù)中每批數(shù)據(jù)的第一標(biāo)識(shí)均傳輸至所述進(jìn)度存儲(chǔ)模塊,以及,將所述至少一批變更數(shù)據(jù)傳輸至所述數(shù)據(jù)寫入模塊之前,還用于:
10.根據(jù)權(quán)利要求8或9所述的裝置,其特征在于,所述數(shù)據(jù)寫入模塊在向目標(biāo)數(shù)據(jù)源寫入所述至少一批變更數(shù)據(jù)時(shí),具體用于:
11.根據(jù)權(quán)利要求8或9所述的裝置,其特征在于,所述數(shù)據(jù)寫入模塊為多個(gè);
12.根據(jù)權(quán)利要求8-11任一所述的裝置,其特征在于,所述數(shù)據(jù)提交模塊在將所述第二標(biāo)識(shí)提交至所述cdc組件之前,還用于:
13.根據(jù)權(quán)利要求8-12任一所述的裝置,其特征在于,所述數(shù)據(jù)提交模塊,還用于:在所述第二標(biāo)識(shí)提交至所述變更數(shù)據(jù)抓取組件之后,向所述進(jìn)度存儲(chǔ)模塊傳輸?shù)谝恍畔?,所述第一信息用于指示已提交所述第二?biāo)識(shí)至所述變更數(shù)據(jù)抓取組件;
14.根據(jù)權(quán)利要求8-13任一所述的裝置,其特征在于,目標(biāo)批變更數(shù)據(jù)的第一標(biāo)識(shí)至少由所述目標(biāo)批變更數(shù)據(jù)在所述源數(shù)據(jù)源中的起始偏移量和結(jié)束偏移量組成,其中,所述目標(biāo)批變更數(shù)據(jù)為所述至少一批變更數(shù)據(jù)中的任意一批數(shù)據(jù)。
15.一種計(jì)算設(shè)備集群,其特征在于,包括至少一個(gè)計(jì)算設(shè)備,每個(gè)計(jì)算設(shè)備均包括處理器和存儲(chǔ)器;
16.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),其特征在于,包括計(jì)算機(jī)程序指令,當(dāng)所述指令被計(jì)算設(shè)備集群運(yùn)行時(shí),使得所述計(jì)算設(shè)備集群執(zhí)行如權(quán)利要求1-7任一所述的方法,其中,所述計(jì)算設(shè)備集群包括至少一個(gè)計(jì)算設(shè)備。
17.一種包含指令的計(jì)算機(jī)程序產(chǎn)品,其特征在于,當(dāng)所述指令被計(jì)算設(shè)備集群運(yùn)行時(shí),使得所述計(jì)算設(shè)備集群執(zhí)行如權(quán)利要求1-7任一所述的方法,其中,所述計(jì)算設(shè)備集群包括至少一個(gè)計(jì)算設(shè)備。