技術(shù)編號(hào):12464861
提示:您尚未登錄,請(qǐng)點(diǎn) 登 陸 后下載,如果您還沒(méi)有賬戶(hù)請(qǐng)點(diǎn) 注 冊(cè) ,登陸完成后,請(qǐng)刷新本頁(yè)查看技術(shù)詳細(xì)信息。本發(fā)明涉及分布式系統(tǒng)領(lǐng)域,特別是指一種分布式流數(shù)據(jù)的采集方法。背景技術(shù)信息技術(shù)飛速發(fā)展導(dǎo)致數(shù)據(jù)規(guī)模極大增加,而且這些數(shù)據(jù)來(lái)源非常豐富,包括:批量日志數(shù)據(jù),實(shí)時(shí)數(shù)據(jù),流式數(shù)據(jù);數(shù)據(jù)類(lèi)型多樣,包括:結(jié)構(gòu)化數(shù)據(jù),半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù),如何采集、存儲(chǔ)和分析這些海量數(shù)據(jù)?傳統(tǒng)的數(shù)據(jù)采集技術(shù),因?yàn)閿?shù)據(jù)來(lái)源比較單一,主要是數(shù)據(jù)庫(kù)和文件方式進(jìn)行存儲(chǔ),且數(shù)據(jù)量較小,大多采用比較單一的工具甚至程序腳本就可以完成數(shù)據(jù)采集工作。傳統(tǒng)的并行數(shù)據(jù)庫(kù)技術(shù)追求高度一致性和容錯(cuò)性,根據(jù)CAP理論,難以保證其可用性、擴(kuò)展性和...
注意:該技術(shù)已申請(qǐng)專(zhuān)利,請(qǐng)尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專(zhuān)利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專(zhuān)利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識(shí)儲(chǔ)備,不適合論文引用。
請(qǐng)注意,此類(lèi)技術(shù)沒(méi)有源代碼,用于學(xué)習(xí)研究技術(shù)思路。