技術(shù)總結(jié)
本發(fā)明公開了一種日志數(shù)據(jù)的統(tǒng)計方法及裝置,至少能夠解決現(xiàn)有技術(shù)中的日志統(tǒng)計方式無法應(yīng)對日志數(shù)據(jù)量異常龐大的狀況的技術(shù)問題。該方法包括:讀取第一分布式消息隊列的各個消息分區(qū)中緩存的來自多個客戶端的日志數(shù)據(jù);根據(jù)各個日志數(shù)據(jù)的時間戳對各個日志數(shù)據(jù)進行排序并統(tǒng)計處理,得到日志統(tǒng)計處理結(jié)果;將所述日志統(tǒng)計處理結(jié)果緩存到預(yù)設(shè)的第二分布式消息隊列的各個消息分區(qū)中,以供后臺數(shù)據(jù)庫獲取并存儲所述日志統(tǒng)計處理結(jié)果。
技術(shù)研發(fā)人員:鄧怡豪
受保護的技術(shù)使用者:北京奇虎科技有限公司
文檔號碼:201611249426
技術(shù)研發(fā)日:2016.12.29
技術(shù)公布日:2017.05.17