技術(shù)特征:
技術(shù)總結(jié)
本發(fā)明實(shí)施例提供了一種數(shù)據(jù)抓取方法及裝置,涉及網(wǎng)絡(luò)應(yīng)用技術(shù)領(lǐng)域。其中,在本發(fā)明實(shí)施例中,基于統(tǒng)一資源定位符URL模板對應(yīng)的參數(shù)生成規(guī)則,確定更新內(nèi)容;利用所述更新內(nèi)容更新所述URL模板,生成待抓取URL;推送所述待抓取URL至抓取服務(wù)器;觸發(fā)所述抓取服務(wù)器抓取所述待抓取URL對應(yīng)的網(wǎng)絡(luò)數(shù)據(jù)。本發(fā)明實(shí)施例提供的技術(shù)方案,提高數(shù)據(jù)抓取有效性及準(zhǔn)確度。
技術(shù)研發(fā)人員:龔廖安
受保護(hù)的技術(shù)使用者:北京小度信息科技有限公司
技術(shù)研發(fā)日:2017.05.25
技術(shù)公布日:2017.10.24