技術(shù)編號:9911284
提示:您尚未登錄,請點 登 陸 后下載,如果您還沒有賬戶請點 注 冊 ,登陸完成后,請刷新本頁查看技術(shù)詳細信息。本發(fā)明涉及計算機數(shù)據(jù)挖掘,具體地說是。背景技術(shù)網(wǎng)絡(luò)爬蟲是搜索引擎技術(shù)的基礎(chǔ)組成部分。網(wǎng)絡(luò)爬蟲技術(shù)是從一個或若干個初始網(wǎng)頁的URL(Uniform Resource Locator,統(tǒng)一資源定位符)開始,活的初始網(wǎng)頁上的URL,在抓取網(wǎng)頁信息的過程中,根據(jù)網(wǎng)頁的抓取策略,不斷從當前頁面上抽取新的URL放入隊列,直到滿足某種停止條件。然后將抓取到的網(wǎng)頁信息存儲在搜索引擎的服務(wù)器中,從而可以加快用戶的搜索速度。隨著互聯(lián)網(wǎng)的爆炸性增長,網(wǎng)絡(luò)所承載的數(shù)據(jù)量已經(jīng)遠遠超...
注意:該技術(shù)已申請專利,請尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識儲備,不適合論文引用。
請注意,此類技術(shù)沒有源代碼,用于學習研究技術(shù)思路。