欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

爬取電商網(wǎng)站關鍵詞品類信息的方法及裝置與流程

文檔序號:11155070閱讀:來源:國知局

技術特征:

1.一種爬取電商網(wǎng)站關鍵詞品類信息的方法,其特征在于,包括:

根據(jù)電商網(wǎng)站信息、爬取品類信息的關鍵詞構造電商網(wǎng)站的搜索統(tǒng)一資源定位符URL;

訪問構造的電商網(wǎng)站的搜索URL,獲取所述URL對應的網(wǎng)頁的頁面信息;

對所述網(wǎng)頁的頁面信息進行解析,提取出所述頁面中描述電商網(wǎng)站關鍵詞品類的信息,得到電商網(wǎng)站關鍵詞品類信息。

2.根據(jù)權利要求1所述的方法,其特征在于,所述電商網(wǎng)站信息包括電商網(wǎng)站的域名;根據(jù)電商網(wǎng)站信息、爬取品類信息的關鍵詞構造電商網(wǎng)站的搜索URL包括:

根據(jù)電商的域名信息、爬取品類信息的關鍵詞構造如下形式的電商網(wǎng)站的搜索URL:

http://search.XXX.com/Search?keyword=YYY

其中,XXX是電商網(wǎng)站的域名,YYY是指具體的爬取品類信息的關鍵詞。

3.根據(jù)權利要求1或2所述的方法,其特征在于,訪問構造的電商網(wǎng)站的搜索URL,獲取所述URL對應的網(wǎng)頁的頁面信息包括:

批量訪問構造的電商網(wǎng)站的搜索URL,獲取所述URL對應的網(wǎng)頁的頁面信息。

4.根據(jù)權利要求3所述的方法,其特征在于,所述批量訪問構造的電商網(wǎng)站的搜索URL,獲取所述URL對應的網(wǎng)頁的頁面信息包括:

通過多線程同時并發(fā)批量訪問構造的電商網(wǎng)站的搜索URL,獲取所述URL對應的網(wǎng)頁的頁面信息。

5.根據(jù)權利要求4所述的方法,其特征在于,所述頁面信息為超文本標記語言HTML代碼的形式的頁面信息。

6.根據(jù)權利要求5所述的方法,其特征在于,對所述網(wǎng)頁的頁面信息進行解析,提取出所述頁面中描述電商網(wǎng)站關鍵詞品類的信息,得到電商網(wǎng)站關鍵詞品類信息包括:

直接對所述HTML代碼進行解析,提取出所述頁面中描述電商網(wǎng)站關鍵詞品類的信息,得到電商網(wǎng)站關鍵詞品類信息。

7.一種爬取電商網(wǎng)站關鍵詞品類信息的裝置,其特征在于,包括:

構造單元,用于根據(jù)電商網(wǎng)站信息、爬取品類信息的關鍵詞構造電商網(wǎng)站的搜索統(tǒng)一資源定位符URL;

訪問單元,用于訪問構造的電商網(wǎng)站的搜索URL,獲取所述URL對應的網(wǎng)頁的頁面信息;

解析單元,用于對所述網(wǎng)頁的頁面信息進行解析,提取出所述頁面中描述電商網(wǎng)站關鍵詞品類的信息,得到電商網(wǎng)站關鍵詞品類信息。

8.根據(jù)權利要求7所述的裝置,其特征在于,所述電商網(wǎng)站信息包括電商網(wǎng)站的域名;所述構造單元具體用于:

根據(jù)電商的域名信息、爬取品類信息的關鍵詞構造如下形式的電商網(wǎng)站的搜索URL:

http://search.XXX.com/Search?keyword=YYY

其中,XXX是電商網(wǎng)站的域名,YYY是指具體的爬取品類信息的關鍵詞。

9.根據(jù)權利要求7或8所述的裝置,其特征在于,所述訪問單元用于批量訪問構造的電商網(wǎng)站的搜索URL,獲取所述URL對應的網(wǎng)頁的頁面信息。

10.根據(jù)權利要求9所述的裝置,其特征在于,所述批量訪問構造的電商網(wǎng)站的搜索URL,獲取所述URL對應的網(wǎng)頁的頁面信息包括:

通過多線程同時并發(fā)批量訪問構造的電商網(wǎng)站的搜索URL,獲取所述URL對應的網(wǎng)頁的頁面信息。

當前第2頁1 2 3 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
甘洛县| 阿城市| 喜德县| 怀化市| 乐亭县| 高雄县| 临沂市| 潜山县| 平遥县| 金溪县| 出国| 海淀区| 涞源县| 沙坪坝区| 黑山县| 武强县| 泉州市| 白河县| 津市市| 南华县| 凯里市| 乐业县| 潼南县| 乌拉特前旗| 南乐县| 全州县| 凤山县| 界首市| 青河县| 盐山县| 新沂市| 揭阳市| 方城县| 东乌珠穆沁旗| 平阴县| 额济纳旗| 津南区| 司法| 彭水| 铜陵市| 长汀县|