URL進(jìn)行匹配的程序代碼:
[0175]S1，對(duì)當(dāng)前URL執(zhí)行過(guò)濾字段中指示的匹配操作；
[0176]S2，根據(jù)執(zhí)行匹配操作得到的結(jié)果是否滿(mǎn)足過(guò)濾字段中指示的匹配結(jié)果判斷是否成功對(duì)當(dāng)前URL進(jìn)行匹配。
[0177]可選地，在本實(shí)施例中，上述存儲(chǔ)介質(zhì)可以包括但不限于:U盤(pán)、只讀存儲(chǔ)器(R0M，Read-Only Memory)、隨機(jī)存取存儲(chǔ)器(RAM, Random Access Memory)、移動(dòng)硬盤(pán)、磁碟或者光盤(pán)等各種可以存儲(chǔ)程序代碼的介質(zhì)。
[0178]可選地，本實(shí)施例中的具體示例可以參考上述實(shí)施例1和實(shí)施例2中所描述的示例，本實(shí)施例在此不再贅述。
[0179]上述本發(fā)明實(shí)施例序號(hào)僅僅為了描述，不代表實(shí)施例的優(yōu)劣。
[0180]上述實(shí)施例中的集成的單元如果以軟件功能單元的形式實(shí)現(xiàn)并作為獨(dú)立的產(chǎn)品銷(xiāo)售或使用時(shí)，可以存儲(chǔ)在上述計(jì)算機(jī)可讀取的存儲(chǔ)介質(zhì)中。基于這樣的理解，本發(fā)明的技術(shù)方案本質(zhì)上或者說(shuō)對(duì)現(xiàn)有技術(shù)做出貢獻(xiàn)的部分或者該技術(shù)方案的全部或部分可以以軟件產(chǎn)品的形式體現(xiàn)出來(lái)，該計(jì)算機(jī)軟件產(chǎn)品存儲(chǔ)在存儲(chǔ)介質(zhì)中，包括若干指令用以使得一臺(tái)或多臺(tái)計(jì)算機(jī)設(shè)備(可為個(gè)人計(jì)算機(jī)、服務(wù)器或者網(wǎng)絡(luò)設(shè)備等)執(zhí)行本發(fā)明各個(gè)實(shí)施例所述方法的全部或部分步驟。
[0181 ] 在本發(fā)明的上述實(shí)施例中，對(duì)各個(gè)實(shí)施例的描述都各有側(cè)重,某個(gè)實(shí)施例中沒(méi)有詳述的部分，可以參見(jiàn)其他實(shí)施例的相關(guān)描述。
[0182]在本申請(qǐng)所提供的幾個(gè)實(shí)施例中，應(yīng)該理解到，所揭露的客戶(hù)端，可通過(guò)其它的方式實(shí)現(xiàn)。其中，以上所描述的裝置實(shí)施例僅僅是示意性的，例如所述單元的劃分，僅僅為一種邏輯功能劃分，實(shí)際實(shí)現(xiàn)時(shí)可以有另外的劃分方式，例如多個(gè)單元或組件可以結(jié)合或者可以集成到另一個(gè)系統(tǒng)，或一些特征可以忽略，或不執(zhí)行。另一點(diǎn)，所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過(guò)一些接口，單元或模塊的間接耦合或通信連接，可以是電性或其它的形式。
[0183]所述作為分離部件說(shuō)明的單元可以是或者也可以不是物理上分開(kāi)的，作為單元顯示的部件可以是或者也可以不是物理單元，即可以位于一個(gè)地方，或者也可以分布到多個(gè)網(wǎng)絡(luò)單元上。可以根據(jù)實(shí)際的需要選擇其中的部分或者全部單元來(lái)實(shí)現(xiàn)本實(shí)施例方案的目的。
[0184]另外，在本發(fā)明各個(gè)實(shí)施例中的各功能單元可以集成在一個(gè)處理單元中，也可以是各個(gè)單元單獨(dú)物理存在，也可以?xún)蓚€(gè)或兩個(gè)以上單元集成在一個(gè)單元中。上述集成的單元既可以采用硬件的形式實(shí)現(xiàn)，也可以采用軟件功能單元的形式實(shí)現(xiàn)。
[0185]以上所述僅是本發(fā)明的優(yōu)選實(shí)施方式，應(yīng)當(dāng)指出，對(duì)于本技術(shù)領(lǐng)域的普通技術(shù)人員來(lái)說(shuō)，在不脫離本發(fā)明原理的前提下，還可以做出若干改進(jìn)和潤(rùn)飾，這些改進(jìn)和潤(rùn)飾也應(yīng)視為本發(fā)明的保護(hù)范圍。
【主權(quán)項(xiàng)】
1.一種網(wǎng)頁(yè)的統(tǒng)一資源定位符URL的過(guò)濾方法，其特征在于，包括: 獲取待處理URL集合，其中，所述待處理URL集合包括多個(gè)待處理網(wǎng)頁(yè)的URL ； 對(duì)所述待處理URL集合中的每個(gè)URL執(zhí)行以下過(guò)濾操作，其中，所述待處理URL集合中當(dāng)前執(zhí)行以下過(guò)濾操作的URL為當(dāng)前URL: 根據(jù)預(yù)設(shè)的配置文件中的過(guò)濾標(biāo)識(shí)符判斷所述當(dāng)前URL是否為待檢測(cè)URL ； 若所述URL為所述待檢測(cè)URL，則根據(jù)所述配置文件中的過(guò)濾字段對(duì)所述當(dāng)前URL進(jìn)行匹配； 若根據(jù)所述過(guò)濾字段成功對(duì)所述當(dāng)前URL進(jìn)行匹配，則從所述待處理URL集合中過(guò)濾掉所述當(dāng)前URL。2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)預(yù)設(shè)的配置文件中的過(guò)濾標(biāo)識(shí)符判斷所述當(dāng)前URL是否為待檢測(cè)URL包括: 若所述過(guò)濾標(biāo)識(shí)符為用于指示對(duì)所有網(wǎng)頁(yè)進(jìn)行過(guò)濾的字段，則判斷出所述當(dāng)前URL為所述待檢測(cè)URL ;或者 若所述過(guò)濾標(biāo)識(shí)符為用于指示對(duì)預(yù)設(shè)域名進(jìn)行過(guò)濾的字段，則判斷所述當(dāng)前URL中是否包括所述預(yù)設(shè)域名，若所述當(dāng)前URL中包括所述預(yù)設(shè)域名，則判斷出所述當(dāng)前URL為所述待檢測(cè)URL。3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述配置文件中的過(guò)濾字段對(duì)所述當(dāng)前URL進(jìn)行匹配包括: 對(duì)所述當(dāng)前URL執(zhí)行所述過(guò)濾字段中指示的匹配操作； 根據(jù)執(zhí)行所述匹配操作得到的結(jié)果是否滿(mǎn)足所述過(guò)濾字段中指示的匹配結(jié)果判斷是否成功對(duì)所述當(dāng)前URL進(jìn)行匹配。4.根據(jù)權(quán)利要求3所述的方法，其特征在于， 對(duì)所述當(dāng)前URL執(zhí)行所述過(guò)濾字段中指示的匹配操作包括:判斷所述當(dāng)前URL中的特征參數(shù)與所述過(guò)濾字段中的特征參數(shù)之間是否滿(mǎn)足所述配置文件中的匹配式，其中，所述特征參數(shù)包括:所述當(dāng)前URL所對(duì)應(yīng)的網(wǎng)頁(yè)的狀態(tài)碼，和/或用于表示所述當(dāng)前URL所對(duì)應(yīng)的所述網(wǎng)頁(yè)的大小的內(nèi)容長(zhǎng)度字段； 根據(jù)執(zhí)行所述匹配操作得到的結(jié)果是否滿(mǎn)足所述過(guò)濾字段中指示的匹配結(jié)果判斷是否成功對(duì)所述當(dāng)前URL進(jìn)行匹配包括:若所述當(dāng)前URL中的特征參數(shù)與所述過(guò)濾字段中的特征參數(shù)之間滿(mǎn)足所述配置文件中的匹配式時(shí)，則判斷出成功對(duì)所述當(dāng)前URL進(jìn)行匹配。5.根據(jù)權(quán)利要求3所述的方法，其特征在于， 對(duì)所述當(dāng)前URL執(zhí)行所述過(guò)濾字段中指示的匹配操作包括:判斷所述當(dāng)前URL中的特征字符串與所述過(guò)濾字段中的特征字符串之間是否滿(mǎn)足所述配置文件中的匹配條件，其中，所述特征字符串包括以下至少之一:所述當(dāng)前URL的鏈接、所述當(dāng)前URL鏈接中的部分字符串； 根據(jù)執(zhí)行所述匹配操作得到的結(jié)果是否滿(mǎn)足所述過(guò)濾字段中指示的匹配結(jié)果判斷是否成功對(duì)所述當(dāng)前URL進(jìn)行匹配包括:若所述當(dāng)前URL中的特征字符串與所述過(guò)濾字段中的字符串之間滿(mǎn)足所述配置文件中的匹配條件時(shí)，則判斷出成功對(duì)所述當(dāng)前URL進(jìn)行匹配。6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述配置文件為由包括所述過(guò)濾標(biāo)識(shí)符和所述過(guò)濾字段的json字符串形成的文件。7.根據(jù)權(quán)利要求1至6中任一項(xiàng)所述的方法，其特征在于，所述預(yù)設(shè)的配置文件為多個(gè)配置文件，其中，通過(guò)以下步驟執(zhí)行所述根據(jù)預(yù)設(shè)的配置文件中的過(guò)濾標(biāo)識(shí)符判斷所述當(dāng)前URL是否為待檢測(cè)URL、根據(jù)所述配置文件中的過(guò)濾字段對(duì)所述當(dāng)前URL進(jìn)行匹配、從所述待處理URL集合中過(guò)濾掉所述當(dāng)前URL: 從所述多個(gè)配置文件中查找匹配配置文件，其中，根據(jù)所述匹配配置文件中的所述過(guò)濾標(biāo)識(shí)符判斷出所述當(dāng)前URL為所述待檢測(cè)URL、且根據(jù)所述匹配配置文件中的所述過(guò)濾字段成功對(duì)所述當(dāng)前URL進(jìn)行匹配； 只要從所述多個(gè)配置文件中查找出一個(gè)所述匹配配置文件，則從所述待處理URL集合中過(guò)濾掉所述當(dāng)前URL。8.根據(jù)權(quán)利要求1至6中任一項(xiàng)所述的方法，其特征在于，在對(duì)所述待處理URL集合中的每個(gè)URL執(zhí)行所述過(guò)濾操作之后,還包括: 對(duì)由已過(guò)濾掉所述當(dāng)前URL的所述待處理URL集合中的每個(gè)URL所指示的所述待處理網(wǎng)頁(yè)執(zhí)行網(wǎng)頁(yè)安全掃描操作。9.一種網(wǎng)頁(yè)的統(tǒng)一資源定位符URL的過(guò)濾裝置，其特征在于，包括: 獲取單元，用于獲取待處理URL集合，其中，所述待處理URL集合包括多個(gè)待處理網(wǎng)頁(yè)的 URL ； 過(guò)濾單元，用于對(duì)所述待處理URL集合中的每個(gè)URL執(zhí)行以下過(guò)濾操作，其中，所述待處理URL集合中當(dāng)前執(zhí)行以下過(guò)濾操作的URL為當(dāng)前URL: 根據(jù)預(yù)設(shè)的配置文件中的過(guò)濾標(biāo)識(shí)符判斷所述當(dāng)前URL是否為待檢測(cè)URL ； 在所述URL為所述待檢測(cè)URL時(shí)，根據(jù)所述配置文件中的過(guò)濾字段對(duì)所述當(dāng)前URL進(jìn)行匹配； 在根據(jù)所述過(guò)濾字段成功對(duì)所述當(dāng)前URL進(jìn)行匹配時(shí)，從所述待處理URL集合中過(guò)濾掉所述當(dāng)前URL。10.根據(jù)權(quán)利要求9所述的裝置，其特征在于，所述過(guò)濾單元包括: 第一判斷模塊，用于在所述過(guò)濾標(biāo)識(shí)符為用于指示對(duì)所有網(wǎng)頁(yè)進(jìn)行過(guò)濾的字段，判斷出所述當(dāng)前URL為所述待檢測(cè)URL ;或者 第二判斷模塊，用于在所述過(guò)濾標(biāo)識(shí)符為用于指示對(duì)預(yù)設(shè)域名進(jìn)行過(guò)濾的字段，則判斷所述當(dāng)前URL中是否包括所述預(yù)設(shè)域名，若所述當(dāng)前URL中包括所述預(yù)設(shè)域名，判斷出所述當(dāng)前URL為所述待檢測(cè)URL。11.根據(jù)權(quán)利要求9所述的裝置，其特征在于，所述過(guò)濾單元包括: 匹配模塊，用于對(duì)所述當(dāng)前URL執(zhí)行所述過(guò)濾字段中指示的匹配操作； 第三判斷模塊，用于根據(jù)執(zhí)行所述匹配操作得到的結(jié)果是否滿(mǎn)足所述過(guò)濾字段中指示的匹配結(jié)果判斷是否成功對(duì)所述當(dāng)前URL進(jìn)行匹配。12.根據(jù)權(quán)利要求11所述的裝置，其特征在于， 所述匹配模塊通過(guò)執(zhí)行以下步驟以實(shí)現(xiàn)對(duì)所述當(dāng)前URL執(zhí)行所述過(guò)濾字段中指示的匹配操作包括:判斷所述當(dāng)前URL中的特征參數(shù)與所述過(guò)濾字段中的特征參數(shù)之間是否滿(mǎn)足所述配置文件中的匹配式，其中，所述特征參數(shù)包括:所述當(dāng)前URL所對(duì)應(yīng)的網(wǎng)頁(yè)的狀態(tài)碼，和/或用于表示所述當(dāng)前URL所對(duì)應(yīng)的所述網(wǎng)頁(yè)的大小的內(nèi)容長(zhǎng)度字段； 所述第三判斷模塊通過(guò)執(zhí)行以下步驟以實(shí)現(xiàn)根據(jù)執(zhí)行所述匹配操作得到的結(jié)果是否滿(mǎn)足所述過(guò)濾字段中指示的匹配結(jié)果判斷是否成功對(duì)所述當(dāng)前URL進(jìn)行匹配包括:若所述當(dāng)前URL中的特征參數(shù)與所述過(guò)濾字段中的特征參數(shù)之間滿(mǎn)足所述配置文件中的匹配式時(shí)，則判斷出成功對(duì)所述當(dāng)前URL進(jìn)行匹配。13.根據(jù)權(quán)利要求11所述的裝置，其特征在于， 所述匹配模塊通過(guò)執(zhí)行以下步驟以實(shí)現(xiàn)對(duì)所述當(dāng)前URL執(zhí)行所述過(guò)濾字段中指示的匹配操作包括:判斷所述當(dāng)前URL中的特征字符串與所述過(guò)濾字段中的特征字符串之間是否滿(mǎn)足所述配置文件中的匹配條件，其中，所述特征字符串包括以下至少之一:所述當(dāng)前URL的鏈接、所述當(dāng)前URL鏈接中的部分字符串； 所述第三判斷模塊通過(guò)執(zhí)行以下步驟以實(shí)現(xiàn)根據(jù)執(zhí)行所述匹配操作得到的結(jié)果是否滿(mǎn)足所述過(guò)濾字段中指示的匹配結(jié)果判斷是否成功對(duì)所述當(dāng)前URL進(jìn)行匹配包括:若所述當(dāng)前URL中的特征字符串與所述過(guò)濾字段中的字符串之間滿(mǎn)足所述配置文件中的匹配條件時(shí)，則判斷出成功對(duì)所述當(dāng)前URL進(jìn)行匹配。14.根據(jù)權(quán)利要求9所述的裝置，其特征在于，所述配置文件為由包括所述過(guò)濾標(biāo)識(shí)符和所述過(guò)濾字段的json字符串形成的文件。15.根據(jù)權(quán)利要求9至14中任一項(xiàng)所述的裝置，其特征在于，所述預(yù)設(shè)的配置文件為多個(gè)配置文件，其中，所述過(guò)濾單元包括: 查找模塊，用于從所述多個(gè)配置文件中查找匹配配置文件，其中，根據(jù)所述匹配配置文件中的所述過(guò)濾標(biāo)識(shí)符判斷出所述當(dāng)前URL為所述待檢測(cè)URL、且根據(jù)所述匹配配置文件中的所述過(guò)濾字段成功對(duì)所述當(dāng)前URL進(jìn)行匹配； 過(guò)濾模塊，用于只要從所述多個(gè)配置文件中查找出一個(gè)所述匹配配置文件，則從所述待處理URL集合中過(guò)濾掉所述當(dāng)前URL。16.根據(jù)權(quán)利要求9至14中任一項(xiàng)所述的裝置，其特征在于，還包括: 掃描單元，用于在對(duì)所述待處理URL集合中的每個(gè)URL執(zhí)行所述過(guò)濾操作之后，對(duì)由已過(guò)濾掉所述當(dāng)前URL的所述待處理URL集合中的每個(gè)URL所指示的所述待處理網(wǎng)頁(yè)執(zhí)行網(wǎng)頁(yè)安全掃描操作。
【專(zhuān)利摘要】本發(fā)明公開(kāi)了一種網(wǎng)頁(yè)的統(tǒng)一資源定位符URL的過(guò)濾方法和裝置，其中，該方法包括：獲取待處理URL集合，其中，待處理URL集合包括多個(gè)待處理網(wǎng)頁(yè)的URL；對(duì)待處理URL集合中的每個(gè)URL執(zhí)行以下過(guò)濾操作，其中，待處理URL集合中當(dāng)前執(zhí)行以下過(guò)濾操作的URL為當(dāng)前URL：根據(jù)預(yù)設(shè)的配置文件中的過(guò)濾標(biāo)識(shí)符判斷當(dāng)前URL是否為待檢測(cè)URL；若URL為待檢測(cè)URL，則根據(jù)配置文件中的過(guò)濾字段對(duì)當(dāng)前URL進(jìn)行匹配；若根據(jù)過(guò)濾字段成功對(duì)當(dāng)前URL進(jìn)行匹配，則從待處理URL集合中過(guò)濾掉當(dāng)前URL。本發(fā)明解決了由于現(xiàn)有技術(shù)無(wú)法過(guò)濾垃圾網(wǎng)頁(yè)的URL的技術(shù)問(wèn)題，從而實(shí)現(xiàn)了在過(guò)濾掉垃圾網(wǎng)頁(yè)的URL之后進(jìn)行Web安全掃描，提高Web安全掃描的效率。
【IPC分類(lèi)】G06F17/30
【公開(kāi)號(hào)】CN105302815
【申請(qǐng)?zhí)枴緾N201410284750
【發(fā)明人】何雙寧, 董昭, 馬杰
【申請(qǐng)人】騰訊科技（深圳）有限公司
【公開(kāi)日】2016年2月3日
【申請(qǐng)日】2014年6月23日