本發(fā)明涉及多媒體信息技術(shù)領(lǐng)域,特別涉及一種本地信息收集系統(tǒng)及信息分類收集方法。
背景技術(shù):
分類信息網(wǎng)是互聯(lián)網(wǎng)新興起的網(wǎng)站類型。涉及日常生活的方方面面信息資訊。在這些網(wǎng)站里面我們可以獲得免費(fèi),便利的信息發(fā)布服務(wù)。
但是,現(xiàn)有技術(shù)中,由于這類網(wǎng)站都屬于小眾群體,而這類群體一般只租用一臺(tái)服務(wù)器來實(shí)現(xiàn)所有分類信息的功能,在信息過多時(shí)會(huì)造成服務(wù)器癱瘓或者出錯(cuò),直接導(dǎo)致信息存儲(chǔ)量不足。
技術(shù)實(shí)現(xiàn)要素:
本發(fā)明要解決的技術(shù)問題是提供一種多服務(wù)器組成的本地信息收集系統(tǒng)及信息分類收集方法,解決了信息存儲(chǔ)量不足的問題。
為了解決上述技術(shù)問題,本發(fā)明的技術(shù)方案為:
一種本地信息收集系統(tǒng),包括:主存儲(chǔ)服務(wù)器、多個(gè)分類信息存儲(chǔ)服務(wù)器和數(shù)據(jù)獲取端,所述主存儲(chǔ)服務(wù)器與所述數(shù)據(jù)獲取端連接,所述主存儲(chǔ)服務(wù)器與所述分類信息存儲(chǔ)服務(wù)器連接;其中,所述數(shù)據(jù)獲取端用于獲取區(qū)域內(nèi)的所有信息,所述主存儲(chǔ)服務(wù)器將數(shù)據(jù)獲取端獲取到的信息進(jìn)行存儲(chǔ)和分類,所述分類信息存儲(chǔ)服務(wù)器用于將主存儲(chǔ)服務(wù)器分類的信息進(jìn)行分類存儲(chǔ)。
其中,所述分類信息存儲(chǔ)服務(wù)器包括二手物品交易信息存儲(chǔ)服務(wù)器、二手車買賣信息存儲(chǔ)服務(wù)器、房屋租售信息存儲(chǔ)服務(wù)器、寵物信息存儲(chǔ)服務(wù)器、招聘信息存儲(chǔ)服務(wù)器、兼職信息存儲(chǔ)服務(wù)器、求職信息存儲(chǔ)服務(wù)器、交友活動(dòng)信息存儲(chǔ)服務(wù)器和生活服務(wù)信息信息存儲(chǔ)服務(wù)器。
其中,所述數(shù)據(jù)獲取端包括大數(shù)據(jù)服務(wù)器、物聯(lián)網(wǎng)服務(wù)器、網(wǎng)頁端數(shù)據(jù)獲取服務(wù)器和APP端數(shù)據(jù)獲取服務(wù)器。
其中,所述主存儲(chǔ)服務(wù)器包括信息接收模塊、信息存儲(chǔ)模塊、信息分類模塊和分類信息轉(zhuǎn)發(fā)模塊,所述信息接收模塊用于接收數(shù)據(jù)獲取端獲取的信息,信息存儲(chǔ)模塊用于將接收到的信息進(jìn)行存儲(chǔ),所述信息分類模塊用于將存儲(chǔ)的信息進(jìn)行分類,所述分類信息轉(zhuǎn)發(fā)模塊用于將分類的信息轉(zhuǎn)發(fā)給各個(gè)分類信息存儲(chǔ)服務(wù)器。
具體的,所述主存儲(chǔ)服務(wù)器還包括違法信息濾除模塊,用于將接收到的數(shù)據(jù)獲取端獲取的信息進(jìn)行過濾,將違法違規(guī)的信息進(jìn)行刪除或隔離封鎖。
具體的,所述主存儲(chǔ)服務(wù)器還包括空間整理模塊,用于在將數(shù)據(jù)轉(zhuǎn)發(fā)至分類信息存儲(chǔ)服務(wù)器之后,將存儲(chǔ)在主服務(wù)器上的同類信息進(jìn)行刪除。
具體的,所述信息存儲(chǔ)模塊存儲(chǔ)信息的方式為壓縮存儲(chǔ)。
一種信息分類收集方法,包括:
步驟S1:數(shù)據(jù)獲取端獲取本區(qū)域內(nèi)所有信息;
步驟S2:將所有信息發(fā)送至主存儲(chǔ)服務(wù)器;
步驟S3:主存儲(chǔ)服務(wù)器對(duì)所有信息進(jìn)行分類;
步驟S4:將分類的信息發(fā)送給各個(gè)分類信息存儲(chǔ)服務(wù)器;
步驟S5:將主存儲(chǔ)服務(wù)器中的相同內(nèi)容刪除。
其中,在執(zhí)行步驟S2之后執(zhí)行:
步驟S201:對(duì)所有信息進(jìn)行違法信息過濾;
步驟S202:將違法信息刪除。
其中,在執(zhí)行步驟S2之后執(zhí)行:
步驟S211:將所有信息進(jìn)行壓縮。
采用上述技術(shù)方案,由于采用多服務(wù)器分類信息專門存儲(chǔ),使得信息讀取有序,信息存儲(chǔ)量大,維護(hù)方便。
附圖說明
圖1為本發(fā)明本地信息收集系統(tǒng)的結(jié)構(gòu)示意圖;
圖2為本發(fā)明中主存儲(chǔ)服務(wù)器的結(jié)構(gòu)示意圖;以及
圖3為本發(fā)明信息分類收集方法的流程示意圖。
圖中,1-主存儲(chǔ)服務(wù)器,2-分類信息存儲(chǔ)服務(wù)器,21-信息接收模塊,22-信息存儲(chǔ)模塊,23-信息分類模塊,24-分類信息轉(zhuǎn)發(fā)模塊,25-違法信息濾除模塊,26-空間整理模塊,3-數(shù)據(jù)獲取端。
具體實(shí)施方式
下面結(jié)合附圖對(duì)本發(fā)明的具體實(shí)施方式作進(jìn)一步說明。在此需要說明的是,對(duì)于這些實(shí)施方式的說明用于幫助理解本發(fā)明,但并不構(gòu)成對(duì)本發(fā)明的限定。此外,下面所描述的本發(fā)明各個(gè)實(shí)施方式中所涉及的技術(shù)特征只要彼此之間未構(gòu)成沖突就可以相互組合。
為了解決上述技術(shù)問題,本發(fā)明的技術(shù)方案為:
作為本發(fā)明的第一實(shí)施例,提出一種本地信息收集系統(tǒng),如圖1所示,包括:主存儲(chǔ)服務(wù)器1、多個(gè)分類信息存儲(chǔ)服務(wù)器2和數(shù)據(jù)獲取端3,主存儲(chǔ)服務(wù)器1與數(shù)據(jù)獲取端3連接,主存儲(chǔ)服務(wù)器1與分類信息存儲(chǔ)服務(wù)器2連接。
其中,數(shù)據(jù)獲取端3包括大數(shù)據(jù)服務(wù)器、物聯(lián)網(wǎng)服務(wù)器、網(wǎng)頁端數(shù)據(jù)獲取服務(wù)器和APP端數(shù)據(jù)獲取服務(wù)器,通過上述這些服務(wù)器獲取區(qū)域內(nèi)的所有信息,并將獲取到的信息發(fā)送給主存儲(chǔ)服務(wù)器1,主存儲(chǔ)服務(wù)器1將數(shù)據(jù)獲取端獲取到的信息進(jìn)行存儲(chǔ)和分類,之后發(fā)送到分類信息存儲(chǔ)服務(wù)器2中,其中,如圖2所示,主存儲(chǔ)服務(wù)器2包括信息接收模塊21、信息存儲(chǔ)模塊22、信息分類模塊23和分類信息轉(zhuǎn)發(fā)模塊24;信息接收模塊21接收數(shù)據(jù)獲取端3獲取的信息,先通過違法信息濾除模塊25將接收到的數(shù)據(jù)獲取端獲取的信息進(jìn)行過濾,將違法違規(guī)的信息進(jìn)行刪除或隔離封鎖。再通過信息存儲(chǔ)模塊22將信息進(jìn)行存儲(chǔ),存儲(chǔ)之后使用信息分類模塊將信息進(jìn)行分類,將分類完成的信息通過分類信息轉(zhuǎn)發(fā)模塊轉(zhuǎn)發(fā)給各個(gè)分類信息存儲(chǔ)服務(wù)器,最后將存儲(chǔ)在主服務(wù)器上的同類信息通過空間整理模塊26進(jìn)行刪除。
做為上述實(shí)施例的優(yōu)選,信息存儲(chǔ)模塊22存儲(chǔ)信息的方式可以為壓縮存儲(chǔ)。
分類信息存儲(chǔ)服務(wù)器2將這些分類信息進(jìn)行分類存儲(chǔ),分類信息存儲(chǔ)服務(wù)器2包括二手物品交易信息存儲(chǔ)服務(wù)器、二手車買賣信息存儲(chǔ)服務(wù)器、房屋租售信息存儲(chǔ)服務(wù)器、寵物信息存儲(chǔ)服務(wù)器、招聘信息存儲(chǔ)服務(wù)器、兼職信息存儲(chǔ)服務(wù)器、求職信息存儲(chǔ)服務(wù)器、交友活動(dòng)信息存儲(chǔ)服務(wù)器和生活服務(wù)信息信息存儲(chǔ)服務(wù)器。
本發(fā)明還提出一種基于上述本地信息收集系統(tǒng)的信息分類收集方法,如圖3所示,包括:
步驟S1:數(shù)據(jù)獲取端獲取本區(qū)域內(nèi)所有信息;
步驟S2:將所有信息發(fā)送至主存儲(chǔ)服務(wù)器;
步驟S201:對(duì)所有信息進(jìn)行違法信息過濾;
步驟S202:將違法信息刪除;
步驟S3:主存儲(chǔ)服務(wù)器對(duì)所有信息進(jìn)行分類;
步驟S4:將分類的信息發(fā)送給各個(gè)分類信息存儲(chǔ)服務(wù)器;
步驟S5:將主存儲(chǔ)服務(wù)器中的相同內(nèi)容刪除。
本發(fā)明還提出一種優(yōu)選的信息分類收集方法,包括:
步驟S1:數(shù)據(jù)獲取端獲取本區(qū)域內(nèi)所有信息;
步驟S2:將所有信息發(fā)送至主存儲(chǔ)服務(wù)器;
步驟S211:將所有信息進(jìn)行壓縮。
步驟S3:主存儲(chǔ)服務(wù)器對(duì)所有信息進(jìn)行分類;
步驟S4:將分類的信息發(fā)送給各個(gè)分類信息存儲(chǔ)服務(wù)器;
步驟S5:將主存儲(chǔ)服務(wù)器中的相同內(nèi)容刪除。
采用上述技術(shù)方案,由于采用多服務(wù)器分類信息專門存儲(chǔ),使得信息讀取有序,信息存儲(chǔ)量大,維護(hù)方便。
以上結(jié)合附圖對(duì)本發(fā)明的實(shí)施方式作了詳細(xì)說明,但本發(fā)明不限于所描述的實(shí)施方式。對(duì)于本領(lǐng)域的技術(shù)人員而言,在不脫離本發(fā)明原理和精神的情況下,對(duì)這些實(shí)施方式進(jìn)行多種變化、修改、替換和變型,仍落入本發(fā)明的保護(hù)范圍內(nèi)。