一種大數(shù)據(jù)系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
:
[0001]本發(fā)明涉及數(shù)據(jù)處理技術(shù)領(lǐng)域,具體地說是一種結(jié)構(gòu)合理、處理效率高的大數(shù)據(jù)系統(tǒng)。
【背景技術(shù)】
:
[0002]隨著社會發(fā)展和經(jīng)濟進步,移動通信終端以及一些智能家居被廣泛的使用,移動通信終端承載了個體之間的通信溝通職能,在此過程中移動終端采集、上傳并存儲大量用戶使用信息。
[0003]大數(shù)據(jù)技術(shù)或稱巨量資料,指的是所涉及的資料量規(guī)模巨大到無法通過目前主流軟件工具,在合理的時間內(nèi)達到汲取、管理、處理并整理成為幫助企業(yè)經(jīng)營決策更積極目的資訊。大數(shù)據(jù)計數(shù)的戰(zhàn)略意義不在于掌握龐大的數(shù)據(jù)信息,而在于對這些含有意義的數(shù)據(jù)進行專業(yè)化的處理,換言之,如果把大數(shù)據(jù)比作一種產(chǎn)業(yè),那么這種產(chǎn)業(yè)實現(xiàn)盈利的關(guān)鍵在于提高對數(shù)據(jù)的“加工能力”,通過加工數(shù)據(jù)實現(xiàn)增值。
[0004]如何從大量的、不完全的、有噪聲的、模糊的、隨機的數(shù)據(jù)中提取隱含在其中的、事先不知道的、但有時潛在有用的信息的過程被稱為數(shù)據(jù)挖掘,顯而易見,數(shù)據(jù)挖掘時大數(shù)據(jù)技術(shù)的關(guān)鍵。
【發(fā)明內(nèi)容】
:
[0005]本發(fā)明針對現(xiàn)有技術(shù)存在的缺點和不足,提出了一種結(jié)構(gòu)合理、處理效率高的大數(shù)據(jù)系統(tǒng)。
[0006]本發(fā)明通過以下措施達到:
[0007]一種大數(shù)據(jù)系統(tǒng),設(shè)有管控平臺以及至少一個移動終端,其中移動終端經(jīng)無線通信網(wǎng)絡(luò)與管控平臺實現(xiàn)數(shù)據(jù)溝通,其特征在于管控平臺中設(shè)有用于抽取關(guān)鍵數(shù)據(jù)的數(shù)據(jù)采集單元、用于對采集到的數(shù)據(jù)進行降噪處理的數(shù)據(jù)預(yù)處理單元、用于對預(yù)處理后的數(shù)據(jù)進行挖掘分析的數(shù)據(jù)挖掘單元。
[0008]本發(fā)明所述數(shù)據(jù)采集單元設(shè)有地理位置信息提取模塊,能夠采集用戶的地理位置信息,并將其上傳至數(shù)據(jù)預(yù)處理單元,與此同時數(shù)據(jù)采集單元還將當(dāng)前用戶的使用習(xí)慣等用戶數(shù)據(jù)上傳至數(shù)據(jù)預(yù)處理單元。
[0009]本發(fā)明所述數(shù)據(jù)預(yù)處理單元中還設(shè)有離散化處理單元,將降噪處理后的數(shù)據(jù)信息進行離散化處理,方便存儲和進一步分析。
[0010]本發(fā)明所述數(shù)據(jù)挖掘單元設(shè)有多路并行的數(shù)據(jù)挖掘模塊,用于從不同角度對輸入的信息進行多方面挖掘,還設(shè)有挖掘結(jié)果融合模塊以及融合信息分析模塊,其中挖掘結(jié)果融合模塊用于對多路并行的數(shù)據(jù)挖掘模塊輸出的挖掘結(jié)果進行匯總,融合信息分析模塊對匯總后的數(shù)據(jù)進行最終處理。
[0011]本發(fā)明在使用時,利用現(xiàn)有移動終端記錄使用者的地理位置信息以及當(dāng)前用戶數(shù)據(jù),并將兩部分信息打包上傳至管控平臺的數(shù)據(jù)采集單元,數(shù)據(jù)采集單元對接收的信息進行抽取后,將其送入數(shù)據(jù)預(yù)處理單元,數(shù)據(jù)預(yù)處理單元首先對數(shù)據(jù)進行降噪處理,然后將其離散化,使其更便于存儲和分析,預(yù)處理后的數(shù)據(jù)被送入數(shù)據(jù)挖掘單元中的多路并行的數(shù)據(jù)挖掘模塊,從不同屬性不同角度對數(shù)據(jù)進行多方位挖掘,從而獲得當(dāng)前某一區(qū)域內(nèi)人流量、當(dāng)前某一用戶的生活習(xí)慣需求、當(dāng)前某一地區(qū)的道路擁堵狀況等數(shù)據(jù)分析結(jié)果。
[0012]本發(fā)明與現(xiàn)有技術(shù)相比,結(jié)合了現(xiàn)有的移動網(wǎng)絡(luò),能夠獲取較完整的原始數(shù)據(jù),同時通過多屬性挖掘,有效提高數(shù)據(jù)利用率。
【附圖說明】
:
[0013]附圖1是本發(fā)明的結(jié)構(gòu)示意圖。
[0014]附圖標記:管控平臺1、移動終端2、數(shù)據(jù)采集單元3、數(shù)據(jù)預(yù)處理單元4、數(shù)據(jù)挖掘單元5ο
【具體實施方式】
:
[0015]下面結(jié)合附圖對本發(fā)明作進一步的說明。
[0016]如附圖1所示,本發(fā)明提出了一種大數(shù)據(jù)系統(tǒng),設(shè)有管控平臺I以及至少一個移動終端2,其中移動終端2經(jīng)無線通信網(wǎng)絡(luò)與管控平臺實現(xiàn)數(shù)據(jù)溝通,其特征在于管控平臺2中設(shè)有用于抽取關(guān)鍵數(shù)據(jù)的數(shù)據(jù)采集單元3、用于對采集到的數(shù)據(jù)進行降噪處理的數(shù)據(jù)預(yù)處理單元4、用于對預(yù)處理后的數(shù)據(jù)進行挖掘分析的數(shù)據(jù)挖掘單元5。
[0017]本發(fā)明所述數(shù)據(jù)采集單元3設(shè)有地理位置信息提取模塊,能夠采集用戶的地理位置信息,并將其上傳至數(shù)據(jù)預(yù)處理單元,與此同時數(shù)據(jù)采集單元還將當(dāng)前用戶的使用習(xí)慣等用戶數(shù)據(jù)上傳至數(shù)據(jù)預(yù)處理單元。
[0018]本發(fā)明所述數(shù)據(jù)預(yù)處理單元4中還設(shè)有離散化處理單元,將降噪處理后的數(shù)據(jù)信息進行離散化處理,方便存儲和進一步分析。
[0019]本發(fā)明所述數(shù)據(jù)挖掘單元5設(shè)有多路并行的數(shù)據(jù)挖掘模塊,用于從不同角度對輸入的信息進行多方面挖掘,還設(shè)有挖掘結(jié)果融合模塊以及融合信息分析模塊,其中挖掘結(jié)果融合模塊用于對多路并行的數(shù)據(jù)挖掘模塊輸出的挖掘結(jié)果進行匯總,融合信息分析模塊對匯總后的數(shù)據(jù)進行最終處理。
[0020]本發(fā)明在使用時,利用現(xiàn)有移動終端記錄使用者的地理位置信息以及當(dāng)前用戶數(shù)據(jù),并將兩部分信息打包上傳至管控平臺的數(shù)據(jù)采集單元,數(shù)據(jù)采集單元對接收的信息進行抽取后,將其送入數(shù)據(jù)預(yù)處理單元,數(shù)據(jù)預(yù)處理單元首先對數(shù)據(jù)進行降噪處理,然后將其離散化,使其更便于存儲和分析,預(yù)處理后的數(shù)據(jù)被送入數(shù)據(jù)挖掘單元中的多路并行的數(shù)據(jù)挖掘模塊,從不同屬性不同角度對數(shù)據(jù)進行多方位挖掘,從而獲得當(dāng)前某一區(qū)域內(nèi)人流量、當(dāng)前某一用戶的生活習(xí)慣需求、當(dāng)前某一地區(qū)的道路擁堵狀況等數(shù)據(jù)分析結(jié)果。
[0021]本發(fā)明與現(xiàn)有技術(shù)相比,結(jié)合了現(xiàn)有的移動網(wǎng)絡(luò),能夠獲取較完整的原始數(shù)據(jù),同時通過多屬性挖掘,有效提高數(shù)據(jù)利用率。
【主權(quán)項】
1.一種大數(shù)據(jù)系統(tǒng),設(shè)有管控平臺以及至少一個移動終端,其中移動終端經(jīng)無線通信網(wǎng)絡(luò)與管控平臺實現(xiàn)數(shù)據(jù)溝通,其特征在于管控平臺中設(shè)有用于抽取關(guān)鍵數(shù)據(jù)的數(shù)據(jù)采集單元、用于對采集到的數(shù)據(jù)進行降噪處理的數(shù)據(jù)預(yù)處理單元、用于對預(yù)處理后的數(shù)據(jù)進行挖掘分析的數(shù)據(jù)挖掘單元。
2.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)系統(tǒng),其特征在于所述數(shù)據(jù)采集單元設(shè)有地理位置信息提取模塊,能夠采集用戶的地理位置信息,并將其上傳至數(shù)據(jù)預(yù)處理單元,與此同時數(shù)據(jù)采集單元還將當(dāng)前用戶的使用習(xí)慣等用戶數(shù)據(jù)上傳至數(shù)據(jù)預(yù)處理單元。
3.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)系統(tǒng),其特征在于所述數(shù)據(jù)預(yù)處理單元中還設(shè)有離散化處理單元,將降噪處理后的數(shù)據(jù)信息進行離散化處理,方便存儲和進一步分析。
4.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)系統(tǒng),其特征在于所述數(shù)據(jù)挖掘單元設(shè)有多路并行的數(shù)據(jù)挖掘模塊,用于從不同角度對輸入的信息進行多方面挖掘,還設(shè)有挖掘結(jié)果融合模塊以及融合信息分析模塊,其中挖掘結(jié)果融合模塊用于對多路并行的數(shù)據(jù)挖掘模塊輸出的挖掘結(jié)果進行匯總,融合信息分析模塊對匯總后的數(shù)據(jù)進行最終處理。
【專利摘要】本發(fā)明涉及數(shù)據(jù)處理技術(shù)領(lǐng)域,具體地說是一種結(jié)構(gòu)合理、處理效率高的大數(shù)據(jù)系統(tǒng),設(shè)有管控平臺以及至少一個移動終端,其中移動終端經(jīng)無線通信網(wǎng)絡(luò)與管控平臺實現(xiàn)數(shù)據(jù)溝通,其特征在于管控平臺中設(shè)有用于抽取關(guān)鍵數(shù)據(jù)的數(shù)據(jù)采集單元、用于對采集到的數(shù)據(jù)進行降噪處理的數(shù)據(jù)預(yù)處理單元、用于對預(yù)處理后的數(shù)據(jù)進行挖掘分析的數(shù)據(jù)挖掘單元,本發(fā)明與現(xiàn)有技術(shù)相比,結(jié)合了現(xiàn)有的移動網(wǎng)絡(luò),能夠獲取較完整的原始數(shù)據(jù),同時通過多屬性挖掘,有效提高數(shù)據(jù)利用率。
【IPC分類】G06F17-30
【公開號】CN104731852
【申請?zhí)枴緾N201410783126
【發(fā)明人】章偉, 趙迪
【申請人】蕪湖樂銳思信息咨詢有限公司
【公開日】2015年6月24日
【申請日】2014年12月16日