基于大數(shù)據(jù)的地區(qū)輿情監(jiān)控及決策輔助系統(tǒng)和方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及輿情分析技術(shù)領(lǐng)域，特別涉及一種基于大數(shù)據(jù)的地區(qū)輿情監(jiān)控及決策輔助系統(tǒng)和方法。
【背景技術(shù)】
[0002]隨著互聯(lián)網(wǎng)技術(shù)帶來網(wǎng)絡(luò)傳播的興起，由于網(wǎng)絡(luò)本身的虛擬性、隱蔽性、發(fā)散性、滲透性和隨意性等特點(diǎn)，更多的人們?cè)敢獠捎镁W(wǎng)絡(luò)這種渠道來表現(xiàn)真實(shí)的想法。
[0003]網(wǎng)絡(luò)已被公認(rèn)為是繼報(bào)紙、廣播、電視之后的“第四媒體”，成為反映社會(huì)輿情的主要載體之一。由于互聯(lián)網(wǎng)具有虛擬性、隱蔽性、發(fā)散性、滲透性和隨意性等特點(diǎn)，越來越多的網(wǎng)民樂意通過BBS論壇、博客、新聞跟貼、轉(zhuǎn)貼等渠道來表達(dá)觀點(diǎn)、傳播思想并加以強(qiáng)化。網(wǎng)絡(luò)自由輿論的形成、不加控制的信息傳播、大眾傳媒職業(yè)道德建設(shè)的滯后造成網(wǎng)絡(luò)信息流量的失控已對(duì)社會(huì)的穩(wěn)定產(chǎn)生負(fù)面的影響。
[0004]如果引導(dǎo)不善，負(fù)面的網(wǎng)絡(luò)輿情將對(duì)社會(huì)公共安全形成較大威脅。對(duì)相關(guān)部門來說，如何加強(qiáng)對(duì)網(wǎng)絡(luò)輿論的及時(shí)監(jiān)測(cè)、有效引導(dǎo)，以及對(duì)網(wǎng)絡(luò)輿論危機(jī)的積極化解，對(duì)維護(hù)社會(huì)穩(wěn)定、促進(jìn)國(guó)家發(fā)展具有重要的現(xiàn)實(shí)意義。
[0005]隨著中國(guó)互聯(lián)網(wǎng)的快速發(fā)展，地區(qū)輿情監(jiān)測(cè)工作已經(jīng)成為輿情分析工作內(nèi)容中重要的一部分。該種基于大數(shù)據(jù)的地區(qū)輿情監(jiān)控及決策輔助方法和系統(tǒng)，就是要使用輿情技術(shù)對(duì)特定地區(qū)及人群進(jìn)行輿情監(jiān)測(cè)分析，提前發(fā)現(xiàn)特定地區(qū)及人群的輿情危機(jī)，及時(shí)處理危機(jī)公關(guān)。對(duì)于有些會(huì)對(duì)社會(huì)產(chǎn)生影響的輿論輿情，進(jìn)行輿情監(jiān)測(cè)，可以及時(shí)的了解事件的動(dòng)態(tài)，對(duì)這些錯(cuò)誤、失實(shí)的輿論進(jìn)行正確的引導(dǎo)。實(shí)施地區(qū)輿情監(jiān)測(cè)還可以掌握特定地區(qū)社會(huì)民意，通過了解該地區(qū)各個(gè)階層民眾的情緒、態(tài)度、看法以及意見和行為傾向，然后對(duì)事件做出正確的決定。
[0006]國(guó)外研宄現(xiàn)狀
[0007]美國(guó)的TDT話題檢測(cè)與跟蹤(Topic Detect1n and Tracking)系統(tǒng)是最知名的網(wǎng)絡(luò)輿情分析系統(tǒng)，這個(gè)概念最早產(chǎn)生于1996年，當(dāng)時(shí)美國(guó)國(guó)防高級(jí)研宄計(jì)劃署(DARPA)根據(jù)現(xiàn)實(shí)的需求，提出要開發(fā)一種能在沒有人工干預(yù)的情況下自動(dòng)判斷新聞數(shù)據(jù)流主題的需求。在1997年，研宄者開始此需求進(jìn)行初步研宄，并取得了一些初步成果，包括建立了一個(gè)針對(duì)TDT研宄的預(yù)研語(yǔ)料庫(kù)，研宄的內(nèi)容包括尋找內(nèi)在主題一致的文本片斷，也就是給出一段連續(xù)的數(shù)據(jù)流(文本或語(yǔ)音)，讓系統(tǒng)判斷兩個(gè)事件之間的分界，并且能自動(dòng)判斷新事件的出現(xiàn)以及舊事件的再現(xiàn)。從1998年開始，在DARPA支持下，美國(guó)國(guó)家標(biāo)準(zhǔn)技術(shù)研宄所
[0008](NIST)每年都要舉辦話題檢測(cè)與跟蹤國(guó)際會(huì)議，并進(jìn)行相應(yīng)的系統(tǒng)評(píng)測(cè)。
[0009]TDT主要涉及了 5個(gè)子任務(wù)，分別是:報(bào)道切分，新報(bào)道識(shí)別，關(guān)聯(lián)識(shí)別，話題識(shí)別和話題跟蹤。通過這5個(gè)子任務(wù)之間的相輔相成，有機(jī)的整體就組成了，TDT項(xiàng)目在研宄中積累的豐富的文本分類算法給目前解決網(wǎng)絡(luò)輿情分析中的話題發(fā)現(xiàn)和追蹤問題做了很好的引導(dǎo)作用。
[0010]現(xiàn)有的互聯(lián)網(wǎng)輿情監(jiān)測(cè)系統(tǒng)的實(shí)際使用效果并不理想，主要原因是現(xiàn)有系統(tǒng)對(duì)采集到的評(píng)論文本的情感傾向性分析不足、沒有建立很好的解決方案。監(jiān)測(cè)系統(tǒng)中如果沒有對(duì)評(píng)論文本的情感傾向的分析，將使其不能有效地對(duì)互聯(lián)網(wǎng)輿情進(jìn)行自動(dòng)分析而不能建立起有效且快速的輿情監(jiān)測(cè)預(yù)警機(jī)制，進(jìn)而不能有效阻止各種負(fù)面信息在互聯(lián)網(wǎng)中的蔓延。另一方面，目前輿情監(jiān)控分析的系統(tǒng)雖多，但是基于大數(shù)據(jù)的專門針對(duì)地區(qū)，地域的輿情監(jiān)控及決策系統(tǒng)卻沒有?，F(xiàn)有的輿情監(jiān)控系統(tǒng)在沒有針對(duì)性的考慮地區(qū)輿情各個(gè)影響因子的情況下，并不能得到有針對(duì)性的、準(zhǔn)確的輿情監(jiān)控結(jié)果并提供有效的決策輔助信息。

【發(fā)明內(nèi)容】

[0011]為了解決現(xiàn)有的輿情監(jiān)控系統(tǒng)在沒有針對(duì)性的考慮地區(qū)輿情各個(gè)影響因子的情況下，并不能得到有針對(duì)性的、準(zhǔn)確的輿情監(jiān)控結(jié)果并提供有效的決策輔助信息的缺點(diǎn)，提出一種基于大數(shù)據(jù)的地區(qū)輿情監(jiān)控及決策輔助系統(tǒng)和方法。
[0012]一種基于大數(shù)據(jù)的地區(qū)輿情監(jiān)控及決策輔助系統(tǒng)，其包括如下模塊:
[0013]信息采集存儲(chǔ)模塊，用于實(shí)時(shí)采集特定區(qū)域內(nèi)的輿情源信息，并對(duì)采集的輿情源信息進(jìn)行結(jié)構(gòu)化存儲(chǔ)管理，形成實(shí)時(shí)更新的地區(qū)大數(shù)據(jù)輿情知識(shí)庫(kù)；
[0014]數(shù)據(jù)預(yù)處理模塊，用于對(duì)地區(qū)大數(shù)據(jù)輿情知識(shí)庫(kù)中的數(shù)據(jù)進(jìn)行預(yù)處理，形成完整有序的數(shù)據(jù)集，為后續(xù)的大數(shù)據(jù)輿情分析模塊提供可用的待分析的數(shù)據(jù)；
[0015]大數(shù)據(jù)輿情分析模塊，用于根據(jù)地區(qū)輿情監(jiān)控分析的特點(diǎn)，針對(duì)輿情相關(guān)的影響因子，建立分析組件庫(kù)、分析模型庫(kù)，通過分析模型庫(kù)中配置器進(jìn)行數(shù)據(jù)模型配置，并通過數(shù)據(jù)挖掘算法對(duì)配置的數(shù)據(jù)模型進(jìn)行挖掘分析，對(duì)指定條件的熱點(diǎn)話題、媒體類型傳播角度、媒體報(bào)道重要度角度、媒體正負(fù)面聲音角度、媒體間的轉(zhuǎn)載關(guān)系角度、媒體區(qū)域分布角度等進(jìn)行輿情分析及趨勢(shì)預(yù)測(cè)得到輿情分析及趨勢(shì)預(yù)測(cè)結(jié)果；
[0016]輿情監(jiān)控預(yù)警、決策輔助模塊，用于預(yù)定義敏感詞庫(kù)中的敏感詞，根據(jù)預(yù)定義的敏感詞庫(kù)中的敏感詞對(duì)地區(qū)輿情分析所關(guān)注的各個(gè)方面的定制輿情進(jìn)行定向挖掘、分析；并根據(jù)輿情分析及趨勢(shì)預(yù)測(cè)結(jié)果，預(yù)定義的敏感詞庫(kù)中的敏感詞對(duì)挖掘和分析的定制輿情進(jìn)行實(shí)時(shí)的監(jiān)控跟蹤、管理和疏導(dǎo)；并用于通過站內(nèi)消息、短信、郵件方式將定制輿情通知給決策者；
[0017]后臺(tái)管理模塊，用于對(duì)輿情信息分類管理、用戶與權(quán)限管理、關(guān)鍵詞管理、采集管理、內(nèi)容管理、專題管理及分析報(bào)告管理。
[0018]一種基于大數(shù)據(jù)的地區(qū)輿情監(jiān)控及決策輔助方法，其包括如下步驟:
[0019]S1、實(shí)時(shí)采集特定區(qū)域內(nèi)的輿情源信息，并對(duì)采集的輿情源信息進(jìn)行結(jié)構(gòu)化存儲(chǔ)管理，形成實(shí)時(shí)更新的地區(qū)大數(shù)據(jù)輿情知識(shí)庫(kù)；
[0020]S2、對(duì)地區(qū)大數(shù)據(jù)輿情知識(shí)庫(kù)中的數(shù)據(jù)進(jìn)行預(yù)處理，形成完整有序的數(shù)據(jù)集，為后續(xù)的大數(shù)據(jù)輿情分析模塊提供可用的待分析的數(shù)據(jù)；
[0021]S3、根據(jù)地區(qū)輿情監(jiān)控分析的特點(diǎn)，針對(duì)輿情相關(guān)的影響因子，建立分析組件庫(kù)、分析模型庫(kù)，通過分析模型庫(kù)中配置器進(jìn)行數(shù)據(jù)模型配置，并通過數(shù)據(jù)挖掘算法對(duì)配置的數(shù)據(jù)模型進(jìn)行挖掘分析，對(duì)指定條件的熱點(diǎn)話題、媒體類型傳播角度、媒體報(bào)道重要度角度、媒體正負(fù)面聲音角度、媒體間的轉(zhuǎn)載關(guān)系角度、媒體區(qū)域分布角度等進(jìn)行輿情分析及趨勢(shì)預(yù)測(cè)得到輿情分析及趨勢(shì)預(yù)測(cè)結(jié)果；
[0022]S4、預(yù)定義敏感詞庫(kù)中的敏感詞，根據(jù)預(yù)定義的敏感詞庫(kù)中的敏感詞對(duì)地區(qū)輿情分析所關(guān)注的各個(gè)方面的定制輿情進(jìn)行定向挖掘、分析；并根據(jù)輿情分析及趨勢(shì)預(yù)測(cè)結(jié)果，預(yù)定義的敏感詞庫(kù)中的敏感詞對(duì)挖掘和分析的定制輿情進(jìn)行實(shí)時(shí)的監(jiān)控跟蹤、管理和疏導(dǎo)；并用于通過站內(nèi)消息、短信、郵件方式將定制輿情通知給決策者；
[0023]S5、對(duì)輿情信息分類管理、用戶與權(quán)限管理、關(guān)鍵詞管理、采集管理、內(nèi)容管理、專