本發(fā)明涉及數(shù)據(jù)處理，具體涉及一種面向非結(jié)構(gòu)化數(shù)據(jù)的實(shí)體關(guān)系分析方法、裝置和設(shè)備。

背景技術(shù)：

1、在無線通信領(lǐng)域，頻譜資源的有限性和頻譜環(huán)境的復(fù)雜性已成為亟需解決的關(guān)鍵問題。頻譜資源的有限性不僅制約了通信系統(tǒng)的發(fā)展，還導(dǎo)致了頻譜利用效率低下和頻譜資源浪費(fèi)的現(xiàn)象。與此同時(shí)，隨著通信系統(tǒng)的發(fā)展和應(yīng)用場景的拓展，通信系統(tǒng)面臨的干擾問題也日益突出。來自外部環(huán)境和其他通信系統(tǒng)的各種干擾嚴(yán)重影響了通信質(zhì)量和系統(tǒng)性能。尤其是惡意無線信號的干擾，更是給通信系統(tǒng)的正常運(yùn)行和數(shù)據(jù)安全帶來了嚴(yán)重威脅。因此，對于設(shè)備間的干擾以及惡意干擾信號的準(zhǔn)確識別和有效防御成為了當(dāng)前亟待解決的技術(shù)挑戰(zhàn)之一。

2、針對這些問題，盡管研究人員已經(jīng)提出了多種抗干擾辦法，但實(shí)施這些方法需要大量的干擾關(guān)系數(shù)據(jù)的支持。然而，現(xiàn)有的干擾關(guān)系數(shù)據(jù)往往是非結(jié)構(gòu)化的，這給數(shù)據(jù)的直接利用帶來了挑戰(zhàn)。非結(jié)構(gòu)化數(shù)據(jù)通常以自然語言文本、圖像或者其他形式存在，不易直接進(jìn)行分析和利用。例如，在無線通信領(lǐng)域，干擾關(guān)系可能體現(xiàn)在通信日志、頻譜監(jiān)測報(bào)告、網(wǎng)絡(luò)拓?fù)鋱D等各種非結(jié)構(gòu)化數(shù)據(jù)中。這些數(shù)據(jù)源包含了豐富的信息，但是由于其形式的多樣性和信息的分散性，難以直接從中提取出有效的干擾關(guān)系。因此，需要有一種辦法來將非結(jié)構(gòu)化數(shù)據(jù)整理為結(jié)構(gòu)化數(shù)據(jù)。

3、面對上述的挑戰(zhàn)，一種常見的方法是利用統(tǒng)計(jì)學(xué)和機(jī)器學(xué)習(xí)技術(shù)進(jìn)行特征提取和模式識別。這種方法通常通過構(gòu)建特征工程來表示非結(jié)構(gòu)化數(shù)據(jù)中的信息，并使用機(jī)器學(xué)習(xí)算法(如支持向量機(jī)、隨機(jī)森林等)來訓(xùn)練模型進(jìn)行干擾關(guān)系的識別和分類。雖然這種方法在一定程度上可以處理非結(jié)構(gòu)化數(shù)據(jù)，但其依賴于手工設(shè)計(jì)的特征和模型，可能無法充分挖掘數(shù)據(jù)中的潛在信息，且對領(lǐng)域知識的利用較為有限。

4、另一種常見方法是基于圖論和網(wǎng)絡(luò)科學(xué)的技術(shù)，將非結(jié)構(gòu)化數(shù)據(jù)表示為圖結(jié)構(gòu)，并利用圖分析算法來探索實(shí)體之間的關(guān)聯(lián)關(guān)系。通過構(gòu)建通信系統(tǒng)和干擾源之間的網(wǎng)絡(luò)圖，可以利用圖論中的節(jié)點(diǎn)中心性、社區(qū)發(fā)現(xiàn)等方法來揭示干擾關(guān)系的模式和規(guī)律。然而，這種方法通常需要對數(shù)據(jù)進(jìn)行復(fù)雜的預(yù)處理和圖構(gòu)建，且在處理大規(guī)模數(shù)據(jù)時(shí)可能面臨計(jì)算效率低下的問題。

技術(shù)實(shí)現(xiàn)思路

1、為了解決現(xiàn)有技術(shù)中存在的上述問題，本發(fā)明提供了一種面向非結(jié)構(gòu)化數(shù)據(jù)的實(shí)體關(guān)系分析方法、裝置和設(shè)備，具體包括：

2、第一方面，本發(fā)明提供了一種面向非結(jié)構(gòu)化數(shù)據(jù)的實(shí)體關(guān)系分析方法，包括：

3、獲取待分析的非結(jié)構(gòu)化數(shù)據(jù)，待分析的非結(jié)構(gòu)化數(shù)據(jù)為包含電磁領(lǐng)域相關(guān)內(nèi)容的非結(jié)構(gòu)化數(shù)據(jù)；

4、通過bert對待分析的非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行分詞處理，并確定分詞結(jié)果對應(yīng)的目標(biāo)嵌入向量；

5、將目標(biāo)嵌入向量輸入預(yù)先訓(xùn)練的目標(biāo)bilstm-crf模型中，得到待分析的非結(jié)構(gòu)化數(shù)據(jù)中與電磁領(lǐng)域相關(guān)的實(shí)體和實(shí)體關(guān)系。

6、第二方面，本發(fā)明還提供了一種面向非結(jié)構(gòu)化數(shù)據(jù)的實(shí)體關(guān)系分析裝置，包括：

7、獲取模塊，用于獲取待分析的非結(jié)構(gòu)化數(shù)據(jù)；

8、處理模塊，用于通過bert對待分析的非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行分詞處理，并確定分詞結(jié)果對應(yīng)的目標(biāo)嵌入向量；

9、處理模塊，還用于將目標(biāo)嵌入向量輸入預(yù)先訓(xùn)練的目標(biāo)bilstm-crf模型中，得到待分析的非結(jié)構(gòu)化數(shù)據(jù)中與電磁領(lǐng)域相關(guān)的實(shí)體和實(shí)體關(guān)系。

10、第三方面，本發(fā)明還提供了一種電子設(shè)備，包括處理器、通信接口、存儲器和通信總線，其中，處理器，通信接口，存儲器通過通信總線完成相互間的通信；

11、存儲器，用于存放計(jì)算機(jī)程序；

12、處理器，用于執(zhí)行存儲器上所存放的程序時(shí)，實(shí)現(xiàn)第一方面所提供的任一方法。

13、第四方面，本發(fā)明提供了一種計(jì)算機(jī)可讀存儲介質(zhì)，計(jì)算機(jī)可讀存儲介質(zhì)內(nèi)存儲有計(jì)算機(jī)程序，計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)第一方面所提供的任一方法。

14、第五方面，本發(fā)明提供了一種程序產(chǎn)品，程序產(chǎn)品包括計(jì)算機(jī)程序指令，計(jì)算機(jī)程序指令被執(zhí)行時(shí)能夠?qū)崿F(xiàn)第一方面所提供的任一方法。

15、本發(fā)明的有益效果：

16、本發(fā)明提供的面向非結(jié)構(gòu)化數(shù)據(jù)的實(shí)體關(guān)系分析方法、裝置和設(shè)備，通過獲取待分析的非結(jié)構(gòu)化數(shù)據(jù)，待分析的非結(jié)構(gòu)化數(shù)據(jù)為包含電磁領(lǐng)域相關(guān)內(nèi)容的非結(jié)構(gòu)化數(shù)據(jù)；通過bert對待分析的非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行分詞處理，并確定分詞結(jié)果對應(yīng)的目標(biāo)嵌入向量；將目標(biāo)嵌入向量輸入預(yù)先訓(xùn)練的目標(biāo)bilstm-crf模型中，得到待分析的非結(jié)構(gòu)化數(shù)據(jù)中與電磁領(lǐng)域相關(guān)的實(shí)體和實(shí)體關(guān)系，將bilstm-crf模型遷移至電磁領(lǐng)域，該模型通過深度學(xué)習(xí)技術(shù)，能夠全面處理與電磁信息相關(guān)的文本數(shù)據(jù)，從中深度發(fā)掘出電磁設(shè)備、頻率干擾及通信效果等關(guān)鍵信息，從而實(shí)現(xiàn)電磁設(shè)備和其相關(guān)技術(shù)術(shù)語的高精度、高效率，以及自動(dòng)化識別。

17、以下將結(jié)合附圖及實(shí)施例對本發(fā)明做進(jìn)一步詳細(xì)說明。

技術(shù)特征：

1.一種面向非結(jié)構(gòu)化數(shù)據(jù)的實(shí)體關(guān)系分析方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，訓(xùn)練所述目標(biāo)bilstm-crf模型，包括：

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，還包括：

4.根據(jù)權(quán)利要求1-3任一所述的方法，其特征在于，還包括：

5.根據(jù)權(quán)利要求1-3任一所述的方法，其特征在于，通過bert，對非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行分詞處理，得到對應(yīng)的嵌入向量，包括：

6.根據(jù)權(quán)利要求1-3任一所述的方法，其特征在于，bilstm-crf模型，包括：

7.一種面向非結(jié)構(gòu)化數(shù)據(jù)的實(shí)體關(guān)系分析裝置，其特征在于，包括：

8.一種電子設(shè)備，其特征在于，包括處理器、通信接口、存儲器和通信總線，其中，處理器，通信接口，存儲器通過通信總線完成相互間的通信；

9.一種計(jì)算機(jī)可讀存儲介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲介質(zhì)內(nèi)存儲有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1-6任一所述的方法。

10.一種程序產(chǎn)品，其特征在于，所述程序產(chǎn)品包括計(jì)算機(jī)程序指令，所述計(jì)算機(jī)程序指令被執(zhí)行時(shí)，能夠?qū)崿F(xiàn)如權(quán)利要求1-6任一所述方法。

技術(shù)總結(jié)
本發(fā)明提供了一種面向非結(jié)構(gòu)化數(shù)據(jù)的實(shí)體關(guān)系分析方法、裝置和設(shè)備，通過獲取待分析的非結(jié)構(gòu)化數(shù)據(jù)，待分析的非結(jié)構(gòu)化數(shù)據(jù)為包含電磁領(lǐng)域相關(guān)內(nèi)容的非結(jié)構(gòu)化數(shù)據(jù)；通過BERT對待分析的非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行分詞處理，并確定分詞結(jié)果對應(yīng)的目標(biāo)嵌入向量；將目標(biāo)嵌入向量輸入預(yù)先訓(xùn)練的目標(biāo)BiLSTM?CRF模型中，得到待分析的非結(jié)構(gòu)化數(shù)據(jù)中與電磁領(lǐng)域相關(guān)的實(shí)體和實(shí)體關(guān)系。將BiLSTM?CRF模型遷移至電磁領(lǐng)域，該模型通過深度學(xué)習(xí)技術(shù)，能夠全面處理與電磁信息相關(guān)的文本數(shù)據(jù)，從中深度發(fā)掘出電磁設(shè)備、頻率干擾及通信效果等關(guān)鍵信息，從而實(shí)現(xiàn)電磁設(shè)備和其相關(guān)技術(shù)術(shù)語的高精度、高效率，以及自動(dòng)化識別。

技術(shù)研發(fā)人員：李贊,曹士泓,關(guān)磊,張瀚文,司江勃,李晨曦
受保護(hù)的技術(shù)使用者：西安電子科技大學(xué)
技術(shù)研發(fā)日：
技術(shù)公布日：2025/1/6