本發(fā)明涉及一種煙花爆竹安全生產(chǎn)、存儲(chǔ)的監(jiān)控方法、系統(tǒng)及存儲(chǔ)介質(zhì)，屬于安全生產(chǎn)、存儲(chǔ)監(jiān)控領(lǐng)域。

背景技術(shù)：

1、煙花爆竹生產(chǎn)涉及多種高?；瘜W(xué)品和精細(xì)操作，因此安全生產(chǎn)一直是該行業(yè)的重中之重。常見的安全問題包括原料混合不均、操作不當(dāng)、靜電引發(fā)的意外點(diǎn)火等。這些問題可能導(dǎo)致爆炸、火災(zāi)和嚴(yán)重的人員傷亡。

2、與生產(chǎn)環(huán)節(jié)同樣重要的是煙花爆竹的存儲(chǔ)安全。煙花爆竹存儲(chǔ)過程中也存在大量潛在的安全隱患，特別是由于存儲(chǔ)環(huán)境不當(dāng)、堆放不規(guī)范或管理系統(tǒng)老化，容易引發(fā)嚴(yán)重的安全問題。常見的存儲(chǔ)安全問題包括：倉庫溫濕度失控：過高的溫度或濕度可能導(dǎo)致煙花爆竹的化學(xué)成分變質(zhì)或自燃；倉庫通風(fēng)不良：長時(shí)間存儲(chǔ)的煙花爆竹若通風(fēng)不暢，可能積聚揮發(fā)性化學(xué)物質(zhì)，增加爆炸風(fēng)險(xiǎn)；超量存儲(chǔ)：超出倉庫設(shè)計(jì)承載的存儲(chǔ)量會(huì)增加火災(zāi)和爆炸的風(fēng)險(xiǎn)，并使事故發(fā)生時(shí)的救援工作更加復(fù)雜。

3、歷史上，該行業(yè)曾發(fā)生多起嚴(yán)重事故，導(dǎo)致巨大的生命財(cái)產(chǎn)損失，這些事故往往是由于監(jiān)控和預(yù)警系統(tǒng)的不足造成的。

4、目前，煙花爆竹生產(chǎn)安全的監(jiān)控技術(shù)主要包括傳統(tǒng)的視頻監(jiān)控系統(tǒng)、溫濕度監(jiān)測、以及基于規(guī)則的自動(dòng)停機(jī)系統(tǒng)。這些系統(tǒng)雖然在一定程度上提高了安全水平，但仍存在明顯的局限性。例如，傳統(tǒng)視頻監(jiān)控系統(tǒng)依賴人工觀察，易受人為疲勞和注意力分散的影響；環(huán)境監(jiān)測系統(tǒng)雖能實(shí)時(shí)監(jiān)控溫濕度，但對(duì)于復(fù)雜操作的實(shí)時(shí)響應(yīng)和預(yù)警能力不足；自動(dòng)停機(jī)系統(tǒng)則往往反應(yīng)遲緩，無法處理突發(fā)的多變情況。因此，有必要開發(fā)一種融合llm大語言的生成式人工智能的煙花爆竹安全生產(chǎn)、存儲(chǔ)監(jiān)控系統(tǒng)。

技術(shù)實(shí)現(xiàn)思路

1、本發(fā)明目的在于克服現(xiàn)有技術(shù)中的不足，提供一種煙花爆竹安全生產(chǎn)、存儲(chǔ)的監(jiān)控方法、系統(tǒng)及存儲(chǔ)介質(zhì)，能夠監(jiān)控?zé)熁ū癜踩a(chǎn)、存儲(chǔ)過程，實(shí)現(xiàn)危險(xiǎn)源發(fā)現(xiàn)和預(yù)警，有效預(yù)防和減少煙花爆竹生產(chǎn)和存儲(chǔ)過程中的安全事故。

2、為達(dá)到上述目的，本發(fā)明是采用下述技術(shù)方案實(shí)現(xiàn)的：

3、第一方面，本發(fā)明提供了一種煙花爆竹安全生產(chǎn)、存儲(chǔ)的監(jiān)控方法，包括：

4、獲取生產(chǎn)設(shè)備運(yùn)行狀態(tài)數(shù)據(jù)、操作員動(dòng)作規(guī)范數(shù)據(jù)和倉庫圖像數(shù)據(jù)；所述生產(chǎn)設(shè)備運(yùn)行狀態(tài)數(shù)據(jù)包括環(huán)境圖像信息和設(shè)備狀態(tài)信息；所述操作員動(dòng)作規(guī)范數(shù)據(jù)包括操作員的位置信息和動(dòng)作圖像信息；

5、將環(huán)境圖像信息和操作員的動(dòng)作圖像信息輸入至圖像識(shí)別模型進(jìn)行危險(xiǎn)識(shí)別處理，得到生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)和操作員危險(xiǎn)動(dòng)作；

6、基于倉庫圖像數(shù)據(jù)和貨物出入庫數(shù)據(jù)，計(jì)算倉庫的總當(dāng)量；

7、將設(shè)備狀態(tài)信息、生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)、操作員危險(xiǎn)動(dòng)作、位置信息和倉庫總當(dāng)量輸入訓(xùn)練好的安規(guī)知識(shí)大模型，進(jìn)行安全性評(píng)估處理，得到煙花爆竹生產(chǎn)、存儲(chǔ)的預(yù)警等級(jí)及危險(xiǎn)源位置；

8、將煙花爆竹生產(chǎn)、存儲(chǔ)的預(yù)警等級(jí)及危險(xiǎn)源位置進(jìn)行可視化處理，實(shí)時(shí)反饋給操作員。

9、可選的，所述將環(huán)境圖像信息和操作員的動(dòng)作圖像信息輸入至圖像識(shí)別模型進(jìn)行危險(xiǎn)識(shí)別處理，得到生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)和操作員危險(xiǎn)動(dòng)作，包括：

10、將環(huán)境圖像信息輸入至圖像識(shí)別模型的危險(xiǎn)狀態(tài)識(shí)別子模型分別進(jìn)行圖像預(yù)處理、特征提取映射處理和危險(xiǎn)狀態(tài)識(shí)別，得到生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)；所述生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)包括：設(shè)備過熱、火藥泄漏和設(shè)備故障；

11、將操作員的動(dòng)作圖像信息輸入至圖像識(shí)別模型的危險(xiǎn)動(dòng)作識(shí)別子模型分別進(jìn)行圖像人影去噪處理、軌跡分析處理和危險(xiǎn)動(dòng)作識(shí)別，得到操作員危險(xiǎn)動(dòng)作；所述操作員危險(xiǎn)動(dòng)作包括：違規(guī)操作、危險(xiǎn)區(qū)域進(jìn)入、不當(dāng)使用工具。

12、可選的，所述將環(huán)境圖像信息輸入至圖像識(shí)別模型的危險(xiǎn)狀態(tài)識(shí)別子模型分別進(jìn)行圖像預(yù)處理、特征提取映射處理和危險(xiǎn)狀態(tài)識(shí)別，得到生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)，包括：

13、對(duì)環(huán)境圖像信息進(jìn)行圖像預(yù)處理得到圖像預(yù)處理后的環(huán)境圖像信息；所述圖像預(yù)處理包括：圖像去噪、對(duì)比度增強(qiáng)和歸一化處理；

14、利用深度卷積神經(jīng)網(wǎng)絡(luò)及圖卷積網(wǎng)絡(luò)對(duì)圖像預(yù)處理后的環(huán)境圖像信息分別進(jìn)行特征提取和特征映射，得到融合后的特征向量；

15、將融合后的特征向量輸入transformers單元進(jìn)行分類，并利用多層感知器對(duì)分類結(jié)果進(jìn)行分析，得到生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)。

16、可選的，所述將操作員的動(dòng)作圖像信息輸入至圖像識(shí)別模型的危險(xiǎn)動(dòng)作識(shí)別子模型分別進(jìn)行圖像人影去噪處理、軌跡分析處理和危險(xiǎn)動(dòng)作識(shí)別，得到操作員危險(xiǎn)動(dòng)作，包括：

17、將動(dòng)作圖像信息進(jìn)行人影去噪處理，得到去噪后的動(dòng)作圖像信息；

18、對(duì)去噪后的動(dòng)作圖像信息進(jìn)行動(dòng)作特征提取，并利用圖像分割技術(shù)將提取的動(dòng)作特征進(jìn)行軌跡分析，得到軌跡分析后的數(shù)據(jù)；

19、對(duì)軌跡分析后的數(shù)據(jù)進(jìn)行風(fēng)險(xiǎn)評(píng)估，識(shí)別高風(fēng)險(xiǎn)動(dòng)作；

20、對(duì)高風(fēng)險(xiǎn)動(dòng)作進(jìn)行分類識(shí)別，得到操作員危險(xiǎn)動(dòng)作。

21、可選的，所述基于倉庫圖像數(shù)據(jù)和貨物出入庫數(shù)據(jù)，計(jì)算倉庫的總當(dāng)量，包括：

22、對(duì)倉庫圖像數(shù)據(jù)進(jìn)行識(shí)別分類處理，得到的貨物的類別數(shù)據(jù)，所述類別包括產(chǎn)品a、產(chǎn)品b和產(chǎn)品c；

23、將倉庫圖像數(shù)據(jù)進(jìn)行點(diǎn)云處理，得到庫存體積數(shù)據(jù)，所述庫存體積數(shù)據(jù)包括：倉庫中每個(gè)貨物的體積信息；

24、獲取不同類別貨物對(duì)應(yīng)的當(dāng)量系數(shù)；

25、基于不同類別貨物對(duì)應(yīng)的當(dāng)量系數(shù)、貨物的類別數(shù)據(jù)和庫存體積數(shù)據(jù)，得到初始倉庫的總當(dāng)量；

26、根據(jù)初始倉庫的總當(dāng)量和貨物的出入庫數(shù)據(jù)，得到倉庫的總當(dāng)量。

27、可選的，所述將設(shè)備狀態(tài)信息、生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)、操作員危險(xiǎn)動(dòng)作、位置信息和倉庫總當(dāng)量輸入訓(xùn)練好的安規(guī)知識(shí)大模型，進(jìn)行安全性評(píng)估處理，得到煙花爆竹生產(chǎn)、存儲(chǔ)的預(yù)警等級(jí)及危險(xiǎn)源位置，包括：

28、將設(shè)備狀態(tài)信息、生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)、操作員危險(xiǎn)動(dòng)作、位置信息和倉庫總當(dāng)量輸入訓(xùn)練好的安規(guī)知識(shí)大模型的預(yù)處理模塊進(jìn)行數(shù)據(jù)預(yù)處理，得到預(yù)處理后的數(shù)據(jù)集；

29、對(duì)預(yù)處理后的數(shù)據(jù)集進(jìn)行關(guān)鍵特征提取，得到煙花爆竹生產(chǎn)、存儲(chǔ)過程中的關(guān)鍵特征數(shù)據(jù)集；所述關(guān)鍵特征包括：設(shè)備的運(yùn)行異常、操作員的異常行為、關(guān)鍵位置的危險(xiǎn)狀況及倉庫中危險(xiǎn)品的高當(dāng)量區(qū)域；

30、利用多因素決策模型，識(shí)別單個(gè)關(guān)鍵特征及不同關(guān)鍵特征組合下的預(yù)警等級(jí)，并且結(jié)合位置信息得到危險(xiǎn)源位置。

31、可選的，所述訓(xùn)練好的安規(guī)知識(shí)大模型的獲取方法包括：

32、獲取煙花爆竹安規(guī)數(shù)據(jù)集，所述煙花爆竹安規(guī)數(shù)據(jù)集包括：與煙花爆竹安全生產(chǎn)和存儲(chǔ)相關(guān)的標(biāo)準(zhǔn)、法規(guī)、操作指南、歷史安全事故報(bào)告和案例研究文件；

33、對(duì)所述煙花爆竹安規(guī)數(shù)據(jù)集進(jìn)行結(jié)構(gòu)化處理以及數(shù)據(jù)標(biāo)注，作為安規(guī)知識(shí)大模型的標(biāo)簽，所述數(shù)據(jù)標(biāo)注包括：安全隱患標(biāo)識(shí)、安全操作流程和安全等級(jí)分類；

34、對(duì)煙花爆竹安規(guī)數(shù)據(jù)集依次進(jìn)行文本清理、分詞標(biāo)注處理和數(shù)據(jù)增強(qiáng)處理，得到訓(xùn)練樣本集；

35、基于模型的最優(yōu)參數(shù)得到訓(xùn)練好的安規(guī)知識(shí)大模型；

36、第二方面，本發(fā)明提供一種煙花爆竹安全生產(chǎn)、存儲(chǔ)的監(jiān)控系統(tǒng)，包括：

37、數(shù)據(jù)采集模塊，用于獲取生產(chǎn)設(shè)備運(yùn)行狀態(tài)數(shù)據(jù)、操作員動(dòng)作規(guī)范數(shù)據(jù)和倉庫圖像數(shù)據(jù)；所述生產(chǎn)設(shè)備運(yùn)行狀態(tài)數(shù)據(jù)包括環(huán)境圖像信息和設(shè)備狀態(tài)信息；所述操作員動(dòng)作規(guī)范數(shù)據(jù)包括操作員的位置信息和動(dòng)作圖像信息；

38、識(shí)別模塊，用于將環(huán)境圖像信息和操作員的動(dòng)作圖像信息輸入至圖像識(shí)別模型進(jìn)行危險(xiǎn)識(shí)別處理，得到生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)和操作員危險(xiǎn)動(dòng)作；

39、當(dāng)量計(jì)算模塊，用于基于倉庫圖像數(shù)據(jù)和貨物出入庫數(shù)據(jù)，計(jì)算倉庫的總當(dāng)量；

40、預(yù)警模塊，用于將設(shè)備狀態(tài)信息、生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)、操作員危險(xiǎn)動(dòng)作、位置信息和倉庫總當(dāng)量輸入訓(xùn)練好的安規(guī)知識(shí)大模型，進(jìn)行安全性評(píng)估處理，得到煙花爆竹生產(chǎn)、存儲(chǔ)的預(yù)警等級(jí)及危險(xiǎn)源位置；

41、顯示模塊，用于將煙花爆竹生產(chǎn)、存儲(chǔ)的預(yù)警等級(jí)及危險(xiǎn)源位置進(jìn)行可視化處理，實(shí)時(shí)反饋給操作員。

42、可選的，所述識(shí)別模塊包括：危險(xiǎn)狀態(tài)識(shí)別子模塊和危險(xiǎn)動(dòng)作識(shí)別子模塊；所述危險(xiǎn)狀態(tài)識(shí)別子模塊，用于將環(huán)境圖像信息輸入至圖像識(shí)別模型的危險(xiǎn)狀態(tài)識(shí)別子模型分別進(jìn)行圖像預(yù)處理、特征提取映射處理和危險(xiǎn)狀態(tài)識(shí)別，得到生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)；所述生產(chǎn)設(shè)備的危險(xiǎn)狀態(tài)包括：設(shè)備過熱、火藥泄漏和設(shè)備故障；所述危險(xiǎn)動(dòng)作識(shí)別子模塊，用于將操作員的動(dòng)作圖像信息輸入至圖像識(shí)別模型的危險(xiǎn)動(dòng)作識(shí)別子模型分別進(jìn)行圖像人影去噪處理、軌跡分析處理和危險(xiǎn)動(dòng)作識(shí)別，得到操作員危險(xiǎn)動(dòng)作；所述操作員危險(xiǎn)動(dòng)作包括：違規(guī)操作、危險(xiǎn)區(qū)域進(jìn)入、不當(dāng)使用工具。

43、第三方面，本發(fā)明提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)，實(shí)現(xiàn)如第一方面所述的煙花爆竹安全生產(chǎn)、存儲(chǔ)的監(jiān)控方法的步驟。

44、與現(xiàn)有技術(shù)相比，本發(fā)明所達(dá)到的有益效果?：

45、本發(fā)明提出的煙花爆竹安全生產(chǎn)、存儲(chǔ)的監(jiān)控方法，利用安規(guī)知識(shí)大模型實(shí)現(xiàn)對(duì)煙花爆竹安全生產(chǎn)、存儲(chǔ)過程的監(jiān)控，實(shí)現(xiàn)危險(xiǎn)源發(fā)現(xiàn)和預(yù)警，有效預(yù)防和減少煙花爆竹生產(chǎn)和存儲(chǔ)過程中的安全事故，提高生產(chǎn)安全水平，降低事故風(fēng)險(xiǎn)，保障生產(chǎn)人員的生命安全和財(cái)產(chǎn)安全，以及減少生產(chǎn)中斷對(duì)企業(yè)和社會(huì)的不利影響。同時(shí)，本發(fā)明還提高生產(chǎn)效率和生產(chǎn)質(zhì)量，為煙花爆竹行業(yè)的可持續(xù)發(fā)展作出積極貢獻(xiàn)。

46、本發(fā)明對(duì)于煙花爆竹存儲(chǔ)過程中的危險(xiǎn)品的當(dāng)量進(jìn)行監(jiān)控，包括入庫和庫存的實(shí)時(shí)監(jiān)測，當(dāng)危險(xiǎn)品總當(dāng)量不滿足安規(guī)大模型設(shè)定的標(biāo)準(zhǔn)時(shí)，發(fā)出預(yù)警確保危險(xiǎn)品的安全存放和管理，最大程度地降低了安全風(fēng)險(xiǎn)。

47、本發(fā)明對(duì)于煙花爆竹安全生產(chǎn)過程中存在的設(shè)備危險(xiǎn)和操作危險(xiǎn)進(jìn)行監(jiān)控，實(shí)現(xiàn)了對(duì)煙花爆竹生產(chǎn)過程中的危險(xiǎn)行為和設(shè)備異常的準(zhǔn)確識(shí)別。