本發(fā)明涉及智能交互，尤其涉及的是一種基于大模型的智能感知交互方法、系統(tǒng)、終端及介質(zhì)。

背景技術(shù)：

1、隨著科學(xué)技術(shù)的進步，具備智能感知交互能力已經(jīng)成為智能設(shè)備人機交互一種必然的發(fā)展趨勢。

2、當前的智能終端已經(jīng)開始搭載毫米波、光感、攝像頭、語音等具備用戶使用環(huán)境感知和用戶交互感知的能力的智能硬件，且隨著ai（artificial?intelligence，人工智能）技術(shù)的發(fā)展，特別是近年來ai大模型的到來，給這些智能硬件的綜合應(yīng)用帶來了技術(shù)上的巨大突破。

3、但是，當前智能電視的用戶感知大部分還停留在應(yīng)用大數(shù)據(jù)分析去感知用戶的行為習(xí)慣，通過算法分析進行針對性的內(nèi)容推薦和應(yīng)用場景構(gòu)建的層面，這種感知只能感知用戶與電視的操控行為產(chǎn)生的場景，不具跳出電視系統(tǒng)之外的感知能力和場景識別、分析、互動能力。

4、因此，現(xiàn)有技術(shù)存在缺陷，有待改進與發(fā)展。

技術(shù)實現(xiàn)思路

1、本發(fā)明要解決的技術(shù)問題在于，針對現(xiàn)有技術(shù)的上述缺陷，提供一種基于大模型的智能感知交互方法、系統(tǒng)、終端及介質(zhì)，旨在解決現(xiàn)有技術(shù)中只能感知用戶與電視的操控行為產(chǎn)生的場景，不具跳出電視系統(tǒng)之外的感知能力和場景識別、分析、互動能力的問題。

2、本發(fā)明解決技術(shù)問題所采用的技術(shù)方案如下：

3、一種基于大模型的智能感知交互方法，其中，所述方法包括：

4、獲取智能設(shè)備中的智能感知硬件和ai算法采集到的用戶交互數(shù)據(jù)，并根據(jù)所述用戶交互數(shù)據(jù)生成相應(yīng)的動態(tài)場景數(shù)據(jù)；其中，所述動態(tài)場景數(shù)據(jù)包括用戶使用智能設(shè)備時的環(huán)境數(shù)據(jù)和用戶行為習(xí)慣；

5、根據(jù)所述動態(tài)場景數(shù)據(jù)進行場景數(shù)據(jù)建模得到相應(yīng)的建模數(shù)據(jù)，并根據(jù)所述建模數(shù)據(jù)的場景特征構(gòu)建相應(yīng)的智能感知交互場景；

6、判斷所述智能感知交互場景是否為智能感知場景特征庫中預(yù)先定義的智能感知交互場景；

7、在所述智能感知交互場景不為所述智能感知場景特征庫中預(yù)先定義的智能感知交互場景時，則通過預(yù)先訓(xùn)練好的智能感知大模型根據(jù)所述動態(tài)場景數(shù)據(jù)對應(yīng)的所述建模數(shù)據(jù)進行場景推理和交互推理，得到相應(yīng)的目標智能感知交互場景及其對應(yīng)的目標智能感知交互策略；

8、按照所述目標智能感知交互策略觸發(fā)所述目標智能感知交互場景與用戶進行交互。

9、在一種實現(xiàn)方式中，所述根據(jù)所述用戶交互數(shù)據(jù)生成相應(yīng)的動態(tài)場景數(shù)據(jù)，包括：

10、根據(jù)所述用戶交互數(shù)據(jù)，并以時間軸為基線生成相應(yīng)的動態(tài)場景數(shù)據(jù)在一種實現(xiàn)方式中，所述判斷所述智能感知交互場景是否為智能感知場景特征庫中預(yù)先定義的智能感知交互場景之后，還包括：

11、若所述智能感知交互場景為所述智能感知場景特征庫中預(yù)先定義的智能感知交互場景，則將所述智能感知交互場景確定為目標智能感知交互場景，并從所述智能感知場景特征庫中獲取與所述目標智能感知交互場景對應(yīng)的預(yù)先定義的智能感知交互策略，得到相應(yīng)的目標智能感知交互策略。

12、在一種實現(xiàn)方式中，所述從所述智能感知場景特征庫中獲取與所述目標智能感知交互場景對應(yīng)的預(yù)先定義的智能感知交互策略，得到相應(yīng)的目標智能感知交互策略之后，還包括：

13、判斷所述目標智能感知交互策略是否有效；

14、所述按照所述目標智能感知交互策略觸發(fā)所述目標智能感知交互場景與用戶進行交互，包括：

15、在所述目標智能感知交互策略有效時，則按照所述目標智能感知交互策略觸發(fā)所述目標智能感知交互場景與用戶進行交互；

16、在所述目標智能感知交互策略失效時，則通過預(yù)先訓(xùn)練好的所述智能感知大模型基于所述目標智能感知交互場景推理出相應(yīng)的智能感知交互策略，得到新的目標智能感知交互策略，并利用所述新的目標智能感知交互策略替換與所述目標智能感知交互場景對應(yīng)的所述目標智能感知交互策略，然后按照所述新的目標智能感知交互策略觸發(fā)所述目標智能感知交互場景與用戶進行交互。

17、在一種實現(xiàn)方式中，所述判斷所述目標智能感知交互策略是否有效，包括：

18、確定用戶對于所述目標智能感知交互策略的滿意度，并判斷所述滿意度是否達到預(yù)設(shè)滿意度閾值；

19、在所述滿意度達到所述預(yù)設(shè)滿意度閾值時，則判定所述目標智能感知交互策略有效；

20、在所述滿意度未達到所述預(yù)設(shè)滿意度閾值時，則判定所述目標智能感知交互策略失效。

21、在一種實現(xiàn)方式中，所述通過預(yù)先訓(xùn)練好的智能感知大模型根據(jù)所述動態(tài)場景數(shù)據(jù)對應(yīng)的所述建模數(shù)據(jù)進行場景推理和交互推理，得到相應(yīng)的目標智能感知交互場景及其對應(yīng)的目標智能感知交互策略，包括：

22、通過預(yù)先訓(xùn)練好的智能感知大模型根據(jù)所述動態(tài)場景數(shù)據(jù)對應(yīng)的所述建模數(shù)據(jù)進行場景推理，得到相應(yīng)的智能感知交互場景集；

23、根據(jù)獲取到的用戶特征和所述動態(tài)場景數(shù)據(jù)中所述用戶行為習(xí)慣從智能感知交互場景集中推理出相應(yīng)的目標智能感知交互場景，并根據(jù)所述目標智能感知交互場景構(gòu)建相應(yīng)的目標智能感知交互策略。

24、在一種實現(xiàn)方式中，所述按照所述目標智能感知交互策略觸發(fā)所述目標智能感知交互場景與用戶進行交互之后，還包括：

25、確定用戶對于所述目標智能感知交互場景的目標場景滿意度和對于所述目標智能感知交互策略的目標策略滿意度；

26、根據(jù)所述目標場景滿意度和所述目標策略滿意度優(yōu)化所述智能感知大模型的智能交互場景推理邏輯和智能交互策略推理邏輯。

27、本發(fā)明還公開了一種基于大模型的智能感知交互系統(tǒng)，其中，所述系統(tǒng)包括：

28、數(shù)據(jù)獲取模塊，用于獲取智能設(shè)備中的智能感知硬件和ai算法采集到的用戶交互數(shù)據(jù)；

29、數(shù)據(jù)生成模塊，用于根據(jù)所述用戶交互數(shù)據(jù)生成相應(yīng)的動態(tài)場景數(shù)據(jù)；其中，所述動態(tài)場景數(shù)據(jù)包括用戶使用智能設(shè)備時的環(huán)境數(shù)據(jù)和用戶行為習(xí)慣；

30、數(shù)據(jù)建模模塊，用于根據(jù)所述動態(tài)場景數(shù)據(jù)進行場景數(shù)據(jù)建模得到相應(yīng)的建模數(shù)據(jù)；

31、場景構(gòu)建模塊，用于根據(jù)所述建模數(shù)據(jù)的場景特征構(gòu)建相應(yīng)的智能感知交互場景；

32、場景判斷模塊，用于判斷所述智能感知交互場景是否為智能感知場景特征庫中預(yù)先定義的智能感知交互場景；

33、場景推理模塊，用于在所述智能感知交互場景不為所述智能感知場景特征庫中預(yù)先定義的智能感知交互場景時，則通過預(yù)先訓(xùn)練好的智能感知大模型根據(jù)所述動態(tài)場景數(shù)據(jù)對應(yīng)的所述建模數(shù)據(jù)進行場景推理和交互推理，得到相應(yīng)的目標智能感知交互場景及其對應(yīng)的目標智能感知交互策略；

34、交互觸發(fā)模塊，用于按照所述目標智能感知交互策略觸發(fā)所述目標智能感知交互場景與用戶進行交互。

35、本發(fā)明還公開了一種終端，其中，包括：存儲器、處理器及存儲在所述存儲器上并可在所述處理器上運行的基于大模型的智能感知交互程序，所述基于大模型的智能感知交互程序被所述處理器執(zhí)行時實現(xiàn)如上所述的基于大模型的智能感知交互方法的步驟。

36、本發(fā)明還公開了一種計算機可讀存儲介質(zhì)，其中，所述計算機可讀存儲介質(zhì)存儲有計算機程序，所述計算機程序能夠被執(zhí)行以用于實現(xiàn)如上所述的基于大模型的智能感知交互方法的步驟。

37、本發(fā)明提供的一種基于大模型的智能感知交互方法、系統(tǒng)、終端及介質(zhì)，所述基于大模型的智能感知交互方法包括：獲取智能設(shè)備中的智能感知硬件和ai算法采集到的用戶交互數(shù)據(jù)，并根據(jù)所述用戶交互數(shù)據(jù)生成相應(yīng)的動態(tài)場景數(shù)據(jù)；其中，所述動態(tài)場景數(shù)據(jù)包括用戶使用智能設(shè)備時的環(huán)境數(shù)據(jù)和用戶行為習(xí)慣；根據(jù)所述動態(tài)場景數(shù)據(jù)進行場景數(shù)據(jù)建模得到相應(yīng)的建模數(shù)據(jù)，并根據(jù)所述建模數(shù)據(jù)的場景特征構(gòu)建相應(yīng)的智能感知交互場景；判斷所述智能感知交互場景是否為智能感知場景特征庫中預(yù)先定義的智能感知交互場景；在所述智能感知交互場景不為所述智能感知場景特征庫中預(yù)先定義的智能感知交互場景時，則通過預(yù)先訓(xùn)練好的智能感知大模型根據(jù)所述動態(tài)場景數(shù)據(jù)對應(yīng)的所述建模數(shù)據(jù)進行場景推理和交互推理，得到相應(yīng)的目標智能感知交互場景及其對應(yīng)的目標智能感知交互策略；按照所述目標智能感知交互策略觸發(fā)所述目標智能感知交互場景與用戶進行交互。由此可知，本發(fā)明獲取包括用戶使用智能設(shè)備時的環(huán)境數(shù)據(jù)和用戶行為習(xí)慣的動態(tài)場景數(shù)據(jù)，根據(jù)動態(tài)場景數(shù)據(jù)進行場景數(shù)據(jù)建模以及智能感知交互場景構(gòu)建，也即根據(jù)建模數(shù)據(jù)的場景特征構(gòu)建智能感知交互場景，對于非智能感知場景特征庫中預(yù)先定義的智能感知交互場景交由智能感知大模型識別、分析及推理，也即通過預(yù)先訓(xùn)練好的智能感知大模型，對動態(tài)場景數(shù)據(jù)對應(yīng)的建模數(shù)據(jù)進行場景推理和交互推理，生成目標智能感知交互場景及其對應(yīng)的目標智能感知交互策略，并按照目標智能感知交互策略觸發(fā)目標智能感知交互場景與用戶進行交互，用戶根據(jù)需要完成智能感知交互，從而能夠為用戶提供了更優(yōu)的基于智能感知的交互體驗。