本發(fā)明涉及機(jī)器人交互技術(shù)領(lǐng)域，尤其涉及一種游戲中基于多模態(tài)輸入的道具購(gòu)買(mǎi)方法及系統(tǒng)。

背景技術(shù)：

目前，隨著網(wǎng)絡(luò)技術(shù)的發(fā)展，游戲在移動(dòng)終端得到更好的發(fā)展，鑒于移動(dòng)終端的結(jié)構(gòu)特殊性，游戲的操作便利性受到限制。因此，應(yīng)用于游戲的語(yǔ)音技術(shù)開(kāi)始被重視。

語(yǔ)音技術(shù)應(yīng)用于游戲主要是玩家與玩家之間的交互，或者玩家與游戲中虛擬機(jī)器人的交互。再有就說(shuō)，通過(guò)語(yǔ)音技術(shù)對(duì)游戲系統(tǒng)進(jìn)行控制，然而，對(duì)于游戲系統(tǒng)的控制，目前來(lái)說(shuō)，還是基于手動(dòng)控制的基礎(chǔ)上進(jìn)行。例如，要在游戲中打開(kāi)道具系統(tǒng)購(gòu)買(mǎi)東西時(shí)，還是需要先打開(kāi)道具主頁(yè)，再一項(xiàng)一項(xiàng)的向下進(jìn)行選擇，如此，造成操作的繁瑣，并且，由于語(yǔ)音識(shí)別技術(shù)具有不確定性，因此，容易造成失敗。

技術(shù)實(shí)現(xiàn)要素：

本發(fā)明的目的是提供一種操作簡(jiǎn)單，操作步驟少，易于成功的游戲中基于多模態(tài)輸入的道具購(gòu)買(mǎi)方法及系統(tǒng)。

本發(fā)明的目的是通過(guò)以下技術(shù)方案來(lái)實(shí)現(xiàn)的：

一種游戲中基于多模態(tài)輸入的道具購(gòu)買(mǎi)方法，包括：

獲取用戶(hù)的多模態(tài)輸入信息；

根據(jù)預(yù)設(shè)的道具信息識(shí)別策略識(shí)別多模態(tài)輸入信息中的道具信息；

根據(jù)預(yù)設(shè)的意圖識(shí)別策略識(shí)別多模態(tài)輸入信息中的購(gòu)買(mǎi)意圖；

若多模態(tài)輸入信息中的購(gòu)買(mǎi)意圖為是，則根據(jù)所述道具信息打開(kāi)對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框，其中，道具購(gòu)買(mǎi)顯示框的開(kāi)啟命令與所述道具信息關(guān)聯(lián)。

優(yōu)選的，所述方法還包括：

識(shí)別多模態(tài)輸入信息中的購(gòu)買(mǎi)數(shù)量信息。

優(yōu)選的，所述方法還包括：

判斷多模態(tài)輸入信息中是否具有購(gòu)買(mǎi)數(shù)量信息，若有，則直接完成道具的購(gòu)買(mǎi)；若沒(méi)有，則保持道具購(gòu)買(mǎi)顯示框的顯示。

優(yōu)選的，識(shí)別多模態(tài)輸入信息中的道具信息包括：

識(shí)別道具信息中的道具屬性信息。

優(yōu)選的，所述方法還包括：

向用戶(hù)提示是否確認(rèn)購(gòu)買(mǎi)信息，并獲取用戶(hù)根據(jù)所述提示信息給出的第二次多模態(tài)輸入信息，識(shí)別所述第二次多模態(tài)輸入信息中的確認(rèn)購(gòu)買(mǎi)信息，確認(rèn)購(gòu)買(mǎi)信息為是，根據(jù)確認(rèn)購(gòu)買(mǎi)信息完成道具的購(gòu)買(mǎi)。

一種游戲中基于多模態(tài)輸入的道具購(gòu)買(mǎi)系統(tǒng)，包括：

多模態(tài)輸入信息獲取模塊，用于獲取用戶(hù)的多模態(tài)輸入信息；

道具信息識(shí)別模塊，用于根據(jù)預(yù)設(shè)的道具信息識(shí)別策略識(shí)別多模態(tài)輸入信息中的道具信息；

意圖識(shí)別模塊，根據(jù)預(yù)設(shè)的意圖識(shí)別策略識(shí)別多模態(tài)輸入信息中的購(gòu)買(mǎi)意圖；

道具購(gòu)買(mǎi)模塊，若多模態(tài)輸入信息中的購(gòu)買(mǎi)意圖為是，則根據(jù)所述道具信息打開(kāi)對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框，其中，道具購(gòu)買(mǎi)顯示框的開(kāi)啟命令與所述道具信息關(guān)聯(lián)。

優(yōu)選的，所述系統(tǒng)還包括：

數(shù)量識(shí)別模塊，用于識(shí)別多模態(tài)輸入信息中的購(gòu)買(mǎi)數(shù)量信息。

優(yōu)選的，所述系統(tǒng)還包括：

購(gòu)買(mǎi)數(shù)量確認(rèn)模塊，用于判斷多模態(tài)輸入信息中是否具有購(gòu)買(mǎi)數(shù)量信息，若有，則直接完成道具的購(gòu)買(mǎi)；若沒(méi)有，則保持道具購(gòu)買(mǎi)顯示框的顯示。

優(yōu)選的，所述道具信息識(shí)別模塊包括：

道具屬性識(shí)別單元，用于識(shí)別道具信息中的道具屬性信息。

優(yōu)選的，所述系統(tǒng)還包括：。

購(gòu)買(mǎi)確認(rèn)模塊：向用戶(hù)提示是否確認(rèn)購(gòu)買(mǎi)信息，并獲取用戶(hù)根據(jù)所述提示信息給出的第二次多模態(tài)輸入信息，識(shí)別所述第二次多模態(tài)輸入信息中的確認(rèn)購(gòu)買(mǎi)信息，確認(rèn)購(gòu)買(mǎi)信息為是，根據(jù)確認(rèn)購(gòu)買(mǎi)信息完成道具的購(gòu)買(mǎi)。

相比現(xiàn)有技術(shù)，本發(fā)明具有以下優(yōu)點(diǎn)：通過(guò)對(duì)多模態(tài)輸入信息中道具信息的識(shí)別，以及通過(guò)對(duì)購(gòu)買(mǎi)意圖的識(shí)別，進(jìn)而識(shí)別到用戶(hù)的需求，根據(jù)多模態(tài)輸入信息中的道具信息，直接打開(kāi)對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框，這樣，避免了繁瑣的程序操作。同時(shí)，由于操作步驟的減少，也避免了操作失敗和誤操作的概率，提高了成功率。

附圖說(shuō)明

圖1是本發(fā)明實(shí)施例一的一種基于單意圖的技能包并行執(zhí)行管理方法的流程圖；

圖2是本發(fā)明實(shí)施例二的一種基于單意圖的技能包并行執(zhí)行管理系統(tǒng)的示意圖。

具體實(shí)施方式

雖然流程圖將各項(xiàng)操作描述成順序的處理，但是其中的許多操作可以被并行地、并發(fā)地或者同時(shí)實(shí)施。各項(xiàng)操作的順序可以被重新安排。當(dāng)其操作完成時(shí)處理可以被終止，但是還可以具有未包括在附圖中的附加步驟。處理可以對(duì)應(yīng)于方法、函數(shù)、規(guī)程、子例程、子程序等等。

計(jì)算機(jī)設(shè)備包括用戶(hù)設(shè)備與網(wǎng)絡(luò)設(shè)備。其中，用戶(hù)設(shè)備或客戶(hù)端包括但不限于電腦、智能手機(jī)、PDA等；網(wǎng)絡(luò)設(shè)備包括但不限于單個(gè)網(wǎng)絡(luò)服務(wù)器、多個(gè)網(wǎng)絡(luò)服務(wù)器組成的服務(wù)器組或基于云計(jì)算的由大量計(jì)算機(jī)或網(wǎng)絡(luò)服務(wù)器構(gòu)成的云。計(jì)算機(jī)設(shè)備可單獨(dú)運(yùn)行來(lái)實(shí)現(xiàn)本發(fā)明，也可接入網(wǎng)絡(luò)并通過(guò)與網(wǎng)絡(luò)中的其他計(jì)算機(jī)設(shè)備的交互操作來(lái)實(shí)現(xiàn)本發(fā)明。計(jì)算機(jī)設(shè)備所處的網(wǎng)絡(luò)包括但不限于互聯(lián)網(wǎng)、廣域網(wǎng)、城域網(wǎng)、局域網(wǎng)、VPN網(wǎng)絡(luò)等。

在這里可能使用了術(shù)語(yǔ)“第一”、“第二”等等來(lái)描述各個(gè)單元，但是這些單元不應(yīng)當(dāng)受這些術(shù)語(yǔ)限制，使用這些術(shù)語(yǔ)僅僅是為了將一個(gè)單元與另一個(gè)單元進(jìn)行區(qū)分。這里所使用的術(shù)語(yǔ)“和/或”包括其中一個(gè)或更多所列出的相關(guān)聯(lián)項(xiàng)目的任意和所有組合。當(dāng)一個(gè)單元被稱(chēng)為“連接”或“耦合”到另一單元時(shí)，其可以直接連接或耦合到所述另一單元，或者可以存在中間單元。

這里所使用的術(shù)語(yǔ)僅僅是為了描述具體實(shí)施例而不意圖限制示例性實(shí)施例。除非上下文明確地另有所指，否則這里所使用的單數(shù)形式“一個(gè)”、“一項(xiàng)”還意圖包括復(fù)數(shù)。還應(yīng)當(dāng)理解的是，這里所使用的術(shù)語(yǔ)“包括”和/或“包含”規(guī)定所陳述的特征、整數(shù)、步驟、操作、單元和/或組件的存在，而不排除存在或添加一個(gè)或更多其他特征、整數(shù)、步驟、操作、單元、組件和/或其組合。

下面結(jié)合附圖和較佳的實(shí)施例對(duì)本發(fā)明作進(jìn)一步說(shuō)明。

實(shí)施例一

如圖1所示，提供了一種游戲中基于多模態(tài)輸入的道具購(gòu)買(mǎi)方法的具體實(shí)施例，該方法包括步驟：

S10、獲取用戶(hù)的多模態(tài)輸入信息。

具體的，獲取用戶(hù)的多模態(tài)輸入信息是通過(guò)智能終端的操作，其中，智能終端可以包括手持的移動(dòng)終端如手機(jī)、平板等，或是非手持的終端設(shè)備如電腦、智能電視等。其中，所述多模態(tài)輸入信息包括語(yǔ)音信息、手勢(shì)信息、表情信息、場(chǎng)景信息、圖像信息、視頻信息、人臉信息、瞳孔虹膜信息、光感信息和指紋信息中的其中一種或幾種。智能終端設(shè)置有多模態(tài)輸入輸入模塊，如麥克風(fēng)、傳感器、攝像頭、觸摸屏等。例如，智能終端內(nèi)設(shè)置有語(yǔ)音識(shí)別模塊，一般來(lái)說(shuō)，語(yǔ)音識(shí)別模塊可以通過(guò)大規(guī)模的真實(shí)語(yǔ)料的詞匯之間的同現(xiàn)概率，來(lái)識(shí)別輸入的語(yǔ)音信息中出現(xiàn)的詞匯，或通過(guò)人工神經(jīng)網(wǎng)絡(luò)方法和基于文法規(guī)則的語(yǔ)音處理機(jī)制來(lái)識(shí)別語(yǔ)音信息中的意義等。又如，智能終端內(nèi)設(shè)置有視頻識(shí)別模塊，可以識(shí)別視頻信息中人臉的表情等。

S20、根據(jù)預(yù)設(shè)的道具信息識(shí)別策略識(shí)別多模態(tài)輸入信息中的道具信息。

具體的，以語(yǔ)音信息為例，可以通過(guò)大規(guī)模的真實(shí)語(yǔ)料的詞匯之間的同現(xiàn)概率，來(lái)識(shí)別輸入的語(yǔ)音信號(hào)中出現(xiàn)的詞匯的語(yǔ)音識(shí)別方式為例。在語(yǔ)音識(shí)別系統(tǒng)的道具識(shí)別策略中首先大規(guī)模的采集有關(guān)道具名稱(chēng)以及與其相關(guān)的屬性信息，例如，首先在語(yǔ)音系統(tǒng)中采集了關(guān)于“項(xiàng)鏈”的道具信息，從而，當(dāng)語(yǔ)音信息中出現(xiàn)“項(xiàng)鏈”時(shí)，語(yǔ)音系統(tǒng)即可識(shí)別該道具信息。

S30、根據(jù)預(yù)設(shè)的意圖識(shí)別策略識(shí)別多模態(tài)輸入信息中的購(gòu)買(mǎi)意圖。

同樣的，以語(yǔ)音信息為例，可以通過(guò)大規(guī)模的真實(shí)語(yǔ)料的詞匯之間的同現(xiàn)概率，來(lái)識(shí)別輸入的語(yǔ)音信號(hào)中出現(xiàn)的詞匯的語(yǔ)音識(shí)別方式為例。在語(yǔ)音識(shí)別系統(tǒng)的道具識(shí)別策略中首先大規(guī)模的采集有關(guān)購(gòu)買(mǎi)意圖的詞匯，從而，當(dāng)語(yǔ)音信息中出現(xiàn)相同詞匯時(shí)，語(yǔ)音系統(tǒng)即可識(shí)別該購(gòu)買(mǎi)意圖。

S40、若多模態(tài)輸入信息中的購(gòu)買(mǎi)意圖為是，則根據(jù)所述道具信息打開(kāi)對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框，其中，道具購(gòu)買(mǎi)顯示框的開(kāi)啟命令與所述道具信息關(guān)聯(lián)。

以語(yǔ)音信息為例，當(dāng)語(yǔ)音信息中同時(shí)識(shí)別到道具信息以及購(gòu)買(mǎi)意圖時(shí)，才會(huì)執(zhí)行打開(kāi)對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框，其中，所述對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框是針對(duì)直接針對(duì)語(yǔ)音信息中所識(shí)別到的道具信息的直接顯示頁(yè)面，上面可以顯示該道具的圖示、名稱(chēng)、屬性、數(shù)量等信息，用戶(hù)可以通過(guò)這些信息判斷是否與語(yǔ)音信息中的道具信息相吻合。其中，所述對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框的開(kāi)啟命令與語(yǔ)音系統(tǒng)中的有關(guān)道具信息的詞匯相關(guān)聯(lián)，從而，當(dāng)語(yǔ)音系統(tǒng)識(shí)別到該詞匯時(shí)即執(zhí)行相應(yīng)的開(kāi)啟命令。或者，可以以語(yǔ)音信息結(jié)合其它多模態(tài)輸入的方式來(lái)識(shí)別道具信息以及購(gòu)買(mǎi)意圖。例如，通過(guò)語(yǔ)音信息識(shí)別道具信息，通過(guò)表情信息識(shí)別購(gòu)買(mǎi)意圖。

在本實(shí)施例中，所述方法還包括：

S50、識(shí)別多模態(tài)輸入信息中的購(gòu)買(mǎi)數(shù)量信息。

例如，可以通過(guò)對(duì)語(yǔ)音信息中的購(gòu)買(mǎi)數(shù)量進(jìn)行識(shí)別，或者，可以通過(guò)對(duì)視頻信息中的手勢(shì)進(jìn)行識(shí)別，道具系統(tǒng)根據(jù)所述購(gòu)買(mǎi)數(shù)量信息，在開(kāi)啟對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框的同時(shí)，根據(jù)所述購(gòu)買(mǎi)數(shù)量信息修改道具的購(gòu)買(mǎi)數(shù)量值使得對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框顯示與當(dāng)前購(gòu)買(mǎi)數(shù)量信息相同的值。

本實(shí)施例中，所述方法還包括：

S60、判斷多模態(tài)輸入信息中是否具有購(gòu)買(mǎi)數(shù)量信息，若有，則直接完成道具的購(gòu)買(mǎi)；若沒(méi)有，則保持道具購(gòu)買(mǎi)顯示框的顯示。

例如，當(dāng)識(shí)別到語(yǔ)音信息中具有購(gòu)買(mǎi)數(shù)量信息時(shí)，則可判斷用戶(hù)的購(gòu)買(mǎi)意圖和購(gòu)買(mǎi)數(shù)量是確定的，從而，道具系統(tǒng)根據(jù)同時(shí)識(shí)別到的道具信息、購(gòu)買(mǎi)意圖以及購(gòu)買(mǎi)數(shù)量，直接完成道具的購(gòu)買(mǎi)動(dòng)作。例如，當(dāng)語(yǔ)音識(shí)別系統(tǒng)識(shí)別到用戶(hù)的輸入語(yǔ)音為：“我要買(mǎi)100個(gè)項(xiàng)鏈”，其中，“我要買(mǎi)”為購(gòu)買(mǎi)意圖，“100個(gè)”為購(gòu)買(mǎi)數(shù)量，“項(xiàng)鏈”為道具信息，這樣，語(yǔ)音識(shí)別系統(tǒng)同時(shí)識(shí)別到了道具信息、購(gòu)買(mǎi)意圖以及購(gòu)買(mǎi)數(shù)量，從而可執(zhí)行打開(kāi)對(duì)應(yīng)的道具顯示框、更改道具的購(gòu)買(mǎi)數(shù)量值、完成道具購(gòu)買(mǎi)過(guò)程的操作。

在本實(shí)施例中，識(shí)別多模態(tài)輸入信息中的道具信息包括：識(shí)別道具信息中的道具屬性信息。例如，若項(xiàng)鏈中，包含了“金項(xiàng)鏈”、“銀項(xiàng)鏈”、“水晶項(xiàng)鏈”等不同的屬性。當(dāng)通過(guò)語(yǔ)音信息識(shí)別到“項(xiàng)鏈”這一詞匯時(shí)，對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框?qū)@示的是項(xiàng)鏈道具的上級(jí)目錄，需要通過(guò)二次的語(yǔ)音輸入并在二次輸入的語(yǔ)音中加入道具的屬性信息。也就是說(shuō)，對(duì)于上位的“項(xiàng)鏈”一詞，同樣關(guān)聯(lián)了道具系統(tǒng)中的有關(guān)“項(xiàng)鏈”的上級(jí)目錄的道具顯示框。當(dāng)然，在第一次輸入的語(yǔ)音信息中，若包含了對(duì)應(yīng)的屬性信息，則道具系統(tǒng)會(huì)根據(jù)關(guān)聯(lián)的開(kāi)啟命令直接開(kāi)啟相應(yīng)的道具購(gòu)買(mǎi)顯示框。例如，當(dāng)語(yǔ)音識(shí)別系統(tǒng)識(shí)別到用戶(hù)的輸入語(yǔ)音為：“我要買(mǎi)100個(gè)水晶項(xiàng)鏈”時(shí)，語(yǔ)音識(shí)別系統(tǒng)同時(shí)識(shí)別到了道具信息、購(gòu)買(mǎi)意圖以及購(gòu)買(mǎi)數(shù)量，從而可執(zhí)行打開(kāi)對(duì)應(yīng)的水晶項(xiàng)鏈道具顯示框、并更改水晶項(xiàng)鏈的購(gòu)買(mǎi)數(shù)量值為100、并完成道具購(gòu)買(mǎi)過(guò)程的操作。

作為本實(shí)施例的另一種可替代方式，對(duì)于道具的購(gòu)買(mǎi)操作，所述方法還可以包括步驟：

S70、向用戶(hù)提示是否確認(rèn)購(gòu)買(mǎi)信息，并獲取用戶(hù)根據(jù)所述提示信息給出的第二次多模態(tài)輸入信息，識(shí)別所述第二次多模態(tài)輸入信息中的確認(rèn)購(gòu)買(mǎi)信息，確認(rèn)購(gòu)買(mǎi)信息為是，根據(jù)確認(rèn)購(gòu)買(mǎi)信息完成道具的購(gòu)買(mǎi)。例如，當(dāng)語(yǔ)音識(shí)別系統(tǒng)識(shí)別到用戶(hù)的輸入語(yǔ)音為：“我要買(mǎi)100個(gè)水晶項(xiàng)鏈”時(shí)，向用戶(hù)提示，是否確認(rèn)購(gòu)買(mǎi)100個(gè)水晶項(xiàng)鏈，用戶(hù)可根據(jù)該提示信息給出第二次多模態(tài)輸入信息，通過(guò)第二多模態(tài)輸入信息識(shí)別其確認(rèn)購(gòu)買(mǎi)信息，完成道具的購(gòu)買(mǎi)過(guò)程。

實(shí)施例二

如圖2所示，基于上述實(shí)施例提供一種游戲中基于多模態(tài)輸入的道具購(gòu)買(mǎi)系統(tǒng)的具體實(shí)施例，包括：多模態(tài)輸入信息獲取模塊10，用于獲取用戶(hù)的多模態(tài)輸入信息；道具信息識(shí)別模塊20，用于根據(jù)預(yù)設(shè)的道具信息識(shí)別策略識(shí)別多模態(tài)輸入信息中的道具信息；意圖識(shí)別模塊30，根據(jù)預(yù)設(shè)的意圖識(shí)別策略識(shí)別多模態(tài)輸入信息中的購(gòu)買(mǎi)意圖；道具購(gòu)買(mǎi)模塊40，若多模態(tài)輸入信息中的購(gòu)買(mǎi)意圖為是，則根據(jù)所述道具信息打開(kāi)對(duì)應(yīng)的道具購(gòu)買(mǎi)顯示框，其中，道具購(gòu)買(mǎi)顯示框的開(kāi)啟命令與所述道具信息關(guān)聯(lián)。

本實(shí)施例中，所述系統(tǒng)還包括：

數(shù)量識(shí)別模塊50，用于識(shí)別多模態(tài)輸入信息中的購(gòu)買(mǎi)數(shù)量信息。

本實(shí)施例中，所述系統(tǒng)還包括：

購(gòu)買(mǎi)數(shù)量確認(rèn)模塊60，用于判斷多模態(tài)輸入信息中是否具有購(gòu)買(mǎi)數(shù)量信息，若有，則直接完成道具的購(gòu)買(mǎi)；若沒(méi)有，則保持道具購(gòu)買(mǎi)顯示框的顯示。

本實(shí)施例中，所述道具信息識(shí)別模塊20包括：

道具屬性識(shí)別單元，用于識(shí)別道具信息中的道具屬性信息。

本實(shí)施例中，所述系統(tǒng)還包括：。

購(gòu)買(mǎi)確認(rèn)模塊70：向用戶(hù)提示是否確認(rèn)購(gòu)買(mǎi)信息，并獲取用戶(hù)根據(jù)所述是否確認(rèn)購(gòu)買(mǎi)信息后給出的第二次多模態(tài)輸入信息，識(shí)別所述第二次多模態(tài)輸入信息中的確認(rèn)購(gòu)買(mǎi)信息，確認(rèn)購(gòu)買(mǎi)信息為是，根據(jù)確認(rèn)購(gòu)買(mǎi)信息完成道具的購(gòu)買(mǎi)。

以上內(nèi)容是結(jié)合具體的優(yōu)選實(shí)施方式對(duì)本發(fā)明所作的進(jìn)一步詳細(xì)說(shuō)明，不能認(rèn)定本發(fā)明的具體實(shí)施只局限于這些說(shuō)明。對(duì)于本發(fā)明所屬技術(shù)領(lǐng)域的普通技術(shù)人員來(lái)說(shuō)，在不脫離本發(fā)明構(gòu)思的前提下，還可以做出若干簡(jiǎn)單推演或替換，都應(yīng)當(dāng)視為屬于本發(fā)明的保護(hù)范圍。