專利名稱：基于遙控器的智能電視人機(jī)交互方法、裝置和系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及智能電視領(lǐng)域，特別是一種基于遙控器的智能電視人機(jī)交互方法、裝置和系統(tǒng)。
背景技術(shù)：
隨著社會(huì)的發(fā)展，電視將逐漸發(fā)展成為一個(gè)開(kāi)放的業(yè)務(wù)承載平臺(tái)，成為家庭智能娛樂(lè)終端。智能電視將擁有傳統(tǒng)電視廠商所不具備的應(yīng)用平臺(tái)優(yōu)勢(shì)。智能電視將實(shí)現(xiàn)網(wǎng)絡(luò)搜索、IP電視、視頻點(diǎn)播(VOD)、數(shù)字音樂(lè)、網(wǎng)絡(luò)新聞、網(wǎng)絡(luò)視頻電話等各種應(yīng)用服務(wù)。電視機(jī)正在成為繼計(jì)算機(jī)、手機(jī)之后的第三種信息訪問(wèn)終端，用戶可隨時(shí)訪問(wèn)自己需要的信息；電視機(jī)也將成為一種智能設(shè)備，實(shí)現(xiàn)電視、網(wǎng)絡(luò)和程序之間跨平臺(tái)搜索；智能電視還將是一個(gè)“娛樂(lè)中心”，用戶可以搜索電視頻道、錄制電視節(jié)目、能夠播放衛(wèi)星和有線電視節(jié)目以及網(wǎng)絡(luò)視頻。智能電視的到來(lái)，順應(yīng)了電視機(jī)高清化、網(wǎng)絡(luò)化、智能化的趨勢(shì)。除了這些“網(wǎng)絡(luò)化”、“智能化”之外，作為電視的基本功能，觀眾對(duì)電視節(jié)目更感興趣，比如電視劇、人物訪談、體育賽事、旅游風(fēng)光等電視節(jié)目。有時(shí)候，觀眾往往對(duì)電視畫面中的某一特定目標(biāo)感興趣，比如某一演員，運(yùn)動(dòng)員，某一標(biāo)志建筑等，并想進(jìn)一步了解該目標(biāo)的詳細(xì)情況，就需要對(duì)畫面中的某一目標(biāo)進(jìn)行方便的點(diǎn)選。和電腦上不同的是，要在電視上實(shí)現(xiàn)這些功能，只能依靠一個(gè)遙控器。如何利用遙控器，對(duì)電視畫面中感興趣的目標(biāo)進(jìn)行方便的點(diǎn)選，以便進(jìn)行后續(xù)的信息處理或網(wǎng)絡(luò)搜索，需要設(shè)計(jì)一種方便快捷的人機(jī)交互方法和系統(tǒng)。

發(fā)明內(nèi)容
本發(fā)明要解決的技術(shù)問(wèn)題是提供一種基于遙控器的智能電視人機(jī)交互方法、裝置和系統(tǒng)，使用戶利用遙控器即可對(duì)電視畫面中感興趣的目標(biāo)進(jìn)行方便的點(diǎn)選。

根據(jù)本發(fā)明的第一個(gè)方面，提供一種基于遙控器的智能電視人機(jī)交互裝置，包括遙控器模塊，適于接收用戶操作，產(chǎn)生相應(yīng)的控制信號(hào)；所述控制信號(hào)包括劃分當(dāng)前畫面的控制信號(hào)、選擇控制信號(hào)；服務(wù)器模塊，適于接收并解析所述控制信號(hào)以獲取指令；所述指令包括與劃分當(dāng)前畫面的控制信號(hào)對(duì)應(yīng)的劃分當(dāng)前畫面的指令、與選擇控制信號(hào)對(duì)應(yīng)的選擇區(qū)域的指令；感興趣區(qū)域生成模塊，適于根據(jù)所述劃分當(dāng)前畫面的指令，獲取當(dāng)前電視畫面并對(duì)其進(jìn)行分割，以獲取潛在區(qū)域并反饋給服務(wù)器模塊；所述服務(wù)器模塊還適于將潛在區(qū)域繪制在原始圖像上，成為潛在區(qū)域圖像；初步確定感興趣區(qū)域模塊，適于根據(jù)所述選擇區(qū)域的指令，選擇感興趣區(qū)域并將選定的感興趣區(qū)域反饋給服務(wù)器模塊；所述服務(wù)器模塊還適于將選定的感興趣區(qū)域繪制在原始圖像上，成為選定的感興趣區(qū)域圖像；輸出模塊，適于接收并輸出所述潛在區(qū)域圖像、選定的感興趣區(qū)域圖像。可選的，所述控制信號(hào)還包括調(diào)整區(qū)域控制信號(hào)；所述指令還包括與調(diào)整區(qū)域控制信號(hào)對(duì)應(yīng)的調(diào)整區(qū)域的指令；所述智能電視人機(jī)交互裝置還包括調(diào)整感興趣區(qū)域模塊，適于根據(jù)所述調(diào)整區(qū)域的指令，對(duì)選定的感興趣區(qū)域進(jìn)行位置、形狀和大小中的至少一項(xiàng)的調(diào)整，并將調(diào)整結(jié)果反饋給服務(wù)器模塊；所述服務(wù)器模塊還適于將調(diào)整后的感興趣區(qū)域繪制在原始圖像上，成為調(diào)整后的感興趣區(qū)域圖像；所述輸出模塊還適于輸出調(diào)整后的感興趣區(qū)域圖像。根據(jù)本發(fā)明的另一個(gè)方面，提供一種基于遙控器的智能電視人機(jī)交互系統(tǒng)，包括上述智能電視人機(jī)交互裝置；和電視模塊，適于接收輸出模塊發(fā)來(lái)的指令并根據(jù)指令進(jìn)行操作?？蛇x的，所述電視模塊接收并顯示來(lái)自輸出模塊的數(shù)據(jù)。根據(jù)本發(fā)明又一個(gè)方面，提供一種基于遙控器的智能電視人機(jī)交互方法，包括步驟一、接收用戶操作，產(chǎn)生劃分當(dāng)前畫面的控制信號(hào)；步驟二、解析該信號(hào)以獲取與劃分當(dāng)前畫面的控制信號(hào)相對(duì)應(yīng)的劃分當(dāng)前畫面的指令；步驟三、根據(jù)所述劃分當(dāng)前畫面的指令，獲取當(dāng)前電視畫面并對(duì)其進(jìn)行分割， 從而獲取潛在區(qū)域，將潛在區(qū)域繪制在原始圖像上，成為潛在區(qū)域圖像，并輸出潛在區(qū)域圖像；步驟四、接收用戶操作，產(chǎn)生選擇控制信號(hào)；步驟五、解析該信號(hào)以獲取與選擇控制信號(hào)相對(duì)應(yīng)的選擇區(qū)域的指令；步驟六、基于選擇區(qū)域的指令，將選擇的潛在區(qū)域繪制在原始圖像上，成為選定的感興趣區(qū)域圖像，并輸出選定的感興趣區(qū)域圖像。可選的，所述的智能電視人機(jī)交互方法，還包括步驟七、接收用戶操作，產(chǎn)生調(diào)整區(qū)域的控制信號(hào)；步驟八、解析該信號(hào)以獲取與所述調(diào)整區(qū)域的控制信號(hào)相對(duì)應(yīng)的調(diào)整區(qū)域的指令；步驟九、根據(jù)所述調(diào)整區(qū)域的指令，改變感興趣區(qū)域的位置、形狀和/或大小，將調(diào)整后的感興趣區(qū)域繪制在原始圖像上，成為調(diào)整后的感興趣區(qū)域圖像，并輸出調(diào)整后的感興趣區(qū)域圖像?？蛇x的，所述的智能電視人機(jī)交互方法，還包括步驟十、利用選定的感興趣區(qū)域所覆蓋的圖像信息，對(duì)選定的感興趣區(qū)進(jìn)一步進(jìn)行目標(biāo)分析、識(shí)別和信息檢索?？蛇x的，所述步驟六還包括如果用戶選擇多個(gè)區(qū)域，將所述多個(gè)區(qū)域進(jìn)行區(qū)域合并，將合并之后的區(qū)域作為選定的感興趣區(qū)域。與現(xiàn)有技術(shù)相比，本發(fā)明的優(yōu)點(diǎn)在于(I)自動(dòng)劃分屏幕區(qū)域，提供給觀眾可選區(qū)域，觀眾利用普通遙控器，就可以方便的進(jìn)行目標(biāo)區(qū)域的點(diǎn)選，該方案使用簡(jiǎn)捷，符合當(dāng)前觀眾的使用習(xí)慣，是一種方便有效的人機(jī)交互方式；(2)用戶還可以進(jìn)一步調(diào)整選定的區(qū)域大小，更精確的限定感興趣的區(qū)域；(3)確定了感興趣區(qū)域之后，可以根據(jù)實(shí)際需要進(jìn)行后續(xù)的處理，比如識(shí)別該目標(biāo)，根據(jù)識(shí)別結(jié)果進(jìn)行網(wǎng)絡(luò)搜索相關(guān)信息等操作。


圖1是本發(fā)明一個(gè)實(shí)施例中提供的智能電視人機(jī)交互裝置的結(jié)構(gòu)框圖；圖2是圖1中感興趣區(qū)域生成模塊的處理結(jié)果示意圖；圖3是圖1中初步確定感興趣區(qū)域模塊的處理結(jié)果示意圖；圖4是圖1中初步確定感興趣區(qū)域模塊的合并處理結(jié)果示意圖；圖5是圖1中調(diào)整感興趣區(qū)域模塊的位置調(diào)整結(jié)果示意圖；圖6是圖1中調(diào)整感興趣區(qū)域模塊的尺寸調(diào)整結(jié)果示意圖7是本發(fā)明一個(gè)實(shí)施例中提供的智能電視人機(jī)交互系統(tǒng)的結(jié)構(gòu)框圖；圖8是圖7所述智能電視人機(jī)交互系統(tǒng)的示例的工作流程圖；圖9是本發(fā)明一個(gè)實(shí)施例中提供的智能電視人機(jī)交互方法流程圖。
具體實(shí)施例方式為了使本發(fā)明的目的、技術(shù)方案及優(yōu)點(diǎn)更加清楚明白，以下結(jié)合附圖，對(duì)本發(fā)明進(jìn)一步詳細(xì)說(shuō)明。應(yīng)當(dāng)理解，此處所描述的具體實(shí)施例僅僅用以解釋本發(fā)明，并不用于限定本發(fā)明。根據(jù)本發(fā)明一個(gè)實(shí)施例，提供一種智能電視人機(jī)交互裝置。如圖1所示，該裝置包括遙控器模塊101，適于接收用戶操作，并產(chǎn)生相應(yīng)的控制信號(hào)，包括(I)用戶按下遙控器模塊的某個(gè)功能鍵，可以產(chǎn)生劃分當(dāng)前畫面的控制信號(hào)；

(2)為了對(duì)劃分后的區(qū)域進(jìn)行選擇，初步確定感興趣的區(qū)域，按下遙控器模塊的某個(gè)數(shù)字鍵或字母鍵，可以產(chǎn)生數(shù)字或字母選擇控制信號(hào)；(3)當(dāng)初步確定的感興趣區(qū)域和真正的區(qū)域有一些位置或大小的偏差，可以利用遙控器的某些功能按鍵，進(jìn)行區(qū)域中心位置的上下左右調(diào)整，以及區(qū)域形狀的選擇，和/或區(qū)域面積的擴(kuò)大縮小等調(diào)整，直到調(diào)整后的區(qū)域滿足用戶的要求。例如，為了調(diào)整選定區(qū)域的大小和位置，按下遙控器模塊的“上” “下” “左” “右”等方向按鍵，可以產(chǎn)生區(qū)域移動(dòng)控制信號(hào)；按下“擴(kuò)大”或“縮小”按鍵，可以產(chǎn)生區(qū)域擴(kuò)大或縮小控制信號(hào)。本實(shí)施例中，所述遙控器模塊101可以是長(zhǎng)虹電視機(jī)遙控器或創(chuàng)維電視機(jī)遙控器。在本發(fā)明的其他實(shí)施例中，用戶也可以利用帶鼠標(biāo)定位功能的遙控器模塊101，將鼠標(biāo)直接移至感興趣區(qū)域內(nèi)部，并按確定鍵發(fā)出數(shù)字選擇信號(hào)。服務(wù)器模塊103，，適于接收并解析遙控器模塊101發(fā)來(lái)的信號(hào)以獲取指令(指令格式可以是二進(jìn)制編碼格式，不同的編碼代表不同的指令)。如果信號(hào)中包含的指令是劃分當(dāng)前畫面的指令、選擇區(qū)域的指令、或者調(diào)整區(qū)域的指令，進(jìn)行如下處理(I)如果接收到的指令是劃分當(dāng)前畫面的指令，服務(wù)器模塊103將調(diào)用感興趣區(qū)域生成模塊104，接收候選感興趣區(qū)域生成模塊104的結(jié)果，并調(diào)用輸出模塊105輸出候選區(qū)域；(2)如果接收到的指令是選擇區(qū)域的指令，即選定感興趣區(qū)域指令(例如數(shù)字鍵)，則服務(wù)器模塊103調(diào)用初步確定感興趣區(qū)域模塊106，接收初步確定感興趣區(qū)域模塊106的結(jié)果，并調(diào)用輸出模塊105輸出初步確定區(qū)域；和(3)如果接收到的指令是調(diào)整區(qū)域的指令，則服務(wù)器模塊103調(diào)用調(diào)整感興趣區(qū)域模塊107，接收調(diào)整感興趣區(qū)域模塊107的結(jié)果，并調(diào)用輸出模塊105輸出最終確定區(qū)域。感興趣區(qū)域生成模塊104，適于獲取當(dāng)前電視畫面并對(duì)其進(jìn)行分割，具體包括(I)在畫面的固定位置生成大小一致的幾個(gè)候選區(qū)域，或者隨機(jī)生成一些候選區(qū)域，這些區(qū)域可用矩形或圓形參數(shù)表示，比如矩形的左上角坐標(biāo)，矩形的長(zhǎng)寬等信息。可以對(duì)這些候選區(qū)域進(jìn)行位置標(biāo)號(hào)。感興趣區(qū)域生成模塊104將得到的區(qū)域信息反饋給服務(wù)器模塊103，服務(wù)器模塊103將接收到的反饋數(shù)據(jù)繪制在原始圖像上，發(fā)給輸出模塊105。其中，區(qū)域信息可以表示成
{m, (I, xl, yl, wl, hi)，(2，x2, y2, w2, h2)，· · · }其中m表示分析得到的m個(gè)潛在區(qū)域,即分割區(qū)域，(I, xl, yl, wl, hi)表示第一個(gè)潛在區(qū)域的矩形表示，用矩形左上角坐標(biāo)(xl，yl)和矩形長(zhǎng)寬(wl，hl)表示。例如，如圖2所示，將電視的整個(gè)畫面平均分成互不重疊的9個(gè)區(qū)域塊，3行3列，然后按照順序在每個(gè)區(qū)域塊中標(biāo)上醒目的數(shù)字1、2、3、4、5、6、7、8、9，供后期遙控器利用數(shù)字按鍵進(jìn)行方便的選擇。區(qū)域數(shù)據(jù)信息表示為{9，(1,10,80,230,100), (2，240，80，230，100)，(3,270,80,230,100)，(4,10,180,230,100), ···}。初步確定·感興趣區(qū)域模塊106，適于根據(jù)選擇區(qū)域的指令(例如，遙控器的數(shù)字按鍵)初步確定屏幕上給出的某個(gè)候選區(qū)域。例如，如圖3所示，用戶選擇區(qū)域6。確定感興趣區(qū)域模塊106將數(shù)據(jù)信息{1，(6，470，180，230，100)}反饋給服務(wù)器模塊103，服務(wù)器模塊103將接收到的反饋數(shù)據(jù)繪制在原始圖像上，發(fā)給輸出模塊105。優(yōu)選的，初步確定感興趣區(qū)域模塊106也可以根據(jù)選擇區(qū)域的指令選擇幾個(gè)區(qū)域進(jìn)行區(qū)域合并，將合并之后的大區(qū)域作為感興趣區(qū)域。例如，如圖4所示，用戶選擇區(qū)域3和6，系統(tǒng)將把區(qū)域3和6進(jìn)行合并，將區(qū)域3和6的外接矩形作為潛在區(qū)域，如圖4所示。則確定感興趣區(qū)域模塊106將數(shù)據(jù)信息{1，(6，470，80，230，200)}反饋給服務(wù)器模塊103，服務(wù)器模塊103將接收到的反饋數(shù)據(jù)繪制在原始圖像上，發(fā)給輸出模塊105。調(diào)整感興趣區(qū)域模塊107，適于根據(jù)調(diào)整區(qū)域的指令(例如，遙控器的上下左右方向或擴(kuò)大縮小等按鍵)，對(duì)初步確定的感興趣區(qū)域進(jìn)行位置、形狀或大小的調(diào)整，直到調(diào)整后的區(qū)域滿足用戶的要求，并將調(diào)整結(jié)果反饋給服務(wù)器模塊103，服務(wù)器模塊103將接收到的反饋數(shù)據(jù)繪制在原始圖像上，發(fā)給輸出模塊105。例如，如圖5所示，一旦開(kāi)始調(diào)整區(qū)域，該區(qū)域?qū)⒁詤^(qū)域中心點(diǎn)為基準(zhǔn)，由遙控器模塊的上下左右方向鍵調(diào)整區(qū)域中心點(diǎn)位置，相應(yīng)的區(qū)域位置也跟著調(diào)整，調(diào)整后的區(qū)域數(shù)據(jù)信息為U，(6，380，100，230，200)}。區(qū)域中心點(diǎn)位置調(diào)整好之后，如果區(qū)域大小還需要調(diào)整，則根據(jù)遙控器的擴(kuò)大縮小按鍵，對(duì)區(qū)域大小進(jìn)一步調(diào)整。例如，如圖6所示，以區(qū)域中心點(diǎn)為基準(zhǔn)，對(duì)上面得到的區(qū)域進(jìn)行一定比例的縮小，放縮比例可以根據(jù)實(shí)際情況提前設(shè)定，如圖6所示，調(diào)整后的區(qū)域數(shù)據(jù)信息為{1，(6，420，130，150，140)}ο服務(wù)器模塊103、感興趣區(qū)域生成模塊104、初步確定感興趣區(qū)域模塊106以及調(diào)整感興趣區(qū)域模塊107可以由微處理器芯片分別實(shí)現(xiàn)，或在一個(gè)微處理器芯片上實(shí)現(xiàn)這些模塊。輸出模塊105,接收并輸出服務(wù)器模塊103發(fā)來(lái)的數(shù)據(jù)。所述輸出模塊105可以輸出到電視機(jī)。結(jié)合上述裝置，本發(fā)明一個(gè)實(shí)施例中，提供一種智能電視人機(jī)交互系統(tǒng)。如圖7所示，該系統(tǒng)包括上述的智能電視人機(jī)交互裝置和電視模塊108。所述電視模塊108適于接收輸出模塊105發(fā)來(lái)的具體指令(包括傳統(tǒng)遙控器涉及的命令，比如換臺(tái)，調(diào)音量等等)并根據(jù)指令進(jìn)行操作和顯示圖像，所述操作、處理過(guò)程皆為目前學(xué)術(shù)界和工業(yè)界的公知技術(shù)，不再贅述。
如圖8所示，該系統(tǒng)的示例工作過(guò)程如下S101、遙控器按鍵發(fā)出分割當(dāng)前畫面的信號(hào)；即當(dāng)觀眾對(duì)當(dāng)前畫面中的某區(qū)域感興趣時(shí)，需要按下遙控器上的某個(gè)功能按鍵，并發(fā)出相應(yīng)信號(hào)；S102、服務(wù)器模塊解析該信號(hào)以獲取指令，根據(jù)獲取的分割當(dāng)前畫面的指令，調(diào)用感興趣區(qū)域生成|吳塊；S103、感興趣區(qū)域生成模塊將畫面分割，并將分割結(jié)果反饋給服務(wù)器模塊；感興趣區(qū)域生成模塊首先截取當(dāng)前畫面，在屏幕上得到一些候選的感興趣區(qū)域，并按順序進(jìn)行標(biāo)號(hào)，最后將感興趣區(qū)域位置信息和標(biāo)號(hào)信息反饋給服務(wù)器模塊；S104、服務(wù)器模塊調(diào)用輸出模塊輸出編號(hào)之后的分割結(jié)果；服務(wù)器模塊接收得到的候選感興趣區(qū)域，并調(diào)用輸出模塊輸出候選感興趣區(qū)域，對(duì)候選感興趣區(qū)域進(jìn)行輸出，可以利用矩形或者圓形等，并將標(biāo)號(hào)標(biāo)示在區(qū)域旁；S105、遙控器按數(shù)字鍵選擇某一個(gè)候選感興趣區(qū)域；用戶根據(jù)屏幕顯示的候選感興趣區(qū)域，利用數(shù)字鍵進(jìn)行點(diǎn)選，選擇初步的感興趣區(qū)域標(biāo)號(hào)，并發(fā)送選擇控制信號(hào)；本發(fā)明其他實(shí)施例中，可以利用帶鼠標(biāo)定位功能的遙控器，將鼠標(biāo)直接移至感興趣區(qū)域內(nèi)部，并按確定鍵；S106、服務(wù)器模塊解析該選擇控制信號(hào)以獲取指令，并調(diào)用初步確定感興趣區(qū)域模塊，初步確定感興趣區(qū)域并將其他的區(qū)域屏蔽掉，調(diào)用輸出模塊輸出初步結(jié)果；S107、當(dāng)初步確定的感興趣區(qū)域需要進(jìn)一步調(diào)整時(shí)，用戶操作遙控器的上下左右或擴(kuò)大縮小按鍵；S108、服務(wù)器模塊解析該調(diào)整信號(hào)以獲取指令，調(diào)用調(diào)整感興趣區(qū)域模塊，調(diào)整感興趣區(qū)域模塊根據(jù)具 體的命令進(jìn)一步調(diào)整感興趣區(qū)域，直到用戶滿意為止，最后調(diào)用輸出模塊輸出調(diào)整后的結(jié)果。與上述的裝置相應(yīng)的，在本發(fā)明一個(gè)實(shí)施例中，提供一種智能電視人機(jī)交互方法，主要包括生成候選感興趣區(qū)域，初步確定感興趣區(qū)域，調(diào)整感興趣區(qū)域三個(gè)步驟。如圖9所示，所述方法具體包括S201、接收用戶操作，產(chǎn)生控制信號(hào)；所述控制信號(hào)包括劃分當(dāng)前畫面的控制信號(hào)；其過(guò)程與上述遙控器模塊101的工作過(guò)程相同，不再贅述；S202、解析該信號(hào)以獲取指令；所述指令包括與劃分當(dāng)前畫面的控制信號(hào)相對(duì)應(yīng)的劃分當(dāng)前畫面的指令；S203、根據(jù)所述劃分當(dāng)前畫面的指令，對(duì)當(dāng)前電視畫面進(jìn)行分割，獲取潛在區(qū)域，將潛在區(qū)域繪制在原始圖像上，成為潛在區(qū)域圖像，并輸出潛在區(qū)域圖像；其過(guò)程與上述服務(wù)器模塊和感興趣區(qū)域生成模塊104的工作過(guò)程相同，不再贅述；S204、接收用戶操作，產(chǎn)生控制信號(hào)；所述控制信號(hào)包括選擇控制信號(hào)；S205、解析該信號(hào)以獲取指令；所述指令包括與選擇控制信號(hào)相對(duì)應(yīng)的選擇區(qū)域的指令；S206、基于選擇區(qū)域的指令，將選擇的潛在區(qū)域繪制在原始圖像上，成為選定的感興趣區(qū)域圖像，并輸出選定的感興趣區(qū)域圖像；其過(guò)程與上述初步確定感興趣區(qū)域模塊106的工作過(guò)程相同，不再贅述。進(jìn)一步的，步驟S206還可以包括
如果用戶選擇多個(gè)區(qū)域，將所述多個(gè)區(qū)域進(jìn)行區(qū)域合并，將合并之后的大區(qū)域作為選定的感興趣區(qū)域。該步驟可以更完整的確定感興趣的區(qū)域。進(jìn)一步的，智能電視人機(jī)交互方法還包括S207、接收用戶操作，產(chǎn)生控制信號(hào)；所述控制信號(hào)包括調(diào)整區(qū)域的控制信號(hào)；S208、解析該信號(hào)以獲取指令；所述指令包括與所述調(diào)整區(qū)域的控制信號(hào)相對(duì)應(yīng)的調(diào)整區(qū)域的指令；S209、根據(jù)所述調(diào)整區(qū)域的指令，改變感興趣區(qū)域的位置、形狀或大小，將調(diào)整后的感興趣區(qū)域繪制在原始圖像上，成為調(diào)整后的感興趣區(qū)域圖像，并輸出調(diào)整后的感興趣區(qū)域圖像。其過(guò)程與上述調(diào)整感興趣區(qū)域模塊107的工作過(guò)程相同，不再贅述。該步驟可以更精確的確定感興趣的區(qū)域。通過(guò)以上方式確定了感興趣區(qū)域之后，可以根據(jù)實(shí)際需要進(jìn)行后續(xù)的處理，比如識(shí)別該目標(biāo)，根據(jù)識(shí)別結(jié)果進(jìn)行網(wǎng)絡(luò)搜索相關(guān)信息等操作。即上述方法還可以包括S210、利用選定感興趣區(qū)域所覆蓋的圖像信息，對(duì)選定感興趣區(qū)進(jìn)一步進(jìn)行目標(biāo)分析和識(shí)別。具體的，利用選定感興趣區(qū)域的數(shù)據(jù)信息(比如其覆蓋的圖像信息)，利用服務(wù)器模塊存儲(chǔ)的數(shù)據(jù)，對(duì)區(qū)域內(nèi)容進(jìn)一步進(jìn)行目標(biāo)分析和識(shí)別，包括并不限于，演員，運(yùn)動(dòng)員，采訪嘉賓，標(biāo)志性建筑等。以人臉為例，服務(wù)器模塊可以提前存儲(chǔ)該電視劇中出現(xiàn)的角色的人臉圖像，并對(duì)這些人臉圖像進(jìn)行了名字標(biāo)注，建立人臉庫(kù)。將感區(qū)域圖像信息和人臉庫(kù)中的圖像信息進(jìn)行比對(duì)，從而確定感興趣區(qū)域中的角色身份，根據(jù)該身份在數(shù)據(jù)庫(kù)中或網(wǎng)絡(luò)上進(jìn)行該角色的進(jìn)一步信息檢索，從而呈現(xiàn)給觀眾更豐富的關(guān)于該角色的各種信息。信息檢索方法包括并不限于圖像匹配，目標(biāo)匹配，關(guān)鍵字檢索等，并可以利用特定電視節(jié)目的演員信息，嘉賓信息等。信息檢索的結(jié)果可以是圖像、視頻或者文字等信息。上述方案通過(guò)在當(dāng)前畫`面的固定位置或隨機(jī)位置生成一些潛在區(qū)域，并由用戶利用遙控器數(shù)字鍵進(jìn)行點(diǎn)選，方向鍵進(jìn)行位移，擴(kuò)大縮小鍵進(jìn)行區(qū)域大小調(diào)整，可以方便的進(jìn)行感興趣區(qū)域的選擇，不需要對(duì)傳統(tǒng)遙控器做過(guò)多的改進(jìn)，該方案使用簡(jiǎn)捷，是一種方便有效的人機(jī)交互方式。應(yīng)該注意到并理解，在不脫離后附的權(quán)利要求所要求的本發(fā)明的精神和范圍的情況下，能夠?qū)ι鲜鲈敿?xì)描述的本發(fā)明做出各種修改和改進(jìn)。因此，要求保護(hù)的技術(shù)方案的范圍不受所給出的任何特定示范教導(dǎo)的限制。
權(quán)利要求
1.一種基于遙控器的智能電視人機(jī)交互裝置，包括 遙控器模塊，適于接收用戶操作，產(chǎn)生相應(yīng)的控制信號(hào)；所述控制信號(hào)包括劃分當(dāng)前畫面的控制信號(hào)、選擇控制信號(hào)； 服務(wù)器模塊，適于接收并解析所述控制信號(hào)以獲取指令；所述指令包括與劃分當(dāng)前畫面的控制信號(hào)對(duì)應(yīng)的劃分當(dāng)前畫面的指令、與選擇控制信號(hào)對(duì)應(yīng)的選擇區(qū)域的指令；感興趣區(qū)域生成模塊，適于根據(jù)所述劃分當(dāng)前畫面的指令，獲取當(dāng)前電視畫面并對(duì)其進(jìn)行分割，以獲取潛在區(qū)域并反饋給服務(wù)器模塊；所述服務(wù)器模塊還適于將潛在區(qū)域繪制在原始圖像上，成為潛在區(qū)域圖像； 初步確定感興趣區(qū)域模塊，適于根據(jù)所述選擇區(qū)域的指令，選擇感興趣區(qū)域并將選定的感興趣區(qū)域反饋給服務(wù)器模塊；所述服務(wù)器模塊還適于將選定的感興趣區(qū)域繪制在原始圖像上，成為選定的感興趣區(qū)域圖像；和 輸出模塊，適于接收并輸出所述潛在區(qū)域圖像、選定的感興趣區(qū)域圖像。
2.根據(jù)權(quán)利要求1所述的智能電視人機(jī)交互裝置，其中， 所述控制信號(hào)還包括調(diào)整區(qū)域控制信號(hào)； 所述指令還包括與調(diào)整區(qū)域控制信號(hào)對(duì)應(yīng)的調(diào)整區(qū)域的指令； 所述智能電視人機(jī)交互裝置還包括調(diào)整感興趣區(qū)域模塊，適于根據(jù)所述調(diào)整區(qū)域的指令，對(duì)選定的感興趣區(qū)域進(jìn)行位置、形狀和大小中的至少一項(xiàng)的調(diào)整，并將調(diào)整結(jié)果反饋給服務(wù)器模塊；所述服務(wù)器模塊還適于將調(diào)整后的感興趣區(qū)域繪制在原始圖像上，成為調(diào)整后的感興趣區(qū)域圖像； 所述輸出模塊還適于輸出調(diào)整后的感興趣區(qū)域圖像。
3.一種基于遙控器的智能電視人機(jī)交互系統(tǒng)，包括 如權(quán)利要求1 2之一所述的智能電視人機(jī)交互裝置；和 電視模塊，適于接收輸出模塊發(fā)來(lái)的指令并根據(jù)指令進(jìn)行操作。
4.根據(jù)權(quán)利要求3所述的智能電視人機(jī)交互系統(tǒng)，其中，所述電視模塊接收并顯示來(lái)自輸出模塊的數(shù)據(jù)。
5.一種基于遙控器的智能電視人機(jī)交互方法，包括 步驟一、接收用戶操作，產(chǎn)生劃分當(dāng)前畫面的控制信號(hào)； 步驟二、解析該信號(hào)以獲取與劃分當(dāng)前畫面的控制信號(hào)相對(duì)應(yīng)的劃分當(dāng)前畫面的指令; 步驟三、根據(jù)所述劃分當(dāng)前畫面的指令，獲取當(dāng)前電視畫面并對(duì)其進(jìn)行分割，從而獲取潛在區(qū)域，將潛在區(qū)域繪制在原始圖像上，成為潛在區(qū)域圖像，并輸出潛在區(qū)域圖像；步驟四、接收用戶操作，產(chǎn)生選擇控制信號(hào)； 步驟五、解析該信號(hào)以獲取與選擇控制信號(hào)相對(duì)應(yīng)的選擇區(qū)域的指令； 步驟六、基于選擇區(qū)域的指令，將選擇的潛在區(qū)域繪制在原始圖像上，成為選定的感興趣區(qū)域圖像，并輸出選定的感興趣區(qū)域圖像。
6.根據(jù)權(quán)利要求5所述的智能電視人機(jī)交互方法，還包括 步驟七、接收用戶操作，產(chǎn)生調(diào)整區(qū)域的控制信號(hào)； 步驟八、解析該信號(hào)以獲取與所述調(diào)整區(qū)域的控制信號(hào)相對(duì)應(yīng)的調(diào)整區(qū)域的指令； 步驟九、根據(jù)所述調(diào)整區(qū)域的指令，改變感興趣區(qū)域的位置、形狀和/或大小，將調(diào)整后的感興趣區(qū)域繪制在原始圖像上，成為調(diào)整后的感興趣區(qū)域圖像，并輸出調(diào)整后的感興趣區(qū)域圖像。
7.根據(jù)權(quán)利要求5所述的智能電視人機(jī)交互方法，還包括 步驟十、利用選定的感興趣區(qū)域所覆蓋的圖像信息，對(duì)選定的感興趣區(qū)進(jìn)一步進(jìn)行目標(biāo)分析、識(shí)別和信息檢索。
8.根據(jù)權(quán)利要求5所述的智能電視人機(jī)交互方法，步驟六還包括 如果用戶選擇多個(gè)區(qū)域，將所述多個(gè)區(qū)域進(jìn)行區(qū)域合并，將合并之后的區(qū)域作為選定的感興趣區(qū)域。
全文摘要
本發(fā)明提供一種基于遙控器的智能電視人機(jī)交互裝置，包括遙控器模塊，適于接收用戶操作，產(chǎn)生相應(yīng)的控制信號(hào)；服務(wù)器模塊，適于接收并解析所述控制信號(hào)以獲取指令；感興趣區(qū)域生成模塊，適于根據(jù)所述劃分當(dāng)前畫面的指令，獲取當(dāng)前電視畫面并對(duì)其進(jìn)行分割，以獲取潛在區(qū)域并反饋給服務(wù)器模塊；初步確定感興趣區(qū)域模塊，適于根據(jù)所述選擇區(qū)域的指令，選擇感興趣區(qū)域并將選定的感興趣區(qū)域反饋給服務(wù)器模塊；輸出模塊，適于接收并輸出潛在區(qū)域圖像、選定的感興趣區(qū)域圖像。還提供包含上述裝置的系統(tǒng)，以及基于上述裝置的方法。所述基于遙控器的智能電視人機(jī)交互方法、裝置和系統(tǒng)，使用戶利用遙控器即可對(duì)電視畫面中感興趣的目標(biāo)進(jìn)行方便的點(diǎn)選。
文檔編號(hào)H04N21/422GK103051942SQ20111031223
公開(kāi)日2013年4月17日 申請(qǐng)日期2011年10月14日 優(yōu)先權(quán)日2011年10月14日
發(fā)明者劉宏, 錢躍良, 王向東 申請(qǐng)人:中國(guó)科學(xué)院計(jì)算技術(shù)研究所