此可以省去以往為校正視線而需要專門地執(zhí)行的繁瑣的過(guò)程。
[0130]以下，參照?qǐng)D30而對(duì)顯示裝置100的顯示方法進(jìn)行說(shuō)明。
[0131]首先，顯示裝置100從外部裝置接收用戶的視線信息以及手勢(shì)信息(S310)。此時(shí)，外部裝置可以是為了收集視線信息以及用戶的手勢(shì)等而比較靠近用戶布置的裝置。對(duì)于特定的情況而言，外部裝置還可以實(shí)現(xiàn)為顯示裝置100的內(nèi)部構(gòu)成要素。外部裝置不僅收集視線信息以及手勢(shì)信息，還可以收集用戶的語(yǔ)音信息。而且把收集到的信息傳送到顯示裝置 100。
[0132]此時(shí)傳送的信息可以是未加工的，或者可以是加工的信息。未加工的信息例如意味著拍攝用戶身體的一部分的圖像本身，加工的信息則是對(duì)拍攝用戶身體的一部分的圖像所包含的用戶的手勢(shì)的進(jìn)行識(shí)別的信息。在未加工的信息被傳送到顯示裝置100的情況下，如上述的多樣的實(shí)施例，可以在顯示裝置100的控制部100中加工信息。
[0133]而且，顯示裝置100利用從外部裝置接收的視線信息而判斷用戶的視線指向所述畫面，且當(dāng)檢測(cè)到對(duì)應(yīng)于接收的手勢(shì)信息的用戶手勢(shì)時(shí)，顯示出畫面上預(yù)設(shè)的對(duì)象(S320)。即，在與用戶的視線一并識(shí)別到用戶的手勢(shì)時(shí)，可以顯示預(yù)設(shè)的對(duì)象。此外，可以利用用戶的語(yǔ)音來(lái)替代手勢(shì)。
[0134]在此，對(duì)象可以顯示為用戶不能選擇的非激活狀態(tài)，而當(dāng)判斷為用戶的視線處在對(duì)象時(shí)，可以顯示為激活狀態(tài)。為了表示處于激活狀態(tài)，對(duì)象的大小可以調(diào)大，或者可以在對(duì)象上顯示加亮區(qū)或邊框。換句話說(shuō)，為了能夠區(qū)別于用戶的視線并未處于上面的剩余的對(duì)象，用戶的視線所處的對(duì)象可以變更而顯示。
[0135]圖31是用于說(shuō)明根據(jù)本發(fā)明的一實(shí)施例的顯示裝置的整體操作的流程圖。
[0136]根據(jù)本發(fā)明的一實(shí)施例的顯示裝置100的整體操作可以劃分為〈1、識(shí)別>、〈2-1、引導(dǎo)〉、〈2-2、執(zhí)行〉、〈3、解除〉等操作。參照?qǐng)D31，首先，如果與用戶的視線一并檢測(cè)到用戶身體的一部分，則顯示裝置100可以識(shí)別為進(jìn)入了交互作用模式(S3110)。在此情況下，與當(dāng)前顯示于顯示部100上的畫面相關(guān)的信息或者與當(dāng)前的狀態(tài)下可執(zhí)行的功能相關(guān)的信息可以以文本、圖像、影像、音響等多樣的形態(tài)提供給用戶。例如，可選擇的菜單或者圖標(biāo)等對(duì)象可以顯示于顯示裝置100上。
[0137]之后，如果在顯示于顯示裝置100上的菜單或者圖標(biāo)等對(duì)象上檢測(cè)到視線的移動(dòng)，則根據(jù)該視線的移動(dòng)來(lái)執(zhí)行引導(dǎo)操作(S3120a)。在此情況下，可以提供用于告知視線所處的位置的視覺(jué)效果。例如，視線所在處的圖標(biāo)的形態(tài)可以與視線并不位于該處的圖標(biāo)的形態(tài)不同地變化(例如，加亮區(qū))。
[0138]在用戶的視線處在顯示于顯示裝置100上的特定的對(duì)象的狀態(tài)下，如果檢測(cè)到預(yù)設(shè)的手勢(shì)，則可以執(zhí)行對(duì)應(yīng)于特定的對(duì)象及已設(shè)定的手勢(shì)的功能(S3120b)。這些操作在上述的實(shí)施例中進(jìn)行過(guò)具體的說(shuō)明，因此在重復(fù)的范圍內(nèi)將省去反復(fù)的說(shuō)明。
[0139]另外，上述的用戶與顯示裝置100之間的交互作用只限于用戶身體的一部分被檢測(cè)出的情況下執(zhí)行。即，如果不能檢測(cè)出兩個(gè)當(dāng)中的任意一個(gè)，交互作用模式就會(huì)解除(S3130)ο
[0140]圖32是用于更為具體地說(shuō)明根據(jù)本發(fā)明的一實(shí)施例的顯示裝置的整體操作的流程圖。
[0141]參照?qǐng)D32，顯不裝置100處于非交互作用模式(Non-1nteract1n mode) (S3201)。在非交互作用模式中，顯示裝置100判斷是否與視線一并檢測(cè)到手勢(shì)(S卩，用戶身體的一部分)(S3201)。如果判斷為未被檢測(cè)到，則會(huì)保持非交互作用模式，而如果判斷為被檢測(cè)到，則判斷是否識(shí)別到預(yù)設(shè)的手勢(shì)(S3205)。在此，預(yù)設(shè)的手勢(shì)是指通過(guò)引發(fā)而使顯示裝置100進(jìn)入交互作用模式的手勢(shì)，其表示特定的手型、特定的語(yǔ)音、特定的聲音等多樣的形態(tài)。
[0142]當(dāng)判斷為識(shí)別到預(yù)設(shè)的手勢(shì)時(shí)，顯示裝置100進(jìn)入交互作用模式(S3207)。即，用于與用戶交互作用的UI畫面顯示在顯示裝置100的顯示部上。UI畫面包含可選擇的對(duì)象，對(duì)象與顯不裝置100的功能的執(zhí)彳丁有關(guān)。
[0143]在交互作用模式下判斷是否識(shí)別到視線(S3209)，當(dāng)判斷為檢測(cè)到手勢(shì)(S3211)，而且判斷為發(fā)生了視線的移動(dòng)(S3213)時(shí)，顯示裝置100判斷視線所處的位置上是否存在對(duì)象(S3215)。如果視線所處的位置上存在對(duì)象，則顯示裝置100激活與視線對(duì)應(yīng)的對(duì)象(S3217)。在此，激活對(duì)象是指差別化地顯示出對(duì)應(yīng)于視線的對(duì)象和不對(duì)應(yīng)于視線的對(duì)象。之后，當(dāng)判斷為識(shí)別到預(yù)設(shè)的手勢(shì)時(shí)(S3219)，執(zhí)行與手勢(shì)及對(duì)象對(duì)應(yīng)的功能(S3221)。在執(zhí)行功能以后，顯示裝置100可以重新進(jìn)入非交互作用模式。
[0144]另外，顯示裝置100在如上所述的一系列的操作中可以校正檢測(cè)出的用戶的視線。在上述的多樣的實(shí)施例中已對(duì)這些操作進(jìn)行過(guò)具體的說(shuō)明，因此將省略重復(fù)的說(shuō)明。
[0145]根據(jù)上述的多樣的實(shí)施例的顯示裝置的顯示方法，用戶可以在僅限于同時(shí)識(shí)別到視線和手勢(shì)的情況下獲得用于控制顯示裝置100的對(duì)象。因此能夠防止用戶不經(jīng)意的情況下顯示出遮擋畫面的對(duì)象。另外，在用戶與顯示裝置之間進(jìn)行交互作用的過(guò)程中，能夠自然地執(zhí)行視線校正，因此可以省去以往為校正而專門執(zhí)行的繁瑣的過(guò)程。
[0146]另外，根據(jù)上述的多樣的實(shí)施例的顯示裝置的控制方法可以實(shí)現(xiàn)為程序而提供到顯示裝置或者輸入裝置。尤其，包括顯示裝置的控制方法的程序可以存儲(chǔ)到非易失性可讀介質(zhì)(non-transitory computer readable medium)而提供。
[0147]非易失性可讀介質(zhì)不是指寄存器、緩存、內(nèi)存等在短時(shí)間內(nèi)存儲(chǔ)數(shù)據(jù)的介質(zhì)，而是指半永久性地存儲(chǔ)數(shù)據(jù)并可通過(guò)儀器來(lái)讀取(reading)的介質(zhì)。具體而言，上述多樣的應(yīng)用或者程序可以存儲(chǔ)到CD、DVD、硬盤、藍(lán)光光碟、USB、存儲(chǔ)卡、ROM等非易失性可讀介質(zhì)而提供。
[0148]另外，以上對(duì)本發(fā)明的優(yōu)選的實(shí)施例進(jìn)行了圖示和說(shuō)明，然而本發(fā)明并不局限于所述特定的實(shí)施例，只要是本發(fā)明所屬的技術(shù)領(lǐng)域中具有基本知識(shí)的人員皆可在不脫離權(quán)利要求書(shū)中請(qǐng)求保護(hù)的本發(fā)明主旨的情況下實(shí)現(xiàn)多樣的變形實(shí)施，而且這些變形實(shí)施不能脫離本發(fā)明的技術(shù)思想或前景而得到個(gè)別的理解。
【主權(quán)項(xiàng)】
1.一種顯示裝置，包括: 通信接口部，從外部裝置接收用戶的視線信息以及用戶手勢(shì)信息； 顯示部，顯示預(yù)設(shè)的畫面；以及 控制部，當(dāng)利用接收的所述視線信息判斷為用戶的視線指向所述畫面，而且檢測(cè)到對(duì)應(yīng)于接收的所述手勢(shì)信息的用戶手勢(shì)時(shí)，控制所述顯示部以將預(yù)設(shè)的對(duì)象顯示于所述畫面。2.如權(quán)利要求1所述的顯示裝置，其特征在于，所述控制部檢測(cè)所述畫面上的所述用戶的視線。3.如權(quán)利要求2所述的顯示裝置，其特征在于，當(dāng)判斷為檢測(cè)出的所述視線并不對(duì)應(yīng)于所述對(duì)象被顯示出的位置，而且識(shí)別到預(yù)設(shè)的用戶手勢(shì)時(shí)，所述控制部把視線校正到與所檢測(cè)出的所述視線最接近的對(duì)象被顯示出的位置。4.如權(quán)利要求2所述的顯示裝置，其特征在于， 所述控制部根據(jù)輸入的用戶信息而執(zhí)行用戶識(shí)別，并根據(jù)識(shí)別出的用戶來(lái)執(zhí)行視線的檢測(cè)。5.如權(quán)利要求2所述的顯示裝置，其特征在于， 所述控制部通過(guò)從所述外部裝置接收到的信息確定用戶的視聽(tīng)狀態(tài)，并根據(jù)所確定的所述視聽(tīng)狀態(tài)來(lái)執(zhí)行視線的檢測(cè)。6.如權(quán)利要求1所述的顯示裝置，其特征在于，當(dāng)判斷為所述用戶的視線處在顯示出的所述對(duì)象上，而且識(shí)別到預(yù)設(shè)的用戶手勢(shì)時(shí)，所述控制部執(zhí)行與所述用戶的視線所在處的對(duì)象以及所述預(yù)設(shè)的用戶手勢(shì)對(duì)應(yīng)的事件。7.如權(quán)利要求1所述的顯示裝置，其特征在于， 當(dāng)顯示出所述對(duì)象，而且在超出預(yù)設(shè)的時(shí)間為止未識(shí)別到用戶手勢(shì)和指向所述畫面的用戶的視線中的至少一個(gè)時(shí)，所述控制部控制所述顯示部以中斷所述對(duì)象的顯示。8.如權(quán)利要求1所述的顯示裝置，其特征在于，所述控制部以如下方式構(gòu)成: 使多個(gè)對(duì)象得到顯示， 當(dāng)判斷為所述用戶的視線指向多個(gè)對(duì)象中的一個(gè)時(shí)，控制所述顯示部以將對(duì)應(yīng)于所述用戶的視線的對(duì)象變更而顯示。9.如權(quán)利要求1所述的顯示裝置，其特征在于，所述控制部以如下方式構(gòu)成: 使對(duì)應(yīng)于所述用戶的視線的對(duì)象變更而顯示， 在保持變更的所述對(duì)象的顯示的狀態(tài)下，如果判斷為用戶的視線并不位于所述畫面上顯示的對(duì)象且識(shí)別到預(yù)設(shè)的用戶手勢(shì)，則執(zhí)行與變更而顯示的對(duì)象以及所述預(yù)設(shè)的用戶手勢(shì)對(duì)應(yīng)的事件。10.如權(quán)利要求1所述的顯示裝置，其特征在于，所述對(duì)象是音響調(diào)節(jié)對(duì)象、頻道調(diào)節(jié)對(duì)象、搜索窗激活對(duì)象、鍵盤對(duì)象以及引導(dǎo)對(duì)象中的至少一個(gè)。11.如權(quán)利要求1所述的顯示裝置，其特征在于，所述通信接口部從用戶穿戴的可穿戴式設(shè)備接收所述用戶手勢(shì)信息。12.一種顯示裝置的控制方法，包括如下步驟: 從外部裝置接收用戶的視線信息以及用戶手勢(shì)信息；以及 當(dāng)利用接收到的所述視線信息判斷為所述用戶的視線指向所述顯示裝置的畫面，而且檢測(cè)到對(duì)應(yīng)于接收到的所述手勢(shì)信息的用戶手勢(shì)時(shí)，在所述畫面上顯示預(yù)設(shè)的對(duì)象。13.如權(quán)利要求12所述的控制方法，其特征在于，還包括檢測(cè)所述畫面上的所述用戶的視線的步驟。14.如權(quán)利要求13所述的控制方法，其特征在于，還包括如下步驟: 當(dāng)判斷為檢測(cè)出的所述視線并不對(duì)應(yīng)于所述對(duì)象被顯示出的位置且識(shí)別到預(yù)設(shè)的用戶手勢(shì)時(shí)，把視線校正到與檢測(cè)出的所述視線最接近的對(duì)象被顯示出的位置。15.如權(quán)利要求13所述的控制方法，其特征在于，在執(zhí)行所述檢測(cè)的步驟中， 基于輸入的用戶信息來(lái)執(zhí)行用戶識(shí)別，并根據(jù)識(shí)別出的用戶而執(zhí)行視線檢測(cè)。
【專利摘要】本發(fā)明公開(kāi)一種顯示裝置及其控制方法。所述裝置包括：通信接口部，從外部裝置接收用戶的視線信息以及用戶手勢(shì)信息；顯示部，顯示預(yù)設(shè)的畫面；控制部，當(dāng)利用接收的視線信息判斷為用戶的視線指向畫面，而且檢測(cè)到對(duì)應(yīng)于接收的手勢(shì)信息的用戶手勢(shì)時(shí)，控制顯示部以將預(yù)設(shè)的對(duì)象顯示于畫面。
【IPC分類】G06F3/01
【公開(kāi)號(hào)】CN105487652
【申請(qǐng)?zhí)枴緾N201510646357
【發(fā)明人】千佳元, 金賢真, 文春卿, 盧在妍, 姜成勛
【申請(qǐng)人】三星電子株式會(huì)社
【公開(kāi)日】2016年4月13日
【申請(qǐng)日】2015年10月8日
【公告號(hào)】EP3002949A1, US20160098093