欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

終端及其控制方法和裝置與流程

文檔序號(hào):12550058閱讀:181來(lái)源:國(guó)知局
終端及其控制方法和裝置與流程

本發(fā)明涉及通信技術(shù)領(lǐng)域,尤其涉及一種終端及其控制方法和裝置。



背景技術(shù):

目前,各種觸控終端已被普遍使用,例如觸屏手機(jī)、平板電腦等。然而觸屏手機(jī)、平板電腦等需要通過(guò)手指在屏幕上點(diǎn)擊、滑動(dòng)等操作進(jìn)行控制,對(duì)于手指不靈活的殘疾人或老年人仍然不是很方便。冬季在寒冷的北方室外,用戶往往需要戴手套,這種情況下使用觸屏終端也不是很方便。

綜上,需要一種不用人手操作即可控制觸控終端的方案。



技術(shù)實(shí)現(xiàn)要素:

有鑒于此,本發(fā)明提供一種終端及其控制方法和裝置,能實(shí)現(xiàn)人眼控制終端的操作。

根據(jù)本發(fā)明的第一方面,提供一種終端控制方法,包括:每隔預(yù)定時(shí)間間隔通過(guò)圖像采集設(shè)備進(jìn)行一次人眼信息捕捉;根據(jù)捕捉到的人眼信息,判斷用戶是否正在注視終端屏幕的預(yù)定區(qū)域,其中,所述終端屏幕劃分為多個(gè)預(yù)定區(qū)域;若是,則接收對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的人眼控制命令;根據(jù)所述人眼控制命令對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行相應(yīng)操作。

進(jìn)一步地,根據(jù)捕捉到的人眼信息,判斷用戶是否正在注視終端屏幕的預(yù)定區(qū)域,包括:步驟A、判斷捕捉到的人眼信息是否與預(yù)設(shè)的所述多個(gè)預(yù)定區(qū)域中任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配;步驟B、若所述捕捉到的人眼信息與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,則確定所述捕捉到的人眼信息所匹配的人眼特征信息對(duì)應(yīng)的預(yù)定區(qū)域?yàn)槠ヅ鋮^(qū)域,并判斷接下來(lái)連續(xù)預(yù)定次數(shù)捕捉到的人眼信息是否均與所述匹配區(qū)域?qū)?yīng)的人眼特征信息匹配;步驟C、若是,則確定用戶正在注視所述匹配區(qū)域;若否,則返回執(zhí)行步驟A。

進(jìn)一步地,判斷捕捉到的人眼信息是否與預(yù)設(shè)的所述多個(gè)預(yù)定區(qū)域中任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,包括:比較所述捕捉到的人眼信息中瞳孔位置與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息中瞳孔位置的差距是否小于預(yù)設(shè)閾值;若是,則確定所述捕捉到的人眼信息與所述預(yù)定區(qū)域?qū)?yīng)的人眼特征信息相匹配。

進(jìn)一步地,所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息通過(guò)如下方式進(jìn)行設(shè)置:對(duì)所述多個(gè)預(yù)定區(qū)域分別進(jìn)行突出顯示,并采集所述多個(gè)預(yù)定區(qū)域突出顯示時(shí)的人眼信息;對(duì)采集到的人眼信息進(jìn)行處理,生成所述多個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息。

進(jìn)一步地,接收對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊的人眼控制命令,包括:對(duì)所述用戶注視的預(yù)定區(qū)域進(jìn)行突出顯示,并接收在所述預(yù)定區(qū)域突出顯示時(shí)對(duì)所述預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊的人眼控制命令。

進(jìn)一步地,對(duì)所述用戶注視的預(yù)定區(qū)域進(jìn)行突出顯示,包括:將所述用戶注視的預(yù)定區(qū)域以不同于其他預(yù)定區(qū)域的顏色和/或亮度顯示;或者,將所述用戶注視的預(yù)定區(qū)域以凸出于其他預(yù)定區(qū)域的效果顯示。

進(jìn)一步地,所述人眼控制命令包括:點(diǎn)擊命令;所述點(diǎn)擊命令用于在所述預(yù)定區(qū)域中只有一個(gè)按鈕/選項(xiàng)/鏈接的情況下,對(duì)所述按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊。

進(jìn)一步地,所述人眼控制命令包括:點(diǎn)擊命令和切換命令;所述點(diǎn)擊命令用于對(duì)所述預(yù)定區(qū)域中處于選中狀態(tài)的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊;所述切換命令用于在所述預(yù)定區(qū)域中有多個(gè)按鈕/選項(xiàng)/鏈接的情況下,對(duì)所述多個(gè)按鈕/選項(xiàng)/鏈接的選中狀態(tài)進(jìn)行切換。

根據(jù)本發(fā)明第二方面,提供一種終端控制裝置,包括:捕捉單元,用于每隔預(yù)定時(shí)間間隔通過(guò)圖像采集設(shè)備進(jìn)行一次人眼信息捕捉,所述圖像采集設(shè)備包括:眼動(dòng)儀或攝像頭;判斷單元,用于根據(jù)捕捉到的人眼信息,判斷用戶是否正在注視終端屏幕的預(yù)定區(qū)域,其中,所述終端屏幕劃分為多個(gè)預(yù)定區(qū)域;接收單元,用于若所述判斷單元判斷為是,則接收對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的人眼控制命令;操作單元,用于根據(jù)所述人眼控制命令對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行相應(yīng)操作。

進(jìn)一步地,所述判斷單元,包括:判斷子單元,用于判斷捕捉到的人眼信息是否與預(yù)設(shè)的所述多個(gè)預(yù)定區(qū)域中任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配;若所述捕捉到的人眼信息與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,則確定所述捕捉到的人眼信息所匹配的人眼特征信息對(duì)應(yīng)的預(yù)定區(qū)域?yàn)槠ヅ鋮^(qū)域,并判斷接下來(lái)連續(xù)預(yù)定次數(shù)捕捉到的人眼信息是否均與所述匹配區(qū)域?qū)?yīng)的人眼特征信息匹配;確定子單元,用于若判斷子單元判斷接下來(lái)連續(xù)預(yù)定次數(shù)捕捉到的人眼信息均與所述匹配區(qū)域?qū)?yīng)的人眼特征信息匹配,則確定用戶正在注視所述匹配區(qū)域。

進(jìn)一步地,所述判斷子單元進(jìn)一步用于:比較所述捕捉到的人眼信息中瞳孔位置與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息中瞳孔位置的差距是否小于預(yù)設(shè)閾值;確定子單元,用于若是,則確定所述捕捉到的人眼信息與所述預(yù)定區(qū)域?qū)?yīng)的人眼特征信息相匹配。

進(jìn)一步地,所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息通過(guò)如下方式進(jìn)行設(shè)置:對(duì)所述多個(gè)預(yù)定區(qū)域分別進(jìn)行突出顯示,并采集所述多個(gè)預(yù)定區(qū)域突出顯示時(shí)的人眼信息;對(duì)采集到的人眼信息進(jìn)行處理,生成所述多個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息。

進(jìn)一步地,所述接收單元包括:顯示子單元,用于對(duì)所述用戶注視的預(yù)定區(qū)域進(jìn)行突出顯示;接收子單元,用于接收在所述預(yù)定區(qū)域突出顯示時(shí)對(duì)所述預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊的人眼控制命令。

進(jìn)一步地,所述顯示子單元進(jìn)一步用于:將所述用戶注視的預(yù)定區(qū)域以不同于其他預(yù)定區(qū)域的顏色和/或亮度顯示;或者,將所述用戶注視的預(yù)定區(qū)域以凸出于其他預(yù)定區(qū)域的效果顯示。

進(jìn)一步地,所述人眼控制命令包括:點(diǎn)擊命令;所述點(diǎn)擊命令用于在所述預(yù)定區(qū)域中只有一個(gè)按鈕/選項(xiàng)/鏈接的情況下,對(duì)所述按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊。

進(jìn)一步地,所述人眼控制命令包括:點(diǎn)擊命令和切換命令;所述點(diǎn)擊命令用于對(duì)所述預(yù)定區(qū)域中處于選中狀態(tài)的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊;所述切換命令用于在所述預(yù)定區(qū)域中有多個(gè)按鈕/選項(xiàng)/鏈接的情況下,對(duì)所述多個(gè)按鈕/選項(xiàng)/鏈接的選中狀態(tài)進(jìn)行切換。

根據(jù)本發(fā)明的第三方面,提供一種終端,包括上述任一項(xiàng)所述的裝置。

根據(jù)本發(fā)明的上述方案,通過(guò)捕捉人眼信息,并根據(jù)捕捉到的人眼信息判斷用戶是否正在注視終端屏幕的預(yù)定區(qū)域,并通過(guò)接收對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的人眼控制命令,從而根據(jù)所述人眼控制命令對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行相應(yīng)操作,實(shí)現(xiàn)了通過(guò)人眼控制終端的操作。

上述說(shuō)明僅是本發(fā)明技術(shù)方案的概述,為了能夠更清楚了解本發(fā)明的技術(shù)手段,并可依照說(shuō)明書(shū)的內(nèi)容予以實(shí)施,以下以本發(fā)明的較佳實(shí)施例并配合附圖詳細(xì)說(shuō)明如后。

附圖說(shuō)明

構(gòu)成本發(fā)明的一部分的附圖用來(lái)提供對(duì)本發(fā)明的進(jìn)一步理解,本發(fā)明的示意性實(shí)施例及其說(shuō)明用于解釋本發(fā)明,并不構(gòu)成對(duì)本發(fā)明的不當(dāng)限定。在附圖中:

圖1示出了根據(jù)本發(fā)明一實(shí)施例的終端控制方法的流程圖;

圖2a示出了根據(jù)本發(fā)明一具體實(shí)施方式的終端屏幕(豎屏)劃分為多個(gè)預(yù)定區(qū)域的示例圖;

圖2b示出了根據(jù)本發(fā)明另一具體實(shí)施方式的終端屏幕(豎屏)劃分為多個(gè)預(yù)定區(qū)域的示例圖;

圖3a示出了根據(jù)本發(fā)明一具體實(shí)施方式的終端屏幕(橫屏)劃分為多個(gè)預(yù)定區(qū)域的示例圖;

圖3b示出了根據(jù)本發(fā)明另一具體實(shí)施方式的終端屏幕(橫屏)劃分為多個(gè)預(yù)定區(qū)域的示例圖;

圖4示出了根據(jù)本發(fā)明一具體實(shí)施方式的設(shè)置所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息的步驟的流程圖;

圖5示出了根據(jù)本發(fā)明一具體實(shí)施例的基于采集到的人眼圖片建立直角坐標(biāo)系以標(biāo)記瞳孔位置作為人眼特征信息的示例圖;

圖6示出了根據(jù)本發(fā)明一實(shí)施例的終端及其所包括的終端控制裝置的結(jié)構(gòu)框圖;

圖7示出了根據(jù)本發(fā)明一具體實(shí)施方式的判斷單元的結(jié)構(gòu)框圖;

圖8示出了根據(jù)本發(fā)明一具體實(shí)施方式的接收單元的結(jié)構(gòu)框圖。

具體實(shí)施方式

為使本發(fā)明的目的、技術(shù)方案和優(yōu)點(diǎn)更加清楚,下面將結(jié)合本發(fā)明具體實(shí)施例及相應(yīng)的附圖對(duì)本發(fā)明技術(shù)方案進(jìn)行清楚、完整地描述。顯然,所描述的實(shí)施例僅是本發(fā)明一部分實(shí)施例,而不是全部的實(shí)施例?;诒景l(fā)明中的實(shí)施例,本領(lǐng)域普通技術(shù)人員在沒(méi)有做出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例,都屬于本發(fā)明保護(hù)的范圍。

首先結(jié)合附圖對(duì)本發(fā)明的終端控制方法進(jìn)行描述。本發(fā)明尤其適用于觸屏終端。圖1示出了根據(jù)本發(fā)明一實(shí)施例的所述終端控制方法的流程圖。所述終端包括但不限于智能手機(jī)、平板電腦、PC機(jī)等。

如圖1所示,所述終端控制方法包括步驟S110、步驟S120、步驟S130和步驟S140。

步驟S110,每隔預(yù)定時(shí)間間隔通過(guò)圖像采集設(shè)備進(jìn)行一次人眼信息捕捉。

例如,在人眼控制模式下,每隔0.2S通過(guò)圖像采集設(shè)備捕捉一次設(shè)備采集范圍內(nèi)的人眼信息,例如人眼圖像。所述圖像采集設(shè)備例如包括眼動(dòng)儀、攝像頭等。例如,攝像頭每隔0.2S對(duì)人臉進(jìn)行拍照。

步驟S120,根據(jù)捕捉到的人眼信息,判斷用戶是否正在注視終端屏幕的預(yù)定區(qū)域。

其中,所述終端屏幕劃分為多個(gè)預(yù)定區(qū)域。例如,以手機(jī)屏幕為例,如圖2a所示將手機(jī)屏幕等分為2×2個(gè)預(yù)定區(qū)域;或者,如圖2b所示將手機(jī)屏幕等分為3×3個(gè)預(yù)定區(qū)域。本發(fā)明終端屏幕的劃分方式并不限于此,終端(例如手機(jī)、平板電腦)橫屏和豎屏?xí)r的劃分方式可以不同,如圖3a、圖3b所示,分別為手機(jī)橫屏?xí)r將手機(jī)屏幕等分為2×2個(gè)預(yù)定區(qū)域和3×3個(gè)預(yù)定區(qū)域的示例圖。

在一種具體實(shí)施方式中,步驟S120通過(guò)如下步驟實(shí)現(xiàn):

步驟A、判斷捕捉到的人眼信息是否與預(yù)設(shè)的所述多個(gè)預(yù)定區(qū)域中任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配;

步驟B、若所述捕捉到的人眼信息與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,則確定所述捕捉到的人眼信息所匹配的人眼特征信息對(duì)應(yīng)的預(yù)定區(qū)域?yàn)槠ヅ鋮^(qū)域,并判斷接下來(lái)連續(xù)預(yù)定次數(shù)捕捉到的人眼信息是否均與所述匹配區(qū)域?qū)?yīng)的人眼特征信息匹配;

步驟C、若是,則確定用戶正在注視所述匹配區(qū)域;若否,則返回執(zhí)行步驟A。

其中,所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)一組預(yù)設(shè)的人眼特征信息;每個(gè)預(yù)定區(qū)域具有對(duì)應(yīng)的編號(hào)(如圖2a、圖2b所示),在終端中預(yù)先保存有所述多個(gè)預(yù)定區(qū)域中每個(gè)區(qū)域的編號(hào)與人眼特征信息的對(duì)應(yīng)關(guān)系。例如,如圖2b所示手機(jī)屏幕的3×3個(gè)預(yù)定區(qū)域中,區(qū)域1、2、3、…、9,分別對(duì)應(yīng)人眼特征信息I-1、I-2、I-3、…、I-9。

具體地,設(shè)預(yù)定次數(shù)為N,當(dāng)捕捉到人眼信息時(shí)執(zhí)行步驟A,將捕捉到的人眼信息分別與所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息進(jìn)行比對(duì),判斷該捕捉到的人眼信息是否與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,若捕捉到的人眼信息與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,則執(zhí)行步驟B,將該捕捉到的人眼信息所匹配的人眼特征信息對(duì)應(yīng)的預(yù)定區(qū)域作為匹配區(qū)域,并判斷接下來(lái)捕捉到的人眼信息是否也與該匹配區(qū)域?qū)?yīng)的人眼特征信息匹配;接著執(zhí)行步驟C,若接下來(lái)連續(xù)N次捕捉到的人眼信息均與該匹配區(qū)域?qū)?yīng)的人眼特征信息匹配,則確定用戶正在注視該匹配區(qū)域;若接下來(lái)判斷捕捉到的人眼信息與該匹配區(qū)域?qū)?yīng)的人眼特征信息不匹配,且連續(xù)判斷的次數(shù)未達(dá)到N次,則返回步驟A,即,下一次捕捉到的人眼信息與所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息進(jìn)行比對(duì)。

例如,預(yù)先配置一匹配次數(shù)n,并置為0,即n=0,將當(dāng)前捕捉到的人眼信息與每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息I-1、I-2、I-3、…、I-9進(jìn)行一一比對(duì),若判斷當(dāng)前捕捉到的人眼信息X0與人眼特征信息I-8匹配,則將I-8對(duì)應(yīng)的區(qū)域8作為匹配區(qū)域,繼續(xù)捕捉人眼信息,并判斷捕捉到的人眼信息X1是否也與該人眼特征信息I-8匹配,若匹配,則將匹配次數(shù)加1,即n=1;再繼續(xù)捕捉人眼信息,并判斷捕捉到的人眼信息X2是否與人眼特征信息I-8匹配,若匹配,將匹配次數(shù)再加1,即n=2,……,以此類推;若不匹配,則該匹配次數(shù)歸0,下一次捕捉到的人眼信息重新與人眼特征信息I-1、I-2、I-3、…、I-9進(jìn)行一一比對(duì);若該匹配次數(shù)累計(jì)到N,則確定用戶正在注視人眼特征信息I-8對(duì)應(yīng)的預(yù)定區(qū)域,即區(qū)域8。

步驟A中判斷捕捉到的人眼信息是否與預(yù)設(shè)的所述多個(gè)預(yù)定區(qū)域中任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,可比較所述捕捉到的人眼信息中瞳孔位置與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息中瞳孔位置的差距是否小于預(yù)設(shè)閾值;若是,則確定所述捕捉到的人眼信息與所述預(yù)定區(qū)域?qū)?yīng)的人眼特征信息相匹配。

在一種具體的實(shí)施方式中,所述瞳孔位置為瞳孔相對(duì)于內(nèi)眼角的位置,所述人眼特征信息為記錄瞳孔相對(duì)于內(nèi)眼角位置的信息。

如圖4所示,所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息可以通過(guò)如下步驟進(jìn)行設(shè)置:

步驟S1,對(duì)所述多個(gè)預(yù)定區(qū)域分別進(jìn)行突出顯示,并采集所述多個(gè)預(yù)定區(qū)域突出顯示時(shí)的人眼信息。

具體而言,可以按照預(yù)定次序?qū)λ龆鄠€(gè)預(yù)定區(qū)域分別進(jìn)行突出顯示。所述預(yù)定次序例如為所述多個(gè)預(yù)定區(qū)域的編號(hào)從大到小的次序。例如,設(shè)置如圖2a所示的終端屏幕,當(dāng)進(jìn)入設(shè)置模式時(shí),先對(duì)區(qū)域1進(jìn)行突出顯示,以提示用戶注視該區(qū)域并保持一定時(shí)間(例如2s),采集用戶注視區(qū)域1時(shí)的人眼信息,并作為區(qū)域1對(duì)應(yīng)的人眼特征信息I-1記錄下來(lái);接下來(lái)對(duì)區(qū)域2進(jìn)行突出顯示,采集用戶注視區(qū)域2時(shí)的人眼信息,并作為區(qū)域2對(duì)應(yīng)的人眼特征信息I-2記錄下來(lái),以此類推,直到記錄下所有預(yù)定區(qū)域的人眼特征信息,其中,可對(duì)每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼信息進(jìn)行多次采集。可選地,在對(duì)任意一個(gè)預(yù)定區(qū)域進(jìn)行突出顯示時(shí),還可以在該預(yù)定區(qū)域中顯示文字提示,例如,顯示“請(qǐng)注視此區(qū)域”,從而更加明確的提示用戶注視該預(yù)定區(qū)域。

進(jìn)一步地,為避免用戶注視預(yù)定區(qū)域時(shí)視線發(fā)生變化導(dǎo)致采集到的人眼信息不準(zhǔn)確,對(duì)每個(gè)預(yù)定區(qū)域進(jìn)行突出顯示時(shí),在該預(yù)定區(qū)域中顯示一確定按鈕,在所述確定按鈕被點(diǎn)擊后的預(yù)定時(shí)長(zhǎng)內(nèi)采集人眼信息,作為該預(yù)定區(qū)域的人眼特征信息。具體地,在一種具體實(shí)施方式中,用戶在該預(yù)定區(qū)域突出顯示的情況下注視該區(qū)域時(shí),點(diǎn)擊該確定按鈕,并保持視線不變(眼球不動(dòng))預(yù)定時(shí)長(zhǎng)(例如2秒),接收到用戶的確定操作后,在該預(yù)定時(shí)長(zhǎng)內(nèi)采集人眼信息。在另一種具體實(shí)施方式中,在對(duì)該預(yù)定區(qū)域進(jìn)行突出顯示時(shí),以預(yù)定時(shí)間間隔(例如,0.2S)顯示一系列預(yù)定字符和/或圖形(例如,倒序顯示5、4、3、2、1或倒序顯示F、E、D、C、B、A),并在顯示所述預(yù)定字符和/或圖形時(shí)進(jìn)行人眼信息采集,并確定用戶在顯示特定字符和/或圖形時(shí)是否正在注視該預(yù)定區(qū)域,若是,則將采集到的人眼信息作為該預(yù)定區(qū)域的人眼特征信息。例如,對(duì)某一預(yù)定區(qū)域進(jìn)行突出顯示時(shí),先顯示“請(qǐng)注視此區(qū)域”,間隔一定時(shí)間(例如3S)之后倒序顯示5、4、3、2、1,顯示完畢后,顯示文字提示“請(qǐng)確認(rèn)倒數(shù)至‘1’時(shí),是否正在注視此區(qū)域”,并分別顯示“是”和“否”的按鍵或選項(xiàng),若用戶選擇“是”,則將采集到的人眼信息作為該區(qū)域的人眼特征信息。

所述人眼特征信息具體可以包括左眼特征信息和/或右眼特征信息。當(dāng)采集一個(gè)預(yù)定區(qū)域突出顯示時(shí)的人眼信息,可以分別采集左眼信息和右眼信息,再分別對(duì)采集到的左眼信息和右眼信息進(jìn)行識(shí)別和處理生成該預(yù)定區(qū)域的左眼特征信息和右眼特征信息?;蛘咄瑫r(shí)采集兩眼的人眼特征信息。

步驟S2,對(duì)采集到的人眼信息進(jìn)行處理,生成所述多個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息。

在一種具體的實(shí)施方式中,采集到的人眼信息為人眼圖片,對(duì)采集到的人眼圖片進(jìn)行圖像識(shí)別以識(shí)別出人眼的眼角(包括內(nèi)眼角和外眼角)和瞳孔,具體地,可以先進(jìn)行人臉識(shí)別(例如利用模板匹配算法或膚色模型算法識(shí)別出人臉),再進(jìn)行人眼區(qū)域識(shí)別(例如利用三庭五眼法、水平邊緣投影法、灰度積分投影等識(shí)別出人眼區(qū)域),再進(jìn)一步識(shí)別出人眼的瞳孔和眼角(例如,利用邊緣特征法、變形模板法等算法識(shí)別出人眼瞳孔和眼角)。以內(nèi)眼角(靠近鼻梁一側(cè)的眼角)為坐標(biāo)原點(diǎn),以內(nèi)眼角和外眼角的連線為X軸,經(jīng)過(guò)坐標(biāo)原點(diǎn)并垂直于X軸的直線為Y軸,建立直角坐標(biāo)系(如圖5所示),獲取瞳孔在所述直角坐標(biāo)系中的坐標(biāo)(多次采集時(shí)可取坐標(biāo)平均值),將獲取到的坐標(biāo)保存為相應(yīng)預(yù)定區(qū)域的人眼特征信息。

在另一種具體實(shí)施方式中,對(duì)采集到的人眼圖片進(jìn)行圖像識(shí)別,分別識(shí)別出左眼瞳孔和右眼瞳孔(識(shí)別方法與前述實(shí)施方式基本相同,此處不加贅述),以所述左眼瞳孔和右眼瞳孔連線的中心點(diǎn)作為坐標(biāo)原點(diǎn),經(jīng)過(guò)坐標(biāo)原點(diǎn)的水平軸為X軸,豎直軸為Y軸建立直角坐標(biāo)系,分別獲取左眼瞳孔和右眼瞳孔在所述直角坐標(biāo)系中的坐標(biāo)(多次采集時(shí)可取坐標(biāo)平均值),并將獲取到的左眼瞳孔坐標(biāo)和右眼瞳孔坐標(biāo)保存為相應(yīng)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息。

基于上述的人眼特征信息的設(shè)置方式,在比較所述捕捉到的人眼信息中瞳孔位置與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息中瞳孔位置的差距是否小于預(yù)設(shè)閾值時(shí),先將捕捉到的人眼圖片進(jìn)行圖像識(shí)別和處理,識(shí)別出人眼的眼角(包括內(nèi)眼角和外眼角)和瞳孔,并以內(nèi)眼角為坐標(biāo)原點(diǎn),以內(nèi)眼角和外眼角的連線為X軸,建立直角坐標(biāo)系,獲取瞳孔在所述直角坐標(biāo)系中的坐標(biāo),再將該坐標(biāo)與每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息中瞳孔的坐標(biāo)進(jìn)行比較,若差距小于預(yù)設(shè)閾值,則該捕捉到的人眼信息與該人眼特征信息匹配?;蛘?,先將捕捉到的人眼圖片進(jìn)行圖像識(shí)別和處理,分別識(shí)別出左眼瞳孔和右眼瞳孔,并以左眼瞳孔和右眼瞳孔連線的中心點(diǎn)作為坐標(biāo)原點(diǎn),經(jīng)過(guò)坐標(biāo)原點(diǎn)的水平軸為X軸,豎直軸為Y軸建立直角坐標(biāo)系,分別獲取左眼瞳孔和右眼瞳孔在所述直角坐標(biāo)系中的坐標(biāo),再將左眼瞳孔和右眼瞳孔在所述直角坐標(biāo)系中的坐標(biāo)與每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息中的左眼瞳孔坐標(biāo)和右眼瞳孔坐標(biāo)進(jìn)行相應(yīng)比較,若差距小于預(yù)設(shè)閾值,則該捕捉到的人眼信息與該人眼特征信息匹配。

所述預(yù)設(shè)閾值具體可以包括橫坐標(biāo)閾值和縱坐標(biāo)閾值,也就是說(shuō),在判斷時(shí)分別判斷捕捉到的人眼信息與該人眼特征信息的橫坐標(biāo)差距是否小于所述橫坐標(biāo)閾值,以及縱坐標(biāo)差距是否小于所述縱坐標(biāo)閾值。步驟C中判斷接下來(lái)連續(xù)預(yù)定次數(shù)捕捉到的人眼信息是否均與所述匹配區(qū)域?qū)?yīng)的人眼特征信息匹配的具體實(shí)施方式,與前述步驟A中判斷捕捉到的人眼信息是否與預(yù)設(shè)的所述多個(gè)預(yù)定區(qū)域中任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配的具體實(shí)施方式基本類似,即,比較接下來(lái)捕捉到的人眼信息中瞳孔位置與所述匹配區(qū)域?qū)?yīng)的人眼特征信息中瞳孔位置的差距是否小于預(yù)設(shè)閾值;若是,則確定所述捕捉到的人眼信息與所述匹配區(qū)域?qū)?yīng)的人眼特征信息相匹配,因此,可參考對(duì)步驟A的描述,此處不加贅述。

步驟S130,若是,則接收對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的人眼控制命令。

在一種具體的實(shí)施方式中,對(duì)所述用戶注視的預(yù)定區(qū)域進(jìn)行突出顯示,并接收在所述預(yù)定區(qū)域突出顯示時(shí)對(duì)所述預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的人眼控制命令。

具體而言,若確定用戶正在注視終端屏幕的一個(gè)預(yù)定區(qū)域,則可以先對(duì)該預(yù)定區(qū)域進(jìn)行突出顯示,以提示用戶當(dāng)前可通過(guò)人眼控制命令對(duì)該預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行操作,并通過(guò)圖像采集設(shè)備接收用戶對(duì)該預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的人眼控制命令。

其中,對(duì)所述用戶注視的預(yù)定區(qū)域進(jìn)行突出顯示的實(shí)現(xiàn)方式包括但不限于以下兩種:

(1)將所述用戶注視的預(yù)定區(qū)域以不同于其他預(yù)定區(qū)域的顏色和/或亮度顯示。

例如,將其他預(yù)定區(qū)域以原來(lái)的顏色顯示,將該用戶注視的預(yù)定區(qū)域以不同于其他預(yù)定區(qū)域的顏色顯示。

又例如,將其他預(yù)定區(qū)域以正常亮度顯示,或者以低于正常亮度的亮度顯示,將該用戶注視的預(yù)定區(qū)域以高亮(高于正常亮度)顯示,如圖2b所示,區(qū)域8為用戶注視的預(yù)定區(qū)域。

再例如,將其他預(yù)定區(qū)域以原來(lái)的顏色和正常亮度顯示,或者以低于正常亮度的亮度顯示,將該用戶注視的預(yù)定區(qū)域以不同于其他預(yù)定區(qū)域的顏色、和高于正常亮度的亮度顯示。

(2)將所述用戶注視的預(yù)定區(qū)域以凸出于其他預(yù)定區(qū)域的效果顯示。

通過(guò)將用戶注視的預(yù)定區(qū)域以特定的不同于其他預(yù)定區(qū)域的顏色、亮度、線條、陰影的組合進(jìn)行顯示,可以實(shí)現(xiàn)使該用戶注視的預(yù)定區(qū)域凸出于其他預(yù)定區(qū)域而浮現(xiàn)顯示的立體效果,即,該用戶注視的預(yù)定區(qū)域并不是真的凸出于其他預(yù)定區(qū)域,而是在終端顯示屏上呈現(xiàn)出該用戶注視的預(yù)定區(qū)域凸出于其他預(yù)定區(qū)域的立體視覺(jué)效果。

在一種具體實(shí)施方式中,在人眼控制模式下對(duì)終端屏幕中的顯示內(nèi)容進(jìn)行處理,使得在終端屏幕的每個(gè)預(yù)定區(qū)域中只顯示一個(gè)按鈕/選項(xiàng)/鏈接;所述人眼控制命令為點(diǎn)擊命令,所述點(diǎn)擊命令用于在所述預(yù)定區(qū)域只有一個(gè)按鈕/選項(xiàng)/鏈接的情況下,對(duì)所述按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊。其中,該點(diǎn)擊命令可以通過(guò)設(shè)置預(yù)定時(shí)間內(nèi)連續(xù)眨眼次數(shù)來(lái)設(shè)置,例如,可以設(shè)置為1S內(nèi)連續(xù)眨眼3次。

在另一種具體的實(shí)施方式中,在終端屏幕的每個(gè)預(yù)定區(qū)域中可以顯示一個(gè)或多個(gè)按鈕/選項(xiàng)/鏈接;所述人眼控制命令包括:點(diǎn)擊命令和切換命令。所述點(diǎn)擊命令用于對(duì)所述預(yù)定區(qū)域中處于選中狀態(tài)的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊;所述切換命令用于在所述預(yù)定區(qū)域中有多個(gè)按鈕/選項(xiàng)/鏈接時(shí),對(duì)所述多個(gè)按鈕/選項(xiàng)/鏈接的選中狀態(tài)進(jìn)行切換。其中,不同的人眼控制命令可以通過(guò)設(shè)置預(yù)定時(shí)間內(nèi)連續(xù)眨眼次數(shù)來(lái)設(shè)置,例如,可以設(shè)置1S內(nèi)連續(xù)眨眼3次為點(diǎn)擊命令,1S內(nèi)連續(xù)眨眼2次為切換命令,所述預(yù)定時(shí)間和/或眨眼次數(shù)可以由用戶預(yù)先進(jìn)行設(shè)置。

具體地,若預(yù)定區(qū)域中只有一個(gè)按鈕/選項(xiàng)/鏈接,則可以直接接收對(duì)預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊的點(diǎn)擊命令。若預(yù)定區(qū)域中有多個(gè)按鈕/選項(xiàng)/鏈接,則先將其中的任意一個(gè)按鈕/選項(xiàng)/鏈接以選中狀態(tài)顯示(例如對(duì)該按鈕/選項(xiàng)/鏈接進(jìn)行突出顯示),若用戶想要點(diǎn)擊該處于選中狀態(tài)的按鈕/選項(xiàng)/鏈接,則通過(guò)眨眼發(fā)出點(diǎn)擊命令,若用戶不想點(diǎn)擊該按鈕/選項(xiàng)/鏈接,則通過(guò)眨眼發(fā)出切換命令。

步驟S140,根據(jù)所述人眼控制命令對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行相應(yīng)操作。

所述相應(yīng)操作是指與人眼控制命令相應(yīng)的操作,例如,若人眼控制命令為點(diǎn)擊命令,則對(duì)所述用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊操作。若人眼控制命令為按下命令,則對(duì)所述用戶注視的預(yù)定區(qū)域中的按鈕按下,若人眼控制命令為選中命令,則對(duì)所述用戶注視的預(yù)定區(qū)域中的選項(xiàng)進(jìn)行選中。

具體地,在終端屏幕的每個(gè)預(yù)定區(qū)域中只顯示一個(gè)按鈕/選項(xiàng)/鏈接的情況下,若采集到用戶通過(guò)眨眼發(fā)出的點(diǎn)擊命令,則觸發(fā)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接。在終端屏幕的每個(gè)預(yù)定區(qū)域中顯示一個(gè)或多個(gè)按鈕/選項(xiàng)/鏈接的情況下,在任意一個(gè)按鈕/選項(xiàng)/鏈接處于選中狀態(tài)時(shí),若采集到用戶通過(guò)眨眼發(fā)出的點(diǎn)擊命令,則觸發(fā)該按鈕/選項(xiàng)/鏈接;若采集到用戶通過(guò)眨眼發(fā)出的切換命令,則切換該用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的選中狀態(tài),即將當(dāng)前處于選中狀態(tài)的按鈕/選項(xiàng)/鏈接切換到正常顯示狀態(tài),并將另一個(gè)按鈕/選項(xiàng)/鏈接以選中狀態(tài)顯示,其中,當(dāng)需要切換選中狀態(tài)時(shí)可以按照預(yù)定順序切換所述多個(gè)按鈕/選項(xiàng)/鏈接的選中狀態(tài),例如按照從左到右的順序切換。

以下結(jié)合附圖說(shuō)明本發(fā)明的終端及終端控制裝置。

圖6示出了根據(jù)本發(fā)明一實(shí)施例的所述終端及其所包括的終端控制裝置的結(jié)構(gòu)框圖。所述終端包括但不限于智能手機(jī)、平板電腦、PC機(jī)等。

如圖6所示,該終端1包括終端控制裝置100,裝置100包括:捕捉單元110、判斷單元120、接收單元130和操作單元140。

捕捉單元110用于每隔預(yù)定時(shí)間間隔通過(guò)圖像采集設(shè)備進(jìn)行一次人眼信息捕捉。所述圖像采集設(shè)備包括:眼動(dòng)儀或攝像頭。判斷單元120用于根據(jù)捕捉到的人眼信息,判斷用戶是否正在注視終端屏幕的預(yù)定區(qū)域,其中,所述終端屏幕劃分為多個(gè)預(yù)定區(qū)域。接收單元130用于若所述判斷單元判斷為是,則接收對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的人眼控制命令;操作單元140用于根據(jù)所述人眼控制命令對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行相應(yīng)操作。

具體地,在人眼控制模式下,捕捉單元110每隔預(yù)定時(shí)間間隔通過(guò)圖像采集設(shè)備進(jìn)行一次人眼信息捕捉。所述圖像采集設(shè)備包括:眼動(dòng)儀或攝像頭等。例如,捕捉單元110每隔0.2S通過(guò)圖像采集設(shè)備捕捉一次設(shè)備采集范圍內(nèi)的人眼信息,例如人眼圖像。所述圖像采集設(shè)備例如包括眼動(dòng)儀、攝像頭等。例如,攝像頭每隔0.2S對(duì)人臉進(jìn)行拍照。

判斷單元120根據(jù)捕捉到的人眼信息,判斷用戶是否正在注視終端屏幕的預(yù)定區(qū)域。

具體地,所述終端屏幕劃分為多個(gè)預(yù)定區(qū)域。例如,以手機(jī)屏幕為例,如圖2a所示將手機(jī)屏幕等分為2×2個(gè)預(yù)定區(qū)域;或者,如圖2b所示將手機(jī)屏幕等分為3×3個(gè)預(yù)定區(qū)域。本發(fā)明終端屏幕的劃分方式并不限于此,終端(例如手機(jī)、平板電腦)橫屏和豎屏?xí)r的劃分方式可以不同,如圖3a、圖3b所示,分別為手機(jī)橫屏?xí)r將手機(jī)屏幕等分為2×2個(gè)預(yù)定區(qū)域和3×3個(gè)預(yù)定區(qū)域的示例圖。

圖7示出了根據(jù)本發(fā)明一具體實(shí)施方式的判斷單元的結(jié)構(gòu)框圖。如圖7所示,在一種具體實(shí)施方式中,判斷單元120包括判斷子單元121和確定子單元122。判斷子單元121用于判斷捕捉到的人眼信息是否與預(yù)設(shè)的所述多個(gè)預(yù)定區(qū)域中任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配;若所述捕捉到的人眼信息與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,則確定所述捕捉到的人眼信息所匹配的人眼特征信息對(duì)應(yīng)的預(yù)定區(qū)域?yàn)槠ヅ鋮^(qū)域,并判斷接下來(lái)連續(xù)預(yù)定次數(shù)捕捉到的人眼信息是否均與所述匹配區(qū)域?qū)?yīng)的人眼特征信息匹配;確定子單元122用于若判斷子單元121判斷接下來(lái)連續(xù)預(yù)定次數(shù)捕捉到的人眼信息均與所述匹配區(qū)域?qū)?yīng)的人眼特征信息匹配,則確定用戶正在注視所述匹配區(qū)域。

其中,所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)一組預(yù)設(shè)的人眼特征信息;每個(gè)預(yù)定區(qū)域具有對(duì)應(yīng)的編號(hào),如圖2a、圖2b所示,在終端中預(yù)先保存有所述多個(gè)預(yù)定區(qū)域中每個(gè)區(qū)域的編號(hào)與人眼特征信息的對(duì)應(yīng)關(guān)系。例如,如圖2b所示手機(jī)屏幕的3×3個(gè)預(yù)定區(qū)域中,區(qū)域1、2、3、…、9,分別對(duì)應(yīng)人眼特征信息I-1、I-2、I-3、…、I-9。

具體地,設(shè)預(yù)定次數(shù)為N,當(dāng)捕捉單元110捕捉到人眼信息時(shí),判斷子單元121將捕捉到的人眼信息分別與所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息進(jìn)行比對(duì),判斷該捕捉到的人眼信息是否與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,若捕捉到的人眼信息與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,則將該捕捉到的人眼信息所匹配的人眼特征信息對(duì)應(yīng)的預(yù)定區(qū)域作為匹配區(qū)域,并進(jìn)一步判斷接下來(lái)捕捉到的人眼信息是否也與該匹配區(qū)域?qū)?yīng)的人眼特征信息匹配;若接下來(lái)連續(xù)N次捕捉到的人眼信息均與該匹配區(qū)域?qū)?yīng)的人眼特征信息匹配,則確定子單元122確定用戶正在注視該匹配區(qū)域;若接下來(lái)判斷捕捉到的人眼信息與該匹配區(qū)域?qū)?yīng)的人眼特征信息不匹配,且連續(xù)判斷的次數(shù)未達(dá)到N次,則判斷子單元121繼續(xù)將捕捉到的人眼信息與所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息進(jìn)行比對(duì)。

例如,預(yù)先配置一匹配次數(shù)n,并置為0,即n=0,將當(dāng)前捕捉到的人眼信息與每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息I-1、I-2、I-3、…、I-9進(jìn)行一一比對(duì),若判斷當(dāng)前捕捉到的人眼信息X0與人眼特征信息I-8匹配,則將I-8對(duì)應(yīng)的區(qū)域8作為匹配區(qū)域,繼續(xù)捕捉人眼信息,并判斷捕捉到的人眼信息X1是否也與該人眼特征信息I-8匹配,若匹配,則將匹配次數(shù)加1,即n=1;再繼續(xù)捕捉人眼信息,并判斷捕捉到的人眼信息X2是否與人眼特征信息I-8匹配,若匹配,將匹配次數(shù)再加1,即n=2,……,以此類推;若不匹配,則該匹配次數(shù)歸0,下一次捕捉到的人眼信息重新與人眼特征信息I-1、I-2、I-3、…、I-9進(jìn)行一一比對(duì);若該匹配次數(shù)累計(jì)到N,則確定用戶正在注視人眼特征信息I-8對(duì)應(yīng)的預(yù)定區(qū)域,即區(qū)域8。

在一種具體實(shí)施方式中,所述判斷子單元121判斷捕捉到的人眼信息是否與預(yù)設(shè)的所述多個(gè)預(yù)定區(qū)域中任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配,具體包括:比較所述捕捉到的人眼信息中瞳孔位置與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息中瞳孔位置的差距是否小于預(yù)設(shè)閾值;若是,則確定所述捕捉到的人眼信息與所述預(yù)定區(qū)域?qū)?yīng)的人眼特征信息相匹配。

具體地,所述多個(gè)預(yù)定區(qū)域中每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息通過(guò)如下方式進(jìn)行設(shè)置:

對(duì)所述多個(gè)預(yù)定區(qū)域分別進(jìn)行突出顯示,并采集所述多個(gè)預(yù)定區(qū)域突出顯示時(shí)的人眼信息;對(duì)采集到的人眼信息進(jìn)行處理,生成所述多個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息。

具體而言,可以按照預(yù)定次序?qū)λ龆鄠€(gè)預(yù)定區(qū)域分別進(jìn)行突出顯示。所述預(yù)定次序例如為所述多個(gè)預(yù)定區(qū)域的編號(hào)從大到小的次序。例如,設(shè)置如圖2a所示的終端屏幕,當(dāng)進(jìn)入設(shè)置模式時(shí),先對(duì)區(qū)域1進(jìn)行突出顯示,以提示用戶注視該區(qū)域并保持一定時(shí)間(例如2s),采集用戶注視區(qū)域1時(shí)的人眼信息,并作為區(qū)域1對(duì)應(yīng)的人眼特征信息I-1記錄下來(lái);接下來(lái)對(duì)區(qū)域2進(jìn)行突出顯示,采集用戶注視區(qū)域2時(shí)的人眼信息,并作為區(qū)域2對(duì)應(yīng)的人眼特征信息I-2記錄下來(lái),以此類推,直到記錄下所有預(yù)定區(qū)域的人眼特征信息,其中,可對(duì)每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼信息進(jìn)行多次采集。可選地,在對(duì)任意一個(gè)預(yù)定區(qū)域進(jìn)行突出顯示時(shí),還可以在該預(yù)定區(qū)域中顯示文字提示,例如,顯示“請(qǐng)注視此區(qū)域”,從而更加明確的提示用戶注視該預(yù)定區(qū)域。

進(jìn)一步地,為避免用戶注視預(yù)定區(qū)域時(shí)視線發(fā)生變化導(dǎo)致采集到的人眼信息不準(zhǔn)確,對(duì)每個(gè)預(yù)定區(qū)域進(jìn)行突出顯示時(shí),在該預(yù)定區(qū)域中顯示一確定按鈕,在所述確定按鈕被點(diǎn)擊后的預(yù)定時(shí)長(zhǎng)內(nèi)采集人眼信息,作為該預(yù)定區(qū)域的人眼特征信息。具體地,在一種具體實(shí)施方式中,用戶在該預(yù)定區(qū)域突出顯示的情況下注視該區(qū)域時(shí),點(diǎn)擊該確定按鈕,并保持視線不變(眼球不動(dòng))預(yù)定時(shí)長(zhǎng)(例如2秒),接收到用戶的確定操作后,在該預(yù)定時(shí)長(zhǎng)內(nèi)采集人眼信息。在另一種具體實(shí)施方式中,在對(duì)該預(yù)定區(qū)域進(jìn)行突出顯示時(shí),以預(yù)定時(shí)間間隔(例如,0.2S)顯示一系列預(yù)定字符和/或圖形(例如,倒序顯示5、4、3、2、1或倒序顯示F、E、D、C、B、A),并在顯示所述預(yù)定字符和/或圖形時(shí)進(jìn)行人眼信息采集,并確定用戶在顯示特定字符和/或圖形時(shí)是否正在注視該預(yù)定區(qū)域,若是,則將采集到的人眼信息作為該預(yù)定區(qū)域的人眼特征信息。例如,對(duì)某一預(yù)定區(qū)域進(jìn)行突出顯示時(shí),先顯示“請(qǐng)注視此區(qū)域”,間隔一定時(shí)間(例如3S)之后倒序顯示5、4、3、2、1,顯示完畢后,顯示文字提示“請(qǐng)確認(rèn)倒數(shù)至‘1’時(shí),是否正在注視此區(qū)域”,并分別顯示“是”和“否”的按鍵或選項(xiàng),若用戶選擇“是”,則將采集到的人眼信息作為該區(qū)域的人眼特征信息。

所述人眼特征信息具體可以包括左眼特征信息和/或右眼特征信息。當(dāng)采集一個(gè)預(yù)定區(qū)域突出顯示時(shí)的人眼信息,可以分別采集左眼信息和/或右眼信息,再對(duì)采集到的左眼信息和/或右眼信息進(jìn)行識(shí)別和處理生成該預(yù)定區(qū)域的左眼特征信息和/或右眼特征信息。

在一種具體的實(shí)施方式中,采集到的人眼信息為人眼圖片,對(duì)采集到的人眼圖片進(jìn)行圖像識(shí)別以識(shí)別出人眼的眼角(包括內(nèi)眼角和外眼角)和瞳孔,具體地,可以先進(jìn)行人臉識(shí)別(例如利用模板匹配算法或膚色模型算法識(shí)別出人臉),再進(jìn)行人眼區(qū)域識(shí)別(例如利用三庭五眼法、水平邊緣投影法、灰度積分投影等識(shí)別出人眼區(qū)域),再進(jìn)一步識(shí)別出人眼的瞳孔和眼角(例如,利用邊緣特征法、變形模板法等算法識(shí)別出人眼瞳孔和眼角)。以內(nèi)眼角(靠近鼻梁一側(cè)的眼角)為坐標(biāo)原點(diǎn),以內(nèi)眼角和外眼角的連線為X軸,經(jīng)過(guò)坐標(biāo)原點(diǎn)并垂直于X軸的直線為Y軸,建立直角坐標(biāo)系(如圖5所示),獲取瞳孔在所述直角坐標(biāo)系中的坐標(biāo)(多次采集時(shí)可取坐標(biāo)平均值),將獲取到的坐標(biāo)保存為相應(yīng)預(yù)定區(qū)域的人眼特征信息。

在另一種具體實(shí)施方式中,對(duì)采集到的人眼圖片進(jìn)行圖像識(shí)別,分別識(shí)別出左眼瞳孔和右眼瞳孔(識(shí)別方法與前述實(shí)施方式基本相同,此處不加贅述),以所述左眼瞳孔和右眼瞳孔連線的中心點(diǎn)作為坐標(biāo)原點(diǎn),經(jīng)過(guò)坐標(biāo)原點(diǎn)的水平軸為X軸,豎直軸為Y軸建立直角坐標(biāo)系,分別獲取左眼瞳孔和右眼瞳孔在所述直角坐標(biāo)系中的坐標(biāo)(多次采集時(shí)可取坐標(biāo)平均值),并將獲取到的左眼瞳孔坐標(biāo)和右眼瞳孔坐標(biāo)保存為相應(yīng)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息。

基于上述的人眼特征信息的設(shè)置方式,判斷子單元121在比較所述捕捉到的人眼信息中瞳孔位置與任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息中瞳孔位置的差距是否小于預(yù)設(shè)閾值時(shí),先將捕捉到的人眼圖片進(jìn)行圖像識(shí)別和處理,識(shí)別出人眼的眼角(包括內(nèi)眼角和外眼角)和瞳孔,并以內(nèi)眼角為坐標(biāo)原點(diǎn),以內(nèi)眼角和外眼角的連線為X軸,建立直角坐標(biāo)系,獲取瞳孔在所述直角坐標(biāo)系中的坐標(biāo),再將該坐標(biāo)與每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息中瞳孔的坐標(biāo)進(jìn)行比較,若差距小于預(yù)設(shè)閾值,則該捕捉到的人眼信息與該人眼特征信息匹配?;蛘?,判斷子單元121先將捕捉到的人眼圖片進(jìn)行圖像識(shí)別和處理,分別識(shí)別出左眼瞳孔和右眼瞳孔,并以左眼瞳孔和右眼瞳孔連線的中心點(diǎn)作為坐標(biāo)原點(diǎn),經(jīng)過(guò)坐標(biāo)原點(diǎn)的水平軸為X軸,豎直軸為Y軸建立直角坐標(biāo)系,分別獲取左眼瞳孔和右眼瞳孔在所述直角坐標(biāo)系中的坐標(biāo),再將左眼瞳孔和右眼瞳孔在所述直角坐標(biāo)系中的坐標(biāo)與每個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息中的左眼瞳孔坐標(biāo)和右眼瞳孔坐標(biāo)進(jìn)行相應(yīng)比較,若差距小于預(yù)設(shè)閾值,則該捕捉到的人眼信息與該人眼特征信息匹配。

所述預(yù)設(shè)閾值具體可以包括橫坐標(biāo)閾值和縱坐標(biāo)閾值,也就是說(shuō),在判斷時(shí)分別判斷捕捉到的人眼信息與該人眼特征信息的橫坐標(biāo)差距是否小于所述橫坐標(biāo)閾值,以及縱坐標(biāo)差距是否小于所述縱坐標(biāo)閾值。判斷子單元121判斷接下來(lái)連續(xù)預(yù)定次數(shù)捕捉到的人眼信息是否均與所述匹配區(qū)域?qū)?yīng)的人眼特征信息匹配的具體實(shí)施方式,與前述判斷捕捉到的人眼信息是否與預(yù)設(shè)的所述多個(gè)預(yù)定區(qū)域中任意一個(gè)預(yù)定區(qū)域?qū)?yīng)的人眼特征信息匹配的具體實(shí)施方式基本類似,即,比較接下來(lái)捕捉到的人眼信息中瞳孔位置與所述匹配區(qū)域?qū)?yīng)的人眼特征信息中瞳孔位置的差距是否小于預(yù)設(shè)閾值;若是,則確定所述捕捉到的人眼信息與所述匹配區(qū)域?qū)?yīng)的人眼特征信息相匹配,因此,此處不加贅述。

若所述判斷單元120判斷用戶正在注視一預(yù)定區(qū)域,則接收單元130接收對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的人眼控制命令。

圖8示出了根據(jù)本發(fā)明一具體實(shí)施方式的接收單元的結(jié)構(gòu)框圖。如圖8所示,在一種具體的實(shí)施方式中,接收單元130包括顯示子單元131和接收子單元132。

顯示子單元131用于對(duì)所述用戶注視的預(yù)定區(qū)域進(jìn)行突出顯示;接收子單元132用于接收在所述預(yù)定區(qū)域突出顯示時(shí)對(duì)所述預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊的人眼控制命令。

具體而言,若確定用戶正在注視終端屏幕的一個(gè)預(yù)定區(qū)域,則顯示子單元131對(duì)該預(yù)定區(qū)域進(jìn)行突出顯示,以提示用戶當(dāng)前可通過(guò)人眼控制命令對(duì)該預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行操作,顯示子單元131通過(guò)圖像采集設(shè)備接收用戶對(duì)該預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的人眼控制命令。

其中,顯示子單元131對(duì)所述用戶注視的預(yù)定區(qū)域進(jìn)行突出顯示具體包括但不限于以下兩種實(shí)現(xiàn)方式:

(1)將所述用戶注視的預(yù)定區(qū)域以不同于其他預(yù)定區(qū)域的顏色和/或亮度顯示。

例如,顯示子單元131將其他預(yù)定區(qū)域以原來(lái)的顏色顯示,將該用戶注視的預(yù)定區(qū)域以不同于其他預(yù)定區(qū)域的顏色顯示。又例如,顯示子單元131將其他預(yù)定區(qū)域以正常亮度顯示,或者以低于正常亮度的亮度顯示,將該用戶注視的預(yù)定區(qū)域以高亮(高于正常亮度)顯示,如圖2b所示,區(qū)域8為用戶注視的預(yù)定區(qū)域。再例如,顯示子單元131將其他預(yù)定區(qū)域以原來(lái)的顏色和正常亮度顯示,或者以低于正常亮度的亮度顯示,將該用戶注視的預(yù)定區(qū)域以不同于其他預(yù)定區(qū)域的顏色、和高于正常亮度的亮度顯示。

(2)將所述用戶注視的預(yù)定區(qū)域以凸出于其他預(yù)定區(qū)域的效果顯示。

通過(guò)將用戶注視的預(yù)定區(qū)域以特定的不同于其他預(yù)定區(qū)域的顏色、亮度、線條、陰影等的組合進(jìn)行顯示,可以實(shí)現(xiàn)使該用戶注視的預(yù)定區(qū)域凸出于其他預(yù)定區(qū)域而浮現(xiàn)顯示的立體效果,即,該用戶注視的預(yù)定區(qū)域并不是真的凸出于其他預(yù)定區(qū)域,而是在終端顯示屏上呈現(xiàn)出該用戶注視的預(yù)定區(qū)域凸出于其他預(yù)定區(qū)域的立體視覺(jué)效果。

在一種具體實(shí)施方式中,在人眼控制模式下對(duì)終端屏幕中的顯示內(nèi)容進(jìn)行處理,使得在終端屏幕的每個(gè)預(yù)定區(qū)域中只顯示一個(gè)按鈕/選項(xiàng)/鏈接;所述人眼控制命令為點(diǎn)擊命令,所述點(diǎn)擊命令用于在所述預(yù)定區(qū)域只有一個(gè)按鈕/選項(xiàng)/鏈接的情況下,對(duì)所述按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊。其中,該點(diǎn)擊命令可以通過(guò)設(shè)置預(yù)定時(shí)間內(nèi)連續(xù)眨眼次數(shù)來(lái)設(shè)置,例如,可以設(shè)置為1S內(nèi)連續(xù)眨眼3次。

在另一種具體的實(shí)施方式中,在終端屏幕的每個(gè)預(yù)定區(qū)域中可以顯示一個(gè)或多個(gè)按鈕/選項(xiàng)/鏈接;所述人眼控制命令包括:點(diǎn)擊命令和切換命令。所述點(diǎn)擊命令用于對(duì)所述預(yù)定區(qū)域中處于選中狀態(tài)的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊;所述切換命令用于在所述預(yù)定區(qū)域中有多個(gè)按鈕/選項(xiàng)/鏈接時(shí),對(duì)所述多個(gè)按鈕/選項(xiàng)/鏈接的選中狀態(tài)進(jìn)行切換。其中,不同的人眼控制命令可以通過(guò)設(shè)置預(yù)定時(shí)間內(nèi)連續(xù)眨眼次數(shù)來(lái)設(shè)置,例如,可以設(shè)置1S內(nèi)連續(xù)眨眼3次為點(diǎn)擊命令,1S內(nèi)連續(xù)眨眼2次為切換命令,所述預(yù)定時(shí)間和/或眨眼次數(shù)可以由用戶預(yù)先進(jìn)行設(shè)置。

具體地,若預(yù)定區(qū)域中只有一個(gè)按鈕/選項(xiàng)/鏈接,則接收子單元132可以直接接收對(duì)預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊的點(diǎn)擊命令。若預(yù)定區(qū)域中有多個(gè)按鈕/選項(xiàng)/鏈接,則接收子單元132先將其中的任意一個(gè)按鈕/選項(xiàng)/鏈接以選中狀態(tài)顯示(例如對(duì)該按鈕/選項(xiàng)/鏈接進(jìn)行突出顯示),若用戶想要點(diǎn)擊該處于選中狀態(tài)的按鈕/選項(xiàng)/鏈接,則通過(guò)眨眼發(fā)出點(diǎn)擊命令,若用戶不想點(diǎn)擊該按鈕/選項(xiàng)/鏈接,則通過(guò)眨眼發(fā)出切換命令,接收子單元132接收用戶通過(guò)眨眼發(fā)出的點(diǎn)擊命令或切換命令。

操作單元140根據(jù)所述人眼控制命令對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行相應(yīng)操作。所述相應(yīng)操作是指與人眼控制命令相應(yīng)的操作,例如,若人眼控制命令為點(diǎn)擊命令,則對(duì)所述用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行點(diǎn)擊操作。若人眼控制命令為按下命令,則對(duì)所述用戶注視的預(yù)定區(qū)域中的按鈕按下,若人眼控制命令為選中命令,則對(duì)所述用戶注視的預(yù)定區(qū)域中的選項(xiàng)進(jìn)行選中。

具體地,在任意一個(gè)按鈕/選項(xiàng)/鏈接處于選中狀態(tài)時(shí),若接收單元130采集到用戶通過(guò)眨眼發(fā)出的點(diǎn)擊命令,則操作單元140觸發(fā)該按鈕/選項(xiàng)/鏈接;若采集到用戶通過(guò)眨眼發(fā)出的切換命令,則操作單元140切換該用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的選中狀態(tài),即將當(dāng)前處于選中狀態(tài)的按鈕/選項(xiàng)/鏈接切換到正常顯示狀態(tài),并將另一個(gè)按鈕/選項(xiàng)/鏈接以選中狀態(tài)顯示,其中,當(dāng)需要切換選中狀態(tài)時(shí)可以按照預(yù)定順序切換所述多個(gè)按鈕/選項(xiàng)/鏈接的選中狀態(tài),例如按照從左到右的順序切換。

以上對(duì)本發(fā)明的終端控制方法及裝置進(jìn)行了描述。根據(jù)本發(fā)明的上述方案,通過(guò)捕捉人眼信息,并根據(jù)捕捉到的人眼信息判斷用戶是否正在注視終端屏幕的預(yù)定區(qū)域,并通過(guò)接收對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接的人眼控制命令,從而根據(jù)所述人眼控制命令對(duì)用戶注視的預(yù)定區(qū)域中的按鈕/選項(xiàng)/鏈接進(jìn)行相應(yīng)操作,實(shí)現(xiàn)了通過(guò)人眼控制終端的操作。

需要說(shuō)明的是,在不沖突的情況下,本發(fā)明中的實(shí)施例及實(shí)施例中的特征可以相互組合。

以上所述,僅是本發(fā)明的較佳實(shí)施例而已,并非對(duì)本發(fā)明作任何形式上的限制,依據(jù)本發(fā)明的技術(shù)實(shí)質(zhì)對(duì)以上實(shí)施例所作的任何簡(jiǎn)單修改、等同變化與修飾,均仍屬于本發(fā)明技術(shù)方案的范圍內(nèi)。

當(dāng)前第1頁(yè)1 2 3 
網(wǎng)友詢問(wèn)留言 已有0條留言
  • 還沒(méi)有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
1
于田县| 弥勒县| 淄博市| 田东县| 清镇市| 新蔡县| 修武县| 辽阳县| 宜宾市| 固原市| 达孜县| 玉门市| 礼泉县| 景洪市| 新绛县| 东乡族自治县| 南部县| 屏南县| 同心县| 阳原县| 宁安市| 夏津县| 晴隆县| 科技| 顺义区| 寿阳县| 凉城县| 永济市| 涞水县| 万安县| 且末县| 三亚市| 福州市| 万山特区| 安庆市| 盐城市| 原阳县| 怀化市| 同仁县| 大同市| 合山市|