專利名稱：一種顯示控制方法、裝置及終端的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及終端顯示應(yīng)用領(lǐng)域，尤其涉及一種顯示控制方法、裝置及終端。
背景技術(shù)：
隨著手機、平板電腦等移動終端的普及，移動終端的各種附加功能也日趨增多，如攝像頭、觸摸屏等設(shè)備；目前移動終端用戶控制屏幕顯示(如電子書、網(wǎng)頁、圖片等的顯示)的主要手段是通過鍵盤、鼠標(biāo)或觸摸屏控制終端設(shè)備的內(nèi)容顯示、如前后或上下翻頁、字體或圖片的縮放等。通過鍵盤、鼠標(biāo)或觸摸屏控制終端顯示的方式都存在一個明顯的特點，S卩，至少需要用戶使用手進行點擊操作或手勢控制；但是，在一些特殊情況下(如用餐時)，用戶由于雙
手都在使用而沒有辦法進行點擊操作，同時，由于觸摸屏是使用的接觸式操作特點，很多操作容易被誤判，如上下翻頁時所產(chǎn)生意外的單擊被認(rèn)為是確認(rèn)、取消或回退操作。因此，如何在現(xiàn)有技術(shù)的基礎(chǔ)上，提供一種全新的顯示控制方法來解放終端用戶的雙手，是本領(lǐng)域技術(shù)人員亟待解決的問題。

發(fā)明內(nèi)容
為了解決當(dāng)前顯示控制技術(shù)必須依賴于手動操作的問題，本發(fā)明提供了一種顯示控制方法、裝置及終端。為了實現(xiàn)本發(fā)明的目的，本發(fā)明提供了一種基于面部動作來控制終端顯示的顯示控制方法、裝置和終端；在一個實施例中，本發(fā)明提供的顯示控制方法，包括以下步驟周期性獲取用戶的面部圖像；根據(jù)面部圖像計算參照物坐標(biāo)；根據(jù)參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)，執(zhí)行操作。進一步的，上述實施例中的參照物為面部圖像中的任一點；預(yù)設(shè)坐標(biāo)為用戶在正常閱讀當(dāng)前顯示內(nèi)容時，參照物的空間坐標(biāo)。進一步的，在上述實施例中，根據(jù)參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)，執(zhí)行操作的步驟，具體包括兩種實現(xiàn)方式根據(jù)參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)，計算參照物的運動矢量，根據(jù)在預(yù)置時間段內(nèi)中參照物運動矢量的變化，執(zhí)行操作；或者根據(jù)參照物坐標(biāo)與預(yù)設(shè)值，確定參照物的空間位置；根據(jù)在預(yù)置時間段內(nèi)中參照物空間位置的變化，執(zhí)行操作。進一步的，在上述所有實施例中，當(dāng)參照物為面部圖像中的用戶任一瞳孔中心點時，根據(jù)面部圖像計算參照物坐標(biāo)的具體步驟包括獲取面部圖像的RGB分量圖像，選擇紅色分量圖像；將紅色分量圖像中各點的分量值與255做差，得到紅色分量圖像的反色圖；分別對反色圖進行X軸和Y軸方向的累加和運算,獲取確定X軸和Y軸方向的峰值坐標(biāo)；根據(jù)峰值坐標(biāo)，確定參照物的坐標(biāo)。本發(fā)明也提供了一種基于面部圖像的顯示控制裝置，在一個實施例中，該顯示控制裝置包括獲取模塊、處理模塊和執(zhí)行模塊；其中，獲取模塊，用于周期性獲取用戶的面部圖像；處理模塊，用于根據(jù)面部圖像計算獲取參照物坐標(biāo)，并與預(yù)設(shè)坐標(biāo)進行比較，并向執(zhí)行模塊輸出處理結(jié)果；執(zhí)行模塊，用于根據(jù)處理結(jié)果執(zhí)行操作。 同時，為了應(yīng)用本發(fā)明提供的顯示控制技術(shù)，本發(fā)明也提供了一種顯示控制終端；在一個實施例中，該顯示控制終端包括感應(yīng)裝置和顯示裝置、及本發(fā)明提供的顯示控制裝置；顯示控制裝置通過感應(yīng)裝置周期性獲取用戶的面部圖像，根據(jù)面部圖像計算參照物坐標(biāo)，并根據(jù)參照物坐標(biāo)與預(yù)設(shè)值控制顯示裝置的顯示。通過本發(fā)明的實施，提供了一種基于用戶面部動作控制終端顯示的技術(shù)，首先，該技術(shù)是基于用戶面部圖像進行顯示控制的，徹底解放了用戶的雙手；其次，該技術(shù)是基于用戶面部中參照物的相對坐標(biāo)進行控制的，用戶可以根據(jù)實際需要設(shè)置該參照物，給予了用戶的多樣的個性化選擇的可能；再次，該技術(shù)工作原理簡單，僅僅根據(jù)參照物空間位置或運算矢量的變化就實現(xiàn)了對終端顯示的控制，對終端設(shè)備的硬件要求低；最后，該技術(shù)可以根據(jù)閱讀時用戶瞳孔位置的變化就可以實現(xiàn)控制，方便快捷；綜上，通過本發(fā)明的實施，終端用戶不需要通過鍵盤、鼠標(biāo)或觸摸屏僅通過面部動作就可以實現(xiàn)對終端顯示內(nèi)容的控制，增加了用戶的使用體驗。


圖I為本發(fā)明實施例中顯示控制終端I的結(jié)構(gòu)示意圖；圖2為本發(fā)明實施例中顯示控制裝置12的結(jié)構(gòu)示意圖；圖3為本發(fā)明最佳實施例中顯示控制裝置12中處理模塊122的結(jié)構(gòu)示意圖；圖4為本發(fā)明實施例中顯示控制方法的流程圖；圖5a為本發(fā)明一實施例中的參照物定位方法的流程圖；圖5b為本發(fā)明一實施例中的面部圖像示意圖；圖6a為本發(fā)明一實施例中的顯示控制方法的流程圖；圖6b為本發(fā)明一實施例中的參照物空間位置變化的示意圖；圖6c為本發(fā)明一實施例中的參照物空間位置變化的示意圖；圖6d為本發(fā)明一實施例中的參照物空間位置變化的示意圖；圖7a為本發(fā)明一實施例中的顯示控制方法的流程圖；圖7b為本發(fā)明一實施例中的參照物運動矢量變化的示意圖；圖7c為本發(fā)明一實施例中的參照物運動矢量變化的示意圖；圖7d為本發(fā)明一實施例中的參照物運動矢量變化的示意圖；圖7e為本發(fā)明一實施例中的參照物運動矢量變化的示意圖；圖7f為本發(fā)明一實施例中的參照物運動矢量變化的示意圖；圖7g為本發(fā)明一實施例中的參照物運動矢量變化的示意圖。
具體實施例方式下面通過具體實施方式
結(jié)合附圖的方式對本發(fā)明做出進一步的詮釋說明。為了解決現(xiàn)有的顯示控制技術(shù)對用戶雙手的依賴，本發(fā)明提供了一種全新的顯示控制技術(shù)，該顯示控制技術(shù)通過終端設(shè)備對用戶的面部(或頭部)動作進行實時監(jiān)控，計算用戶面部參照物的當(dāng)前坐標(biāo)與設(shè)置坐標(biāo)之間的位置或運算矢量的變化，來控制終端設(shè)備的顯不O圖I為本發(fā)明實施例中顯示控制終端I的結(jié)構(gòu)示意圖。由圖I可知，在一個實施例中，本發(fā)明提供的顯示控制終端I包括用于感知用戶面部(或頭部)動作的感應(yīng)裝置11，用于顯示內(nèi)容的顯示裝置13，及用于控制顯示裝置的顯示內(nèi)容的顯示控制裝置12 ;顯示控制裝置12通過感應(yīng)裝置11獲取用戶的面部圖像，進行一
系列處理(該處理過程在下文進行詳細(xì)的說明)之后，控制顯示控制裝置12的顯示。在上述實施例中，感應(yīng)裝置11包括但不局限于攝像頭、紅外感應(yīng)裝置及基于其他感應(yīng)的感應(yīng)裝置；顯示裝置13包括但不局限于手機屏幕、電腦顯示器、投影儀的顯示布或室內(nèi)外LED大屏幕等。圖2為圖I所示的顯示控制終端I中的顯示控制裝置12的結(jié)構(gòu)示意圖。從圖2可知，在一個實施例中，上述實施例中顯示控制終端I所包含的顯示控制裝置12包括包括獲取模塊121、處理模塊122和執(zhí)行模塊123 ;其中，獲取模塊121，用于周期性獲取用戶的面部圖像，并將獲取到的面部圖像傳輸?shù)教幚砟K122 ；處理模塊122，用于根據(jù)面部圖像計算獲取參照物坐標(biāo)，并與預(yù)設(shè)坐標(biāo)進行比較，并向執(zhí)行模塊123輸出處理結(jié)果；執(zhí)行模塊123，用于根據(jù)處理模塊122傳輸?shù)教幚斫Y(jié)果執(zhí)行操作。在上述實施例中，獲取模塊121是通過顯示控制終端I中的感應(yīng)裝置11來獲取用戶面部圖像的；執(zhí)行模塊123則用來控制顯示控制終端I中的顯示裝置13的顯示。在一個實施例中，上述實施例中涉及的參照物為面部圖像中的任一點，如用戶的任一個瞳孔、鼻尖、甚至面部上的標(biāo)記點都可以；預(yù)設(shè)坐標(biāo)為用戶在正常閱讀當(dāng)前顯示內(nèi)容時，所選取的參照物的空間坐標(biāo)，需要說明的是，當(dāng)終端設(shè)備通過小屏幕輸出時，該參照物的空間坐標(biāo)可以僅僅是一個坐標(biāo)點，但是，當(dāng)終端設(shè)備通過中型或大型屏幕輸出時，該參照物的空間坐標(biāo)就是一個坐標(biāo)范圍了，當(dāng)然，該參照物的空間坐標(biāo)類型并不影響本發(fā)明的實施。圖3為圖2所示的顯示控制裝置12中處理模塊122的結(jié)構(gòu)示意圖。從圖3可以看出，在本發(fā)明的一個最佳實施例中，圖2所示顯示控制裝置12中處理模塊122可以包括第一處理單元1221、第二處理單元1222、計算單元1223和存儲單元1224，其中，第一處理單元1221，用于根據(jù)所述參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)，計算參照物的運動矢量；并根據(jù)在預(yù)置時間段內(nèi)中，參照物運動矢量的變化，輸出處理結(jié)果；第二處理單元1222，用于根據(jù)所述參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)，計算參照物的空間位置；并根據(jù)在預(yù)置時間段內(nèi)中，參照物空間位置的變化，輸出處理結(jié)果；
計算單元1223，用于當(dāng)所述參照物為所述面部圖像中用戶瞳孔中心點中的一個或兩個時，獲取面部圖像的RGB分量圖像，選擇紅色分量圖像；將所述紅色分量圖像中各點的分量值與255做差，得到所述紅色分量圖像的反色圖；分別對所述反色圖進行X軸和Y軸方向的累加和運算，獲取確定X軸和Y軸方向的峰值坐標(biāo)；根據(jù)所述峰值坐標(biāo)，確定所述參照物坐標(biāo)；當(dāng)然，該計算單元1223主要是為了實現(xiàn)參照物的定位功能，其可以通過其他的定位方式實現(xiàn)參照物的定位；存儲單元1224，用于存儲用戶在正常閱讀終端設(shè)備的當(dāng)前顯示內(nèi)容時間，參照物的空間坐標(biāo)點或空間坐標(biāo)移動范圍；當(dāng)然，也可以用于存儲該顯示控制裝置12的工作記錄，便于用戶進行校準(zhǔn)等操作；同時，當(dāng)計算單元1223能夠?qū)崿F(xiàn)數(shù)據(jù)閃存功能時，該存儲單元1224的功能也可以由計算單元1223實現(xiàn)。在上述實施例中，第一處理單元1221和第二處理單元1222并不是必須同時存在的，任一個處理單元都可以實現(xiàn)對參照物坐標(biāo)和預(yù)設(shè)坐標(biāo)的處理，兩個處理單元僅僅是兩種不同的數(shù)據(jù)處理機制而已。圖4是本發(fā)明提供的應(yīng)用圖I所示的顯示控制終端I的顯示控制方法在一個實施例中的流程圖。從圖4可知，在一個實施例中，本發(fā)明提供的顯示控制方法包括以下步驟S401 :周期性獲取用戶的面部圖像；S402 :根據(jù)面部圖像計算參照物坐標(biāo)；S403 :處理所述參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)；S404 :根據(jù)處理結(jié)果，執(zhí)行操作。在一個實施例中，圖4所示的顯示控制方法中涉及的所述參照物為所述面部圖像中的任一點或多點；所述預(yù)設(shè)坐標(biāo)為用戶在正常閱讀當(dāng)前顯示內(nèi)容時，所述參照物的空間坐標(biāo)。在一個實施例中，圖4所示的顯示控制方法中的步驟S403的實現(xiàn)方式至少包括兩種，其步驟分別為根據(jù)參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)，計算參照物的運動矢量；根據(jù)在預(yù)置時間段內(nèi)中參照物運動矢量的變化，執(zhí)行操作；或者根據(jù)參照物坐標(biāo)與預(yù)設(shè)值，確定參照物的空間位置；根據(jù)在預(yù)置時間段內(nèi)中參照物空間位置的變化，執(zhí)行操作。在一個實施例中，當(dāng)用戶設(shè)定的參照物為用戶的瞳孔時，圖4所示的顯示控制方法中的步驟S402的實現(xiàn)方式包括以下步驟獲取面部圖像的RGB分量圖像，選擇紅色分量圖像；將紅色分量圖像中各點的分量值與255做差，得到紅色分量圖像的反色圖；分別對反色圖進行X軸和Y軸方向的累加和運算，獲取確定X軸和Y軸方向的峰值坐標(biāo)；根據(jù)峰值坐標(biāo)，確定參照物的坐標(biāo)。為了更好的說明本發(fā)明提供的顯示控制技術(shù)，在以下的實施例中，結(jié)合實際生活對做本發(fā)明思想做進一步的詮釋說明。
本發(fā)明的實施主要包括兩個方面面部圖像中參照物的選取與定位方法及面部動作的分析及控制方法；下面分別進行說明。面部圖像中參照物的選取與定位方法圖5a為本發(fā)明一實施例中的參照物定位方法的流程圖；圖5b為本發(fā)明一實施例中的面部圖像示意圖；在選取參照物時，用戶可以根據(jù)需要進行個性化的選擇(如鼻尖、眉心紅點等標(biāo)記之類)，當(dāng)然，用戶也可以使用默認(rèn)設(shè)置，默認(rèn)的參照物為用 戶的瞳孔中心點；下面以一實施例說明本發(fā)明提供的顯示控制技術(shù)；在該實施例中做以下假設(shè)當(dāng)用戶為黃皮膚黑眼睛的黃種人、顯示控制終端的感應(yīng)裝置為攝像頭、顯示控制終端的顯示裝置為移動手機的顯示屏、用戶使用顯示控制終端默認(rèn)的參照物時，由圖5a可知，在一個實施例中，參照物的定位方法包括以下步驟S501 :利用攝像頭獲取用戶的面部圖像；適當(dāng)調(diào)整攝像頭的位置得到如說明書附圖5b所示的面部圖像；S502 :選擇當(dāng)前用戶面部圖像的RGB彩圖中紅色分量圖像(R_img)作為預(yù)處理數(shù)據(jù)；由于黃種人的黃皮膚(肉色)的RGB配比為R-255，G-204, B-102，而黑眼睛的瞳孔中心(為黑色)的RGB配比為R-0，G-0，B-0，可見紅色色差是最突出的，選擇紅色分量進行計算誤差最小，當(dāng)然也可以選擇其他顏色分量進行計算，不在重復(fù)說明；S503 :將紅色分量圖像R_img與255做差，得到紅色分量反色圖R_R_img ；這樣大部分面部圖像的像素數(shù)據(jù)都是0，而瞳孔中心(和眉毛)則成為255 ；S504 :對紅色分量反色圖分別在X軸和Y軸方向做累加和運算；如附圖5b所示在X軸方向的累加會有兩個峰值P_XL和P_XR，分別是左右眼瞳孔中心點，而在Y軸方向也會有兩個峰值P_YU和P_YD，分別是眉毛和瞳孔中心點；S505 :確定參照物坐標(biāo)；剔除眉毛(P_YU)的干擾(由于眉毛永遠(yuǎn)在眼睛上面)，因此只要保留Y軸坐標(biāo)下面的峰值位置P_YD即可，此時就可以確定用戶的左右瞳孔中心點的坐標(biāo)，在按照用戶選擇或系統(tǒng)模塊的一個瞳孔作為參照物，記錄參照物的坐標(biāo)即可。針對其他各種皮膚和各種顏色眼睛組合的用戶，采用圖5a所示的參照物定位方法時，可以根據(jù)在先獲取的用戶面部圖像及RGB顏色查詢對照表(http://www. 1141a. com/other/rgb. htm,下載網(wǎng)頁的一個地址)確定選擇用戶面部圖像RGB彩圖中的那個分量圖進行處理；該選擇方式的過程，本領(lǐng)域的技術(shù)人員可以輕松實現(xiàn)，不在進行說明。需要說明的是，圖5a所示的定位方法可以由其他的參照物定位方法實現(xiàn)，如空間坐標(biāo)定位，極坐標(biāo)定位、紅外位置定位等。面部動作的分析及控制方法我們先約定幾個用戶日常的操作動作屏幕內(nèi)容移動，通過上下左右輕微轉(zhuǎn)動頭部完成，例如，需要看當(dāng)前屏幕下一頁的內(nèi)容，用戶只需微微向下低頭，做出試圖看到屏幕下面(視野之外)的動作；屏幕內(nèi)容縮放，通過增大或減小用戶面部與屏幕距離完成，例如，需要放大當(dāng)前字體，用戶做出微微靠近屏幕的動作；確認(rèn)操作，用戶點頭；取消操作，用戶搖頭。當(dāng)然，本發(fā)明提供的顯示控制終端也支持用戶設(shè)置自定義動作，如關(guān)閉等操作；
下面以實施例說明本發(fā)明提供的顯示控制技術(shù)；在該實施例中做以下假設(shè)參照物的坐標(biāo)為三位空間坐標(biāo)，預(yù)設(shè)坐標(biāo)為用戶在正常閱讀終端設(shè)備當(dāng)前顯示內(nèi)容時參照物的空間坐標(biāo)移動范圍，操作包括上下左右翻頁(移動)、縮放、確認(rèn)取消8個操作；圖6a為本發(fā)明提供的顯示控制方法在一個實施例的流程圖。由圖6a可知，在一個實施例中，本發(fā)明提供的顯示控制方法包括以下步驟S601 :計算并記錄預(yù)設(shè)坐標(biāo)；利用圖5a所示的參照物定位方法計算出用戶在正常閱讀終端設(shè)備當(dāng)前顯示內(nèi)容時參照物的空間坐標(biāo)移動范圍；S602 :周期性獲取用戶的面部圖像；因為攝像設(shè)備都存在采樣周期，此處獲取用戶面部圖像的周期默認(rèn)為攝像設(shè)備的
采樣周期；S603 :計算參照物坐標(biāo)；利用圖5a所示的參照物定位方法計算出參照物在當(dāng)前的面部圖像中空間坐標(biāo)；S604 :確定參照物的空間位置；根據(jù)步驟S603中計算得到參照物坐標(biāo)確定參照物當(dāng)前空間位置；S605 :計算預(yù)置時間段內(nèi)中參照物空間位置的變化；預(yù)置時間段大小為用戶設(shè)置的點頭或搖頭動作的執(zhí)行時間T，當(dāng)用戶沒有設(shè)置預(yù)置時間段大小時，該預(yù)置時間段大小為系統(tǒng)默認(rèn)時間長短(統(tǒng)計得到的人類點頭或搖頭的平均周期時間)，起算時刻為參照物的空間位置在超出預(yù)設(shè)坐標(biāo)的時刻；例如該終端設(shè)備的采樣周期是t，用戶設(shè)置(或系統(tǒng)默認(rèn))的點頭/搖頭的執(zhí)行時間為T，則根據(jù)參照物的空間位置超出預(yù)設(shè)坐標(biāo)范圍的時刻起，記錄在η個采樣周期內(nèi)參照物空間位置的變化，并根據(jù)該進行控制顯示，其中n=T/t ;圖6b和圖6c為該空間位置變化的示例；S606 :根據(jù)步驟S605得到的變化，執(zhí)行操作；操作包括上下左右翻頁或移動、縮放、確認(rèn)取消。在上述實施例中，步驟S605得到參照物空間位置的變化可以是變化曲線圖；現(xiàn)在假設(shè)預(yù)置時間段的時間長短是6個采樣周期；在該時間段內(nèi)，假設(shè)參照物空間位置的變化曲線圖分別如圖6b、圖6c所示，其中，圖6b所示的空間位置變化代表了搖頭(即取消操場)，圖6c所示的空間位置變化代表了向右翻頁的操作；在圖6b、圖6c中，1、2、3、4、5、6六個數(shù)字分別代表了在對應(yīng)的用戶面部圖像中參照物的位置。為了更直觀說明在本發(fā)明中當(dāng)顯示控制裝置檢測到參照物的空間位置時，所代表的操作，以圖6d說明，在預(yù)置時間段內(nèi)，如果參照物一直在一區(qū)內(nèi)運動，則向上翻頁；參照物一直在二區(qū)內(nèi)運動，則向下翻頁；參照物一直在三區(qū)內(nèi)運動，則向左翻頁；參照物一直在四區(qū)內(nèi)運動，則向右翻頁；參照物在一、零、二區(qū)內(nèi)來回運動，則代表點頭操作；參照物在三、零、四區(qū)內(nèi)來回運動，則代表搖頭操作；在該實施例中，僅給出了參照物在平行于顯示面的平面上運動的情況，在其他實施例中，參照物也可以在垂直于顯示面的平面上運動，此時，可以采用三維坐標(biāo)計算參照物的空間位置及空間位置的變化；如X軸代表左右方向、Y軸代表上下方向、Z軸代表前后方向，當(dāng)參照物在Z軸方向運動時，Z軸坐標(biāo)減小代表參照物靠近屏幕，放大顯示內(nèi)容，反之，縮小顯示內(nèi)容。當(dāng)然，用戶可以根據(jù)需要自定義各動作所代表的操作，也可以自定義操作動作等，如視覺感知校正(當(dāng)用戶第一次使用設(shè)備時，需要分別注視屏幕的四個頂角，讓攝像頭記錄下該用戶參照物的空間坐標(biāo)在屏幕范圍內(nèi)的游離距離，橫向/縱向最大坐標(biāo)，以及當(dāng)前操作者目光鎖定的屏幕位置，便于后面的操作準(zhǔn)確度)、屏幕內(nèi)容鎖定(當(dāng)分析出當(dāng)前用戶參照物坐標(biāo)后，需要在屏幕上出現(xiàn)一個內(nèi)容鎖定光標(biāo)，用以告知用戶當(dāng)前目光鎖定的屏幕位置，如果操作者認(rèn)為分析不準(zhǔn)確，可以進一步做視覺感知校正，直到準(zhǔn)確感知目光鎖定的屏幕位置)等。當(dāng)然該顯示控制方法還存在其他的實現(xiàn)方式，例如，圖7a所示的方法；圖7a為本發(fā)明提供的顯示控制方法在另一個實施例的流程圖。由圖7a可知，在一個實施例中，本發(fā)明提供的顯示控制方法包括以下步驟S701 :計算并記錄預(yù)設(shè)坐標(biāo)；和步驟S601相同；S702 :周期性獲取用戶的面部圖像；和步驟S602相同；S703 :計算參照物坐標(biāo)；和步驟S603相同；S704 :確定參照物的運動矢量；根據(jù)步驟S603中計算得到參照物坐標(biāo)減去預(yù)設(shè)坐標(biāo)得到參照物的運動矢量；S705 :計算預(yù)置時間段內(nèi)中參照物運動矢量的變化；得到的參照物運動矢量的變化圖如圖7b至圖7g所示；S706 :根據(jù)步驟S705得到的變化，執(zhí)行操作。在上述實施例中，步驟S705得到參照物運動矢量的變化是變化曲線圖；現(xiàn)在假設(shè)預(yù)置時間段的時間長短是6個采樣周期；在該時間段內(nèi)，假設(shè)參照物運動矢量的變化曲線圖分別如圖7b至圖7g所示(圖中各箭頭的大小及方向代表了，在六個面部圖像中參照物與預(yù)設(shè)坐標(biāo)相比發(fā)生的運動矢量)，其中，圖7b所示的運動矢量變化代表了仰視(即向上移動或翻頁)；圖7c所示的運動矢量變化代表了右移(即向右移動或翻頁)；圖7d所示的運動矢量變化代表了俯視(即向下移動或翻頁)；圖7e所示的運動矢量變化代表了左移(即向左移動或翻頁)；圖7f所示的運動矢量變化代表了搖頭(即取消或否定操作)；圖7g所示的運動矢量變化代表了點頭(即確認(rèn)或肯定操作)。在該實施例中，僅給出了參照物在平行于顯示面的平面上運動的情況，在其他實施例中，參照物也可以在垂直于顯示面的平面上運動，此時，可以采用三維坐標(biāo)計算參照物的空間位置及空間位置的變化；如X軸代表左右方向、Y軸代表上下方向、Z軸代表前后方向，當(dāng)參照物在Z軸方向運動時，Z軸坐標(biāo)減小代表參照物靠近屏幕，放大顯示內(nèi)容，反之，縮小顯示內(nèi)容。上述兩個實施例只是兩種獲得參照物位置變化的最佳方法，當(dāng)然，也可以通過其他的方法獲取參照物的位置變化，如圖像對比方法(即拍攝一樣大小的圖像之間，進行重疊比較)等。通過本發(fā)明的實施，與現(xiàn)有技術(shù)相比存在以下進步首先，該技術(shù)是基于用戶面部圖像進行顯示控制的，比現(xiàn)有技術(shù)中的按鍵、觸屏、鼠標(biāo)甚至手勢控制技術(shù)都方便用戶的使用，徹底解放了用戶的雙手；其次，該技術(shù)是基于用戶面部中參照物的相對坐標(biāo)進行控制的，用戶可以根據(jù)實際需要設(shè)置該參照物，如任一個瞳孔、鼻尖、甚至在面部做標(biāo)記點都可以，給予了用戶的多樣的個性化選擇的可能；

再次，該技術(shù)工作原理簡單，僅僅根據(jù)參照物空間位置或運算矢量的變化就實現(xiàn)了對終端顯示的控制，對終端設(shè)備的硬件要求低，使該技術(shù)可以更廣闊的應(yīng)用到日常生活；最后，該技術(shù)可以根據(jù)閱讀時用戶瞳孔位置的變化就可以實現(xiàn)控制，方便快捷；綜上，通過本發(fā)明飛實施，終端用戶不需要通過鍵盤、鼠標(biāo)或觸摸屏僅通過面部動作就可以實現(xiàn)對終端顯示內(nèi)容的控制，增加了用戶的使用體驗。以上僅是本發(fā)明的具體實施方式
而已，并非對本發(fā)明做任何形式上的限制，凡是依據(jù)本發(fā)明的技術(shù)實質(zhì)對以上實施方式所做的任意簡單修改、等同變化或修飾，均仍屬于本發(fā)明技術(shù)方案的保護范圍。
權(quán)利要求
1.一種顯示控制方法，其特征在于，包括 周期性獲取用戶的面部圖像； 根據(jù)所述面部圖像計算參照物坐標(biāo)； 處理所述參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)，執(zhí)行操作。
2.如權(quán)利要求I所述的顯示控制方法，其特征在于，所述參照物為所述面部圖像中的任一點或多點；所述預(yù)設(shè)坐標(biāo)為用戶在正常閱讀當(dāng)前顯示內(nèi)容時，所述參照物的空間坐標(biāo)。
3.如權(quán)利要求2所述的顯示控制方法，其特征在于，處理所述參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)執(zhí)行操作，包括以下步驟 根據(jù)所述參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)，計算參照物的運動矢量； 根據(jù)在預(yù)置時間段內(nèi)中參照物運動矢量的變化，執(zhí)行操作。
4.如權(quán)利要求2所述的顯示控制方法，其特征在于，處理所述參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)執(zhí)行操作，包括以下步驟 根據(jù)所述參照物坐標(biāo)與預(yù)設(shè)值，確定參照物的空間位置； 根據(jù)在預(yù)置時間段內(nèi)中參照物空間位置的變化，執(zhí)行操作。
5.如權(quán)利要求I至4任一項所述的顯示控制方法，其特征在于，當(dāng)所述參照物為所述面部圖像中用戶瞳孔中心點中的一個或兩個時，根據(jù)所述面部圖像計算參照物坐標(biāo)的操作，包括以下步驟 獲取面部圖像的RGB分量圖像，選擇紅色分量圖像； 將所述紅色分量圖像中各點的分量值與255做差，得到所述紅色分量圖像的反色圖；分別對所述反色圖進行X軸和Y軸方向的累加和運算，獲取確定X軸和Y軸方向的峰值坐標(biāo)； 根據(jù)所述峰值坐標(biāo)，確定參照物的坐標(biāo)。
6.一種顯示控制裝置，其特征在于，包括獲取模塊、處理模塊和執(zhí)行模塊； 所述獲取模塊，用于周期性獲取用戶的面部圖像； 所述處理模塊，用于根據(jù)所述面部圖像計算獲取參照物坐標(biāo)，并與預(yù)設(shè)坐標(biāo)進行比較處理，并向所述執(zhí)行模塊輸出處理結(jié)果； 所述執(zhí)行模塊，用于根據(jù)所述處理結(jié)果執(zhí)行操作。
7.如權(quán)利要求6所述的顯示控制裝置，其特征在于，所述參照物為所述面部圖像中的任一點或多點；所述預(yù)設(shè)坐標(biāo)為用戶在正常閱讀當(dāng)前顯示內(nèi)容時，所述參照物的空間坐標(biāo)。
8.如權(quán)利要求7所述的顯示控制裝置，其特征在于，所述處理模塊包括第一處理單元； 所述第一處理單元，用于根據(jù)所述參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)，計算參照物的運動矢量，并根據(jù)在預(yù)置時間段內(nèi)中，參照物運動矢量的變化，輸出處理結(jié)果。
9.如權(quán)利要求7所述的顯示控制裝置，其特征在于，所述處理模塊包括第二處理單元； 所述第二處理單元，用于根據(jù)所述參照物坐標(biāo)與預(yù)設(shè)坐標(biāo)，計算參照物的空間位置，并根據(jù)在預(yù)置時間段內(nèi)中，參照物空間位置的變化，輸出處理結(jié)果。
10.如權(quán)利要求6至9任一項所述的顯示控制裝置，其特征在于，所述處理模塊包括計算單元； 所述計算單元，用于當(dāng)所述參照物為所述面部圖像中用戶瞳孔中心點中的一個或兩個時，獲取面部圖像的RGB分量圖像，選擇紅色分量圖像，將所述紅色分量圖像中各點的分量值與255做差，得到所述紅色分量圖像的反色圖，分別對所述反色圖進行X軸和Y軸方向的累加和運算，獲取確定X軸和Y軸方向的峰值坐標(biāo)，根據(jù)所述峰值坐標(biāo)，確定所述參照物坐標(biāo)。
11.一種顯示控制終端，包括感應(yīng)裝置和顯示裝置，其特征在于，還包括如權(quán)利要求6至10任一項所述的顯示控制裝置；所述顯示控制裝置通過所述感應(yīng)裝置周期性獲取用戶的面部圖像，根據(jù)面部圖像計算參照物坐標(biāo)，并根據(jù)參照物坐標(biāo)與預(yù)設(shè)值控制所述顯示裝置的內(nèi)容顯示。
全文摘要
為了解決當(dāng)前終端顯示控制技術(shù)依賴于手動操作的問題，本發(fā)明提供了一種顯示控制方法、裝置及終端。該裝置包括用于周期性獲取用戶面部圖像的獲取模塊，用于根據(jù)面部圖像計算獲取參照物坐標(biāo)并與預(yù)設(shè)坐標(biāo)進行比較的處理模塊，用于根據(jù)處理結(jié)果執(zhí)行操作的執(zhí)行模塊；該終端包括用于感應(yīng)用戶面部圖像的感應(yīng)裝置、用于顯示內(nèi)容的顯示裝置及本發(fā)明提供的顯示控制裝置，顯示控制裝置通過感應(yīng)裝置周期性獲取用戶的面部圖像，根據(jù)面部圖像計算參照物坐標(biāo)，并根據(jù)參照物坐標(biāo)與預(yù)設(shè)值控制顯示裝置的顯示。通過本發(fā)明的實施，用戶不需要通過鍵盤、鼠標(biāo)或觸摸屏僅通過面部動作就可以實現(xiàn)對終端顯示內(nèi)容的控制，解放了用戶的雙手，增加了用戶的使用體驗。
文檔編號G06F3/01GK102880290SQ201210305149
公開日2013年1月16日 申請日期2012年8月24日 優(yōu)先權(quán)日2012年8月24日
發(fā)明者強威 申請人:中興通訊股份有限公司