屏幕按鍵控制方法及系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及一種按鍵控制方法及系統(tǒng)，尤其是涉及一種控制電子裝置的顯示屏幕 上的按鍵的方法及系統(tǒng)。
【背景技術(shù)】
[0002] 目前手機(jī)、平板電腦等電子裝置，越來(lái)越多的使用顯示屏幕(例如觸摸屏）作為接 收用戶輸入的操作接口。當(dāng)用戶需要控制顯示屏幕上的某個(gè)按鍵時(shí)，該按鍵需要用戶以手 指按壓顯示屏幕來(lái)選定，電子裝置才能執(zhí)行該按鍵所對(duì)應(yīng)的操作。然而當(dāng)用戶的手指使用 不方便時(shí)，例如手指沾水或手指受傷的情況下，按鍵的控制則無(wú)法實(shí)現(xiàn)，因此造成電子裝置 使用上的不便利。此外，通過(guò)語(yǔ)音識(shí)別軟件識(shí)別用戶的語(yǔ)音指令，可以實(shí)現(xiàn)電子裝置的某些 功能，例如翻頁(yè)等操作，但是顯示屏幕上按鍵的控制則無(wú)法實(shí)現(xiàn)。

【發(fā)明內(nèi)容】

[0003] 鑒于以上內(nèi)容，有必要提供一種屏幕按鍵控制方法及系統(tǒng)，可以通過(guò)用戶眼睛的 聚焦及語(yǔ)音信息的輸入來(lái)控制電子裝置的顯示屏幕上的按鍵。
[0004] 一種屏幕按鍵控制方法，應(yīng)用于電子裝置中，該方法包括步驟：（a)在偵測(cè)到用戶 眼睛聚焦于顯示屏幕上的按鍵后，拍攝用戶的人臉圖像，并根據(jù)該人臉圖像確定用戶需要 操作的按鍵；（b)接收用戶所輸入的語(yǔ)音信息，并利用語(yǔ)音識(shí)別軟件識(shí)別該語(yǔ)音信息所對(duì) 應(yīng)的操作指令；及（c )根據(jù)所述操作指令執(zhí)行所述需要操作的按鍵所對(duì)應(yīng)的動(dòng)作。
[0005] -種屏幕按鍵控制系統(tǒng)，運(yùn)行于電子裝置中，該系統(tǒng)包括：按鍵確定模塊，用于在 偵測(cè)到用戶眼睛聚焦于顯示屏幕上的按鍵后，拍攝用戶的人臉圖像，并根據(jù)該人臉圖像確 定用戶需要操作的按鍵；指令識(shí)別模塊，用于接收用戶所輸入的語(yǔ)音信息，并利用語(yǔ)音識(shí)別 軟件識(shí)別該語(yǔ)音信息所對(duì)應(yīng)的操作指令；及控制模塊，用于根據(jù)所述操作指令執(zhí)行所述需 要操作的按鍵所對(duì)應(yīng)的動(dòng)作。
[0006] 相較于現(xiàn)有技術(shù)，利用本發(fā)明所提供的屏幕按鍵控制方法及系統(tǒng)，可以在用戶眼 睛聚焦于顯示屏幕上的按鍵后，通過(guò)電子裝置的攝像單元所拍攝的人臉圖像確定在顯示屏 幕上需要操作的按鍵，并在接收到用戶所輸入的語(yǔ)音信息后，根據(jù)該語(yǔ)音信息執(zhí)行該需要 操作的按鍵所對(duì)應(yīng)的動(dòng)作，從而實(shí)現(xiàn)了顯示屏幕上按鍵的控制，增加了按鍵控制的便利性。
【附圖說(shuō)明】
[0007] 圖1是本發(fā)明屏幕按鍵控制系統(tǒng)較佳實(shí)施例的硬件架構(gòu)圖。
[0008] 圖2是本發(fā)明屏幕按鍵控制系統(tǒng)較佳實(shí)施例的功能模塊圖。
[0009] 圖3是本發(fā)明屏幕按鍵控制方法較佳實(shí)施例的作業(yè)流程圖。
[0010] 圖4是本發(fā)明屏幕按鍵控制方法較佳實(shí)施例的控制顯示屏幕上按鍵的示例圖。 [0011] 主要元件符號(hào)說(shuō)明
【主權(quán)項(xiàng)】
1. 一種屏幕按鍵控制方法，應(yīng)用于電子裝置中，其特征在于，該方法包括： 按鍵確定步驟：在偵測(cè)到用戶眼睛聚焦于顯示屏幕上的按鍵后，拍攝用戶的人臉圖像， 并根據(jù)該人臉圖像確定用戶需要操作的按鍵； 指令識(shí)別步驟：接收用戶所輸入的語(yǔ)音信息，并利用語(yǔ)音識(shí)別軟件識(shí)別該語(yǔ)音信息所 對(duì)應(yīng)的操作指令；及 控制步驟：根據(jù)所述操作指令執(zhí)行所述需要操作的按鍵所對(duì)應(yīng)的動(dòng)作。
2. 如權(quán)利要求1所述的屏幕按鍵控制方法，其特征在于，在所述按鍵確定步驟前還包 括存儲(chǔ)步驟： 拍攝用戶眼睛聚焦于顯示屏幕上不同的按鍵時(shí)的人臉圖像，并將該拍攝的人臉圖像、 及該拍攝的人臉圖像與用戶眼睛所聚焦的按鍵的對(duì)應(yīng)關(guān)系存儲(chǔ)至電子裝置的存儲(chǔ)單元中。
3.如權(quán)利要求2所述的屏幕按鍵控制方法，其特征在于，所述按鍵確定步驟通過(guò)以下 方式確定用戶需要操作的按鍵： 將所述拍攝的人臉圖像與存儲(chǔ)單元中存儲(chǔ)的人臉圖像進(jìn)行比對(duì)； 在所述存儲(chǔ)單元中尋找與所述拍攝的人臉圖像相似度最高的人臉圖像；及 確定該與所述拍攝的人臉圖像相似度最高的人臉圖像所對(duì)應(yīng)的按鍵為用戶需要操作 的按鍵。
4. 如權(quán)利要求1所述的屏幕按鍵控制方法，其特征在于，在所述按鍵確定步驟后還包 括： 以一個(gè)預(yù)設(shè)方式標(biāo)識(shí)所述需要操作的按鍵，以提示用戶已確定該需要操作的按鍵。
5. 如權(quán)利要求1所述的屏幕按鍵控制方法，其特征在于，所述按鍵確定步驟通過(guò)判斷 用戶眼睛是否在一個(gè)預(yù)設(shè)時(shí)間內(nèi)沒有變化，或通過(guò)用戶眼睛的預(yù)設(shè)動(dòng)作是否發(fā)生，來(lái)偵測(cè) 用戶眼睛是否聚焦于顯示屏幕上的按鍵。
6. -種屏幕按鍵控制系統(tǒng)，運(yùn)行于電子裝置中，其特征在于，該系統(tǒng)包括： 按鍵確定模塊，用于在偵測(cè)到用戶眼睛聚焦于顯示屏幕上的按鍵后，拍攝用戶的人臉 圖像，并根據(jù)該人臉圖像確定用戶需要操作的按鍵； 指令識(shí)別模塊，用于接收用戶所輸入的語(yǔ)音信息，并利用語(yǔ)音識(shí)別軟件識(shí)別該語(yǔ)音信 息所對(duì)應(yīng)的操作指令；及 控制模塊，用于根據(jù)所述操作指令執(zhí)行所述需要操作的按鍵所對(duì)應(yīng)的動(dòng)作。
7.如權(quán)利要求6所述的屏幕按鍵控制系統(tǒng)，其特征在于，該系統(tǒng)還包括： 存儲(chǔ)模塊，用于拍攝用戶眼睛聚焦于顯示屏幕上不同的按鍵時(shí)的人臉圖像，并將該拍 攝的人臉圖像、及該拍攝的人臉圖像與用戶眼睛所聚焦的按鍵的對(duì)應(yīng)關(guān)系存儲(chǔ)至電子裝置 的存儲(chǔ)單元中。
8.如權(quán)利要求7所述的屏幕按鍵控制系統(tǒng)，其特征在于，所述按鍵確定模塊通過(guò)以下 步驟確定用戶需要操作的按鍵： 將所述拍攝的人臉圖像與存儲(chǔ)單元中存儲(chǔ)的人臉圖像進(jìn)行比對(duì)； 在所述存儲(chǔ)單元中尋找與所述拍攝的人臉圖像相似度最高的人臉圖像；及 確定該與所述拍攝的人臉圖像相似度最高的人臉圖像所對(duì)應(yīng)的按鍵為用戶需要操作 的按鍵。
9.如權(quán)利要求6所述的屏幕按鍵控制系統(tǒng)，其特征在于，所述按鍵確定模塊還用于，以 一個(gè)預(yù)設(shè)方式標(biāo)識(shí)所述需要操作的按鍵，以提示用戶已確定該需要操作的按鍵。
10.如權(quán)利要求6所述的屏幕按鍵控制系統(tǒng)，其特征在于，所述按鍵確定模塊通過(guò)判斷 用戶眼睛是否在一個(gè)預(yù)設(shè)時(shí)間內(nèi)沒有變化，或通過(guò)用戶眼睛的預(yù)設(shè)動(dòng)作是否發(fā)生，來(lái)偵測(cè) 用戶眼睛是否聚焦于顯示屏幕上的按鍵。
【專利摘要】本發(fā)明提供一種屏幕按鍵控制方法，包括：在偵測(cè)到用戶眼睛聚焦于顯示屏幕上的按鍵后，拍攝用戶的人臉圖像，并根據(jù)該人臉圖像確定用戶需要操作的按鍵；接收用戶所輸入的語(yǔ)音信息，并利用語(yǔ)音識(shí)別軟件識(shí)別該語(yǔ)音信息所對(duì)應(yīng)的操作指令；及根據(jù)所述操作指令執(zhí)行所述需要操作的按鍵所對(duì)應(yīng)的動(dòng)作。本發(fā)明還提供一種屏幕按鍵控制系統(tǒng)。本發(fā)明通過(guò)用戶眼睛的聚焦及語(yǔ)音信息的輸入可以方便地控制顯示屏幕上的按鍵。
【IPC分類】G06F3-0487, G10L15-26, G06F3-01
【公開號(hào)】CN104598009
【申請(qǐng)?zhí)枴緾N201310521040
【發(fā)明人】洪建宏, 李光曜, 敖山甲
【申請(qǐng)人】鴻富錦精密工業(yè)(武漢)有限公司, 鴻海精密工業(yè)股份有限公司
【公開日】2015年5月6日
【申請(qǐng)日】2013年10月30日
【公告號(hào)】US20150116209