智能設(shè)備及其操作響應(yīng)方法
【專利摘要】本發(fā)明公開(kāi)了一種智能設(shè)備及其操作響應(yīng)方法，其中所述方法包括：接收用戶佩戴的EMG傳感器發(fā)送的電信號(hào)；根據(jù)接收的電信號(hào)并結(jié)合手指觸碰觸摸屏的位置信息，確定用戶的操作后進(jìn)行響應(yīng)。本發(fā)明中，智能設(shè)備可以結(jié)合用戶觸碰的識(shí)別信息和觸碰位置信息，對(duì)用戶的操作進(jìn)行確定并進(jìn)行響應(yīng)，簡(jiǎn)化了一些如多指觸碰、長(zhǎng)按、組合鍵等的復(fù)雜操作，更為方便用戶對(duì)智能設(shè)備進(jìn)行輸入控制，提升了用戶體驗(yàn)。同時(shí)，本發(fā)明可以將現(xiàn)有觸摸屏的多個(gè)鍵集成為一個(gè)鍵，提高了觸摸屏的有效顯示面積。
【專利說(shuō)明】
智能設(shè)備及其操作響應(yīng)方法
技術(shù)領(lǐng)域
[0001]本發(fā)明涉及人機(jī)交互技術(shù)，具體而言，本發(fā)明涉及一種智能設(shè)備及其操作響應(yīng)方法。
【背景技術(shù)】
[0002]隨著觸摸屏技術(shù)的不斷發(fā)展，如智能手機(jī)、平板電腦、可穿戴設(shè)備等的智能設(shè)備，廣泛采用觸摸屏技術(shù)實(shí)現(xiàn)對(duì)用戶的操作進(jìn)行響應(yīng)，實(shí)現(xiàn)人機(jī)交互。目前，觸摸屏有電阻式觸摸屏、電容式觸摸屏、表面聲波技術(shù)觸摸屏等。與傳統(tǒng)的鍵盤(pán)、鼠標(biāo)交互方式相比，觸摸屏交互方式操作簡(jiǎn)單方便，更為直觀，用戶只需要使用手指觸碰顯示屏中的圖符或文字，即可完成對(duì)智能設(shè)備的操作，給用戶帶來(lái)了極佳體驗(yàn)。
[0003]通常，當(dāng)用戶在觸摸屏上做出觸碰操作后，智能設(shè)備可以檢測(cè)到用戶觸碰觸摸屏的位置信息，進(jìn)而根據(jù)檢測(cè)的位置信息確定出用戶對(duì)智能設(shè)備的輸入信息。其中，用戶可以通過(guò)多種交互方式，如虛擬按鍵、組合鍵、雙擊、長(zhǎng)按、多點(diǎn)觸碰等，在觸摸屏上實(shí)現(xiàn)多種操作。例如，用戶可以通過(guò)觸摸屏顯示的虛擬鍵盤(pán)編輯輸入字符，通過(guò)多點(diǎn)觸碰實(shí)現(xiàn)放大縮小操作等。
[0004]然而，上述的多種交互方式或多或少存在一些缺點(diǎn)和不足，這些缺點(diǎn)和不足容易導(dǎo)致用戶操作不方便，操作體驗(yàn)不佳。例如，虛擬鍵盤(pán)中的按鍵通常不能過(guò)小，否則不易觸碰，因而占用了大量的屏幕空間，減少了有效顯示面積；組合鍵、雙擊的方式至少需要用戶的兩次點(diǎn)擊才能完成操作；長(zhǎng)按需要占用額外的時(shí)間才能完成操作；多點(diǎn)觸碰需要同時(shí)使用多個(gè)手指在屏幕上進(jìn)行操作，對(duì)于屏幕較小的設(shè)備，特別是可穿戴設(shè)備，會(huì)造成嚴(yán)重的遮擋。
[0005]因此，有必要提供一種更為便于用戶進(jìn)行輸入控制的智能設(shè)備及其操作響應(yīng)方法，以提升用戶操作體驗(yàn)。

【發(fā)明內(nèi)容】

[0006]本發(fā)明的目的旨在至少解決上述技術(shù)缺陷之一，特別是結(jié)合觸碰觸摸屏的手指和觸碰的位置信息，來(lái)確定用戶的操作，從而更為方便用戶對(duì)智能設(shè)備進(jìn)行輸入控制，提升用戶操作體驗(yàn)。
[0007]本發(fā)明提供了一種智能設(shè)備的操作響應(yīng)方法，包括:
[0008]接收用戶佩戴的EMG傳感器發(fā)送的電信號(hào)；
[0009]根據(jù)接收的電信號(hào)并結(jié)合所述用戶觸碰所述觸摸屏的位置信息，確定所述用戶的操作后進(jìn)行相應(yīng)的響應(yīng)。
[0010]進(jìn)一步，所述接收用戶佩戴的EMG傳感器發(fā)送的電信號(hào)后，還包括:
[0011]根據(jù)接收的電信號(hào)識(shí)別出所述用戶在觸摸屏上觸碰的手指，和/或用戶的手指在所述觸摸屏上的按壓力度。
[0012]較佳地，所述根據(jù)接收的電信號(hào)并結(jié)合所述用戶觸碰所述觸摸屏的位置信息，確定所述用戶的操作包括:
[0013]根據(jù)識(shí)別出的手指和/或按壓力度，結(jié)合所述用戶觸碰所述觸摸屏的位置信息，確定所述用戶的操作。
[0014]較佳地，所述根據(jù)接收的電信號(hào)識(shí)別出所述用戶在觸摸屏上觸碰的手指，具體包括:
[0015]利用預(yù)先訓(xùn)練出的部件分類器，根據(jù)接收的電信號(hào)識(shí)別出所述用戶在觸摸屏上觸碰的手指。
[0016]較佳地，所述部件分類器具體根據(jù)如下方法訓(xùn)練得到:
[0017]針對(duì)每個(gè)手指，利用EMG傳感器感應(yīng)該手指觸碰平面的動(dòng)作，并提取所述EMG傳感器輸出的電信號(hào)的信號(hào)特征后，對(duì)提取的信號(hào)特征標(biāo)定該手指的信息后作為訓(xùn)練樣本；
[0018]使用得到的訓(xùn)練樣本對(duì)分類器進(jìn)行訓(xùn)練，得到所述部件分類器。
[0019]較佳地，所述確定所述用戶的操作，具體包括:
[0020]在所述觸摸屏顯示虛擬鍵盤(pán)時(shí)，根據(jù)所述位置信息，確定出用戶點(diǎn)擊的字母；并[0021 ] 根據(jù)識(shí)別出的手指確定所述字母為大寫(xiě)或小寫(xiě)。
[0022]較佳地，所述確定所述用戶的操作，具體包括:
[0023]在所述觸摸屏顯示虛擬鍵盤(pán)時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊刪除鍵，則:
[0024]根據(jù)識(shí)別出的手指確定用戶指定的刪除對(duì)象為一個(gè)字符、或一個(gè)詞語(yǔ)、或一個(gè)句子、或一個(gè)段落、或全文。
[0025]較佳地，所述確定所述用戶的操作，具體包括:
[0026]在所述觸摸屏顯示聯(lián)系人界面時(shí)，根據(jù)所述位置信息確定用戶點(diǎn)擊的聯(lián)系人；并
[0027]根據(jù)識(shí)別出的手指確定用戶打開(kāi)所述聯(lián)系人信息、或呼叫所述聯(lián)系人、或發(fā)消息給所述聯(lián)系人。
[0028]較佳地，所述確定所述用戶的操作，具體包括:
[0029]在所述觸摸屏顯示瀏覽器界面時(shí)，根據(jù)所述位置信息確定用戶點(diǎn)擊的鏈接；并
[0030]根據(jù)識(shí)別出的手指確定用戶一鍵打開(kāi)所述鏈接、或收藏所述鏈接、或在新標(biāo)簽頁(yè)打開(kāi)所述鏈接。
[0031]較佳地，所述確定所述用戶的操作，具體包括:
[0032]在所述觸摸屏顯示畫(huà)圖應(yīng)用界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊畫(huà)圖應(yīng)用界面，則
[0033]根據(jù)識(shí)別出的手指，確定用戶調(diào)用畫(huà)筆工具、或橡皮工具；并
[0034]在用戶使用畫(huà)筆工具/橡皮工具的過(guò)程中，根據(jù)識(shí)別出的手指的按壓力度，調(diào)整畫(huà)筆的粗細(xì)/橡皮的大小。
[0035]較佳地，所述確定所述用戶的操作，具體包括:
[0036]在所述觸摸屏顯示地圖應(yīng)用界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊地圖放大/縮小鍵，則:
[0037]根據(jù)識(shí)別出的手指的按壓力度，確定放大/縮小顯示地圖的倍數(shù)。
[0038]較佳地，所述確定所述用戶的操作，具體包括:
[0039]在所述觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊快進(jìn)/快退鍵，則
[0040]根據(jù)識(shí)別出的手指的按壓力度，調(diào)整快進(jìn)/快退的速度。
[0041]較佳地，所述確定所述用戶的操作，具體包括:
[0042]在所述觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊音量鍵，則
[0043]根據(jù)識(shí)別出的手指確定增大音量、或減小音量；并
[0044]根據(jù)識(shí)別出的手指的按壓力度，確定增大或減小音量的多少。
[0045]較佳地，所述確定所述用戶的操作，具體包括:
[0046]在所述觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊文件切換鍵，則
[0047]根據(jù)識(shí)別出的手指確定播放上一媒體文件、或播放下一媒體文件。
[0048]較佳地，所述確定所述用戶的操作，具體包括:
[0049]當(dāng)識(shí)別出的手指為特定手指時(shí)，根據(jù)所述位置信息，確定所述用戶的操作；
[0050]當(dāng)識(shí)別出的手指不為特定手指時(shí)，根據(jù)識(shí)別出的手指，確定出用戶的操作為返回上一級(jí)、或返回主屏、或打開(kāi)應(yīng)用菜單。
[0051]較佳地，所述EMG傳感器為環(huán)形結(jié)構(gòu)，包括環(huán)向分布的多組電極，并集成有以無(wú)線方式發(fā)送電信號(hào)的無(wú)線通信單元。
[0052]較佳地，所述EMG傳感器佩戴于如下至少一處:所述用戶的手腕、前臂、上臂。
[0053]本發(fā)明還提供了一種智能設(shè)備，包括:
[0054]信號(hào)接收模塊，用于接收用戶佩戴的EMG傳感器發(fā)送的電信號(hào)；
[0055]操作確定模塊，用于根據(jù)所述信號(hào)接收模塊接收的電信號(hào)，并結(jié)合所述手指觸碰所述觸摸屏的位置信息，確定所述用戶的操作；
[0056]響應(yīng)模塊，用于對(duì)確定出的所述用戶的操作進(jìn)行響應(yīng)。
[0057]較佳地，所述操作確定模塊具體包括:
[0058]信號(hào)識(shí)別單元，用于根據(jù)所述信號(hào)接收模塊接收的電信號(hào)，識(shí)別出所述用戶在觸摸屏上觸摸的手指，和/或用戶的手指在所述觸摸屏上的按壓力度；
[0059]信息結(jié)合單元，用于根據(jù)識(shí)別出的手指和/或按壓力度，結(jié)合所述用戶觸碰所述觸摸屏的位置信息，確定所述用戶的操作。
[0060]較佳地，所述信號(hào)識(shí)別單元具體用于根據(jù)所述信號(hào)接收模塊接收的電信號(hào)，識(shí)別出用戶的手指在所述觸摸屏上的按壓力度；和/或利用預(yù)先訓(xùn)練出的部件分類器，根據(jù)接收的電信號(hào)識(shí)別出所述用戶在觸摸屏上觸碰的手指。
[0061]進(jìn)一步，所述智能設(shè)備，還包括:
[0062]分類器訓(xùn)練模塊，用于獲取所述EMG傳感器采集的樣本電信號(hào)，提取出樣本電信號(hào)的信號(hào)特征；根據(jù)樣本電信號(hào)對(duì)應(yīng)的手指信息，標(biāo)定提取的信號(hào)特征；根據(jù)標(biāo)定的信號(hào)特征對(duì)分類器進(jìn)行訓(xùn)練，得到所述部件分類器。
[0063]較佳地，所述信息結(jié)合單元具體用于在所述觸摸屏顯示虛擬鍵盤(pán)時(shí)，根據(jù)所述位置信息，確定出用戶點(diǎn)擊的字母；并根據(jù)識(shí)別出的手指確定所述字母為大寫(xiě)或小寫(xiě)。
[0064]較佳地，所述信息結(jié)合單元具體用于在所述觸摸屏顯示虛擬鍵盤(pán)時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊刪除鍵，則根據(jù)識(shí)別出的手指確定用戶指定的刪除對(duì)象為一個(gè)字符、或一個(gè)詞語(yǔ)、或一個(gè)句子、或一個(gè)段落、或全文。
[0065]較佳地，所述信息結(jié)合單元具體用于在所述觸摸屏顯示地圖應(yīng)用界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊地圖放大/縮小鍵，則根據(jù)識(shí)別出的手指的按壓力度，確定放大/縮小顯示地圖的倍數(shù)。
[0066]較佳地，所述信息結(jié)合單元具體用于在所述觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊音量鍵，則根據(jù)識(shí)別出的手指確定增大音量、或減小音量；并根據(jù)識(shí)別出的手指的按壓力度，確定增大或減小音量的多少。
[0067]進(jìn)一步，所述智能設(shè)備，還包括:所述EMG傳感器；
[0068]所述EMG傳感器為環(huán)形結(jié)構(gòu)，包括環(huán)向分布的多組電極，并集成有以無(wú)線方式發(fā)送電信號(hào)的無(wú)線通信單元。
[0069]本發(fā)明的方案中，當(dāng)用戶觸碰智能設(shè)備的觸摸屏?xí)r，智能設(shè)備可根據(jù)用戶佩戴的EMG傳感器輸出的電信號(hào)，結(jié)合用戶觸碰觸摸屏的位置信息，確定用戶的操作后進(jìn)行相應(yīng)的響應(yīng)。本發(fā)明簡(jiǎn)化了一些如多指觸碰、長(zhǎng)按、組合鍵等的復(fù)雜操作，可避免對(duì)屏幕的遮擋，更為方便用戶對(duì)智能設(shè)備進(jìn)行輸入控制，提升了用戶體驗(yàn)。而且，本發(fā)明還可實(shí)現(xiàn)手指對(duì)觸摸屏的按壓力度的識(shí)別，應(yīng)用于畫(huà)圖、地圖、媒體播放器等諸多應(yīng)用時(shí)，大大增強(qiáng)了用戶體驗(yàn)。
[0070]本發(fā)明附加的方面和優(yōu)點(diǎn)將在下面的描述中部分給出，這些將從下面的描述中變得明顯，或通過(guò)本發(fā)明的實(shí)踐了解到。
【附圖說(shuō)明】
[0071]本發(fā)明上述的和/或附加的方面和優(yōu)點(diǎn)從下面結(jié)合附圖對(duì)實(shí)施例的描述中將變得明顯和容易理解，其中:
[0072]圖1為本發(fā)明實(shí)施例的智能設(shè)備的操作響應(yīng)方法的流程示意圖；
[0073]圖2為EMG傳感器的佩戴位置和結(jié)構(gòu)的示意圖；
[0074]圖3為EMG傳感器采集的原始的電信號(hào)的波形示意圖；
[0075]圖4為濾波處理后的EMG信號(hào)的波形示意圖；
[0076]圖5a為手指A觸碰觸摸屏?xí)r采集到的EMG信號(hào)的波形示意圖；
[0077]圖5b為手指B觸碰觸摸屏?xí)r采集到的EMG信號(hào)的波形示意圖；
[0078]圖6為同一手指觸碰觸摸屏而按壓力度不同時(shí)的波形示意圖；
[0079]圖7為同一虛擬按鍵不同手指對(duì)應(yīng)的不同操作的示意圖；
[0080]圖8為不同手指點(diǎn)擊聯(lián)系人對(duì)應(yīng)不同操作的示意圖；。
[0081]圖9為不同手指點(diǎn)擊瀏覽器界面中的鏈接對(duì)應(yīng)不同操作的示意圖；
[0082]圖10為不同手指點(diǎn)擊畫(huà)圖應(yīng)用界面時(shí)調(diào)用不同工具的不意圖；
[0083]圖11為不同按壓力度下調(diào)整畫(huà)筆工具的粗細(xì)的示意圖；
[0084]圖12為不同按壓力度下地圖放大倍數(shù)不同的示意圖；
[0085]圖13為不同手指點(diǎn)擊地圖應(yīng)用界面對(duì)應(yīng)不同操作的示意圖；
[0086]圖14為不同按壓力度下快進(jìn)或快退速度不同的示意圖；
[0087]圖15為不同手指點(diǎn)擊相同位置對(duì)應(yīng)不同操作的示意圖；
[0088]圖16為不同手指點(diǎn)擊顯示界面對(duì)應(yīng)不同操作的示意圖；
[0089]圖17為應(yīng)用本發(fā)明如、后顯不屏蒂的有效顯不面積的對(duì)比不意圖；
[0090]圖18為本發(fā)明實(shí)施例的智能設(shè)備的結(jié)構(gòu)示意圖；
[0091]圖19為本發(fā)明實(shí)施例的操作確定模塊的內(nèi)部結(jié)構(gòu)的框架示意圖。
【具體實(shí)施方式】
[0092]下面詳細(xì)描述本發(fā)明的實(shí)施例，所述實(shí)施例的示例在附圖中示出，其中自始至終相同或類似的標(biāo)號(hào)表示相同或類似的元件或具有相同或類似功能的元件。下面通過(guò)參考附圖描述的實(shí)施例是示例性的，僅用于解釋本發(fā)明，而不能解釋為對(duì)本發(fā)明的限制。
[0093]本技術(shù)領(lǐng)域技術(shù)人員可以理解，除非特意聲明，這里使用的單數(shù)形式“一”、“一個(gè)”、“所述”和“該”也可包括復(fù)數(shù)形式。應(yīng)該進(jìn)一步理解的是，本發(fā)明的說(shuō)明書(shū)中使用的措辭“包括”是指存在所述特征、整數(shù)、步驟、操作、元件和/或組件，但是并不排除存在或添加一個(gè)或多個(gè)其他特征、整數(shù)、步驟、操作、元件、組件和/或它們的組。應(yīng)該理解，當(dāng)我們稱元件被“連接”或“耦接”到另一元件時(shí)，它可以直接連接或耦接到其他元件，或者也可以存在中間元件。此外，這里使用的“連接”或“耦接”可以包括無(wú)線連接或無(wú)線耦接。這里使用的措辭“和/或”包括一個(gè)或更多個(gè)相關(guān)聯(lián)的列出項(xiàng)的全部或任一單元和全部組合。
[0094]本技術(shù)領(lǐng)域技術(shù)人員可以理解，除非另外定義，這里使用的所有術(shù)語(yǔ)(包括技術(shù)術(shù)語(yǔ)和科學(xué)術(shù)語(yǔ))，具有與本發(fā)明所屬領(lǐng)域中的普通技術(shù)人員的一般理解相同的意義。還應(yīng)該理解的是，諸如通用字典中定義的那些術(shù)語(yǔ)，應(yīng)該被理解為具有與現(xiàn)有技術(shù)的上下文中的意義一致的意義，并且除非像這里一樣被特定定義，否則不會(huì)用理想化或過(guò)于正式的含義來(lái)解釋。
[0095]本技術(shù)領(lǐng)域技術(shù)人員可以理解，這里所使用的“終端”、“終端設(shè)備”既包括無(wú)線信號(hào)接收器的設(shè)備，其僅具備無(wú)發(fā)射能力的無(wú)線信號(hào)接收器的設(shè)備，又包括接收和發(fā)射硬件的設(shè)備，其具有能夠在雙向通信鏈路上，進(jìn)行雙向通信的接收和發(fā)射硬件的設(shè)備。這種設(shè)備可以包括:蜂窩或其他通信設(shè)備，其具有單線路顯示器或多線路顯示器或沒(méi)有多線路顯示器的蜂窩或其他通信設(shè)備；PCS (Personal Communicat1ns Service，個(gè)人通信系統(tǒng))，其可以組合語(yǔ)音、數(shù)據(jù)處理、傳真和/或數(shù)據(jù)通信能力；PDA(Personal Digital Assistant，個(gè)人數(shù)字助理)，其可以包括射頻接收器、尋呼機(jī)、互聯(lián)網(wǎng)/內(nèi)聯(lián)網(wǎng)訪問(wèn)、網(wǎng)絡(luò)瀏覽器、記事本、日歷和/或GPS (Global Posit1ning System，全球定位系統(tǒng))接收器；常規(guī)膝上型和/或掌上型計(jì)算機(jī)或其他設(shè)備，其具有和/或包括射頻接收器的常規(guī)膝上型和/或掌上型計(jì)算機(jī)或其他設(shè)備。這里所使用的“終端”、“終端設(shè)備”可以是便攜式、可運(yùn)輸、安裝在交通工具(航空、海運(yùn)和/或陸地)中的，或者適合于和/或配置為在本地運(yùn)行，和/或以分布形式，運(yùn)行在地球和/或空間的任何其他位置運(yùn)行。這里所使用的“終端”、“終端設(shè)備”還可以是通信終端、上網(wǎng)終端、音樂(lè)/視頻播放終端，例如可以是PDA、MID(Mobile Internet Device，移動(dòng)互聯(lián)網(wǎng)設(shè)備)和/或具有音樂(lè)/視頻播放功能的移動(dòng)電話，也可以是智能電視、機(jī)頂盒等設(shè)備。
[0096]本發(fā)明的發(fā)明人考慮到，EMG(electromyography，肌電圖)傳感器，可以檢測(cè)到肌肉運(yùn)動(dòng)單位的動(dòng)作電位波形，并轉(zhuǎn)換成可用的電信號(hào)輸出；當(dāng)用戶使用不同的手指觸碰觸摸屏?xí)r，手臂中的肌肉運(yùn)動(dòng)單位會(huì)產(chǎn)生不同的動(dòng)作電位波形，EMG傳感器輸出的電信號(hào)也就不同。
[0097]因此，本發(fā)明中，當(dāng)佩戴有EMG傳感器的用戶觸碰智能設(shè)備的觸摸屏?xí)r，智能設(shè)備可根據(jù)佩戴的EMG傳感器輸出的電信號(hào)，結(jié)合用戶觸碰觸摸屏的位置信息，確定用戶的操作后進(jìn)行響應(yīng)。一方面，本發(fā)明可使用戶在使用不同手指觸碰觸摸屏的同一位置時(shí)，實(shí)現(xiàn)不同的輸入，節(jié)省了用戶的操作，更為方便用戶對(duì)智能設(shè)備進(jìn)行輸入控制，提升了用戶的操作體驗(yàn)；另一方面，本發(fā)明可將現(xiàn)有觸摸屏的多個(gè)鍵集成為一個(gè)鍵，提高了觸摸屏的有效顯示面積。
[0098]例如，用戶使用手指B點(diǎn)擊相應(yīng)的虛擬按鍵時(shí)輸入大寫(xiě)字母，使用手指A點(diǎn)擊相應(yīng)的虛擬按鍵時(shí)輸入小寫(xiě)字母。從而，避免了用戶點(diǎn)擊大小寫(xiě)切換鍵的操作，方便用戶對(duì)智能設(shè)備的輸入控制，提升了用戶操作體驗(yàn)，尤其在大小寫(xiě)混合輸入較多的情況下，提升用戶操作體驗(yàn)的效果非常明顯；并且可以省掉大小寫(xiě)切換鍵的設(shè)置，節(jié)省屏幕使用空間。
[0099]下面將結(jié)合附圖詳細(xì)說(shuō)明本發(fā)明的技術(shù)方案。
[0100]本發(fā)明實(shí)施例提供的智能設(shè)備的操作響應(yīng)方法，具體流程如圖1所示，包括如下步驟SlOl至S103:
[0101]SlOl:智能設(shè)備接收用戶佩戴的EMG傳感器發(fā)送的電信號(hào)。
[0102]具體地，EMG傳感器佩戴于用戶手臂處；換言之，EMG傳感器可以佩戴于如下至少一處:用戶的手腕、前臂、上臂的位置處。從而，EMG傳感器在用戶手指觸碰觸摸屏?xí)r，可以檢測(cè)到用戶手臂的肌肉運(yùn)動(dòng)單位的動(dòng)作電位波形，并將檢測(cè)到的波形以電信號(hào)形式輸出。
[0103]而且，EMG傳感器可以佩戴于手臂的一處，例如，EMG傳感器可佩戴于手腕處、或者前臂靠近肘部處；
[0104]更優(yōu)地，EMG傳感器也可以佩戴于手臂的多處。例如，如圖2所示，EMG傳感器可同時(shí)佩戴于手腕處和前臂靠近肘部處。其中，EMG傳感器佩戴于手臂的多處時(shí)，可以提高智能設(shè)備對(duì)觸碰觸摸屏的手指的識(shí)別精度。
[0105]實(shí)際應(yīng)用中，為方便佩戴，EMG傳感器可為環(huán)形結(jié)構(gòu)。而且，為保證手指識(shí)別的準(zhǔn)確度，EMG傳感器包括環(huán)向分布的多組電極。例如，參見(jiàn)圖2，佩戴于前臂處的EMG傳感器包括11組電極(Chl至Chll)，佩戴于手腕處的EMG傳感器包括7組電極(Chl2至Chl8)。
[0106]本步驟中，智能設(shè)備可以在檢測(cè)到用戶的手指觸碰本設(shè)備的觸摸屏?xí)r，接收用戶佩戴于手臂的EMG傳感器發(fā)送的電信號(hào)。較優(yōu)地，EMG傳感器中可集成有以無(wú)線方式發(fā)送電信號(hào)的無(wú)線通信單元，從而EMG傳感器可以無(wú)線方式將電信號(hào)發(fā)送給智能設(shè)備。無(wú)線通信單元具體可以是藍(lán)牙單元。此外，EMG傳感器中還包括供電單元，如電池供電單元。
[0107]S102:智能設(shè)備對(duì)接收的電信號(hào)進(jìn)行識(shí)別。
[0108]具體地，智能設(shè)備在接收到用戶佩戴的EMG傳感器發(fā)送的電信號(hào)后，可以根據(jù)接收的電信號(hào)識(shí)別出用戶在觸摸屏上觸碰的手指，和/或用戶的手指在觸摸屏上的按壓力度。
[0109]本步驟中，智能設(shè)備可以根據(jù)現(xiàn)有的方法識(shí)別出用戶在觸摸屏上觸碰所使用的手指。具體地，智能設(shè)備可以對(duì)接收的電信號(hào)進(jìn)行濾波(濾掉工頻交流信號(hào)、移除直流分量、降噪)、特征提取(時(shí)域、頻域)、特征選擇(降低特征維度)后，根據(jù)選擇的特征識(shí)別出用戶在觸摸屏上觸碰所使用的手指。例如，圖3示出了 EMG輸出的原始電信號(hào)的波形圖；圖4示出了對(duì)EMG輸出的原始電信號(hào)進(jìn)行濾波處理后的波形圖。圖5a示出了手指A觸碰觸摸屏?xí)r采集到的EMG信號(hào)的波形示意圖，圖5b示出了手指B (不同于手指A)觸碰觸摸屏?xí)r采集到的EMG信號(hào)的波形不意圖。圖5a、5b中，橫坐標(biāo)表不時(shí)間，縱坐標(biāo)表不信號(hào)強(qiáng)度；幅值不同的三條曲線分別代表EMG傳感器中三組電極采集到的三條通道的EMG信號(hào)波形。其中，不同通道的幅值關(guān)系、信號(hào)頻譜有所區(qū)別。
[0110]較優(yōu)地，為保證識(shí)別準(zhǔn)確性，可以預(yù)先訓(xùn)練一個(gè)部件分類器，智能設(shè)備使用預(yù)先訓(xùn)練的部件分類器，根據(jù)接收的電信號(hào)識(shí)別出用戶在觸摸屏上觸碰的手指。具體地，智能設(shè)備可對(duì)接收的電信號(hào)進(jìn)行濾波、特征提取、特征選擇后，使用預(yù)先訓(xùn)練的部件分類器進(jìn)行手指識(shí)別。
[0111]其中，一種訓(xùn)練部件分類器的具體方法可以如下:
[0112]針對(duì)每個(gè)手指，利用EMG傳感器感應(yīng)該手指觸碰平面的動(dòng)作，并提取所述EMG傳感器輸出的電信號(hào)的信號(hào)特征后，對(duì)提取的信號(hào)特征標(biāo)定該手指的信息后作為訓(xùn)練樣本；其中，對(duì)應(yīng)提取的信號(hào)特征標(biāo)定的手指的信息可以是手指的名稱；
[0113]使用得到的訓(xùn)練樣本對(duì)分類器進(jìn)行訓(xùn)練，得到所述部件分類器。
[0114]進(jìn)一步，考慮到同一手指觸碰觸摸屏?xí)r，當(dāng)手指的按壓力度不同時(shí)，EMG傳感器輸出的電信號(hào)的特征不同(參見(jiàn)圖6);因此，智能設(shè)備還可以根據(jù)接收的電信號(hào)，確定出手指在觸摸屏上的按壓力度。圖6示出了使用同一手指在觸摸屏上按壓十次時(shí)采集到EMG信號(hào)的波形；其中，每組波峰表示一次按壓?？梢钥闯?，使用同一手指進(jìn)行多次按壓時(shí)，EMG信號(hào)具有相似特征，但具有明顯不同的強(qiáng)度(幅值)，因此，可以通過(guò)EMG信號(hào)來(lái)識(shí)別手指在觸摸屏上的按壓力度。
[0115]事實(shí)上，在上述的部件分類器的訓(xùn)練過(guò)程中，還可以訓(xùn)練部件分類器對(duì)手指在觸摸屏上的按壓力度進(jìn)行識(shí)別。由此，智能識(shí)別可通過(guò)預(yù)先訓(xùn)練的部件分類器，確定手指在觸摸屏上的按壓力度。
[0116]S103:智能設(shè)備根據(jù)識(shí)別出的信息，并結(jié)合用戶觸碰觸摸屏的位置信息，確定用戶的操作后進(jìn)行響應(yīng)。
[0117]具體地，智能設(shè)備根據(jù)上述步驟S102中識(shí)別出的手指和/或按壓力度，結(jié)合用戶觸碰觸摸屏的位置信息，確定用戶的操作。
[0118]實(shí)際應(yīng)用中，智能設(shè)備可以在識(shí)別出觸碰觸摸屏的手指后，檢測(cè)是否有預(yù)先設(shè)定的關(guān)聯(lián)到該手指的特定操作；若有，則根據(jù)手指觸碰觸摸屏的位置信息、以及識(shí)別出的手指所關(guān)聯(lián)的特定操作，確定用戶的操作；若沒(méi)有，則直接如現(xiàn)有技術(shù)一般，根據(jù)手指觸碰觸摸屏的位置信息，確定用戶的操作。
[0119]本發(fā)明通過(guò)手指識(shí)別，可實(shí)現(xiàn)不同手指觸碰觸摸屏的同一位置時(shí)，實(shí)現(xiàn)不同的輸入，從而可大幅提高屏幕的有效顯示面積。參見(jiàn)圖17，圖17示出了應(yīng)用本發(fā)明前、后顯示屏幕的有效顯示面積的對(duì)比示意圖。
[0120]進(jìn)一步，智能設(shè)備在確定用戶的操作時(shí)，還可以結(jié)合手指的按壓力度。
[0121]下面通過(guò)幾個(gè)具體的示例詳細(xì)說(shuō)明，本發(fā)明中智能設(shè)備如何根據(jù)識(shí)別出的手指并結(jié)合手指觸碰觸摸屏的位置信息確定用戶的操作，以及如何結(jié)合手指的按壓力度確定用戶的操作。
[0122]示例I
[0123]智能設(shè)備在觸摸屏顯示虛擬鍵盤(pán)時(shí)，可以根據(jù)用戶的手指觸碰觸摸屏的位置信息，確定出用戶點(diǎn)擊的字母；并根據(jù)識(shí)別出的手指確定字母為大寫(xiě)或小寫(xiě)。
[0124]例如，參見(jiàn)圖7，預(yù)先設(shè)定用戶使用手指A觸碰字母鍵時(shí)，確定用戶輸入大寫(xiě)字母，使用手指B觸碰字母鍵時(shí)，確定用戶輸入小寫(xiě)字母。
[0125]現(xiàn)有技術(shù)中，當(dāng)用戶輸入大寫(xiě)字母，需要先點(diǎn)擊大小寫(xiě)切換鍵(如shift鍵)，再點(diǎn)擊相應(yīng)的字母鍵；若用戶再輸入小寫(xiě)字母，還需點(diǎn)擊大小寫(xiě)切換鍵，再點(diǎn)擊相應(yīng)的字母鍵。
[0126]而本發(fā)明中，用戶在進(jìn)行大寫(xiě)或小寫(xiě)字母輸入時(shí)，不再需要用戶點(diǎn)擊大小寫(xiě)切換鍵(如shift鍵)，減少了用戶操作，提升了用戶操作體驗(yàn)，尤其在大小寫(xiě)混合輸入的情況下，可以大幅簡(jiǎn)化用戶的操作。而且，本發(fā)明的智能設(shè)備可以不設(shè)置大小寫(xiě)切換鍵，提高了屏幕有效顯示面積。
[0127]示例2
[0128]智能設(shè)備在觸摸屏顯示虛擬鍵盤(pán)時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊刪除鍵，則根據(jù)識(shí)別出的手指確定用戶指定的刪除對(duì)象為一個(gè)字符、或一個(gè)詞語(yǔ)、或一個(gè)句子、或一個(gè)段落、或全文。
[0129]例如，參見(jiàn)圖7，預(yù)先設(shè)定用戶使用手指A觸碰刪除鍵時(shí)，刪除一個(gè)字符；使用手指B觸碰刪除鍵時(shí)，刪除一個(gè)詞語(yǔ)；使用手指C觸碰刪除鍵時(shí)，刪除一個(gè)句子；使用手指D觸碰刪除鍵時(shí)，刪除一個(gè)段落；使用手指E觸碰刪除鍵時(shí)，刪除全文。
[0130]現(xiàn)有技術(shù)中，如果用戶針對(duì)輸入的文本進(jìn)行刪除，可以通過(guò)點(diǎn)擊刪除鍵進(jìn)行逐字刪除，也可通過(guò)長(zhǎng)按刪除鍵進(jìn)行快速刪除，或者選中刪除的內(nèi)容后點(diǎn)擊刪除鍵；不管哪種方式，操作都比較煩瑣。
[0131]而本發(fā)明中，用戶可通過(guò)使用不同手指觸碰刪除鍵來(lái)進(jìn)行一個(gè)字、一個(gè)詞語(yǔ)、一個(gè)句子、一個(gè)段落、全文的刪除等，操作簡(jiǎn)單方便。
[0132]示例3
[0133]智能設(shè)備在觸摸屏顯示聯(lián)系人界面時(shí)，可以根據(jù)用戶手指觸碰觸摸屏的位置信息，確定用戶點(diǎn)擊的聯(lián)系人；并根據(jù)識(shí)別出的手指確定用戶打開(kāi)該聯(lián)系人信息、或呼叫該聯(lián)系人、或發(fā)消息給該聯(lián)系人。
[0134]例如，參見(jiàn)圖8，預(yù)先設(shè)定用戶使用手指A觸碰聯(lián)系人時(shí)，打開(kāi)相應(yīng)聯(lián)系人信息；使用手指B觸碰聯(lián)系人時(shí)，呼叫相應(yīng)聯(lián)系人；使用手指C觸碰聯(lián)系人時(shí)，發(fā)送消息給相應(yīng)聯(lián)系人。
[0135]現(xiàn)有技術(shù)中，當(dāng)用戶呼叫聯(lián)系人或發(fā)消息給聯(lián)系人時(shí)，需要先打開(kāi)聯(lián)系人信息，再選擇呼叫聯(lián)系人或發(fā)消息給聯(lián)系人。
[0136]而本發(fā)明中，用戶可使用不同的手指完成打開(kāi)聯(lián)系人、呼叫聯(lián)系人或發(fā)消息給聯(lián)系人，操作簡(jiǎn)單方便。
[0137]示例4
[0138]智能設(shè)備在觸摸屏顯示瀏覽器界面時(shí)，可以根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊的鏈接；并根據(jù)識(shí)別出的手指確定用戶一鍵打開(kāi)該鏈接、或收藏該鏈接、或在新標(biāo)簽頁(yè)打開(kāi)該鏈接。
[0139]例如，參見(jiàn)圖9，可以預(yù)先設(shè)定用戶使用手指A觸碰鏈接時(shí)，一鍵打開(kāi)相應(yīng)鏈接；使用手指B觸碰鏈接時(shí)，在標(biāo)簽頁(yè)打開(kāi)相應(yīng)鏈接；使用手指C觸碰鏈接時(shí)，收藏相應(yīng)鏈接。
[0140]同樣，本發(fā)明簡(jiǎn)化了用戶收藏或在新標(biāo)簽頁(yè)打開(kāi)鏈接時(shí)的操作。
[0141]示例5
[0142]智能設(shè)備在觸摸屏顯示畫(huà)圖應(yīng)用界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊畫(huà)圖應(yīng)用界面，則根據(jù)識(shí)別出的手指，確定用戶調(diào)用畫(huà)筆工具、或橡皮工具；并在用戶使用畫(huà)筆工具/橡皮工具的過(guò)程中，根據(jù)識(shí)別出的手指的按壓力度，調(diào)整畫(huà)筆工具的粗細(xì)/橡皮工具的大小。
[0143]例如，參見(jiàn)圖10，用戶使用手指A點(diǎn)擊畫(huà)圖應(yīng)用界面時(shí)，確定用戶調(diào)用畫(huà)筆工具，使用手指B點(diǎn)擊畫(huà)圖應(yīng)用界面時(shí)，確定用戶調(diào)用橡皮工具。
[0144]參見(jiàn)圖11，在用戶使用畫(huà)筆工具的過(guò)程中，可根據(jù)識(shí)別出的手指的按壓力度，調(diào)整畫(huà)筆工具的粗細(xì)，如手指輕觸時(shí)畫(huà)筆工具較細(xì)，手指重壓時(shí)畫(huà)筆工具較粗。
[0145]示例6
[0146]智能設(shè)備在觸摸屏顯示地圖應(yīng)用界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊地圖放大/縮小鍵，則根據(jù)識(shí)別出的手指的按壓力度，確定放大/縮小顯示地圖的倍數(shù)。
[0147]例如，參見(jiàn)圖12，用戶使用手指輕觸地圖放大/縮小鍵時(shí)，單倍放大/縮小顯示地圖，重壓地圖放大/縮小鍵時(shí)，多倍放大/縮小顯示地圖。
[0148]進(jìn)一步，應(yīng)用本發(fā)明，還可將地圖放大鍵和地圖縮小鍵合并為一個(gè)地圖縮放鍵，智能設(shè)備在觸摸屏顯示地圖應(yīng)用界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊縮放鍵，則根據(jù)識(shí)別出的手指確定放大顯示地圖、或縮小顯示地圖。
[0149]此外，還可以設(shè)置不同的手指觸碰觸摸屏?xí)r，對(duì)應(yīng)實(shí)現(xiàn)地圖移動(dòng)、地圖放大、地圖縮小、到這去的功能。即，智能設(shè)備在觸摸屏顯示地圖應(yīng)用界面時(shí)，還可以在觸摸屏顯示地圖應(yīng)用界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊地圖應(yīng)用界面中的任一位置，則根據(jù)識(shí)別出的手指確定用戶移動(dòng)地圖、放大顯示地圖、縮小顯示地圖、將該位置設(shè)為目的地。
[0150]例如，參見(jiàn)圖13，對(duì)于地圖應(yīng)用界面的任一位置，用戶使用手指A觸碰時(shí)移動(dòng)地圖，使用手指B觸碰時(shí)放大顯示地圖，使用手指C觸碰時(shí)縮小顯示地圖，使用手指D觸碰時(shí)將該位置設(shè)為目的地(即到這去)。
[0151]現(xiàn)有技術(shù)中，通常使用多指觸碰實(shí)現(xiàn)地圖的放大或縮小，對(duì)于屏幕較小的智能設(shè)備，如)?Μ表，多指觸碰谷易遮擋屏蒂顯不內(nèi)谷。
[0152]而本發(fā)明通過(guò)使用不同的手指觸碰觸摸屏，便可實(shí)現(xiàn)放大或縮小顯示地圖，操作簡(jiǎn)單，且不易造成嚴(yán)重的屏幕遮擋。
[0153]現(xiàn)有技術(shù)往往通過(guò)電磁筆(或手寫(xiě)筆)實(shí)現(xiàn)壓力感應(yīng)，電磁筆容易丟失且交互不夠自然。而本發(fā)明可通過(guò)對(duì)手指在觸摸屏的按壓力度，確定地圖放大或縮小的倍數(shù)，交互方式自然，方便簡(jiǎn)單。
[0154]示例7
[0155]智能設(shè)備在觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊快進(jìn)/快退鍵，則根據(jù)識(shí)別出的手指的按壓力度，調(diào)整快進(jìn)、或快退的速度。
[0156]例如，參見(jiàn)圖14，用戶使用手指輕觸快進(jìn)/快退鍵時(shí)，低速快進(jìn)/快退，重壓快進(jìn)/快退鍵時(shí)，尚速快進(jìn)/快退。
[0157]進(jìn)一步，應(yīng)用本發(fā)明，還可將快進(jìn)/快退鍵合并為一個(gè)快退鍵，智能設(shè)備在觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊快退鍵，則根據(jù)識(shí)別出的手指確定快進(jìn)、或快退。
[0158]示例8
[0159]智能設(shè)備在觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊音量鍵，則根據(jù)識(shí)別出的手指確定增大音量、或減小音量；并根據(jù)識(shí)別出的手指的按壓力度，確定增大或減小音量的多少。
[0160]智能設(shè)備在觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊上下鍵，則根據(jù)識(shí)別出的手指確定播放上一媒體文件、或播放下一媒體文件。
[0161]例如，圖15示出了一種可穿戴智能設(shè)備的顯示界面，用戶使用手指A觸碰音量鍵時(shí)增加音量，使用手指B觸碰音量鍵時(shí)減小音量；用戶使用手指A觸碰文件切換鍵時(shí)，播放上一個(gè)媒體文件，使用手指B觸碰文件切換鍵時(shí)，播放下一個(gè)媒體文件。
[0162]示例9
[0163]當(dāng)智能設(shè)備識(shí)別出的手指為特定手指時(shí)，直接根據(jù)用戶手指觸碰觸摸屏的位置信息，確定用戶的操作；當(dāng)智能設(shè)備識(shí)別出的手指不為特定手指時(shí)，根據(jù)識(shí)別出的手指，確定出用戶的操作為返回上一級(jí)、或返回主屏、或打開(kāi)應(yīng)用菜單。
[0164]例如，參見(jiàn)圖16，用戶使用特定手指A觸碰觸摸屏?xí)r，直接如現(xiàn)有技術(shù)一般，根據(jù)用戶手指觸碰觸摸屏的位置信息，確定用戶的操作，即用戶使用手指A觸碰實(shí)現(xiàn)普通操作；使用手指B觸碰觸摸屏?xí)r，返回上一級(jí)；使用手指C觸碰觸摸屏?xí)r返回主屏；使用手指D觸碰觸摸屏?xí)r打開(kāi)應(yīng)用菜單。
[0165]本示例9中的應(yīng)用尤其適用于智能手機(jī)。
[0166]為了提高顯示界面的易用性，可以通過(guò)在不同的按鍵上添加不同的標(biāo)記或使用不同的顏色，來(lái)提示用戶實(shí)現(xiàn)該按鍵的功能所需要使用的手指。
[0167]基于上述的智能設(shè)備的操作響應(yīng)方法，本發(fā)明實(shí)施例提供的智能設(shè)備的結(jié)構(gòu)示意圖，如圖18所示，包括:信號(hào)接收模塊1801、操作確認(rèn)模塊1802和響應(yīng)模塊1803。
[0168]信號(hào)接收模塊1801用于接收用戶佩戴的肌電圖EMG傳感器發(fā)送的電信號(hào)。
[0169]操作確認(rèn)模塊1802用于根據(jù)信號(hào)接收模塊1801接收的電信號(hào)，并結(jié)合用戶觸碰所述觸摸屏的位置信息，確定用戶的操作。
[0170]響應(yīng)模塊1803對(duì)確定出的用戶的操作進(jìn)行相應(yīng)的響應(yīng)。
[0171]較優(yōu)地，操作確定模塊1802的內(nèi)部結(jié)構(gòu)的框架示意圖如圖19所示，具體包括:信號(hào)識(shí)別單元1901和信息結(jié)合單元1902。
[0172]信號(hào)識(shí)別單元1901用于根據(jù)信號(hào)接收模塊1801接收的電信號(hào)，識(shí)別出用戶在觸摸屏上觸摸的手指，和/或用戶的手指在觸摸屏上的按壓力度。
[0173]信息結(jié)合單元1902用于根據(jù)識(shí)別出的手指和/或按壓力度，結(jié)合用戶觸碰觸摸屏的位置信息，確定用戶的操作。
[0174]較優(yōu)地，上述的智能設(shè)備還可包括分類器訓(xùn)練模塊1804。
[0175]分類器訓(xùn)練模塊1804用于獲取EMG傳感器采集的樣本電信號(hào)，提取出樣本電信號(hào)的的信號(hào)特征；根據(jù)樣本電信號(hào)對(duì)應(yīng)的手指信息，標(biāo)定提取的信號(hào)特征；根據(jù)標(biāo)定的信號(hào)特征對(duì)分類器進(jìn)行訓(xùn)練，得到部件分類器。
[0176]相應(yīng)地，操作確認(rèn)模塊1802中的信號(hào)識(shí)別單元1901具體可以根據(jù)信號(hào)接收模塊1801接收的電信號(hào)，識(shí)別出用戶的手指在觸摸屏上的按壓力度；和/或利用分類器訓(xùn)練模塊1804預(yù)先訓(xùn)練出的部件分類器，根據(jù)接收的電信號(hào)識(shí)別出用戶在觸摸屏上觸碰的手指。
[0177]進(jìn)一步，上述的智能設(shè)備還可包括:上述佩戴于用戶手臂的EMG傳感器(圖中未標(biāo))。換言之，EMG傳感器作為一個(gè)信號(hào)發(fā)送模塊設(shè)置于智能設(shè)備中。
[0178]而且，較優(yōu)地，EMG傳感器為環(huán)形結(jié)構(gòu)，包括環(huán)向分布的多組電極，并集成有以無(wú)線方式發(fā)送電信號(hào)的無(wú)線通信單元。
[0179]實(shí)際應(yīng)用中，智能設(shè)備中操作確認(rèn)模塊1802中的信息結(jié)合單元1902，可實(shí)現(xiàn)但不限于如示例I至9所述的多種功能。
[0180]例如，信息結(jié)合單元1902可用于在觸摸屏顯示虛擬鍵盤(pán)時(shí)，根據(jù)用戶手指觸碰觸摸屏的位置信息，確定出用戶點(diǎn)擊的字母；并根據(jù)識(shí)別出的手指確定所述字母為大寫(xiě)或小與O
[0181]信息結(jié)合單元1902可用于在觸摸屏顯示虛擬鍵盤(pán)時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊刪除鍵，則根據(jù)識(shí)別出的手指確定用戶指定的刪除對(duì)象為一個(gè)字符、或一個(gè)詞語(yǔ)、或一個(gè)句子、或一個(gè)段落、或全文。
[0182]信息結(jié)合單元1902可用于在觸摸屏顯示聯(lián)系人界面時(shí)，根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊的聯(lián)系人；并根據(jù)識(shí)別出的手指確定用戶打開(kāi)所述聯(lián)系人信息、或呼叫所述聯(lián)系人、或發(fā)消息給所述聯(lián)系人。
[0183]信息結(jié)合單元1902可用于在觸摸屏顯示瀏覽器界面時(shí)，根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊的鏈接；并根據(jù)識(shí)別出的手指確定用戶一鍵打開(kāi)所述鏈接、或收藏所述鏈接、或在新標(biāo)簽頁(yè)打開(kāi)所述鏈接。
[0184]信息結(jié)合單元1902可用于在觸摸屏顯示畫(huà)圖應(yīng)用界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊畫(huà)圖應(yīng)用界面，則根據(jù)識(shí)別出的手指，確定用戶調(diào)用畫(huà)筆工具、或橡皮工具；并在用戶使用畫(huà)筆工具/橡皮工具的過(guò)程中，根據(jù)識(shí)別出的手指的按壓力度，調(diào)整畫(huà)筆的粗細(xì)/橡皮的大小。
[0185]信息結(jié)合單元1902可用于在觸摸屏顯示地圖應(yīng)用界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊地圖放大/縮小鍵，則根據(jù)識(shí)別出的手指的按壓力度，確定放大/縮小顯示地圖的倍數(shù)。
[0186]信息結(jié)合單元1902可用于在觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊快進(jìn)/快退鍵，則根據(jù)識(shí)別出的手指的按壓力度，調(diào)整快進(jìn)/快退的速度。
[0187]信息結(jié)合單元1902可用于在觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)位置信息確定用戶點(diǎn)擊音量鍵，則根據(jù)識(shí)別出的手指確定增大音量、或減小音量；并根據(jù)識(shí)別出的手指的按壓力度，確定增大或減小音量的多少。
[0188]信息結(jié)合單元1902可用于在觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)用戶手指觸碰觸摸屏的位置信息確定用戶點(diǎn)擊文件切換鍵，則根據(jù)識(shí)別出的手指確定播放上一媒體文件、或播放下一媒體文件。
[0189]信息結(jié)合單元1902可用于當(dāng)確定識(shí)別出的手指為特定手指時(shí)，根據(jù)用戶手指觸碰觸摸屏的位置信息，確定用戶的操作；當(dāng)確定識(shí)別出的手指不為特定手指時(shí)，根據(jù)識(shí)別出的手指，確定出用戶的操作為返回上一級(jí)、或返回主屏、或打開(kāi)應(yīng)用菜單。
[0190]本發(fā)明的智能設(shè)備中的各模塊的功能或功能的實(shí)現(xiàn)方式，可參考上述智能設(shè)備的操作響應(yīng)方法的各步驟中所述的內(nèi)容，此處不再贅述。
[0191]本發(fā)明的技術(shù)方案中，當(dāng)用戶觸碰智能設(shè)備的觸摸屏?xí)r，智能設(shè)備可根據(jù)用戶佩戴的EMG傳感器輸出的電信號(hào)，結(jié)合用戶觸碰觸摸屏的位置信息，確定用戶的操作后進(jìn)行相應(yīng)的響應(yīng)。因此，應(yīng)用本發(fā)明，用戶可以在使用不同手指觸碰觸摸屏的同一位置時(shí)，實(shí)現(xiàn)不同的輸入，簡(jiǎn)化了一些如多指觸碰、長(zhǎng)按、組合鍵等的復(fù)雜操作，可避免對(duì)屏幕的遮擋，更為方便用戶對(duì)智能設(shè)備進(jìn)行輸入控制，提升了用戶體驗(yàn)。而且，本發(fā)明還可實(shí)現(xiàn)手指對(duì)觸摸屏的按壓力度的識(shí)別，應(yīng)用于畫(huà)圖、地圖、媒體播放器等諸多應(yīng)用時(shí)，大大增強(qiáng)了用戶體驗(yàn)。
[0192]本技術(shù)領(lǐng)域技術(shù)人員可以理解，本發(fā)明包括涉及用于執(zhí)行本申請(qǐng)中所述操作中的一項(xiàng)或多項(xiàng)的設(shè)備。這些設(shè)備可以為所需的目的而專門(mén)設(shè)計(jì)和制造，或者也可以包括通用計(jì)算機(jī)中的已知設(shè)備。這些設(shè)備具有存儲(chǔ)在其內(nèi)的計(jì)算機(jī)程序，這些計(jì)算機(jī)程序選擇性地激活或重構(gòu)。這樣的計(jì)算機(jī)程序可以被存儲(chǔ)在設(shè)備(例如，計(jì)算機(jī))可讀介質(zhì)中或者存儲(chǔ)在適于存儲(chǔ)電子指令并分別耦聯(lián)到總線的任何類型的介質(zhì)中，所述計(jì)算機(jī)可讀介質(zhì)包括但不限于任何類型的盤(pán)(包括軟盤(pán)、硬盤(pán)、光盤(pán)、⑶-ROM、和磁光盤(pán))、ROM (Read-Only Memory,只讀存儲(chǔ)器)、RAM (Random Access Memory，隨即存儲(chǔ)器)、EPROM (Erasable ProgrammableRead-Only Memory，可擦寫(xiě)可編程只讀存儲(chǔ)器)、EEPROM(ElectricalIy ErasableProgrammable Read-Only Memory，電可擦可編程只讀存儲(chǔ)器)、閃存、磁性卡片或光線卡片。也就是，可讀介質(zhì)包括由設(shè)備(例如，計(jì)算機(jī))以能夠讀的形式存儲(chǔ)或傳輸信息的任何介質(zhì)。
[0193]本技術(shù)領(lǐng)域技術(shù)人員可以理解，可以用計(jì)算機(jī)程序指令來(lái)實(shí)現(xiàn)這些結(jié)構(gòu)圖和/或框圖和/或流圖中的每個(gè)框以及這些結(jié)構(gòu)圖和/或框圖和/或流圖中的框的組合。本技術(shù)領(lǐng)域技術(shù)人員可以理解，可以將這些計(jì)算機(jī)程序指令提供給通用計(jì)算機(jī)、專業(yè)計(jì)算機(jī)或其他可編程數(shù)據(jù)處理方法的處理器來(lái)實(shí)現(xiàn)，從而通過(guò)計(jì)算機(jī)或其他可編程數(shù)據(jù)處理方法的處理器來(lái)執(zhí)行本發(fā)明公開(kāi)的結(jié)構(gòu)圖和/或框圖和/或流圖的框或多個(gè)框中指定的方案。
[0194]本技術(shù)領(lǐng)域技術(shù)人員可以理解，本發(fā)明中已經(jīng)討論過(guò)的各種操作、方法、流程中的步驟、措施、方案可以被交替、更改、組合或刪除。進(jìn)一步地，具有本發(fā)明中已經(jīng)討論過(guò)的各種操作、方法、流程中的其他步驟、措施、方案也可以被交替、更改、重排、分解、組合或刪除。進(jìn)一步地，現(xiàn)有技術(shù)中的具有與本發(fā)明中公開(kāi)的各種操作、方法、流程中的步驟、措施、方案也可以被交替、更改、重排、分解、組合或刪除。
[0195]以上所述僅是本發(fā)明的部分實(shí)施方式，應(yīng)當(dāng)指出，對(duì)于本技術(shù)領(lǐng)域的普通技術(shù)人員來(lái)說(shuō)，在不脫離本發(fā)明原理的前提下，還可以做出若干改進(jìn)和潤(rùn)飾，這些改進(jìn)和潤(rùn)飾也應(yīng)視為本發(fā)明的保護(hù)范圍。
【主權(quán)項(xiàng)】
1.一種智能設(shè)備的操作響應(yīng)方法，其特征在于，包括: 接收用戶佩戴的肌電圖EMG傳感器發(fā)送的電信號(hào)； 根據(jù)接收的電信號(hào)并結(jié)合所述用戶觸碰所述觸摸屏的位置信息，確定所述用戶的操作后進(jìn)行響應(yīng)。2.如權(quán)利要求1所述的方法，其特征在于，所述接收用戶佩戴的EMG傳感器發(fā)送的電信號(hào)后，還包括: 根據(jù)接收的電信號(hào)識(shí)別出所述用戶在觸摸屏上觸碰的手指，和/或用戶的手指在所述觸摸屏上的按壓力度。3.如權(quán)利要求2所述的方法，其特征在于，所述根據(jù)接收的電信號(hào)并結(jié)合所述用戶觸碰所述觸摸屏的位置信息，確定所述用戶的操作包括: 根據(jù)識(shí)別出的手指和/或按壓力度，結(jié)合所述用戶觸碰所述觸摸屏的位置信息，確定所述用戶的操作。4.如權(quán)利要求2或3所述的方法，其特征在于，所述根據(jù)接收的電信號(hào)識(shí)別出所述用戶在觸摸屏上觸碰的手指，具體包括: 利用預(yù)先訓(xùn)練出的部件分類器，根據(jù)接收的電信號(hào)識(shí)別出所述用戶在觸摸屏上觸碰的手指。5.如權(quán)利要求4所述的方法，其特征在于，所述部件分類器具體根據(jù)如下方法訓(xùn)練得到: 針對(duì)每個(gè)手指，利用EMG傳感器感應(yīng)該手指觸碰平面的動(dòng)作，并提取所述EMG傳感器輸出的電信號(hào)的信號(hào)特征后，對(duì)提取的信號(hào)特征標(biāo)定該手指的信息后作為訓(xùn)練樣本； 使用得到的訓(xùn)練樣本對(duì)分類器進(jìn)行訓(xùn)練，得到所述部件分類器。6.如權(quán)利要求2或3所述的方法，其特征在于，所述確定所述用戶的操作，具體包括: 在所述觸摸屏顯示虛擬鍵盤(pán)時(shí)，根據(jù)所述位置信息，確定出用戶點(diǎn)擊的字母；并 根據(jù)識(shí)別出的手指確定所述字母為大寫(xiě)或小寫(xiě)。7.如權(quán)利要求2或3所述的方法，其特征在于，所述確定所述用戶的操作，具體包括: 在所述觸摸屏顯示虛擬鍵盤(pán)時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊刪除鍵，則: 根據(jù)識(shí)別出的手指確定用戶指定的刪除對(duì)象為一個(gè)字符、或一個(gè)詞語(yǔ)、或一個(gè)句子、或一個(gè)段落、或全文。8.如權(quán)利要求2或3所述的方法，其特征在于，所述確定所述用戶的操作，具體包括: 在所述觸摸屏顯示聯(lián)系人界面時(shí)，根據(jù)所述位置信息確定用戶點(diǎn)擊的聯(lián)系人；并 根據(jù)識(shí)別出的手指確定用戶打開(kāi)所述聯(lián)系人信息、或呼叫所述聯(lián)系人、或發(fā)消息給所述聯(lián)系人。9.如權(quán)利要求2或3所述的方法，其特征在于，所述確定所述用戶的操作，具體包括: 在所述觸摸屏顯示瀏覽器界面時(shí)，根據(jù)所述位置信息確定用戶點(diǎn)擊的鏈接；并 根據(jù)識(shí)別出的手指確定用戶一鍵打開(kāi)所述鏈接、或收藏所述鏈接、或在新標(biāo)簽頁(yè)打開(kāi)所述鏈接。10.如權(quán)利要求2或3所述的方法，其特征在于，所述確定所述用戶的操作，具體包括: 在所述觸摸屏顯示畫(huà)圖應(yīng)用界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊畫(huà)圖應(yīng)用界面，則 根據(jù)識(shí)別出的手指，確定用戶調(diào)用畫(huà)筆工具、或橡皮工具；并 在用戶使用畫(huà)筆工具/橡皮工具的過(guò)程中，根據(jù)識(shí)別出的手指的按壓力度，調(diào)整畫(huà)筆的粗細(xì)/橡皮的大小。11.如權(quán)利要求2或3所述的方法，其特征在于，所述確定所述用戶的操作，具體包括: 在所述觸摸屏顯示地圖應(yīng)用界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊地圖放大/縮小鍵，則: 根據(jù)識(shí)別出的手指的按壓力度，確定放大/縮小顯示地圖的倍數(shù)。12.如權(quán)利要求2或3所述的方法，其特征在于，所述確定所述用戶的操作，具體包括: 在所述觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊快進(jìn)/快退鍵，則 根據(jù)識(shí)別出的手指的按壓力度，調(diào)整快進(jìn)/快退的速度。13.如權(quán)利要求2或3所述的方法，其特征在于，所述確定所述用戶的操作，具體包括: 在所述觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊音量鍵，則 根據(jù)識(shí)別出的手指確定增大音量、或減小音量；并 根據(jù)識(shí)別出的手指的按壓力度，確定增大或減小音量的多少。14.如權(quán)利要求2或3所述的方法，其特征在于，所述確定所述用戶的操作，具體包括: 在所述觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊文件切換鍵，則 根據(jù)識(shí)別出的手指確定播放上一媒體文件、或播放下一媒體文件。15.如權(quán)利要求2或3所述的方法，其特征在于，所述確定所述用戶的操作，具體包括: 當(dāng)識(shí)別出的手指為特定手指時(shí)，根據(jù)所述位置信息，確定所述用戶的操作； 當(dāng)識(shí)別出的手指不為特定手指時(shí)，根據(jù)識(shí)別出的手指，確定出用戶的操作為返回上一級(jí)、或返回主屏、或打開(kāi)應(yīng)用菜單。16.如權(quán)利要求2或3所述的方法，其特征在于，所述EMG傳感器為環(huán)形結(jié)構(gòu)，包括環(huán)向分布的多組電極，并集成有以無(wú)線方式發(fā)送電信號(hào)的無(wú)線通信單元。17.如權(quán)利要求1-16任一所述的方法，其特征在于，所述EMG傳感器佩戴于如下至少一處:所述用戶的手腕、前臂、上臂。18.一種智能設(shè)備，其特征在于，包括: 信號(hào)接收模塊，用于接收用戶佩戴的EMG傳感器發(fā)送的電信號(hào)； 操作確認(rèn)模塊，用于根據(jù)所述信號(hào)接收模塊接收的電信號(hào)，并結(jié)合所述用戶觸碰所述觸摸屏的位置信息，確定所述用戶的操作； 響應(yīng)模塊，用于對(duì)確定出的所述用戶的操作進(jìn)行響應(yīng)。19.如權(quán)利要求18所述的設(shè)備，其特征在于，所述操作確定模塊具體包括: 信號(hào)識(shí)別單元，用于根據(jù)所述信號(hào)接收模塊接收的電信號(hào)，識(shí)別出所述用戶在觸摸屏上觸摸的手指，和/或用戶的手指在所述觸摸屏上的按壓力度； 信息結(jié)合單元，用于根據(jù)識(shí)別出的手指和/或按壓力度，結(jié)合所述用戶觸碰所述觸摸屏的位置信息，確定所述用戶的操作。20.如權(quán)利要求18或19所述的設(shè)備，其特征在于， 所述信號(hào)識(shí)別單元具體用于根據(jù)所述信號(hào)接收模塊接收的電信號(hào)，識(shí)別出用戶的手指在所述觸摸屏上的按壓力度；和/或利用預(yù)先訓(xùn)練出的部件分類器，根據(jù)接收的電信號(hào)識(shí)別出所述用戶在觸摸屏上觸碰的手指。21.如權(quán)利要求20所述的設(shè)備，其特征在于，還包括: 分類器訓(xùn)練模塊，用于獲取所述EMG傳感器采集的樣本電信號(hào)，提取出樣本電信號(hào)的信號(hào)特征；根據(jù)樣本電信號(hào)對(duì)應(yīng)的手指信息，標(biāo)定提取的信號(hào)特征；根據(jù)標(biāo)定的信號(hào)特征對(duì)分類器進(jìn)行訓(xùn)練，得到所述部件分類器。22.如權(quán)利要求19-21任一所述的設(shè)備，其特征在于， 所述信息結(jié)合單元具體用于在所述觸摸屏顯示虛擬鍵盤(pán)時(shí)，根據(jù)所述位置信息，確定出用戶點(diǎn)擊的字母；并根據(jù)識(shí)別出的手指確定所述字母為大寫(xiě)或小寫(xiě)。23.如權(quán)利要求19-21任一所述的設(shè)備，其特征在于， 所述信息結(jié)合單元具體用于在所述觸摸屏顯示虛擬鍵盤(pán)時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊刪除鍵，則根據(jù)識(shí)別出的手指確定用戶指定的刪除對(duì)象為一個(gè)字符、或一個(gè)詞語(yǔ)、或一個(gè)句子、或一個(gè)段落、或全文。24.如權(quán)利要求19-21任一所述的設(shè)備，其特征在于， 所述信息結(jié)合單元具體用于在所述觸摸屏顯示地圖應(yīng)用界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊地圖放大/縮小鍵，則根據(jù)識(shí)別出的手指的按壓力度，確定放大/縮小顯示地圖的倍數(shù)。25.如權(quán)利要求19-21任一所述的設(shè)備，其特征在于， 所述信息結(jié)合單元具體用于在所述觸摸屏顯示媒體播放器界面時(shí)，若根據(jù)所述位置信息確定用戶點(diǎn)擊音量鍵，則根據(jù)識(shí)別出的手指確定增大音量、或減小音量；并根據(jù)識(shí)別出的手指的按壓力度，確定增大或減小音量的多少。26.如權(quán)利要求18-21任一所述的設(shè)備，其特征在于，還包括:所述EMG傳感器； 所述EMG傳感器為環(huán)形結(jié)構(gòu)，包括環(huán)向分布的多組電極，并集成有以無(wú)線方式發(fā)送電信號(hào)的無(wú)線通信單元。
【文檔編號(hào)】G06F3/0488GK105988695SQ201510083694
【公開(kāi)日】2016年10月5日
【申請(qǐng)日】2015年2月16日
【發(fā)明人】張超, 馮雪濤, 劉洋, 裵致成, 金尙駿
【申請(qǐng)人】北京三星通信技術(shù)研究有限公司, 三星電子株式會(huì)社