本發(fā)明涉及信息技術(shù)領(lǐng)域,尤其涉及一種信息處理方法及電子設(shè)備。
背景技術(shù):
人的視覺(jué)行為對(duì)于人的活動(dòng)認(rèn)知和分析具有重要潛力。隨著頭戴式眼追蹤軟硬件的成熟和價(jià)格下降,以及增強(qiáng)現(xiàn)實(shí)AR和虛擬現(xiàn)實(shí)技術(shù)VR的普及,其應(yīng)用已經(jīng)從過(guò)去專(zhuān)業(yè)的軍事,工業(yè)應(yīng)用快速推進(jìn)到消費(fèi)娛樂(lè)應(yīng)用。其使用場(chǎng)景也由相對(duì)固定的場(chǎng)所,例如:設(shè)計(jì)室,實(shí)驗(yàn)室等,擴(kuò)散到日常生活的場(chǎng)所,移動(dòng)的應(yīng)用場(chǎng)景越來(lái)越豐富,例如:游戲,教育等。甚至在不遠(yuǎn)的將來(lái)會(huì)和手機(jī)與眼睛一樣的普及。
如何利用頭戴式眼追蹤技術(shù)的來(lái)更好的收集評(píng)估和研究人的行為,對(duì)于科學(xué)和商業(yè)領(lǐng)域具有巨大價(jià)值,尤其是收集某些隱性的用戶(hù)狀態(tài)。
在現(xiàn)有技術(shù)中,使用短時(shí)間眼跟蹤獲取的視覺(jué)行為信息來(lái)判斷用戶(hù)活動(dòng),主要問(wèn)題是需要人為分類(lèi)和管理,效率低且精確度低。
技術(shù)實(shí)現(xiàn)要素:
有鑒于此,本發(fā)明實(shí)施例期望提供一種信息處理方法及電子設(shè)備,至少部分解決上述問(wèn)題。
為達(dá)到上述目的,本發(fā)明的技術(shù)方案是這樣實(shí)現(xiàn)的:
本發(fā)明實(shí)施例第一方面提供一種信息處理方法,包括:
采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
基于上述方案,所述方法還包括:
根據(jù)所述用戶(hù)眼睛的位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列;
所述根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系,包括:
確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
基于上述方案,所述確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系,包括:
利用滑動(dòng)窗口切分所述編碼序列,形成詞袋數(shù)據(jù);
以所述詞袋數(shù)據(jù)為數(shù)據(jù)處理單元,確定每一個(gè)所述滑動(dòng)窗口內(nèi)的預(yù)定編碼詞條;
建立所述預(yù)定編碼詞條與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
基于上述方案,所述方法還包括:
分析所述用戶(hù)行為數(shù)據(jù),以不同用戶(hù)行為為劃分依據(jù),確定在時(shí)間維度上的所述滑動(dòng)窗口。
基于上述方案,所述以所述詞袋數(shù)據(jù)為數(shù)據(jù)處理單元,確定每一個(gè)所述滑動(dòng)窗口內(nèi)的預(yù)定編碼詞條,包括:
統(tǒng)計(jì)每一個(gè)所述詞袋數(shù)據(jù)中各個(gè)編碼序列的出現(xiàn)頻次信息及任意兩個(gè)編碼序列出現(xiàn)的關(guān)聯(lián)性;
根據(jù)所述頻次信息及所述關(guān)聯(lián)性,確定所述預(yù)定編碼詞條。
本發(fā)明實(shí)施例第二方面提供一種電子設(shè)備,包括:
第一采集單元,用于采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
提取單元,用于從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
第二采集單元,用于利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
確定單元,用于根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
基于上述方案,所述電子設(shè)備還包括:
編碼單元,用于根據(jù)所述用戶(hù)眼睛的位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列;
所述確定單元,用于確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
基于上述方案,所述確定單元,具體用于利用滑動(dòng)窗口切分所述編碼序列,形成詞袋數(shù)據(jù);以所述詞袋數(shù)據(jù)為數(shù)據(jù)處理單元,確定每一個(gè)所述滑動(dòng)窗口內(nèi)的預(yù)定編碼詞條;
建立所述預(yù)定編碼詞條與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
基于上述方案,所述電子設(shè)備還包括:
分析單元,用于分析所述用戶(hù)行為數(shù)據(jù),以不同用戶(hù)行為為劃分依據(jù),確定在時(shí)間維度上的所述滑動(dòng)窗口。
基于上述方案,所述確定單元,具體用于統(tǒng)計(jì)每一個(gè)所述詞袋數(shù)據(jù)中各個(gè)編碼序列的出現(xiàn)頻次信息及任意兩個(gè)編碼序列出現(xiàn)的關(guān)聯(lián)性;根據(jù)所述頻次信息及所述關(guān)聯(lián)性,確定所述預(yù)定編碼詞條。
本發(fā)明實(shí)施例提供的信息處理方法及電子設(shè)備,會(huì)自動(dòng)通過(guò)眼睛的運(yùn)動(dòng)狀態(tài)的采集,眼珠的位置數(shù)據(jù)的提?。挥脩?hù)行為活動(dòng)的記錄,形成用戶(hù)行為數(shù)據(jù);再根據(jù)兩種數(shù)據(jù)的采集時(shí)間的對(duì)應(yīng)關(guān)系,建立眼睛的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系,這樣電子設(shè)備就能夠自動(dòng)完成上述對(duì)應(yīng)關(guān)系的采集和建立;相對(duì)于人工采集和分析,具有效率高及精確度高的特點(diǎn)。
附圖說(shuō)明
圖1為本發(fā)明實(shí)施例提供的一種信息處理方法流程示意圖;
圖2為本發(fā)明實(shí)施例提供的另一種信息處理方法流程示意圖;
圖3為本發(fā)明實(shí)施例提供的一種電子設(shè)備的結(jié)構(gòu)示意圖;
圖4為本發(fā)明實(shí)施例提供的又一種信息處理方法流程示意圖。
具體實(shí)施方式
以下結(jié)合說(shuō)明書(shū)附圖及具體實(shí)施例對(duì)本發(fā)明的技術(shù)方案做進(jìn)一步的詳細(xì)闡述。
實(shí)施例一:
如圖1所示,本實(shí)施例提供一種信息處理方法,包括:
步驟S110:采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
步驟S120:從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
步驟S130:利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
步驟S140:根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
本實(shí)施例提供的信息處理方法可應(yīng)用于各種電子設(shè)備中,例如包括能夠采集用戶(hù)眼部運(yùn)動(dòng)的電子設(shè)備中,例如眼動(dòng)儀中。
在步驟S110中可以通過(guò)圖像采集眼睛的運(yùn)動(dòng)狀態(tài),具體如,采集用戶(hù)眼珠的運(yùn)動(dòng)狀態(tài)。通過(guò)眼睛的運(yùn)動(dòng)采集,可以知道用戶(hù)當(dāng)前眼珠不懂,凝視某一個(gè)處,還是眨眼,還是眼珠從一個(gè)位置活動(dòng)到另一個(gè)位置的掃視。并記錄用戶(hù)眼眼睛的運(yùn)動(dòng)狀態(tài)發(fā)生的時(shí)間,對(duì)應(yīng)于本實(shí)施例中的所述第一采集時(shí)間。
通常用戶(hù)這些眼睛的運(yùn)動(dòng)狀態(tài),都能夠表示用戶(hù)的心里或身體的活動(dòng),與用戶(hù)當(dāng)前的活動(dòng)相關(guān)。
在本實(shí)施例中為了方便記錄所述眼睛的活動(dòng)狀態(tài),統(tǒng)一采用用戶(hù)的眼珠的位置數(shù)據(jù)來(lái)進(jìn)行記錄,這樣一方面利用位置數(shù)據(jù)進(jìn)行記錄,一方面可以避免記錄大量的圖像數(shù)據(jù)導(dǎo)致的存儲(chǔ)容量大的問(wèn)題,同時(shí)通過(guò)位置數(shù)據(jù)的提取,快速的進(jìn)行數(shù)據(jù)轉(zhuǎn)換和提取,方便后續(xù)的直接應(yīng)用。
在步驟S130中,將利用圖像采集,采集用戶(hù)行為活動(dòng),獲得用戶(hù)行為活動(dòng)數(shù)據(jù)。這里的用戶(hù)行為數(shù)據(jù)位除眼睛的運(yùn)動(dòng)狀態(tài)以外的用戶(hù)行為活動(dòng)的用戶(hù)行為數(shù)據(jù),并記錄各種用戶(hù)行為數(shù)據(jù)的采集時(shí)間,該采集時(shí)間為第二采集時(shí)間。在本實(shí)施例中所述眼動(dòng)數(shù)據(jù)和所述用戶(hù)行為數(shù)據(jù)都可為實(shí)時(shí)采集的,所述第一采集時(shí)間和所述第二采集時(shí)間,對(duì)應(yīng)的就是用戶(hù)眼睛的活動(dòng)及用戶(hù)行為活動(dòng)的發(fā)生時(shí)間。
在步驟S140,將根據(jù)第一采集時(shí)間和第二采集時(shí)間,將用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),與用戶(hù)行為活動(dòng)進(jìn)行匹配起來(lái),在本實(shí)施例中具體將位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)建立對(duì)應(yīng)關(guān)系。例如,通過(guò)采集用戶(hù)在吃飯的時(shí)候的眼睛的運(yùn)動(dòng)狀態(tài),活動(dòng)用戶(hù)吃飯時(shí)的位置數(shù)據(jù),同時(shí)采集用戶(hù)吃飯的活動(dòng),后續(xù)可以對(duì)應(yīng)關(guān)系的建立,例如,將第一采集時(shí)間和第二采集時(shí)間匹配,在同一采集時(shí)間的位置數(shù)據(jù)和用戶(hù)行為數(shù)據(jù)是對(duì)應(yīng),就可以獲知用戶(hù)吃飯時(shí)用戶(hù)的眼睛的運(yùn)動(dòng)狀態(tài)或眼珠的位置數(shù)據(jù)。后續(xù)可以利用這種對(duì)應(yīng)關(guān)系,可以通過(guò)觀(guān)察用戶(hù)的眼珠的運(yùn)動(dòng)狀態(tài),可以獲知用戶(hù)當(dāng)前想干什么以及正在干什么。采用這種由電子設(shè)備自身來(lái)建立上述對(duì)應(yīng)關(guān)系,相對(duì)于人工處理具有精確度高及效率高的特點(diǎn)。
值得注意的是:在本實(shí)施例中所述用戶(hù)行為數(shù)據(jù)可為從采集的圖像中根據(jù)用戶(hù)的眼睛以外的身體運(yùn)動(dòng)狀態(tài)獲取的數(shù)據(jù),相對(duì)于圖像具有數(shù)據(jù)量小及方便存儲(chǔ)和管理的特點(diǎn)。
實(shí)施例二:
如圖1所示,本實(shí)施例提供一種信息處理方法,包括:
步驟S110:采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
步驟S120:從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
步驟S130:利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
步驟S140:根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
所述方法還包括:
根據(jù)所述用戶(hù)眼睛的位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列;
所述步驟S140可包括:
確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
在本實(shí)施例中為了方便記錄所述位置數(shù)據(jù),會(huì)采用預(yù)設(shè)編碼規(guī)則對(duì)所述位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列。
首先,將用戶(hù)的眼珠可活動(dòng)的范圍,例如,用戶(hù)眼睛內(nèi)的區(qū)域,即視域劃分為若干各區(qū)域;其次,記錄用戶(hù)眼睛所在區(qū)域的區(qū)域標(biāo)識(shí)符,在結(jié)合各個(gè)眼睛動(dòng)作的動(dòng)作標(biāo)識(shí)符、以及狀態(tài)標(biāo)識(shí)符就形成所述編碼序列。
例如,用戶(hù)眼睛凝視,眼珠是位于哪一個(gè)區(qū)域,記錄該區(qū)域的區(qū)域標(biāo)識(shí),同時(shí)凝視時(shí)間長(zhǎng)度,以數(shù)字記錄凝視時(shí)間長(zhǎng)度,并添加上表示是凝視的動(dòng)作標(biāo)識(shí)符,就記錄了用戶(hù)眼睛的凝視編碼。例如,N標(biāo)識(shí)凝視的動(dòng)作標(biāo)識(shí)符,用戶(hù)的視域分以中心點(diǎn)為原點(diǎn)以直角坐標(biāo)系劃分為四個(gè)區(qū)域,分別按照逆時(shí)針?lè)较蛞?、2、3及4為區(qū)域標(biāo)識(shí)符,當(dāng)前用戶(hù)眼珠第一區(qū)域上凝視2秒,則對(duì)應(yīng)的編碼可為N12。其中,標(biāo)識(shí)時(shí)長(zhǎng)為2秒的2即為所述狀態(tài)標(biāo)識(shí)符。當(dāng)然在進(jìn)行視域劃分時(shí),除了所述直角坐標(biāo)系劃分,還可以以圓形坐標(biāo)系,以角度進(jìn)行扇形區(qū)域的劃分,例如,每60度為對(duì)應(yīng)一個(gè)區(qū)域。
再例如,用戶(hù)眼睛眨眼,確定用戶(hù)眨眼次數(shù),確定狀態(tài)標(biāo)識(shí)符,并添加上表示是眨眼的動(dòng)作標(biāo)識(shí)符,就形成用戶(hù)眼睛的眨眼次數(shù)。當(dāng)然,還可以結(jié)合用戶(hù)眨眼時(shí),眼珠所在區(qū)域的區(qū)域標(biāo)識(shí)符。
又例如,眼睛的掃視,可以記錄用戶(hù)眼珠從一個(gè)位置到另一個(gè)位置的位置,記錄兩個(gè)位置所對(duì)應(yīng)的區(qū)域標(biāo)識(shí)符,結(jié)合掃視的動(dòng)作標(biāo)識(shí)符,就可以完成對(duì)掃視的編碼。
本實(shí)施例中可以利用動(dòng)作標(biāo)識(shí)符,再結(jié)合上述區(qū)域標(biāo)識(shí)符及狀態(tài)標(biāo)識(shí)符的至少其中之一,進(jìn)行編碼,獲得所述編碼序列。當(dāng)然,形成編碼序列的方式不局限于上述任意一種,還可以采用其他方式進(jìn)行編碼。在本實(shí)施了中將位置數(shù)據(jù)轉(zhuǎn)換成編碼序列,一方面方面存儲(chǔ)和管理,另一方面方便后續(xù)的數(shù)據(jù)處理,相當(dāng)于提供了標(biāo)準(zhǔn)化和統(tǒng)一化的數(shù)據(jù)記錄。
在本實(shí)施例中建立對(duì)應(yīng)關(guān)系時(shí),建立的編碼序列與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。例如,用戶(hù)在看開(kāi)車(chē),則會(huì)用戶(hù)開(kāi)車(chē)時(shí)的眼睛的運(yùn)動(dòng)狀態(tài),并形成上述編碼序列,并通過(guò)用戶(hù)行為記錄存儲(chǔ)下開(kāi)車(chē)的關(guān)鍵詞條,顯然胡可以建立編碼序列與開(kāi)車(chē)這一詞條的對(duì)應(yīng)關(guān)系。后續(xù),通過(guò)眼動(dòng)儀或其他眼部采集設(shè)備,例如,VR或AR智能眼睛采集到用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),得到上述編碼序列時(shí),通過(guò)所述對(duì)應(yīng)關(guān)系就可以知道用戶(hù)在開(kāi)車(chē)。
實(shí)施例三:
如圖1所示,本實(shí)施例提供一種信息處理方法,包括:
步驟S110:采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
步驟S120:從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
步驟S130:利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
步驟S140:根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
所述方法還包括:
根據(jù)所述用戶(hù)眼睛的位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列;
所述步驟S140可包括:
確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
所述步驟S140具體可包括:
利用滑動(dòng)窗口切分所述編碼序列,形成詞袋數(shù)據(jù);
以所述詞袋數(shù)據(jù)為數(shù)據(jù)處理單元,確定每一個(gè)所述滑動(dòng)窗口內(nèi)的預(yù)定編碼詞條;
建立所述預(yù)定編碼詞條與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
在本實(shí)施例中對(duì)用戶(hù)的眼動(dòng)數(shù)據(jù)進(jìn)行編碼,獲得很多個(gè)編碼序列。具體哪些眼睛的動(dòng)作是對(duì)應(yīng)于一個(gè)用戶(hù)行為活動(dòng)的一個(gè)整體,在本實(shí)施例中可以利用滑動(dòng)窗口進(jìn)行切分,從而將1個(gè)或多個(gè)眼睛動(dòng)作對(duì)應(yīng)的編碼序列劃分到一個(gè)詞袋中,形成詞袋數(shù)據(jù)。隸屬于同一個(gè)詞袋的數(shù)據(jù),作為后續(xù)建立編碼序列與用戶(hù)行為數(shù)據(jù)對(duì)應(yīng)關(guān)系的一個(gè)基本處理單元,即對(duì)應(yīng)于上述數(shù)據(jù)處理單元。即認(rèn)為上述一個(gè)詞袋內(nèi)的所有編碼序列整體對(duì)應(yīng)于一個(gè)用戶(hù)行為數(shù)據(jù)或用戶(hù)行為活動(dòng)。
利用詞袋模型中的滑動(dòng)窗口作為編碼序列的切分,能夠提高后續(xù)對(duì)應(yīng)關(guān)系建立的精確度。在本實(shí)施例中所述滑動(dòng)窗口的窗口長(zhǎng)度可對(duì)應(yīng)于正數(shù)倍于一個(gè)所述編碼序列的長(zhǎng)度。所述窗口長(zhǎng)度可為根據(jù)歷史記錄中確定的編碼序列與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系中,數(shù)值關(guān)系確定的。例如,歷史記錄表面M個(gè)編碼序列對(duì)應(yīng)于一個(gè)用戶(hù)行為數(shù)據(jù),則所述窗口長(zhǎng)度可為M個(gè)編碼序列的長(zhǎng)度。此時(shí),所述滑動(dòng)窗口可為編碼長(zhǎng)度窗口,但是具體實(shí)現(xiàn)時(shí)不局限于編碼長(zhǎng)度窗口。
實(shí)施例四:
如圖1所示,本實(shí)施例提供一種信息處理方法,包括:
步驟S110:采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
步驟S120:從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
步驟S130:利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
步驟S140:根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
所述方法還包括:
根據(jù)所述用戶(hù)眼睛的位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列;
所述步驟S140可包括:
確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
所述步驟S140具體可包括:
利用滑動(dòng)窗口切分所述編碼序列,形成詞袋數(shù)據(jù);
以所述詞袋數(shù)據(jù)為數(shù)據(jù)處理單元,確定每一個(gè)所述滑動(dòng)窗口內(nèi)的預(yù)定編碼詞條;
建立所述預(yù)定編碼詞條與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
所述方法還包括:
分析所述用戶(hù)行為數(shù)據(jù),以不同用戶(hù)行為為劃分依據(jù),確定在時(shí)間維度上的所述滑動(dòng)窗口。
在本實(shí)施例中所述滑動(dòng)窗口可為時(shí)間維度上的時(shí)間滑動(dòng)窗口,一個(gè)滑動(dòng)窗口對(duì)應(yīng)了所長(zhǎng)時(shí)間。例如,編碼序列依次按照時(shí)間順序從早到晚排序,所述時(shí)間滑動(dòng)窗口可能對(duì)應(yīng)于P秒,則該滑動(dòng)窗口內(nèi)一次性包塊時(shí)長(zhǎng)為P秒內(nèi)的所有編碼序列。在本實(shí)施中在記錄所述用行為數(shù)據(jù)時(shí),會(huì)記錄用戶(hù)從一個(gè)行為到另一個(gè)行為的轉(zhuǎn)換時(shí)間點(diǎn),根據(jù)這些轉(zhuǎn)換時(shí)間點(diǎn),可以確定出所述時(shí)間滑動(dòng)窗口的長(zhǎng)度,通過(guò)時(shí)間滑動(dòng)窗口的確定,就相當(dāng)于確定了每一個(gè)詞袋內(nèi)包括的編碼序列的個(gè)數(shù),從而可以精確建立上述對(duì)應(yīng)關(guān)系。
本實(shí)施例中所述預(yù)定編碼詞條可由一個(gè)或多個(gè)所述編碼序列按照預(yù)設(shè)規(guī)則排列起來(lái)的詞條。
實(shí)施例五:
如圖1所示,本實(shí)施例提供一種信息處理方法,包括:
步驟S110:采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
步驟S120:從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
步驟S130:利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
步驟S140:根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
所述方法還包括:
根據(jù)所述用戶(hù)眼睛的位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列;
所述步驟S140可包括:
確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
所述步驟S140具體可包括:
利用滑動(dòng)窗口切分所述編碼序列,形成詞袋數(shù)據(jù);
以所述詞袋數(shù)據(jù)為數(shù)據(jù)處理單元,確定每一個(gè)所述滑動(dòng)窗口內(nèi)的預(yù)定編碼詞條;
建立所述預(yù)定編碼詞條與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
所述以所述詞袋數(shù)據(jù)為數(shù)據(jù)處理單元,確定每一個(gè)所述滑動(dòng)窗口內(nèi)的預(yù)定編碼詞條,包括:
統(tǒng)計(jì)每一個(gè)所述詞袋數(shù)據(jù)中各個(gè)編碼序列的出現(xiàn)頻次信息及任意兩個(gè)編碼序列出現(xiàn)的關(guān)聯(lián)性;
根據(jù)所述頻次信息及所述關(guān)聯(lián)性,確定所述預(yù)定編碼詞條。
例如,用戶(hù)在看書(shū)時(shí)可能會(huì)出現(xiàn)哪些眼睛動(dòng)作,且最常出現(xiàn)哪些眼睛動(dòng)作,這些眼睛動(dòng)作顯然是與看書(shū)這一行為活動(dòng)相關(guān)聯(lián)的,故在本實(shí)施例中會(huì)統(tǒng)計(jì)一個(gè)詞袋內(nèi)各個(gè)編碼序列的頻次信息,選擇頻次信息較高的一個(gè)或多個(gè)編碼序列與看書(shū)這一用戶(hù)行為數(shù)據(jù)建立對(duì)應(yīng)關(guān)系。當(dāng)然,用戶(hù)的眼睛動(dòng)作是連續(xù)性,兩個(gè)眼睛動(dòng)作之間是有關(guān)聯(lián)性,在本實(shí)施例中還會(huì)統(tǒng)計(jì)兩個(gè)眼睛動(dòng)作總是相鄰出現(xiàn)或間隔預(yù)設(shè)動(dòng)作出現(xiàn)的概率。例如,在看書(shū)時(shí)掃視和眨眼之間的關(guān)聯(lián)關(guān)系是怎樣的,掃視和凝視之間的關(guān)聯(lián)關(guān)系是怎樣的,都可以通過(guò)上述編碼序列的關(guān)聯(lián)性來(lái)表示。通過(guò)關(guān)聯(lián)性的提取,實(shí)質(zhì)上將用戶(hù)眼睛動(dòng)作的組合,與用戶(hù)行為數(shù)據(jù)建立對(duì)應(yīng)關(guān)系。故在本實(shí)施例中,會(huì)根據(jù)頻次信息及關(guān)聯(lián)性,確定所述預(yù)定編碼詞條。
本實(shí)施例中所述預(yù)定編碼詞條可由一個(gè)或多個(gè)所述編碼序列按照預(yù)設(shè)規(guī)則排列起來(lái)的詞條。例如,所述預(yù)定編碼詞條可包括兩部分:
第一部分:
高頻編碼序列;S1個(gè)編碼序列為頻次信息最高的編碼序列,且是頻次信息從高到低排序。
第二部分:
編碼序列之間的關(guān)聯(lián)性,記錄有關(guān)聯(lián)性的兩個(gè)編碼序列,形成組合編碼。一個(gè)組合編碼內(nèi)的兩個(gè)編碼序列表示該兩個(gè)編碼序列對(duì)應(yīng)的眼睛動(dòng)作出現(xiàn)有關(guān)聯(lián)性。為了精確的表示關(guān)聯(lián)性對(duì)應(yīng)的關(guān)聯(lián)度等參數(shù),還引入了關(guān)聯(lián)概率和間隔序列數(shù)等參數(shù)。例如,關(guān)聯(lián)概率可為表示這兩個(gè)編碼序列對(duì)應(yīng)的眼睛動(dòng)作的總是一起出現(xiàn)的概率。所述間隔序列數(shù)據(jù),表示這兩個(gè)編碼序列一起出現(xiàn)時(shí)平均間隔的編碼序列個(gè)數(shù)或頻次最高的間隔的編碼序列數(shù)等。
當(dāng)然所述預(yù)定編碼詞條的組成有很多種,以上僅是一個(gè)示例,具體實(shí)現(xiàn)時(shí),不限于上述方式。
在本實(shí)施例中根據(jù)頻次信息及關(guān)聯(lián)性,確定的預(yù)定編碼詞條,至少?gòu)膬蓚€(gè)維度建立了用戶(hù)的眼睛活動(dòng)與用戶(hù)其他部分身體活動(dòng)的對(duì)應(yīng)關(guān)系,具有精確度高的特點(diǎn)。
例如,如圖2所示,首先采集眼動(dòng)數(shù)據(jù),然后進(jìn)行編碼,利用詞袋模型表達(dá)及潛在狄氏配置模型建立對(duì)應(yīng)關(guān)系,后續(xù)通過(guò)再次眼動(dòng)數(shù)據(jù)的掃描及所述對(duì)應(yīng)關(guān)系實(shí)現(xiàn)話(huà)題激活。
實(shí)施例六:
如圖3所示,本實(shí)施例提供一種電子設(shè)備,包括:
第一采集單元110,用于采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
提取單元120,用于從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
第二采集單元130,用于利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
確定單元140,用于根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
本實(shí)施例所述的電子設(shè)備可為任意一種可以進(jìn)行圖像采集的設(shè)備。
所述第一采集單元110和第二采集單元130都可對(duì)應(yīng)于能夠進(jìn)行圖像采集的照相機(jī)或攝像機(jī)。
所述提取單元120和所述確定單元140都可對(duì)應(yīng)于處理器或處理電路。所述處理器可為中央處理器、微處理器、數(shù)字信號(hào)處理器、應(yīng)用處理器或可編程陣列等,所述處理電路可包括專(zhuān)用集成電路,與所述照相機(jī)或攝像機(jī)連接,能夠通過(guò)預(yù)定指令的執(zhí)行,可實(shí)現(xiàn)位置數(shù)據(jù)的提取及對(duì)應(yīng)關(guān)系的建立,具有實(shí)現(xiàn)簡(jiǎn)單、效率高及精確度高的特點(diǎn)。
實(shí)施例七:
如圖3所示,本實(shí)施例提供一種電子設(shè)備,包括:
第一采集單元110,用于采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
提取單元120,用于從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
第二采集單元130,用于利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
確定單元140,用于根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
所述電子設(shè)備還包括:
編碼單元,用于根據(jù)所述用戶(hù)眼睛的位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列;
所述確定單元140,用于確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
本實(shí)施例所述的編碼單元同樣對(duì)應(yīng)于處理器或處理電路。在本實(shí)施例中為了方便后續(xù)的處理,不僅會(huì)提取位置數(shù)據(jù),還為了方便后續(xù)數(shù)據(jù)的處理,會(huì)對(duì)位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列。所述確定單元140具體建立的編碼序列與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
實(shí)施例八:
如圖3所示,本實(shí)施例提供一種電子設(shè)備,包括:
第一采集單元110,用于采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
提取單元120,用于從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
第二采集單元130,用于利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
確定單元140,用于根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
所述電子設(shè)備還包括:
編碼單元,用于根據(jù)所述用戶(hù)眼睛的位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列;
所述確定單元140,用于確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
所述確定單元140,具體用于利用滑動(dòng)窗口切分所述編碼序列,形成詞袋數(shù)據(jù);以所述詞袋數(shù)據(jù)為數(shù)據(jù)處理單元,確定每一個(gè)所述滑動(dòng)窗口內(nèi)的預(yù)定編碼詞條;建立所述預(yù)定編碼詞條與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
在本實(shí)施例中,所述確定單元,通過(guò)滑動(dòng)窗口形成詞袋數(shù)據(jù),確定預(yù)定編碼詞條,建立是預(yù)定編碼詞條與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系,具有實(shí)現(xiàn)簡(jiǎn)便的特點(diǎn)。
實(shí)施例九:
如圖3所示,本實(shí)施例提供一種電子設(shè)備,包括:
第一采集單元110,用于采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
提取單元120,用于從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
第二采集單元130,用于利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
確定單元140,用于根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
所述電子設(shè)備還包括:
編碼單元,用于根據(jù)所述用戶(hù)眼睛的位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列;
所述確定單元140,用于確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
所述確定單元140,具體用于利用滑動(dòng)窗口切分所述編碼序列,形成詞袋數(shù)據(jù);以所述詞袋數(shù)據(jù)為數(shù)據(jù)處理單元,確定每一個(gè)所述滑動(dòng)窗口內(nèi)的預(yù)定編碼詞條;建立所述預(yù)定編碼詞條與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
所述電子設(shè)備還包括:
分析單元,用于分析所述用戶(hù)行為數(shù)據(jù),以不同用戶(hù)行為為劃分依據(jù),確定在時(shí)間維度上的所述滑動(dòng)窗口。
本實(shí)施例中所述分析單元同樣可對(duì)應(yīng)于處理器或處理電路,該處理器或處理電路可以參見(jiàn)前述實(shí)施例中。本實(shí)施例中通過(guò)時(shí)間滑動(dòng)窗口進(jìn)行編碼序列劃分,通過(guò)滑動(dòng)窗口的編碼序列的切分,能夠提升對(duì)應(yīng)關(guān)系建立的精確性。
實(shí)施例十:
如圖3所示,本實(shí)施例提供一種電子設(shè)備,包括:
第一采集單元110,用于采集用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),形成眼動(dòng)數(shù)據(jù)并記錄第一采集時(shí)間;
提取單元120,用于從所述眼動(dòng)數(shù)據(jù)提取用戶(hù)眼珠的位置數(shù)據(jù);
第二采集單元130,用于利用圖像采集用戶(hù)行為數(shù)據(jù)并記錄第二采集時(shí)間;
確定單元140,用于根據(jù)所述第一采集時(shí)間和所述第二采集時(shí)間,確定所述用戶(hù)眼珠的位置數(shù)據(jù)與用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系;
其中,所述對(duì)應(yīng)關(guān)系用于根據(jù)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài)確定當(dāng)前用戶(hù)行為。
所述電子設(shè)備還包括:
編碼單元,用于根據(jù)所述用戶(hù)眼睛的位置數(shù)據(jù)進(jìn)行編碼,形成編碼序列;
所述確定單元140,用于確定所述編碼序列與所述用戶(hù)行為數(shù)據(jù)的對(duì)應(yīng)關(guān)系。
所述確定單元140,具體用于統(tǒng)計(jì)每一個(gè)所述詞袋數(shù)據(jù)中各個(gè)編碼序列的出現(xiàn)頻次信息及任意兩個(gè)編碼序列出現(xiàn)的關(guān)聯(lián)性;根據(jù)所述頻次信息及所述關(guān)聯(lián)性,確定所述預(yù)定編碼詞條。
本實(shí)施例中將通過(guò)統(tǒng)計(jì)詞袋數(shù)據(jù)中各個(gè)編碼序列的出現(xiàn)頻次信息及任意編碼序列出現(xiàn)的關(guān)聯(lián)性,確定所述預(yù)定編碼詞條。顯然,預(yù)定編碼詞條至少?zèng)Q定頻次信息和出現(xiàn)關(guān)聯(lián)性?xún)蓚€(gè)維度的信息,可以精確表達(dá)用戶(hù)眼睛的運(yùn)動(dòng)狀態(tài),以提高對(duì)應(yīng)關(guān)系的精確度。
以下結(jié)合上述實(shí)施例提供幾個(gè)具體示例:
示例一:
通過(guò)眼跟蹤設(shè)備獲取一段較長(zhǎng)時(shí)間(例如幾個(gè)小時(shí))內(nèi)眼動(dòng)數(shù)據(jù)(凝視、眨眼、掃視)的變化,獲取離散時(shí)間的數(shù)據(jù);
對(duì)獲取的位置眼球位置數(shù)據(jù)(凝視、眨眼、掃視)進(jìn)行編碼;
通過(guò)結(jié)合詞袋視覺(jué)行為表達(dá)模型和潛在狄氏配置話(huà)題模型來(lái)得到用戶(hù)的日?;顒?dòng),如:吃飯,閱讀,開(kāi)車(chē),等。所述袋視覺(jué)行為表達(dá)模型和潛在狄氏配置話(huà)題模型為對(duì)用戶(hù)行為活動(dòng)進(jìn)行分析,獲得所述用戶(hù)行為數(shù)據(jù)的一種方式,再結(jié)合編碼,可以建立前述的對(duì)應(yīng)關(guān)系。
示例二:
本示例提供一種信息處理方法,可包括:
眼跟蹤系統(tǒng)采集長(zhǎng)時(shí)間眼位置坐標(biāo),并獲得注視點(diǎn),眨眼和掃視時(shí)間離散數(shù)據(jù);
對(duì)眼動(dòng)特征數(shù)據(jù)進(jìn)行編碼:
1:掃視數(shù)據(jù)(方向,速度)通過(guò)K-Means算法獲得K個(gè)聚類(lèi),每個(gè)聚類(lèi)用一個(gè)編碼代表。
2:注視數(shù)據(jù)通過(guò)時(shí)長(zhǎng)來(lái)進(jìn)行編碼,例如:最長(zhǎng)和最短時(shí)間確定上下限,然后均分獲取N個(gè)區(qū)間,N個(gè)編碼代表。這里的注視相當(dāng)于前述的凝視。
3:注視區(qū)間的眨眼數(shù)據(jù)(次數(shù))直接編碼到注視數(shù)據(jù)后。
通過(guò)滑動(dòng)窗口對(duì)編碼流進(jìn)行切分獲得詞袋數(shù)據(jù)。
潛在狄氏配置模型選出目前激活的活動(dòng),從而判斷出用戶(hù)的活動(dòng)。
示例三:
如圖4所示,本示例提供一種信息處理方法,包括:
S1:校準(zhǔn)眼睛跟蹤系統(tǒng);
S2:獲取眼睛注視,眨眼及掃視實(shí)時(shí)數(shù)據(jù);
S3:眼動(dòng)數(shù)據(jù)實(shí)時(shí)離散數(shù)據(jù);
S4:眼動(dòng)特征數(shù)據(jù)編碼;
S5:眼動(dòng)數(shù)據(jù)字母數(shù)字序列編碼;
S6:滑動(dòng)窗口切分編碼序列;
S7:詞袋數(shù)據(jù);
S8:潛在狄氏配置模型滑動(dòng)窗口編碼序列;
S9:對(duì)應(yīng)關(guān)系建立。
在本申請(qǐng)所提供的幾個(gè)實(shí)施例中,應(yīng)該理解到,所揭露的設(shè)備和方法,可以通過(guò)其它的方式實(shí)現(xiàn)。以上所描述的設(shè)備實(shí)施例僅僅是示意性的,例如,所述單元的劃分,僅僅為一種邏輯功能劃分,實(shí)際實(shí)現(xiàn)時(shí)可以有另外的劃分方式,如:多個(gè)單元或組件可以結(jié)合,或可以集成到另一個(gè)系統(tǒng),或一些特征可以忽略,或不執(zhí)行。另外,所顯示或討論的各組成部分相互之間的耦合、或直接耦合、或通信連接可以是通過(guò)一些接口,設(shè)備或單元的間接耦合或通信連接,可以是電性的、機(jī)械的或其它形式的。
上述作為分離部件說(shuō)明的單元可以是、或也可以不是物理上分開(kāi)的,作為單元顯示的部件可以是、或也可以不是物理單元,即可以位于一個(gè)地方,也可以分布到多個(gè)網(wǎng)絡(luò)單元上;可以根據(jù)實(shí)際的需要選擇其中的部分或全部單元來(lái)實(shí)現(xiàn)本實(shí)施例方案的目的。
另外,在本發(fā)明各實(shí)施例中的各功能單元可以全部集成在一個(gè)處理模塊中,也可以是各單元分別單獨(dú)作為一個(gè)單元,也可以?xún)蓚€(gè)或兩個(gè)以上單元集成在一個(gè)單元中;上述集成的單元既可以采用硬件的形式實(shí)現(xiàn),也可以采用硬件加軟件功能單元的形式實(shí)現(xiàn)。
本領(lǐng)域普通技術(shù)人員可以理解:實(shí)現(xiàn)上述方法實(shí)施例的全部或部分步驟可以通過(guò)程序指令相關(guān)的硬件來(lái)完成,前述的程序可以存儲(chǔ)于一計(jì)算機(jī)可讀取存儲(chǔ)介質(zhì)中,該程序在執(zhí)行時(shí),執(zhí)行包括上述方法實(shí)施例的步驟;而前述的存儲(chǔ)介質(zhì)包括:移動(dòng)存儲(chǔ)設(shè)備、只讀存儲(chǔ)器(ROM,Read-Only Memory)、隨機(jī)存取存儲(chǔ)器(RAM,Random Access Memory)、磁碟或者光盤(pán)等各種可以存儲(chǔ)程序代碼的介質(zhì)。
以上所述,僅為本發(fā)明的具體實(shí)施方式,但本發(fā)明的保護(hù)范圍并不局限于此,任何熟悉本技術(shù)領(lǐng)域的技術(shù)人員在本發(fā)明揭露的技術(shù)范圍內(nèi),可輕易想到變化或替換,都應(yīng)涵蓋在本發(fā)明的保護(hù)范圍之內(nèi)。因此,本發(fā)明的保護(hù)范圍應(yīng)以所述權(quán)利要求的保護(hù)范圍為準(zhǔn)。