背景技術(shù)：

本發(fā)明實(shí)施例涉及平視顯示器，并且更具體而言涉及基于平視顯示器用戶和至少一個(gè)其它實(shí)體的目光接觸經(jīng)由平視顯示器與設(shè)備進(jìn)行交互。

使得平視顯示器(hud)設(shè)備的用戶能夠進(jìn)行交互(例如，將文件從一個(gè)用戶傳送到另一個(gè)用戶)的一種方法是使用常規(guī)的電子郵件、ftp、文本消息傳送或usb驅(qū)動(dòng)器傳送。然而，這些方法對(duì)于hud的穿戴者而言是不方便和緩慢的，因?yàn)樗鼈冃枰陔y以保證精度的接口中進(jìn)行許多精確動(dòng)作，接口的精度難以保證是因?yàn)槿狈_的輸入設(shè)備，諸如鼠標(biāo)、鍵盤或觸摸屏。例如，考慮在沒有這樣的精確輸入設(shè)備的情況下在hud上發(fā)送電子郵件的難度。近場(chǎng)通信(nfc)技術(shù)比其它常規(guī)方法對(duì)于用戶而言潛在地更容易激活，但是nfc技術(shù)還可能給用戶帶來不便，因?yàn)樗鼈冃枰o密的物理接近。例如，每當(dāng)兩個(gè)個(gè)體希望傳送文件時(shí)，他們碰頭，這將是尷尬的。

技術(shù)實(shí)現(xiàn)要素：

根據(jù)本發(fā)明的實(shí)施例，用于經(jīng)由平視顯示器進(jìn)行設(shè)備交互的系統(tǒng)確定采用第一平視顯示器的第一實(shí)體的視野區(qū)域，并且響應(yīng)于至少檢測(cè)到所確定的視野區(qū)域?qū)χ辽僖粋€(gè)第二設(shè)備的影響而建立至少一個(gè)第一設(shè)備與第一平視顯示器之間的交互。本發(fā)明實(shí)施例的一個(gè)優(yōu)點(diǎn)是通過與常規(guī)方法相比減少緩慢或不方便的動(dòng)作的數(shù)量來為hud的用戶提高與設(shè)備交互的速度和簡(jiǎn)易性，而不需要近場(chǎng)通信所需的緊密接近。

根據(jù)本發(fā)明的其它實(shí)施例，第一平視顯示器被耦接到(一個(gè)或多個(gè))第二設(shè)備，并且建立交互包括：在第一平視顯示器上呈現(xiàn)(一個(gè)或多個(gè))第一設(shè)備的界面，基于耦接到第一平視顯示器的(一個(gè)或多個(gè))第二設(shè)備上第一實(shí)體的所確定的視野區(qū)域和/或至少一個(gè)語音命令來操縱所呈現(xiàn)的界面，以及基于所呈現(xiàn)的界面的操縱來控制(一個(gè)或多個(gè))第一設(shè)備。這樣的實(shí)施例提供了在手上持有設(shè)備不方便、困難或不可能的情況下更容易地利用可穿戴hud來控制設(shè)備(例如，筆記本、工作站、平板等)而不必需要手操作的優(yōu)點(diǎn)。

在一些實(shí)施例中，至少檢測(cè)所確定的視野區(qū)域的影響包括(1)在與第一平視顯示器相關(guān)聯(lián)的對(duì)應(yīng)設(shè)備的電磁信號(hào)檢測(cè)器處檢測(cè)從與(一個(gè)或多個(gè))第一設(shè)備中的至少一個(gè)相關(guān)聯(lián)的發(fā)送器發(fā)送的電磁信號(hào)和/或(2)在與(一個(gè)或多個(gè))第一設(shè)備中的至少一個(gè)相關(guān)聯(lián)的對(duì)應(yīng)設(shè)備的電磁信號(hào)檢測(cè)器處檢測(cè)從與第一平視顯示器相關(guān)聯(lián)的發(fā)送器發(fā)送的電磁信號(hào)。

在其它實(shí)施例中，第一平視顯示器包括發(fā)射器，以沿著第一實(shí)體的視線方向發(fā)送信號(hào)，并且(一個(gè)或多個(gè))第一設(shè)備中的每個(gè)第一設(shè)備與(一個(gè)或多個(gè))第二設(shè)備中包括用于接收信號(hào)的接收器的對(duì)應(yīng)的第二設(shè)備相關(guān)聯(lián)，并且至少檢測(cè)所確定的視野區(qū)域的影響包括在與(一個(gè)或多個(gè))第一設(shè)備相關(guān)聯(lián)的接收器處檢測(cè)從第一平視顯示器發(fā)送的信號(hào)。

在其它實(shí)施例中，第一平視顯示器還包括圖像捕獲設(shè)備，并且確定視野區(qū)域包括經(jīng)由圖像捕獲設(shè)備跟蹤第一實(shí)體的視野區(qū)域并且瞄準(zhǔn)發(fā)射器，以便以被跟蹤的視野區(qū)域的方向發(fā)送信號(hào)。

在其它實(shí)施例中，第一設(shè)備包括由第二實(shí)體采用的第二平視顯示器，并且至少一個(gè)第二設(shè)備包括受第一實(shí)體的所確定的視野區(qū)域影響和受第二實(shí)體的所確定的視野區(qū)域影響的公共設(shè)備。

本發(fā)明的實(shí)施例還包括用于經(jīng)由平視顯示器以與上文描述的基本相同的方式與設(shè)備進(jìn)行交互的方法和計(jì)算機(jī)程序產(chǎn)品。

附圖說明

一般而言，在各個(gè)附圖中相似的附圖標(biāo)記被用于標(biāo)識(shí)相似的部件。

圖1是用于本發(fā)明的實(shí)施例的示例環(huán)境的示意圖。

圖2是根據(jù)本發(fā)明的實(shí)施例的用于目光接觸的示例視覺部件的框圖。

圖3是根據(jù)本發(fā)明的實(shí)施例的便于視線跟蹤的示例接觸鏡片的示意圖。

圖4是根據(jù)本發(fā)明的實(shí)施例的兩個(gè)平視顯示系統(tǒng)交互的框圖。

圖5是示出根據(jù)本發(fā)明的實(shí)施例的兩個(gè)平視顯示系統(tǒng)可以交互的示例方式的流程圖。

圖6是示出根據(jù)本發(fā)明的實(shí)施例的在兩個(gè)平視顯示系統(tǒng)的穿戴者之間建立目光接觸的示例方式的流程圖。

圖7是根據(jù)本發(fā)明的實(shí)施例的以一對(duì)多關(guān)系與其它平視顯示系統(tǒng)交互的平視顯示系統(tǒng)的框圖。

圖8是示出根據(jù)本發(fā)明的實(shí)施例的平視顯示系統(tǒng)可以以一對(duì)多關(guān)系與其它平視顯示系統(tǒng)交互的示例方式的流程圖。

圖9是根據(jù)本發(fā)明的實(shí)施例的使用目光接觸經(jīng)由中間感知設(shè)備交互的平視顯示系統(tǒng)的框圖。

圖10是根據(jù)本發(fā)明的實(shí)施例的使用目光接觸經(jīng)由多個(gè)聯(lián)網(wǎng)的中間感知設(shè)備交互的平視顯示系統(tǒng)的框圖。

圖11是根據(jù)本發(fā)明的實(shí)施例的使用目光接觸與感知設(shè)備以一對(duì)一關(guān)系交互的平視顯示系統(tǒng)的框圖。

圖12是示出根據(jù)本發(fā)明的實(shí)施例的使用基于相機(jī)的目光接觸在平視顯示系統(tǒng)和感知設(shè)備之間建立目光接觸的示例方式的流程圖。

圖13是示出根據(jù)本發(fā)明的實(shí)施例的使用基于聚焦發(fā)射器的目光接觸在平視顯示系統(tǒng)和感知設(shè)備之間建立目光接觸的示例方式的流程圖。

具體實(shí)施方式

本發(fā)明實(shí)施例提供了用于基于平視顯示器(hud)用戶和至少一個(gè)其他個(gè)體或設(shè)備的目光接觸經(jīng)由hud與設(shè)備進(jìn)行交互的技術(shù)。例如，為了將文件從一個(gè)hud設(shè)備傳送到另一個(gè)hud設(shè)備，一個(gè)hud設(shè)備的穿戴者指示發(fā)送文件的意愿；另一個(gè)hud設(shè)備的穿戴者指示接收該文件的意愿；穿戴者之間進(jìn)行目光接觸；并且作為結(jié)果，文件傳送過程開始。hud設(shè)備可以直接地或經(jīng)由一個(gè)或多個(gè)中間設(shè)備以一對(duì)一或一對(duì)多的關(guān)系與一個(gè)或多個(gè)其它hud設(shè)備交互。在一種場(chǎng)景中，第一hud用戶可以通過與具有到第二用戶的hud的遠(yuǎn)程網(wǎng)絡(luò)連接的本地設(shè)備(例如，同一房間中的設(shè)備)進(jìn)行目光接觸(例如，看本地設(shè)備)來與遠(yuǎn)離第一hud用戶(例如，在另一個(gè)城市中)的第二hud用戶進(jìn)行交互。另外，hud可以經(jīng)由與除了hud以外的設(shè)備的目光接觸來進(jìn)行交互。例如，hud穿戴者可以通過看設(shè)備上的傳感器來發(fā)起與該設(shè)備的交互。此外，hud穿戴者可以通過使用hud穿戴者的注視指引光標(biāo)來與具有在hud上呈現(xiàn)的點(diǎn)擊界面的設(shè)備(例如，筆記本、平板等)進(jìn)行交互。

經(jīng)由hud與設(shè)備交互的示例包括hud(例如，可穿戴hud)和設(shè)備之間的以下關(guān)系：文件傳送、發(fā)起用于音頻通信(例如，包含麥克風(fēng)和揚(yáng)聲器的hud之間的蜂窩電話、互聯(lián)網(wǎng)呼叫等)的連接、設(shè)備控制(例如，hud控制設(shè)備，或設(shè)備控制hud)、查看設(shè)備狀態(tài)、查看與設(shè)備相關(guān)聯(lián)的公共消息(例如，“公告牌”)、客戶端-服務(wù)器關(guān)系(其中可穿戴hud可以是客戶端或服務(wù)器)、登錄/認(rèn)證(例如，經(jīng)由存儲(chǔ)的密鑰、生物特征(例如，虹膜圖案)等)等等。

設(shè)備可以主動(dòng)或被動(dòng)地檢測(cè)來自hud用戶或穿戴者的目光接觸。例如，設(shè)備可以包括相機(jī)，并且可以主動(dòng)地分析來自相機(jī)的圖像數(shù)據(jù)以確定個(gè)體正在看該設(shè)備。可替代地，設(shè)備可以被動(dòng)地檢測(cè)來自hud穿戴者的目光接觸。例如，設(shè)備可以從hud接收指示hud的穿戴者正在看該設(shè)備的聚焦信號(hào)。

本發(fā)明實(shí)施例的一個(gè)優(yōu)點(diǎn)是與常規(guī)方法相比，為hud的用戶提高與設(shè)備交互的速度和簡(jiǎn)易性。例如，使用電子郵件經(jīng)由hud的文件傳送需要在由hud為發(fā)送者和接收者二者呈現(xiàn)的用戶界面(ui)中采取許多動(dòng)作：發(fā)送者和/或接收者必須采取動(dòng)作以指定接收者地址、訪問并且登錄郵件客戶端、選擇要下載的附件等。本發(fā)明的實(shí)施例簡(jiǎn)化了交互。文件傳送可以不用手(handsfree)執(zhí)行，因此即使在用戶忙于其它任務(wù)時(shí)也可以發(fā)生。

使用近場(chǎng)通信(nfc)技術(shù)的替代方法(例如，用于在電話之間交換信息的“碰撞”)要求兩個(gè)用戶都具有帶nfc能力的設(shè)備、當(dāng)時(shí)帶著這些設(shè)備并且有時(shí)間和空閑的手來使用設(shè)備。此外，nfc技術(shù)與可穿戴hud一起使用將要求穿戴者將兩個(gè)hud設(shè)備(例如，眼鏡對(duì))碰撞在一起，這是尷尬的并且非直觀的。本發(fā)明實(shí)施例提供了經(jīng)由可穿戴hud的直觀的、不用手的、更快的并且便利的交互模式。

圖1中示出了用于本發(fā)明實(shí)施例的示例環(huán)境。具體而言，該環(huán)境可以包括一個(gè)或多個(gè)平視顯示器(hud)系統(tǒng)110、一個(gè)或多個(gè)服務(wù)器系統(tǒng)120、一個(gè)或多個(gè)感知設(shè)備130以及一個(gè)或多個(gè)遠(yuǎn)程系統(tǒng)140。hud系統(tǒng)110、服務(wù)器系統(tǒng)120、感知設(shè)備130和遠(yuǎn)程系統(tǒng)140可以經(jīng)網(wǎng)絡(luò)12進(jìn)行通信。網(wǎng)絡(luò)12可以由任何數(shù)量的任何合適的通信介質(zhì)(例如，廣域網(wǎng)(wan)、局域網(wǎng)(lan)、因特網(wǎng)、內(nèi)聯(lián)網(wǎng)、硬連線、無線鏈路等)實(shí)現(xiàn)。

hud系統(tǒng)110包括平視顯示器40并且可以是頭戴物(headgear)(例如，頭戴式顯示器、頭盔式顯示器、眼鏡等)、其它可穿戴設(shè)備(例如，接觸鏡片、衣服等)或者具有交互式用戶接口的其它配置的形式。hud系統(tǒng)110和/或感知設(shè)備130可以包括用于建立個(gè)體和/或設(shè)備之間的目光接觸的視覺部件50。視覺部件50可以駐留在hud系統(tǒng)110內(nèi)、hud系統(tǒng)110上和/或接近hud系統(tǒng)110?？商娲?，視覺部件可以遠(yuǎn)離相關(guān)聯(lián)的hud系統(tǒng)，并且例如經(jīng)由網(wǎng)絡(luò)12與hud系統(tǒng)通信。另外，任何數(shù)量的感知設(shè)備130可以包括視覺部件50。hud系統(tǒng)110可以呈現(xiàn)任何圖形用戶界面(例如，gui等)或其它接口(例如，控制按鈕、觸摸傳感器、視覺傳感器、加速度計(jì)、麥克風(fēng)和語音命令接口等)，以從用戶接收命令以及向用戶顯示信息。感知設(shè)備130通常缺乏集成的顯示器并且不由用戶穿戴，但是可以包括顯示器和/或由用戶穿戴。

hud系統(tǒng)110、服務(wù)器系統(tǒng)120、感知設(shè)備130和遠(yuǎn)程系統(tǒng)140可以至少包括一個(gè)處理器20、存儲(chǔ)器30和/或內(nèi)部或外部網(wǎng)絡(luò)接口或通信設(shè)備10(例如，調(diào)制解調(diào)器、網(wǎng)卡、wi-fi、無線(例如，3g、4g等)等)和任何商用的和定制的軟件(例如，用戶接口軟件、網(wǎng)絡(luò)軟件、服務(wù)器軟件等)。服務(wù)器系統(tǒng)120優(yōu)選地裝備有顯示器或監(jiān)視器以及可選的輸入設(shè)備(例如，鍵盤、鼠標(biāo)或其它輸入設(shè)備)。

hud系統(tǒng)、服務(wù)器系統(tǒng)、感知設(shè)備和/或遠(yuǎn)程系統(tǒng)可以包括用于執(zhí)行下文描述的本發(fā)明實(shí)施例的各種功能(例如，跟蹤穿戴者注視的方向、檢測(cè)來自另一個(gè)體的目光接觸、發(fā)送和接收紅外信號(hào)或其它信號(hào)等)的一個(gè)或多個(gè)模塊或單元(例如，視線模塊、分析模塊、信號(hào)模塊等)、可以通過任何數(shù)量的軟件和/或硬件模塊或單元的任何組合來實(shí)現(xiàn)、并且可以駐留在hud系統(tǒng)、服務(wù)器系統(tǒng)、感知設(shè)備、遠(yuǎn)程系統(tǒng)或其它系統(tǒng)(例如，視覺部件50)的存儲(chǔ)器30內(nèi)，以供處理器20執(zhí)行。

圖2中示出根據(jù)本發(fā)明的實(shí)施例的示例視覺部件50。特別地，視覺部件50包括分別用于向其它設(shè)備(例如，在hud系統(tǒng)或用戶的視線、視錐、視野區(qū)域或視場(chǎng)內(nèi)的設(shè)備)發(fā)送信號(hào)以及接收到其它設(shè)備的信號(hào)的發(fā)射器220和檢測(cè)器230。視覺部件50還可以包括視線跟蹤器226。發(fā)射器220可以包括可以結(jié)合視線跟蹤器226一起操作的廣域發(fā)射器222和/或聚焦發(fā)射器224。

廣域發(fā)射器222可以由常規(guī)的或其它電磁(em)發(fā)射器222(例如，紅外光源)實(shí)現(xiàn)，并且可以將em信號(hào)發(fā)射到任何區(qū)域或場(chǎng)(例如，圓錐形的、全向的等等)。聚焦發(fā)射器224可以是聚焦的、準(zhǔn)直的或其它窄的定向電磁(例如，紅外)源(例如，激光、光學(xué)準(zhǔn)直源等)。傳感器234可以由相機(jī)或者常規(guī)的光電檢測(cè)器或其它光電檢測(cè)器實(shí)現(xiàn)。檢測(cè)器230檢測(cè)(例如從另一個(gè)hud的發(fā)射器220)沖擊(impinge)到檢測(cè)器上的信號(hào)。檢測(cè)器230可以使用相機(jī)232和/或傳感器234(例如，常規(guī)的光電檢測(cè)器或其它光電檢測(cè)器)來實(shí)現(xiàn)。

根據(jù)本發(fā)明的一個(gè)實(shí)施例，包括相機(jī)232的hud系統(tǒng)110或感知設(shè)備130包括與相機(jī)一起操作的分析模塊，以檢測(cè)與系統(tǒng)或系統(tǒng)的穿戴者進(jìn)行目光接觸的個(gè)體。例如，分析模塊可以確定相機(jī)位于個(gè)體的視線、視野區(qū)域或視場(chǎng)內(nèi)?？梢允褂糜糜趶南鄼C(jī)圖像數(shù)據(jù)檢測(cè)人的視線或視野區(qū)域的常規(guī)的或其它模式識(shí)別技術(shù)來實(shí)現(xiàn)分析模塊。另外，相機(jī)232可以被用于從另一個(gè)hud系統(tǒng)110或其它感知設(shè)備130的發(fā)射器220接收信號(hào)。信號(hào)模塊接收來自相機(jī)的信號(hào)并且將該信號(hào)解碼，并且經(jīng)由發(fā)射器將信號(hào)編碼和發(fā)送信號(hào)。根據(jù)該實(shí)施例，另一個(gè)系統(tǒng)可以使用非聚焦發(fā)射器并且不必(但是可以)包括聚焦發(fā)射器或視線跟蹤器。

根據(jù)本發(fā)明的另一個(gè)實(shí)施例，hud系統(tǒng)110包括聚焦發(fā)射器224和視線跟蹤器226。視線跟蹤器226和聚焦發(fā)射器224通常被安裝在由用戶穿戴的hud上。視線跟蹤器226監(jiān)視hud的穿戴者正在看向的方向。視線模塊從視線跟蹤器226接收關(guān)于穿戴者正在看向的方向的信息，并且操縱聚焦發(fā)射器224以指向相同的方向。當(dāng)用戶看另一個(gè)hud系統(tǒng)110或另一個(gè)感知設(shè)備130時(shí)，該另一個(gè)系統(tǒng)可以(例如，經(jīng)由傳感器234)檢測(cè)來自聚焦發(fā)射器的信號(hào)，由此確定穿戴者正在看該設(shè)備。根據(jù)該實(shí)施例，該另一個(gè)系統(tǒng)不必(但是可以)包括面朝外的相機(jī)232。

視線跟蹤器226可以使用已知技術(shù)來實(shí)現(xiàn)。例如，視線跟蹤器可以包括朝向穿戴者的眼睛的一個(gè)或多個(gè)相機(jī)。視線模塊可以使用已知技術(shù)來分析相機(jī)數(shù)據(jù)，以確定穿戴者注視的方向?？商娲鼗蚋郊拥兀暰€跟蹤器226可以使用接觸鏡片來輔助確定用戶注視的方向。

圖3中示出了根據(jù)本發(fā)明的實(shí)施例的便于視線跟蹤的示例接觸鏡片。由于線由空間中的兩個(gè)點(diǎn)定義，因此可以在接觸鏡片上的兩個(gè)點(diǎn)中的每個(gè)點(diǎn)處放置一個(gè)微小的設(shè)備：例如，對(duì)準(zhǔn)設(shè)備2可以接近透鏡的內(nèi)表面的中心處放置，而對(duì)準(zhǔn)設(shè)備1可以接近透鏡的外表面的中心處放置。視線跟蹤器226檢測(cè)由這兩個(gè)點(diǎn)定義的線，并且沿著這條線瞄準(zhǔn)聚焦發(fā)射器。這些設(shè)備可以被放置在眼睛中間的盲區(qū)(盲點(diǎn))處。

圖4和圖5中示出根據(jù)本發(fā)明的實(shí)施例的兩個(gè)hud系統(tǒng)110可以交互的示例方式。一個(gè)hud系統(tǒng)110(表示為ha)由用戶a穿戴，第二個(gè)hud系統(tǒng)110(表示為hb)由用戶b穿戴。用戶a和b彼此可見，并且足夠靠近，以便使他們的hud系統(tǒng)中的每一個(gè)檢測(cè)來自另一個(gè)用戶的目光接觸。用戶a和b可以分別經(jīng)由ha和hb進(jìn)行交互。例如，用戶a可以使用ha來選擇要傳送的文件。這些文件可以例如駐留在ha本地或遠(yuǎn)程駐留(例如，駐留在服務(wù)器系統(tǒng)120上的用于用戶a的存儲(chǔ)裝置440中)。用戶b可以使用hb來查看文件，這些文件可以例如駐留在hb本地或遠(yuǎn)程駐留(例如，駐留在服務(wù)器系統(tǒng)上的用于用戶b的存儲(chǔ)裝置450中)。用戶a想要向用戶b發(fā)送文件，并且用戶b想要從用戶a接收文件。

在步驟510處，用戶a向ha(例如，通過語音或以其它方式)發(fā)送要發(fā)起交互的命令。例如，用戶a可以向ha發(fā)送要傳送所選擇的文件的命令。在步驟520處，用戶b向hb(例如，通過語音或以其它方式)發(fā)送要發(fā)起事務(wù)的命令。例如，用戶b可以向hb發(fā)送要接收文件的命令。在步驟530處，建立a和b之間的目光接觸。在建立目光接觸的過程中，ha和hb可以交換信號(hào)410，并且ha可以獲得hb的唯一標(biāo)識(shí)符。同樣，hb可以獲得ha的唯一標(biāo)識(shí)符。hud110或感知設(shè)備130的唯一標(biāo)識(shí)符可以被用來確定用于與hud或感知設(shè)備通信的地址。例如，唯一地址可以被用于查找(或可以是)ip地址或域名。

由于ha和hb已經(jīng)接收到發(fā)起交互和建立目光接觸的命令，所以在步驟540處交互被發(fā)起。一旦被發(fā)起，則交互可以以常規(guī)的或其它方式進(jìn)行。例如，ha可以使用在步驟530處獲得的hb的唯一標(biāo)識(shí)符經(jīng)由網(wǎng)絡(luò)接口設(shè)備10和網(wǎng)絡(luò)12與hb建立tcp連接或者以其它方式與hb通信。可替代地，ha和hb可以經(jīng)由發(fā)射器220和檢測(cè)器230建立網(wǎng)絡(luò)連接或以其它方式傳送進(jìn)一步的信息。在圖4中示出的示例中，ha可以向服務(wù)器系統(tǒng)120的控制器模塊430發(fā)送所選擇的文件或所選擇的文件的標(biāo)識(shí)符，控制器模塊430將文件從用戶a的存儲(chǔ)裝置440傳送到用戶b的存儲(chǔ)裝置450。hb輪詢服務(wù)器系統(tǒng)并且(例如，經(jīng)由ftp、pop/imap等)取得文件。然后用戶b可以從hudhb查看文件。

圖6中示出了根據(jù)本發(fā)明的實(shí)施例的在兩個(gè)平視顯示器(hud)系統(tǒng)的穿戴者之間建立目光接觸的示例方式。hud系統(tǒng)中的每個(gè)hud系統(tǒng)(例如，通過分析相機(jī)232的圖像主動(dòng)地或者通過接收來自聚焦發(fā)射器224的信號(hào)被動(dòng)地)執(zhí)行目光接觸檢測(cè)、接收發(fā)射的信號(hào)并且將該信號(hào)解碼以及執(zhí)行以下步驟。hud系統(tǒng)在步驟610處(例如，通過使它的發(fā)射器220閃爍)發(fā)射唯一標(biāo)識(shí)符。在步驟620處，hud系統(tǒng)(經(jīng)由發(fā)射器220)發(fā)射指示以下條件是否為真的布爾信號(hào)s：hud系統(tǒng)已經(jīng)接收到發(fā)起交互(例如，發(fā)送選擇的文件、接收文件等)的命令并且hud系統(tǒng)檢測(cè)到來自另一個(gè)hud系統(tǒng)的穿戴者的目光接觸。如果hud系統(tǒng)已經(jīng)從另一個(gè)系統(tǒng)接收到值為真的布爾信號(hào)s，則hud系統(tǒng)在步驟630處發(fā)射該另一個(gè)系統(tǒng)的唯一標(biāo)識(shí)符。在步驟640處，hud系統(tǒng)確定它是否已經(jīng)從該另一個(gè)hud系統(tǒng)接收到它自己的唯一標(biāo)識(shí)符。如果是的話，則處理前進(jìn)到步驟540(圖5)，并且hud系統(tǒng)之間的交互被發(fā)起。否則，處理返回到步驟610。

相應(yīng)地，ha經(jīng)由它的發(fā)射器220發(fā)射三個(gè)信號(hào)：(1)ha的唯一標(biāo)識(shí)符；(2)指示ha是否檢測(cè)到目光接觸以及a是否已經(jīng)給出發(fā)起對(duì)接(例如，發(fā)送文件)的命令的布爾信號(hào)；以及(3)僅當(dāng)hb發(fā)信號(hào)通知ha它對(duì)于發(fā)起對(duì)接是開放的(例如，b已經(jīng)給出接收文件的命令)時(shí)，其用戶已經(jīng)與ha建立目光接觸的hud的唯一標(biāo)識(shí)符。第三個(gè)信號(hào)通過指示信號(hào)1和2僅用于hb來防止模糊的信令，以防多個(gè)設(shè)備檢測(cè)到目光接觸。類似地，hb經(jīng)由它的發(fā)射器220發(fā)射三個(gè)信號(hào)：(1)hb的唯一標(biāo)識(shí)符；(2)指示hb是否檢測(cè)到目光接觸以及hb對(duì)于對(duì)接是否開放的布爾信號(hào)；以及(3)僅當(dāng)ha發(fā)信號(hào)通知hb它對(duì)于發(fā)起對(duì)接是開放的時(shí)，其用戶已經(jīng)與hb建立目光接觸的hud的唯一標(biāo)識(shí)符。第三個(gè)信號(hào)通過指示信號(hào)1和2僅用于hb來防止模糊的信令，以防多個(gè)設(shè)備檢測(cè)到目光接觸。當(dāng)a看b時(shí)，a穿戴的hud看到hb的唯一標(biāo)識(shí)符，并且a穿戴的hud從該唯一標(biāo)識(shí)符可以識(shí)別它可以利用其與hb對(duì)接的地址。此外，作為對(duì)接的前提條件，當(dāng)a看b時(shí)，ha必須看到hb的(指示hb既檢測(cè)到目光接觸又對(duì)于對(duì)接開放的)布爾信號(hào)被設(shè)置為“真”。一旦滿足該前提條件，ha和hb就建立直接到彼此或者到介入(intermediate)交互的一個(gè)或多個(gè)服務(wù)器的連接交互(例如，經(jīng)由網(wǎng)絡(luò)12的連接交互)。ha和hb然后可以經(jīng)由連接進(jìn)行交互。

在圖7和圖8中示出根據(jù)本發(fā)明的實(shí)施例的hud系統(tǒng)110可以與其它hud系統(tǒng)110以一對(duì)多關(guān)系交互的示例方式。一個(gè)hud系統(tǒng)110(表示為ha)由用戶a穿戴，而一個(gè)或多個(gè)其它hud系統(tǒng)110(例如，hb1、hb2、...、hbn)由對(duì)應(yīng)的其他用戶(例如，b1、b2、...、bn)穿戴。用戶a(經(jīng)由視線92)對(duì)于用戶b1-bn是可見的，并且足夠靠近，以便使hb1-hbn中的每一個(gè)檢測(cè)來自ha的信號(hào)。ha可以以一對(duì)多的方式與hb1-hbn交互。例如，用戶a可能想要將文件傳送到在視覺范圍內(nèi)穿戴hud系統(tǒng)的一大群人。用戶a可以選擇文件，并且進(jìn)入“文件廣播”模式，以將文件傳送到與ha進(jìn)行目光接觸的所有人。

特別地，在步驟810處，用戶a(例如，通過語音或以其它方式)向ha發(fā)送要以廣播模式發(fā)起交互的命令。在步驟820處，每個(gè)用戶b1-bn(例如，通過語音或以其它方式)向他或她的hud系統(tǒng)發(fā)送要發(fā)起作為廣播接收器的事務(wù)的命令。在步驟830處，在ha和hb1-hbn中的每一個(gè)之間建立目光接觸。例如，可以以參考圖6描述的方式在用戶a和用戶b1-bn中的每個(gè)用戶之間建立目光接觸?？商娲?，ha可以響應(yīng)于來自ha的命令(例如，經(jīng)由非聚焦發(fā)射器222)發(fā)射ha的唯一標(biāo)識(shí)符和指示ha的廣播模式的信號(hào)；然后通過hb1-hbn檢測(cè)到來自ha的唯一標(biāo)識(shí)符和信號(hào)來建立目光接觸。

作為ha和hb1-hbn接收命令并且建立目光接觸的結(jié)果，在步驟840處交互被發(fā)起。一旦被發(fā)起，則交互可以以常規(guī)的或其它方式進(jìn)行。例如，ha可以(例如，經(jīng)由網(wǎng)絡(luò)12)向服務(wù)器發(fā)送文件或其它數(shù)據(jù)，并且hb1-hbn可以使用在步驟830處獲得的ha的唯一標(biāo)識(shí)符(例如，經(jīng)由網(wǎng)絡(luò)12)請(qǐng)求來自服務(wù)器的文件或其它數(shù)據(jù)。

圖9中示出根據(jù)本發(fā)明的實(shí)施例的hud系統(tǒng)110可以使用中間感知設(shè)備130進(jìn)行交互的示例方式。一個(gè)hud系統(tǒng)110(表示為ha)由用戶a穿戴，并且第二個(gè)hud系統(tǒng)110(表示為hb)由用戶b穿戴。感知設(shè)備130(設(shè)備d)對(duì)于兩個(gè)用戶都是可見的，并且足夠靠近，以便使設(shè)備d檢測(cè)來自用戶的目光接觸。用戶a和b不必彼此可見。用戶a和b可以使用目光接觸與設(shè)備d交互(例如，傳送文件)。交互可以以其它方式進(jìn)行，例如，以與參考圖5描述的方式類似的方式進(jìn)行。

在hud用戶使用中間感知設(shè)備進(jìn)行交互的另一個(gè)示例場(chǎng)景中，hud用戶可以具有關(guān)于設(shè)備d的兩個(gè)權(quán)限：只讀關(guān)系和讀寫關(guān)系。設(shè)備d可以在任何給定的時(shí)間與一個(gè)并且僅一個(gè)文件相關(guān)聯(lián)。如果用戶a具有對(duì)于設(shè)備d的讀寫權(quán)限并且想要將文件發(fā)送到一個(gè)或多個(gè)其他hud用戶(例如，一大群人)，則用戶a可以與設(shè)備d進(jìn)行目光接觸，以將文件發(fā)送到設(shè)備d。具有對(duì)于設(shè)備d的讀或讀寫權(quán)限的其他hud用戶可以看設(shè)備d，以下載文件，而不必與ha進(jìn)行目光接觸，ha可能沒有必需的硬件或軟件來處理大量同時(shí)傳入和傳出的連接。

圖10中示出了根據(jù)本發(fā)明的實(shí)施例的hud系統(tǒng)110可以使用多個(gè)中間感知設(shè)備130進(jìn)行交互的示例方式。一個(gè)hud系統(tǒng)110(表示為ha)由用戶a穿戴，并且第二個(gè)hud系統(tǒng)110(表示為hb)由用戶b穿戴。感知設(shè)備(ca)對(duì)于用戶b是可見的，并且足夠靠近，以便使ca檢測(cè)來自用戶b的目光接觸。感知設(shè)備(cb)對(duì)于用戶a是可見的，并且足夠接近，以便使cb檢測(cè)來自用戶a的目光接觸。ca具有到ha的(例如，經(jīng)由網(wǎng)絡(luò)12的)連接，而cb具有到hb的(例如，經(jīng)由網(wǎng)絡(luò)12的)連接。用戶a和b不必彼此可見并且可以遠(yuǎn)離彼此。用戶a和b可以以與參考圖5描述的方式類似的方式使用目光接觸分別與cb和ca進(jìn)行交互(例如，傳送文件)。例如，用戶a可以使用ha來(例如，在本地存儲(chǔ)裝置上、在服務(wù)器上等)選擇要傳送的文件并且(例如，通過語音、觸摸、手勢(shì)等)向ha發(fā)送向用戶b傳送文件的命令。用戶b(例如，通過語音、觸摸、手勢(shì)等)向hb發(fā)送接收來自a的文件的命令。響應(yīng)于cb檢測(cè)到與a的目光接觸同時(shí)ca檢測(cè)到與b的目光接觸，可以(例如，經(jīng)由網(wǎng)絡(luò)12)創(chuàng)建ha和hb之間的直接或間接連接，通過該連接，ha將文件發(fā)送到hb。根據(jù)本發(fā)明的一個(gè)實(shí)施例，ca或cb可以例如被實(shí)現(xiàn)為筆記本上的網(wǎng)絡(luò)攝像頭。

圖11中示出根據(jù)本發(fā)明的實(shí)施例的hud系統(tǒng)110可以使用目光接觸與設(shè)備(例如，感知設(shè)備130)進(jìn)行交互的示例方式。當(dāng)hud系統(tǒng)用戶與設(shè)備的檢測(cè)器220進(jìn)行目光接觸時(shí)，在用戶的hud系統(tǒng)上顯示用于設(shè)備的界面1100。作為示例，考慮進(jìn)入裝滿發(fā)電機(jī)的房間并且需要找到發(fā)電機(jī)中的哪個(gè)發(fā)電機(jī)損壞的穿戴hud系統(tǒng)110的技術(shù)人員。感知設(shè)備130駐留在每個(gè)發(fā)電機(jī)上。感知設(shè)備130的檢測(cè)器230在物體(例如，發(fā)電機(jī))上的位置可以按照慣例(例如“傳感器總是在物體的右上角”)建立，或者該位置可以由物體上的標(biāo)記(例如，示出傳感器的位置的靶心(bullseye))來指示，以使得hud系統(tǒng)用戶可以確定為了與設(shè)備進(jìn)行交互要看哪里。當(dāng)技術(shù)人員與每個(gè)發(fā)電機(jī)上的適當(dāng)位置進(jìn)行目光接觸時(shí)，技術(shù)人員的hud上的彈出界面1100顯示發(fā)電機(jī)的狀態(tài)，例如，它發(fā)多少電。相應(yīng)地，hud向技術(shù)人員提供哪個(gè)發(fā)電機(jī)損壞的指示。

另外，具有感知設(shè)備130的非hud設(shè)備可以向看感知設(shè)備的hud的穿戴者提供交互式界面。例如，當(dāng)hud的穿戴者沿著街道行走時(shí)，可以用hud上的小圖標(biāo)來指示或標(biāo)記可以經(jīng)由目光接觸進(jìn)行交互的設(shè)備。如果穿戴者直接看這些圖標(biāo)(即，直接看設(shè)備)，則圖標(biāo)可以例如擴(kuò)大并且顯示關(guān)于設(shè)備的信息、以及為了與設(shè)備交互人們可以采取的動(dòng)作。例如，這樣的設(shè)備可以被放置在餐廳的外立面上?？梢栽谟脩舻膆ud中用微小的圖標(biāo)標(biāo)記該設(shè)備。如果hud穿戴者(例如，通過直接看界面中的圖標(biāo))與該設(shè)備進(jìn)行目光接觸，則該圖標(biāo)可以擴(kuò)大并且向hud穿戴者示出信息(例如，餐廳有多少空位、等待時(shí)間是多久、菜單等)。hud穿戴者可以利用該設(shè)備執(zhí)行動(dòng)作(例如，從該餐廳界面下訂單或者進(jìn)行預(yù)約)。

圖12和圖13中示出了根據(jù)本發(fā)明的實(shí)施例的使用基于相機(jī)的目光接觸在平視顯示系統(tǒng)110和感知設(shè)備130(設(shè)備d)之間建立目光接觸的示例方式。hud系統(tǒng)包括相機(jī)232，而設(shè)備d包括相機(jī)232和分析模塊，該分析模塊與相機(jī)一起操作，以檢測(cè)與設(shè)備d的相機(jī)232進(jìn)行目光接觸的個(gè)體。設(shè)備d通過分析相機(jī)232的圖像來執(zhí)行目光接觸檢測(cè)。hud系統(tǒng)和設(shè)備d各自接收和解碼來自另一方的發(fā)射器220的信號(hào)。

hud系統(tǒng)執(zhí)行以下步驟。在步驟1210處，hud系統(tǒng)(例如，通過使它的發(fā)射器220閃爍)發(fā)射唯一標(biāo)識(shí)符。在步驟1220處，hud系統(tǒng)(經(jīng)由發(fā)射器220)發(fā)射布爾信號(hào)s，該布爾信號(hào)s指示hud系統(tǒng)是否已經(jīng)接收到發(fā)起交互(例如，發(fā)送所選擇的文件、接收文件等)的命令。如果hud系統(tǒng)已經(jīng)從設(shè)備d接收到指示設(shè)備d對(duì)于對(duì)接開放的布爾信號(hào)s，則hud系統(tǒng)在步驟1230處發(fā)射設(shè)備d的唯一標(biāo)識(shí)符。在步驟1240處，hud系統(tǒng)確定它是否已經(jīng)從設(shè)備d系統(tǒng)接收到hud系統(tǒng)自己的唯一標(biāo)識(shí)符。如果是的話，則hud系統(tǒng)在步驟1250處使用設(shè)備d的唯一標(biāo)識(shí)符(例如，通過經(jīng)由網(wǎng)絡(luò)12建立到設(shè)備d的tcp連接并且向設(shè)備d發(fā)送文件)來發(fā)起交互。否則，hud系統(tǒng)返回到步驟1210。

設(shè)備d執(zhí)行以下步驟。在步驟1310處，設(shè)備d(例如，通過使它的發(fā)射器220閃爍)發(fā)射唯一標(biāo)識(shí)符。在步驟1320處，設(shè)備d(經(jīng)由發(fā)射器220)發(fā)射布爾信號(hào)s，該布爾信號(hào)s指示以下條件是否為真：設(shè)備d檢測(cè)到來自hud系統(tǒng)用戶的目光接觸，并且設(shè)備d對(duì)于對(duì)接是開放的。如果設(shè)備d已經(jīng)從hud系統(tǒng)接收到指示hud系統(tǒng)已經(jīng)接收到發(fā)起交互的命令的布爾信號(hào)s，則在步驟1330處設(shè)備d發(fā)射hud系統(tǒng)的唯一標(biāo)識(shí)符。在步驟1340處，設(shè)備d確定它是否已經(jīng)從hud系統(tǒng)接收到設(shè)備d自己的唯一標(biāo)識(shí)符。如果是的話，則在步驟1350處設(shè)備d使用hud系統(tǒng)的唯一標(biāo)識(shí)符(例如，通過經(jīng)由網(wǎng)絡(luò)12建立到hud的tcp連接并且接收文件)來發(fā)起交互。否則，設(shè)備d返回到步驟1310。

根據(jù)本發(fā)明的替代實(shí)施例，平視顯示系統(tǒng)110包括聚焦發(fā)射器224和視線跟蹤器226，并且以如下方式與感知設(shè)備130(設(shè)備d)交互。視線跟蹤器226跟蹤hud系統(tǒng)的穿戴者的眼睛移動(dòng)，并且將聚焦發(fā)射器指引為指向穿戴者看的方向。設(shè)備d的檢測(cè)器230(例如，傳感器234)接收來自hud系統(tǒng)的聚焦發(fā)射器的信號(hào)。hud系統(tǒng)和設(shè)備d各自接收并且解碼來自另一方的發(fā)射器的信號(hào)。為了在hud系統(tǒng)和設(shè)備d之間建立目光接觸，hud系統(tǒng)經(jīng)由聚焦發(fā)射器發(fā)射兩個(gè)信號(hào)：(1)hud的唯一標(biāo)識(shí)符，和(2)指示hud系統(tǒng)是否已經(jīng)接收到發(fā)起交互的命令的布爾信號(hào)。當(dāng)hud系統(tǒng)的穿戴者看設(shè)備d時(shí)，設(shè)備d接收來自hud系統(tǒng)的聚焦發(fā)射器的信號(hào)。設(shè)備d從這些信號(hào)確定hud系統(tǒng)的唯一標(biāo)識(shí)符，并且如果設(shè)備d對(duì)于交互是開放的，則設(shè)備d使用hud系統(tǒng)的唯一標(biāo)識(shí)符(例如，通過經(jīng)由網(wǎng)絡(luò)12建立到hud系統(tǒng)的tcp連接并且接收文件)來發(fā)起交互。

根據(jù)本發(fā)明的另一個(gè)實(shí)施例，包括感知設(shè)備130或其它設(shè)備(例如，遠(yuǎn)程系統(tǒng)140)的設(shè)備可以經(jīng)由hud系統(tǒng)110向用戶呈現(xiàn)界面。例如，hud系統(tǒng)110的穿戴者可以與不在手上的設(shè)備(例如，遠(yuǎn)程的、不可接近的、在某人的背包中的、在另一個(gè)房間中的設(shè)備等)(例如，平板、筆記本等)進(jìn)行交互。該設(shè)備具有與它相關(guān)聯(lián)的用戶界面(ui)，諸如在設(shè)備的屏幕上顯示的ui或存儲(chǔ)在hud系統(tǒng)中的ui。hud穿戴者可以在hud上顯示設(shè)備的ui，以使用hud系統(tǒng)和設(shè)備之間的數(shù)據(jù)連接(例如，經(jīng)網(wǎng)絡(luò)12的tcp連接)經(jīng)由該ui來控制設(shè)備。連接可以經(jīng)由設(shè)備和可穿戴hud系統(tǒng)之間的目光接觸來建立或以其它方式建立。

根據(jù)一個(gè)實(shí)施例，如可穿戴hud中示出的ui可以是如在設(shè)備的常規(guī)顯示器上出現(xiàn)的ui的接近的或精確的副本?？商娲兀瑄i可以在設(shè)備和hud之間被翻譯或修改，以更好地適應(yīng)可穿戴hud的ui。

經(jīng)由hud(hud可能不需要手或者需要極少的手的使用來操作)提供到其它設(shè)備的用戶界面使得能夠在手上拿著另一個(gè)設(shè)備不方便、困難或不可能的情況下更容易地控制該設(shè)備。經(jīng)由hud控制諸如筆記本之類的設(shè)備在一些情況下可能比使用鼠標(biāo)和鍵盤的效率更低，但是如果設(shè)備遠(yuǎn)離或者以其它方式難以或不可能直接訪問(例如，當(dāng)站在擁擠的地鐵列車中時(shí)、當(dāng)走路時(shí)等等)則可能更方便。

可以經(jīng)由hud系統(tǒng)110提供用戶界面的設(shè)備可以包括具有屏幕的設(shè)備(諸如智能電話、筆記本等)和沒有屏幕的設(shè)備。沒有屏幕的設(shè)備可以向連接到該設(shè)備的hud系統(tǒng)顯示特定于hud的ui。例如，對(duì)于無頭(headless)設(shè)備，hud系統(tǒng)可以定義用于與該設(shè)備交互的ui。

對(duì)于提供可以經(jīng)由包括視線跟蹤器226的hud系統(tǒng)呈現(xiàn)給用戶的點(diǎn)擊或觸摸界面(例如，臺(tái)式機(jī)/筆記本電腦界面、觸摸板/智能手機(jī)界面等)的設(shè)備，hud用戶可以使用他或她的眼睛來指引該設(shè)備的ui的光標(biāo)并且使用例如語音命令經(jīng)由光標(biāo)執(zhí)行動(dòng)作(例如，左/右點(diǎn)擊、“輕擊”(即，模擬與觸摸屏進(jìn)行接觸的手指)等)。以這種方式，hud界面允許比單獨(dú)使用語音或其它命令更精細(xì)地控制設(shè)備。

將理解的是，上文描述并且在附圖中示出的實(shí)施例僅僅是實(shí)現(xiàn)用于使用目光接觸經(jīng)由平視顯示器(hud)與設(shè)備交互的實(shí)施例的許多方式中的一些方式。

本發(fā)明實(shí)施例的環(huán)境可以包括以任何期望方式布置的任何數(shù)量的計(jì)算機(jī)或其它處理系統(tǒng)(例如，客戶端或終端用戶系統(tǒng)、服務(wù)器系統(tǒng)等)和存儲(chǔ)系統(tǒng)(例如，文件系統(tǒng)、數(shù)據(jù)庫(kù)或其它儲(chǔ)存庫(kù))，其中本發(fā)明實(shí)施例可以被應(yīng)用到任何期望類型的計(jì)算環(huán)境(例如，云計(jì)算、客戶端-服務(wù)器、網(wǎng)絡(luò)計(jì)算、大型機(jī)、獨(dú)立系統(tǒng)等)。本發(fā)明實(shí)施例采用的計(jì)算機(jī)或其它處理系統(tǒng)可以由任何數(shù)量的任何個(gè)人或其它類型的計(jì)算機(jī)或處理系統(tǒng)(例如，臺(tái)式機(jī)、筆記本、pda、移動(dòng)設(shè)備等)來實(shí)現(xiàn)，并且可以包括任何商用的操作系統(tǒng)以及商用和定制軟件(例如，數(shù)據(jù)庫(kù)軟件、通信軟件等)的任何組合。這些系統(tǒng)可以包括用于輸入和/或查看信息的任何類型的監(jiān)視器和輸入設(shè)備(例如，鍵盤、鼠標(biāo)、語音識(shí)別、觸摸屏等)。

要理解的是，本發(fā)明實(shí)施例的軟件可以用任何期望的計(jì)算機(jī)語言來實(shí)現(xiàn)，并且可以由計(jì)算機(jī)領(lǐng)域的普通技術(shù)人員基于本說明書中包含的功能描述和附圖中所示的流程圖來開發(fā)。此外，本文對(duì)執(zhí)行各種功能的軟件的任何引用一般是指在軟件控制下執(zhí)行這些功能的計(jì)算機(jī)系統(tǒng)或處理器。本發(fā)明實(shí)施例的計(jì)算機(jī)系統(tǒng)可以可替代地由任何類型的硬件和/或其它處理電路系統(tǒng)來實(shí)現(xiàn)。

計(jì)算機(jī)或其它處理系統(tǒng)的各種功能可以以任何方式在任何數(shù)量的軟件和/或硬件模塊或單元、處理系統(tǒng)或計(jì)算機(jī)系統(tǒng)和/或電路系統(tǒng)之間分布，其中計(jì)算機(jī)或處理系統(tǒng)可以彼此本地或遠(yuǎn)程布置并且可以經(jīng)由任何合適的通信介質(zhì)(例如，lan、wan、內(nèi)聯(lián)網(wǎng)、因特網(wǎng)、硬連線、調(diào)制解調(diào)器連接、無線等)進(jìn)行通信。例如，本發(fā)明實(shí)施例的功能可以以任何方式在各種終端用戶/客戶端和服務(wù)器系統(tǒng)和/或任何其它中間處理設(shè)備之間分布。上文描述并且在流程圖中示出的軟件和/或算法可以以實(shí)現(xiàn)本文描述的功能的任何方式被修改。另外，流程圖或描述中的功能可以以實(shí)現(xiàn)期望操作的任何次序執(zhí)行。

本發(fā)明實(shí)施例的軟件可以在固定或便攜式程序產(chǎn)品裝置或設(shè)備的非暫態(tài)計(jì)算機(jī)可用介質(zhì)(例如，磁介質(zhì)或光介質(zhì)、磁-光介質(zhì)、軟盤、cd-rom、dvd、存儲(chǔ)器設(shè)備等)上可用，以用于與獨(dú)立系統(tǒng)或通過網(wǎng)絡(luò)或其它通信介質(zhì)連接的系統(tǒng)一起使用。

通信網(wǎng)絡(luò)可以由任何數(shù)量的任何類型的通信網(wǎng)絡(luò)(例如，lan、wan、因特網(wǎng)、內(nèi)聯(lián)網(wǎng)、vpn等)來實(shí)現(xiàn)。本發(fā)明實(shí)施例的計(jì)算機(jī)或其它處理系統(tǒng)可以包括經(jīng)由任何常規(guī)協(xié)議或其它協(xié)議經(jīng)網(wǎng)絡(luò)通信的任何常規(guī)通信設(shè)備或其它通信設(shè)備。計(jì)算機(jī)或其它處理系統(tǒng)可以利用任何類型的連接(例如，有線連接、無線連接等)來訪問網(wǎng)絡(luò)。本地通信介質(zhì)可以由任何合適的通信介質(zhì)(例如，局域網(wǎng)(lan)、硬連線、無線鏈路、內(nèi)聯(lián)網(wǎng)等)來實(shí)現(xiàn)。

系統(tǒng)可以采用任何數(shù)量的任何常規(guī)的或其它數(shù)據(jù)庫(kù)、數(shù)據(jù)存儲(chǔ)庫(kù)或存儲(chǔ)結(jié)構(gòu)(例如，文件、數(shù)據(jù)庫(kù)、數(shù)據(jù)結(jié)構(gòu)、數(shù)據(jù)或其它儲(chǔ)存庫(kù)等)來存儲(chǔ)信息。數(shù)據(jù)庫(kù)系統(tǒng)可以由任何數(shù)量的任何常規(guī)的或其它數(shù)據(jù)庫(kù)、數(shù)據(jù)存儲(chǔ)庫(kù)或存儲(chǔ)結(jié)構(gòu)(例如，文件、數(shù)據(jù)庫(kù)、數(shù)據(jù)結(jié)構(gòu)、數(shù)據(jù)或其它儲(chǔ)存庫(kù)等)來實(shí)現(xiàn)，以存儲(chǔ)信息。數(shù)據(jù)庫(kù)系統(tǒng)可以被包括在服務(wù)器和/或客戶端系統(tǒng)內(nèi)或者被耦接到服務(wù)器和/或客戶端系統(tǒng)。數(shù)據(jù)庫(kù)系統(tǒng)和/或存儲(chǔ)結(jié)構(gòu)可以遠(yuǎn)離計(jì)算機(jī)或其它處理系統(tǒng)或者在計(jì)算機(jī)或其它處理系統(tǒng)本地，并且可以存儲(chǔ)任何期望的數(shù)據(jù)。

本發(fā)明實(shí)施例可以采用任何數(shù)量的任何類型的用戶界面(例如，圖形用戶界面(gui)、命令行、提示等)來獲得或提供信息，其中該界面可以包括以任何方式布置的任何信息。界面可以包括布置在任何位置的任何數(shù)量的任何類型的輸入機(jī)構(gòu)或致動(dòng)機(jī)構(gòu)(例如，按鈕、圖標(biāo)、字段、框、鏈接等)，以經(jīng)由任何合適的輸入設(shè)備(例如，鼠標(biāo)、鍵盤等)輸入/顯示信息以及發(fā)起期望的動(dòng)作。界面屏幕可以包括以任何方式在屏幕之間導(dǎo)航的任何合適的致動(dòng)器(例如，鏈接、選項(xiàng)卡等)。

本文使用的術(shù)語僅出于描述特定實(shí)施例的目的，并且不旨在限制本發(fā)明。如本文所使用的，單數(shù)形式“一”、“一個(gè)”和“該”也旨在包括復(fù)數(shù)形式，除非上下文另有明確指示。還將理解的是，當(dāng)在本說明書中使用時(shí)，術(shù)語“包括(comprise、comprising)”、“包含(includes、including)”、“具有(has、have、having)”、“帶有(with)”等指定所述特征、整數(shù)、步驟、操作、元素和/或部件的存在，但不排除一個(gè)或多個(gè)其它特征、整數(shù)、步驟、操作、元素、部件和/或其組的存在或添加。

以下權(quán)利要求書中的所有裝置或步驟加上功能元素的對(duì)應(yīng)結(jié)構(gòu)、材料、動(dòng)作和等價(jià)物旨在包括用于與具體要求保護(hù)的其它要求保護(hù)的元件結(jié)合執(zhí)行功能的任何結(jié)構(gòu)、材料或動(dòng)作。本發(fā)明的描述為了說明和描述的目的而給出，但并不旨在是詳盡的或者以所公開的形式限制本發(fā)明。在不背離本發(fā)明的范圍和精神的情況下，許多修改和變化對(duì)于本領(lǐng)域普通技術(shù)人員將是明顯的。選擇和描述實(shí)施例以便于最佳地解釋本發(fā)明的原理和實(shí)際應(yīng)用，并且使得本領(lǐng)域其他普通技術(shù)人員能夠?qū)τ诰哂羞m于預(yù)期的特定使用的各種修改的各種實(shí)施例來理解本發(fā)明。

本發(fā)明的各種實(shí)施例的描述出于說明的目的而給出，但是并不旨在是詳盡的或限于所公開的實(shí)施例。在不背離所描述的實(shí)施例的范圍的情況下，許多修改和變化對(duì)于本領(lǐng)域普通技術(shù)人員將是明顯的。選擇本文使用的術(shù)語以便于最佳地解釋實(shí)施例的原理、市場(chǎng)中發(fā)現(xiàn)的實(shí)際應(yīng)用或者對(duì)技術(shù)的技術(shù)改進(jìn)或者使得本領(lǐng)域普通技術(shù)人員能夠理解本文公開的實(shí)施例。

本發(fā)明可以是系統(tǒng)、方法和/或計(jì)算機(jī)程序產(chǎn)品。計(jì)算機(jī)程序產(chǎn)品可以包括計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上載有用于使處理器實(shí)現(xiàn)本發(fā)明的各個(gè)方面的計(jì)算機(jī)可讀程序指令。

計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)可以是可以保持和存儲(chǔ)由指令執(zhí)行設(shè)備使用的指令的有形設(shè)備。計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)例如可以是――但不限于――電存儲(chǔ)設(shè)備、磁存儲(chǔ)設(shè)備、光存儲(chǔ)設(shè)備、電磁存儲(chǔ)設(shè)備、半導(dǎo)體存儲(chǔ)設(shè)備或者上述的任意合適的組合。計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)的更具體的例子(非窮舉的列表)包括以下項(xiàng)：便攜式計(jì)算機(jī)盤、硬盤、隨機(jī)存取存儲(chǔ)器(ram)、只讀存儲(chǔ)器(rom)、可擦式可編程只讀存儲(chǔ)器(eprom或閃存)、靜態(tài)隨機(jī)存取存儲(chǔ)器(sram)、便攜式緊湊盤只讀存儲(chǔ)器(cd-rom)、數(shù)字多功能盤(dvd)、記憶棒、軟盤、機(jī)械編碼設(shè)備、諸如其上記錄有指令的打孔卡或凹槽內(nèi)凸起結(jié)構(gòu)、以及上述的任意合適的組合。這里所使用的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)不被解釋為瞬時(shí)信號(hào)本身，諸如無線電波或者其他自由傳播的電磁波、通過波導(dǎo)或其他傳輸媒介傳播的電磁波(例如，通過光纖電纜的光脈沖)、或者通過電線傳輸?shù)碾娦盘?hào)。

這里所描述的計(jì)算機(jī)可讀程序指令可以從計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)下載到各個(gè)計(jì)算/處理設(shè)備，或者通過網(wǎng)絡(luò)、例如因特網(wǎng)、局域網(wǎng)、廣域網(wǎng)和/或無線網(wǎng)下載到外部計(jì)算機(jī)或外部存儲(chǔ)設(shè)備。網(wǎng)絡(luò)可以包括銅傳輸電纜、光纖傳輸、無線傳輸、路由器、防火墻、交換機(jī)、網(wǎng)關(guān)計(jì)算機(jī)和/或邊緣服務(wù)器。每個(gè)計(jì)算/處理設(shè)備中的網(wǎng)絡(luò)適配卡或者網(wǎng)絡(luò)接口從網(wǎng)絡(luò)接收計(jì)算機(jī)可讀程序指令，并轉(zhuǎn)發(fā)該計(jì)算機(jī)可讀程序指令，以供存儲(chǔ)在各個(gè)計(jì)算/處理設(shè)備中的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中。

用于執(zhí)行本發(fā)明操作的計(jì)算機(jī)程序指令可以是匯編指令、指令集架構(gòu)(isa)指令、機(jī)器指令、機(jī)器相關(guān)指令、微代碼、固件指令、狀態(tài)設(shè)置數(shù)據(jù)、或者以一種或多種編程語言的任意組合編寫的源代碼或目標(biāo)代碼，所述編程語言包括面向?qū)ο蟮木幊陶Z言—諸如smalltalk、c++等，以及常規(guī)的過程式編程語言—諸如“c”語言或類似的編程語言。計(jì)算機(jī)可讀程序指令可以完全地在用戶計(jì)算機(jī)上執(zhí)行、部分地在用戶計(jì)算機(jī)上執(zhí)行、作為一個(gè)獨(dú)立的軟件包執(zhí)行、部分在用戶計(jì)算機(jī)上部分在遠(yuǎn)程計(jì)算機(jī)上執(zhí)行、或者完全在遠(yuǎn)程計(jì)算機(jī)或服務(wù)器上執(zhí)行。在涉及遠(yuǎn)程計(jì)算機(jī)的情形中，遠(yuǎn)程計(jì)算機(jī)可以通過任意種類的網(wǎng)絡(luò)—包括局域網(wǎng)(lan)或廣域網(wǎng)(wan)—連接到用戶計(jì)算機(jī)，或者，可以連接到外部計(jì)算機(jī)(例如利用因特網(wǎng)服務(wù)提供商來通過因特網(wǎng)連接)。在一些實(shí)施例中，通過利用計(jì)算機(jī)可讀程序指令的狀態(tài)信息來個(gè)性化定制電子電路，包括例如可編程邏輯電路、現(xiàn)場(chǎng)可編程門陣列(fpga)或可編程邏輯陣列(pla)，該電子電路可以執(zhí)行計(jì)算機(jī)可讀程序指令，從而實(shí)現(xiàn)本發(fā)明的各個(gè)方面。

這里參照根據(jù)本發(fā)明實(shí)施例的方法、裝置(系統(tǒng))和計(jì)算機(jī)程序產(chǎn)品的流程圖和/或框圖描述了本發(fā)明的各個(gè)方面。應(yīng)當(dāng)理解，流程圖和/或框圖的每個(gè)方框以及流程圖和/或框圖中各方框的組合，都可以由計(jì)算機(jī)可讀程序指令實(shí)現(xiàn)。

這些計(jì)算機(jī)可讀程序指令可以提供給通用計(jì)算機(jī)、專用計(jì)算機(jī)或其它可編程數(shù)據(jù)處理裝置的處理器，從而生產(chǎn)出一種機(jī)器，使得這些指令在通過計(jì)算機(jī)或其它可編程數(shù)據(jù)處理裝置的處理器執(zhí)行時(shí)，產(chǎn)生了實(shí)現(xiàn)流程圖和/或框圖中的一個(gè)或多個(gè)方框中規(guī)定的功能/動(dòng)作的裝置。也可以把這些計(jì)算機(jī)可讀程序指令存儲(chǔ)在計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中，這些指令使得計(jì)算機(jī)、可編程數(shù)據(jù)處理裝置和/或其他設(shè)備以特定方式工作，從而，其中存儲(chǔ)有指令的計(jì)算機(jī)可讀介質(zhì)則包括一個(gè)制造品，其包括實(shí)現(xiàn)流程圖和/或框圖中的一個(gè)或多個(gè)方框中規(guī)定的功能/動(dòng)作的各個(gè)方面的指令。

也可以把計(jì)算機(jī)可讀程序指令加載到計(jì)算機(jī)、其它可編程數(shù)據(jù)處理裝置、或其它設(shè)備上，使得在計(jì)算機(jī)、其它可編程數(shù)據(jù)處理裝置或其它設(shè)備上執(zhí)行一系列操作步驟，以產(chǎn)生計(jì)算機(jī)實(shí)現(xiàn)的過程，從而使得在計(jì)算機(jī)、其它可編程數(shù)據(jù)處理裝置、或其它設(shè)備上執(zhí)行的指令實(shí)現(xiàn)流程圖和/或框圖中的一個(gè)或多個(gè)方框中規(guī)定的功能/動(dòng)作。

附圖中的流程圖和框圖顯示了根據(jù)本發(fā)明的多個(gè)實(shí)施例的系統(tǒng)、方法和計(jì)算機(jī)程序產(chǎn)品的可能實(shí)現(xiàn)的體系架構(gòu)、功能和操作。在這點(diǎn)上，流程圖或框圖中的每個(gè)方框可以代表一個(gè)模塊、程序段或指令的一部分，所述模塊、程序段或指令的一部分包含一個(gè)或多個(gè)用于實(shí)現(xiàn)規(guī)定的邏輯功能的可執(zhí)行指令。在有些作為替換的實(shí)現(xiàn)中，方框中所標(biāo)注的功能也可以以不同于附圖中所標(biāo)注的順序發(fā)生。例如，兩個(gè)連續(xù)示出的方框?qū)嶋H上可以基本并行地執(zhí)行，它們有時(shí)也可以按相反的順序執(zhí)行，這依所涉及的功能而定。也要注意的是，框圖和/或流程圖中的每個(gè)方框、以及框圖和/或流程圖中的方框的組合，可以用執(zhí)行規(guī)定的功能或動(dòng)作或者實(shí)現(xiàn)專用硬件與計(jì)算機(jī)指令的組合的專用的基于硬件的系統(tǒng)來實(shí)現(xiàn)。