頭戴式顯示器及其控制方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及頭戴式顯示器(HMD)及其控制方法相關(guān)的系統(tǒng)，并且更具體地，涉及能夠檢測具有在其中存儲的票的外部裝置并且將與存儲的票相關(guān)的增強現(xiàn)實信息顯示在與攜帶外部裝置的個人接近的地點(locat1n)中以便檢查票的HMD及其控制方法。
【背景技術(shù)】
[0002]隨著數(shù)字裝置正變得更加輕重量和更加尺寸小巧，便攜式裝置的應(yīng)用和使用范圍正在增加。因此，用戶可以使用他的(或她的)便攜式裝置，以便能夠更容易地執(zhí)行無論他(或她)希望在何時和何地想要的操作。例如，用戶可以在沒有任何時間和空間上的限制的情況下通過使用他的(或她的)便攜式裝置來使用票務(wù)(ticketing)服務(wù)。另外，由于可以通過在用戶的便攜式裝置中安裝的應(yīng)用來發(fā)放所購買的票，因此用戶不需要攜帶實際的西χΚ ο
[0003]然而，當(dāng)用戶力圖通過使用他的(或她的)發(fā)放的票進入音樂廳或劇院時，用戶需要向檢票務(wù)代理(agent)(或票務(wù)代理)出示他的(或她的)票。因此，用戶需要經(jīng)歷必須從他的(或她的)口袋或包中拿出他的(或她的)便攜式裝置并且向票務(wù)代理親自地出示購買的數(shù)字票的不便。

【發(fā)明內(nèi)容】

[0004]技術(shù)問題
[0005]因此，本公開涉及基本上消除由于相關(guān)技術(shù)的局限性和缺點導(dǎo)致的一個或更多個問題的HMD及其控制方法。
[0006]本公開的一個目的在于提供一種能夠允許票務(wù)代理在不需要用戶出示購買的票的情況下檢查票的檢票系統(tǒng)。
[0007]本公開的另一目的在于提供一種能夠檢測具有在其中存儲的票的外部裝置并且將與存儲的票相關(guān)的增強現(xiàn)實信息顯示在與攜帶外部裝置的人接近的地點中的HMD及其控制方法。
[0008]本公開的又一目的在于提供一種基于與票相關(guān)的識別信息而不是基于地點或圖像而產(chǎn)生的增強現(xiàn)實信息。
[0009]本發(fā)明的又一目的在于提供一種能夠在人處在與HMD接近的位置時準(zhǔn)確地識別攜帶存儲票的便攜式裝置的人的HMD及其控制方法。
[0010]本公開的另外的優(yōu)點、目的和特征將部分地在隨后的描述中進行闡述并且部分地將對于本領(lǐng)域普通技術(shù)人員在查看以下內(nèi)容時而變得顯而易見，或者可以從本公開的實踐而得知?？梢酝ㄟ^在所撰寫的說明書及其權(quán)利要求以及附圖中具體指出的結(jié)構(gòu)來實現(xiàn)和獲得本公開的這些目的和其它優(yōu)點。
[0011]問題的解決方案
[0012]為了實現(xiàn)這些目的和其它優(yōu)點并且根據(jù)本公開的目的，如本文中實現(xiàn)并且廣泛地描述的，一種HMD包括:相機單元，其被配置為拍攝(capture)所述HMD的周圍區(qū)域的圖像；顯示單元，其被配置為顯示與所拍攝的圖像關(guān)聯(lián)的增強現(xiàn)實信息；通信單元，其被配置為向外部裝置發(fā)送數(shù)據(jù)以及從外部裝置接收數(shù)據(jù)；傳感器單元，其被配置為感測所述HMD的位置，并且將所感測的結(jié)果傳送給處理器；以及所述處理器，其被配置為控制所述相機單元、所述顯示單元、所述通信單元和所述傳感器單元。本文中，所述處理器可以向外部裝置請求票信息，可以根據(jù)所述請求從所述外部裝置接收包括所述票信息的響應(yīng)，可以獲取與所述票信息關(guān)聯(lián)的所述增強現(xiàn)實信息，可以檢測所拍攝的圖像中的、與所述外部裝置相關(guān)的物體，并且可以將與所述票信息關(guān)聯(lián)的所述增強現(xiàn)實信息顯示在所檢測的物體的周圍區(qū)域上。
[0013]在本公開的另一方面，一種用于控制HMD的方法包括以下步驟:向外部裝置請求票信息；根據(jù)所述請求從所述外部裝置接收包括所述票信息的響應(yīng)；獲取與所述票信息關(guān)聯(lián)的增強現(xiàn)實信息；拍攝所述HMD的周圍區(qū)域的圖像；檢測所拍攝的圖像中的、與所述外部裝置相關(guān)的物體；以及將與所述票信息關(guān)聯(lián)的所述增強現(xiàn)實信息顯示在所檢測的物體的周圍區(qū)域上。
[0014]本發(fā)明的有益效果
[0015]根據(jù)本公開的實施方式，由于用戶不需要取出在他的(或她的)外部裝置中存儲的票以向票務(wù)代理親自出示所購買的票，因此用戶能夠具有他的(或她的)更方便地被檢查的票。另外，根據(jù)本公開的另一實施方式，由于票務(wù)代理配備有HMD，因此票務(wù)代理能夠通過參考增強現(xiàn)實信息來檢查票，該增強現(xiàn)實信息在攜帶具有在其中存儲的相應(yīng)的票的便攜式外部裝置的人附近的位置處顯示。
[0016]此外，根據(jù)本公開的又一實施方式，通過提供基于與購買的票關(guān)聯(lián)的識別信息而產(chǎn)生的增強現(xiàn)實信息，只要能夠驗證票信息，就可以通過使用增強現(xiàn)實信息在任何地方執(zhí)行檢票程序。
[0017]最后，根據(jù)本公開的另外的實施方式，當(dāng)人彼此靠近緊密地擠在一起時，由于根據(jù)本公開的HMD能夠準(zhǔn)確地識別真正攜帶具有在其中存儲的購買的票的便攜式外部裝置的人，因此可以提高增強現(xiàn)實信息的清晰度(clarity)。
[0018]將在下文中描述更詳細的有益效果。
[0019]將要理解的是，前述一般描述和以下詳細描述二者是示例性和說明性的，并且旨在提供對所要求保護的本公開的進一步解釋。
【附圖說明】
[0020]附圖被包括進來以提供本公開的進一步理解，并且被并入本申請且構(gòu)成本申請的一部分，附圖示出了本公開的實施方式，并且與本說明書一起用來解釋本發(fā)明的原理。在附圖中:
[0021]圖1例示了根據(jù)本公開的示例性實施方式的頭戴式顯示器(HMD)的框圖；
[0022]圖2例示了根據(jù)本公開的示例性實施方式的向HMD和外部裝置發(fā)送數(shù)據(jù)以及從HMD和外部裝置接收數(shù)據(jù)的示例；
[0023]圖3例示了根據(jù)本公開的示例性實施方式的使HMD檢測外部裝置的地點的示例；
[0024]圖4例示了根據(jù)本公開的示例性實施方式的使HMD從所拍攝的圖像檢測與外部裝置相關(guān)的物體的示例；
[0025]圖5例示了根據(jù)本公開的示例性實施方式的使HMD根據(jù)所拍攝的圖像識別物體的示例；
[0026]圖6a至圖6c分別例示了根據(jù)本公開的示例性實施方式的使HMD從所拍攝的圖像提取物體并且確定識別區(qū)域的示例；
[0027]圖7a至圖7c分別例示了根據(jù)本公開的示例性實施方式的在基于識別區(qū)域在圖6a至圖6c中決定的與外部裝置相關(guān)的物體的周圍區(qū)域中顯示增強現(xiàn)實信息的示例；
[0028]圖8例示了根據(jù)本公開的示例性實施方式的與票的識別信息匹配的示例性增強現(xiàn)實信息；
[0029]圖9例示了根據(jù)本公開的示例性實施方式的顯示接收的認(rèn)證信息的外部裝置；
[0030]圖10例示了根據(jù)本公開的另一示例性實施方式的顯示接收的認(rèn)證信息的外部裝置；
[0031]圖11例示了根據(jù)本公開的示例性實施方式的票務(wù)系統(tǒng)的結(jié)構(gòu)的框圖；
[0032]圖12例示了根據(jù)本公開的示例性實施方式的由配置票務(wù)系統(tǒng)的元件處理的數(shù)據(jù)的流；以及
[0033]圖13例示了根據(jù)本公開的示例性實施方式的示出用于控制HMD的方法的處理步驟的流程圖。
【具體實施方式】
[0034]盡管在本公開中使用的術(shù)語是從通常已知和使用的術(shù)語中選擇，然而在本文中使用的術(shù)語可以根據(jù)任何本領(lǐng)域技術(shù)人員的意圖或?qū)嵺`或者隨著新技術(shù)的出現(xiàn)而改變或修改。另選地，在一些特定情況下，在本公開的描述中提到的術(shù)語中的一些可能由本申請人根據(jù)他或她的判斷來選擇，其詳細含義在本文中的說明書的相關(guān)部分中進行描述。此外，要求不能簡單地通過所使用的實際術(shù)語而是通過每個術(shù)語中蘊含的含義來理解本公開。
[0035]此外，現(xiàn)在將詳細地參考本公開的優(yōu)選實施方式，在附圖中例示了本公開的這些優(yōu)選實施方式的示例。然而，本公開的描述將不僅限于本文中提供的示例性實施方式。
[0036]圖1例示了根據(jù)本公開的示例性實施方式的頭戴式顯示器(HMD)的框圖。然而，圖1僅是示例性的。并且，因此，將顯而易見的是，可以去除配置模塊中的一些或者可以按照任何本領(lǐng)域技術(shù)人員的要求將新的配置模塊添加到HMD中。
[0037]如圖1中所示，根據(jù)本公開的實施方式的頭戴式顯示器(HMD) 100可以包括相機單元110、顯示單元120、通信單元130、傳感器單元140和處理器150。
[0038]首先，相機單元110可以拍攝HMD 100的周圍的圖像。例如，相機單元110可以拍攝在與穿戴HMD 100的用戶的視野(eyesight)對應(yīng)的預(yù)定區(qū)域(以下被稱為“視角區(qū)域”)內(nèi)的圖像。此后，相機單元110可以將所拍攝的圖像提供到處理器150。
[0039]另外，相機單元110可以包括立體相機。例如，相機單元110可以包括至少兩個透鏡，所述至少兩個透鏡被配置為彼此分隔開預(yù)定距離并且同時拍攝(film)相同的物體。本文中，所述至少兩個透鏡的聚焦調(diào)整、曝光調(diào)整和快門操作可以彼此互相聯(lián)系。因此，在HMD100中，由相機單元110拍攝的圖像可以包括立體圖像(例如，三維(3D)圖像)。
[0040]在這一點上，處理器150可以產(chǎn)生或存儲包括在所拍攝的圖像中的至少一個物體的深度信息作為對應(yīng)圖像的附加信息。此外，處理器150可以基于通過相機單元110而獲取的圖像來檢測包括票信息的外部裝置。在這一點上，處理器150可以使用深度信息。然而，這將在后面進行更詳細的描述。
[0041]此外，相機單元110可以作為與傳感器單元140分離的單元而包括在HMD 100中，這將在后面進行詳細描述。然而，相機單元110也可以與傳感器單元140集成，從而被包括在 HMD 100 中。
[0042]顯示單元120可以將圖像輸出在顯示屏幕上。在這一點上，顯示單元120可以基于由處理器150執(zhí)行的內(nèi)容或者基于處理器150的控制命令來輸出圖像。
[0043]此外，當(dāng)相機單元110包括立體相機時，顯示單元120可以包括顯示立體圖像的結(jié)構(gòu)，使得穿戴HMD 100的用戶能夠觀看對應(yīng)的立體圖像。
[0044]此外，顯示單元120可以顯示與從相機單元110獲取的圖像相關(guān)的增強現(xiàn)實信息。增強現(xiàn)實信息可以從外部服務(wù)器接收，并且可以預(yù)先存儲在HMD 100中。將參照圖7在后面更詳細地描述增強現(xiàn)實信息。
[0045]通信單元130可以通過使用各種協(xié)議來與外部裝置進行通信，以便向外部裝置發(fā)送數(shù)據(jù)以及從外部裝置接收數(shù)據(jù)。另外，通信單元130可以經(jīng)由有線或無線通信來接入網(wǎng)絡(luò)，由此能夠發(fā)送和接收數(shù)字?jǐn)?shù)據(jù)(諸如票信息、增強現(xiàn)實信息等)。
[0046]因此，通信單元130可以向外部裝置發(fā)送票信息以及從外部裝置接收票信息，該外部裝置對應(yīng)于發(fā)放相應(yīng)的票的便攜式裝置或服務(wù)器。
[0047]此外，傳感器單元140可以使用在HMD 100中裝備的至少一個傳感器，以便感測HMD 100的周圍環(huán)境并且將所感測的信息以信號的形式傳送到處理器150。此外，傳感器單元140可以感測用戶輸入，并且可以根據(jù)所感測的結(jié)果向處理器150傳送輸入信號。
[0048]因此，傳感器單元140可以包括至少一個感測裝置。根據(jù)本公開的實施方式，所述至少一個感測裝置可以包括以下項中的至少一個:重力傳感器、地磁(或地磁學(xué))傳感器、運動傳感器、陀螺儀傳感器、加速度傳感器、紅外線傳感器、傾斜傳感器、亮度傳感器、高度傳感器、氣味傳感器、溫度傳感器(或熱傳感器)、深度傳感器、壓力傳感器、條帶(banding)傳感器、音頻傳感器、視頻傳感器、全球定位系統(tǒng)(GPS)傳感器、觸摸傳感器等。
[0049]此外，當(dāng)傳感器單元140感測HMD 100的位置或方向時，處理器150可以檢測HMD100的位置信息或方向信息。這將參照圖3進行更加詳細的描述。
[0050]此外，傳感器單元140集總地表示上述各種傳感裝置。本文中，在感測到用戶的各種輸入之后并且通過感測HDM 100的環(huán)境，感測單元140可以傳送可以傳送所感測的結(jié)果，使得處理器150能夠執(zhí)行相應(yīng)的操作