本發(fā)明涉及移動終端。盡管本發(fā)明適合于寬范圍的應(yīng)用,但是它尤其適合于在進一步考慮用戶的便利性的情況下方便終端的使用。
背景技術(shù):
終端可大致分成移動/便攜式終端或者固定終端。移動終端還可分成手持終端或車載終端。移動終端已變得越來越多功能。這些功能的示例包括數(shù)據(jù)和語言通信、經(jīng)由相機拍攝圖像和視頻、記錄音頻、經(jīng)由揚聲器系統(tǒng)播放音樂文件以及在顯示器上顯示圖像和視頻。一些移動終端包括支持玩游戲的附加功能,而其它終端被配置成多媒體播放器。最近,移動終端已被配置為接收廣播和多播信號,其使得能夠觀看諸如視頻和電視節(jié)目的內(nèi)容。
近來,已逐漸提供通過將移動終端安裝在虛擬現(xiàn)實(VR)裝置中來使得用戶能夠體驗虛擬現(xiàn)實的技術(shù)。然而,存在這樣的問題:用戶僅可利用VR裝置來觀看僅為VR而制作的內(nèi)容,到目前為止,VR專用內(nèi)容的數(shù)量是微不足道的。
技術(shù)實現(xiàn)要素:
因此,本發(fā)明的目的是解決上述和其它問題。
本發(fā)明的一個目的是提供一種移動終端,通過其提供一種便于移動終端的用戶容易地制作VR內(nèi)容的解決方案。
本發(fā)明的另一目的是提供一種移動終端,通過其提供一種使得制作并發(fā)送VR內(nèi)容的發(fā)送方與接收并觀看VR內(nèi)容的接收方之間能夠交互的解決方案。
可從本發(fā)明獲得的技術(shù)任務(wù)不受上述技術(shù)任務(wù)限制。并且,本發(fā)明所屬技術(shù)領(lǐng)域的普通技術(shù)人員可從以下描述清楚地理解其它未提及的技術(shù)任務(wù)。
本發(fā)明的附加優(yōu)點、目的和特征將在本文的公開以及附圖中闡述。這些方面也可由本領(lǐng)域技術(shù)人員基于本文的公開來理解。
為了實現(xiàn)這些目的和其它優(yōu)點并且根據(jù)本發(fā)明的目的,如本文具體實現(xiàn)和廣義描述的,根據(jù)本發(fā)明的實施方式的移動終端可包括相機、無線通信單元和控制器,該控制器控制無線通信單元向外部裝置發(fā)送請求視頻呼叫以提供虛擬現(xiàn)實(VR)圖像的第一信號,所述VR圖像具有等于或大于預(yù)設(shè)度數(shù)的視角,所述控制器基于利用相機獲得的多個圖像來生成VR圖像,所述控制器控制無線通信單元從外部裝置接收預(yù)設(shè)的第二信號,所述控制器控制無線通信單元根據(jù)該第二信號將包括所生成的VR圖像的第三信號發(fā)送給外部裝置。
在本發(fā)明的另一方面中,根據(jù)本發(fā)明的實施方式的移動終端可包括無線通信單元、顯示單元和控制器,該控制器控制無線通信單元從外部裝置接收請求視頻呼叫以提供虛擬現(xiàn)實(VR)圖像的第一信號,所述VR圖像具有等于或大于預(yù)設(shè)度數(shù)的視角,所述控制器根據(jù)指示移動終端與VR裝置之間的連接的第二信號控制無線通信單元將許可視頻呼叫以提供VR圖像的第三信號發(fā)送給外部裝置,所述控制器控制無線通信單元從外部裝置接收包括VR圖像的第四信號,所述控制器將包括在第四信號中的VR圖像顯示在顯示單元上。
本申請的進一步的適用范圍將從下文給出的詳細描述而變得顯而易見。然而,應(yīng)該理解,僅示意性地在指示本發(fā)明的優(yōu)選實施方式的同時給出詳細描述和具體示例,因為對于本領(lǐng)域技術(shù)人員而言,通過該詳細描述,在本發(fā)明的精神和范圍內(nèi)的各種改變和修改將變得顯而易見。
附圖說明
本發(fā)明將從本文下面給出的詳細描述和附圖而變得更充分地理解,這些附圖僅例示性地給出,因此不限制本發(fā)明,附圖中:
圖1A是根據(jù)本公開的移動終端的框圖;
圖1B和圖1C是從不同方向看時移動終端的一個示例的概念圖;
圖2是根據(jù)本公開的另選實施方式的可變形移動終端的概念圖;
圖3是根據(jù)本公開的另一另選實施方式的可穿戴移動終端的概念圖;
圖4是根據(jù)本公開的另一另選實施方式的可穿戴移動終端的概念圖;
圖5是示出根據(jù)本發(fā)明的一個實施方式的連接到接收方移動終端的VR裝置的一個示例的示圖;
圖6是示出根據(jù)本發(fā)明的一個實施方式的發(fā)送方移動終端將VR圖像提供給接收方移動終端的方法的一個示例的示圖;
圖7是示出根據(jù)本發(fā)明的一個實施方式的用于通過VR裝置體驗虛擬現(xiàn)實的VR圖像的一個示例的示圖;
圖8是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端將VR圖像發(fā)送給第二移動終端的方法的一個示例的示圖;
圖9是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端將VR圖像發(fā)送給第二移動終端的方法的另一示例的示圖;
圖10是示出根據(jù)本發(fā)明的一個實施方式的從第一移動終端向第二移動終端發(fā)送VR圖像的方法的一個示例的示圖;
圖11是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端請求視頻呼叫以用于提供VR圖像的方法的一個示例的示圖;
圖12是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端生成VR圖像的方法的一個示例的示圖;
圖13是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端生成VR圖像的方法的一個示例的示意圖;
圖14是示出根據(jù)本發(fā)明的一個實施方式的被輸出以獲得第一移動終端用來生成VR圖像的圖像的指引UI的一個示例的示圖;
圖15是示出根據(jù)本發(fā)明的一個實施方式的被輸出以獲得第一移動終端用來生成VR圖像的圖像的指引UI的另一示例的示圖;
圖16是示出根據(jù)本發(fā)明的一個實施方式的由第一移動終端生成的VR圖像的一個示例的示圖;
圖17是示出根據(jù)本發(fā)明的一個實施方式的在第一移動終端與第二移動終端之間執(zhí)行視頻呼叫以提供VR圖像的處理的一個示例的示圖;
圖18是示出根據(jù)本發(fā)明的一個實施方式的在視頻呼叫期間顯示在第一移動終端上的畫面和顯示在第二移動終端上的畫面的示例的示圖;
圖19是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端生成VR圖像的方法的另一示例的示圖;
圖20是示出根據(jù)本發(fā)明的一個實施方式的在第一移動終端與第二移動終端之間 的一般視頻呼叫期間切換為用于提供VR圖像的視頻呼叫的方法的一個示例的示圖;
圖21是示出根據(jù)本發(fā)明的一個實施方式的在第一移動終端與第二移動終端之間的一般視頻呼叫期間切換為用于提供VR圖像的視頻呼叫的情況下顯示在第一移動終端和第二移動終端中的每一個上的畫面的一個示例的示圖;
圖22是示出根據(jù)本發(fā)明的一個實施方式的第二移動終端100B根據(jù)用戶的動作提供反饋的方法的一個示例的示圖;
圖23是示出根據(jù)本發(fā)明的一個實施方式的第二移動終端的用戶針對第二移動終端的用戶所期望的內(nèi)容請求第一移動終端的用戶的方法的一個示例的示圖;
圖24是示出根據(jù)本發(fā)明的一個實施方式的如參照圖23所提及的由第一移動終端從第二移動終端接收指定信號的一個示例的示圖;
圖25是示出根據(jù)本發(fā)明的一個實施方式的如參照圖24所提及的在從第一移動終端發(fā)送新的VR圖像的情況下輸出到第二移動終端的顯示單元的畫面的一個示例的示圖;
圖26是示出根據(jù)本發(fā)明的一個實施方式的第二移動終端的用戶控制VR圖像中所包括的特定對象的方法的一個示例的示圖;
圖27是示出根據(jù)本發(fā)明的一個實施方式的第二移動終端的用戶控制VR圖像的方法的一個示例的示圖;
圖28是示出根據(jù)本發(fā)明的一個實施方式的在用于提供VR圖像的視頻呼叫期間第二移動終端輸出音頻數(shù)據(jù)的方法的一個示例的示圖;
圖29是示出根據(jù)本發(fā)明的一個實施方式的利用安裝在車輛上的相機生成VR圖像的方法的一個示例的示圖;
圖30是示出根據(jù)本發(fā)明的一個實施方式的生成VR圖像的方法的另一示例的示圖;
圖31是示出根據(jù)本發(fā)明的一個實施方式的第二移動終端的用戶選擇期望的相機的VR圖像的方法的一個示例的示圖;
圖32是示出根據(jù)本發(fā)明的一個實施方式的如參照圖31所提及的在第二移動終端的用戶選擇特定相機的情況下輸出由所述特定相機生成的VR圖像的方法的一個示例的示圖;以及
圖33是示出根據(jù)本發(fā)明的一個實施方式的生成VR圖像的方法的另一示例的示 圖。并且,參照圖31所提及的冗余內(nèi)容將被省略。
具體實施方式
現(xiàn)在將參照附圖根據(jù)本文公開的示例性實施方式詳細給出描述。為了參照附圖簡要描述,可為相同或等同的組件提供相同的標號,其描述將不再重復。通常,諸如“模塊”和“單元”的后綴可用于指代元件或組件。本文使用這種后綴僅是為了方便說明書的描述,后綴本身并非旨在給予任何特殊含義或功能。在本公開中,為了簡明起見,相關(guān)領(lǐng)域的普通技術(shù)人員熟知的內(nèi)容已被省略。使用附圖來幫助容易地理解各種技術(shù)特征,應(yīng)該理解,本文呈現(xiàn)的實施方式不受附圖的限制。因此,本公開應(yīng)該被解釋為擴展至附圖中具體示出的更改形式、等同形式和替代形式以外的任何更改形式、等同形式和替代形式。
盡管本文中可能使用術(shù)語第一、第二等來描述各種元件,這些元件不應(yīng)受這些術(shù)語的限制。這些術(shù)語通常僅用于將一個元件與另一元件相區(qū)分。當元件被稱作“與”另一元件“連接”時,該元件可與所述另一元件連接或者還可存在中間元件。相比之下,當元件被稱作“與”另一元件“直接連接”時,不存在中間元件。
除非從上下文看出表示明確不同的含義,否則單數(shù)表示形式可包括多數(shù)表示形式。本文中使用諸如“包括”或“具有”的術(shù)語,應(yīng)該理解它們旨在指示存在說明書中公開的多個組件、功能或步驟,還將理解,同樣可利用更多或更少的組件、功能或步驟。
本文呈現(xiàn)的移動終端可利用各種不同類型的終端來實現(xiàn)。這些終端的示例包括蜂窩電話、智能電話、用戶設(shè)備、膝上型計算機、數(shù)字廣播終端、個人數(shù)字助理(PDA)、便攜式多媒體播放器(PMP)、導航儀、便攜式計算機(PC)、石板PC、平板PC、超級本、可穿戴裝置(例如,智能手表、智能眼鏡、頭戴式顯示器(HMD))等。
僅作為非限制性示例,參照特定類型的移動終端進行進一步描述。然而,這些教導同樣適用于其它類型的終端,例如上述那些類型。另外,這些教導也可適用于諸如數(shù)字TV、臺式計算機等的固定終端。
現(xiàn)在參照圖1A至圖1C,其中圖1A是根據(jù)本公開的移動終端的框圖,圖1B和圖1C是從不同方向看時移動終端的一個示例的概念圖。
移動終端100被示出為具有諸如無線通信單元110、輸入單元120、感測單元140、輸出單元150、接口單元160、存儲器170、控制器180和電源單元190的組件。不 要求實現(xiàn)所示的所有組件,可另選地實現(xiàn)更多或更少的組件。
現(xiàn)在參照圖1A,移動終端100被示出為具有無線通信單元110,該無線通信單元110配置有多個通常實現(xiàn)的組件。例如,無線通信單元110通常包括允許移動終端100與無線通信系統(tǒng)或者移動終端所在的網(wǎng)絡(luò)之間的無線通信的一個或更多個組件。
無線通信單元110通常包括允許通信(例如,移動終端100與無線通信系統(tǒng)之間的無線通信、移動終端100與另一移動終端之間的通信、移動終端100與外部服務(wù)器之間的通信)的一個或更多個模塊。另外,無線通信單元110通常包括將移動終端100連接到一個或更多個網(wǎng)絡(luò)的一個或更多個模塊。為了方便這些通信,無線通信單元110包括廣播接收模塊111、移動通信模塊112、無線互聯(lián)網(wǎng)模塊113、短距離通信模塊114和位置信息模塊115中的一個或更多個。
輸入單元120包括用于獲得圖像或視頻的相機121、麥克風122(是用于輸入音頻信號的一種音頻輸入裝置)以及用于使得用戶能夠輸入信息的用戶輸入單元123(例如,觸摸鍵、按鍵、機械鍵、軟鍵等)。數(shù)據(jù)(例如,音頻、視頻、圖像等)通過輸入單元120來獲得,并且可由控制器180根據(jù)裝置參數(shù)、用戶命令及其組合來分析和處理。
感測單元140通常利用被配置為感測移動終端的內(nèi)部信息、移動終端的周圍環(huán)境、用戶信息等的一個或更多個傳感器來實現(xiàn)。例如,在圖1A中,感測單元140被示出為具有接近傳感器141和照明傳感器142。
如果需要,感測單元140可另選地或另外地包括其它類型的傳感器或裝置,例如觸摸傳感器、加速度傳感器、磁傳感器、重力傳感器、陀螺儀傳感器、運動傳感器、RGB傳感器、紅外(IR)傳感器、手指掃描傳感器、超聲傳感器、光學傳感器(例如,相機121)、麥克風122、電池電量計、環(huán)境傳感器(例如,氣壓計、濕度計、溫度計、輻射檢測傳感器、熱傳感器和氣體傳感器等)和化學傳感器(例如,電子鼻、保健傳感器、生物傳感器等)等。移動終端100可被配置為利用從感測單元140獲得的信息,具體地講,從感測單元140的一個或更多個傳感器獲得的信息,及其組合。
輸出單元150通常被配置為輸出各種類型的信息,例如音頻、視頻、觸覺輸出等。輸出單元150被示出為具有顯示單元151、音頻輸出模塊152、觸覺模塊153和光學輸出模塊154。
顯示單元151可具有與觸摸傳感器的中間層結(jié)構(gòu)或集成結(jié)構(gòu),以便方便觸摸屏。 觸摸屏可在移動終端100與用戶之間提供輸出接口,并且用作在移動終端100與用戶之間提供輸入接口的用戶輸入單元123。
接口單元160用作與可連接到移動終端100的各種類型的外部裝置的接口。例如,接口單元160可包括任何有線或無線端口、外部電源端口、有線或無線數(shù)據(jù)端口、存儲卡端口、用于連接具有標識模塊的裝置的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機端口等。在一些情況下,移動終端100可響應(yīng)于外部裝置連接到接口單元160而執(zhí)行與連接的外部裝置關(guān)聯(lián)的各種控制功能。
存儲器170通常被實現(xiàn)為存儲用于支持移動終端100的各種功能或特征的數(shù)據(jù)。例如,存儲器170可被配置為存儲在移動終端100中執(zhí)行的應(yīng)用程序、用于移動終端100的操作的數(shù)據(jù)或指令等。這些應(yīng)用程序中的一些應(yīng)用程序可經(jīng)由無線通信從外部服務(wù)器下載。其它應(yīng)用程序可在制造或出廠時安裝在移動終端100內(nèi),針對移動終端100的基本功能(例如,接電話、打電話、接收消息、發(fā)送消息等),通常是這種情況。常見的是,應(yīng)用程序被存儲在存儲器170中,被安裝在移動終端100中,并由控制器180執(zhí)行以執(zhí)行移動終端100的操作(或功能)。
除了與應(yīng)用程序關(guān)聯(lián)的操作以外,控制器180通常還用于控制移動終端100的總體操作??刂破?80可通過處理經(jīng)由圖1A所描繪的各種組件輸入或輸出的信號、數(shù)據(jù)、信息等或者激活存儲在存儲器170中的應(yīng)用程序來提供或處理適合于用戶的信息或功能。作為一個示例,控制器180根據(jù)存儲在存儲器170中的應(yīng)用程序的執(zhí)行來控制圖1A至圖1C所示的一些或所有組件。
電源單元190可被配置為接收外部電力或提供內(nèi)部電力,以便供應(yīng)對包括在移動終端100中的元件和組件進行操作所需的適當電力。電源單元190可包括電池,所述電池可被配置為嵌入在終端主體中,或者被配置為可從終端主體拆卸。
仍參照圖1A,現(xiàn)在將更詳細地描述該圖中描繪的各種組件。關(guān)于無線通信單元110,廣播接收模塊111通常被配置為經(jīng)由廣播頻道從外部廣播管理實體接收廣播信號和/或廣播相關(guān)信息。廣播頻道可包括衛(wèi)星頻道、地面頻道或這二者。在一些實施方式中,可使用兩個或更多個廣播接收模塊111以方便同時接收兩個或更多個廣播頻道或支持在廣播頻道之間切換。
廣播管理實體可以是生成并發(fā)送廣播信號和/或廣播相關(guān)信息的系統(tǒng)或者接收預(yù)先生成的廣播信號和/或廣播相關(guān)信息并將這些項目發(fā)送給移動終端的服務(wù)器。除了 別的以外,廣播信號可利用TV廣播信號、無線電廣播信號、數(shù)據(jù)廣播信號及其組合中的任一個來實現(xiàn)。在一些情況下,廣播信號還可包括與TV或無線電廣播信號組合的數(shù)據(jù)廣播信號。
廣播信號可根據(jù)用于數(shù)字廣播信號的發(fā)送和接收的各種技術(shù)標準或廣播方法(例如,國際標準化組織(ISO)、國際電工委員會(IEC)、數(shù)字視頻廣播(DVB)、高級電視系統(tǒng)委員會(ATSC)等)中的任一種來編碼。廣播接收模塊111可利用適合于使用的發(fā)送方法的方法來接收數(shù)字廣播信號。
廣播相關(guān)信息的示例可包括與廣播頻道、廣播節(jié)目、廣播事件、廣播服務(wù)提供商等關(guān)聯(lián)的信息。廣播相關(guān)信息還可經(jīng)由移動通信網(wǎng)絡(luò)來提供,并且在這種情況下由移動通信模塊112來接收。
廣播相關(guān)信息可按照各種格式來實現(xiàn)。例如,廣播相關(guān)信息可包括數(shù)字多媒體廣播(DMB)的電子節(jié)目指南(EPG)、手持數(shù)字視頻廣播(DVB-H)的電子服務(wù)指南(ESG)等。經(jīng)由廣播接收模塊111接收的廣播信號和/或廣播相關(guān)信息可被存儲在諸如存儲器170的合適的裝置中。
移動通信模塊112可向一個或更多個網(wǎng)絡(luò)實體發(fā)送無線信號和/或從其接收無線信號。網(wǎng)絡(luò)實體的典型示例包括基站、外部移動終端、服務(wù)器等。這些網(wǎng)絡(luò)實體形成移動通信網(wǎng)絡(luò)的一部分,所述移動通信網(wǎng)絡(luò)根據(jù)移動通信的技術(shù)標準或通信方法(例如,全球移動通信系統(tǒng)(GSM)、碼分多址(CDMA)、CDMA 2000(碼分多址2000)、EV-DO(增強型優(yōu)化語音數(shù)據(jù)或增強型僅語音數(shù)據(jù))、寬帶CDMA(WCDMA)、高速下行鏈路分組接入(HSDPA)、HSUPA(高速上行鏈路分組接入)、長期演進(LTE)、LTE-A(高級長期演進)等)來構(gòu)建。經(jīng)由移動通信模塊112發(fā)送和/或接收的無線信號的示例包括音頻呼叫信號、視頻(電話)呼叫信號或者支持文本和多媒體消息的通信的各種格式的數(shù)據(jù)。
無線互聯(lián)網(wǎng)模塊113被配置為方便無線互聯(lián)網(wǎng)接入。此模塊可從內(nèi)部或外部連接到移動終端100。無線互聯(lián)網(wǎng)模塊113可根據(jù)無線互聯(lián)網(wǎng)技術(shù)經(jīng)由通信網(wǎng)絡(luò)發(fā)送和/或接收無線信號。
這種無線互聯(lián)網(wǎng)接入的示例包括無線LAN(WLAN)、無線保真(Wi-Fi)、Wi-Fi直連、數(shù)字生活網(wǎng)絡(luò)聯(lián)盟(DLNA)、無線寬帶(WiBro)、全球微波接入互操作性(WiMAX)、高速下行鏈路分組接入(HSDPA)、HSUPA(高速上行鏈路分組接入)、 長期演進(LTE)、LTE-A(高級長期演進)等。無線互聯(lián)網(wǎng)模塊113可根據(jù)這些無線互聯(lián)網(wǎng)技術(shù)以及其它互聯(lián)網(wǎng)技術(shù)中的一個或更多個來發(fā)送/接收數(shù)據(jù)。
在一些實施方式中,當根據(jù)(例如)WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LET、LTE-A等實現(xiàn)無線互聯(lián)網(wǎng)接入時,作為移動通信網(wǎng)絡(luò)的一部分,無線互聯(lián)網(wǎng)模塊113執(zhí)行這種無線互聯(lián)網(wǎng)接入。因此,互聯(lián)網(wǎng)模塊113可與移動通信模塊112協(xié)作或用作移動通信模塊112。
短距離通信模塊114被配置為方便短距離通信。用于實現(xiàn)這些短距離通信的合適的技術(shù)包括BLUETOOTH、射頻識別(RFID)、紅外數(shù)據(jù)協(xié)會(IrDA)、超寬帶(UWB)、ZigBee、近場通信(NFC)、無線保真(Wi-Fi)、Wi-Fi直連、無線USB(無線通用串行總線)等。短距離通信模塊114通常經(jīng)由無線局域網(wǎng)支持移動終端100與無線通信系統(tǒng)之間的無線通信、移動終端100與另一移動終端100之間的通信或者移動終端100與另一移動終端100(或外部服務(wù)器)所在的網(wǎng)絡(luò)之間的通信。無線局域網(wǎng)的一個示例是無線個域網(wǎng)。
在一些實施方式中,另一移動終端(可類似于移動終端100來配置)可以是能夠與移動終端100交換數(shù)據(jù)(或者與移動終端100協(xié)作)的可穿戴裝置(例如,智能手表、智能眼鏡或頭戴式顯示器(HMD))。短距離通信模塊114可感測或識別可穿戴裝置,并允許可穿戴裝置與移動終端100之間的通信。另外,當所感測到的可穿戴裝置是被驗證為與移動終端100進行通信的裝置時,例如,控制器180可經(jīng)由短距離通信模塊114將在移動終端100中處理的數(shù)據(jù)發(fā)送給可穿戴裝置。因此,可穿戴裝置的用戶可在可穿戴裝置上使用在移動終端100中處理的數(shù)據(jù)。例如,當在移動終端100中接到電話時,用戶可利用可穿戴裝置來回電話。另外,當在移動終端100中接收到消息時,用戶可利用可穿戴裝置來查看所接收到的消息。
位置信息模塊115通常被配置為檢測、計算、推導或者標識移動終端的位置。例如,位置信息模塊115包括全球定位系統(tǒng)(GPS)模塊、Wi-Fi模塊或這二者。如果需要,位置信息模塊115可另選地或另外地與無線通信單元110的任何其它模塊一起工作,以獲得與移動終端的位置有關(guān)的數(shù)據(jù)。
作為一個示例,當移動終端使用GPS模塊時,可利用從GPS衛(wèi)星發(fā)送的信號來獲取移動終端的位置。作為另一示例,當移動終端使用Wi-Fi模塊時,可基于與無線接入點(AP)有關(guān)的信息來獲取移動終端的位置,所述無線接入點(AP)向Wi-Fi 模塊發(fā)送無線信號或從Wi-Fi模塊接收無線信號。
輸入單元120可被配置為允許向移動終端120的各種類型的輸入。這種輸入的示例包括音頻、圖像、視頻、數(shù)據(jù)和用戶輸入。圖像和視頻輸入常常利用一個或更多個相機121來獲得。這些相機121可對在視頻或圖像拍攝模式下通過圖像傳感器獲得的靜止畫面或視頻的圖像幀進行處理。經(jīng)處理的圖像幀可被顯示在顯示單元151上或存儲在存儲器170中。在一些情況下,相機121可按照矩陣配置布置,以使得具有各種角度或焦點的多個圖像能夠被輸入至移動終端100。作為另一示例,相機121可按照立體布置方式來設(shè)置,以獲取用于實現(xiàn)立體圖像的左圖像和右圖像。
麥克風122通常被實現(xiàn)為允許向移動終端100輸入音頻。可根據(jù)移動終端100中執(zhí)行的功能來按照各種方式處理音頻輸入。如果需要,麥克風122可包括各種噪聲去除算法以去除在接收外部音頻的過程中生成的不期望的噪聲。
用戶輸入單元123是允許用戶輸入的組件。這種用戶輸入可使得控制器180能夠控制移動終端100的操作。用戶輸入單元123可包括機械輸入元件(例如,位于移動終端100的正面和/或背面或側(cè)面的鍵、按鈕、薄膜開關(guān)、滾輪、觸合式開關(guān)等)或者觸敏輸入裝置等中的一個或更多個。作為一個示例,觸敏輸入裝置可以是通過軟件處理顯示在觸摸屏上的虛擬鍵或軟鍵、或者設(shè)置在移動終端上的觸摸屏以外的位置處的觸摸鍵。另外,虛擬鍵或視覺鍵可按照各種形狀(例如,圖形、文本、圖標、視頻或其組合)顯示在觸摸屏上。
感測單元140通常被配置為感測移動終端的內(nèi)部信息、移動終端的周圍環(huán)境信息、用戶信息等中的一個或更多個。控制器180通常與感測單元140協(xié)作以基于感測單元140所提供的感測來控制移動終端100的操作或者執(zhí)行與安裝在移動終端中的應(yīng)用程序關(guān)聯(lián)的數(shù)據(jù)處理、功能或操作??衫酶鞣N傳感器中的任何傳感器來實現(xiàn)感測單元140,現(xiàn)在將更詳細地描述其中一些傳感器。
接近傳感器141可包括在沒有機械接觸的情況下,利用電磁場、紅外線等來感測是否存在靠近表面的物體或者位于表面附近的物體的傳感器。接近傳感器141可布置在移動終端被觸摸屏覆蓋的內(nèi)側(cè)區(qū)域處或觸摸屏附近。
例如,接近傳感器141可包括透射型光電傳感器、直接反射型光電傳感器、反射鏡反射型光電傳感器、高頻振蕩接近傳感器、電容型接近傳感器、磁型接近傳感器、紅外線接近傳感器等中的任何傳感器。當觸摸屏被實現(xiàn)為電容型時,接近傳感器141 可通過電磁場響應(yīng)于導電物體的靠近而發(fā)生的變化來感測指點器相對于觸摸屏的接近。在這種情況下,觸摸屏(觸摸傳感器)也可被歸類為接近傳感器。
本文中常常將提及術(shù)語“接近觸摸”以表示指點器被設(shè)置成在沒有接觸觸摸屏的情況下接近觸摸屏的情景。本文中常常將提及術(shù)語“接觸觸摸”以表示指點器與觸摸屏進行物理接觸的情景。對于與指點器相對于觸摸屏的接近觸摸對應(yīng)的位置,這種位置將對應(yīng)于指點器垂直于觸摸屏的位置。接近傳感器141可感測接近觸摸以及接近觸摸模式(例如,距離、方向、速度、時間、位置、移動狀態(tài)等)。
通常,控制器180對與接近傳感器141所感測的接近觸摸和接近觸摸模式對應(yīng)的數(shù)據(jù)進行處理,并在觸摸屏上輸出視覺信息。另外,控制器180可根據(jù)對觸摸屏上的點的觸摸是接近觸摸還是接觸觸摸來控制移動終端100執(zhí)行不同的操作或處理不同的數(shù)據(jù)。
觸摸傳感器可利用各種觸摸方法中的任何觸摸方法來感測施加到觸摸屏(例如,顯示單元151)的觸摸。這些觸摸方法的示例包括電阻型、電容型、紅外型和磁場型等。作為一個示例,觸摸傳感器可被配置為將施加到顯示單元151的特定部分的壓力的變化或者在顯示單元151的特定部分處發(fā)生的電容的變化轉(zhuǎn)換為電輸入信號。觸摸傳感器還可被配置為不僅感測觸摸位置和觸摸面積,而且感測觸摸壓力和/或觸摸電容。通常使用觸摸物體來對觸摸傳感器施加觸摸輸入。典型的觸摸物體的示例包括手指、觸摸筆、手寫筆、指點器等。
當通過觸摸傳感器感測到觸摸輸入時,可將對應(yīng)信號發(fā)送給觸摸控制器。觸摸控制器可對所接收到的信號進行處理,然后將對應(yīng)數(shù)據(jù)發(fā)送給控制器180。因此,控制器180可感測顯示單元151的哪一區(qū)域被觸摸。這里,觸摸控制器可以是獨立于控制器180的組件、控制器180及其組合。
在一些實施方式中,控制器180可根據(jù)對觸摸屏或者除觸摸屏以外設(shè)置的觸摸鍵進行觸摸的觸摸物體的類型來執(zhí)行相同或不同的控制。例如,根據(jù)提供觸摸輸入的物體是執(zhí)行相同的控制還是不同的控制可基于移動終端100的當前操作狀態(tài)或者當前執(zhí)行的應(yīng)用程序來決定。
觸摸傳感器和接近傳感器可單獨實現(xiàn)或者組合實現(xiàn),以感測各種類型的觸摸。這些觸摸包括短(或輕敲)觸摸、長觸摸、多觸摸、拖曳觸摸、輕拂觸摸、縮小觸摸、放大觸摸、輕掃觸摸、懸停觸摸等。如果需要,可實現(xiàn)超聲傳感器以利用超聲波來識 別與觸摸物體有關(guān)的位置信息。例如,控制器180可基于由照明傳感器和多個超聲傳感器感測的信息來計算波生成源的位置。由于光遠比超聲波快,所以光到達光學傳感器的時間遠比超聲波到達超聲傳感器的時間短??衫眠@一事實來計算波生成源的位置。例如,可基于光作為參考信號利用相對于超聲波到達傳感器的時間的時間差來計算波生成源的位置。
相機121通常包括至少一個相機傳感器(CCD、CMOS等)、光電傳感器(或圖像傳感器)和激光傳感器。利用激光傳感器實現(xiàn)相機121可允許檢測物理對象相對于3D立體圖像的觸摸。光電傳感器可被層合在顯示裝置上或者與顯示裝置交疊。光電傳感器可被配置為對接近觸摸屏的物理對象的移動進行掃描。更詳細地講,光電傳感器可包括成行和列的光電二極管和晶體管,以利用根據(jù)施加的光的量而變化的電信號來對光電傳感器處接收的內(nèi)容進行掃描。即,光電傳感器可根據(jù)光的變化來計算物理對象的坐標,從而獲得物理對象的位置信息。
顯示單元151通常被配置為輸出在移動終端100中處理的信息。例如,顯示單元151可顯示在移動終端100處執(zhí)行的應(yīng)用程序的執(zhí)行畫面信息或者響應(yīng)于執(zhí)行畫面信息的用戶界面(UI)和圖形用戶界面(GUI)信息。在一些實施方式中,顯示單元151可被實現(xiàn)為用于顯示立體圖像的立體顯示單元。典型的立體顯示單元可采用諸如立體方案(眼鏡方案)、自動立體方案(無眼鏡方案)、投影方案(全息方案)等的立體顯示方案。
通常,3D立體圖像可包括左圖像(例如,左眼圖像)和右圖像(例如,右眼圖像)。根據(jù)左圖像和右圖像如何組合成3D立體圖像,3D立體成像方法可分為左圖像和右圖像在幀中上下布置的上下方法、左圖像和右圖像在幀中左右布置的L至R(左至右或并排)方法、左圖像和右圖像的片段以拼塊形式布置的棋盤格方法、左圖像和右圖像按照列或行交替布置的交織方法以及左圖像和右圖像基于時間交替顯示的時間順序(逐幀)方法。
另外,對于3D縮略圖圖像,可分別從原始圖像幀的左圖像和右圖像生成左圖像縮略圖和右圖像縮略圖,然后將其組合以生成單個3D縮略圖圖像。通常,術(shù)語“縮略圖”可用于表示縮小的圖像或者縮小的靜止圖像。生成的左圖像縮略圖和右圖像縮略圖可按照與左圖像和右圖像之間的視差對應(yīng)的深度利用二者間的水平距離差來顯示在屏幕上,從而提供立體空間感。
實現(xiàn)3D立體圖像所需的左圖像和右圖像可利用立體處理單元來顯示在立體顯示單元上。立體處理單元可接收3D圖像并提取左圖像和右圖像,或者可接收2D圖像并將其改變?yōu)樽髨D像和右圖像。
音頻輸出模塊152通常被配置為輸出音頻數(shù)據(jù)。這些音頻數(shù)據(jù)可從多種不同的源中的任何源獲得,使得所述音頻數(shù)據(jù)可從無線通信單元110接收或者可存儲在存儲器170中。所述音頻數(shù)據(jù)可在諸如信號接收模式、呼叫模式、錄制模式、語音識別模式、廣播接收模式等的模式期間輸出。音頻輸出模塊152可提供與移動終端100所執(zhí)行的特定功能有關(guān)的可聽輸出(例如,呼叫信號接收音、消息接收音等)。音頻輸出模塊152還可被實現(xiàn)為受話器、揚聲器、蜂鳴器等。
觸覺模塊153可被配置為產(chǎn)生用戶感覺、感知或者體驗的各種觸覺效果。由觸覺模塊153產(chǎn)生的觸覺效果的典型示例是振動。由觸覺模塊153產(chǎn)生的振動的強度、模式等可通過用戶選擇或控制器的設(shè)定來控制。例如,觸覺模塊153可按照組合方式或順序方式輸出不同的振動。
除了振動以外,觸覺模塊153可產(chǎn)生各種其它觸覺效果,包括諸如插針排列向接觸皮膚垂直移動、通過噴射孔或抽吸開口的空氣的噴射力或抽吸力、對皮膚的觸摸、電極的接觸、靜電力等的刺激效果、利用能夠吸熱或發(fā)熱的元件再現(xiàn)冷和熱的感覺的效果等。
除了通過直接接觸傳遞觸覺效果以外,觸覺模塊153還可被實現(xiàn)為使得用戶能夠通過諸如用戶的手指或手臂的肌肉覺來感覺到觸覺效果??筛鶕?jù)移動終端100的特定配置設(shè)置兩個或更多個觸覺模塊153。
光學輸出模塊154可輸出用于利用光源的光指示事件的發(fā)生的信號。移動終端100中發(fā)生的事件的示例可包括消息接收、呼叫信號接收、未接呼叫、鬧鐘、日程提醒、電子郵件接收、通過應(yīng)用的信息接收等。由光學輸出模塊154輸出的信號可被實現(xiàn)為使得移動終端發(fā)射單色光或多種顏色的光。例如,隨著移動終端感測到用戶已查看所發(fā)生的事件,信號輸出可被終止。
接口單元160用作要與移動終端100連接的外部裝置的接口。例如,接口單元160可接收從外部裝置發(fā)送來的數(shù)據(jù),接收電力以輸送給移動終端100內(nèi)的元件和組件,或者將移動終端100的內(nèi)部數(shù)據(jù)發(fā)送給這種外部裝置。接口單元160可包括有線或無線頭戴式耳機端口、外部電源端口、有線或無線數(shù)據(jù)端口、存儲卡端口、用于連 接具有標識模塊的裝置的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機端口等。
所述標識模塊可以是存儲用于驗證移動終端100的使用權(quán)限的各種信息的芯片,并且可包括用戶標識模塊(UIM)、訂戶標識模塊(SIM)、全球訂戶標識模塊(USIM)等。另外,具有標識模塊的裝置(本文中也稱作“標識裝置”)可采取智能卡的形式。因此,標識裝置可經(jīng)由接口單元160與移動終端100連接。
當移動終端100與外部托架連接時,接口單元160可用作使得能夠?qū)碜酝屑艿碾娏?yīng)給移動終端100的通道,或者可用作使得能夠用來將由用戶從托架輸入的各種命令信號輸送給移動終端的通道。從托架輸入的各種命令信號或電力可用作用于識別出移動終端被正確安裝在托架上的信號。
存儲器170可存儲用于支持控制器180的操作的程序,并存儲輸入/輸出數(shù)據(jù)(例如,電話簿、消息、靜止圖像、視頻等)。存儲器170可存儲與響應(yīng)于觸摸屏上的觸摸輸入而輸出的各種模式的振動和音頻有關(guān)的數(shù)據(jù)。存儲器170可包括一種或更多種類型的存儲介質(zhì),包括閃存、硬盤、固態(tài)盤、硅磁盤、微型多媒體卡、卡型存儲器(例如,SD或DX存儲器等)、隨機存取存儲器(RAM)、靜態(tài)隨機存取存儲器(SRAM)、只讀存儲器(ROM)、電可擦除可編程只讀存儲器(EEPROM)、可編程只讀存儲器(PROM)、磁存儲器、磁盤、光盤等。移動終端100還可與在諸如互聯(lián)網(wǎng)的網(wǎng)絡(luò)上執(zhí)行存儲器170的存儲功能的網(wǎng)絡(luò)存儲裝置有關(guān)地操作。
控制器180通??煽刂埔苿咏K端100的總體操作。例如,當移動終端100的狀態(tài)滿足預(yù)設(shè)條件時,控制器180可設(shè)定或解除用于限制用戶相對于應(yīng)用輸入控制命令的鎖定狀態(tài)。
控制器180還可執(zhí)行與語音呼叫、數(shù)據(jù)通信、視頻呼叫等關(guān)聯(lián)的控制和處理,或者執(zhí)行模式識別處理以將觸摸屏上進行的手寫輸入或繪畫輸入分別識別為字符或圖像。另外,控制器180可控制那些組件中的一個或其組合,以便實現(xiàn)本文公開的各種示例性實施方式。
電源單元190接收外部電力或提供內(nèi)部電力,并且供應(yīng)對包括在移動終端100中的各個元件和組件進行操作所需的適當電力。電源單元190可包括電池,該電池通常是可再充電的或者以可拆卸的方式連接到終端主體以便于充電。電源單元190可包括連接端口。該連接端口可被配置為接口單元160的一個示例,用于供應(yīng)電力以對電 池進行再充電的外部充電器可電連接到該連接端口。
作為另一示例,電源單元190可被配置為以無線方式對電池進行再充電,而不使用連接端口。在此示例中,電源單元190可利用基于磁感應(yīng)的電感耦合方法或基于電磁共振的磁共振耦合方法中的至少一種來接收從外部無線電力發(fā)射器輸送的電力。本文所述的各種實施方式可利用(例如)軟件、硬件或其任何組合來在計算機可讀介質(zhì)、機器可讀介質(zhì)或類似介質(zhì)中實現(xiàn)。
現(xiàn)在參照圖1B和圖1C,參照直板型終端主體描述移動終端100。然而,另選地,移動終端100可按照各種不同的配置中的任何配置來實現(xiàn)。這些配置的示例包括手表型、夾子型、眼鏡型或者折疊型、翻蓋型、滑蓋型、旋轉(zhuǎn)型和擺動型(其中兩個和更多個主體按照能夠相對移動的方式彼此組合)或其組合。本文的討論將常常涉及特定類型的移動終端(例如,直板型、手表型、眼鏡型等)。然而,關(guān)于特定類型的移動終端的這些教導將通常也適用于其它類型的移動終端。
移動終端100將通常包括形成終端的外觀的殼體(例如,框架、外殼、蓋等)。在此實施方式中,殼體利用前殼體101和后殼體102形成。各種電子組件被包含在前殼體101與后殼體102之間所形成的空間中。另外,可在前殼體101與后殼體102之間設(shè)置至少一個中間殼體。
顯示單元151被示出為在終端主體的前側(cè)以輸出信息。如圖所示,顯示單元151的窗口151a可被安裝到前殼體101以與前殼體101一起形成終端主體的前表面。在一些實施方式中,電子組件也可被安裝到后殼體102。這些電子組件的示例包括可拆卸電池191、標識模塊、存儲卡等。后蓋103被示出為蓋住電子組件,該蓋可以可拆卸地連接到后殼體102。因此,當將后蓋103從后殼體102拆卸時,安裝到后殼體102的電子組件暴露于外。
如圖所示,當后蓋103連接到后殼體102時,后殼體102的側(cè)表面部分地暴露。在一些情況下,在連接時,后殼體102也可被后蓋103完全遮蔽。在一些實施方式中,后蓋103可包括開口以用于將相機121b或音頻輸出模塊152b暴露于外。
殼體101、102、103可通過合成樹脂的注塑成型來形成,或者可由例如不銹鋼(STS)、鋁(Al)、鈦(Ti)等的金屬形成。作為多個殼體形成用于容納組件的內(nèi)部空間的示例的另選方式,移動終端100可被配置為使得一個殼體形成該內(nèi)部空間。在此示例中,具有單一體的移動終端100被形成為使得合成樹脂或金屬從側(cè)表面延伸至 后表面。
如果需要,移動終端100可包括用于防止水進入終端主體中的防水單元。例如,防水單元可包括位于窗口151a與前殼體101之間、前殼體101與后殼體102之間、或者后殼體102與后蓋103之間的防水構(gòu)件,以在那些殼體連接時將內(nèi)部空間密封。
圖1B和圖1C描繪了布置在移動終端上的特定組件。然而,另選布置方式也是可能的并且在本公開的教導內(nèi)。一些組件可被省略或重新布置。例如,第一操縱單元123a可設(shè)置在終端主體的另一表面上,第二音頻輸出模塊152b可設(shè)置在終端主體的側(cè)表面上。
顯示單元151輸出在移動終端100中處理的信息。顯示單元151可利用一個或更多個合適的顯示裝置來實現(xiàn)。這些合適的顯示裝置的示例包括液晶顯示器(LCD)、薄膜晶體管-液晶顯示器(TFT-LCD)、有機發(fā)光二極管(OLED)、柔性顯示器、3維(3D)顯示器、電子墨水顯示器及其組合。
可利用兩個顯示裝置(可實現(xiàn)相同或不同的顯示技術(shù))來實現(xiàn)顯示單元151。例如,多個顯示單元151可被布置在一側(cè),彼此間隔開或者這些裝置可被集成,或者這些裝置可被布置在不同的表面上。
顯示單元151還可包括觸摸傳感器,其感測在顯示單元處接收的觸摸輸入。當觸摸被輸入到顯示單元151時,觸摸傳感器可被配置為感測該觸摸,并且控制器180(例如)可生成與該觸摸對應(yīng)的控制命令或其它信號。以觸摸方式輸入的內(nèi)容可以是文本或數(shù)值或者是可按照各種模式指示或指定的菜單項。
觸摸傳感器可按照設(shè)置在窗口151a與窗口151a的后表面上的顯示器之間的具有觸摸圖案的膜或者直接圖案化在窗口151a的后表面上的金屬絲的形式來配置。另選地,觸摸傳感器可與顯示器一體地形成。例如,觸摸傳感器可設(shè)置在顯示器的基板上或者顯示器內(nèi)。顯示單元151還可與觸摸傳感器一起形成觸摸屏。這里,觸摸屏可用作用戶輸入單元123(參見圖1A)。因此,觸摸屏可代替第一操縱單元123a的至少一些功能。
第一音頻輸出模塊152a可按照揚聲器的形式來實現(xiàn)以輸出語音音頻、報警音、多媒體音頻再現(xiàn)等。顯示單元151的窗口151a通常將包括孔徑以允許由第一音頻輸出模塊152a生成的音頻通過。一個另選方式是允許音頻沿著結(jié)構(gòu)體之間的裝配間隙(例如,窗口151a與前殼體101之間的間隙)來釋放。在這種情況下,從外觀上看, 獨立地形成以輸出音頻音的孔不可見或者被隱藏,從而進一步簡化移動終端100的外觀和制造。
光學輸出模塊154可被配置為輸出用于指示事件發(fā)生的光。這些事件的示例包括消息接收、呼叫信號接收、未接呼叫、鬧鐘、日程提醒、電子郵件接收、通過應(yīng)用的信息接收等。當用戶已查看發(fā)生的事件時,控制器可控制光學輸出模塊154停止光輸出。
第一相機121a可處理由圖像傳感器在拍攝模式或者視頻呼叫模式下獲得的圖像幀(例如,靜止圖像或運動圖像)。然后,經(jīng)處理的圖像幀可被顯示在顯示單元151上或者被存儲在存儲器170中。
第一操縱單元123a和第二操縱單元123b是用戶輸入單元123的示例,其可由用戶操縱以提供對移動終端100的輸入。第一操縱單元123a和第二操縱單元123b還可被共同稱作操縱部分,并且可采用允許用戶執(zhí)行諸如觸摸、推按、滾動等的操縱的任何觸覺方法。第一操縱單元123a和第二操縱單元123b還可采用允許用戶執(zhí)行諸如接近觸摸、懸停等的操縱的任何非觸覺方法。
圖1B將第一操縱單元123a示出為觸摸鍵,但可能的另選方式包括機械鍵、按鍵、觸摸鍵及其組合。在第一操縱單元123a和第二操縱單元123b處接收的輸入可按照各種方式來使用。例如,用戶可使用第一操縱單元123a來提供對菜單、主屏鍵、取消、搜索等的輸入,用戶可使用第二操縱單元123b來提供輸入以控制從第一音頻輸出模塊152a或第二音頻輸出模塊152b輸出的音量、切換為顯示單元151的觸摸識別模式等。
作為用戶輸入單元123的另一示例,后輸入單元可被設(shè)置在終端主體的后表面上。用戶可操縱后輸入單元以提供對移動終端100的輸入。所述輸入可按照各種不同的方式來使用。例如,用戶可使用后輸入單元來提供輸入以進行電源開/關(guān)、開始、結(jié)束、滾動、控制從第一音頻輸出模塊152a或第二音頻輸出模塊152b輸出的音量、切換為顯示單元151的觸摸識別模式等。后輸入單元可被配置為允許觸摸輸入、推按輸入或其組合。
后輸入單元可被設(shè)置為在終端主體的厚度方向上與前側(cè)的顯示單元151交疊。作為一個示例,后輸入單元可被設(shè)置在終端主體的后側(cè)的上端部,使得當用戶用一只手抓握終端主體時用戶可利用食指容易地操縱后輸入單元。另選地,后輸入單元可至多 被設(shè)置在終端主體的后側(cè)的任何位置。
包括后輸入單元的實施方式可將第一操縱單元123a的一些或全部功能實現(xiàn)在后輸入單元中。因此,在從前側(cè)省略第一操縱單元123a的情況下,顯示單元151可具有更大的屏幕。作為另一另選方式,移動終端100可包括掃描用戶的指紋的手指掃描傳感器。然后控制器180可使用由手指掃描傳感器感測到的指紋信息作為驗證程序的一部分。手指掃描傳感器也可被安裝在顯示單元151中或?qū)崿F(xiàn)在用戶輸入單元123中。
麥克風122被示出為設(shè)置在移動終端100的端部,但其它位置也是可能的。如果需要,可實現(xiàn)多個麥克風,這種布置方式允許接收立體聲。
接口單元160可用作允許移動終端100與外部裝置進行接口的路徑。例如,接口單元160可包括用于連接到另一裝置(例如,耳機、外部揚聲器等)的連接端子、用于近場通信的端口(例如,紅外數(shù)據(jù)協(xié)會(IrDA)端口、藍牙端口、無線LAN端口等)、或者用于向移動終端100供電的電源端子中的一個或更多個。接口單元160可按照用于容納外部卡(例如,訂戶標識模塊(SIM)、用戶標識模塊(UIM)、或者用于信息存儲的存儲卡)的插槽的形式來實現(xiàn)。
第二相機121b被示出為設(shè)置在終端主體的后側(cè),并且其圖像拍攝方向基本上與第一相機單元121a的圖像拍攝方向相反。如果需要,可另選地將第二相機121b設(shè)置在其它位置或者使其能夠移動,以便具有不同于所示圖像拍攝方向的圖像拍攝方向。
第二相機121b可包括沿著至少一條線布置的多個透鏡。所述多個透鏡還可按照矩陣配置來布置。這些相機可被稱作“陣列相機”。當?shù)诙鄼C121b被實現(xiàn)為陣列相機時,可利用多個透鏡以各種方式拍攝圖像,并且圖像具有更好的質(zhì)量。
如圖1C所示,閃光燈124被示出為與第二相機121b相鄰。當利用相機121b拍攝目標的圖像時,閃光燈124可對目標進行照明。如圖1C所示,可在終端主體上設(shè)置第二音頻輸出模塊152b。第二音頻輸出模塊152b可結(jié)合第一音頻輸出模塊152a實現(xiàn)立體聲功能,并且還可用于實現(xiàn)呼叫通信的免提模式。
用于無線通信的至少一個天線可設(shè)置在終端主體上。所述天線可安裝在終端主體中或者可由殼體形成。例如,構(gòu)成廣播接收模塊111的一部分的天線可收縮到終端主體中。另選地,天線可利用附著到后蓋103的內(nèi)表面的膜或者包含導電材料的殼體來形成。
用于向移動終端100供電的電源單元190可包括電池191,該電池191被安裝在終端主體中或者可拆卸地連接到終端主體的外部。電池191可經(jīng)由連接到接口單元160的電源線來接收電力。另外,電池191可利用無線充電器以無線方式再充電。無線充電可通過磁感應(yīng)或電磁共振來實現(xiàn)。
后蓋103被示出為連接到后殼體102以用于遮蔽電池191,以防止電池191分離并保護電池191免受外部沖擊或異物的影響。當電池191能夠從終端主體拆卸時,后殼體103可以可拆卸地連接到后殼體102。
在移動終端100上可另外設(shè)置用于保護外觀或者輔助或擴展移動終端100的功能的附件。作為附件的一個示例,可設(shè)置用于覆蓋或容納移動終端100的至少一個表面的蓋或袋。所述蓋或袋可與顯示單元151協(xié)作以擴展移動終端100的功能。附件的另一示例是用于輔助或擴展對觸摸屏的觸摸輸入的觸摸筆。
圖2是根據(jù)本發(fā)明的另選實施方式的可變形移動終端的概念圖。在該圖中,移動終端200被示出為具有顯示單元251,該顯示單元251是能夠通過外力而變形的一種顯示器。包括顯示單元251和移動終端200的其它組件的這種變形可包括彎曲、折曲、折疊、扭曲、卷曲及其組合的任一種??勺冃物@示單元251也可被稱作“柔性顯示單元”。在一些實現(xiàn)方式中,柔性顯示單元251可包括一般柔性顯示器、電子紙(e-paper)及其組合。通常,移動終端200可被配置為包括與圖1A至圖1C的移動終端100相同或相似的特征。
移動終端200的柔性顯示器通常形成為重量輕、不易碎的顯示器,其仍呈現(xiàn)出傳統(tǒng)平板顯示器的特性,但是作為替代在可如前所述變形的柔性基板上制造。術(shù)語電子紙可用于表示采用一般墨水的特性的顯示技術(shù),并且與傳統(tǒng)平板顯示器的不同之處在于使用反射光。電子紙通常被理解為利用扭轉(zhuǎn)向列球(twist ball)或者利用囊(capsule)經(jīng)由電泳來改變顯示的信息。
當柔性顯示單元251沒有變形(例如,處于具有無窮大曲率半徑的狀態(tài)下,稱作第一狀態(tài))時,柔性顯示單元251的顯示區(qū)域包括大致平坦表面。當柔性顯示單元251通過外力而從第一狀態(tài)變形(例如,具有有限曲率半徑的狀態(tài),稱作第二狀態(tài))時,顯示區(qū)域可變?yōu)榍婊驈澱郾砻?。如圖所示,在第二狀態(tài)下顯示的信息可以是在曲面上輸出的視覺信息。所述視覺信息可被實現(xiàn)為使得按照矩陣配置排列的各個單元像素(子像素)的光發(fā)射被獨立地控制。單元像素是指用于表示一種顏色的基本單元。
根據(jù)一個另選實施方式,代替平坦狀態(tài),柔性顯示單元251的第一狀態(tài)可以是彎曲狀態(tài)(例如,從上至下或者從右至左彎曲的狀態(tài))。在此實施方式中,當外力施加于柔性顯示單元251時,柔性顯示單元251可轉(zhuǎn)變?yōu)榈诙顟B(tài),使得柔性顯示單元變形成平坦狀態(tài)(或較不彎曲的狀態(tài))或者更彎曲的狀態(tài)。
如果需要,柔性顯示單元251可利用與顯示器組合的觸摸傳感器來實現(xiàn)柔性觸摸屏。當在柔性觸摸屏處接收到觸摸時,控制器180可執(zhí)行與觸摸輸入對應(yīng)的特定控制。通常,柔性觸摸屏被配置為在處于第一狀態(tài)和第二狀態(tài)下的同時感測觸摸和其它輸入。一個選擇是將移動終端200配置為包括感測柔性顯示單元251的變形的變形傳感器。該變形傳感器可被包括在感測單元140中。
變形傳感器可被設(shè)置在柔性顯示單元251或者殼體201中以感測與柔性顯示單元251的變形有關(guān)的信息。這種與柔性顯示單元251的變形有關(guān)的信息的示例可以是變形方向、變形程度、變形位置、變形時間量、變形的柔性顯示單元251恢復的加速度等。其它可能主要包括可響應(yīng)于柔性顯示單元的彎曲感測到的或者在柔性顯示單元251轉(zhuǎn)變?yōu)榈谝粻顟B(tài)和第二狀態(tài)或者存在于第一狀態(tài)和第二狀態(tài)下的同時感測到的任何類型的信息。
在一些實施方式中,控制器180或其它組件可基于與柔性顯示單元251的變形有關(guān)的信息來改變顯示在柔性顯示單元251上的信息或者生成用于控制移動終端200的功能的控制信號。這種信息通常由變形傳感器來感測。移動終端200被示出為具有殼體201以用于容納柔性顯示單元251??紤]到柔性顯示單元251的特性,殼體201可隨柔性顯示單元251一起變形。
考慮到柔性顯示單元251的特性,設(shè)置在移動終端200中的電池也可與柔性顯示單元261協(xié)作地變形。實現(xiàn)這種電池的一種技術(shù)是使用層疊電池單元的層疊和折疊方法。
柔性顯示單元251的變形不限于通過外力來執(zhí)行。例如,柔性顯示單元251可通過用戶命令、應(yīng)用命令等而從第一狀態(tài)變形為第二狀態(tài)。根據(jù)另外的實施方式,移動終端可被配置成能夠穿戴在人體上的裝置。這些裝置超出用戶使用其手來抓握移動終端的常規(guī)技術(shù)。可穿戴裝置的示例包括智能手表、智能眼鏡、頭戴式顯示器(HMD)等。
典型的可穿戴裝置可與另一移動終端100交換數(shù)據(jù)(或者協(xié)作)。在這種裝置中, 可穿戴裝置通常具有比協(xié)作移動終端少的功能。例如,移動終端100的短距離通信模塊114可感測或識別足夠靠近以與移動終端通信的可穿戴裝置。另外,當所感測的可穿戴裝置是被驗證為與移動終端100通信的裝置時,控制器180可經(jīng)由例如短距離通信模塊114將移動終端100中處理的數(shù)據(jù)發(fā)送給可穿戴裝置。因此,可穿戴裝置的用戶可在可穿戴裝置上使用在移動終端100中處理的數(shù)據(jù)。例如,當在移動終端100中接收到呼叫時,用戶可利用可穿戴裝置來應(yīng)答該呼叫。另外,當在移動終端100中接收到消息時,用戶可利用可穿戴裝置來查看所接收到的消息。
圖3是示出根據(jù)另一示例性實施方式的手表型移動終端300的一個示例的立體圖。如圖3所示,手表型移動終端300包括具有顯示單元351的主體301以及連接到主體301從而能夠穿戴在腕部上的表帶302。通常,移動終端300可被配置為包括與圖1A至圖1C的移動終端100相同或相似的特征。
主體301可包括具有特定外觀的殼體。如圖所示,所述殼體可包括第一殼體301a和第二殼體301b,這兩個殼體協(xié)作地限定用于容納各種電子組件的內(nèi)部空間。其它配置也是可能的。例如,另選地,可實現(xiàn)單個殼體,這種殼體被配置為限定內(nèi)部空間,從而利用單一體來實現(xiàn)移動終端300。
手表型移動終端300可執(zhí)行無線通信,用于無線通信的天線可安裝在主體301中。該天線可利用殼體來延伸其功能。例如,包含導電材料的殼體可電連接到天線,以延伸接地面積或輻射面積。
顯示單元351被示出為位于主體301的前側(cè),使得用戶可看到顯示的信息。在一些實施方式中,顯示單元351包括觸摸傳感器,使得顯示單元可用作觸摸屏。如圖所示,窗口351a被設(shè)置在第一殼體301a上,以與第一殼體301a一起形成終端主體的前表面。
圖示的實施方式包括設(shè)置在主體301上的音頻輸出模塊352、相機321、麥克風322和用戶輸入單元323。當顯示單元351被實現(xiàn)為觸摸屏時,附加功能鍵可被最小化或消除。例如,當實現(xiàn)觸摸屏時,用戶輸入單元323可被省略。
表帶302通常穿戴在用戶的腕部上,并且可由柔性材料制成以方便裝置的穿戴。作為一個示例,表帶302可由毛皮、橡膠、硅、合成樹脂等制成。表帶302還可被配置為可從主體301拆卸。因此,可根據(jù)用戶的偏好來用各種類型的表帶替換表帶302。
在一個配置中,表帶302可用于延伸天線的性能。例如,表帶中可包括接地延伸 部分,該接地延伸部分電連接到天線以延伸接地面積。表帶302可包括系緊件302a。系緊件302a可被實現(xiàn)為扣環(huán)型、按扣鉤結(jié)構(gòu)、型等,并且包括柔性部分或材料。附圖示出利用扣環(huán)實現(xiàn)系緊件302a的示例。
圖4是示出根據(jù)另一示例性實施方式的眼鏡型移動終端400的一個示例的立體圖。眼鏡型移動終端400可穿戴在人體的頭上,并且設(shè)置有框架(殼體、外殼等)??蚣芸捎扇嵝圆牧现瞥梢员阌诖┐鳌R苿咏K端400的框架被示出為具有可由相同或不同的材料制成的第一框架401和第二框架402。通常,移動終端400可被配置為包括與圖1A至圖1C的移動終端100相同或相似的特征。
框架可被支撐于頭上,并且限定用于安裝各種組件的空間。如圖所示,諸如控制模塊480、音頻輸出模塊452等的電子組件可被安裝到框架部分。另外,用于覆蓋左眼和右眼中的任一者或二者的透鏡403可按照可拆卸方式連接到框架部分。
控制模塊480控制設(shè)置在移動終端400中的各種電子組件??刂颇K480可被理解為與上述控制器180對應(yīng)的組件。圖4示出了控制模塊480被安裝在頭一側(cè)的框架部分中,但是其它位置也是可能的。
顯示單元451可被實現(xiàn)為頭戴式顯示器(HMD)。HMD表示顯示器被安裝到頭部以直接在用戶的眼睛前面顯示圖像的顯示技術(shù)。為了在用戶穿戴眼鏡型移動終端400時直接在用戶的眼睛前面提供圖像,顯示單元451可被設(shè)置為與左眼和右眼中的任一者或二者對應(yīng)。圖4示出了顯示單元451被設(shè)置在與右眼對應(yīng)的部分上以輸出用戶的右眼可看到的圖像。
顯示單元451可利用棱鏡將圖像投影到用戶的眼睛上。另外,該棱鏡可由光學透明材料形成,使得用戶可看到投影的圖像以及用戶前面的一般視野(用戶通過眼睛看到的范圍)二者。這樣,通過顯示單元451輸出的圖像可在與一般視野交疊的同時被看到。移動終端400可通過利用顯示器將虛擬圖像疊加在真實圖像或者背景上來提供增強現(xiàn)實(AR)。
相機421可與左眼和右眼中的任一者或二者相鄰以拍攝圖像。由于相機421與眼睛相鄰,所以相機421可獲取用戶當前正在看的場景。相機421可設(shè)置在移動終端的任何位置處。在一些實施方式中,可使用多個相機421。這樣的多個相機421可用于獲取立體圖像。
眼鏡型移動終端400可包括用戶輸入單元423a和423b,其可各自由用戶操縱以 提供輸入。用戶輸入單元423a和423b可采用允許經(jīng)由觸覺輸入來輸入的技術(shù)。典型的觸覺輸入包括觸摸、推按等。用戶輸入單元423a和423b被示出為當其位于框架部分和控制模塊480上時分別能夠按照推按方式和觸摸方式來操作。
如果需要,移動終端400可包括將輸入聲音處理成電音頻數(shù)據(jù)的麥克風以及用于輸出音頻的音頻輸出模塊452。音頻輸出模塊452可被配置為按照一般音頻輸出方式或者骨傳導方式來生成音頻。當音頻輸出模塊452按照骨傳導方式來實現(xiàn)時,音頻輸出模塊452可在用戶穿戴移動終端400時被緊密地附著到頭部,并且振動用戶的顱骨以傳遞聲音。
現(xiàn)在更詳細地描述可隨所描述的各種移動終端一起操作的通信系統(tǒng)。這種通信系統(tǒng)可被配置為使用各種不同的空中接口和/或物理層中的任一個。由通信系統(tǒng)使用的這些空中接口的示例包括頻分多址(FDMA)、時分多址(TDMA)、碼分多址(CDMA)、通用移動電信系統(tǒng)(UMTS)(包括長期演進(LTE)、LTE-A(高級長期演進))、全球移動通信系統(tǒng)(GSM)等。
僅作為非限制性示例,進一步的描述將涉及CDMA通信系統(tǒng),但這些教導同樣適用于包括CDMA無線通信系統(tǒng)以及OFDM(正交頻分復用)無線通信系統(tǒng)的其它系統(tǒng)類型。CDMA無線通信系統(tǒng)通常包括一個或更多個移動終端(MT或用戶設(shè)備、UE)100、一個或更多個基站(BS、NodeB或演進NodeB)、一個或更多個基站控制器(BSC)以及移動交換中心(MSC)。MSC被配置為與傳統(tǒng)公共電話交換網(wǎng)絡(luò)(PSTN)和BSC接口連接。BSC經(jīng)由回程線路連接到基站?;爻叹€路可根據(jù)包括(例如)E1/T1、ATM、IP、PPP、幀中繼、HDSL、ADSL或xDSL的多種已知接口中的任一種來配置。因此,CDMA無線通信系統(tǒng)中可包括多個BSC。
各個基站可包括一個或更多個扇區(qū),各個扇區(qū)具有全向天線或者指向徑向背離基站的特定方向的天線。另選地,各個扇區(qū)可包括兩個或更多個不同的天線。各個基站可被配置為支持多個頻率指派,各個頻率指派具有特定頻譜(例如,1.25MHz、5MHz等)。
扇區(qū)與頻率指派的交叉點可被稱作CDMA信道?;疽部杀环Q作基站收發(fā)機子系統(tǒng)(BTS)。在一些情況下,術(shù)語“基站”可用于共同指代BSC以及一個或更多個基站。基站還可被稱作“小區(qū)站點”。另選地,給定基站的各個扇區(qū)可被稱作小區(qū)站點。
廣播發(fā)送機(BT)向在系統(tǒng)內(nèi)操作的移動終端100發(fā)送廣播信號。通常在移動 終端100內(nèi)部配置圖1A的廣播接收模塊111以接收由BT發(fā)送的廣播信號。
例如,用于對移動終端100的位置進行定位的全球定位系統(tǒng)(GPS)衛(wèi)星可與CDMA無線通信系統(tǒng)協(xié)作。可利用比兩個衛(wèi)星更多或更少的衛(wèi)星來獲得有用位置信息。將理解,另選地,可實現(xiàn)其它類型的位置檢測技術(shù)(即,除了GPS定位技術(shù)以外或代替GPS定位技術(shù)可使用的定位技術(shù))。如果需要,至少一個GPS衛(wèi)星可另選地或另外地被配置為提供衛(wèi)星DMB傳輸。
位置信息模塊115通常被配置為檢測、計算或者以其它方式標識移動終端的位置。例如,位置信息模塊115可包括全球定位系統(tǒng)(GPS)模塊、Wi-Fi模塊或這二者。如果需要,位置信息模塊115可另選地或另外地與無線通信單元110的任何其它模塊一起作用,以獲得與移動終端的位置有關(guān)的數(shù)據(jù)。
典型的GPS模塊115可測量準確時間以及距三個或更多個衛(wèi)星的距離,并且基于所測量的時間和距離根據(jù)三角法準確地計算移動終端的當前位置。可使用從三個衛(wèi)星獲取距離和時間信息并且利用單個衛(wèi)星執(zhí)行誤差校正的方法。具體地講,除了緯度、經(jīng)度和高度值的位置以外,GPS模塊還可根據(jù)從衛(wèi)星接收的位置信息獲取準確時間以及三維速度信息。
另外,GPS模塊可實時地獲取速度信息,以計算當前位置。通常,當移動終端位于衛(wèi)星信號的盲點處(例如,位于室內(nèi)空間)時,可能損害測量的位置的準確性。為了使這些盲點的影響最小化,可使用諸如Wi-Fi定位系統(tǒng)(WPS)的另選或補充位置技術(shù)。
Wi-Fi定位系統(tǒng)(WPS)是指使用Wi-Fi作為跟蹤移動終端100的位置的技術(shù)的基于無線局域網(wǎng)(WLAN)的位置確定技術(shù)。該技術(shù)通常包括在移動終端100中使用Wi-Fi模塊,并且無線接入點與該Wi-Fi模塊通信。Wi-Fi定位系統(tǒng)可包括Wi-Fi位置確定服務(wù)器、移動終端、連接到移動終端的無線接入點(AP)以及存儲有無線AP信息的數(shù)據(jù)庫。
連接到無線AP的移動終端可將位置信息請求消息發(fā)送給Wi-Fi位置確定服務(wù)器。Wi-Fi位置確定服務(wù)器基于移動終端100的位置信息請求消息(或信號)提取連接到移動終端100的無線AP的信息。無線AP的信息可通過移動終端100發(fā)送至Wi-Fi位置確定服務(wù)器,或者可從無線AP發(fā)送至Wi-Fi位置確定服務(wù)器。
基于移動終端100的位置信息請求消息提取的無線AP的信息可包括媒體訪問控 制(MAC)地址、服務(wù)集標識(SSID)、接收信號強度指示符(RSSI)、參考信號接收功率(RSRP)、參考信號接收質(zhì)量(RSRQ)、信道信息、隱私、網(wǎng)絡(luò)類型、信號強度、噪聲強度等中的一個或更多個。
Wi-Fi位置確定服務(wù)器可如上所述接收連接到移動終端100的無線AP的信息,并且可從預(yù)先建立的數(shù)據(jù)庫提取與連接到移動終端的無線AP對應(yīng)的無線AP信息。存儲在數(shù)據(jù)庫中的任何無線AP的信息可以是諸如MAC地址、SSID、RSSI、信道信息、隱私、網(wǎng)絡(luò)類型、緯度和經(jīng)度坐標、無線AP所在的建筑物、樓層號、詳細室內(nèi)位置信息(可用的GPS坐標)、AP所有者的地址、電話號碼等的信息。為了在位置確定處理期間去除利用移動AP或非法MAC地址提供的無線AP,Wi-Fi位置確定服務(wù)器可按照高RSSI的順序僅提取預(yù)定數(shù)量的無線AP信息。
然后,Wi-Fi位置確定服務(wù)器可利用從數(shù)據(jù)庫提取的至少一個無線AP信息來提取(分析)移動終端100的位置信息。
提取(分析)移動終端100的位置信息的方法可包括小區(qū)ID方法、指紋方法、三角方法、界標方法等。小區(qū)ID方法用于確定由移動終端收集的周邊無線AP信息當中的具有最大信號強度的無線AP的位置,作為移動終端的位置。小區(qū)ID方法是復雜度最小,不需要附加成本,并且可快速獲取位置信息的實現(xiàn)方式。然而,在小區(qū)ID方法中,當無線AP的安裝密度較低時,定位精度可能落于期望的閾值以下。
指紋方法用于通過從服務(wù)區(qū)域選擇參考位置來收集信號強度信息,并且基于所收集的信息利用從移動終端發(fā)送來的信號強度信息跟蹤移動終端的位置。為了使用指紋方法,常見的是將無線電信號的特性以數(shù)據(jù)庫的形式預(yù)存儲。
三角方法用于基于至少三個無線AP的坐標與移動終端之間的距離來計算移動終端的位置。為了測量移動終端與無線AP之間的距離,可將信號強度轉(zhuǎn)換為距離信息,針對發(fā)送的無線信號可采取到達時間(ToA)、到達時間差(TDoA)、到達角(AoA)等。
界標方法用于利用已知的界標發(fā)送機來測量移動終端的位置。除了這些定位方法以外,可使用各種算法來提取(分析)移動終端的位置信息。這些提取的位置信息可通過Wi-Fi位置確定服務(wù)器發(fā)送給移動終端100,從而獲取移動終端100的位置信息。
移動終端100可通過連接到至少一個無線AP來獲取位置信息。獲取移動終端100的位置信息所需的無線AP的數(shù)量可根據(jù)移動終端100所在的無線通信環(huán)境而不同地 改變。
如先前參照圖1A描述的,移動終端可被配置為包括諸如BluetoothTM、射頻識別(RFID)、紅外數(shù)據(jù)協(xié)會(IrDA)、超寬帶(UWB)、ZigBee、近場通信(NFC)、無線USB(無線通用串行總線)等的短距離通信技術(shù)。
設(shè)置在移動終端處的典型NFC模塊支持短距離無線通信,短距離無線通信是移動終端之間的不可接觸型通信,通常發(fā)生在大約10cm內(nèi)。NFC模塊可在卡模式、讀取器模式或P2P模式中的一種模式下操作。移動終端100還可包括用于存儲卡信息的安全模塊,以便NFC模塊在卡模式下操作。該安全模塊可以是諸如通用集成電路卡(UICC)(例如,訂戶標識模塊(SIM)或通用SIM(USIM))、安全微型SD和記憶棒(sticker)的物理介質(zhì)、或者嵌入移動終端中的邏輯介質(zhì)(例如,嵌入式安全元件(SE))??稍贜FC模塊與安全模塊之間執(zhí)行基于單線協(xié)議(SWP)的數(shù)據(jù)交換。
當NFC模塊在卡模式下操作時,移動終端可將一般IC卡上的卡信息發(fā)送至外部。更具體地講,如果具有關(guān)于支付卡(例如,信用卡或公交卡)的卡信息的移動終端靠近讀卡器,則可執(zhí)行短距離移動支付。又如,如果存儲有關(guān)于門禁卡的卡信息的移動終端靠近門禁卡讀取器,則進入準許過程可以開始。諸如信用卡、交通卡或門禁卡的卡可按照小應(yīng)用(applet)的形式包括在安全模塊中,安全模塊可存儲關(guān)于安裝在其中的卡的卡信息。用于支付卡的卡信息可包括卡號、余額和使用歷史等中的任何信息。門禁卡的卡信息可包括用戶姓名、用戶編號(例如,學號或員工編號)、進入歷史等中的任何信息。
當NFC模塊在讀取器模式下操作時,移動終端可從外部標簽讀取數(shù)據(jù)。由移動終端從外部標簽接收的數(shù)據(jù)可被編碼為由NFC論壇定義的NFC數(shù)據(jù)交換格式。NFC論壇總體上定義了四種記錄類型。更具體地講,NFC論壇定義了諸如智能海報、文本、統(tǒng)一資源標識符(URI)和總體控制的四種記錄類型定義(RTD)。如果從外部標簽接收的數(shù)據(jù)是智能海報型,則控制器可執(zhí)行瀏覽器(例如,互聯(lián)網(wǎng)瀏覽器)。如果從外部標簽接收的數(shù)據(jù)是文本型,則控制器可執(zhí)行文本查看器。如果從外部標簽接收的數(shù)據(jù)是URI型,則控制器可執(zhí)行瀏覽器或發(fā)起呼叫。如果從外部標簽接收的數(shù)據(jù)是總體控制型,則控制器可根據(jù)控制內(nèi)容執(zhí)行適當操作。
在NFC模塊在P2P(對等)模式下操作的一些情況下,移動終端可與另一移動終端執(zhí)行P2P通信。在這種情況下,邏輯鏈路控制協(xié)議(LLCP)可應(yīng)用于P2P通信。 為了P2P通信,可在移動終端與另一移動終端之間生成連接。該連接可被分類為在交換一個分組之后結(jié)束的無連接模式以及連續(xù)交換分組的面向連接模式。對于典型的P2P通信,可交換諸如電子型名片、地址信息、數(shù)字照片和URL的數(shù)據(jù)、藍牙連接、Wi-Fi連接的設(shè)置參數(shù)等。可在交換小容量的數(shù)據(jù)時有效地使用P2P模式,因為NFC通信的可用距離相對較短。
此外,盡管本發(fā)明的實施方式在移動終端例如對應(yīng)于如圖1A至圖1C所示的移動終端100的情況下描述,但是根據(jù)實施方式,移動終端可對應(yīng)于圖2中的移動終端200、圖3中的移動終端300和圖4中的移動終端400中的至少一個。
根據(jù)本發(fā)明的一個實施方式,兩個移動終端100中的指定一個提供VR圖像,另一移動終端100可接收VR圖像。為了清晰,提供VR圖像的移動終端100被命名為第一移動終端100或者發(fā)送方移動終端100,接收VR圖像的移動終端100被命名為第二移動終端100和接收方移動終端100。
在這種情況下,VR圖像對應(yīng)于視角等于或大于預(yù)設(shè)度數(shù)的圖像。另選地,根據(jù)實施方式,VR圖像可對應(yīng)于具有等于或大于預(yù)設(shè)度數(shù)的視角以及用戶所識別(感知)的深度的圖像。所述深度可按照VR圖像被渲染為三維圖像的方式通過用戶的眼睛來識別(感知)。VR圖像可對應(yīng)于靜止圖像和視頻圖像中的一個。在一些情況下,VR圖像可被命名為VR內(nèi)容。此外,VR圖像的視角通常大于內(nèi)置于移動終端100中的相機121的視角,并且可等于或大于例如110度。
接收方移動終端100可在被安裝在單獨的VR裝置中的情況下將VR圖像顯示在顯示單元151上。當VR裝置中不包括顯示單元時,接收方移動終端100可被直接安裝在VR裝置中。并且,接收方移動終端100可經(jīng)由有線/無線方式連接到VR裝置。
圖5是示出根據(jù)本發(fā)明的一個實施方式的連接到接收方移動終端的VR裝置的一個示例的示圖。根據(jù)本發(fā)明的一個實施方式,VR裝置500包括第一殼體510和第二殼體520。VR裝置500還可包括要穿戴在用戶的頭上的箍帶。
第一殼體510可至少部分地與第二殼體520分離。第一殼體510可在內(nèi)部包括能夠裝載移動終端100的裝載部。移動終端100可被布置為使得移動終端100的后側(cè)靠近第一殼體510,移動終端100的前側(cè)靠近第二殼體520。在移動終端100被安裝在VR裝置500中的情況下,第一殼體510可具有用于暴露移動終端100的后相機121的孔511。根據(jù)實施方式,第一殼體510包括用于連接移動終端100的端口。
第二殼體520是當用戶穿戴VR裝置500時與用戶的頭部觸摸的部分。第二殼體520包括當用戶將VR裝置500穿戴在頭上時與用戶的眼睛對應(yīng)的透鏡521。例如,透鏡521可通過包括魚眼透鏡、廣角透鏡等來實現(xiàn)以便增強用戶的視野。
根據(jù)實施方式,第二殼體520可在當用戶穿戴VR裝置500時與用戶的頭部觸摸的部分上具有接近傳感器。利用該接近傳感器,VR裝置500可確定用戶是否穿戴VR裝置500。此外,基于箍帶是否被拉扯以及拉扯箍帶的強度,VR裝置500可確定用戶是否穿戴VR裝置500。
VR裝置500包括感測單元,其包含陀螺儀傳感器、運動傳感器等。VR裝置500可基于感測單元所提供的感測數(shù)據(jù)來確定穿戴VR裝置500的用戶的頭部的移動、位置或者旋轉(zhuǎn)以及移動、位置或者旋轉(zhuǎn)的程度。
此外,根據(jù)實施方式,VR裝置500包括用于跟蹤穿戴VR裝置500的用戶的眼睛的眼睛跟蹤模塊。例如,眼睛跟蹤模塊包括用于獲得用戶的眼睛的圖像的相機以及用于在用戶的眼睛上輻射紅外光的IR傳感器。VR裝置500可基于相機所獲得的圖像通過所輻射的紅外光來確定顯示在用戶的眼睛中的點的位置和移動,從而跟蹤用戶的眼睛。
另外,根據(jù)實施方式,VR裝置500還可包括用于接收用戶命令的用戶接口單元。例如,用于接收用戶的觸摸命令的觸摸板可設(shè)置在第二殼體520的外側(cè)表面上。
圖6是示出根據(jù)本發(fā)明的一個實施方式的發(fā)送方移動終端將VR圖像提供給接收方移動終端的方法的一個示例的示圖。在本實施方式中,發(fā)送方移動終端100被稱作第一移動終端100A,接收方移動終端100被稱作第二移動終端100B。
參照圖6的(a),第一移動終端100A生成VR圖像。生成VR圖像的方法將稍后參照圖10以及后面的圖來詳細描述。第一移動終端100A將用于請求用于提供VR圖像的視頻呼叫的第一信號發(fā)送給第二移動終端100B。根據(jù)實施方式,可通過通信提供商服務(wù)器將第一信號從第一移動終端100A發(fā)送給第二移動終端100B。在將第一信號發(fā)送給第二移動終端100B之后,第一移動終端100A可生成VR圖像。
參照圖6的(b),第二移動終端100B可接收第一信號。如果第二移動終端100B的用戶從第一移動終端接收到用于提供VR圖像的視頻呼叫,則第二移動終端100B的用戶將第二移動終端100B安裝在VR裝置500中并且穿戴安裝了第二移動終端100B的VR裝置500。如果第二移動終端100B被完全安裝在VR裝置500中,則第 二移動終端100B可將用于連接視頻呼叫的第二信號發(fā)送給第一移動終端100A。另選地,根據(jù)實施方式,第二移動終端100B可緊接著許可連接請求之后將第二信號發(fā)送給第一移動終端100A。并且,在第二移動終端100B的用戶嘗試穿戴VR裝置500或者正在穿戴VR裝置500的情況下第二移動終端100B可在許可連接請求之后將第二信號發(fā)送給第一移動終端100A。
在以下情況下第二移動終端100B可確定第二移動終端100B被安裝在VR裝置500中。首先,通過接口單元160檢測到VR裝置500的連接。其次,從VR裝置500向第二移動終端100B發(fā)送預(yù)設(shè)信號。第三,從第二移動終端100B的用戶輸入預(yù)設(shè)命令。
如果從第二移動終端100B接收到第二信號,則第一移動終端可將所生成的VR圖像發(fā)送給第二移動終端100B。在這種情況下,第一移動終端100A將所生成的圖像轉(zhuǎn)換為左眼圖像和右眼圖像并且可將所轉(zhuǎn)換的VR圖像發(fā)送給第二移動終端100B。此外,第一移動終端100A也可將VR圖像的深度信息一起發(fā)送給第二移動終端。
第二移動終端100B將顯示單元151分割成左眼顯示區(qū)域和右眼顯示區(qū)域。此外,第二移動終端可通過左眼顯示區(qū)域輸出從第一移動終端100A發(fā)送的左眼VR圖像,并且通過右眼顯示區(qū)域輸出從第一移動終端100A發(fā)送的右眼VR圖像。在這種情況下,第二移動終端100B可基于從第一移動終端100A發(fā)送的深度信息使得VR圖像能夠通過穿戴VR裝置500的用戶的眼睛被識別為具有適當?shù)纳疃取?/p>
由于通過第二移動終端100B顯示的VR圖像被設(shè)置在VR裝置500中的透鏡521扭曲,所以第二移動終端的用戶的視野(FOV)可變寬。根據(jù)本實施方式,第二移動終端100B的用戶可體驗虛擬現(xiàn)實,就像實際上處于第一移動終端100A的用戶正在拍攝圖像的位置中一樣。
圖7是示出根據(jù)本發(fā)明的一個實施方式的用于通過VR裝置體驗虛擬現(xiàn)實的VR圖像的一個示例的示圖。為了利用VR裝置500來體驗虛擬現(xiàn)實,不使用一般圖像(或內(nèi)容)而是使用VR圖像(或VR內(nèi)容)。具體地講,為了使穿戴VR裝置500的用戶具有真實感和空間感,就像用戶實際上在一個位置一樣,使用視角近似等于或大于110度的VR圖像。通常,所述VR圖像可通過將利用多個相機從多個角度拍攝的照片彼此匹配來生成。另選地,利用具有魚眼透鏡或光學透鏡的相機拍攝的照片可用作VR圖像。
根據(jù)本發(fā)明的一個實施方式,提供了一種在沒有單獨的設(shè)備的情況下利用通過移動終端100的相機121拍攝的圖像生成VR圖像的方法。然而,用戶利用通過相機121獲得的圖像通過VR裝置500體驗虛擬現(xiàn)實受到限制僅是因為內(nèi)置于移動終端100中的相機121不具有寬視角。因此,優(yōu)選的是,利用移動終端100的相機121生成視角等于或大于預(yù)設(shè)度數(shù)的VR圖像。
圖8是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端將VR圖像發(fā)送給第二移動終端的方法的一個示例的示圖。如前面參照圖6的描述中所提及的,根據(jù)本發(fā)明的一個實施方式,第一移動終端100A將VR圖像發(fā)送給第二移動終端100B。在這種情況下,第一移動終端100A可轉(zhuǎn)換VR圖像,然后將所轉(zhuǎn)換的VR圖像發(fā)送給第二移動終端100B,以便于使得穿戴安裝了第二移動終端100B的VR裝置500的用戶能夠通過三維效果體驗虛擬現(xiàn)實。
第一移動終端100A可將VR圖像810轉(zhuǎn)換為左眼VR圖像821和右眼VR圖像820,然后將所轉(zhuǎn)換的圖像821和822發(fā)送給第二移動終端100B。第一移動終端100A可將VR圖像810的深度信息一起發(fā)送給第二移動終端100B。
例如,當按照相機121的位置改變的方式拍攝圖像時,第一移動終端100A可利用包括在圖像中的彼此相同的對象之間的視差來提取深度信息。并且,第一移動終端100A可基于從設(shè)置在第一移動終端100A中的紅外傳感器輻射的信號是否延遲來提取深度信息。此外,第一移動終端100A可單獨地利用包括在第一移動終端100A中的深度相機來提取深度信息。
第二移動終端100B可基于深度信息適當?shù)厥箯牡谝灰苿咏K端100A發(fā)送來的VR圖像821和822偏移,然后通過顯示單元151輸出偏移的VR圖像821和822。另選地,第二移動終端100B可基于深度信息對從第一移動終端100A發(fā)送來的VR圖像821和822執(zhí)行渲染,然后通過顯示單元151輸出所渲染的VR圖像821和822。在第二移動終端100B中,左眼VR圖像821可被輸出給左眼顯示區(qū)域,右眼VR圖像822可被輸出給右眼顯示區(qū)域。穿戴VR裝置500的用戶可按照左眼VR圖像821和右眼VR圖像822彼此組合的方式根據(jù)聚焦的圖像的位置感覺到距離感。
接下來,圖9是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端將VR圖像發(fā)送給第二移動終端的方法的另一示例的示圖。如前面參照圖6的描述中所提及的,根據(jù)本發(fā)明的一個實施方式,第一移動終端100A將VR圖像發(fā)送給第二移動終端100B。
在本實施方式中,假設(shè)兩個相機121設(shè)置在第一移動終端100A中以便與用戶的雙眼之間的距離對應(yīng),并且分別利用這兩個相機121來生成VR圖像。第一移動終端100A將利用第一相機121獲得的第一VR圖像911以及利用第二相機121獲得的第二VR圖像912發(fā)送給第二移動終端100B。假設(shè)第一相機121被設(shè)置在第一移動終端100A中與用戶的左眼對應(yīng)的位置處,第二相機121被設(shè)置在第一移動終端100A中與用戶的右眼對應(yīng)的位置處。
第二移動終端100B可將從第一移動終端100A發(fā)送來的第一VR圖像911輸出給左眼顯示區(qū)域,將從第一移動終端100A發(fā)送來的第二VR圖像912輸出給右眼顯示區(qū)域。由于第一相機121和第二相機121按照上述兩個相機之間的距離對應(yīng)于用戶的雙眼之間的距離的方式設(shè)置,所以穿戴VR裝置500的用戶可從第一VR圖像911和第二VR圖像912感覺到距離感。
圖10是示出根據(jù)本發(fā)明的一個實施方式的將VR圖像從第一移動終端發(fā)送給第二移動終端的方法的一個示例的示圖。第一移動終端100A的控制器180通過無線通信單元110將請求用于提供VR圖像的視頻呼叫的第一信號發(fā)送給第二移動終端100B(S1010)。第一信號包括:呼叫信號,請求用于提供VR圖像的視頻呼叫;以及除呼叫信號以外的信號(例如,與文本消息對應(yīng)的信號),告知請求用于提供VR圖像的視頻呼叫。
如果第二移動終端100B的控制器180通過無線通信單元110檢測到第一信號,則第二移動終端100B的控制器180可輸出與第一信號對應(yīng)的數(shù)據(jù)。例如,第二移動終端100B的控制器180可將與第一信號對應(yīng)的視頻數(shù)據(jù)輸出給顯示單元151,將與第一信號對應(yīng)的音頻數(shù)據(jù)輸出在音頻輸出單元152上,并且將與第一信號對應(yīng)的振動數(shù)據(jù)輸出給觸覺模塊153。例如,當?shù)谝恍盘柊ê艚行盘枙r,第二移動終端100B的控制器180可在顯示單元151上顯示用于接收呼叫的畫面。
輸出給第二移動終端100B的顯示單元151的視頻數(shù)據(jù)包括用于指引第二移動終端100B的用戶穿戴VR裝置500的指引消息。第二移動終端100B的用戶將第二移動終端100B連接到VR裝置500,然后將VR裝置500穿戴在其頭上(S1020)。第二移動終端100B的控制器180可檢測到第二移動終端100B已連接到VR裝置500。例如,在以下情況下,第二移動終端100B的控制器180可檢測到第二移動終端100B已連接到VR裝置500。首先,檢測到第二移動終端100B的用戶在將第二移動終端 100B連接到VR裝置500之后輸入的預(yù)設(shè)信號。其次,通過接口單元160檢測到與VR裝置500的連接。第三,從VR裝置500接收到預(yù)設(shè)信號。
此外,第一移動終端100A的控制器180生成VR圖像(S1030)。在已將第一信號發(fā)送給第二移動終端100B之后,第一移動終端100A的控制器180可生成VR圖像。第一移動終端100A的控制器180可通過將通過相機121獲得的多個圖像彼此匹配來生成VR圖像。由于第二移動終端100B的用戶在僅利用相機121的視角體驗虛擬現(xiàn)實方面受到限制,所以應(yīng)該通過將利用相機121獲得的多個圖像彼此匹配來生成視角等于或大于預(yù)設(shè)度數(shù)的VR圖像。生成VR圖像的方法將參照圖12至圖16來更詳細地描述。
所生成的VR圖像包括通過相機121實時(或者在各個預(yù)設(shè)時間)獲得的動態(tài)圖像以及通過相機121獲得的靜態(tài)圖像。根據(jù)實施方式,動態(tài)圖像可被處理以具有由用戶識別的深度。如果檢測到第二移動終端100B連接到VR裝置500,則第二移動終端100B的控制器180可通過無線通信單元110將許可用于提供VR圖像的視頻呼叫的第二信號發(fā)送給第一移動終端100A(S1040)。第二信號包括指示第二移動終端100B已完全連接到VR裝置500的信息。
根據(jù)實施方式,第二移動終端100B可在VR裝置的安裝步驟(S1020)之前通過將指示用戶正在穿戴VR裝置500的信息包括在第二信號中來將第二信號發(fā)送給第一移動終端100A,而不管用于提供VR圖像的視頻呼叫的許可。在已接收第二信號或者發(fā)送第一信號之后,第一移動終端100A可生成VR圖像,然后轉(zhuǎn)換所生成的VR圖像。并且,第一移動終端100A可根據(jù)從第二移動終端100B接收到指示VR裝置安裝已完成的信號來將所轉(zhuǎn)換的VR圖像發(fā)送給第二移動終端100B。
如果第一信號包括呼叫信號,則第二信號包括許可用于提供VR圖像的視頻呼叫的信號。并且,如果第一信號包括除呼叫信號以外的預(yù)設(shè)信號,則第二信號包括請求用于提供VR圖像的視頻呼叫的信號。第一移動終端100A的控制器180根據(jù)第二信號將VR圖像轉(zhuǎn)換為左眼VR圖像和右眼VR圖像(S1050),然后通過無線通信單元110將所轉(zhuǎn)換的VR圖像發(fā)送給第二移動終端100B(S1060)。
第二移動終端100B的控制器180通過無線通信單元110接收VR圖像,將顯示單元151分割成左眼顯示區(qū)域和右眼顯示區(qū)域,然后將左眼VR圖像輸出給左眼顯示區(qū)域,將右眼VR圖像輸出給右眼顯示區(qū)域(S1070)。第二移動終端100B的用戶可 通過透過VR裝置500的透鏡521觀看輸出到第二移動終端100B的顯示單元151的VR圖像來感覺到空間感和距離感。因此,第二移動終端100B的用戶可體驗到虛擬現(xiàn)實,就像實際上處于第一移動終端100A的用戶正在拍攝圖像的位置一樣。
接下來,圖11是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端請求用于提供VR圖像的視頻呼叫的方法的一個示例的示圖。第一移動終端100A的控制器180啟動聯(lián)系人應(yīng)用(或呼叫應(yīng)用)并且在顯示單元151上顯示啟動畫面1100。啟動畫面1100可以是與第二移動終端100B的用戶對應(yīng)的畫面。
啟動畫面1100包括:第一菜單選項1110,用于請求與第二移動終端100B的語音呼叫;第二菜單選項1120,用于請求與第二移動終端100B的一般視頻呼叫;第三菜單選項1130,用于請求與第二移動終端100B的視頻呼叫以提供VR圖像;以及第四菜單選項1140,用于向第二移動終端100B發(fā)送文本消息。
第一移動終端100A的控制器180根據(jù)選擇第三菜單選項1130的命令通過無線通信單元110將請求用于提供VR圖像的視頻呼叫的信號發(fā)送給第二移動終端100B,激活相機121,然后可利用通過激活的相機121獲得的多個圖像來生成VR圖像。
圖12是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端生成VR圖像的方法的一個示例的示圖。第一移動終端100A的控制器180可通過將由相機121獲得的多個圖像彼此匹配來生成VR圖像。第一移動終端100A的控制器180可在將請求用于提供VR圖像的視頻呼叫的信號發(fā)送給第二移動終端100B之后生成VR圖像。并且,第一移動終端100A的控制器180可在生成VR圖像期間根據(jù)預(yù)設(shè)命令將請求用于提供VR圖像的視頻呼叫的信號發(fā)送給第二移動終端100B。
參照圖12的(a),第一移動終端100A的控制器180可根據(jù)選擇用于將VR圖像提供給第二移動終端100B的視頻呼叫的命令將第一畫面1200輸出給顯示單元151。第一畫面1200包括由激活的相機121根據(jù)選擇視頻呼叫的命令獲得的第一圖像1210。第一圖像1210可對應(yīng)于由相機121實時獲得的視頻圖像(動態(tài)圖像)。
此外,第一畫面1200包括指引UI,該指引UI用于指引獲得用于生成VR圖像的多個圖像的方法。例如,第一畫面1200包括指引消息1211和圖形1212,其指示相機121的移動方向以便獲得用于生成VR圖像的圖像。
參照圖12的(b),第一移動終端100A的用戶基于指引消息1211和圖形1212來改變相機121的位置(角度)。與由相機121以改變的位置(角度)獲得的第二圖像 的至少一部分對應(yīng)的圖像(1220)顯示在顯示單元151上。第一移動終端100A的控制器180分析由相機121獲得的第一圖像1210和第二圖像二者,通過包括在第一圖像1210和第二圖像二者中的彼此相同的對象之間的邊緣分析、顏色分析等來將第一圖像1210和第二圖像彼此匹配(合成),然后可將所匹配的圖像1210和1220顯示在顯示單元151上。
在這種情況下,顯示在顯示單元151上的圖像1220可對應(yīng)于靜態(tài)圖像(靜止圖像),而非視頻圖像。并且,第一移動終端100A的控制器180可在第一畫面1200上顯示指示相機121的移動方向的指引消息1221和圖形1222,以便指引進一步獲得用于生成VR圖像的圖像的方法。
參照圖12的(c),第一移動終端100A的用戶基于指引消息1221和圖形1222改變相機121的位置(角度)。與由相機121以改變的位置(角度)獲得的第三圖像的至少一部分對應(yīng)的圖像(1230)顯示在顯示單元151上。第一移動終端100A的控制器180分析由相機121獲得的第一圖像1210和第三圖像二者,通過包括在第一圖像1210和第三圖像二者中的彼此相同的對象之間的邊緣分析、顏色分析等來將第一圖像1210和第三圖像彼此匹配(合成),然后可將所匹配的圖像1210和1230顯示在顯示單元151上。
在這種情況下,顯示在顯示單元151上的圖像1230可對應(yīng)于靜態(tài)圖像(靜止圖像),而非視頻圖像。并且,第一移動終端100A的控制器180可在第一畫面1200上顯示指示相機121的移動方向的指引消息1231和圖形1232,以便指引進一步獲得用于生成VR圖像的圖像的方法。
此外,第一移動終端100A的用戶可選擇包括在第一畫面1200中的菜單選項1233。菜單選項1233可對應(yīng)于請求視頻呼叫以將VR圖像提供給第二移動終端100B的功能。第一移動終端100A的用戶可在生成VR圖像之前請求視頻呼叫。另選地,第一移動終端100A的用戶可在生成VR圖像的同時請求視頻呼叫。另外,第一移動終端100A的用戶可在VR圖像的生成基本上完成之后請求視頻呼叫。第一移動終端100A的控制器180可在生成VR圖像期間根據(jù)選擇菜單選項1233的命令通過無線通信單元110將請求視頻呼叫以提供VR圖像的信號發(fā)送給第二移動終端。
參照圖12的(d),第一移動終端100A的用戶基于指引消息1231和圖形1232改變相機121的位置(角度)。與由相機121以改變的位置(角度)獲得的第四圖像的 至少一部分對應(yīng)的圖像(1240)顯示在顯示單元151上。同時,第一移動終端100A可一直請求與第二移動終端100B的視頻呼叫。第一移動終端100A的控制器180分析由相機121獲得的第一圖像1210至第四圖像,通過包括在第一圖像1210至第四圖像中的彼此相同的對象之間的邊緣分析、顏色分析等來將第一圖像1210至第四圖像彼此匹配(合成),然后可將所匹配的圖像1210、1220、1230和1240顯示在顯示單元151上。
在這種情況下,顯示在顯示單元151上的圖像1240可對應(yīng)于靜態(tài)圖像(靜止圖像),而非視頻圖像。并且,第一移動終端100A的控制器180可在第一畫面1200上顯示指示相機121的移動方向的指引消息1241和圖形1242,以便指引進一步獲得用于生成VR圖像的圖像的方法。
參照圖12的(e),第一移動終端100A的用戶基于指引消息1241和圖形1242改變相機121的位置(角度)。與由相機121以改變的位置(角度)獲得的第五圖像的至少一部分對應(yīng)的圖像(1250)顯示在顯示單元151上。同時,第一移動終端100A可一直請求與第二移動終端100B的視頻呼叫。第一移動終端100A的控制器180分析由相機121獲得的第一圖像1210至第三圖像以及第五圖像,通過包括在第一圖像1210至第三圖像以及第五圖像中的彼此相同的對象之間的邊緣分析、顏色分析等來將第一圖像1210至第三圖像以及第五圖像彼此匹配(合成),然后可將所匹配的圖像1210、1220、1230和1250顯示在顯示單元151上。在這種情況下,顯示在顯示單元151上的圖像1250可對應(yīng)于靜態(tài)圖像(靜止圖像),而非視頻圖像。
因此,第一移動終端100A的控制器180將第一圖像1210與由相機121獲得的第五圖像匹配,然后可生成視角等于或大于預(yù)設(shè)度數(shù)的VR圖像。此外,第一移動終端100A的控制器180可利用諸如關(guān)于對象的交疊邊界的信息、關(guān)于對象的大小的信息等的關(guān)于圖像的對象信息來從第一圖像1210至第五圖像提取深度信息。
根據(jù)實施方式,第一移動終端100A的控制器可在所生成的VR圖像當中的對應(yīng)VR圖像上實時地顯示指示第一移動終端100A的用戶當前正在利用相機121拍攝圖像的區(qū)域的指示物1261。在本實施方式中,用于生成VR圖像的圖像的數(shù)量可根據(jù)實施方式而不同,本實施方式不限于此。
圖13是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端生成VR圖像的方法的一個示例的示意圖。具體地講,圖13描述了利用具有從左至右60度的視角以及從上 至下45度的視角的第一移動終端的相機121來生成具有從左至右180度的視角以及從上至下180度的視角的VR圖像的方法的示例。
參照圖13的(a),第一移動終端100A的控制器180利用相機121獲得第一圖像1310。由于需要第一圖像1310以外的多個圖像來生成視角等于或大于預(yù)設(shè)度數(shù)的VR圖像,所以第一移動終端100A的用戶朝著第一圖像1310的外側(cè)改變相機121的位置(角度),從而能夠進一步獲得多個圖像。在這種情況下,第一移動終端100A的控制器180可在顯示單元151上顯示指示用于進一步獲得圖像的相機121的移動方向的指示物1311,所述圖像用于生成VR圖像。
參照圖13的(b),第一移動終端100A的用戶可通過將相機121向右移動預(yù)設(shè)距離或者將相機121的角度向右改變預(yù)設(shè)度數(shù)來拍攝第二圖像1320。第一移動終端100A的控制器180可通過將第一圖像1310和第二圖像1320匹配來生成具有從左至右120度的視角以及從上至下45度的視角的圖像。并且,第一移動終端100A的控制器180可在顯示單元151上顯示指示用于進一步獲得圖像的相機121的移動方向的指示物1311,所述圖像用于生成VR圖像。在這種情況下,例如,由于在生成VR圖像時不習慣再從第二圖像1320的右側(cè)獲得任何圖像,所以在顯示單元151上可不顯示指示第二圖像1320的右側(cè)的指示物。
參照圖13的(c),第一移動終端100A的用戶可通過基于指示物1311所指示的方向移動相機121來另外拍攝第三圖像至第五圖像1330。第一移動終端100A的控制器180可通過使第一圖像至第五圖像1310、1320和1330匹配來生成具有從左至右180度的視角以及從上至下90度的視角的圖像。并且,第一移動終端100A的控制器180可在顯示單元151上顯示指示用于進一步獲得圖像的相機121的移動方向的指示物1311,所述圖像用于生成VR圖像。
參照圖13的(d),第一移動終端100A的用戶可通過基于指示物1311所指示的方向移動相機121來另外拍攝第六圖像至第九圖像1340。第一移動終端100A的控制器180可通過使第一圖像至第九圖像1310、1320、1330和1340匹配來生成具有從左至右180度的視角以及從上至下180度的視角的VR圖像。
圖14是示出根據(jù)本發(fā)明的一個實施方式的被輸出以獲得第一移動終端用來生成VR圖像的圖像的指引UI的一個示例的示圖。第一移動終端100A的控制器180將由相機121獲得的第一圖像1410輸出給顯示單元151。第一圖像1410可對應(yīng)于由相機 121實時獲得的視頻圖像(動態(tài)圖像)。
第一移動終端100A的控制器180可在顯示單元151上顯示指引UI,該指引UI用于指引獲得用于生成VR圖像的多個圖像的方法。例如,參照圖14的(a),第一移動終端100A的控制器180可在顯示單元151上顯示指示相機121的移動方向的指示物1411,以便獲得用于生成視角等于或大于預(yù)設(shè)度數(shù)的VR圖像的圖像。如果按照第一移動終端100A的用戶通過移動相機121來獲得圖像的方式從用于生成VR圖像的圖像獲得指定圖像,則第一移動終端100A的控制器180可在顯示單元151上去除與所獲得的指定圖像對應(yīng)的指示物1411。
在另一示例中,參照圖14的(b),第一移動終端的控制器180可在顯示單元151上顯示迷你地圖型的指引UI 1420,以便獲得用于生成視角等于或大于預(yù)設(shè)度數(shù)的VR圖像的圖像。指引UI 1420包括分別與用于生成VR圖像的多個圖像當中的到目前為止獲得的圖像對應(yīng)的指示物1421和1422。并且,指引UI 1420包括指示相機121的移動方向以獲得用于生成VR圖像的圖像的指示物1423。
第一移動終端100A的控制器180可通過將指示物1421與另一指示物1422相區(qū)分,來顯示指示物1421和1422中的與當前顯示在顯示單元151上的圖像對應(yīng)的指示物1421。如果按照第一移動終端100A的用戶通過移動相機121來獲得圖像的方式從用于生成VR圖像的圖像獲得指定圖像,則第一移動終端100A的控制器180可在顯示單元151上去除與所獲得的指定圖像對應(yīng)的指示物1423。
圖15是示出根據(jù)本發(fā)明的一個實施方式的被輸出以獲得第一移動終端用來生成VR圖像的圖像的指引UI的另一示例的示圖。第一移動終端100A的控制器180將由相機121獲得的第一圖像1510輸出給顯示單元151。第一圖像1510可對應(yīng)于由相機121實時獲得的視頻圖像(動態(tài)圖像)。
第一移動終端100A的控制器180可在顯示單元151上顯示迷你地圖型的指引UI 1520,以便獲得用于生成視角等于或大于預(yù)設(shè)度數(shù)的VR圖像的圖像。指引UI 1420包括分別與用于生成VR圖像的多個圖像當中的到目前為止獲得的圖像對應(yīng)的指示物1521和1522。例如,指示物1521和1522中的每一個可對應(yīng)于通過按照預(yù)設(shè)比率減小由相機121獲得的各個圖像而得到的圖像。
第一移動終端100A的控制器180可通過將指示物1521與另一指示物1522相區(qū)分,來顯示指示物1521和1522中的與當前顯示在顯示單元151上的圖像對應(yīng)的指示 物1521。此外,指引UI 1520包括指示相機121的移動方向以獲得用于生成VR圖像的圖像的指示物1523。如果按照第一移動終端100A的用戶通過移動相機121來獲得圖像的方式從用于生成VR圖像的圖像獲得指定圖像,則第一移動終端100A的控制器180可在顯示單元151上去除與所獲得的指定圖像對應(yīng)的指示物1523。
圖16是示出根據(jù)本發(fā)明的一個實施方式的由第一移動終端生成的VR圖像的一個示例的示圖。參照圖16,第一移動終端100A的控制器180可利用由相機121獲得的多個圖像來生成VR圖像1600。如在先前參照圖12至圖15的描述中所提及的,VR圖像1600可如下生成。首先,第一移動終端100A的用戶通過改變相機121的位置(角度)來拍攝多個圖像。其次,第一移動終端100A的控制器180將所拍攝的多個圖像匹配。
VR圖像1600包括由相機121實時獲得的動態(tài)圖像1620。并且,VR圖像1600中除了與動態(tài)圖像1620對應(yīng)的區(qū)域以外的區(qū)域可對應(yīng)于靜態(tài)圖像。根據(jù)實施方式,第一移動終端100A的控制器180可在VR圖像1600上顯示指示VR圖像1600中的動態(tài)圖像1620的區(qū)域的指示物1620。
根據(jù)實施方式,如果第一移動終端100A的用戶在基本上生成VR圖像1600之后改變相機121的位置,則VR圖像1600的至少一部分可被更新為新的圖像。并且,動態(tài)圖像1620的區(qū)域可被更新為通過改變了位置的相機121獲得的新的動態(tài)圖像。此外,與動態(tài)圖像1620對應(yīng)的區(qū)域可用靜態(tài)圖像填充。另外,由于第一移動終端100A的用戶改變相機121的位置,所以靜態(tài)圖像的至少一部分可被再次拍攝。在這種情況下,如果再次拍攝的圖像的可靠性高于現(xiàn)有的靜態(tài)圖像,則第一移動終端100A的控制器180可利用再次拍攝的靜態(tài)圖像來更新現(xiàn)有的靜態(tài)圖像。在這種情況下,圖像的可靠性可由圖像的清晰度確定。
此外,根據(jù)實施方式,第一移動終端100A的控制器180給予VR圖像1600內(nèi)的靜態(tài)圖像的預(yù)設(shè)部分以運動效果。在這種情況下,所述運動效果意指給予靜態(tài)圖像以便使得用戶能夠感覺到實際上與沒有運動的圖像對應(yīng)的靜態(tài)圖像的預(yù)設(shè)部分中的重復運動的視覺效果。
具體地講,第一移動終端100A的控制器180檢測指示由相機121獲得以生成VR圖像1600的圖像的重復運動的部分1630(例如,與波浪的運動對應(yīng)的部分),獲得存在于所檢測的部分1630中的重復運動的周期,然后可在實現(xiàn)包括所檢測的部分 1630作為VR圖像1600內(nèi)的靜態(tài)圖像的圖像的情況下給予視覺效果以使得所檢測的部分1630的運動能夠根據(jù)所獲得的周期而重復。例如,第一移動終端100A的控制器180從由相機121獲得的圖像提取指示重復運動的部分1630,然后可僅重復地播放VR圖像1600內(nèi)的與從相機121所獲得的圖像提取的部分1630對應(yīng)的對象的區(qū)域。因此,如果第二移動終端100B的用戶在穿戴VR裝置500的情況下觀看VR圖像1600,則第二移動終端100B的用戶可感覺到部分1630中的波浪的運動,盡管VR圖像1600的部分1630并不對應(yīng)于實時獲得的動態(tài)圖像。
接下來,圖17是示出根據(jù)本發(fā)明的一個實施方式的在第一移動終端與第二移動終端之間執(zhí)行視頻呼叫以提供VR圖像的處理的一個示例的示圖。參照圖17的(a),第一移動終端100A的控制器180根據(jù)用戶命令通過無線通信單元110將請求視頻呼叫以用于提供VR圖像的第一信號發(fā)送給第二移動終端100B。
根據(jù)用戶命令,第一移動終端100A的控制器180激活相機121,然后在顯示單元151上顯示利用所激活的相機121獲得的圖像1710。圖像1710可對應(yīng)于所生成的VR圖像的至少一部分。此外,第一移動終端100A的控制器180可在顯示單元151上顯示指示正在請求與第二移動終端100B的視頻呼叫的信息1711。并且,第一移動終端100A的控制器180可在顯示單元151上顯示指示已請求第二移動終端100B的用戶穿戴VR裝置500的信息1712。
此外,第一移動終端100A的控制器180可在顯示單元151上顯示用于取消對與第二移動終端100B的視頻呼叫的請求的菜單選項1713。參照圖17的(b),第二移動終端100B的控制器180在顯示單元151上根據(jù)從第一移動終端100A發(fā)送來的第一信號將與用于提供VR圖像的視頻呼叫對應(yīng)的畫面1720輸出給顯示單元151。畫面1720包括指示第一移動終端100A已請求用于提供VR圖像的視頻呼叫的信息1721。并且,畫面1720包括指引VR裝置500穿戴的信息1722。根據(jù)實施方式,畫面1720包括通過第一移動終端100A的相機121獲得的圖像的至少一部分。此外,畫面1720還可包括用于取消來自第一移動終端100A的視頻呼叫請求的菜單選項1723。
參照圖17的(c),第二移動終端100B的用戶將第二移動終端100B連接到VR裝置500,然后將VR裝置500穿戴在頭上。第二移動終端100B的控制器180可檢測第二移動終端100B是否連接到VR裝置500。如果檢測到第二移動終端100B與VR裝置500之間的連接,則第二移動終端100B的控制器180可通過無線通信單元110 將許可提供VR圖像的視頻呼叫請求的第二信號發(fā)送給第一移動終端100A。
此外,在圖17的(a)至圖17的(c)的處理中,第一移動終端100A可生成VR圖像。由于生成VR圖像的處理與先前參照圖12至圖16的描述中所提及的處理相同,所以省略詳細描述。
參照圖17的(d),第一移動終端100A的控制器180可根據(jù)第二信號在顯示單元151上顯示畫面1730。例如,畫面1730包括指示第二移動終端100B的用戶已完成VR裝置500穿戴的信息1731。并且,畫面1730包括與所生成的VR圖像的至少一部分對應(yīng)的圖像1732。例如,圖像1732包括VR圖像中的由相機121實時獲得的動態(tài)圖像。
并且,第一移動終端100A的控制器180將所生成的VR圖像轉(zhuǎn)換為左眼VR圖像和右眼VR圖像,然后可通過無線通信單元110將所轉(zhuǎn)換的VR圖像發(fā)送給第二移動終端100B。在用于提供VR圖像的視頻呼叫期間,第一移動終端100A的控制器180周期性地、非周期性地或者實時地生成/更新VR圖像,然后可將所生成/更新的VR圖像發(fā)送給第二移動終端100B。
參照圖17的(e),第二移動終端100B的控制器180將從第一移動終端100A發(fā)送來的VR圖像輸出到顯示單元151。第二移動終端100B的用戶可透過VR裝置500的透鏡521看到VR圖像1740。VR圖像1740具有等于或大于預(yù)設(shè)度數(shù)的視角以及由第二移動終端100B的用戶識別的指定深度。
圖18是示出根據(jù)本發(fā)明的一個實施方式的在視頻呼叫期間顯示在第一移動終端上的畫面和顯示在第二移動終端上的畫面的示例的示圖。參照圖18的(a),第一移動終端100A的控制器180可在與第二移動終端100B的視頻呼叫期間將與所生成的VR圖像的至少一部分對應(yīng)的圖像1810輸出到顯示單元151。例如,圖像1810可對應(yīng)于VR圖像中的由相機121實時獲得的動態(tài)圖像。
并且,第一移動終端100A的控制器180可在顯示單元151上顯示與VR圖像對應(yīng)的附加信息1820。例如,附加信息1820包括通過按照預(yù)設(shè)比率減小VR圖像而得到的圖像1821、用于指示VR圖像中的動態(tài)圖像的位置的第一指示物1822以及用于指示VR圖像中的由第二移動終端100B的用戶觀看的區(qū)域的第二指示物1823。第一移動終端的控制器180可通過無線通信單元110周期性地或者非周期性地從第二移動終端100B接收關(guān)于第二移動終端100B的用戶觀看VR圖像中的哪一區(qū)域的信息。 例如,如果VR圖像中的第二移動終端的用戶所觀看的區(qū)域的位置(或方向)改變超過預(yù)設(shè)度數(shù),則第一移動終端100A的控制器180可從第二移動終端100B接收相關(guān)信息。第二移動終端100B可通過基于通過感測單元140感測的數(shù)據(jù)檢測連接到第二移動終端100B的VR裝置500的運動來檢測第二移動終端的用戶的頭部運動。并且,第二移動終端100B可基于從VR裝置500發(fā)送的數(shù)據(jù)來檢測第二移動終端100B的用戶的頭部運動和/或第二移動終端100B的用戶的眼睛的運動。
根據(jù)本發(fā)明的實施方式,第一移動終端100A的用戶可容易地識別出對應(yīng)用戶當前通過相機121拍攝VR圖像的哪一部分以及第二移動終端100B的用戶當前感興趣地觀看VR圖像的哪一部分。
另外,參照圖18的(b),第二移動終端100B的控制器180在顯示單元151上顯示從第一移動終端100A發(fā)送來的VR圖像。第二移動終端100B的用戶可觀看通過VR裝置500的透鏡521而扭曲的VR圖像1830。根據(jù)實施方式,第二移動終端100B的控制器180可在VR圖像1830上顯示指示VR圖像1830中由第一移動終端100A的相機121實時獲得的動態(tài)圖像的位置的指示物1831。因此,第二移動終端100B的用戶可容易地識別出VR圖像1830的哪一部分對應(yīng)于實時圖像以及VR圖像1830的哪一部分對應(yīng)于預(yù)先獲得的靜態(tài)圖像。
圖19是示出根據(jù)本發(fā)明的一個實施方式的第一移動終端生成VR圖像的方法的另一示例的示圖。第一移動終端100A的控制器180可通過將相機121所獲得的多個圖像的至少一部分匹配來生成VR圖像1900。在這種情況下,如果VR圖像1900的部分無法僅利用相機121所獲得的圖像來生成,則第一移動終端100A的控制器180可利用預(yù)設(shè)方案來實現(xiàn)它。
例如,參照圖19的(a),VR圖像1900的部分1910無法僅利用相機121所獲得的圖像來生成,因為可能存在第一移動終端100A的用戶由于意外沒有拍攝到的部分或者所拍攝的圖像的可靠性可能低于預(yù)設(shè)值。在這種情況下,可通過使與VR圖像1900的部分1910相鄰的區(qū)域直至部分1910模糊或者進行層次處理來填充部分1910。
在另一示例中,參照圖19的(b),VR圖像1900的部分1920無法僅利用相機121所獲得的圖像來生成,因為可能存在第一移動終端100A的用戶由于意外沒有拍攝到的部分或者所拍攝的圖像的可靠性可能低于預(yù)設(shè)值。在這種情況下,可通過將與VR圖像1900的部分1920相鄰的區(qū)域直至部分1920放大來填充部分1920。
在另一示例中,參照圖19的(c),VR圖像1900的部分1930由于以下原因而無法僅利用相機121所獲得的圖像來生成。首先,可能存在第一移動終端100A的用戶由于意外沒有拍攝到的部分。其次,可能存在由于第一移動終端100A的用戶通過移動相機121拍攝圖像時被物體覆蓋的部分而沒有拍攝到的部分。在這種情況下,可通過使與VR圖像1900的部分1930相鄰的區(qū)域直至部分1930模糊或者進行層次處理來填充部分1930。
此外,根據(jù)本發(fā)明的一個實施方式,可在第一移動終端100A與第二移動終端100B之間的一般視頻呼叫期間切換為用于提供VR圖像的視頻呼叫。將參照圖20和圖21來描述。
圖20是示出根據(jù)本發(fā)明的一個實施方式的在第一移動終端與第二移動終端之間的一般視頻呼叫期間切換為用于提供VR圖像的視頻呼叫的方法的一個示例的示圖。圖20中的移動終端100可對應(yīng)于發(fā)送方移動終端或接收方移動終端。
參照圖20的(a),移動終端100的控制器180在一般視頻呼叫期間將與視頻呼叫對應(yīng)的畫面輸出到顯示單元151。該畫面包括從與視頻呼叫中的另一用戶對應(yīng)的移動終端100發(fā)送來的圖像2010以及通過對應(yīng)用戶的前相機121獲得的圖像2020。
移動終端100的控制器180檢測將一般視頻呼叫切換為用于提供VR圖像的視頻呼叫的預(yù)設(shè)命令。例如,所述預(yù)設(shè)命令可對應(yīng)于輕敲圖像2020兩次的命令。另選地,所述預(yù)設(shè)命令可對應(yīng)于對彈出消息的許可命令,所述彈出消息用于在從前相機121切換為后相機121的過程中請求切換為輸出到顯示單元151的VR視頻呼叫的配置。
參照圖20的(b),移動終端100的控制器180根據(jù)預(yù)設(shè)命令向與另一用戶對應(yīng)的移動終端100發(fā)送將一般視頻呼叫切換為用于提供VR圖像的視頻呼叫的信號,然后可顯示指示切換為用于提供VR圖像的視頻呼叫的指引消息。例如,檢測到所述預(yù)設(shè)命令的移動終端100可在用于提供VR圖像的視頻呼叫中成為發(fā)送方移動終端100A。
圖21是示出根據(jù)本發(fā)明的一個實施方式的在第一移動終端與第二移動終端之間的一般視頻呼叫期間切換為用于提供VR圖像的視頻呼叫的情況下顯示在第一移動終端和第二移動終端中的每一個上的畫面的一個示例的示圖。參照圖21的(a),第一移動終端100A的控制器180根據(jù)將一般視頻呼叫切換為用于提供VR圖像的視頻呼叫的預(yù)設(shè)命令在顯示單元151上顯示第一畫面2110。
第一畫面2110包括由相機121獲得的圖像,但是與一般視頻呼叫不同,可不包 括從另一用戶的第二移動終端100B發(fā)送來的圖像。并且,第一移動終端100A的控制器180將請求切換為提供VR圖像的視頻呼叫的信號發(fā)送給第二移動終端100B,然后可生成VR圖像。由于生成VR圖像的處理與先前參照圖12至圖16的描述中所提及的處理相同,所以省略詳細描述。
此外,第一移動終端100A的控制器180可根據(jù)預(yù)設(shè)命令在第一畫面2110上顯示指示已請求第二移動終端穿戴VR裝置500的信息。
此外,參照圖21的(b),第二移動終端100B的控制器180根據(jù)從第一移動終端發(fā)送來的信號在顯示單元151上顯示第二畫面2120。第二畫面2120包括根據(jù)切換為用于提供VR圖像的視頻呼叫指引VR裝置500穿戴的消息。并且,第二移動終端100B的控制器180可根據(jù)第二移動終端100B與VR裝置500之間完成連接,來將許可用于提供VR圖像的視頻呼叫的信號發(fā)送給第一移動終端100A。
由于后一處理類似于先前參照圖17的描述中所提及的處理,所以省略詳細描述。根據(jù)本發(fā)明的一個實施方式,可根據(jù)第二移動終端100B的用戶的動作提供適當反饋。將參照圖22來描述。
圖22是示出根據(jù)本發(fā)明的一個實施方式的第二移動終端100B根據(jù)用戶的動作提供反饋的方法的一個示例的示圖。第二移動終端100B的控制器180在顯示單元151上顯示從第一移動終端100A發(fā)送來的VR圖像2200。第二移動終端的用戶可在穿戴連接了第二移動終端100B的VR裝置500的情況下觀看VR圖像2200。
在本實施方式中,第一移動終端100A的控制器180識別包括在VR圖像220中的對象,然后可基于保存在存儲器170中的信息來確定對象的特性。例如,第一移動終端100A的控制器180識別包括在VR圖像2200中的第一對象2201。如果第一對象2201對應(yīng)于波浪,則第一移動終端100A的控制器180可基于用于生成VR圖像2200的至少一個圖像中所包括的第一對象2201的分析結(jié)果以及保存在存儲器170中的信息來了解該波浪的一般特性(例如,運動特性、聲音特性、紋理特性等)。
類似地,第一移動終端100A的控制器180識別包括在VR圖像2200中的第二對象2202。如果第二對象對應(yīng)于木柵欄,則第一移動終端100A的控制器180可了解木柵欄的一般特性(例如,運動特性、強度特性、紋理特性等)。此外,第一移動終端100A的控制器180識別包括在VR圖像2200中的第三對象2203。如果第三對象對應(yīng)于天空,則第一移動終端100A的控制器180可了解天空的一般特性(例如,風特性 等)。
第一移動終端100A的控制器180可將包括在VR圖像2200中的各個對象的位置以及相應(yīng)對象的特性之間的映射數(shù)據(jù)隨VR圖像2200一起發(fā)送給第二移動終端100B。根據(jù)實施方式,如果第一移動終端100A的控制器180無法了解哪一個是包括在VR圖像2200中的對象,則第一移動終端100A的控制器180可通過對用于VR圖像2200以及VR圖像2200的生成的多個圖像進行分析來了解對應(yīng)對象的特性(例如,運動特性、權(quán)重特性、紋理特性等)。
第二移動終端100B的用戶可對通過VR裝置500觀看的VR圖像2200采取指定動作。例如,第二移動終端100B的用戶可采取類似于用手觸摸通過VR裝置500觀看的VR圖像2200的指定部分的動作。
例如,第二移動終端100B的控制器180激活相機121,檢測包括在通過激活的相機121獲得的圖像中的第二移動終端100B的用戶的手,然后可在VR圖像2200上顯示與所檢測到的手的位置對應(yīng)的圖形2210。在另一示例中,第二移動終端100B的控制器180通過接口單元160接收通過包括在VR裝置500中(或者連接到VR裝置500)的相機獲得的圖像,檢測包括在所接收到的圖像中的第二移動終端100B的用戶的手,然后可在VR圖像2200上顯示與所檢測到的手的位置對應(yīng)的圖形2210。
又如,VR裝置500檢測包括在通過包括在VR裝置500中(或者連接到VR裝置500)的相機獲得的圖像中的第二移動終端100B的用戶的手,然后將與所檢測到的手的位置對應(yīng)的信息發(fā)送給第二移動終端100B。第二移動終端100B的控制器180可基于所述信息在VR圖像2200上顯示與所檢測到的手的位置對應(yīng)的圖形2210。
如果與第二移動終端100B的用戶的手對應(yīng)的圖形2210位于VR圖像2200內(nèi)的第一對象2201上,則第二移動終端100B的控制器180可基于從第一移動終端100A發(fā)送來的關(guān)于對象的特性的信息來提供與第一對象2201的特性對應(yīng)的反饋。例如,第二移動終端100B的控制器180可通過顯示單元151輸出與波浪的運動對應(yīng)的預(yù)設(shè)視覺效果,并且通過音頻輸出單元152輸出與波浪的聲音對應(yīng)的預(yù)設(shè)音頻數(shù)據(jù)。
此外,如果與第二移動終端100B的用戶的手對應(yīng)的圖形2210位于VR圖像2200內(nèi)的第二對象2202上,則第二移動終端100B的控制器180可基于從第一移動終端100A發(fā)送來的關(guān)于對象的特性的信息來提供與第二對象2202的特性對應(yīng)的反饋。例如,第二移動終端100B的控制器180可基于木柵欄的強度不生成任何特定視覺改變, 就像第二移動終端100B的用戶推實際的木柵欄時一樣。
另外,如果與第二移動終端100B的用戶的手對應(yīng)的圖形2210位于VR圖像2200內(nèi)的第三對象2203上,則第二移動終端100B的控制器180可基于從第一移動終端100A發(fā)送來的關(guān)于對象的特性的信息來提供與第三對象2203的特性對應(yīng)的反饋。例如,第二移動終端100B的控制器180可通過音頻輸出單元152輸出與風的聲音對應(yīng)的預(yù)設(shè)音頻數(shù)據(jù),并且輸出與風的感覺對應(yīng)的數(shù)據(jù),就像第二移動終端100B的用戶將手朝著實際天空伸出時一樣。在后一種情況下,如果超聲波輸出單元被內(nèi)置于第二移動終端100B中,則第二移動終端100B可通過該超聲波輸出單元將預(yù)設(shè)數(shù)據(jù)輸出給用戶的手。并且,如果超聲波輸出單元被設(shè)置在與第二移動終端100B配對(或連接)的外部裝置上,則第二移動終端100B可將預(yù)設(shè)數(shù)據(jù)輸出給外部裝置。
根據(jù)本實施方式,第二移動終端100B的用戶可感覺就像實際上在VR圖像2200的拍攝場景中一樣。此外,根據(jù)本發(fā)明的一個實施方式,可在用于提供VR圖像的視頻呼叫期間執(zhí)行第一移動終端100A與第二移動終端100B之間的交互。這將參照圖23至圖27來描述。
圖23是示出根據(jù)本發(fā)明的一個實施方式的第二移動終端的用戶針對第二移動終端的用戶所期望的內(nèi)容請求第一移動終端的用戶的方法的一個示例的示圖。參照圖23的(a),第二移動終端100B的控制器180顯示從第一移動終端100A發(fā)送來的VR圖像2300。第二移動終端100B的用戶可在將安裝有第二移動終端100B的VR裝置500穿戴在頭上的情況下觀看VR圖像2300。第二移動終端100B的用戶可向第一移動終端100A的用戶發(fā)送預(yù)設(shè)請求。第二移動終端100B的控制器180可通過無線通信單元110將與預(yù)設(shè)命令對應(yīng)的信號發(fā)送給第一移動終端100A。
圖23的(b)至(d)是示出第二移動終端100B的用戶輸入預(yù)設(shè)命令的方法的示例的示圖。例如,參照圖23的(b),用于接收用戶的觸摸命令的觸摸板501可被包括在VR裝置500的外部。根據(jù)實施方式,VR裝置500可在VR裝置500的兩側(cè)中的每一側(cè)設(shè)置有觸摸板501。例如,如果用戶期望作為實時圖像觀看VR圖像2300中的左側(cè)區(qū)域,則用戶可觸摸設(shè)置在左側(cè)的觸摸板501。VR裝置500可將與通過觸摸板501接收的命令對應(yīng)的第一信號發(fā)送給第二移動終端100B,并且第二移動終端100B的控制器180可向第一移動終端100A發(fā)送與第一信號對應(yīng)的第二信號。該第二信號包括第二移動終端100B的用戶期望實時觀看的區(qū)域的信息。
在另一示例中,參照圖23的(c),第二移動終端100B的控制器180激活相機121,檢測包括在通過激活的相機121獲得的圖像中的第二移動終端的用戶的手,然后可識別所檢測到的手的手勢。另選地,第二移動終端100B的控制器180通過接口單元160接收通過包括在VR裝置500中(或者連接到VR裝置500)的相機獲得的圖像,檢測包括在所接收到的圖像中的第二移動終端100B的用戶的手,然后可識別所檢測到的手的手勢。第二移動終端100B的控制器180可將包括與所檢測到的手的手勢對應(yīng)的命令的第三信號發(fā)送給第一移動終端100A。所檢測到的手的手勢可對應(yīng)于第二移動終端100B的用戶將手向左彎的手勢。第三信號包括第二移動終端100B的用戶期望實時觀看的區(qū)域的信息。
在另一示例中,參照圖23的(d),第二移動終端100B的控制器180激活相機121,檢測包括在通過激活的相機121獲得的圖像中的第二移動終端的用戶的手,然后可將與所檢測到的手的位置對應(yīng)的圖形2310的顯示在VR圖像2300上。另選地,第二移動終端100B的控制器180通過接口單元160接收通過包括在VR裝置500中(或者連接到VR裝置500)的相機獲得的圖像,檢測包括在所接收到的圖像中的第二移動終端100B的用戶的手,然后可將與所檢測到的手的位置對應(yīng)的圖形2310顯示在VR圖像2300上。如果第二移動終端100B的用戶期望觀看VR圖像2300中的左側(cè)區(qū)域,則第二移動終端100B的用戶可通過移動手來將圖形2310定位在VR圖像2300中的左側(cè)。第二移動終端100B的控制器180可將與通過圖形2310輸入的命令對應(yīng)的第四信號發(fā)送給第一移動終端100A。該第四信號包括第二移動終端100B的用戶期望實時觀看的區(qū)域的信息。
在另一示例中,參照圖23的(e),第二移動終端100B的控制器180激活麥克風122,然后可通過分析通過激活的麥克風122獲得的音頻信號來識別語音命令。第二移動終端100B的控制器180可將與所識別的語音命令對應(yīng)的第五信號發(fā)送給第一移動終端100A。所識別的語音命令可對應(yīng)于將第一移動終端100A的相機121向左移動的命令。該第五信號包括第二移動終端100B的用戶期望實時觀看的區(qū)域的信息。
圖24是示出根據(jù)本發(fā)明的一個實施方式的如參照圖23所提及的由第一移動終端從第二移動終端接收指定信號的一個示例的示圖。參照圖24的(a),第一移動終端100A的控制器180利用通過相機121獲得的多個圖像來生成VR圖像2400,然后可將所生成的VR圖像2400的至少一部分輸出給顯示單元151。
第一移動終端100A的控制器180可通過無線通信單元110從第二移動終端100B接收與第二移動終端100B的用戶所輸入的命令對應(yīng)的信號。該信號包括用于請求移動相機121以便獲得VR圖像2400中的第二移動終端100B的用戶期望作為實時圖像觀看的區(qū)域的圖像的信號。
第一移動終端100A的控制器180可根據(jù)所述信號在顯示單元151上顯示指示相機121的移動方向的指示物2401,以便獲得VR圖像2400中的第二移動終端100B的用戶期望作為實時圖像觀看的區(qū)域的圖像。
參照圖24的(b),第一移動終端100A的用戶可通過根據(jù)指示物2401所指示的方向改變相機121的位置(或角度)來拍攝圖像。第一移動終端100A的控制器180利用現(xiàn)有的VR圖像2400以及通過獲得相機121的圖像來生成新的VR圖像2410,所述相機121的位置由第一移動終端的用戶改變。并且,第一移動終端的控制器180可通過無線通信單元110將新的VR圖像2410發(fā)送給第二移動終端100B。
根據(jù)參照圖23和圖24提及的本發(fā)明的一個實施方式,第二移動終端100B的用戶可通過與第一移動終端100A的用戶的交互來請求拍攝期望的圖像并且觀看所拍攝的期望的圖像。
圖25是示出根據(jù)本發(fā)明的一個實施方式的如參照圖24所提及的在從第一移動終端發(fā)送新的VR圖像的情況下第二移動終端的顯示單元上輸出的畫面的一個示例的示圖。例如,參照圖25的(a),第二移動終端100B的用戶可請求改變通過VR裝置500觀看的VR圖像內(nèi)的期望作為實時圖像觀看的區(qū)域。因此,第二移動終端100B的控制器180從第一移動終端100A接收動態(tài)圖像的區(qū)域改變了的新的VR圖像2500,然后可將所接收到的VR圖像2500顯示在顯示單元151上。因此,第二移動終端的控制器180改變指示動態(tài)圖像的指示物2510的位置,然后可在VR圖像2500內(nèi)顯示指示物2510的改變的位置。根據(jù)實施方式,指示物2510可被用作指示請求通過第一移動終端另外拍攝的區(qū)域的指示物。
在另一示例中,參照圖25的(b),第二移動終端的用戶可請求作為實時圖像,觀看未包括在通過VR裝置500觀看的VR圖像中的區(qū)域。因此,第二移動終端的控制器180從第一移動終端接收包括通過相機121獲得的新圖像作為動態(tài)圖像的VR圖像2500,然后可將所接收到的VR圖像2500顯示在顯示單元151上。VR圖像2500包括現(xiàn)有VR圖像的至少一部分以及通過第一移動終端100A的相機121獲得的新圖像 2520。圖像2520包括通過第一移動終端100A的相機121重新獲得的動態(tài)圖像2521。通過從圖像2520排除動態(tài)圖像2521而得到的各個區(qū)域2522可對應(yīng)于通過將第一移動終端100A的相機121所獲得的圖像匹配而生成的靜態(tài)圖像,如參照圖12至圖15所提及的。另選地,區(qū)域1922可對應(yīng)于如參照圖19提及的補充圖像。
圖26是示出根據(jù)本發(fā)明的一個實施方式的第二移動終端的用戶控制包括在VR圖像中的特定對象的方法的一個示例的示圖。參照圖26的(a),第二移動終端100B的控制器可將從第一移動終端100A發(fā)送來的VR圖像2600顯示在顯示單元151上。第二移動終端100B的控制器180可根據(jù)預(yù)設(shè)命令進入VR圖像2600的控制模式。如果VR圖像2600中包括可控的特定對象,則第二移動終端100B的控制器180可進入使得包括在VR圖像2600中的所述特定對象能夠根據(jù)預(yù)設(shè)命令來被控制的模式。例如,所述預(yù)設(shè)命令可對應(yīng)于按照參照圖23的(b)至圖23的(e)所提及的相似方式接收的命令。并且,所述預(yù)設(shè)命令可對應(yīng)于感測穿戴VR裝置500的第二移動終端100B的用戶的眼睛固定在VR圖像2600內(nèi)的指定區(qū)域上超過預(yù)設(shè)時間的命令。
如果進入VR圖像2600的控制模式,則第二移動終端的控制器180可在VR圖像2600上顯示指示VR圖像2600中的可控特定對象的指示物2610。并且,第二移動終端的控制器180可將與第二移動終端100B的用戶的手對應(yīng)的圖形2620顯示在VR圖像2600上。
在從第一移動終端100A接收到VR圖像2600時或者根據(jù)進入VR圖像2600的控制模式的命令,第二移動終端100B的控制器180可從第一移動終端100A接收用于控制特定對象的附加信息。
第一移動終端100A的控制器180在生成VR圖像2600時分析VR圖像2600。當所分析的VR圖像2600中包括特定對象時,第一移動終端100A的控制器180可生成用于控制特定對象的附加信息。例如,第一移動終端100A的存儲器170包括關(guān)于與第一移動終端100A配對的電器的信息。并且,第一移動終端100A可通過家庭網(wǎng)絡(luò)從連接到電器的單獨的控制裝置接收關(guān)于這些電器的信息。在這種情況下,關(guān)于電器的信息包括各個電器的位置信息、關(guān)于各個電器的可控功能的信息等。
第一移動終端100A的控制器180基于關(guān)于電器的信息檢測所生成的VR圖像2600中是否包括與可控電器對應(yīng)的特定對象。如果VR圖像2600中包括與可控電器對應(yīng)的特定對象,則第一移動終端100A的控制器180可基于關(guān)于電器的信息來生成 用于控制所述特定對象的附加信息。
例如,所述附加信息包括VR圖像2600中的特定對象的ID信息、關(guān)于VR圖像2600中的特定對象的位置的信息、關(guān)于用于控制VR圖像2600中的特定對象的功能的命令的信息等。如果控制與包括在VR圖像2600中的對象中的TV對應(yīng)的特定對象,則第二移動終端100B的控制器180可將圖形2620定位在指示與TV對應(yīng)的特定對象的指示物2610上。
參照圖26的(b),第二移動終端100B的控制器180可基于用于控制特定對象的附加信息來將指示控制特定對象的功能的方法的指引信息2630顯示在VR圖像2600上。例如,指引信息2630包括關(guān)于應(yīng)該由第二移動終端100B的用戶輸入以便打開/關(guān)閉TV的手勢命令的信息。
第二移動終端100B的用戶可基于指引信息2630作出用于控制TV的特定功能的手勢。第二移動終端100B的控制器180識別包括在通過相機121獲得的圖像中的手勢,然后可將與所識別的手勢對應(yīng)的信號(即,用于控制特定對象的功能的信號)發(fā)送給第一移動終端100A。例如,手勢可對應(yīng)于握住或張開手的手勢、抬起或放下手的手勢、在張開手掌的情況下朝著預(yù)設(shè)方向移動手的手勢、用手指推按指定區(qū)域的手勢、彎曲或展開指定數(shù)量的手指的手勢、與用于控制特定對象所對應(yīng)的實際電子裝置的動作類似的手勢等。
參照圖26的(c),第一移動終端100A的控制器180可基于從第二移動終端100B發(fā)送來的信號來運行與特定對象對應(yīng)的功能。例如,第一移動終端100A的控制器180可將運行與特定對象對應(yīng)的功能的命令發(fā)送給與特定對象對應(yīng)的TV(根據(jù)實施方式,成為控制目標的電子裝置,例如TV、燈、風扇、收音機、熱水器或冰箱)和控制裝置。并且,第一移動終端100A的控制器180可在顯示單元151上顯示指示物2640,該指示物2640指示由第二移動終端100B的用戶控制與特定對象對應(yīng)的TV的功能。
根據(jù)實施方式,當控制與特定對象對應(yīng)的TV的功能時,第二移動終端的控制器180通過音頻輸出單元152輸出與TV的功能對應(yīng)的音頻數(shù)據(jù),由此第二移動終端的控制器180可使得第二移動終端100B的用戶能夠感覺到真實感。
圖27是示出根據(jù)本發(fā)明的一個實施方式的第二移動終端的用戶控制VR圖像的方法的一個示例的示圖。參照圖27的(a),第二移動終端100B的控制器180可將從第一移動終端100A發(fā)送來的VR圖像2700輸出給顯示單元151。VR圖像2700包括 與能夠?qū)⒅付▊渫浱砑拥絍R圖像2700的功能對應(yīng)的菜單選項2710。
第二移動終端100B的控制器180可在VR圖像2700上顯示與第二移動終端100B的用戶的手對應(yīng)的圖形2720。第二移動終端100B的用戶通過移動手來將圖形2720定位在菜單選項2710上,然后可選擇菜單選項2710。根據(jù)實施方式,第二移動終端100B的用戶可在包括在VR圖像2700中的對象中指定第二移動終端100B的用戶期望在其上留備忘錄的對象。
參照圖27的(b),第二移動終端100B的控制器180可根據(jù)選擇菜單選項2710的命令來輸出使得第二移動終端的用戶能夠向VR圖像2700輸入指定備忘錄的GUI(圖形用戶界面)2730。第二移動終端100B的用戶可通過移動手利用圖形2720經(jīng)由GUI 2710來輸入指定備忘錄。第二移動終端100B的控制器180可將包括通過GUI 2710輸入的備忘錄的內(nèi)容的信號發(fā)送給第一移動終端100A。
參照圖27的(c),第一移動終端100A的控制器180可基于從第二移動終端100B發(fā)送來的信號在顯示單元151上顯示包括備忘錄的內(nèi)容的指示物2740。根據(jù)實施方式,如果在圖27的(a)中第一移動終端100A的用戶指定第一移動終端100A的用戶期望在其上留備忘錄的對象,則第一移動終端100A的控制器180可在與輸出到顯示單元151的VR圖像的至少一部分對應(yīng)的圖像中的與特定對象對應(yīng)的區(qū)域上顯示指示物2740。
圖28是示出根據(jù)本發(fā)明的一個實施方式的在用于提供VR圖像的視頻呼叫期間第二移動終端輸出音頻數(shù)據(jù)的方法的一個示例的示圖。參照圖28的(a),第一移動終端100A的控制器180在用于提供VR圖像的視頻呼叫中激活麥克風122。所激活的麥克風122接收外部聲音信號,然后可將所接收到的外部聲音信號轉(zhuǎn)換為電語音信號。第一移動終端100A包括至少兩個或更多個麥克風122。
當通過麥克風122獲得語音信號時,第一移動終端100A的控制器180可基于語音信號的強度、波形等了解包括在語音信號中的特定語音信號是從哪一側(cè)獲得的。并且,當通過麥克風122獲得語音信號時,第一移動終端100A的控制器180可感測第一移動終端面向哪一側(cè)。
在與第二移動終端100B的用于提供VR圖像的視頻呼叫中,第一移動終端100A的控制器180可將與VR圖像對應(yīng)的語音信號以及VR圖像發(fā)送給第二移動終端100B。
參照圖28的(b),當將從第一移動終端100A發(fā)送來的VR圖像輸出給顯示單元151時,第二移動終端100B可通過音頻輸出單元152輸出與VR圖像對應(yīng)的語音信號。在這種情況下,第二移動終端100B可確定在VR圖像中穿戴VR裝置500的用戶面向哪一側(cè)。例如,第二移動終端100B可通過基于通過感測單元140感測的數(shù)據(jù)檢測連接到第二移動終端100B的VR裝置500的運動來檢測第二移動終端的用戶的頭部運動。并且,第二移動終端100B可基于從VR裝置500發(fā)送來的數(shù)據(jù)來檢測第二移動終端100B的用戶的頭部運動和/或第二移動終端100B的用戶的眼睛的運動。
第二移動終端100B的控制器180在從第一移動終端100A發(fā)送來的語音信號當中加強與第二移動終端100B的用戶所面向的一側(cè)對應(yīng)的語音信號,然后可通過音頻輸出單元152輸出加強的語音信號。例如,第二移動終端的控制器180可利用波束成形技術(shù)來處理所發(fā)送的語音信號。例如,在從第一移動終端100A發(fā)送來的語音信號當中,第二移動終端100B的控制器180可通過音頻輸出單元152僅輸出與第二移動終端100B的用戶所面向的一側(cè)對應(yīng)的語音信號。在另一示例中,當通過第一移動終端100A獲得語音信號時,第二移動終端100B的控制器180參照第二移動終端的用戶所面向的一側(cè)基于第一移動終端100A所面向的一側(cè)來轉(zhuǎn)換語音信號,然后可通過音頻輸出單元152顯示所轉(zhuǎn)換的語音信號。
圖29是示出根據(jù)本發(fā)明的一個實施方式的利用安裝在車輛上的相機生成VR圖像的方法的一個示例的示圖。參照圖29的(a),車輛中包括前相機、后相機、左相機和右相機中的至少兩個相機。并且,用于接收通過車輛的相機獲得的圖像的電子裝置2900存在于車輛的內(nèi)部或外部。
電子裝置2900可對應(yīng)于屬于車輛的所有者的移動終端或者設(shè)置在車輛內(nèi)的導航裝置。電子裝置2900接收通過車輛的相機獲得的多個圖像,然后可通過將所接收到的圖像匹配來生成VR圖像。由于生成VR圖像的方法類似于參照圖6至圖10以及圖19提及的方法,所以省略詳細描述。
電子裝置2900可將用于請求通信連接以提供VR圖像的信號發(fā)送給第二移動終端100B。用于請求通信連接以提供VR圖像的信號可對應(yīng)于用于請求視頻呼叫以提供VR圖像的信號或者用于請求先前描述中所提及的視頻呼叫以外的單獨的通信連接以提供VR圖像的信號。并且,電子裝置2900可將所生成的VR圖像發(fā)送給第二移動終端100B。
第二移動終端100B接收信號,并且第二移動終端的用戶可在穿戴連接了第二移動終端的VR裝置500之后通過VR裝置500觀看VR圖像。在本實施方式中,由于其它處理類似于參照圖5至圖28提及的那些,所以省略詳細描述。
圖30是示出根據(jù)本發(fā)明的一個實施方式的生成VR圖像的方法的另一示例的示圖。參照圖30的(a),在拍攝場景中設(shè)置有多個相機。在本實施方式中,假設(shè)第一相機至第四相機存在于該拍攝場景中。
第一移動終端100A可從四個相機接收圖像。在這種情況下,可通過第一相機至第四相機中的每一個拍攝用于生成VR圖像的視角等于或大于預(yù)設(shè)度數(shù)的圖像。另選地,第一相機至第四相機中的每一個可按照如參照圖12至圖15所提及的相似方式通過改變各個相機的位置(或角度)來生成視角等于或大于預(yù)設(shè)度數(shù)的圖像。
第一移動終端100A的控制器180將請求通信連接以提供VR圖像的信號發(fā)送給第二移動終端100B。如果從第二移動終端100B接收到許可通信連接的信號,則第一移動終端100A的控制器180可將VR圖像3010發(fā)送給第二移動終端100B。發(fā)送給第二移動終端100B的VR圖像3010可對應(yīng)于通過第一相機至第四相機當中的特定相機獲得的圖像。例如,發(fā)送給第二移動終端100B的VR圖像3010可對應(yīng)于通過第一相機至第四相機當中的預(yù)設(shè)為主相機的相機獲得的圖像。
參照圖30的(b),第二移動終端100B的控制器180將VR圖像3010輸出給顯示單元151,并且第二移動終端100B的用戶可在將連接了第二移動終端100B的VR裝置500穿戴在頭上的情況下觀看VR圖像3010。VR圖像3010包括指示通過第一相機至第四相機當中的哪一相機生成VR圖像3010的信息3020。
此外,根據(jù)本發(fā)明的一個實施方式,第二移動終端100B的用戶選擇通過第一相機至第四相機當中的期望的相機生成的VR圖像,然后可觀看所選擇的VR圖像。這將參照圖31和圖32來描述。
圖31是示出根據(jù)本發(fā)明的一個實施方式的第二移動終端的用戶選擇期望的相機的VR圖像的方法的一個示例的示圖。參照圖31的(a),輸出給第二移動終端100B的顯示單元151的VR圖像3010包括與互連至第一移動終端100A的相應(yīng)第一相機至第四相機對應(yīng)的指示物3110。并且,指示物3110當中的與當前VR圖像3010對應(yīng)的第三相機的指示物可通過與其余指示物相區(qū)分來顯示。
第二移動終端100B的控制器180激活相機121,檢測包括在通過激活的相機121 獲得的圖像中的第二移動終端的用戶的手,然后可在VR圖像3010上顯示與所檢測到的手的位置對應(yīng)的圖形3120。另選地,第二移動終端100B的控制器180通過接口單元160接收通過包括在VR裝置500中(或者連接到VR裝置500)的相機獲得的圖像,檢測包括在所接收到的圖像中的第二移動終端100B的用戶的手,然后可在VR圖像3010上顯示與所檢測到的手的位置對應(yīng)的圖形3120。第二移動終端100B的用戶可通過利用圖形3120選擇特定指示物3110來從第一相機至第四相機中選擇用于觀看VR圖像的期望的相機。并且,第二移動終端100B的控制器180可將請求用戶所選擇的特定相機的VR圖像的信號發(fā)送給第一移動終端100A。
參照圖31的(b),第二移動終端100B的控制器180激活麥克風122,并且可通過分析通過激活的麥克風122獲得的音頻信號來識別語音命令。第二移動終端100B的控制器180可將與所識別的語音命令對應(yīng)的信號發(fā)送給第一移動終端100A。所識別的語音命令可對應(yīng)于從第一相機至第四相機中選擇用于觀看VR圖像的期望的相機的命令。
參照圖31的(c),用于接收用戶的觸摸命令的觸摸板501可被包括在VR裝置500的外部。例如,第二移動終端100B的用戶可通過將觸摸板501觸摸所期望的相機編號那么多次來輸入用戶命令。
參照圖31的(d),第二移動終端100B的控制器180激活相機121,檢測包括在通過激活的相機121獲得的圖像中的第二移動終端的用戶的手,然后可識別所檢測到的手的手勢。另選地,第二移動終端100B的控制器180通過接口單元160接收通過包括在VR裝置500中(或者連接到VR裝置500)的相機獲得的圖像,檢測包括在所接收到的圖像中的第二移動終端100B的用戶的手,然后可識別所檢測到的手的手勢。第二移動終端100B的控制器180可將包括與所檢測到的手的手勢對應(yīng)的命令的信號發(fā)送給第一移動終端100A。與手勢對應(yīng)的命令可以是與指示特定相機的預(yù)設(shè)手勢對應(yīng)的命令。
圖32是示出根據(jù)本發(fā)明的一個實施方式的如參照圖31所提及的在第二移動終端的用戶選擇特定相機的情況下輸出由該特定相機生成的VR圖像的方法的一個示例的示圖。參照圖32的(a),第一移動終端100A的控制器180可根據(jù)用于選擇第二相機的用戶命令將通過第二相機獲得的VR圖像發(fā)送給第二移動終端100B。并且,第二移動終端100B的控制器180可將通過第二相機獲得的VR圖像3210輸出給顯示單 元151。
參照圖32的(b),第二移動終端100B的用戶可選擇多個相機。第一移動終端100A的控制器180可根據(jù)選擇第一相機至第四相機中的全部的用戶命令將通過相應(yīng)的第一相機至第四相機獲得的圖像(或者通過將這些圖像合成而得到的圖像)3220發(fā)送給第二移動終端100B。在本實施方式中,各個圖像3220可不對應(yīng)于VR圖像。第二移動終端100B的控制器180可將圖像3220輸出給顯示單元151。
圖33是示出根據(jù)本發(fā)明的一個實施方式的生成VR圖像的方法的另一示例的示圖。并且,參照圖31提及的冗余內(nèi)容將被省略。根據(jù)本實施方式,在拍攝場景處設(shè)置有多個相機。例如,假設(shè)存在第一相機至第四相機。
第一移動終端100A的控制器180可通過將從四個相機接收的圖像彼此匹配來生成VR圖像3300。第一移動終端100A的控制器180可通過經(jīng)由包括在從四個相機接收的圖像中的彼此相同的對象之間的邊緣分析、顏色分析等將多個圖像彼此匹配來生成VR圖像3300,然后可將所生成的VR圖像3300發(fā)送給第二移動終端100B。
因此,本發(fā)明的實施方式提供各種優(yōu)點。根據(jù)本發(fā)明的至少一個實施方式,可提供使得移動終端的用戶容易地制作VR內(nèi)容的解決方案。根據(jù)本發(fā)明的至少一個實施方式,可提供使得制作和發(fā)送VR內(nèi)容的發(fā)送方與接收和觀看VR內(nèi)容的接收方之間能夠交互的解決方案。
本領(lǐng)域技術(shù)人員將理解,在不脫離本發(fā)明的精神或范圍的情況下,本發(fā)明可被指定為其它形式。另外,上述方法可被實現(xiàn)在程序記錄介質(zhì)中作為計算機可讀代碼。計算機可讀介質(zhì)包括存儲可由計算機系統(tǒng)讀取的數(shù)據(jù)的所有類型的記錄裝置。計算機可讀介質(zhì)包括例如ROM、RAM、CD-ROM、磁帶、軟盤、光學數(shù)據(jù)存儲裝置等,并且還包括載波型實現(xiàn)方式(例如,經(jīng)由互聯(lián)網(wǎng)的傳輸)。另外,計算機包括終端的控制器180。控制器180、無線通信單元110以及圖1A所示的其它組件具有足以執(zhí)行適當?shù)乃惴?流程)以執(zhí)行所描述的功能的結(jié)構(gòu)(例如,處理芯片)。
本領(lǐng)域技術(shù)人員將理解,在不脫離本發(fā)明的精神或范圍的情況下,可對本發(fā)明進行各種修改和變化。因此,本發(fā)明旨在涵蓋對本發(fā)明的修改和變化,只要它們落入所附權(quán)利要求書及其等同物的范圍內(nèi)即可。
相關(guān)申請的交叉引用
本申請要求2015年5月12日在韓國提交的韓國專利申請No.10-2015-0066027的優(yōu)先權(quán),通過引用將其全部內(nèi)容整體并入本文。