本發(fā)明涉及增強現(xiàn)實提供技術,涉及以三維來表示影像中的興趣點,考慮到關于興趣點的內(nèi)容的方向信息等,從多角度提供準確的信息的室外環(huán)境下的增強現(xiàn)實提供方法、執(zhí)行該方法的增強現(xiàn)實提供服務器、以及存儲該方法的記錄介質(zhì)。
背景技術:
::通常,由于室外發(fā)生的種種因素,增強現(xiàn)實大多提供基于圖片的室內(nèi)用增強現(xiàn)實,而室外的增強現(xiàn)實只提供利用gps等大致顯示各興趣點(pointofinterest,poi)的位置的形式的服務。現(xiàn)有的典型的增強現(xiàn)實提供技術有基于圖片的增強現(xiàn)實和基于傳感器的增強現(xiàn)實技術?;趫D片的增強現(xiàn)實是一種在圖片上表現(xiàn)信息的方法,具有預處理后可將準確的信息提供給準確的位置的優(yōu)點。但是,基于圖片的增強現(xiàn)實存在因手抖導致的嚴重晃動的現(xiàn)象,而且存在在室外環(huán)境下由于天氣、氣候等而無法順利提供的缺點?;趥鞲衅鞯脑鰪姮F(xiàn)實是一種基于poi(pointofinterest)的gps信息等大致顯示各poi的位置,從而實現(xiàn)增強的技術。與其說這種技術掌握各poi的準確位置,還不如說是以告知大致的位置或距離等的形式提供。雖然基于傳感器的增強現(xiàn)實具有只要有gps信息就能夠表現(xiàn)的優(yōu)點,但由于gps的特性,無法準確告知各poi的位置,要表現(xiàn)各內(nèi)容存在難度。從而,由于室外發(fā)生的種種因素,現(xiàn)有的增強現(xiàn)實提供技術大多提供基于圖片的室內(nèi)用增強現(xiàn)實,而室外的增強現(xiàn)實只提供利用gps等大致顯示各poi的位置的形式的服務,因此存在無法準確提供室外環(huán)境下的增強現(xiàn)實的問題。【現(xiàn)有技術文獻】【專利文獻】韓國公開專利第10-2012-0080826號技術實現(xiàn)要素:【技術問題】本發(fā)明的目的在于提供一種增強現(xiàn)實提供方法,其為了提供室外環(huán)境下的增強現(xiàn)實,基于三維地圖設定空間坐標和內(nèi)容的方向信息等,即使在室外環(huán)境下也能夠從多角度準確地傳達信息。本發(fā)明的目的在于提供一種增強現(xiàn)實提供方法,其在從用戶端接收的影像中特定興趣點,基于關于興趣點的位置信息和內(nèi)容信息,在以三維表現(xiàn)的興趣點的特定位置顯示內(nèi)容,從而準確地提供關于興趣點的多種信息。【解決問題的方案】為實現(xiàn)上述目的,根據(jù)本發(fā)明的第一方面,在能夠與用戶端聯(lián)動的增強現(xiàn)實提供服務器中執(zhí)行的增強現(xiàn)實提供方法,包括如下步驟:(a)接收來自所述用戶端的影像;(b)在所述影像中確定位于自觀察視點起規(guī)定距離以內(nèi)的興趣點;(c)基于關于所述興趣點的位置信息,設定所述興趣點的三維位置,并基于關于所述興趣點的內(nèi)容信息進行設定,使內(nèi)容顯示在所述興趣點的特定位置;以及(d)將已設定所述三維位置且顯示有內(nèi)容的興趣點疊加到所述影像中,生成增強現(xiàn)實影像。優(yōu)選地,所述步驟(c)可包括:利用關于所述興趣點的位置信息之中高度的信息,在三維地圖中表現(xiàn)所述興趣點。優(yōu)選地,所述步驟(c)可包括:根據(jù)關于所述興趣點的內(nèi)容信息之中內(nèi)容的位置信息,判斷所述內(nèi)容是否位于所述興趣點的內(nèi)部。優(yōu)選地,所述步驟(c)可包括:當所述內(nèi)容位于所述興趣點的內(nèi)部時,根據(jù)所述內(nèi)容的方向信息確定所述內(nèi)容的可觀察方向;以及,若所述內(nèi)容的可觀察方向與所述觀察視點一致,則將所述內(nèi)容確定為可顯示內(nèi)容,若所述內(nèi)容的可觀察方向與所述觀察視點不一致,則將所述內(nèi)容確定為不可顯示內(nèi)容。優(yōu)選地,所述步驟(c)包括設定關于所述可顯示內(nèi)容的位置、名稱或詳細說明,且關于所述可顯示內(nèi)容的位置能夠設定高度,所述詳細說明包括文本、圖片、視頻、或音頻形式的信息。優(yōu)選地,可進一步包括:向所述用戶端提供所述增強現(xiàn)實影像。優(yōu)選地,所述內(nèi)容信息可以是文本、音頻、圖片、視頻、或三維物體的形式。為實現(xiàn)所述目的,根據(jù)本發(fā)明的第二方面,能夠與用戶端聯(lián)動的增強現(xiàn)實提供服務器,包括:影像接收部,接收來自所述用戶端的影像;興趣點確定部,在所述影像中確定位于自觀察視點起規(guī)定距離以內(nèi)的興趣點;興趣點設定部,基于關于所述興趣點的位置信息,設定 所述興趣點的三維位置,并基于關于所述興趣點的內(nèi)容信息進行設定,使內(nèi)容顯示在所述興趣點的特定位置;以及增強現(xiàn)實影像生成部,將已設定所述三維位置且顯示有內(nèi)容的興趣點疊加到所述影像中,以生成增強現(xiàn)實影像。優(yōu)選地,所述興趣點設定部,可利用關于所述興趣點的位置信息之中高度的信息,在三維地圖中表現(xiàn)所述興趣點。優(yōu)選地,所述興趣點設定部,可根據(jù)關于所述興趣點的內(nèi)容信息之中內(nèi)容的位置信息,判斷所述內(nèi)容是否位于所述興趣點的內(nèi)部。優(yōu)選地,所述興趣點設定部,可進行如下處理:當所述內(nèi)容位于所述興趣點的內(nèi)部時,根據(jù)所述內(nèi)容的方向信息確定所述內(nèi)容的可觀察方向,若所述內(nèi)容的可觀察方向與所述觀察視點一致,則將所述內(nèi)容確定為可顯示內(nèi)容;若所述內(nèi)容的可觀察方向與所述觀察視點不一致,則將所述內(nèi)容確定為不可顯示內(nèi)容。優(yōu)選地,所述興趣點設定部設定關于所述可顯示內(nèi)容的位置、名稱或詳細說明,且關于所述可顯示內(nèi)容的位置能夠設定高度,所述詳細說明包括文本、圖片、視頻、或音頻形式的信息。優(yōu)選地,可以進一步包括:增強現(xiàn)實影像提供部,用于向所述用戶端提供所述增強現(xiàn)實影像?!景l(fā)明效果】如上所述,根據(jù)本發(fā)明,由于基于三維地圖設定空間坐標和內(nèi)容的方向信息等,因此具有即使在室外環(huán)境下也可從多角度準確地傳達信息的增強現(xiàn)實提供效果。附圖說明圖1是示出根據(jù)本發(fā)明優(yōu)選實施例的增強現(xiàn)實提供系統(tǒng)的圖。圖2是圖1所示的增強現(xiàn)實提供服務器的框圖。圖3是示出在圖1所示的增強現(xiàn)實提供系統(tǒng)中執(zhí)行的增強現(xiàn)實提供方法的流程圖。圖4是根據(jù)本發(fā)明一實施例而在興趣點設定信息的過程的示例。圖5是根據(jù)本發(fā)明一實施例所提供的增強現(xiàn)實示例。圖中:100:增強現(xiàn)實提供系統(tǒng)110:用戶端120:增強現(xiàn)實提供服務器130:數(shù)據(jù)庫210:影像接收部220:興趣點確定部230:興趣點設定部240:增強現(xiàn)實影像生成部250:控制部具體實施方式下面,本發(fā)明的優(yōu)點和特征、以及實現(xiàn)這些優(yōu)點和特征的方法將在結合附圖在后面詳述的實施例的過程中逐漸變得清晰。但是,本發(fā)明不限于在下面所公開的實施例,而是能夠以不同的多種形式得以體現(xiàn),這些本實施例僅用于完整地公開本發(fā)明,為了向本發(fā)明所屬的
技術領域:
:中的一般的技術人員完整地告知發(fā)明的范疇而提供,本發(fā)明由權利要求書來定義。貫穿說明書整體的相同參考符號指相同構成要素?!凹?或”包括所涉及項目的每一個和其一個以上的所有組合。盡管第一、第二等術語用于敘述多種元件、構成要素及/或部分,但顯然這些元件、構成要素及/或部分不限于這些術語。這些術語僅用于將一個元件、構成要素或部分與其他元件、構成要素或部分區(qū)分。因此,顯然下面所涉及的第一元件、第一構成要素或第一部分在本發(fā)明的技術思想范圍內(nèi)也可以是第二元件、第二構成要素或第二部分。此外,各步驟中的識別符號(例如:a,b,c等)為便于說明而使用,因而識別符號并非說明各步驟的順序,除非文中明確記載特定順序,各步驟可按不同于標明的順序發(fā)生。即,各步驟既可按標明的順序發(fā)生,也可以實質(zhì)上同時執(zhí)行,又可以按相反的順序執(zhí)行。本說明書所使用的術語用于說明實施例,并非限制本發(fā)明。本說明書中,除非句中有特殊說明,單數(shù)型也包括復數(shù)型。說明書中使用的“包括(comprises)”及/或“包括的(comprising)”所涉及的構成要素、步驟、動作及/或元件并不排除一個以上的其他構成要素、步驟、動作及/或元件的存在或追加。除非有其他定義,本說明書所使用的所有術語(包括技術及科學術語)均可用作能被本發(fā)明所屬的
技術領域:
:中的一般的技術人員所普遍理解的含義。而且,除非有明確的特殊定義,在通常使用的詞典中規(guī)定義的術語不應被怪異地或過分地解釋。此外,在說明本發(fā)明的實施例的過程中,當認為對公知的功能或構成的具體說明有可能會使本發(fā)明的主旨不清楚時,將省略其詳細說明。此外,后面敘述的術語是考慮本發(fā)明實施 例中的功能而定義的術語,這可根據(jù)用戶、運用者的意圖或慣例而不同。因此,該定義應以貫穿本說明書整體的內(nèi)容而下定義。圖1是示出根據(jù)本發(fā)明優(yōu)選實施例的增強現(xiàn)實提供系統(tǒng)的圖。參照圖1,增強現(xiàn)實提供系統(tǒng)100包括:用戶端110、增強現(xiàn)實提供服務器120、以及數(shù)據(jù)庫130,用戶端110和增強現(xiàn)實提供服務器120通過網(wǎng)絡連接。用戶端110是一種拍攝影像,并獲取關于所拍攝的影像提供的增強現(xiàn)實的裝置。優(yōu)選地,用戶端110可以向增強現(xiàn)實提供服務器120提供影像,且執(zhí)行用于獲取由增強現(xiàn)實提供服務器120提供的增強現(xiàn)實影像的應用程序。例如,用戶端110為臺式電腦、筆記本電腦等計算機,可以是通過網(wǎng)絡與增強現(xiàn)實提供服務器120連接,從而能獲取增強現(xiàn)實提供服務器120提供的增強現(xiàn)實的所有種類的有線/無線通信裝置,可以是普通手機(又稱功能手機(featurephone))或智能手機(smartphone),該智能手機是基于用戶能夠下載所需的多種應用程序(application),且可自由使用和刪除這些應用程序的開放的運營體制的手機。此外,優(yōu)選地,用戶端110應理解為包括不僅具有通常使用的語音/視頻通話、互聯(lián)網(wǎng)數(shù)據(jù)通信等功能,還具有移動辦公功能的所有移動電話,或雖然不帶語音通話功能,但可訪問互聯(lián)網(wǎng)的所有互聯(lián)網(wǎng)電話或平板電腦(tabletpc)的通信設備。增強現(xiàn)實提供服務器120是與用戶端110連接而執(zhí)行增強現(xiàn)實提供方法的裝置。優(yōu)選地,增強現(xiàn)實提供服務器120可接收來自用戶端110的影像,在該影像中確定興趣點,并基于興趣點的信息而生成增強現(xiàn)實影像。此外,增強現(xiàn)實提供服務器120與數(shù)據(jù)庫130連接,可獲取數(shù)據(jù)庫130提供的興趣點的位置信息和內(nèi)容信息,從而生成增強現(xiàn)實。數(shù)據(jù)庫130是用于存儲和管理關于興趣點的位置信息和內(nèi)容信息的裝置,當收到來自增強現(xiàn)實提供服務器120的關于特定興趣點的信息的請求,向增強現(xiàn)實提供服務器120提供關于特定興趣點的信息。在此,位置信息可相當于用于在三維地圖中表現(xiàn)興趣點的gps信息,內(nèi)容信息是與興趣點相關的信息,例如,當興趣點為慶會樓時,內(nèi)容可以是匾額、屋檐、池塘、杏樹、仁王像、或荷香亭,內(nèi)容信息可以是關于內(nèi)容的位置、名稱、或詳細說明,內(nèi)容信息可相當于文本、音頻、視頻、或三維物體形式的信息。圖2是圖1所示的增強現(xiàn)實提供服務器的框圖。參照圖2,增強現(xiàn)實提供服務器120包括:影像接收部210、興趣點確定部220、興趣點設定部230、增強現(xiàn)實影像生成部240、以及控制部250。影像接收部210接收來自用戶端110的影像。優(yōu)選地,用戶端110能夠?qū)⒂捎脩舳?10 所具備的攝像機所拍攝的影像,通過用于執(zhí)行增強現(xiàn)實提供方法的應用程序而發(fā)送至增強現(xiàn)實提供服務器120。興趣點確定部220在通過影像接收部210接收到的影像中確定位于自觀察視點起規(guī)定距離以內(nèi)的興趣點。在此,觀察視點可相當于用戶端110拍攝該影像的方向。優(yōu)選地,當影像中有多個興趣點時,興趣點確定部220可確定離觀察視點最近的興趣點,或確定由用戶選擇的特定興趣點。在此,通過興趣點確定部220確定的興趣點將成為用于提供增強現(xiàn)實的對象。一實施例中,興趣點確定部220可確定一個興趣點或確定多個興趣點。當確定多個興趣點時,可關于多個興趣點分別執(zhí)行通過下面將要說明的興趣點確定部220和興趣點設定部230執(zhí)行的操作。此外,關于多個興趣點生成的增強現(xiàn)實可在一個影像中同時提供給用戶。興趣點設定部230基于通過興趣點確定部220確定的關于興趣點的位置信息,設定興趣點的三維位置。優(yōu)選地,興趣點設定部230可基于關于興趣點的位置信息,在三維地圖中表現(xiàn)興趣點。即,興趣點設定部230可利用關于興趣點的gps信息將興趣點以具有高度信息的三維表示。從而,與現(xiàn)有的利用gps信息表現(xiàn)平面興趣點不同,根據(jù)本發(fā)明,可利用關于每個興趣點的位置的gps信息和高度信息,表示以三維表現(xiàn)的興趣點。興趣點設定部230基于關于興趣點的內(nèi)容信息進行設定,使內(nèi)容顯示在興趣點的特定位置。優(yōu)選地,興趣點設定部230可根據(jù)內(nèi)容信息設定是否在興趣點顯示該內(nèi)容,或設定在哪個位置以何種方式顯示該內(nèi)容。更具體地,興趣點設定部230可根據(jù)關于興趣點的內(nèi)容信息之中內(nèi)容的位置信息,判斷內(nèi)容是否位于興趣點的內(nèi)部。例如,當興趣點為慶會樓且內(nèi)容為匾額時,匾額的位置信息相當于慶會樓內(nèi)部,因此興趣點設定部230可以判斷內(nèi)容位于興趣點的內(nèi)部。優(yōu)選地,當內(nèi)容位于興趣點的內(nèi)部時,興趣點設定部230可根據(jù)內(nèi)容的方向信息確定內(nèi)容的可觀察方向。例如,當內(nèi)容為慶會樓里的匾額時,由于無法從四面觀察,只能在包括正面的一定范圍內(nèi)觀察,因此關于匾額的方向信息可相當于自正面起的左右45°范圍。即,此時興趣點設定部230可以將匾額的可觀察方向確定為自正面起的左右45°范圍。優(yōu)選地,若內(nèi)容的可觀察方向與觀察視點一致,則興趣點設定部230將內(nèi)容確定為可顯示內(nèi)容,若內(nèi)容的可觀察方向與觀察視點不一致,則興趣點設定部230將內(nèi)容確定為不可顯示內(nèi)容。例如,若內(nèi)容的可觀察方向為自正面起的左右45°范圍,關于影像的觀察視點為自正面起向右側15°的地點,則內(nèi)容的可觀察方向包括觀察視點。即,在觀察視點上能夠觀察該內(nèi)容。從而,興趣點設定部230可將該內(nèi)容確定為可顯示內(nèi)容。再例如,若內(nèi)容的可觀察方向為自正面起向右側90°的地點,且關于影像的觀察視點為 自正面起向右側15°的地點,則內(nèi)容的可觀察方向與觀察視點不一致。即,不能在觀察視點觀察該內(nèi)容。從而,興趣點設定部230可將該內(nèi)容確定為不可顯示內(nèi)容。優(yōu)選地,興趣點設定部230可設定關于可顯示內(nèi)容的位置、名稱、或詳細說明。在此,關于可顯示內(nèi)容的位置可以設定高度,詳細說明可包括文本、圖片、視頻或音頻形式的信息。一實施例中,興趣點設定部230可通過三維物體使可顯示內(nèi)容準確地位于興趣點的特定位置。此外,當通過三維物體指定內(nèi)容的位置時,用戶可利用用戶接口、例如鼠標,將三維物體移動至特定位置或設定三維物體的表現(xiàn)方法。根據(jù)本發(fā)明,由于在包括高度信息的三維地圖中表現(xiàn)興趣點,且可顯示內(nèi)容的位置也可以設定高度,因此可顯示內(nèi)容能夠準確地位于興趣點的具有特定高度的特定位置。優(yōu)選地,增強現(xiàn)實影像生成部240能夠?qū)⑼ㄟ^興趣點設定部230設定三維位置且顯示有內(nèi)容的興趣點疊加到影像中,從而生成增強現(xiàn)實影像。即,增強現(xiàn)實影像生成部240將以三維顯示且在特定位置顯示有內(nèi)容的興趣點疊加到從用戶端110接收到的影像中。優(yōu)選地,雖然未在附圖中示出,但增強現(xiàn)實提供服務器120可進一步包括增強現(xiàn)實影像提供部,增強現(xiàn)實影像提供部向用戶端110提供通過增強現(xiàn)實影像生成部240生成的增強現(xiàn)實影像?;蛘撸鰪姮F(xiàn)實影像提供部向數(shù)據(jù)庫130傳輸增強現(xiàn)實影像,用戶端110可獲取數(shù)據(jù)庫130提供的增強現(xiàn)實影像。圖3是示出在圖1所示的增強現(xiàn)實提供系統(tǒng)中執(zhí)行的增強現(xiàn)實提供方法的流程圖。影像接收部210接收來自用戶端110的影像(步驟s310),興趣點確定部220在影像中確定位于自觀察視點起規(guī)定距離以內(nèi)的興趣點(步驟s320)。優(yōu)選地,興趣點確定部220可在影像中確定一個或多個興趣點。在此,興趣點的確定方法可由用戶進行多種設定。例如,可根據(jù)離觀察視點的距離、用戶做出的選擇、每個興趣點的評價信息、或每個興趣點的內(nèi)容信息來確定興趣點。興趣點設定部230基于關于興趣點的位置信息設定興趣點的三維位置,并基于關于興趣點的內(nèi)容信息進行設定,使內(nèi)容顯示在興趣點的特定位置(步驟s330)。例如,參照圖4,興趣點可基于高度信息和gps位置信息而表現(xiàn)在三維地圖中,并以三維顯示。從而,當顯示關于興趣點的信息時,可準確指出如同表現(xiàn)在圓內(nèi)部的白色物體那樣具有特定高度的特定位置。此外,關于興趣點的內(nèi)容之中根據(jù)內(nèi)容的方向信息被確定為可顯示內(nèi)容的內(nèi)容能夠顯示在興趣點的特定位置。例如,參照圖4中以圓示出的部分,內(nèi)容的位置可利用三維物體來準確特定。即,由于可顯示內(nèi)容的位置能夠設定高度,因而三維物體能夠準確地位于興趣點的 特定高度的特定位置,圖4中位于圓內(nèi)部的兩個三維物體分別準確指出屋檐和屋頂?shù)奶囟ú糠?。再例如,參照圖4中以左上角四邊形標示的部分,也可利用三維物體和多線(polyline)準確地特定位置。即,當所指為地面時,雖然可以使三維物體位于地面的特定位置,但也可以利用三維物體和多線而在特定高度指出地面。此外,內(nèi)容的位置表現(xiàn)方式可以有多種變型,不限于此。由此,可以表現(xiàn)昌德宮、光化門等遺址的信息、諸如匾額或檐角走獸等包括在該遺址中的信息。進而,參照圖4中左上角以四邊形標示的部分,在設定了內(nèi)容的位置后,可獲取由用戶輸入或由數(shù)據(jù)庫130提供的關于該內(nèi)容的信息。關于內(nèi)容的信息的提供方式可以以多種方式設定,也可以以鏈接方式設定。增強現(xiàn)實影像生成部240將已設定三維位置且顯示有內(nèi)容的興趣點疊加到影像中,從而生成增強現(xiàn)實影像(步驟s340)。例如,參照圖5,圖5是關于興趣點“慶會樓”的增強現(xiàn)實,相當于關于“慶會樓”的匾額、屋檐、檐角走獸的內(nèi)容準確地顯示在“慶會樓”的特定位置。此外,也可以使關于內(nèi)容的詳細信息與內(nèi)容一同顯示在增強現(xiàn)實中,通過點擊用戶關于提供給用戶端110的增強現(xiàn)實影像所輸入的數(shù)據(jù)、例如用戶的特定內(nèi)容來提供。同時,根據(jù)本發(fā)明一實施例的增強現(xiàn)實提供方法也可以在計算機可讀記錄介質(zhì)中用計算機可讀代碼來體現(xiàn)。計算機可讀記錄介質(zhì)包括存儲有計算機系統(tǒng)可讀取數(shù)據(jù)的所有種類的記錄裝置。例如,計算機可讀記錄介質(zhì)可以是只讀存儲器(rom)、隨機存取存儲器(ram)、只讀光盤(cd-rom)、磁帶、硬盤、軟磁盤、移動存儲裝置、閃速存儲器(flashmemory)、光數(shù)據(jù)存儲裝置等。此外,計算機可讀記錄介質(zhì)分散在通過計算機通信網(wǎng)連接的計算機系統(tǒng)中,因而可以以分散方式可讀代碼來存儲和執(zhí)行。盡管上面對根據(jù)本發(fā)明的增強現(xiàn)實提供方法、執(zhí)行該方法的增強現(xiàn)實提供服務器、以及存儲該方法的記錄介質(zhì)的優(yōu)選實施例進行了說明,但本發(fā)明不限于此,可在權利要求書和說明書、以及附圖的范圍內(nèi)對其實施多種變型,而這些變型也均屬于本發(fā)明。當前第1頁12當前第1頁12