聯(lián)的可識別物 體W及對應(yīng)的坐標(biāo)信息返回給查詢方客戶端,查詢方客戶端當(dāng)前攝取到的圖像中可識別物 體所在的區(qū)域,確定出可識別物體所在的位置點,再根據(jù)坐標(biāo)信息,確定出需要將標(biāo)注信息 顯示該可識別物體的什么位置。送樣,假設(shè)有用戶在某場所中某顯示器附近(例如,右上 角)標(biāo)注了一條信息,則其他用戶的圖像攝取裝置捕捉到該顯示器時,如果經(jīng)過比對發(fā)現(xiàn) 圖像中的其他特征與該條信息內(nèi)容的標(biāo)注位置圖像特征之間的相似度很高,則可W將送條 標(biāo)注在顯示器右上角的標(biāo)注信息,仍然在顯示器的右上角提供給查看者用戶。
[0102]W上所述的方式中,服務(wù)器是直接將客戶端上傳的圖像特征信息添加到標(biāo)注信息 與場所之間的對應(yīng)關(guān)系中,送樣,后續(xù)在有用戶查詢標(biāo)注信息時,都可將查詢方用戶上傳的 圖像信息與各個標(biāo)注信息對應(yīng)的圖像特征信息進(jìn)行匹配。但是在前述各種實現(xiàn)方式下,需 要為每條標(biāo)注信息都對應(yīng)保存一個圖像特征集合,會占用服務(wù)器的存儲空間,并且,隨著數(shù) 據(jù)庫規(guī)模的不斷增大,檢索所需的時間也會增長,導(dǎo)致響應(yīng)速度變慢。另外,在前述各種實 現(xiàn)方式下,標(biāo)注者用戶可W隨意選擇標(biāo)注位置,送樣雖然增大了放置操作的靈活性,但是也 可能存在W下缺點:第一,如果用戶選擇的標(biāo)注位置所在場景的圖像不具有顯著的區(qū)分度, 則后續(xù)在進(jìn)行匹配時,可能會出現(xiàn)匹配錯誤等情況;例如,用戶標(biāo)注的地方可能是一面白 墻,送樣的圖像提取出的特征會很單一,不太容易根據(jù)圖像特征確定出標(biāo)注信息的標(biāo)注位 置。第二,在服務(wù)器端保存用戶自行拍攝的圖像,則一方面由于用戶的拍攝質(zhì)量等原因,可 能導(dǎo)致圖像質(zhì)量不高,后續(xù)匹配時難度較高,另一方面,不同用戶使用的終端設(shè)備由于像素 等因素的影響,在進(jìn)行匹配時,也可能無法得到準(zhǔn)確的結(jié)果??紤]到上述各種因素,在本申 請實施例中提供了其他的實現(xiàn)方式,W下進(jìn)行介紹。
[0103] 具體實現(xiàn)方式四
[0104] 在該實現(xiàn)方式下,服務(wù)器可W預(yù)先對各個場所進(jìn)行建模,分別為各個場所建立起 圖像特征庫,在該圖像特征庫中,針對每個場所,可W保存場所內(nèi)一個或多個標(biāo)志性物體的 圖像特征,其中,標(biāo)志性物體就可W是一些家具、電器等等,送些圖像特征可W是預(yù)先到場 所內(nèi)對標(biāo)志性物體進(jìn)行拍攝并提取的。在拍攝標(biāo)志性物體時,可W根據(jù)場所內(nèi)的實際布局 情況等,預(yù)測用戶可能會希望將其標(biāo)注信息放置在什么物體附近,然后將送些物體作為該 場所內(nèi)比較有代表性的標(biāo)志性物體進(jìn)行拍照,并分別對進(jìn)行特征提取,用提取出的圖像特 征集合來代表各個標(biāo)志性物體??傊?,服務(wù)器可W預(yù)先建立表5所示的標(biāo)志性物體的圖像 特征庫:
[0105]表5
[0106]
陽107]其中,每個場所中可W有多個標(biāo)志性物體,每個標(biāo)志性物體的圖像特征也可W由 多個維度上的特征集合來表示。送樣,在收到標(biāo)注者用戶上傳的標(biāo)注信息W及對應(yīng)場景的 圖像特征信息時,服務(wù)器可W首先判斷場景的圖像中是否存在與某標(biāo)志性物體的圖像特征 相匹配的內(nèi)容,如果是,則可W保存標(biāo)注信息與場所之間的對應(yīng)關(guān)系,并將相匹配的標(biāo)志性 物體的標(biāo)識到該對應(yīng)關(guān)系中。例如,假設(shè)某場所中包含桌子、顯示器、空調(diào)等標(biāo)志性物體,某 用戶需要將某標(biāo)注信息放置在顯示器附近,則可W將終端設(shè)備的攝像頭對準(zhǔn)該顯示器,客 戶端上傳標(biāo)注信息W及該場所的圖像特征之后,服務(wù)器分析出該圖像中包含顯示器送一標(biāo) 志性物體,于是就可W從圖像特征庫中取出該顯示器對應(yīng)的標(biāo)識,并添加到當(dāng)前標(biāo)注信息 與場所之間的對應(yīng)關(guān)系中。例如,如表6所示:
[010引 表6[0109]
[0110] 后續(xù)在接收到查詢方用戶發(fā)送的查詢某場所內(nèi)的標(biāo)注信息的請求時,可W首先識 別查詢方用戶上傳的圖像中是否包含當(dāng)前場所內(nèi)的某標(biāo)志性物體,如果包括,則可W從對 應(yīng)關(guān)系中提取出匹配的標(biāo)志性物體對應(yīng)的標(biāo)注信息,并返回給查詢方用戶。在提供標(biāo)注信 息時,也可W將標(biāo)注信息顯示在該標(biāo)志性物體的附近。可見,通過上述表6所記錄的對應(yīng)關(guān) 系,與表3中記錄的對應(yīng)關(guān)系所能達(dá)到的效果類似甚至比其更好,但是存儲結(jié)構(gòu)上更簡單, 對應(yīng)關(guān)系中不需要再保存圖像特征信息,只需要保存關(guān)聯(lián)的標(biāo)志性物體即可。
[0111] 通過送種方式,使得一個場所內(nèi)哪些地方可W放置標(biāo)注信息是預(yù)先設(shè)定好的,避 免用戶隨意標(biāo)注引起的各種可能的問題。并且,不需要每條標(biāo)注信息都對應(yīng)保存一個用戶 上傳的圖像特征集合,可W節(jié)省存儲空間。對于一個場所而言,保存的標(biāo)志性物體的數(shù)目并 不會非常多,并且是固定的,送樣可W使得每次針對該場所的查詢請求進(jìn)行圖像特征的匹 配時,所需的工作量基本是固定的。當(dāng)然,在送種方式下,仍然只能確定標(biāo)注信息與標(biāo)志性 物體之間的關(guān)聯(lián)關(guān)系,但是關(guān)于兩者之間具體的相對位置關(guān)系并沒有確定,因此,在向查詢 者用戶展示標(biāo)注信息時,可W隨機(jī)顯示在標(biāo)志性物體附近,與最初放置的位置可能并不是 完全一致的。
[0112] 具體實現(xiàn)方式五
[0113]為了使得標(biāo)注信息與標(biāo)志性物體之間的相對位置關(guān)系更加準(zhǔn)確的提供給查詢者 用戶,也可W采用類似具體實現(xiàn)方式H中的方式,也即,在上傳圖像特征信息的過程中,計 算出標(biāo)注信息的放置點相對于可識別物體的坐標(biāo),并在服務(wù)器端進(jìn)行保存,或者,為了簡化 該過程,在本具體實現(xiàn)五中還提供了進(jìn)一步的優(yōu)化方法。
[0114] 具體實現(xiàn)方式五是在具體實現(xiàn)方式四的基礎(chǔ)上實現(xiàn)的,具體的,在對各個場所進(jìn) 行建模的過程中,除了針對各個場所保存標(biāo)志性物體的圖像特征之外,還可W為各個標(biāo)志 性物體指定可選擇的標(biāo)注點,并保存在圖像特征庫中。其中,各個標(biāo)注點的位置也可W由標(biāo) 注點相對于標(biāo)志性物體的中必點等位置的坐標(biāo)來表示。送樣,圖像特征庫保存的對應(yīng)關(guān)系 可W如W下表7所示:
[0117]也就是說,同一個場所內(nèi)的同一個標(biāo)志性物體,可W存在多個可選的標(biāo)注點,并在 圖像特征庫中分別記錄各個標(biāo)注點相對于標(biāo)志性物體的坐標(biāo)。
[0118] 送樣,在接收到標(biāo)注者用戶的標(biāo)注請求時,首先從標(biāo)注者用戶上傳的圖像特征集 合中識別出其中包含的標(biāo)志性物體,然后將該標(biāo)志性物體的圖像特征W及該標(biāo)志性物體中 各個可選的標(biāo)注點的相對坐標(biāo)返回給標(biāo)注者客戶端。送樣,標(biāo)注者客戶端可W根據(jù)返回的 圖像特征定位到當(dāng)前攝取到的圖像中包含的可識別物體,并根據(jù)坐標(biāo)在該可識別物體對應(yīng) 的位置處顯示出可選擇的標(biāo)注點圖標(biāo),并提供選擇操作入口。送樣,標(biāo)注者用戶就可W選擇 標(biāo)注點,相應(yīng)的,客戶端可W將用戶選擇的標(biāo)注點的標(biāo)識上傳給服務(wù)器,送樣服務(wù)器就可W 將用戶選擇的標(biāo)注點的信息,添加到標(biāo)注信息與場所W及標(biāo)志性物體之間的對應(yīng)關(guān)系中。 如表8所示:
[0119]表 8
[0120]
[0121] 其中,同一個場所的同一個標(biāo)志性物體附近的不同位置可能標(biāo)注了多條標(biāo)注信 息,關(guān)于其他標(biāo)志性物體W及其他場所的記錄W上表8中省略。
[0122] 通過送種方式,服務(wù)器端在之后在接收到查詢標(biāo)注信息的請求時,可W首先判斷 查詢方客戶端上傳的場景圖像信息是否存在匹配的標(biāo)志性物體,如果存在,則可W將與該 標(biāo)志性物體關(guān)聯(lián)的各個標(biāo)注信息返回,并返回對應(yīng)的標(biāo)注點的坐標(biāo)信息。查詢方客戶端在 收到之后,可W根據(jù)標(biāo)志性物體信息W及標(biāo)注點的坐標(biāo)信息,確定出各個標(biāo)注信息應(yīng)該顯 示的位置,并在對應(yīng)位置上提供各條標(biāo)注信息即可。
[0123] 可見,通過送種方式最終的標(biāo)注信息與標(biāo)注位置匹配的精確程度與表4所示的方 式是相似的甚至更好,但是,表8所示的存儲結(jié)構(gòu)更簡單,可W提高實現(xiàn)效率。
[0124]W上對各種實現(xiàn)方式分別進(jìn)行了詳細(xì)地介紹,在實際應(yīng)用中,可W根據(jù)實際的需 要選擇其中任意一種方式來實現(xiàn),送里不做限定。
[0125]另外,具體實現(xiàn)時,一般情況下,可W是在用戶登錄的情況下,進(jìn)行標(biāo)注信息內(nèi)容 的操作,此時,還可W將標(biāo)注者用戶的身份標(biāo)識信息也發(fā)送給服務(wù)器,服務(wù)器可W將身份標(biāo) 識信息也加入到對應(yīng)關(guān)系中進(jìn)行保存。送樣,使得數(shù)據(jù)庫中保存了W下信息:各個場所中標(biāo) 注了哪些信息內(nèi)容,送些信息內(nèi)容分別是由哪個用戶標(biāo)注的,W及被標(biāo)注在了具體什么位 置。后續(xù)在為其他用戶提供送種信息內(nèi)容時,除了可W參考標(biāo)注位置信息,還可W根據(jù)標(biāo)注 者的身份標(biāo)識信息進(jìn)行篩選。例如,只有在具有好友關(guān)系的情況下,才能查看標(biāo)注的信息內(nèi) 容的詳細(xì)信息;或者只有相同偏好的用戶可才可W查看到,等等。對于標(biāo)注者用戶而言,還 可W向其反饋查看信息,例如,統(tǒng)計有多少好友查看了其發(fā)布的標(biāo)注信息等等。當(dāng)然,在實 際應(yīng)用中,也可W設(shè)置為;非好友用戶之間也可W互相查看對方的標(biāo)注信息,此時,也可W 將查看者的身份標(biāo)識信息顯示給標(biāo)注者,并且可W提示用戶加對方為好友,等等。
[0126] 在保存了用戶身份標(biāo)識信息的情況下,數(shù)據(jù)庫中的對應(yīng)關(guān)系可W如表9所示:
[0127]表9
[012 引 陽129] 總之,通過本申請實施例,用戶可W利用其移動終端設(shè)備中安裝的應(yīng)用,實現(xiàn)在其 所在的場所中標(biāo)注具體的信息內(nèi)容,送種信息內(nèi)容可W不限于文字,還可W是圖片,或者語 音等等,通過各種形式的信息內(nèi)容,使得該場所中能夠留下關(guān)于該用戶的"痕跡",送種"痕 跡"可W體現(xiàn)出用戶在過去某時刻在該場所中發(fā)表的感想,或者記錄的所見所聞等等,并且 不會受到具體場所中實際條件的限制,不需要真正的紙和筆,不會影響到場所的實際景觀。
[0130] 實施例二
[0131] W上實施例一主要從如何進(jìn)行信息內(nèi)容的標(biāo)注的角度對本申請實施例進(jìn)行了詳 細(xì)的介紹,在該實施例二中,主要從如何查詢標(biāo)注信息的角度進(jìn)行介紹。各個步驟的執(zhí)行主 體仍然是應(yīng)用的客戶端。在實際應(yīng)用中華,該客戶端與實施例一中所提到的客戶端可W是 相同的,也就是說,同一客戶端,既可W實現(xiàn)在場所中標(biāo)注信息的功能,也能夠?qū)崿F(xiàn)查看場 所中其他用戶的標(biāo)注信息的功能。
[0132] 參見圖5,本申請實施例二提供了一種基于場所的信息處理方法,該方法可W包括 W下步驟:
[0133] S501 ;接收查詢方用戶發(fā)出的查看周邊標(biāo)注信息的請求;
[0134] 當(dāng)用戶啟動應(yīng)用客戶端時,客戶端就可W接收到用戶需要查看當(dāng)前場所內(nèi)的標(biāo)注 信息的請求。當(dāng)然,也可W是進(jìn)入該應(yīng)用的用戶界面之后,在該界面中分別提供兩種功能的 操作入口。例如,參見圖2,其中除了顯示有"留下自己"送一操作入口外,還顯示有"查找 周邊"操作入口,也可W將用戶在圖2所示的用戶界面中點擊該"查找周邊"操作入口的操 作,確定為用戶發(fā)出的查看周邊信息內(nèi)容的請求。
[0135] S502 ;獲取所述查詢方用戶所在的地理位置信息;
[0136] 接收到查看周邊信息內(nèi)容的請求后,同樣可W首先獲取到用戶所在的地理位置信 息。當(dāng)然,在實際應(yīng)用中,該步驟S502也可W說在步驟S501之前進(jìn)行的。具體的實現(xiàn)過程 與實施例一中類似,送里不再賞述。
[0137] S503 ;將所述地理位置信息發(fā)送到服務(wù)器,W便服務(wù)器根據(jù)該地理位置信息確定 查詢方用戶所在的目標(biāo)場所,并根據(jù)預(yù)先保存的各條標(biāo)注信息與場所信息之間的對應(yīng)關(guān) 系,確定該目標(biāo)場所對應(yīng)的各條標(biāo)注信息并返回;
[013引由于在用戶標(biāo)注信息內(nèi)容的過程中,服務(wù)器的數(shù)據(jù)庫中保存了各個用戶標(biāo)注的信 息內(nèi)容與所在場所之間的對應(yīng)關(guān)系,因此,在查看當(dāng)前場所中標(biāo)注的信息內(nèi)容的請求時,就 可W將該請求發(fā)送到服務(wù)器,服務(wù)器在確定了場所信息之后,就可W獲取到該場所對應(yīng)的 各條標(biāo)注信息,并返回給查詢方客戶端。
[0139] S504 ;接收服務(wù)器返回的各條標(biāo)注信息,W供用戶查詢方用戶查看。
[0140] 在獲取到該場所中對應(yīng)的各條標(biāo)注信息之后,就可W將其提供給當(dāng)前用戶。具體 在提供送種信息內(nèi)容信息時,可W有多種形式。例如,可W直接將各條信息內(nèi)容展示出現(xiàn), 或者也可W先在用戶界面中W列表等形式提供各個信息內(nèi)容的提示信息(例如,圖標(biāo)等, 不同類型的標(biāo)注信息可W用不同的圖標(biāo),例如,音頻的標(biāo)注信息可W用"卿趴"等圖案的圖 標(biāo)表示,文本的標(biāo)注信息可W用"省略號"等圖案的圖標(biāo)表示),當(dāng)用戶點擊查看某提示信息 后,再將該提示信息對應(yīng)的信息內(nèi)容的詳細(xì)內(nèi)容展現(xiàn)給用戶。
[0141] 當(dāng)然,如果數(shù)據(jù)庫中還保存有信息內(nèi)容在場所中的具體標(biāo)注位置信息,則在向用 戶提供其他用戶在該場所標(biāo)注的信息內(nèi)容時,同樣可W首先捕捉到場所內(nèi)的圖像信息,并 發(fā)送到服務(wù)器,服務(wù)器在查詢該場所的標(biāo)注信息時,還可W根據(jù)該圖像信息,找出對應(yīng)標(biāo)注 位置上的標(biāo)注信息并返回。例如,如果服務(wù)器保存的是各條標(biāo)注信息對應(yīng)的圖像特征信息, 則可W從數(shù)據(jù)庫中獲取用戶當(dāng)前所在場所中各條標(biāo)注信息的標(biāo)注位置的圖像特征信息,并 將當(dāng)前捕捉到的圖像的特征信息與各條標(biāo)注信息對應(yīng)的標(biāo)注位置的圖像特征信息進(jìn)行匹 配。或者,可W接收服務(wù)器返回的各條標(biāo)注信息關(guān)聯(lián)的可識別物體的圖像特征信息,并據(jù)此 將各條標(biāo)注信息顯示在當(dāng)前捕捉到的場景圖像中該可識別物體的附近。或者,還可W接收 服務(wù)器返回的各條標(biāo)注信息關(guān)聯(lián)的可識別物體的圖像特征信息,W及各條標(biāo)注信息與該可 識別物體之間