像特征，從而保證了搜索的準(zhǔn) 確度。
[0082] 當(dāng)在S420中判斷目標(biāo)圖像不滿足預(yù)定條件時(shí)，意味著在S410中采集的目標(biāo)圖像 不符合要求，可能導(dǎo)致難以準(zhǔn)確地提取其中的字符信息和圖像特征。此時(shí)，可以在用戶設(shè)備 中輸出重拍提示消息，以提示重新執(zhí)行S410來采集要搜索的目標(biāo)對象的目標(biāo)圖像。在該重 拍提示消息中，還可以具體列出目標(biāo)圖像不滿足預(yù)定條件的原因。例如，在目標(biāo)圖像的光照 分量的平均值名小于預(yù)定亮度閾值?Υ時(shí)，可以在重拍提示消息中指出亮度不夠；在該目標(biāo) 圖像的所有位于邊緣的像素點(diǎn)的梯度的平均值石小于預(yù)設(shè)梯度閾值I時(shí)，可以在重拍提示 消息中指出清晰度不夠。這樣，可以根據(jù)所述重拍提示消息調(diào)整目標(biāo)圖像的拍攝，直到獲取 滿足所述預(yù)定條件的目標(biāo)圖像。或者，當(dāng)在S420中判斷目標(biāo)圖像不滿足預(yù)定條件時(shí)，可以 直接根據(jù)S420的判斷結(jié)果自動(dòng)地調(diào)整圖像采集裝置的設(shè)置參數(shù)，直到獲取滿足所述預(yù)定 條件的目標(biāo)圖像。
[0083] 用戶設(shè)備在S430中向服務(wù)器發(fā)出搜索請求之后，服務(wù)器執(zhí)行結(jié)合圖2和3描述的 搜索方法，并得到與目標(biāo)對象相關(guān)聯(lián)的相關(guān)對象信息。也就是說，所述相關(guān)對象信息基于從 所述目標(biāo)圖像中提取的與所述目標(biāo)對象相關(guān)聯(lián)的字符信息和圖像特征搜索得到。對應(yīng)地， 用戶設(shè)備在S440中接收與目標(biāo)對象相關(guān)聯(lián)的相關(guān)對象信息。用戶設(shè)備可以利用互聯(lián)網(wǎng)、局 域網(wǎng)等各種網(wǎng)絡(luò)或通信技術(shù)從服務(wù)器接收所述相關(guān)對象信息。相關(guān)對象信息例如是多個(gè)備 選對象的圖片、文字描述以及關(guān)聯(lián)信息。該關(guān)聯(lián)信息例如是價(jià)格、銷量、用戶評價(jià)、宣傳視頻 以及超鏈接等，其有助于用戶在多個(gè)備選對象中執(zhí)行選擇操作。用戶設(shè)備在接收到相關(guān)對 象信息之后，可以將所述相關(guān)對象信息顯示在用戶設(shè)備的屏幕上，以供用戶查看。
[0084] 因此，在用戶設(shè)備拍攝目標(biāo)對象的圖像的過程中，用戶設(shè)備可以自動(dòng)計(jì)算圖像的 光照條件和清晰程度。如果圖像的光照條件和清晰程度達(dá)到要求，則允許用戶設(shè)備基于所 采集的目標(biāo)圖像發(fā)出搜索請求。如果圖像的光照條件和清晰程度不能達(dá)到要求，則提示或 自動(dòng)指令用戶設(shè)備重新拍攝，直到獲取達(dá)到要求的目標(biāo)圖像。
[0085] 在根據(jù)本公開實(shí)施例的用于用戶設(shè)備的搜索方法的技術(shù)方案中，在所采集的目標(biāo) 對象的目標(biāo)圖像滿足預(yù)定條件時(shí)，基于該目標(biāo)圖像發(fā)出搜索請求，使能夠準(zhǔn)確且便利地搜 索目標(biāo)對象的相關(guān)對象信息，從而提高用戶的使用體驗(yàn)。
[0086] 圖5是示意性圖示了根據(jù)本公開實(shí)施例的第一搜索裝置500的框圖。該第一搜索 裝置500可應(yīng)用于用戶設(shè)備或服務(wù)器。如圖5所示，所述第一數(shù)據(jù)處理裝置500可包括一 個(gè)或多個(gè)處理器510、存儲(chǔ)單元520、輸入單元530、輸出單元540、通信單元550、圖像采集單 元560。這些組件通過總線系統(tǒng)570和/或其它形式的連接機(jī)構(gòu)（未示出）互連。應(yīng)當(dāng)注 意，圖5所示的第一搜索裝置500的組件和結(jié)構(gòu)只是示例性的，而非限制性的，根據(jù)需要，第 一搜索裝置500也可以具有其他組件和結(jié)構(gòu)，并且例如可以不包括輸入單元530、輸出單元 540、圖像采集單元560等。
[0087] 處理器510可以是中央處理單元（CPU)或者具有數(shù)據(jù)處理能力和/或指令執(zhí)行能 力的其它形式的處理單元，并且可以控制第一搜索裝置500中的其它組件以執(zhí)行期望的功 能。
[0088] 存儲(chǔ)單元520可以包括一個(gè)或多個(gè)計(jì)算機(jī)程序產(chǎn)品，所述計(jì)算機(jī)程序產(chǎn)品可以包 括各種形式的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，例如易失性存儲(chǔ)器和/或非易失性存儲(chǔ)器。所述易失 性存儲(chǔ)器例如可以包括隨機(jī)存取存儲(chǔ)器（RAM)和/或高速緩沖存儲(chǔ)器（cache)等。所述非 易失性存儲(chǔ)器例如可以包括只讀存儲(chǔ)器（R0M)、硬盤、閃存等。在所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì) 上可以存儲(chǔ)一個(gè)或多個(gè)計(jì)算機(jī)程序指令，處理器510可以運(yùn)行所述程序指令，以實(shí)現(xiàn)上述 的本公開的實(shí)施例的結(jié)合圖2和3描述的搜索方法的各個(gè)步驟，此時(shí)第一搜索裝置500可 被包括在服務(wù)器中?；蛘?，處理器510可以運(yùn)行所述程序指令，實(shí)現(xiàn)上述的本公開的實(shí)施例 的結(jié)合圖4描述的搜索方法的各個(gè)步驟，此時(shí)第一搜索裝置500可被包括在用戶設(shè)備中。在 所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中還可以存儲(chǔ)各種應(yīng)用程序和各種數(shù)據(jù)，例如顯示屏幕的工作狀 態(tài)、應(yīng)用程序的操作狀態(tài)等。
[0089] 輸入單元530可以是用戶用來輸入指令的單元，并且可以包括鍵盤、鼠標(biāo)、麥克風(fēng) 和觸摸屏等中的一個(gè)或多個(gè)。輸出單元540可以向外部（例如用戶）輸出各種信息（例如 圖像或聲音），并且可以包括顯示器、揚(yáng)聲器等中的一個(gè)或多個(gè)。通信單元550可以通過網(wǎng) 絡(luò)或其它技術(shù)與其它單元（例如個(gè)人計(jì)算機(jī)、服務(wù)器、移動(dòng)臺(tái)、基站等）通信，所述網(wǎng)絡(luò)可以 是因特網(wǎng)、無線局域網(wǎng)、移動(dòng)通信網(wǎng)絡(luò)等。
[0090] 在本公開實(shí)施例的第一搜索裝置500的技術(shù)方案中，通過從要搜索的目標(biāo)對象的 目標(biāo)圖像中提取與所述目標(biāo)對象相關(guān)聯(lián)的字符信息和圖像特征，基于所字符信息和圖像特 征執(zhí)行搜索，能夠準(zhǔn)確且便利地搜索目標(biāo)對象的相關(guān)對象信息，從而提高用戶的使用體驗(yàn)。
[0091] 圖6是示意性圖示了根據(jù)本公開實(shí)施例的用于服務(wù)器的第二搜索裝置600的框 圖。該第二搜索裝置600可應(yīng)用于如圖1(a)所示的搜索服務(wù)器。如圖6所示，該第二搜索 裝置600可包括第一接收單元610、提取單元620、搜索單元630和第一發(fā)送單元640。
[0092] 第一接收單元610接收搜索請求，該搜索請求包括要搜索的目標(biāo)對象的目標(biāo)圖 像。所述目標(biāo)圖像是如圖1(b)中所示的任一個(gè)目標(biāo)圖像。該目標(biāo)圖像包含了要搜索的目 標(biāo)對象的各種信息，包含但不限于品牌名稱、對象內(nèi)容、系列、外觀、容量、生產(chǎn)日期等。該目 標(biāo)圖像可以是所述用戶設(shè)備利用其圖像采集裝置所采集的，也可以是所述用戶設(shè)備從其它 電子設(shè)備接收的，所述目標(biāo)圖像的獲取方式不構(gòu)成對本公開實(shí)施例的限制。該第一接收單 元610對應(yīng)于圖5中的通信單元550,并可以利用射頻電路、信號(hào)接收電路來實(shí)現(xiàn)。
[0093] 所述目標(biāo)圖像的圖像質(zhì)量將直接影響搜索結(jié)果。例如在圖1(b)的目標(biāo)圖像（1) 中，如果目標(biāo)圖像模糊而導(dǎo)致不能提取其品牌名稱evian、容量等信息，則難以準(zhǔn)確地搜索 到目標(biāo)對象。因此，所述目標(biāo)圖像優(yōu)選地滿足預(yù)定條件。所述預(yù)定條件可以是關(guān)于目標(biāo)圖像 的亮度的條件、或者是關(guān)于所述目標(biāo)圖像的清晰度的條件。當(dāng)目標(biāo)圖像的亮度大于等于預(yù) 設(shè)亮度閾值時(shí)，確定所述目標(biāo)圖像滿足預(yù)定條件；當(dāng)目標(biāo)圖像的亮度小于預(yù)設(shè)亮度閾值時(shí)， 確定所述目標(biāo)圖像不滿足預(yù)定條件?；蛘?，當(dāng)目標(biāo)圖像的清晰度大于等于預(yù)設(shè)清晰度閾值 時(shí)，確定所述目標(biāo)圖像滿足預(yù)定條件；當(dāng)目標(biāo)圖像的亮度小于預(yù)設(shè)清晰度閾值時(shí)，確定所述 目標(biāo)圖像不滿足預(yù)定條件。所述預(yù)設(shè)亮度閾值或預(yù)設(shè)清晰度閾值可以根據(jù)所述服務(wù)器的處 理能力來調(diào)整。例如，當(dāng)服務(wù)器的處理能力強(qiáng)時(shí)，可以將預(yù)設(shè)亮度閾值或預(yù)設(shè)清晰度閾值設(shè) 置為較低的值；當(dāng)服務(wù)器的處理能力弱時(shí)，可以將預(yù)設(shè)亮度閾值或預(yù)設(shè)清晰度閾值設(shè)置為 較高的值。
[0094] 提取單元620從所述目標(biāo)圖像中提取與所述目標(biāo)對象相關(guān)聯(lián)的字符信息和圖像 特征。所述目標(biāo)圖像所包括的字符信息例如為產(chǎn)品名稱、容量、品牌名稱、生產(chǎn)日期等，這些 字符信息是文字或符號(hào)。所述目標(biāo)圖像所包括的圖像特診是圖像的顏色分量、各個(gè)顏色分 量的組成比例等。典型地，采用不同的技術(shù)手段來提取目標(biāo)圖像中的字符信息和圖像特征。 提取單元620可以利用圖5中的存儲(chǔ)器和處理器來實(shí)現(xiàn)。
[0095] 對于字符信息，提取單元620可以采用OCR技術(shù)或其它技術(shù)提取目標(biāo)圖像中的字 符信息。在OCR技術(shù)中，服務(wù)器通過檢測目標(biāo)圖像的暗、亮的模式確定其形狀，然后用字符 識(shí)別方法將形狀翻譯成計(jì)算機(jī)文字。提取單元620可包括OCR模塊，并且可通過如下操作 從所述目標(biāo)圖像中提取與所述目標(biāo)對象相關(guān)聯(lián)的字符信息：利用光學(xué)字符識(shí)別OCR從所述 目標(biāo)圖像中識(shí)別文字和符號(hào)；從所識(shí)別的文字和符號(hào)中選擇用于標(biāo)識(shí)所述目標(biāo)對象的標(biāo)識(shí) 字符，作為與所述目標(biāo)對象相關(guān)聯(lián)的字符信息。在目標(biāo)圖像中包括豐富的信息，部分信息可 能與目標(biāo)對象的搜索密切相關(guān)，例如產(chǎn)品名稱、品牌、容量等。然而，目標(biāo)圖像中還可能包括 與目標(biāo)對象的搜索無關(guān)的信息，例如成分、安全提醒等，這些信息可能是所有的同類產(chǎn)品都 涉及的信息，其不能用于標(biāo)識(shí)目標(biāo)對象。因此，提取單元620在對目標(biāo)圖像進(jìn)行字符識(shí)別之 后，需要從中篩選出搜索目標(biāo)對象所需的信息，即用于標(biāo)識(shí)所述目標(biāo)對象的標(biāo)識(shí)字符。
[0096] 圖像特征是指數(shù)值化的圖像特性表達(dá)，例如使用向量來表示圖像特性?？梢圆捎?現(xiàn)有的或?qū)沓霈F(xiàn)的各種方式來表示目標(biāo)圖像的圖像特征。提取單元620可包括圖像特征 提取模塊，并利用該圖像特征提取模塊可以執(zhí)行如下操作中的至少一個(gè)來提取圖像特征： 計(jì)算所述目標(biāo)圖像的顏色直方圖特征作為所述圖像特征；和計(jì)算所述目標(biāo)圖像的詞袋模型 特征作為所述圖像特征。也就是說，提取單元620可以采用顏色直方圖和詞袋模型特征中 的至少一個(gè)來表示目標(biāo)圖像的圖像特征。
[0097] 顏色直方圖是圖像的顏色特征的一種統(tǒng)計(jì)表達(dá)，其用于表示不同色彩在整幅目標(biāo) 圖像中所占的比例，而并不關(guān)心每種色彩所處的空間位置。常用的顏色直方圖包括RGB空 間顏色直方圖，HSV空間顏色直方圖以及Lab空間顏色直方圖等。在不同的顏色空間中，目 標(biāo)圖像的顏色直方圖具有不同的數(shù)值。詞袋模型特征是圖像的紋理特征的一種統(tǒng)計(jì)表達(dá)， 其可以有效描述圖像的整體和局部特性。例如，提取單元620可通過如下操作獲得目標(biāo)圖 像的詞袋模型特征：從目標(biāo)圖像中提取特征描述符，例如SIFT、H0G等；對于每一個(gè)描述符， 在預(yù)先準(zhǔn)確的碼本中搜索最相似的聚類中心，統(tǒng)計(jì)不同聚類中心在該目標(biāo)圖像中出現(xiàn)的頻 度，形成一個(gè)直方圖；對該直方圖作歸一化處理，從而得到目標(biāo)圖像的詞袋模型特征。所述 預(yù)先準(zhǔn)確的碼本可通過如下方式獲得：從訓(xùn)練圖像的集合中隨機(jī)提取大量的圖像描述符， 采用聚類算法對這些圖像描述符進(jìn)行聚類而得到多個(gè)類別，聚類得到的所有類別即組成碼 本。
[0098] 搜索單元630基于所述字符信息和所述圖像特征搜索與所述目標(biāo)對象相關(guān)聯(lián)的 相關(guān)對象信息。例如，搜索單元630基于所述字符信息和所述圖像特征從預(yù)先建立的對象 數(shù)據(jù)庫中搜索所述相關(guān)對象信息。所述對象數(shù)據(jù)庫包括各個(gè)備選對象的圖像特征、字符信 息和關(guān)聯(lián)信息。如上所述，假設(shè)對象數(shù)據(jù)庫P中包含N個(gè)對象，每一個(gè)對象 P]可以用三元組 {fjpj, fT(p_j), a(p_j)}表示，其中，j = 1，2,. . .，N，三元組中的各個(gè)分量的含義如上所述。 或者，每一個(gè)對象？]還可以用二元組{fJplfVh)}表示。假設(shè)要搜索的目標(biāo)對象q的目 標(biāo)圖像的圖像特征和字符信息分別是f: (q)和fT (q)，相應(yīng)地，搜索單元630可通過將提取 單元620所提取的字符信息fT(q)和圖像特征fjq)與對象數(shù)據(jù)庫P中的各個(gè)備選對象的 字符信息f T(P])和圖像特征f: (P])進(jìn)行比對來執(zhí)行搜索。搜索單元630可以利用圖5中的 存儲(chǔ)器和處理器來實(shí)現(xiàn)。
[0099] 搜索單元630可操作如下以搜索與所述目標(biāo)對象相關(guān)聯(lián)的相關(guān)對象信息：基于目 標(biāo)圖像的圖像特征和各個(gè)備選對象的圖像特征計(jì)算所述目標(biāo)對象與各個(gè)備選對象之間的 圖像特征相似度；基于目標(biāo)圖像的字符信息和各個(gè)備選對象的字符信息計(jì)算所述目標(biāo)對象 與各個(gè)備選對象之間的字符信息相似度；和基于所述圖像特征相似度和所述字符信息相似 度