基于對象的影像檢索系統(tǒng)及檢索方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種基于對象的影像檢索系統(tǒng)及檢索方法，其能夠有效地檢索通過用戶輸入的信息與基于對象的信息的構(gòu)成類似的注冊圖像或視頻或與其有關(guān)的信息。
【背景技術(shù)】
[0002]一般而言，網(wǎng)絡(luò)給眾多電腦用戶提供有效而適宜的通信及信息檢索工具。尤其，最近陸續(xù)開發(fā)了一種用戶上傳圖像或視頻時，比較提供與其對應(yīng)的圖像或視頻的檢索方法，從而，在網(wǎng)絡(luò)上檢索文本或影像信息方面獲得了很大的進步。
[0003]但，上述的檢索方法無法反應(yīng)對于用戶提出的圖像或視頻內(nèi)多個對象的信息，并且，因在檢索類似影像的過程中伴隨的應(yīng)用信息的不足或錯誤認(rèn)知等而無法提供正確反應(yīng)用戶的最初意圖的結(jié)果。
[0004]并且，為了在大容量的圖像或視頻DB內(nèi)最小化信息損失并快速檢索，而適用了很多信息的摘要方法，但，通常與DB的量正比地檢索速度也變得緩慢，并且，為了在特定單位的存儲器使用量內(nèi)處理更多的圖像信息，伴隨與其正比的信息的損失。
[0005]為了克服上述情況，將由圖像或視頻構(gòu)成的DB以色彩、模樣、質(zhì)感、圖案等一維性要素分類時，使得使用繁瑣或嚴(yán)重?fù)p害檢索的正確度。

【發(fā)明內(nèi)容】

[0006]發(fā)明要解決的問題
[0007]本發(fā)明要解決的問題在于提供一種基于對象的影像檢索系統(tǒng)及檢索方法，其將為了能夠應(yīng)對用戶的各種搜索工具所包含的復(fù)合型信息而注冊的各個圖像或視頻的對象信息反應(yīng)于檢索。
[0008]本發(fā)明的另一解決課題在于提供一種基于對象的影像檢索系統(tǒng)及檢索方法，其基于對象將注冊的圖像或視頻聚類，從而，使得信息的損失最小化的狀態(tài)下，在特定單位的存儲器使用量內(nèi)，迅速地處理更多的圖像和視頻信息。
[0009]本發(fā)明的又另一課題在于提供一種基于對象的影像檢索系統(tǒng)及檢索方法，作為單一的檢索系統(tǒng)，不僅能夠識別相同的對象，而且，應(yīng)用對象的構(gòu)成信息，檢索與肉眼相似的基準(zhǔn)的類似圖像或視頻或或與其有關(guān)的信息。
[0010]解決問題的方案
[0011]根據(jù)本發(fā)明的第I實施例的基于對象的影像檢索系統(tǒng)，包括:第I注冊影像管理模塊202，存儲并管理作為檢索對象而注冊的各種圖像或視頻；第I注冊影像信息提取模塊203，從注冊的圖像或視頻提取特征點或特征點的視覺屬性作為影像信息；類別生成模塊209，根據(jù)通過第I注冊影像信息提取模塊203提取的影像信息的類似性，生成或分類為一個以上的類別；第I類別信息管理模塊210，存儲并管理有關(guān)通過類別生成模塊209生成的類別的信息；第I檢索內(nèi)容信息提取模塊211，從通過用戶終端設(shè)備接收的圖像或視頻或聲音或文本提取檢索內(nèi)容信息，以便進行檢索；第I注冊影像檢索模塊216，將通過第I檢索內(nèi)容信息提取模塊211提取的檢索內(nèi)容信息與類別信息進行比較，檢索相同或類似地匹配的類別或注冊影像；第I檢索結(jié)果顯示模塊219，將在第I注冊影像檢索模塊216檢索的類別的信息或注冊影像的信息提供給用戶終端設(shè)備，以作為檢索結(jié)果，其中，第I檢索內(nèi)容信息提取模塊211包括第I檢索圖像處理部212或第I檢索視頻處理部213，所述第I檢索圖像處理部212，提取從用戶接收的檢索圖像中包含的影像信息；第I檢索視頻處理部213，分析檢索視頻，以視覺要素變換的地點為基準(zhǔn)將前后的視頻的區(qū)間分隔為鏡頭，并將各個鏡頭中代表的一個以上的幀選定為代表幀，并且，從選定的代表幀提取影像信息。
[0012]優(yōu)選地，從第I注冊影像信息提取模塊203以影像信息提取的特征點為根據(jù)圖像或視頻中包括的輪廓線或棱角或極點(比周邊亮度較暗或較亮的部分)而生成的信息，特征點的視覺屬性為特征點周邊的影像所具有的亮度信息或色彩信息或圖案信息。
[0013]優(yōu)選地，第I注冊影像信息提取模塊203，包括:第I注冊圖像影像信息提取部204，提取注冊的圖像中包含的特征點或特征點的視覺屬性作為影像信息，并存儲提取的影像信息；第I注冊視頻影像信息提取部205，由第I鏡頭分隔部206、第I代表幀選定部207、第I代表幀影像信息提取部208構(gòu)成，所述第I鏡頭分隔部206分析注冊的視頻，以視覺要素變換的地點為基準(zhǔn)，將前后的視頻的區(qū)間分隔為鏡頭，所述第I代表幀選定部207將在各個鏡頭中代表的一個以上的幀選定為代表幀，所述第I代表幀影像信息提取部208從選定的代表幀提取特征點或特征點的視覺屬性作為影像信息。
[0014]第I鏡頭分隔部206將視頻內(nèi)容的各個幀制作成HSV(色彩/色度/亮度)的頻數(shù)圖表，比較以往幀和目前幀的圖表，如果超過既定的圖表之間距離值，則判斷為幀發(fā)生變化，確認(rèn)為鏡頭。
[0015]優(yōu)選地，類別生成模塊209，如果作為影像信息的特征點或特征點的視覺屬性與注冊圖像或注冊視頻內(nèi)的影像信息相互類似，將其群集化，并生成或分類為一個以上的類別，并且，如果此時生成的類別具有與以往生成的類別類似的影像信息，分類為相同或類似的類別。
[0016]優(yōu)選地，第I類別信息管理模塊210的類別信息包括各個類別的影像信息、類目信息、說明類別的文本信息、專業(yè)化信息中的一個以上。
[0017]優(yōu)選地，第I檢索內(nèi)容信息提取模塊211，包括:第I檢索聲音處理部214，分析從用戶終端設(shè)備提供的聲音，將聲音轉(zhuǎn)換為文本；第I檢索文本處理部215，分析從用戶終端設(shè)備提供的檢索文本或從第I檢索聲音處理部214轉(zhuǎn)換的文本。
[0018]優(yōu)選地，第I注冊影像檢索模塊216，包括:第I影像檢索部217，將從通過用戶接收的檢索圖像或檢索視頻提取的影像信息與類別內(nèi)的各個類別的影像信息進行比較，檢索相同或類似地匹配的類別，檢索包括檢索的類別的一部分或全部注冊圖像或注冊視頻；第I文本檢索部218，將通過用戶接收的文本或從聲音提取或轉(zhuǎn)換的文本信息與類別內(nèi)的文本信息進行比較，檢索相同或類似地匹配的類別，并檢索包括檢索的類別的一部分或全部的注冊圖像或注冊視頻。
[0019]并且，根據(jù)本發(fā)明的第2實施例的基于對象的影像檢索系統(tǒng)，包括:對象圖像管理模塊301，存儲注冊的包括一個以上的對象的對象圖像，并從注冊的對象圖像提取影像信息一同存儲；第2類別信息管理模塊302，將通過對象圖像管理模塊301提取的對象圖像的影像信息根據(jù)類似性生成或分類為一個以上的類別；第2注冊影像管理模塊303，存儲作為檢索對象的注冊的各種圖像或視頻并進行管理；第2注冊影像信息提取模塊304，從注冊的圖像或視頻提取特征點或特征點的視覺屬性作為影像信息；注冊影像分類模塊310，將通過第2注冊影像信息提取模塊304提取的影像信息與類別的影像信息進行比較，將有關(guān)具有相同或類似的影像信息的類別的信息與注冊的圖像或視頻一同存儲；第2檢索內(nèi)容信息提取模塊311，從通過用戶終端設(shè)備接收的圖像或視頻或聲音或文本提取用于檢索的信息；第2注冊影像檢索模塊316，將通過第2檢索內(nèi)容信息提取模塊216提取的檢索內(nèi)容信息與類別的影像信息進行比較，檢索相同或類似地匹配的類別，并檢索包括檢索的類別的全部或一部分的注冊圖像或注冊視頻；第2檢索結(jié)果顯示模塊319，將從第2注冊影像檢索模塊316檢索的類別的信息或注冊影像的信息提供給用戶終端設(shè)備作為檢索結(jié)果，
[0020]第2檢索內(nèi)容信息提取模塊311包括第2檢索圖像處理部312、第2檢索視頻處理部313、第2檢索聲音處理部314、第2檢索文本處理部315中的一個以上，所述第2檢索圖像處理部312提取從用戶接收的檢索圖像中包含的影像信息，所述第2檢索視頻處理部313分析檢索視頻，以視覺要素變換的地點為基準(zhǔn)將前后的視頻的區(qū)間分隔為鏡頭，并將各個鏡頭中代表的一個以上的幀選定為代表幀，從選定的代表幀提取影像信息，所述第2檢索聲音處理部314分析從用戶終端設(shè)備提供的聲音，將聲音轉(zhuǎn)換為文本，所述第2檢索文本處理部315分析從用戶終端設(shè)備提供的檢索文本或從第2檢索聲音處理部314轉(zhuǎn)換的文本。
[0021]發(fā)明效果
[0022]根據(jù)本發(fā)明的基于對象的影像檢索系統(tǒng)，利用從圖像或視頻提取的多個基于對象的信息，從而，能夠有效地應(yīng)對通過各種搜索工具輸入的復(fù)雜信息。
[0023]并且，具有如下優(yōu)點:基于對象將注冊的圖像或視頻聚類，從而，使得信息的損失最小化的狀態(tài)下，在特定單位的存儲器使用量內(nèi)，迅速地處理更多的圖像和視頻信息。
[0024]并且，具有如下優(yōu)點:不僅能夠識別相同的對象，而且，應(yīng)用對象的構(gòu)成信息，在單一系統(tǒng)中檢索與肉眼相似的基準(zhǔn)的類似圖像或視頻或或與其