終端裝置及其信息提供方法
【專利說明】終端裝置及其信息提供方法
[0001]相關(guān)申請(qǐng)的交叉引用
[0002]本申請(qǐng)要求2014年11月5日在韓國知識(shí)產(chǎn)權(quán)局提交的第10_2014_0152754號(hào)韓國專利申請(qǐng)的優(yōu)先權(quán)，該申請(qǐng)的公開通過引用全部合并于此。
技術(shù)領(lǐng)域
[0003]與示例性實(shí)施例一致的方法和設(shè)備涉及移動(dòng)裝置及其信息提供方法，更具體地，涉及一種能夠在提供內(nèi)容相關(guān)信息時(shí)減少終端設(shè)備上和服務(wù)器上的信息處理負(fù)荷的移動(dòng)終端及其信息提供方法。
【背景技術(shù)】
[0004]隨著用戶需求的逐漸增加，廣播內(nèi)容和多媒體內(nèi)容的源正在從面向天波的單個(gè)源變?yōu)橹T如線纜、因特網(wǎng)協(xié)議電視(IPTV)和視頻點(diǎn)播(VOD)的各種源。此外，出現(xiàn)了提供諸如定制廣告和節(jié)目推薦等信息的源。
[0005]包括定制廣告和節(jié)目推薦的這種信息需要被提供，使得它與通過輸出裝置輸出的圖像相應(yīng)。例如，當(dāng)展示特定產(chǎn)品的圖像被顯示時(shí)，顯示關(guān)于該產(chǎn)品的廣告消息是有效的。
[0006]現(xiàn)有技術(shù)的設(shè)備使用圖像的指紋，S卩，用于識(shí)別當(dāng)前正輸出的內(nèi)容部分的特征數(shù)據(jù)，以便提供這樣的信息提供服務(wù)。
[0007]然而，在現(xiàn)有技術(shù)的設(shè)備中，為了識(shí)別當(dāng)前正輸出的內(nèi)容部分，必須以非常短的周期將指紋發(fā)送到服務(wù)器。這是因?yàn)?，在指紋尚未發(fā)送時(shí)，有意義的對(duì)象可能在當(dāng)前正輸出的內(nèi)容部分上出現(xiàn)和消失，在這種情況下，用戶可能無法及時(shí)接收信息。
[0008]然而，上述現(xiàn)有技術(shù)的方法是有問題的，因?yàn)樗赡軐⑦^多操作負(fù)荷置于輸出內(nèi)容的設(shè)備和服務(wù)器上。此外，從網(wǎng)絡(luò)的角度看，可能招致過多流量成本。

【發(fā)明內(nèi)容】

[0009]示例性實(shí)施例至少解決以上問題和/或缺點(diǎn)以及以上沒有描述的其它缺點(diǎn)。另夕卜，不要求示例性實(shí)施例克服以上描述的缺點(diǎn)，并且示例性實(shí)施例可不克服以上描述的任何問題。
[0010]一個(gè)或更多個(gè)示例性實(shí)施例提供了一種能夠在提供內(nèi)容相關(guān)信息時(shí)減少對(duì)終端設(shè)備和服務(wù)器的操作負(fù)荷的移動(dòng)終端及其信息提供方法。
[0011]根據(jù)示例性實(shí)施例的一方面，提供了一種終端裝置，包括:通信接口，被配置為接收運(yùn)動(dòng)圖像；指紋提取器，被配置為從運(yùn)動(dòng)圖像的幀提取指紋；控制器，被配置為從所述幀檢測(cè)對(duì)象，控制通信接口將指紋發(fā)送到服務(wù)器，并從服務(wù)器接收與發(fā)送的指紋相應(yīng)的對(duì)象信息；輸出器，被配置為當(dāng)與對(duì)象信息相應(yīng)的內(nèi)容被輸出時(shí)輸出接收到的對(duì)象信息。
[0012]控制器可在指紋被發(fā)送到服務(wù)器的時(shí)刻與檢測(cè)到另一對(duì)象的后續(xù)時(shí)刻之間停止發(fā)送指紋。
[0013]控制器可控制通信接口以預(yù)定時(shí)間間隔將未檢測(cè)到對(duì)象的幀的指紋發(fā)送到服務(wù)器。
[0014]控制器可控制通信接口在不考慮所述預(yù)定時(shí)間間隔的情況下將檢測(cè)到對(duì)象的幀的指紋發(fā)送到服務(wù)器。
[0015]所述對(duì)象信息可包括檔案信息、音樂信息、廣告信息、廣播節(jié)目信息和物品信息中的至少一種。
[0016]控制器可控制通信接口將接收的對(duì)象信息發(fā)送到外部裝置。
[0017]控制器可控制指紋提取器僅針對(duì)檢測(cè)到對(duì)象的幀執(zhí)行指紋提取。
[0018]所述指紋可以是從所述幀提取的能夠?qū)⑺鰩c其它幀區(qū)分開的標(biāo)識(shí)符，其中，所述幀與視頻幀和音頻幀中的至少一種相應(yīng)。
[0019]根據(jù)示例性實(shí)施例的另一方面，提供了一種信息提供系統(tǒng)，包括:終端裝置，被配置為從運(yùn)動(dòng)圖像的幀提取指紋，從所述幀檢測(cè)目標(biāo)對(duì)象，響應(yīng)于檢測(cè)到目標(biāo)將所述幀的指紋發(fā)送到服務(wù)器；服務(wù)器，被配置為將與指紋相應(yīng)的對(duì)象信息發(fā)送到所述終端裝置。
[0020]所述服務(wù)器可包括:通信接口，被配置為接收運(yùn)動(dòng)圖像；指紋提取器，被配置為提取接收到的運(yùn)動(dòng)圖像的指紋；控制器，被配置為從形成運(yùn)動(dòng)圖像的幀檢測(cè)目標(biāo)對(duì)象，控制通信接口將檢測(cè)到的目標(biāo)對(duì)象的特征數(shù)據(jù)發(fā)送到對(duì)象識(shí)別服務(wù)器，從所述對(duì)象識(shí)別服務(wù)器接收與所述特征數(shù)據(jù)相應(yīng)的對(duì)象信息；存儲(chǔ)器，被配置為將接收的所述對(duì)象信息映射到所述指紋并存儲(chǔ)映射結(jié)果。
[0021]根據(jù)示例性實(shí)施例的另一方面，提供了一種終端裝置的信息提供方法，所述方法包括:從形成運(yùn)動(dòng)圖像的幀提取指紋；從所述幀檢測(cè)對(duì)象；響應(yīng)于檢測(cè)到目標(biāo)對(duì)象，將提取的所述幀的指紋發(fā)送到服務(wù)器；從服務(wù)器接收與指紋相應(yīng)的對(duì)象信息；當(dāng)與對(duì)象信息相應(yīng)的內(nèi)容被輸出時(shí)輸出接收到的對(duì)象信息。
[0022]在指紋被發(fā)送到服務(wù)器的時(shí)刻與檢測(cè)到另一對(duì)象的后續(xù)時(shí)刻之間可停止發(fā)送指紋。
[0023]發(fā)送步驟可包括:以預(yù)定時(shí)間間隔將未檢測(cè)到對(duì)象的幀的指紋發(fā)送到服務(wù)器。
[0024]發(fā)送步驟還可包括:在不考慮所述預(yù)定時(shí)間間隔的情況下將檢測(cè)到對(duì)象的幀的指紋發(fā)送到服務(wù)器。
[0025]所述對(duì)象信息可包括檔案信息、音樂信息、廣告信息、廣播節(jié)目信息和物品信息中的至少一種。
[0026]所述方法還可包括:將接收到的對(duì)象信息發(fā)送到外部裝置。
[0027]指紋提取的步驟可僅針對(duì)檢測(cè)到對(duì)象的幀被執(zhí)行。
[0028]所述指紋可以是從所述幀提取的能夠?qū)⑺鰩c其它幀區(qū)分開的標(biāo)識(shí)符，其中，所述幀與視頻幀和音頻幀中的至少一種相應(yīng)。
[0029]根據(jù)示例性實(shí)施例的另一方面，提供了一種非暫時(shí)性計(jì)算機(jī)可讀記錄介質(zhì)，其中，所述計(jì)算機(jī)可讀記錄介質(zhì)包括用于執(zhí)行終端裝置的信息提供方法的程序。所述方法可包括:從形成運(yùn)動(dòng)圖像的幀提取指紋；從所述幀檢測(cè)目標(biāo)對(duì)象；響應(yīng)于檢測(cè)到目標(biāo)對(duì)象，將提取的指紋發(fā)送到服務(wù)器；從服務(wù)器接收與發(fā)送的指紋相應(yīng)的對(duì)象信息；當(dāng)與對(duì)象信息相應(yīng)的內(nèi)容被輸出時(shí)輸出接收到的對(duì)象信息。
[0030]根據(jù)示例性實(shí)施例的另一方面，提供了一種終端裝置的信息提供方法，所述方法包括:從視頻的第一幀識(shí)別第一對(duì)象；將第一幀的指紋發(fā)送到服務(wù)器以接收關(guān)于第一對(duì)象的信息；從視頻的第二幀識(shí)別第二對(duì)象；確定第二對(duì)象是否與第一對(duì)象相同；響應(yīng)于確定第二對(duì)象與第一對(duì)象不同，將第二幀的指紋發(fā)送到服務(wù)器。
[0031]確定步驟可包括:確定第一對(duì)象和第二對(duì)象的相似度是否大于預(yù)定水平。
[0032]當(dāng)?shù)诙?duì)象具有與第一對(duì)象基本相同的外觀并且第二對(duì)象在第二幀中的位置值不同于第一對(duì)象在第一幀中的位置值時(shí)，第二對(duì)象可被確定為與第一對(duì)象相同。
[0033]所述方法還可包括:響應(yīng)于第一幀的指紋被發(fā)送到服務(wù)器，從服務(wù)器接收關(guān)于第一對(duì)象的信息；確定第二對(duì)象與第一對(duì)象相同；當(dāng)?shù)诙?duì)象被顯示時(shí)顯示接收到的關(guān)于第一對(duì)象的信息，而不將第二幀的指紋發(fā)送到服務(wù)器。
【附圖說明】
[0034]通過參考附圖描述特定示例性實(shí)施例，以上和/或其它方面將更明顯，其中:
[0035]圖1是用于說明根據(jù)示例性實(shí)施例的信息提供系統(tǒng)的視圖；
[0036]圖2是用于說明根據(jù)示例性實(shí)施例的終端裝置的框圖；
[0037]圖3A和3B示出根據(jù)示例性實(shí)施例的對(duì)象檢測(cè)方法；
[0038]圖4是用于說明根據(jù)示例性實(shí)施例的終端裝置的指紋發(fā)送方法的流程圖；
[0039]圖5至圖7是用于說明根據(jù)各種示例性實(shí)施例的終端裝置的指紋發(fā)送方法的視圖；
[0040]圖8至圖9是用于說明根據(jù)各種示例性實(shí)施例的終端裝置的對(duì)象信息提供方法的視圖；
[0041]圖10是用于說明根據(jù)示例性實(shí)施例的服務(wù)器的框圖；
[0042]圖11是用于說明根據(jù)示例性實(shí)施例的存儲(chǔ)在服務(wù)器中的信息的視圖；
[0043]圖12是用于說明根據(jù)示例性實(shí)施例的根據(jù)服務(wù)器的指紋搜索方法的視圖；
[0044]圖13是用于說明根據(jù)示例性實(shí)施例的終端設(shè)備的信息提供方法的流程圖；
[0045]圖14是用于說明根據(jù)另一示例性實(shí)施例的終端裝置的框圖。
【具體實(shí)施方式】
[0046]下面參考附圖更詳細(xì)描述特定示例性實(shí)施例。
[0047]在以下描述中，相同的附圖標(biāo)記用于相同的元素，即使在不同圖中也是如此。提供描述中定義的諸如詳細(xì)構(gòu)造和元件的事項(xiàng)以幫助綜合理解示例性實(shí)施例。然而，示例性實(shí)施例可在沒有這些具體定義事項(xiàng)的情況下實(shí)施。另外，由于公知功能或構(gòu)造將以不必要的細(xì)節(jié)模糊本申請(qǐng)，因此不對(duì)它們進(jìn)行詳細(xì)描述，。
[0048]諸如“第一”和“第二”的詞語可用于描述各種組件，但是它們不應(yīng)限制各種組件。這些詞語僅用于區(qū)分一組件與其它組件的目的。例如，在不脫離本公開的精神和范圍的情況下，第一組件可被稱為第二組件，第二組件可被稱為第一組件等等。此外，“和/或”可包括提到的組件中的任何一個(gè)或這些組件的組合。
[0049]此外，單數(shù)形式可包括復(fù)數(shù)形式，只要未在句子中具體提到。此外，說明書中使用的“包括/包含”表示一個(gè)或更多個(gè)組件、步驟、操作、元件存在或被增加。
[0050]“模塊”或“單元”執(zhí)行至少一個(gè)功能或操作，并可實(shí)現(xiàn)為硬件或軟件、或硬件和軟件的組合。此外，多個(gè)“模塊”或多個(gè)“單元”可集成為至少一個(gè)模塊并被實(shí)現(xiàn)為至少一個(gè)處理器(未示出)，除了它們需要被實(shí)現(xiàn)為特定硬件的情況。
[0051]圖1是用于說明根據(jù)示例性實(shí)施例的信息提供系統(tǒng)的視圖。
[0052]參考圖1，信息提供系統(tǒng)100包括終端裝置100、服務(wù)器200、以及多個(gè)對(duì)象識(shí)別服務(wù)器 300a、300b、300c、300d。
[0053]終端裝置100被配置為是可提供圖像中包括的對(duì)象的信息的裝置。具體地，終端裝置100被配置為是可請(qǐng)求服務(wù)器200提供對(duì)象的信息并從服務(wù)器200接收請(qǐng)求的對(duì)象信息且將接收的對(duì)象信息提供給用戶的裝置。例如，終端裝置100可以是顯示設(shè)備(例如，TV，智能電話，PC，筆記本，平板，電子書，數(shù)碼相框，PDA等)或連接到顯示