欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

信息信號處理設(shè)備和信息信號處理方法

文檔序號:6752616閱讀:210來源:國知局
專利名稱:信息信號處理設(shè)備和信息信號處理方法
技術(shù)領(lǐng)域
本發(fā)明一般涉及將諸如音頻和視頻信號之類的信息信號記錄到記錄媒體上的信息信號處理設(shè)備和這樣的信息信號處理設(shè)備采用的信息信號處理方法,以及涉及從記錄媒體中再現(xiàn)信息信號的信息信號處理設(shè)備和這樣的信息信號處理設(shè)備采用的信息信號處理方法。
背景技術(shù)
近年來,大量各種各樣的視頻和音頻信號不僅通過常規(guī)地波廣播展示出來,而且通過諸如BS(廣播衛(wèi)星)數(shù)字廣播和通信網(wǎng)絡(luò)之類的各種通信路徑展示出來。就通信網(wǎng)絡(luò)來說,通過它可以高速地將大量數(shù)字視頻和音頻信號展示給最終用戶。
另外,各種記錄媒體的存儲容量或各種類型記錄媒體的存儲容量也大踏步地增大,同時,記錄媒體的價格也在短時間內(nèi)降下來。記錄媒體包括諸如硬盤之類的磁盤、諸如DVD(數(shù)字多功能盤)之類的光盤、和稱為MO盤的磁光盤。因此,最終用戶通過使用它自己擁有的記錄/再現(xiàn)設(shè)備,能夠?qū)⑼ㄟ^各種通信路徑展示給用戶的諸如視頻和音頻信號之類的大量信息信號作為大量數(shù)據(jù)存儲在也是用戶本身擁有的記錄媒體中,并且使用這些信號。
順便提一下,如果諸如廣播節(jié)目的視頻和音頻信號之類的信息信號已經(jīng)如上所述存儲在諸如具有大存儲容量的硬盤之類的盤狀記錄媒體中,則通過利用盤狀記錄媒體提供的可訪問性優(yōu)點,能夠高速地從媒體中搜索到所需廣播節(jié)目的所需場景,以便能夠迅速地再現(xiàn)該場景,可以滿足對于有效的且有效率的利用信息信號方面可以想到的提高的要求。
盡管記錄媒體的存儲容量很大,但其容量也決不是沒有極限,需要考慮盡可能有效率地利用記錄媒體和避免由存儲容量的不足引起的問題。
因此,本發(fā)明的目標是解決上述問題,以提供能夠有效地和高效率地將大量信息信號記錄到用于存儲信息信號的具有大存儲容量的記錄媒體上并能夠高效率地利用該記錄媒體的信息信號處理設(shè)備,以及提供該信息信號處理設(shè)備要采用的信息信號處理方法。

發(fā)明內(nèi)容
在將電視廣播節(jié)目等的視頻和音頻信號記錄到記錄媒體中的處理中,本發(fā)明提供的記錄/再現(xiàn)設(shè)備檢測關(guān)于視頻信號的特征的信息,根據(jù)檢測的特征進行相似性確定處理,并進行將畫面分類成每一個由相似畫面組成的相似畫面分段(segment)的處理。
在通過本發(fā)明的另一個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中,通過將主要信息和概要信息相互關(guān)聯(lián),管理主要信息和概要信息。當在記錄媒體中存留的記錄區(qū)存儲大小變得不足時,有意地使概要信息優(yōu)先于主要信息留在記錄媒體中,以便可以有效地和高效率地利用記錄媒體,另外,也可能有效率地和有效地利用諸如存留在記錄媒體上的視頻信號之類的信息信號。
除此之外,在通過本發(fā)明的再一個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中,當在第一記錄媒體中存留的記錄區(qū)存儲大小變成小于預(yù)確定值時,將最老的主要信息移動到第二記錄媒體,以增大第一記錄媒體中存留的記錄區(qū)存儲大小,從而,在將新的主要信息記錄到第一記錄媒體上之前,在第一記錄媒體中分配較大的剩余記錄區(qū)。因此,可能避免諸如由于第一記錄媒體的剩余存儲容量不足而無法存儲新節(jié)目的主要信息之類的問題。
并且,在通過本發(fā)明的又一個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中,在將多個電視廣播節(jié)目的視頻和音頻信號記錄到記錄媒體上的處理中,識別相似畫面分段,以列表格式(多畫面格式)將位于相似畫面分段頭上的畫面顯示成縮小畫面(shrunk picture)(或縮略畫面(thumb-nail picture)),并不時地更新以列表格式的顯示。因此,即使縮小畫面的顯示隨著時間的流逝而改變,也可以有效地和高效率地掌握記錄在記錄媒體上的電視廣播節(jié)目的內(nèi)容。
此外,在通過本發(fā)明的又一個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中,按照節(jié)目類型或按照用戶輸入的命令,選擇用于從記錄媒體中再現(xiàn)節(jié)目的有效摘要再現(xiàn)模式,以便可以進行有效的以及有效率的摘要再現(xiàn)處理。


圖1是示出通過應(yīng)用了本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備的說明性方塊圖;
圖2A到2C是示出通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖3是示出通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖4是示出應(yīng)用在通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中的畫面分類處理單元的說明性方塊圖;圖5示意出應(yīng)用在通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中的畫面分類處理單元進行的操作;圖6示意出應(yīng)用在通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中的畫面分類處理單元進行的操作;圖7是示出應(yīng)用在通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中的聲音分類處理單元的說明性方塊圖;圖8是參照了通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的說明的流程圖;圖9示出了如圖8所示的流程圖的續(xù)流程圖;圖10是參照了如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的其它操作的說明的流程圖;圖11示出了如圖10所示的流程圖的續(xù)流程圖;圖12是示出通過應(yīng)用了本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備的說明性方塊圖;圖13A和13B是示出通過如圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖14A到14B是示出通過如圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖15A到15B是示出通過如圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖16是參照了通過如圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的說明的流程圖;圖17示出了如圖16所示的流程圖的續(xù)流程圖;圖18是參照了通過如圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的其它操作的說明的流程圖;
圖19是示出通過應(yīng)用了本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例的第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備的說明性方塊圖;圖20是參照了通過如圖19所示的第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的說明的流程圖;圖21示出了如圖20所示的流程圖的續(xù)流程圖;圖22示出了如圖20所示的流程圖的另一個續(xù)流程圖;圖23是示出通過應(yīng)用了本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例的第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備的說明性方塊圖;圖24A到24B是示出通過如圖23所示的第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖25A到25C是示出通過如圖23所示的第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖26是參照了如圖23所示的第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的說明的流程圖;圖27是示出通過應(yīng)用了本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例的第五和第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備的說明性方塊圖;圖28A到28C是示出通過如圖27所示的第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖29A到29C是示出通過如圖27所示的第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖30是參照了通過如圖27所示的第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的說明的流程圖;圖31示出了如圖30所示的流程圖的續(xù)流程圖;圖32示出了如圖31所示的流程圖的續(xù)流程圖;圖33A和33B是示出通過如圖27所示的第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖34A到34C是示出通過如圖27所示的第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的概況的說明圖;圖35是參照了通過如圖27所示的第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的說明的流程圖;和圖36示出了如圖35所示的流程圖的續(xù)流程圖。
優(yōu)選實施例通過參照附圖,下面的描述將說明實現(xiàn)本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例。下面所述的實施例在它們的典型應(yīng)用中每一個都將本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法實現(xiàn)成將電視廣播節(jié)目的視頻和音頻信號記錄到記錄媒體上和從記錄媒體上再現(xiàn)視頻和音頻信號的記錄/再現(xiàn)設(shè)備。
<第一實施例>
圖1是示出通過應(yīng)用了本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的說明性方塊圖。圖2A到2C和3是示出通過這個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的操作原理的說明圖。
通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100能夠不再現(xiàn)信號的所有細節(jié)而從具有良好可訪問性和大存儲容量的記錄媒體中回放通常是電視廣播節(jié)目的信息信號,以便迅速、簡單和精確地掌握該信號的記錄內(nèi)容,從而促進該記錄信號的有效地和高效率地使用。這樣記錄媒體的一個例子是硬盤。
<操作原理>
首先,說明通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的操作原理。如圖1所示的記錄/再現(xiàn)設(shè)備100能夠接收通常是電視廣播節(jié)目的模擬視頻和音頻信號,作為信息信號,將該信號轉(zhuǎn)換成數(shù)字數(shù)據(jù),并采用MPEG(運動圖像專家組)方法壓縮該數(shù)字數(shù)據(jù)。記錄/再現(xiàn)設(shè)備100還能夠在將多路復(fù)用的經(jīng)壓縮數(shù)據(jù)記錄到記錄媒體8上之前,以時分為基礎(chǔ)多路復(fù)用經(jīng)壓縮視頻數(shù)據(jù)和經(jīng)壓縮音頻數(shù)據(jù)。記錄媒體8通常是具有大存儲容量的盤狀記錄媒體。這樣的盤狀記錄媒體的一個例子是硬盤。
另外,如圖1所示的記錄/再現(xiàn)設(shè)備100還能夠從記錄媒體8中讀出多路復(fù)用的經(jīng)壓縮信號并多路分用從記錄媒體8讀出的多路復(fù)用的經(jīng)壓縮信號,以生成壓縮的視頻數(shù)據(jù)和音頻數(shù)據(jù)。記錄/再現(xiàn)設(shè)備100還能夠解壓縮該經(jīng)壓縮視頻和音頻數(shù)據(jù),以分別恢復(fù)成壓縮前的視頻和音頻數(shù)據(jù),以及將壓縮前的視頻和音頻數(shù)據(jù)轉(zhuǎn)換成模擬信號。
在將視頻和音頻信號記錄到記錄媒體8上的處理中,如圖1所示的記錄/再現(xiàn)設(shè)備100進行將視頻信號分類成每一個由相似畫面組成的分段的處理。分類處理應(yīng)用于稱為MPEG數(shù)據(jù)的經(jīng)壓縮的視頻數(shù)據(jù)。注意,由于可以假定圖示的(pictorial)圖像是從幀到幀不頻繁改變的圖像,所以通過只對每個I(內(nèi)部碼)畫面(幀)檢測相似性進行分類處理,以便將幀分類成每一個由相似畫面或幀組成的分段。由此,進行分類處理,以識別每一個由連續(xù)相似幀組成的相似畫面分段,并識別彼此類似的相似畫面分段。
正如后面還要描述的那樣,應(yīng)用在如圖1所示的記錄/再現(xiàn)設(shè)備100中的視頻分類處理單元5進行檢測相似畫面的處理和將檢測的相似畫面分類成相似畫面分段的處理。因此,可以識別出包括連續(xù)相似畫面的每個相似畫面分段,也可以確定彼此類似的相似畫面分段。
舉例來說,如圖2A所示,假設(shè)輸入畫面信號序列由31個連續(xù)畫面組成。讓這個輸入畫面信號序列經(jīng)受分類處理,以識別出相似畫面分段A1、A2、A3、B1、B2和B3,其每一個中I畫面彼此相似。另一方面,分類處理還檢測出分段C1和C2作為非相似畫面分段,其每一個中I畫面彼此不相似。
另外,如圖1所示的記錄/再現(xiàn)設(shè)備100還具有能夠?qū)⑴c前面緊接的I畫面不相似的I畫面識別成位于場景改變點上的I畫面的功能。通過執(zhí)行這種功能,記錄/再現(xiàn)設(shè)備100能夠檢測出每一個由圖2A中的箭頭所指的I畫面,作為每一個位于場景改變點上的I畫面。也就是說,第1、4、5、6、7、10、11、12、17、21和29I畫面的每一個被檢測成位于場景改變點上的I畫面。
此外,還進行進一步分類相似畫面分段的分類處理,以便把彼此類似的相似畫面分段放在彼此類似的一組相似畫面分段中。在這種輸入畫面信號序列的情況下,將相似畫面分段A1、A2和A3放在彼此類似的一組相似畫面分段中,將相似畫面分段B1、B2和B3放在彼此類似的另一組相似畫面分段中,并將相似畫面分段C1和C2放在彼此類似的又一組相似畫面分段中。
因此,當通過這個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100接收到如圖2A所示的輸入畫面信號序列時,記錄/再現(xiàn)設(shè)備100將包括在輸入畫面信號序列中的相似畫面分段分類成三組彼此類似的相似畫面分段,即,由彼此類似的相似畫面分段A1、A2和A3組成的第一組、由彼此類似的相似畫面分段B1、B2和B3組成的第二組、和由彼此類似的非相似畫面分段C1和C2組成的第三組。記錄/再現(xiàn)設(shè)備100還找出有多少個I畫面包括在構(gòu)成每個組的每個相似畫面分段中。
在將信息信號記錄到記錄媒體8上的處理中,如上所述,由圖1所示的這個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100進行在畫面當中檢測相似性和將畫面分類成相似畫面分段的處理。然后,在諸如記錄處理結(jié)束時刻之類的預(yù)確定時刻,將相似畫面分段的分類結(jié)果顯示成如圖3所示那樣。
在這種情況下,對于彼此類似的每一組相似畫面分段顯示分類結(jié)果。將彼此類似的一組相似畫面分段的分類結(jié)果顯示在一行上,作為I畫面的縮小形式的隊列,這些I畫面每一個位于相似畫面分段中一個的起首。具體地說,從具有最高相似性檢測頻率的隊列或容納最大數(shù)量相似I畫面的隊列開始顯示。另外,每個隊列從容納在隊列中的I畫面當中幀號碼最小的I畫面開始,后面接著以幀號碼增加的順序排列的I畫面。顯示在每個隊列中的I畫面每一個都是位于隊列所代表的組中的轉(zhuǎn)變點上或通過分類處理檢測的場景改變點上的畫面的縮小形式。
注意,有必要關(guān)心如下事實,帶有攝像機搖攝(pan)的相似畫面分段具有隨攝像機搖攝而改變的畫面場景。因此,當從畫面相似性的觀點考慮這樣的相似畫面分段時,這些畫面場景被認為是彼此不相似的畫面。另一方面,對于只存在攝像機搖攝,也可以認為該分段是不包括割點(cut point)(或場景改變)的分段。也就是說,不存在可用于確定某些畫面是否彼此相似的絕對標準,并且一個組中的轉(zhuǎn)變時刻也未必與場景改變時刻相同。
另外,在如上所述的例子中,如果每一個由彼此類似的相似畫面分段組成的兩個或更多個組具有相等的相似性檢測頻率,首先顯示以最小幀號碼的I畫面開始的組,后面接著以較大幀號碼的I畫面開始的組。
在如圖3所示的典型顯示中,屏幕被劃分成8×8個小屏幕單元的矩陣,用于只顯示每一個位于隊列中場景改變點上的畫面的縮小形式。這些I畫面作為如圖2A所示的分類處理的結(jié)果而獲得,更具體地說,在矩陣的每個水平行上的小屏幕單元用于顯示位于包括在彼此類似的一組相似畫面分段中的相似畫面分段起首的場景改變點處的畫面的縮小形式,在矩陣的每個垂直列上的小屏幕單元用于顯示每一個位于每個相似畫面分段起首的場景改變點處的畫面的縮小形式。
因此,具體地說,在如圖3所示的典型顯示中,頂端水平行c1用于顯示分別位于在相似畫面分段A1、A2和A3起首的場景改變點處的第1、12和21I畫面的縮小形式。
同樣,第2行c2用于顯示分別位于在相似畫面分段B1、B2和B3起首的場景改變點處的第7、17和29I畫面的縮小形式。同樣,水平行c3用于顯示位于彼此類似的非相似畫面分段C1和C2起首的場景改變點處的第4和10I畫面的縮小形式。
如上所述,通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100在記錄過程中進行在畫面當中檢測相似性和將畫面分類成相似畫面分段的處理,并且,在進行記錄時、在記錄結(jié)束時、或在記錄過程結(jié)束之后的適當時刻,顯示畫面分類處理的結(jié)果。因此,可能能夠迅速地和可靠地知道那些廣播節(jié)目已經(jīng)被記錄到記錄媒體上。也就是說,無需再現(xiàn)已記錄信息信號的所有細節(jié),就可以迅速地和可靠地掌握已記錄廣播節(jié)目的內(nèi)容,從而,可以有效地和有效率地利用信息信號。
另外,為了提供如圖3所示示出分類結(jié)果的列表顯示(或多畫面顯示),需要縮小畫面(或縮略畫面)。圖2B示出以如圖2A所示的時序排列的縮小畫面的隊列,其時序與利用MPEG方法壓縮其數(shù)據(jù)的I畫面的時序相同。通過將這個序列的縮小畫面事先存儲在記錄媒體中,可以在分類處理之后立即提供縮小畫面(或縮略畫面)的列表顯示。
這里,考慮在記錄結(jié)束時將縮小畫面顯示成如圖3所示那樣的情況。在這種情況下,在記錄過程期間,創(chuàng)建縮小畫面,并將其與原畫面數(shù)據(jù)一起存儲到記錄媒體上,以縮短信號處理時間。如果在記錄原畫面的過程中沒有創(chuàng)建縮小畫面,必須既進行解碼原數(shù)據(jù)的處理也進行創(chuàng)建縮小畫面的處理。這是因為,原畫面的數(shù)據(jù)是壓縮數(shù)據(jù)。因此,縮小畫面不能得到迅速顯示。
為了解決這個問題,如圖2B所示,與原畫面數(shù)據(jù)一起創(chuàng)建縮小畫面,并將其與原畫面數(shù)據(jù)一起存儲到記錄媒體上,以縮短信號處理時間。另外,可以容易地把是I畫面的原畫面的每一個與它的縮小畫面相關(guān)聯(lián)。
但是,如果將如圖2B所示的縮小畫面都存儲在記錄媒體中,縮小畫面數(shù)據(jù)量太大,以致于想像得到這種情況,即由于縮小畫面數(shù)據(jù)量大,存儲容量有限的記錄媒體不再得到有效利用的情況。為了解決這個問題,通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100通過將縮小畫面與每一個位于場景改變點上的原畫面相關(guān)聯(lián),只存儲位于場景改變點上的縮小畫面,以便將縮小畫面數(shù)據(jù)量降到最低程度。
現(xiàn)在,考慮用“0”和“1”表示如圖3所示的列表顯示(或多畫面顯示)的基帶區(qū)域中縮小畫面的數(shù)據(jù)量。在如圖3所示的典型顯示的情況下,縮小畫面的數(shù)據(jù)具有與對應(yīng)于縮小畫面的原畫面的大小的1/8(八分之一)倍相等的大小。也就是說,縮小畫面的高度(垂直長度)和寬度(水平長度)是原畫面的垂直和水平長度的1/8倍。
用Y信號(亮度信號)、Cb信號(藍色色差信號)和Cr信號(紅色色差信號)表示每個原畫面的數(shù)據(jù),每一個信號都有8個位大小,并且每個原畫面的分辨率是352(水平方向)×240(垂直方向)。在這種情況下,可以按照如下公式(1)表示每個縮小畫面的數(shù)據(jù)量每個縮小畫面的數(shù)據(jù)量=3×8位×(352×240)×(1/8)×(1/8)=31,680位4千字節(jié)…(1)假設(shè),例如,廣播節(jié)目的記錄時間是2個小時,該節(jié)目每秒包括30個幀,其被壓縮成由每GOP(畫面組)15個畫面組成的MPEG流。在這種情況下,可以按照如下公式(2)表示所有縮小畫面的數(shù)據(jù)量所有縮小畫面的數(shù)據(jù)量=2小時×60分鐘/小時×60秒/分鐘×31,680位×30幀/秒×(1/15)=54兆字節(jié) …(2)從上面的方程中可明顯看出,甚至所有縮小畫面的數(shù)據(jù)量也是很大的。
但是,包括在如圖2A所示的任何相似畫面分段中的畫面都彼此相似。因此,對于每個相似畫面分段,有必要只生成位于相似畫面分段起首的原畫面的縮小畫面,即,位于相似畫面分段的場景改變點上的原畫面的縮小畫面。通過只存儲這樣的縮小畫面及其原畫面,可以減少縮小畫面的數(shù)據(jù)量。
例如,由于相似畫面分段A1中的第1、2和3原畫面彼此相似,僅僅位于相似畫面分段A1的場景改變點上的第1原畫面的縮小畫面被創(chuàng)建并存儲在記錄媒體中。把選擇為該原畫面生成縮小畫面的原畫面的技術(shù)應(yīng)用于其它相似畫面分段A2、A3、B2、B2和B3。
至于非相似畫面分段C1和C2,包括在其中的畫面彼此不相似。因此,為包括在每個非相似畫面分段中的所有原畫面的每一個創(chuàng)建縮小畫面,并將其與原畫面一起存儲在記錄媒體中。具體地說,在非相似畫面分段C1的情況下,為第4、5和6原畫面的每一個創(chuàng)建縮小畫面,并且將該縮小畫面存儲在記錄媒體中。把選擇為該原畫面的每一個生成縮小畫面的原畫面的技術(shù)應(yīng)用于其它非相似畫面分段C2。
如上所述,通過選擇為該原畫面的每一個生成縮小畫面的原畫面,如圖2C所示的第1、4、5、6、7、10、11、12、17、21和29原畫面的每一個被選為為其生成縮小畫面的原畫面,并且將生成的縮小畫面與所有原畫面一起存儲在記錄媒體中。
由此,可以使為如圖2C所示的原畫面創(chuàng)建的縮小畫面的數(shù)據(jù)量比為如圖2B所示的原畫面創(chuàng)建的縮小畫面的數(shù)據(jù)量小得多。這是因為,基本上只為位于相似畫面分段起首的原畫面,即,每一個位于相似畫面分段的場景改變點上的原畫面創(chuàng)建對于如圖2C所示隊列的縮小畫面。如果假設(shè)廣播節(jié)目的記錄時間是如上所述的2個小時,并且相似畫面分段的平均持續(xù)時間是大約3秒鐘,則通過使用處理像那些圖2C所示的較少原畫面的方法來選擇原畫面,只對這樣的原畫面創(chuàng)建縮小畫面,將縮小畫面的數(shù)據(jù)量減少到約18百萬字節(jié)。
注意,采用諸如JPEG(聯(lián)合圖像專家組)之類的數(shù)據(jù)壓縮技術(shù)可以進一步壓縮縮小畫面,以便進一步減少該縮小畫面的數(shù)據(jù)量。
通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100能夠采用只選擇像那些圖2B所示的原畫面的方法以及只選擇像那些圖2C所示的原畫面的方法。但是,在如下的描述中,假設(shè)主要采用只選擇像那些圖2C所示的原畫面的方法。
<通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的操作和配置>
如下的描述將說明通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的操作和配置。如圖1所示的配置可以被劃分成在記錄媒體8的左側(cè)和右側(cè)的部分。左側(cè)的部分主要是記錄系統(tǒng),而右側(cè)的部分主要是再現(xiàn)系統(tǒng)。
<記錄系統(tǒng)>
首先,說明記錄系統(tǒng)。將供應(yīng)給通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的模擬音頻信號(音頻輸入)饋送到音頻模擬-數(shù)字轉(zhuǎn)換器1,下文將音頻模擬-數(shù)字轉(zhuǎn)換器縮寫成音頻A/D轉(zhuǎn)換器,它將模擬音頻信號轉(zhuǎn)換成要供應(yīng)給音頻編碼器2和音頻分類處理單元20的數(shù)字音頻信號。
音頻編碼器2通過采用諸如MPEG音頻方法之類的預(yù)確定壓縮技術(shù),對數(shù)字音頻信號進行頻帶壓縮處理。將作為對數(shù)字音頻信號進行頻帶壓縮處理的結(jié)果獲得的音頻數(shù)據(jù)供應(yīng)給多路復(fù)用處理單元6。
音頻分類處理單元20通常對每個預(yù)確定分段檢測數(shù)字音頻信號中頻譜峰的連續(xù)性,以確定數(shù)字音頻信號是否是音樂信號。將確定結(jié)果供應(yīng)給多路復(fù)用處理單元6、系統(tǒng)控制器17、和畫面場景分類顯示和再現(xiàn)位置顯示單元19。下文也將畫面場景分類顯示和再現(xiàn)位置顯示單元19適當?shù)胤Q為分類顯示單元。
注意,取代處理從音頻A/D轉(zhuǎn)換器1接收的數(shù)字音頻信號,也可以將音頻分類處理單元20設(shè)計成這樣的配置用于接收作為音頻編碼器2對音頻A/D轉(zhuǎn)換器1生成的數(shù)字模擬信號進行頻帶壓縮處理的結(jié)果獲得的音頻數(shù)據(jù),如圖1所示的虛線所指;并用于對該音頻數(shù)據(jù)進行如上所述的分類處理。
另一方面,將供應(yīng)給通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的模擬視頻信號(視頻輸入)饋送到視頻模擬-數(shù)字轉(zhuǎn)換器3,下文將視頻模擬-數(shù)字轉(zhuǎn)換器縮寫成視頻A/D轉(zhuǎn)換器,它將模擬視頻信號轉(zhuǎn)換成要供應(yīng)給視頻編碼器4的數(shù)字視頻信號。
視頻編碼器4通過采用諸如MPEG2方法之類的預(yù)確定壓縮技術(shù),對供應(yīng)給其的數(shù)字視頻信號進行頻帶壓縮處理。將作為對數(shù)字視頻信號進行頻帶壓縮處理的結(jié)果獲得的視頻數(shù)據(jù)供應(yīng)給視頻分類處理單元5、多路復(fù)用處理單元6、I-畫面檢測單元21和縮小畫面處理單元22。
視頻分類處理單元5檢測從視頻編碼器4接收的視頻數(shù)據(jù)的I畫面的畫面特征,并根據(jù)檢測的特征識別畫面相似性。另外,通過參照圖2A到2C,如早先的解釋,視頻分類處理單元5還進行一系列畫面分類處理,包括對相似畫面分段、非相似畫面分段及每個均由彼此類似的相似畫面分段組成的組的識別。視頻分類處理單元5還生成用于識別相似畫面分段、非相似畫面分段及每個均由彼此類似的相似畫面分段組成的組的識別信息信號,并將該信號供應(yīng)給多路復(fù)用處理單元6和分類顯示單元19。
識別信息信號包括視頻數(shù)據(jù)的位置信息。視頻數(shù)據(jù)的位置信息包括有關(guān)在每個相似畫面分段中包括多少個相似幀的信息。另外,視頻分類處理單元5還能夠?qū)Ξ嬅嫦嗨菩源_定的處理檢測場景改變點,并將它們報告給系統(tǒng)控制器17。
注意,取代從視頻編碼器4接收壓縮視頻數(shù)據(jù),視頻分類處理單元5也可以接收視頻A/D轉(zhuǎn)換器3輸出的數(shù)字視頻信號,如圖1所示的虛線所指,并根據(jù)該數(shù)字視頻信號,如上所述,以幀為單元識別和分類數(shù)字視頻數(shù)據(jù)的相似畫面的處理。
另外,也可能提供這樣的配置,其中,作為分類視頻和音頻信號的處理結(jié)果獲得的識別信息信號也可以由系統(tǒng)控制器17根據(jù)從視頻分類處理單元5和音頻分類處理單元20接收的分類處理結(jié)果生成,并被供應(yīng)給多路復(fù)用處理單元6。
任何圖中都沒有示出,系統(tǒng)控制器17是微型計算機,包括CPU(中央處理單元)、ROM(只讀存儲器)、RAM(隨機訪問存儲器)、非易失性(non-volatile)存儲器和定時電路,這些部件用于控制構(gòu)成記錄/再現(xiàn)設(shè)備100的其它部件。
另外,如圖1所示的配置中的I-畫面檢測單元21是用于從視頻數(shù)據(jù)中檢測I畫面并向系統(tǒng)控制器17報告諸如檢測時刻之類的檢測信息的部件。只檢測I畫面是因為,如上所述,通過這個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100以I-畫面為單元進行畫面相似性檢測處理及畫面分類處理。系統(tǒng)控制器17能夠根據(jù)從I-畫面檢測單元21接收的檢測信息,控制視頻分類處理單元5和縮小畫面處理單元22。
按照系統(tǒng)控制器17執(zhí)行的控制,縮小畫面處理單元22從因此而接收的視頻數(shù)據(jù)(更具體地說,每一個位于場景改變點上的I畫面)中生成縮小畫面數(shù)據(jù),并且將數(shù)據(jù)供應(yīng)給多路復(fù)用處理單元6和分類顯示單元19。
在這個實施例中,分類顯示單元19接收來自音頻分類處理單元20的分類結(jié)果、來自視頻分類處理單元5的識別信息信號、和來自縮小畫面處理單元22的縮小畫面數(shù)據(jù),顯示排列在矩陣行上每一個與彼此類似的一組相似畫面分段相對應(yīng)并且每一個代表如圖3所示的相似畫面分段中一個的縮小畫面的分類。也就是說,通過這個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100能夠在進行將原畫面記錄到記錄媒體上的處理的同時,顯示對于所記錄的原畫面的縮略畫面。
另外,多路復(fù)用處理單元6通常通過對音頻數(shù)據(jù)、視頻數(shù)據(jù)、縮小畫面數(shù)據(jù)、和從視頻分類處理單元5接收的識別信息信號進行時分多路復(fù)用處理,來生成多路復(fù)用數(shù)據(jù),然后將該多路復(fù)用數(shù)據(jù)供應(yīng)給記錄處理單元7。記錄處理單元7進行包括把糾錯碼加入多路復(fù)用數(shù)據(jù)中的處理和交織(interleave)數(shù)據(jù)以創(chuàng)建要記錄的信號的處理在內(nèi)的處理,然后將信號記錄到記錄媒體8中的預(yù)確定區(qū)域中。
然后,在這個實施例的情況下,如前所述,通過利用多路復(fù)用在多路復(fù)用的數(shù)據(jù)中的識別信息信號,可能能夠識別相似畫面分段、非相似畫面分段和每一個由彼此類似的相似畫面分段組成的組,并且將原畫面與代表原畫面的縮小畫面相關(guān)聯(lián)。因此,可能能夠在記錄處理期間,或在記錄結(jié)束時,或在記錄處理結(jié)束之后的預(yù)確定時刻,顯示排列在矩陣行上每一個與彼此類似的一組相似畫面分段相對應(yīng)并且每一個代表如圖3所示的相似畫面分段的一個的縮小畫面的分類。
<畫面分類處理>
下面具體說明通過應(yīng)用在記錄/再現(xiàn)設(shè)備100中的視頻分類處理單元5進行的畫面分類處理。圖4是示出畫面分類處理單元5的說明性方塊圖,而圖5和6每一個示出視頻分類處理單元5進行的畫面分類處理的操作原理。
在本實施例中,視頻分類處理單元5從通常采用MPEG2方法壓縮的視頻數(shù)據(jù)中檢測視頻數(shù)據(jù)的特征,以分類畫面。
當應(yīng)用在視頻分類處理單元5中的特征數(shù)據(jù)檢測單元51從視頻編碼器4接收到I畫面時,特征數(shù)據(jù)檢測單元51將I畫面的幀數(shù)據(jù)劃分成像那些圖5所示的25個畫面區(qū)或25個分畫面區(qū)。然后,特征數(shù)據(jù)檢測單元51生成亮度矢量Ay,亮度矢量Ay如圖6所示的公式(1)所表示的那樣,是具有25個分量的25階(degree)矢量。這25個分量分別是從25個畫面區(qū)中Y分量(或亮度分量)的DCT(離散余弦變換)分量當中選擇出來的DC系數(shù)的平均值。同樣,特征數(shù)據(jù)檢測單元51生成藍色色差矢量Ab,藍色色差矢量Ab如圖6所示的公式(2)所表示的那樣,是具有25個分量的25階矢量。這25個分量分別是從25個畫面區(qū)中Cb分量(或藍色色差分量)的DCT分量當中選擇出來的DC系數(shù)的平均值。同樣,特征數(shù)據(jù)檢測單元51生成紅色色差矢量Ar,紅色色差矢量Ar如圖6所示的公式(3)所表示的那樣,是具有25個分量的25階矢量。這25個分量分別是從25個畫面區(qū)中Cr分量(或紅色色差分量)的DCT分量當中選擇出來的DC系數(shù)的平均值。
特征數(shù)據(jù)檢測單元51把以這種方式依次生成的矢量數(shù)據(jù)段(piece)供應(yīng)給其中存儲數(shù)據(jù)的數(shù)據(jù)緩沖器52、以及處理單元53。數(shù)據(jù)緩沖器52和處理單元53包括在如圖4所示的配置中。處理單元53按照圖6所示的公式(4),計算在分類處理時的參考矢量數(shù)據(jù)和每個幀的矢量數(shù)據(jù)之間的矢量間距離Vd。在數(shù)據(jù)緩沖器52中已經(jīng)對于所有幀存儲了每個幀的矢量數(shù)據(jù)。在分類處理時的參考矢量數(shù)據(jù)是特征數(shù)據(jù)檢測單元51最近供應(yīng)給處理單元53的矢量數(shù)據(jù)。然后,處理單元53從對所有幀計算的矢量間距離Vd當中找出最短距離Vdmin。
ID緩沖器55是用于存儲指定給已經(jīng)存儲在數(shù)據(jù)緩沖器52中的矢量數(shù)據(jù)段的ID(識別符)的存儲器。ID被一對一地指定給矢量數(shù)據(jù)段。也就是說,ID被一對一地指定給幀,這些幀的矢量數(shù)據(jù)段已經(jīng)存儲在數(shù)據(jù)緩沖器52中。
然后,根據(jù)處理單元53輸出的處理結(jié)果,系統(tǒng)控制器17參照ID緩沖器55,以獲得指定給特定幀的ID,該幀的矢量具有的相對于參考矢量的矢量間距離等于最短距離Vdmin。隨后,如果最短距離Vdmin沒有超過事先確定的閾值Th,系統(tǒng)控制器17確定其矢量相對于參考矢量的矢量間距離等于最短距離Vdmin的特定幀是與具有參考矢量的幀相似的幀。在這種情況下,輸出作為特定幀的ID的識別符IDdet,作為識別信息信號,識別符IDdet繞過ID生成單元54,存儲在ID緩沖器55中。正如在前面給出的描述中所暗示的那樣,特定幀和具有參考矢量的幀的每一個都是I畫面。
包括在如圖4所示的配置中的ID生成單元54是初始值為0(零)的16-位計數(shù)器。如果最短距離Vdmin超過事先確定的閾值Th,系統(tǒng)控制器17確定其矢量相對于參考矢量的矢量間距離等于最短距離Vdmin的特定幀(I畫面)是與擁有參考矢量的幀(I畫面)不相似的幀。在這種情況下,輸出ID生成單元54的當前值,作為指定給具有參考矢量的幀的ID,并且將其存儲在ID緩沖器55中。然后,ID生成單元54將它的內(nèi)容加1,以生成要指定給下一個要處理的幀的ID。
如上所述,同一ID被指定給具有高相似度的幀(I畫面)。因此,可以將由具有相同ID的幀組成的分段確定為相似畫面分段。另外,可以將被其它分段彼此分開的相似畫面分段確定為與彼此類似的一組相似畫面分段有關(guān)的分段。
此外,視頻分類處理單元5能夠根據(jù)完成分類處理的I畫面和緊鄰在特定I畫面之前的I畫面之間的差異,確定完成分類處理的特定I畫面是否是位于場景改變點(或割點)上的畫面。通過以這種方式檢測場景改變點,可能能夠容易地實現(xiàn)只對位于場景改變點上的原畫面生成縮小畫面并且在分類顯示單元19上顯示該縮小畫面作為圖2C所示的縮略畫面的處理,以及將縮小畫面多路復(fù)用成要存儲在記錄媒體中的如前所述的多路復(fù)用數(shù)據(jù)的處理。
然后,這個實施例的系統(tǒng)控制器17根據(jù)從視頻分類處理單元5接收的信息,創(chuàng)建識別信息信號,并且將這個信號供應(yīng)給多路復(fù)用處理單元6。識別信息信號包括識別所記錄電視廣播節(jié)目的信息、識別電視廣播節(jié)目的每個縮小畫面的信息、指示每個所識別的縮小畫面在多畫面顯示器上的位置的信息、和識別對該原畫面生成識別的縮小畫面的原畫面的信息。
注意,指示所識別縮小畫面在多畫面顯示器上的位置的信息可以根據(jù)特定相似畫面分段和一組相似畫面分段的I畫面的個數(shù)找出。作為識別對其生成識別的縮小畫面的原畫面的信息,可以使用幀號碼或時間印記。
<聲音分類處理>
如下的描述具體說明應(yīng)用在如上所述的記錄/再現(xiàn)設(shè)備100中的音頻分類處理單元20為了分類聲音而進行的處理。圖7是示出聲音分類處理單元20的具體配置的說明性方塊圖。這個實施例的音頻分類處理單元20可以被認為是包括識別音樂音頻信號的音樂信號部分和識別會話語音音頻信號的語音信號部分的單元。
將音頻A/D轉(zhuǎn)換器1生成的數(shù)字音頻信號供應(yīng)給應(yīng)用在音頻分類處理單元20中的預(yù)確定信號分段檢測單元201。預(yù)確定信號分段檢測單元201從供應(yīng)給其的數(shù)字音頻信號中提取長度在0.5到5秒范圍內(nèi)的音頻信號分段,并且將所提取的音頻信號分段供應(yīng)給FFT信號處理單元202。
從數(shù)字音頻信號中提取的音頻信號分段具有在如上所述的預(yù)確定范圍內(nèi)的長度,這是因為,如果音頻信號分段的持續(xù)時間太短,就不可能高精度地確定音頻信號是音樂音頻信號還是會話語音音頻信號。
FFT信號處理單元202對供應(yīng)給它的數(shù)字音頻信號進行FFT(快速付里葉變換)處理,將該信號變換成有關(guān)頻率分量的信息。然后,F(xiàn)FT信號處理單元202將有關(guān)頻率分量的信息供應(yīng)給峰-頻率檢測單元203。峰-頻率檢測單元203從有關(guān)所供應(yīng)的數(shù)字音頻信號的頻率分量的信息中檢測譜-峰頻率,并且把所檢測的譜-峰頻率供應(yīng)給峰-頻率連續(xù)性確定單元204。
根據(jù)所供應(yīng)的譜-峰頻率,峰-頻率連續(xù)性確定單元204確定在預(yù)確定范圍內(nèi)是否連續(xù)地存在譜-峰頻率,以便確定正在處理的音頻信號是否是音樂音頻信號。
峰-頻率連續(xù)性確定單元204將確定結(jié)果供應(yīng)給上面參照圖1說明的多路復(fù)用處理單元6。多路復(fù)用處理單元6將確定結(jié)果多路復(fù)用成多路復(fù)用信號,作為指示受到處理的音頻信號是否是音樂音頻信號的信息。峰-頻率連續(xù)性確定單元204還通過系統(tǒng)控制器17或直接把確定結(jié)果供應(yīng)給分類顯示單元19。分類顯示單元19在預(yù)確定屏幕中利用確定結(jié)果,以通過將縮略畫面分類成音樂部分和非音樂部分,顯示音頻信號的縮略畫面。
另外,音頻分類處理單元20輸出的確定結(jié)果還可以用于將音頻信號分類成音樂信號分段和非音樂信號分段,并且以與顯示位于如前所述的場景改變點上的縮略畫面相同的方式,將在標記音頻信號的分段類別的改變的時刻上的場景顯示成縮小畫面。在這種情況下,通過明確地相互分開節(jié)目的音樂部分和說明部分,顯示廣播節(jié)目,以便可以,例如,只再現(xiàn)音樂部分或說明部分。
<再現(xiàn)系統(tǒng)>
接著,說明再現(xiàn)系統(tǒng)。系統(tǒng)控制器17生成的控制信號控制再現(xiàn)控制單元9,以從記錄媒體8中讀出用戶指定的多路復(fù)用數(shù)據(jù),并且將該數(shù)據(jù)供應(yīng)給再現(xiàn)處理單元10。再現(xiàn)處理單元10進行包括對供應(yīng)給它的多路復(fù)用數(shù)據(jù)進行解交織處理在內(nèi)的預(yù)確定處理,并且把經(jīng)處理的多路復(fù)用數(shù)據(jù)供應(yīng)給分離處理單元11。分離處理單元11多路分用供應(yīng)給它的多路復(fù)用數(shù)據(jù),以生成音頻數(shù)據(jù)、視頻數(shù)據(jù)、縮小畫面數(shù)據(jù)和識別信息信號,僅舉這幾個。
將分離處理單元11生成的音頻數(shù)據(jù)供應(yīng)給音頻解碼器12。供應(yīng)給音頻解碼器12的音頻數(shù)據(jù)是采用預(yù)確定壓縮方法壓縮的數(shù)據(jù)。因此,音頻解碼器12解壓縮供應(yīng)給它的壓縮音頻數(shù)據(jù),并且把作為解壓縮結(jié)果獲得的音頻數(shù)據(jù)供應(yīng)給音頻數(shù)字/模擬轉(zhuǎn)換器13,下文將音頻數(shù)字/模擬轉(zhuǎn)換器縮寫成音頻D/A轉(zhuǎn)換器。
音頻D/A轉(zhuǎn)換器13將供應(yīng)給它的數(shù)字音頻信號轉(zhuǎn)換成模擬音頻信號,并且將該模擬音頻信號輸出到揚聲器。揚聲器根據(jù)供應(yīng)給它的模擬音頻信號生成聲音。
另外,將分離處理單元11生成的視頻數(shù)據(jù)供應(yīng)給視頻解碼器14。供應(yīng)給視頻解碼器14的視頻數(shù)據(jù)是采用預(yù)確定壓縮方法壓縮的數(shù)據(jù)。因此,視頻解碼器14解壓縮供應(yīng)給它的壓縮視頻數(shù)據(jù),并且把作為解壓縮結(jié)果獲得的視頻數(shù)據(jù)供應(yīng)給視頻數(shù)字/模擬轉(zhuǎn)換器15,下文將視頻數(shù)字/模擬轉(zhuǎn)換器15縮寫成視頻D/A轉(zhuǎn)換器。
視頻D/A轉(zhuǎn)換器15將供應(yīng)給它的數(shù)字視頻信號轉(zhuǎn)換成模擬視頻信號,并且將該模擬視頻信號輸出到監(jiān)視器接收器。監(jiān)視器接收器根據(jù)供應(yīng)給它的模擬視頻信號顯示畫面。
將分離處理單元11生成的識別信息信號供應(yīng)給識別信號檢測單元16。識別信號檢測單元16從供應(yīng)給它的識別信息信號中檢測必要識別信息信號,并且將該識別信息供應(yīng)給系統(tǒng)控制器17和分類顯示單元19。
另外,識別信號檢測單元16還從供應(yīng)給它的識別信息信號中提取預(yù)確定時間印記信號或幀號碼,并且將時間印記信號或幀號供應(yīng)給系統(tǒng)控制器17。通過根據(jù)時間印記信號檢測再現(xiàn)時刻,也可以在分類顯示單元19上顯示再現(xiàn)位置。
然后,當通過用戶輸入I/F18而輸入命令,作為做出這樣的請求的命令時,即請求顯示對記錄在記錄媒體8上的廣播節(jié)目進行的分類,系統(tǒng)控制器17根據(jù)供應(yīng)給它的識別信息信號控制再現(xiàn)控制單元9,以便從記錄媒體8中讀出所需廣播節(jié)目的縮小畫面,并且通過再現(xiàn)處理單元10和分離處理單元11將縮小畫面供應(yīng)給分類顯示單元19。另外,系統(tǒng)控制器17根據(jù)識別信息信號控制分類顯示單元19,以便像圖3所示那樣,顯示記錄在記錄媒體8上的廣播節(jié)目的分類。
如上所述,甚至在記錄處理結(jié)束之后的預(yù)確定時刻,通過利用識別信息信號以及縮小畫面信號這兩種根據(jù)畫面相似性確定處理和分類處理生成然后存儲在記錄媒體中的信號,畫面的分類能夠像圖3所示那樣顯示。
注意,作為一個例子,本實施例是通過給出記錄一個電視廣播節(jié)目的情況來示范的。但是,本發(fā)明的實施例決不局限于這樣的情況。例如,本實施例也可以應(yīng)用于顯示作為對特定信道、特定節(jié)目分段、或特定時間分段進行畫面相似性確定處理和分類處理的結(jié)果獲得的分類。通常,特定信道、特定節(jié)目分段、或特定時間分段可能涉及通過預(yù)確定信道廣播的所有節(jié)目、預(yù)確定節(jié)目的一部分或預(yù)確定廣播信道的預(yù)確定時間分段。也就是說,只在適當?shù)姆侄纹陂g進行畫面相似性確定處理和分類處理,以便為那個分段顯示畫面的分類。
另外,在記錄處理期間,也可能對摘要再現(xiàn)處理生成畫面數(shù)據(jù)及對瀏覽再現(xiàn)處理生成畫面數(shù)據(jù),并且與廣播節(jié)目的主要畫面數(shù)據(jù)一起存儲這些數(shù)據(jù)段,以便可以進行廣播節(jié)目的摘要和瀏覽再現(xiàn)處理。
注意,在本說明書中,摘要再現(xiàn)處理指的是通過從節(jié)目中的一個位置跳到另一個位置再現(xiàn)記錄在記錄媒體上的廣播節(jié)目,以便使用戶掌握節(jié)目的概況的處理。例如,摘要再現(xiàn)處理可以通過只從物理上分離的信號分段中連續(xù)地再現(xiàn)廣播節(jié)目的部分來實現(xiàn),該分離信號分段的每一個在場景改變之前和之后,并且具有等于或高于預(yù)確定值的音頻電平。
另一方面,瀏覽再現(xiàn)處理是這樣的處理只再現(xiàn)從記錄在記錄媒體上的廣播節(jié)目的那些當中選取的場景,作為與用戶指定的一個相似的場景。
如果希望進行諸如摘要或瀏覽再現(xiàn)處理之類的預(yù)確定特殊再現(xiàn)處理,用戶需要通過用戶輸入I/F18輸入命令。當接收到用戶輸入的命令信息時,系統(tǒng)控制器17控制再現(xiàn)控制單元9為所需特殊再現(xiàn)方法讀出畫面數(shù)據(jù),以便使所需特殊再現(xiàn)方法的畫面得到再現(xiàn)。
<記錄/再現(xiàn)設(shè)備100的操作>
接著,通過參照如圖8到11所示的流程圖,說明在記錄過程中通過如上所述的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100進行的操作。圖8和9是參照了通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備進行的操作的說明的流程圖。如下的描述將說明一種典型情況,其中,把每一個位于場景改變點上的畫面存儲在記錄媒體中,作為如圖2C所示的縮小畫面,并且在記錄處理結(jié)束時作為分類結(jié)果顯示該縮小畫面。
當接收到用戶通過用戶輸入I/F18輸入的操作命令時,系統(tǒng)控制器17進行如圖8和9所示的流程圖所代表的操作。該流程圖從確定命令所請求的處理是再現(xiàn)處理還是記錄處理的步驟S1開始。如果在步驟S1中獲得的確定結(jié)果指示請求的處理是記錄處理,則操作流程轉(zhuǎn)到步驟S2,在步驟S2中,系統(tǒng)控制器17控制應(yīng)用在記錄/再現(xiàn)設(shè)備100中的部件,以將它們自己置于開始將音頻和視頻信號記錄到記錄媒體8上的處理的記錄模式下。
然后,在下一個步驟S3中,視頻分類處理單元5像上面參照圖4到6所說明的那樣,檢測每個I畫面的畫面特征。隨后,在下一個步驟S4中,視頻分類處理單元5對I畫面進行相似性確定處理和分類處理。在步驟S4中進行處理的段對應(yīng)于如前所述生成識別信息信號的處理。
然后,在下一個步驟S5中,系統(tǒng)控制器17根據(jù)分類處理的結(jié)果,將當前正在處理的特定I畫面與在這個特定I畫面之前緊鄰的I畫面相比較,以便通過找出特定I畫面是否與在前面緊鄰的I畫面不相似,確定特定I畫面是否是位于割點(或場景改變點)上的I畫面。對所有隨后的I畫面進行步驟S5的操作。
隨后,在下一個步驟S6中,系統(tǒng)控制器17檢查當前正在處理的特別I畫面,以確定特別I畫面是否是位于在步驟S5中檢測的割點的任何一個上的I畫面。如果當前正在處理的特別I畫面是位于割點的任何一個上的I畫面,操作流程轉(zhuǎn)到步驟S7,在步驟S7中,系統(tǒng)控制器17控制縮小畫面處理單元22以生成特別I畫面的縮小畫面,并且把生成的縮小畫面供應(yīng)給多路復(fù)用處理單元6。
在完成了在步驟S7中進行的操作或在步驟S6中獲得的確定結(jié)果指示當前正在處理的特別I畫面不是位于割點的任何一個上的I畫面之后,操作流程轉(zhuǎn)到步驟S8,在步驟S8中,除了其它之外,系統(tǒng)控制器17還創(chuàng)建指示多少個連續(xù)幀彼此相似的信息,作為指示位置的信息,并且在步驟S8中,把指示位置的信息供應(yīng)給多路復(fù)用處理單元6。注意,在MPEG數(shù)據(jù)的情況下,時間印記信息可以用作指示位置的信息。
然后,在下一個步驟S9中,多路復(fù)用處理單元6多路復(fù)用識別信息信號和要記錄的原信號,以便生成多路復(fù)用信號,并且通過記錄處理單元7將多路復(fù)用信號記錄到記錄媒體8上。包括音頻和視頻數(shù)據(jù),要記錄的原信號已經(jīng)提前供應(yīng)給多路復(fù)用處理單元6。識別信息信號包括指示位置的信息或時間印記信號。
隨后,在下一個步驟S10中,系統(tǒng)控制器17確定用戶是否已經(jīng)通過用戶輸入I/F18輸入了停止記錄處理的命令。如果確定結(jié)果指示用戶還沒有輸入停止記錄處理的命令,操作流程轉(zhuǎn)到步驟S3,從這個步驟開始重復(fù)如上所述的操作,以便繼續(xù)進行將供應(yīng)給記錄/再現(xiàn)設(shè)備100的音頻和視頻信號記錄到記錄媒體上的處理。
另一方面,如果在步驟S10中獲得的確定結(jié)果指示用戶已經(jīng)輸入了停止記錄處理的命令,操作流程轉(zhuǎn)到步驟S11,以確定是否已經(jīng)作出分類顯示的請求。通常,在開始記錄處理之前,用戶指示在處理結(jié)束時是否作出對分類顯示的請求。
如果在步驟S11中獲得的確定結(jié)果指示沒有作出對分類顯示的請求,結(jié)束如圖8和9所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備100通常進入等待用戶輸入下一個命令的狀態(tài)。另一方面,如果在步驟S11中獲得的確定結(jié)果指示已經(jīng)作出對分類顯示的請求,操作流程轉(zhuǎn)到步驟S12,在步驟S12中,將分類顯示輸出到分類顯示單元19,以便像圖3所示的那樣,示出存儲在記錄媒體上的縮小畫面。
在顯示了畫面分類之后,操作流程轉(zhuǎn)到步驟S13,在步驟S13中,系統(tǒng)控制器17確定用戶是否已經(jīng)輸入了再現(xiàn)命令。如果在步驟S13中獲得的確定結(jié)果指示用戶還沒有輸入再現(xiàn)命令,結(jié)束如圖8和9所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備100通常進入等待用戶輸入下一個命令的狀態(tài)。
注意,通過本實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100能夠只再現(xiàn)這樣一組相似畫面分段,其中的相似畫面分段彼此類似并包括與從在分類顯示中示出的那些當中所選取的縮小畫面相對應(yīng)的原畫面。
另一方面,如果在步驟S1中獲得的確定結(jié)果指示請求的處理是再現(xiàn)處理或如果在步驟S13中獲得的確定結(jié)果指示用戶已經(jīng)輸入了再現(xiàn)命令,操作流程轉(zhuǎn)到如圖9所示的續(xù)流程圖的步驟S14。在這個步驟中,系統(tǒng)控制器17控制應(yīng)用在再現(xiàn)系統(tǒng)中的部件,以把記錄/再現(xiàn)設(shè)備100置于再現(xiàn)模式下。
然后,在下一個步驟S15中,系統(tǒng)控制器17確定請求的再現(xiàn)處理是特殊再現(xiàn)處理還是普通再現(xiàn)處理。特殊再現(xiàn)處理的例子是摘要再現(xiàn)處理和瀏覽再現(xiàn)處理。
如果在步驟S15中獲得的確定結(jié)果指示請求的再現(xiàn)處理是特殊再現(xiàn)處理,操作流程轉(zhuǎn)到步驟S16,在步驟S16中,系統(tǒng)控制器17控制應(yīng)用在再現(xiàn)系統(tǒng)中的部件,以把記錄/再現(xiàn)設(shè)備100置于請求的特殊再現(xiàn)處理的模式下,并且進行請求的特殊再現(xiàn)處理。在這個請求的特殊再現(xiàn)處理中,作為用戶請求的特殊再現(xiàn)操作,進行摘要再現(xiàn)、瀏覽再現(xiàn)或分類顯示再現(xiàn)。
然后,在下一個步驟S17中,系統(tǒng)控制器17確定用戶是否已經(jīng)輸入了停止特殊再現(xiàn)處理的命令。如果確定結(jié)果指示用戶已經(jīng)輸入了停止特殊再現(xiàn)處理的命令,結(jié)束如圖8和9所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備100通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S17中獲得的確定結(jié)果指示用戶還沒有輸入停止特殊再現(xiàn)處理的命令,操作流程轉(zhuǎn)到步驟S18,以確定是否已經(jīng)作出記錄處理的請求,也就是說,是否已經(jīng)輸入了將再現(xiàn)模式改變成記錄模式的命令。
如果在步驟S18中獲得的確定結(jié)果指示還沒有作出記錄處理的請求,操作流程返回到步驟S18,以繼續(xù)進行特殊再現(xiàn)處理。另一方面,如果在步驟S18中獲得的確定結(jié)果指示已經(jīng)作出了記錄處理的請求,操作流程返回到如圖8所示的主流程圖的步驟S1,從這個步驟開始全面重復(fù)上述操作。
另一方面,如果在步驟S15中獲得的確定結(jié)果指示請求的再現(xiàn)處理不是特殊再現(xiàn)處理,操作流程轉(zhuǎn)到步驟S19,在步驟S19中,系統(tǒng)控制器17控制應(yīng)用在再現(xiàn)系統(tǒng)中的部件,以把記錄/再現(xiàn)設(shè)備100置于普通再現(xiàn)處理的模式下,并且進行普通再現(xiàn)處理。
然后,在下一個步驟S20中,系統(tǒng)控制器17確定用戶是否已經(jīng)輸入了停止普通再現(xiàn)處理的命令。如果確定結(jié)果指示用戶已經(jīng)輸入了停止普通再現(xiàn)處理的命令,結(jié)束如圖8和9所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備100通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S20中獲得的確定結(jié)果指示用戶還沒有輸入停止普通再現(xiàn)處理的命令,操作流程轉(zhuǎn)到步驟S21,以確定是否已經(jīng)作出記錄處理的請求,也就是說,是否已經(jīng)輸入了將再現(xiàn)模式改變成記錄模式的命令。
如果在步驟S21中獲得的確定結(jié)果指示還沒有作出記錄處理的請求,操作流程返回到步驟S19,繼續(xù)進行普通再現(xiàn)處理。另一方面,如果在步驟S21中獲得的確定結(jié)果指示已經(jīng)作出了記錄處理的請求,操作流程返回到如圖8所示的主流程圖的步驟S1,從這個步驟開始全面重復(fù)上述操作。
注意,圖10和11是流程圖,參照了記錄/再現(xiàn)設(shè)備以與圖2B所示的原畫面相同的幀順序顯示所有原畫面的縮小畫面而進行的其它操作的說明。如圖10和11所示的流程圖幾乎與如圖8和9所示的流程圖相同,但是,由于以與原畫面相同的幀順序記錄縮小畫面,不需要指示位置的信息。因此,在如圖10所示的流程圖中,不需要在如圖8所示的流程圖的步驟S8中進行的操作。
如圖10和11所示的流程圖的其它步驟與如圖8和9所示的流程圖的相應(yīng)步驟相同。在如圖10和11所示的流程圖中,與如圖8和9所示的流程圖中它們的對應(yīng)步驟相同的其它步驟用與對應(yīng)步驟相同的標號表示,并且不再重復(fù)對應(yīng)步驟的說明。
<第一實施例總結(jié)>
如上所述,在將電視廣播節(jié)目的視頻和音頻信號記錄到記錄媒體上的處理中,通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100識別包括在視頻信號中的畫面的特征,并根據(jù)所識別的特征,進行相似性確定處理和分類處理,以分類相似畫面。
同時,檢測場景改變點。如果數(shù)個連續(xù)幀存在相似畫面,只創(chuàng)建位于分類畫面的場景改變點上的原畫面的縮小畫面,并檢測指示縮小畫面和原畫面在時基上的位置的信息或指示幀的位置的信息等。然后,將諸如縮小畫面的數(shù)據(jù)和指示位置的信息之類的識別信息信號與原視頻數(shù)據(jù)一起記錄到記錄媒體上。
與記錄處理同時、在記錄處理結(jié)束時或在記錄處理之后的某預(yù)確定時刻,快速地對包括在記錄處理中的分類處理的每個分類顯示縮小畫面。也就是說,像那個圖3所示的那樣的多畫面顯示出現(xiàn)在顯示單元上,作為分類顯示。從這個分類顯示中,可以有效率地和有效地掌握記錄的數(shù)據(jù)。另外,可以立即進行諸如摘要再現(xiàn)處理之類的特殊處理。
因此,這個實施例能夠解決諸如像傳統(tǒng)VTR(磁帶錄像機)的情況那樣,不再現(xiàn)整個視頻數(shù)據(jù)就不能識別記錄的視頻數(shù)據(jù)之類的問題。也就是說,與記錄處理同時,正好在記錄處理結(jié)束之后或在記錄處理之后的某預(yù)確定時刻,可以迅速地和精確地掌握記錄的視頻數(shù)據(jù)。
注意,在第一實施例的描述中,用作記錄的主要對象的第一信息信號包括電視廣播節(jié)目等的視頻和音頻信號。但是,用作記錄的主要對象的第一信息信號決不局限于這樣的信號。例如,用作記錄的主要對象的第一信息信號可以只是視頻信號或音頻信號。
如果第一信息信號只是音頻信號,作為第二信息信號,通??赡苣軌蚴褂迷谟涗?再現(xiàn)設(shè)備中創(chuàng)建的顯示消息。這樣顯示消息的例子是第一音樂部分、第二音樂部分、男聲部分和女聲部分。
注意,雖然音樂聲音部分和會話語音部分是像上面所述的那樣檢測的,但音頻信號的男聲部分和女聲部分也可以根據(jù)音頻信號的頻率分量來檢測。
另外,第一信息信號可以是包括視頻信號、節(jié)目數(shù)據(jù)、和文本數(shù)據(jù)的組合數(shù)據(jù),或包括音頻信號、節(jié)目數(shù)據(jù)、和文本數(shù)據(jù)的組合數(shù)據(jù)。也就是說,本發(fā)明可以應(yīng)用于其它情況,只要在每一種其它情況中,以預(yù)確定單元進行相似性確定處理,并且將可以分類成相似畫面分段的信息信號用作第一信息信號即可。
另外,不僅可以以節(jié)目為單元進行相似性確定處理和分類處理,而且可以在記錄處理期間的所有時刻進行相似性確定處理和分類處理。作為另一種選擇,將時基劃分成時段,還可以對每個時段進行相似性確定處理,以及分類處理。作為又一種選擇,也可以只對適當?shù)膯卧?,譬如,?jié)目內(nèi)的時間單元或第一預(yù)確定時期進行相似性確定處理,以及分類處理。
另外,也許屏幕容納不下分類顯示。在這種情況下,可以沿著水平(寬度)方向或垂直(高度)方向滾動分類顯示,以便使用戶能夠觀看所有縮小畫面。
<第二實施例>
圖12是示出通過應(yīng)用了本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200的說明性方塊圖。圖13A、13B、14和15是示出通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備的操作原理的說明圖。
通過如圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200具有幾乎與通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備相同的配置,除了通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200不包括應(yīng)用在如圖1所示的第一實施例的記錄/再現(xiàn)設(shè)備100中的I-畫面檢測單元21和縮小畫面處理單元22,以及記錄/再現(xiàn)設(shè)備200新配備了剩余記錄容量檢測單元31、記錄媒體初始化狀態(tài)檢測單元32和顯示系統(tǒng)33。
由于如上所述的原因,在通過圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200中,與它們的應(yīng)用在通過圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100中的對應(yīng)物相同的部件用與其對應(yīng)物相同的標號表示,并且不再重復(fù)相同對應(yīng)物的詳細說明。
除了包括電視廣播節(jié)目的所有視頻和音頻信號的主要信息(第一信息信號)之外,通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200還將摘要使用信號(概要信息或第二信息信號)存儲在記錄媒體8上,因此,能夠進行摘要再現(xiàn)處理。摘要使用信號包括用于對電視廣播節(jié)目進行摘要再現(xiàn)處理的摘要再現(xiàn)視頻信號(概要視頻信息)和摘要再現(xiàn)音頻信號(概要音頻信息)。
概要信息與電視廣播節(jié)目的主要信號相結(jié)合形成一對。通過觀看從記錄媒體8中再現(xiàn)的概要信息,用戶可以掌握主要信息的內(nèi)容概況,并且確定是否有必要正常地再現(xiàn)和觀看主要信息。這樣,由于用戶通過只觀看從記錄媒體8中再現(xiàn)的概要信息,就可以掌握主要信息的內(nèi)容概況,因此存在著許多沒有必要正常再現(xiàn)主要信息的情況。
另外,盡管記錄媒體的存儲容量很大,但容量決非無限。因此,如果總是成對地管理主要信息和概要信息,那么,還完全有可能無意刪除必要概要信息。但是,如果完全將存儲主要信息的記錄區(qū)和存儲概要信息的記錄區(qū)彼此分開地管理,那么,難以將主要信息與概要信息關(guān)聯(lián)在一起。
因此,為了解決這個問題,在通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中,通過將主要信息和概要信息相互關(guān)聯(lián),來管理主要信息和概要信息,并且,當記錄媒體8中存留的記錄區(qū)的存儲容量變得不足以存儲新主要信息時,從記錄媒體8中刪除最早日期的主要信息,但有意使概要信息優(yōu)先于主要信息保留在記錄媒體8中,以便可以有效地利用記錄媒體8。其結(jié)果是,可以有效地和高效率地利用諸如存儲在記錄媒體8上的視頻信號之類的信息信號。
注意,概要信息是用于進行摘要再現(xiàn)處理的信息。概要信息的一個例子是通過從主要信號中提取分段的視頻和音頻信號而創(chuàng)建的信息,這些分段的每一個先于和后于通常由攝像機工作的改變而引起的場景改變,并且具有等于或高于預(yù)確定值的音頻電平。
具體地說,通過提取分段A1、A2和A3的視頻和音頻信號,創(chuàng)建像那個如圖13B所示的那樣的概要信息,這些分段的每一個先于和后于如圖13A所示的場景改變,并且具有等于或高于預(yù)確定值的音頻電平。
另外,舉另一個例子來說,想像得出,還可以從作為具有電視廣播節(jié)目的相似音頻信號的部分而檢測的相似部分的音頻和視頻信號中創(chuàng)建供摘要再現(xiàn)使用的概要信息??梢哉J為新聞節(jié)目是這個其它例子。在這種情況下,可以想像,通過只再現(xiàn)出現(xiàn)新聞播音員的場景,就可以掌握新聞的概況。另外,在流行歌曲節(jié)目的情況中,通過只對播放音樂的場景進行摘要再現(xiàn)處理,就可以掌握節(jié)目的內(nèi)容。
注意,在如上所述的第二實施例中,如圖13A和13B所示,概要信息是通過提取分段的視頻和音頻信號而創(chuàng)建的,這些分段的每一個先于和后于場景改變,并且具有等于或高于預(yù)確定值的音頻電平。
<操作原理>
首先,說明通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200的操作原理。正如前面也描述過的那樣,通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200能夠?qū)娨晱V播節(jié)目的所有視頻和音頻信號的主要信息、及概要信息存儲在記錄媒體8上。概要信息是主要信息的所謂摘要。概要信息是用于掌握電視廣播節(jié)目的概況的摘要再現(xiàn)信號,該電視廣播節(jié)目否則只能通過再現(xiàn)主要信息來觀看。
另外,在通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200的情況中,如圖14A所示,記錄媒體8的記錄區(qū)被劃分成用作只存儲概要信息的記錄區(qū)的區(qū)域R1和用作只存儲主要信息的記錄區(qū)的區(qū)域R2。因此,概要信息存儲在記錄媒體8的記錄區(qū)R1中,而主要信息存儲在記錄媒體8的記錄區(qū)R2中。
應(yīng)用在記錄/再現(xiàn)設(shè)備200中的系統(tǒng)控制器17通過剩余記錄容量檢測單元31監(jiān)視記錄媒體8的剩余存儲容量。如下的描述將說明如圖14A所示的情況,其中,對第1到第4節(jié)目完成了存儲概要信息和主要信息的操作之后,如在記錄與第5節(jié)目有關(guān)的概要信息和主要信息的操作中所檢測到的那樣,存儲主要信息的記錄區(qū)R2的存留存儲容量變得不足。
在這樣的情況下,將第5節(jié)目的概要信息原樣存儲在配備在記錄媒體8中作為分配給概要信息的區(qū)域的記錄區(qū)R1中,并將第5節(jié)目的主要信息存儲在用于存儲在最早記錄日期記錄的第1節(jié)目的主要信息的記錄區(qū)中,覆蓋(疊置)如圖14B所示的第1節(jié)目的主要信息。
如果第5節(jié)目的主要信息不能全部容納在用于存儲第1節(jié)目的主要信息的記錄區(qū)中,將第5節(jié)目的主要信息的存留信息記錄在接在用于存儲第4節(jié)目的主要信息的記錄區(qū)之后的區(qū)域中。
但是,通過像如上所述那樣存儲第5節(jié)目的信息,盡管第1節(jié)目的主要信息不可避免地被刪除,但作為最新節(jié)目的第5節(jié)目的主要信息可以存儲在記錄媒體8中。除此之外,由于第1節(jié)目的概要信息未被刪除,無論何時通過進行再現(xiàn)第1節(jié)目的概要信息的摘要再現(xiàn)處理,都可以掌握第1節(jié)目的概況。
注意,如果害怕保留在記錄媒體8中的記錄區(qū)R1本身的大小也變得不足,系統(tǒng)控制器17通過顯示系統(tǒng)33向用戶報告這種狀況,從提醒用戶關(guān)注這種狀況。也就是說,請求用戶重新安排已經(jīng)存儲在記錄媒體8上的信息或擴大它的記錄區(qū)。
在如圖14所示的例子的情況中,如上所述,記錄媒體8的記錄區(qū)事先被劃分成分配給概要信息的記錄區(qū)R1和分配給主要信息的記錄區(qū)R2。但是,值得注意的是,記錄媒體8的記錄區(qū)的使用決不局限于這樣的劃分。例如,如圖15A所示,還可以將每個主要信息和對于該主要信息的概要信息存儲在彼此相鄰的區(qū)域中。當預(yù)計存留的記錄區(qū)變得不足時,將作為最新節(jié)目的第5節(jié)目的主要信息存儲在用于存儲在最早記錄日期記錄的第1節(jié)目的主要信息的記錄區(qū)中,覆蓋(疊置)如圖15B所示的第1節(jié)目的主要信息。
總之,通過用最新主要信息取代最早主要信息,但使該最早主要信息的概要信息原樣保留在記錄區(qū)中,可以避免這種狀況,即與用戶感興趣的主要信息相關(guān)聯(lián)的概要信息也被不可避免地刪除掉,致使不能掌握用戶感興趣的主要信息的概況。
<通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200的操作和配置>
如下的描述將說明通過如圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200的配置和由此進行的操作。如圖12所示,通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200包括記錄媒體初始化狀態(tài)檢測單元32。記錄媒體初始化狀態(tài)檢測單元32是確定記錄媒體8是否處在初始化狀態(tài)的部件,初始化狀態(tài)是沒有諸如視頻數(shù)據(jù)和音頻數(shù)據(jù)之類的信息被記錄在記錄媒體8上的狀態(tài)。
將記錄媒體初始化狀態(tài)檢測單元32生成的確定結(jié)果報告給系統(tǒng)控制器17。如果確定的結(jié)果指示沒有信息信號被記錄在記錄媒體8上的初始化狀態(tài),系統(tǒng)控制器17通過顯示系統(tǒng)33向用戶報告這種狀態(tài),以提醒用戶輸入選擇如圖14所示的第一記錄方法或如圖15所示的第二記錄方法,作為將信息信號記錄到記錄媒體8上的技術(shù)的輸入。
假設(shè)一個例子,用戶喜歡如圖14所示的第一記錄方法。在這種情況下,可以通過將記錄媒體8劃分成分配給概要信息的記錄區(qū)R1和分配給主要信息的記錄區(qū)R2來管理信息信號。因此,記錄媒體8對于這種情況是方便的,即,需要容納通常記錄了幾個星期的主要信息段,但必須保存記錄了至少幾個月的概要信息段。
在第一記錄方法的情況下,在分配給概要信息的記錄區(qū)變得不足之前,不發(fā)出警告。因此,第一記錄方法提供了如下優(yōu)點可以高可靠度地存儲和保持最近概要信息;和不用頻繁地重新排列已經(jīng)存儲在記錄媒體8中的信息,就可以可靠地記錄和保存最新主要信息段。
另一方面,在如圖15所示的第二記錄方法的情況下,沒有必須事先分配大的第一和第二記錄區(qū)。因此,可以高效率地使用記錄區(qū)。另外,由于既不存在專門分配給概要信息的記錄區(qū),也不存在專門分配給主要信息的記錄區(qū),第二記錄方法還具有能夠在相對長期的時間記錄概要信息和主要信息的優(yōu)點。但是,由于記錄區(qū)均用于存儲信息,可能出現(xiàn)不能再既記錄概要信息又記錄主要信息的情況。
第一記錄方法或第二記錄方法需要按照用戶想要利用記錄/再現(xiàn)設(shè)備的方式來選擇。用戶通過用戶輸入I/F18把指定采用哪一種記錄方法的輸入輸入記錄/再現(xiàn)設(shè)備中。然后,通常將這樣的輸入設(shè)置在應(yīng)用在系統(tǒng)控制器17中的非易失性存儲器中。每當進行記錄處理時,對于所采用的記錄方法引用非易失性存儲器,以便可以按照用戶喜歡的記錄方法將信息信號記錄到記錄媒體8中。
注意,通常,將如圖14所示的第一記錄方法作為默認記錄方法事先設(shè)置在存儲器中。但是,如有必要,可以用如圖15所示的第二記錄方法取代默認記錄方法。不用說,反過來,可以將如圖15所示的第二記錄方法作為默認記錄方法事先設(shè)置在存儲器中,如有必要,可以用如圖14所示的第一記錄方法取代默認記錄方法。
然后,與通過如前所述的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100非常相似,在通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200中,電視廣播節(jié)目的模擬音頻信號經(jīng)音頻A/D轉(zhuǎn)換器1和音頻編碼器2處理,生成然后供應(yīng)給多路復(fù)用處理單元6的壓縮音頻數(shù)據(jù)。另一方面,電視廣播節(jié)目的模擬視頻信號經(jīng)視頻A/D轉(zhuǎn)換器3和視頻編碼器4處理,生成然后供應(yīng)給多路復(fù)用處理單元6的壓縮視頻數(shù)據(jù)。隨后,多路復(fù)用處理單元6多路復(fù)用該視頻和音頻數(shù)據(jù),以生成主要信息。
與應(yīng)用在通過如前所述的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100中的視頻分類處理單元5非常相似,應(yīng)用在通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200中的視頻分類處理單元5進行畫面相似性確定處理,以將主要信息分類成相似畫面分段和非相似畫面分段,將確定結(jié)果供應(yīng)給系統(tǒng)控制器17。在這種情況下,視頻分類處理單元5將識別信息供應(yīng)給多路復(fù)用處理單元6,作為加入主要信息中的信號輸送所需信息。
與應(yīng)用在通過如前所述的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100中的音頻分類處理單元20非常相似,應(yīng)用在通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200中的音頻分類處理單元20能夠識別音樂信號分段和會話語音信號分段。但是,在第二實施例的情況下,記錄/再現(xiàn)設(shè)備200還檢測音頻信號的音頻電平,并且把有關(guān)檢測的音頻電平的信息供應(yīng)給系統(tǒng)控制器17。在這種情況下,音頻分類處理單元20將識別信息供應(yīng)給多路復(fù)用處理單元6,作為加入主要信息中的信號輸送所需信息。
根據(jù)從視頻分類處理單元5接收的確定結(jié)果以及作為關(guān)于所檢測的音頻電平的信息的從音頻分類處理單元20接收的信息,系統(tǒng)控制器17識別每一個先于和后于位于場景改變點上的畫面,并且具有等于或高于預(yù)確定值的音頻電平的預(yù)確定視頻信號和音頻信號分段,作為要用在摘要再現(xiàn)處理中的分段,并且將關(guān)于識別的分段的信息供應(yīng)給多路復(fù)用處理單元6。
根據(jù)從系統(tǒng)控制器17接收的分段識別信息,多路復(fù)用處理單元6從主要信息中提取預(yù)確定分段的信息,作為要用在摘要再現(xiàn)處理中的概要信息。也就是說,多路復(fù)用處理單元6按照系統(tǒng)控制器17執(zhí)行的控制,從主要信息中創(chuàng)建概要信息。
通過記錄處理單元7把多路復(fù)用處理單元6創(chuàng)建的主要和概要信息記錄到記錄媒體8上。在這種情況下,系統(tǒng)控制器17通過采用如圖14所示的第一記錄方法或如圖15所示的第二記錄方法作為如上所述事先選擇的記錄技術(shù)控制記錄處理單元7,將主要和概要信息記錄到記錄媒體8上。
結(jié)果是,如圖14或15所示,主要和概要信息被記錄到記錄媒體8上。在第二實施例中,記錄處理單元7不僅具有創(chuàng)建記錄使用信號的功能,而且擁有用于將所創(chuàng)建的記錄使用信號記錄到記錄媒體上的記錄起首單元。系統(tǒng)控制器17控制記錄起首單元的位置,以選擇要記錄記錄使用信號的記錄區(qū)。
注意,與通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的分類顯示非常相似,可以在記錄時,在分類顯示單元19上顯示位于場景改變點上的原畫面的縮小畫面,或者,也可以將用于摘要再現(xiàn)處理提取的畫面和聲音輸出到分類顯示單元19。
另外,以與通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100相同的方式再現(xiàn)已經(jīng)記錄在記錄媒體8上的信息信號。但是,如果確定結(jié)果指示通過操作用戶輸入I/F18,用戶輸入對節(jié)目的摘要再現(xiàn)處理作出請求的命令,則系統(tǒng)控制器17控制再現(xiàn)控制單元9從記錄媒體8中讀出在命令中指定的節(jié)目的概要數(shù)據(jù),并且通過再現(xiàn)處理單元10將該概要數(shù)據(jù)供應(yīng)給分離處理單元11。分離處理單元11將概要數(shù)據(jù)的音頻部分和視頻部分相互分開。
然后,在摘要再現(xiàn)處理中,分離處理單元11通過音頻解碼器12和音頻D/A轉(zhuǎn)換器13將概要數(shù)據(jù)的音頻部分輸出到揚聲器,并通過視頻解碼器14和視頻D/A轉(zhuǎn)換器15將概要數(shù)據(jù)的視頻部分輸出到監(jiān)視器接收器。
注意,視頻分類處理單元5和音頻分類處理單元20兩者都能夠在壓縮處理之前,對數(shù)據(jù)進行分類處理。
<記錄/再現(xiàn)設(shè)備200的操作>
接著,參照如圖16和17所示的流程圖,說明通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200進行的操作。為了使說明簡單一些,如圖16和17所示的流程圖假設(shè)了這樣一種典型情況,即,如同定時視頻記錄或預(yù)定視頻記錄的情況,根據(jù)記錄開始時間和記錄結(jié)束時間事先設(shè)置記錄時間間隔。
當用戶請求開始定時記錄時,系統(tǒng)控制器17在步驟S101中通過從指定的記錄結(jié)束時間減去指定的記錄開始時間計算記錄時間間隔(從指定的記錄開始時間到指定的記錄結(jié)束時間)。
然后,在下一個步驟S102中,系統(tǒng)控制器17根據(jù)從剩余記錄容量檢測單元31接收到的檢測輸出,計算分配給概要信息的記錄區(qū)R1的剩余存儲容量。隨后,在下一個步驟S103中,系統(tǒng)控制器17確定計算的剩余存儲容量是否等于或大于事先確定的值,即,計算的剩余存儲容量是否等于或大于對在步驟S101中求出的記錄時間間隔估計的概要信息量。
如果在在步驟S103中進行的操作中獲得的確定結(jié)果指示分配給概要信息的記錄區(qū)R1的計算的剩余存儲容量等于或大于事先確定的值,操作流程轉(zhuǎn)到步驟S104,在步驟S104中,系統(tǒng)控制器17根據(jù)從剩余記錄容量檢測單元31接收到的檢測輸出,計算分配給主要信息的記錄區(qū)R2的剩余存儲容量。隨后,在下一個步驟S105中,系統(tǒng)控制器17確定計算的剩余存儲容量是否等于或大于事先確定的容量,即,計算的剩余存儲容量是否等于或大于對在步驟S101中求出的記錄時間間隔估計的主要信息量。
如果在在步驟S105中進行的操作中獲得的確定結(jié)果指示分配給主要信息的記錄區(qū)R2的計算的剩余存儲容量等于或大于事先確定的值,操作流程轉(zhuǎn)到步驟S114,在步驟S114中,系統(tǒng)控制器17將記錄媒體8中的記錄區(qū)分配給此時要記錄的當前主要信息。然后,在下一個步驟S108中,系統(tǒng)控制器17將主要信息記錄到記錄媒體8的分配區(qū)上。
另一方面,如果在在步驟S105中進行的操作中獲得的確定結(jié)果指示分配給主要信息的記錄區(qū)R2的計算的剩余存儲容量不足,操作流程轉(zhuǎn)到步驟S106,在步驟S106中,系統(tǒng)控制器17識別用于記錄已經(jīng)記錄在記錄媒體8上的主要信息段當中的最早主要信息的記錄區(qū)。然后,在下一個步驟S107中,系統(tǒng)控制器17開始控制記錄處理單元7,以將當前主要信息記錄到識別的記錄區(qū)上。隨后,在下一個步驟S108中,記錄處理單元7將此時記錄的當前主要信息覆蓋在記錄在識別出的記錄區(qū)中的最早主要信息上。
然后,在下一個步驟S109中,通過在視頻分類處理單元5中進行畫面相似性處理和畫面分類處理,以及在音頻分類處理單元20中進行音頻電平檢測處理,來檢測主要信息的特征。隨后,在下一個步驟S110中,系統(tǒng)控制器17識別要用在摘要再現(xiàn)處理中的信號分段,并確定正在處理的主要信息是否是要為該主要信息創(chuàng)建概要信息的信號分段的主要信息。
如果在步驟S110中進行操作獲得的確定結(jié)果指示正在處理的主要信息是要為該主要信息創(chuàng)建概要信息的信號分段的主要信息,操作流程轉(zhuǎn)到步驟S111,在步驟S111中,進行諸如識別處理之類的操作,以便從要用作概要信息的分段中提取主要信息,并把附加信息附在所提取的概要信息上,以創(chuàng)建概要信息。附在概要信息上的附加信息是可以用于指示該概要信息是屬于主要信息的信息。然后,在下一個步驟S112中,將概要信息記錄到分配給概要信息的記錄區(qū)R1上。
另一方面,如果在步驟110中進行操作獲得的確定結(jié)果指示正在處理的主要信息不是要為其創(chuàng)建概要信息的信號分段的主要信息,操作流程轉(zhuǎn)到步驟S113。在完成在步驟S112中進行的操作之后操作流程也轉(zhuǎn)到步驟S113。在步驟S113中,系統(tǒng)控制器17確定用戶是否輸入了停止記錄處理的命令。如果系統(tǒng)控制器17確定用戶還沒有輸入停止記錄處理的命令,操作流程返回到步驟S108,從這個步驟開始重復(fù)如上所述的操作。
另一方面,如果在步驟S113中進行操作獲得的確定結(jié)果指示用戶已經(jīng)輸入了停止記錄處理的命令,結(jié)束如圖16和17所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備200通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S103中進行操作獲得的確定結(jié)果指示分配給概要信息的記錄區(qū)R1的計算的剩余存儲容量不足,操作流程轉(zhuǎn)到如圖17所示的續(xù)流程圖的步驟S115。在步驟S115中,系統(tǒng)控制器17通過顯示系統(tǒng)33向用戶發(fā)出警告。然后,在下一個步驟S116中,系統(tǒng)控制器17確定用戶是否輸入了停止記錄處理的命令。如果在步驟S116中進行操作獲得的確定結(jié)果指示用戶已經(jīng)輸入了停止記錄處理的命令,系統(tǒng)控制器17結(jié)束如圖16和17所示的流程圖所代表的操作的執(zhí)行。
另一方面,如果在步驟S116中進行操作獲得的確定結(jié)果指示用戶還沒有輸入停止記錄處理的命令或用戶已經(jīng)輸入了繼續(xù)進行記錄處理的命令,操作流程轉(zhuǎn)到步驟S117,在步驟S117中,系統(tǒng)控制器17識別已經(jīng)記錄在分配給概要信息的記錄區(qū)R1中的概要信息段當中的最早概要信息。然后,在下一個步驟S118中,系統(tǒng)控制器17將用于存儲識別出的最早概要信息的記錄區(qū)設(shè)置成存儲當前概要信息的記錄區(qū)。隨后,操作流程返回到如圖16所示的主流程圖的步驟S104,從這個步驟開始重復(fù)如上所述的步驟。
如下的描述將說明在這種情況下記錄/再現(xiàn)設(shè)備200進行的操作,即,對于記錄媒體8仍然像原來那樣處在初始化狀態(tài),使記錄方法得到選擇。圖18是流程圖,參照了在這種情況下記錄/再現(xiàn)設(shè)備200進行的其它操作的說明,即,記錄媒體8仍然像原來那樣處在初始化狀態(tài),使記錄方法得到選擇。
如圖18所示的流程圖所代表的操作是按照輸入的命令進行的處理,該命令作為執(zhí)行像這樣的處理的請求,如,包括定時記錄處理的設(shè)置處理。如圖18所示的流程圖所代表的操作從步驟S131開始,在步驟S131中,系統(tǒng)控制器17根據(jù)從記錄媒體初始化狀態(tài)檢測單元32接收的檢測結(jié)果,識別記錄媒體8的狀態(tài)。
然后,在下一個步驟S132中,系統(tǒng)控制器17確定記錄媒體8是否不含記錄在其上面的信息信號,仍然像原來那樣處在初始化狀態(tài)。
如果在步驟S132中進行操作獲得的確定結(jié)果指示信息信號已經(jīng)被記錄在記錄媒體8上,記錄/再現(xiàn)設(shè)備200從如圖18所示的流程圖所代表的處理中退出。然后,通常,記錄/再現(xiàn)設(shè)備200進行如圖16和17所示的流程圖所代表的處理。
另一方面,如果在步驟S132中進行操作獲得的確定結(jié)果指示記錄媒體8仍然像原來那樣處在初始化狀態(tài),處理流程轉(zhuǎn)到步驟S133,在步驟S133中,系統(tǒng)控制器17通過顯示系統(tǒng)33向用戶示出消息。該消息提醒用戶輸入選擇記錄方法的輸入。然后,系統(tǒng)控制器17接收用戶通過用戶輸入I/F18輸入的輸入,作為選擇記錄方法的輸入。
然后,在下一個步驟S134中,系統(tǒng)控制器17確定選擇記錄方法的輸入是選擇第一記錄方法還是第二記錄方法。如果在步驟S134中進行操作獲得的確定結(jié)果指示選擇記錄方法的輸入選擇了第一記錄方法,處理流程轉(zhuǎn)到步驟S135,在步驟S135中,系統(tǒng)控制器17把指示已經(jīng)選擇了第一記錄方法的數(shù)據(jù)設(shè)置在用在系統(tǒng)控制器17中的非易失性存儲器中。
另一方面,如果在步驟S134中進行操作獲得的確定結(jié)果指示選擇記錄方法的輸入選擇了第二記錄方法,處理流程轉(zhuǎn)到步驟S136,在步驟S136中,系統(tǒng)控制器17把指示已經(jīng)選擇了第一記錄方法的數(shù)據(jù)設(shè)置在用在系統(tǒng)控制器17中的非易失性存儲器中。在完成了在步驟S135或S136中進行的操作之后,記錄/再現(xiàn)設(shè)備200從如圖18所示的流程圖所代表的處理中退出。然后,通常,記錄/再現(xiàn)設(shè)備200進行如圖16和17所示的流程圖所代表的處理。注意,在以前已經(jīng)選擇了記錄方法并且已經(jīng)設(shè)置了指示所選記錄方法的數(shù)據(jù)的情況下,可以將如圖18所示的流程圖所代表的處理修改成繞過該操作。
<第二實施例總結(jié)>
通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200通過將分配給主要信息的記錄區(qū)與分配給概要信息的記錄區(qū)相關(guān)聯(lián),來管理主要信息和概要信息。如果包括記錄區(qū)的記錄媒體8的剩余存儲容量變得不足,有意使概要信息優(yōu)先于與該概要信息相關(guān)聯(lián)的主要信息而保留在記錄媒體8的記錄區(qū)中,以便可以高效率地利用記錄媒體8。其結(jié)果是,可以有效地和高效率地利用諸如記錄在記錄媒體8上的視頻信號之類的信息信號。
也就是說,通過優(yōu)先讓概要信息保留在記錄媒體8的記錄區(qū)中,可以防止必要信息被錯誤地刪除,并高效率地利用記錄媒體。
另外,由于概要信息優(yōu)先保留在記錄媒體8的記錄區(qū)中,可以在任何時候進行該概要信息的摘要再現(xiàn)處理,使在短期的時間內(nèi)高效地掌握與概要信息相關(guān)聯(lián)的主要信息的概況成為可能。其結(jié)果是,可以不那么頻繁地再現(xiàn)主要信息,并且,即使主要信息被刪除,也仍然可以再現(xiàn)大多數(shù)其它所需的主要信息段。
除此之外,甚至在將已經(jīng)記錄在記錄媒體上的信息復(fù)制和移動到另一個記錄媒體的操作中,也可以減少復(fù)雜地處理記錄的信息的處理量,以便可以高效率地進行對記錄的信息的處理和重新安排。
注意,第二實施例是通過將電視廣播節(jié)目的視頻信號和音頻信號作為一對要記錄的信息信號來說明的。但是,本發(fā)明的范圍決不局限于這個第二實施例。也就是說,信息信號可以只是視頻信號,也可以只是音頻信號。作為另一種選擇,信息信號也可以是文本數(shù)據(jù)。
另外,按照說明,記錄媒體8主要用于記錄視頻和音頻信號。但是,記錄媒體8可以包括用于存儲節(jié)目的記錄區(qū)和用于存儲各種類型的數(shù)據(jù)的記錄區(qū)。
除此之外,按照如圖15所示的記錄方法,成對的概要信息和主要信息像上面所述的那樣被存儲在彼此相鄰的記錄區(qū)中。但是,未必總需要將相鄰記錄區(qū)分配給這樣的一對。當然,可以將記錄區(qū)分配給這樣的概要信息段,即該概要信息段處在與分配給和該概要信息段成對的主要信息段的記錄區(qū)相隔很遠的位置上。
此外,創(chuàng)建具有如此數(shù)量的概要信息,使得該概要信息可以用于掌握與該概要信息相關(guān)聯(lián)的整個主要信息所代表的信息的概況,就足夠了。因此,在第二實施例中,通過提取為其創(chuàng)建概要信息的主要信息的一些部分來生成概要信息。生成概要信息的方式?jīng)Q不局限于第二實施例采用的技術(shù)。例如,概要信息也可以被生成為與對其創(chuàng)建概要信息的主要信息不同的信息并用在摘要再現(xiàn)處理中。
<第三實施例>
圖19是示出通過應(yīng)用了本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例的第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300的說明性方塊圖。
通過如圖19所示的第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備與通過如圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200的不同之處在于,通過第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備沒有應(yīng)用在記錄/再現(xiàn)設(shè)備200中的記錄媒體初始化狀態(tài)檢測單元32。事實上,通過如圖19所示的第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備的配置幾乎與通過如圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200的配置相同,除了事實上通過第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備新配備了第二記錄處理單元41、第二記錄媒體42、第二再現(xiàn)控制單元43和記錄媒體剩余容量檢測單元44。
另外,如上所述,通過如圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200包括許多部分,其每一個具有與應(yīng)用在通過如圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100中的該部分的對應(yīng)物相同的配置。因此,在通過如圖19所示的第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300中,許多部分具有與應(yīng)用在通過圖1所示的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100中該部分的對應(yīng)物或應(yīng)用在通過圖12所示的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200中該部分的對應(yīng)物相同的配置,這些部分用與其對應(yīng)物相同的標號來表示,并且不再重復(fù)這些對應(yīng)物的詳細描述。
<操作原理>
與通過第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200非常相似,在通過第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300進行的把包括代表電視廣播信號的所有視頻和音頻信號在內(nèi)的主要信息記錄到記錄媒體8上的處理中,還將識別符記錄在記錄媒體8上,作為附加在主要信息上的信息,以便以后在摘要再現(xiàn)處理中可以提取通過識別符識別的概要信息,以像上面參照圖13A和13B所說明的那樣,再現(xiàn)該主要信息的相互分離部分。
在通過如前所述的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200中,還創(chuàng)建了概要信息,作為附加在主要信息上的信息,并且被記錄在記錄媒體上。在通過第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300的情況中,在記錄處理之后,從將被用在摘要再現(xiàn)處理中的主要信息中提取概要信息。
但是,在通過第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300的情況中,與通過如前所述的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200不同,即使預(yù)計記錄媒體的存儲容量變得不足,也不將新主要信息存儲在分配給現(xiàn)有主要信息的區(qū)域中,而覆蓋現(xiàn)有主要信息。相反,在按原樣保留現(xiàn)有主要信息的同時,將新主要信息記錄成附加主要信息。
用易于理解的方式來說,記錄/再現(xiàn)設(shè)備300含有第一記錄媒體(或主記錄媒體)和第二記錄媒體(或次記錄媒體)。一般說來,將要提取它的概要信息的主要信息存儲在第一記錄媒體中。但是,當?shù)谝挥涗浢襟w的剩余存儲容量變成小于預(yù)確定值時,將已經(jīng)存儲在第一記錄媒體中的主要信息移動到第二記錄媒體,以便在第一記錄媒體中總是保留至少具有預(yù)確定大小的空白區(qū)。這樣,可以避免第一記錄媒體中存儲空間的不足。其結(jié)果是,可以防止已經(jīng)現(xiàn)在于第一記錄媒體中的主要信息因?qū)⑿轮饕畔⒏采w在現(xiàn)有主要信息上的操作而被刪除。
另外,即使將主要信息移動到第二記錄媒體,與移動的主要信息相關(guān)聯(lián)的概要信息仍然留在第一記錄媒體中,以便在任何時候都可以容易地進行摘要再現(xiàn)處理,并且,如有必要,也可以在普通再現(xiàn)處理中再現(xiàn)移動到第二記錄媒體的主要信息。通過采用這樣的技術(shù),作為盤狀記錄媒體的優(yōu)點的第一記錄媒體所展示的良好可訪問性不會丟失。
<通過第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300的操作和配置>
如圖19所示,除了第一記錄處理單元7、第一記錄媒體8、第一再現(xiàn)控制單元9和剩余記錄容量檢測單元31之外,通過第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300還相應(yīng)地包括第二記錄處理單元41、第二記錄媒體42、第二再現(xiàn)控制單元43和記錄媒體剩余容量檢測單元44。
第一記錄媒體8起如上所述的主記錄媒體的作用。在普通記錄處理中,將主要和概要信息記錄到第一記錄媒體8上。另一方面,第二記錄媒體42起如前所述的次記錄媒體的作用。當?shù)谝挥涗浢襟w8的剩余存儲容量變得不足時,將已經(jīng)存儲在第一記錄媒體8中的主要信息移動到第二記錄媒體42。通常,第二記錄媒體42是像硬盤那樣的盤再現(xiàn)設(shè)備或像磁帶那樣的大容量記錄媒體。
通過如圖19所示的第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300在將電視廣播節(jié)目等的視頻和音頻信號記錄到第一記錄媒體8上的處理中,能夠存儲加在主要信息上的識別符。識別符使概要信息被提取出來。
在記錄處理之前,例如,剩余記錄容量檢測單元31檢測第一記錄媒體8的剩余存儲容量。如果確定剩余存儲容量不足,通過第二記錄處理單元41將已經(jīng)存儲在第一記錄媒體8中的主要信息移動到第二記錄媒體42,以增加第一記錄媒體8的剩余存儲容量。然后,將新主要信息存儲在第一記錄媒體8中。
在再現(xiàn)記錄在第二記錄媒體42上的主要信息的普通再現(xiàn)處理中,以與再現(xiàn)存儲在記錄媒體8中的主要信息的處理相同的方式,通過再現(xiàn)處理單元10、分離處理單元11、音頻解碼器12、音頻D/A轉(zhuǎn)換器13、視頻解碼器14和視頻D/A轉(zhuǎn)換器15,將第二再現(xiàn)控制單元43按照系統(tǒng)控制器17執(zhí)行的控制從第二記錄媒體42讀出的主要信息的數(shù)據(jù)輸出到揚聲器和監(jiān)視器。
注意,記錄媒體剩余容量檢測單元44監(jiān)視第二記錄媒體42的剩余存儲容量并向系統(tǒng)控制器17報告監(jiān)視結(jié)果,如果監(jiān)視結(jié)果指示第二記錄媒體42的剩余存儲容量不足,通常通過顯示系統(tǒng)33向用戶顯示一個警告,提醒用戶重新安排存儲在第二記錄媒體42中的信息或用新記錄媒體取代第二記錄媒體42。
在通過如前所述的第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300的情況中,至少,使概要信息留在第一記錄媒體8中。當?shù)谝挥涗浢襟w8中記錄區(qū)的大小變得不足時,將已經(jīng)存儲在第一記錄媒體8中的主要信息移動到第二記錄媒體42,以便可以將新主要信息存儲到第一記錄媒體8中。
注意,在通過圖19所示的第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300中,以與通過如前所述的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100相同的方式,對于每個相似畫面分段,視頻分類處理單元5和音頻分類處理單元20創(chuàng)建對于分段專有的ID并將該ID指定給該分段。另外,音頻分類處理單元20還能夠檢測供應(yīng)給它的音頻信號的音頻電平。
根據(jù)視頻分類處理單元5和音頻分類處理單元20輸出的信號,系統(tǒng)控制器17識別信號分段、作為概要信息的分段,這些段的先于和后于每一個場景的改變,并且具有等于或高于預(yù)確定值的音頻電平??刂破?7把所識別的分段的概要信息供應(yīng)給多路復(fù)用處理單元6,以便多路復(fù)用處理單元6可以將概要信息識別符加入主要信息的概要信息部分中。
<記錄/再現(xiàn)設(shè)備300的操作>
接著,通過參照如圖20到22所示的流程圖,說明通過第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300進行的操作。如圖20到22所示的流程圖參照對通過第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300進行的記錄和再現(xiàn)處理的說明。注意,如圖20到22所示的流程圖所代表的處理是對每個預(yù)確定單元進行的,該單元可以由1個幀至數(shù)個幀或1個G0P到數(shù)個GOP組成。
如圖20到22所示的流程圖從步驟S201開始,在步驟S201中,系統(tǒng)控制器17確定通過用戶輸入I/F18從用戶接收的操作命令所指定的處理是再現(xiàn)處理還是記錄處理。如果在步驟S201中進行操作生成的確定結(jié)果指示所請求的處理是記錄處理,操作流程轉(zhuǎn)到步驟S202,在步驟S202中,系統(tǒng)控制器17通過剩余記錄容量檢測單元31檢測第一記錄媒體8的剩余存儲容量。
然后,在下一個步驟S203中,系統(tǒng)控制器17根據(jù)作為檢測剩余存儲容量的結(jié)果的在步驟S202中進行操作生成的檢測結(jié)果,確定剩余容量是否大到足以既存儲新主要信息又存儲新概要信息。在步驟S203中,使用,例如,三個小時的典型閾值。也就是說,需要與至少三個小時相對應(yīng)的剩余存儲容量。注意,例如,在定時記錄模式的情況下,可以從記錄開始時間和記錄結(jié)束時間求出預(yù)定記錄間隔。在這種情況下,將剩余記錄容量與預(yù)定記錄間隔相比較。
如果在步驟S203中進行操作生成的檢測結(jié)果指示第一記錄媒體8的剩余容量足夠大,操作流程轉(zhuǎn)到步驟S204。系統(tǒng)控制器17控制音頻分類處理單元20和視頻分類處理單元5分別從供應(yīng)給音頻分類處理單元20和視頻分類處理單元5的輸入信息(輸入數(shù)據(jù))中提取用作處理單元的預(yù)確定分段的信號。然后,在下一個步驟S205中,音頻分類處理單元20和視頻分類處理單元5根據(jù)檢測的特征進行確定相似畫面分段的處理并對確定的相似畫面分段分類。
隨后,在下一個步驟S206中,根據(jù)音頻分類處理單元20和視頻分類處理單元5進行的處理的結(jié)果,系統(tǒng)控制器17識別要用在摘要再現(xiàn)處理中的概要信息部分并向多路復(fù)用處理單元6報告該概要信息部分。多路復(fù)用處理單元6將識別符加入識別的信號分段的多路復(fù)用信號中。然后,在下一個步驟S207中,通過第一記錄處理單元7將加入了識別符的主要信息記錄到第一記錄媒體8上。
此外,在這個第三實施例中,要用作概要信息的分段的主要信息的信號分段是根據(jù)畫面相似性確定處理和畫面分類處理的結(jié)果識別的。但是,本發(fā)明決不局限于這個實施例采用的技術(shù)。如前所述,也可以針對音頻信號識別相似畫面分段。然后,相似畫面分段和相似聲音分段可以用作概要信息分段,或者,作為另一種選擇,通過只利用視頻信息或音頻信息來識別相似畫面分段,并且將信息分段識別成概要信息的分段。
然后,在下一個步驟S208中,系統(tǒng)控制器17確定是否已經(jīng)從用戶那里接收到停止記錄處理的命令。如果系統(tǒng)控制器17確定已經(jīng)從用戶那里接收到停止記錄處理的命令,結(jié)束如圖20到22所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備300通常進入等待用戶輸入下一個命令的狀態(tài)。另一方面,如果在步驟S208中進行操作獲得的確定結(jié)果指示還沒有從用戶那里接收到停止記錄處理的命令,操作流程轉(zhuǎn)到步驟S209,根據(jù)例如記錄結(jié)束時間的來臨或另一個節(jié)目代碼的到達,確定記錄所需廣播節(jié)目的處理是否已經(jīng)結(jié)束了。
如果在步驟S209中進行操作獲得的確定結(jié)果指示記錄所需廣播節(jié)目的處理已經(jīng)結(jié)束了,結(jié)束如圖20到22所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備300通常進入等待用戶輸入下一個命令的狀態(tài)。另一方面,如果在步驟S209中進行操作獲得的確定結(jié)果指示記錄所需廣播節(jié)目的處理還沒有結(jié)束,操作流程轉(zhuǎn)到步驟S210,確定用戶是否已經(jīng)輸入改變操作模式的命令。
如果在步驟S210中進行處理生成的確定結(jié)果指示用戶還沒有輸入改變操作模式的命令,操作流程返回到步驟S204,從這個步驟開始重復(fù)如上所述的操作,繼續(xù)進行將主要信息和概要信息的處理單元記錄到記錄媒體8上的處理。另一方面,如果在步驟S210中進行操作生成的確定結(jié)果指示用戶已經(jīng)輸入改變操作模式的命令,操作流程返回到步驟S201,在步驟S201中,系統(tǒng)控制器17確定處理是再現(xiàn)處理還是記錄處理。
另一方面,如果在步驟S203中進行操作生成的確定結(jié)果指示記錄媒體8的剩余容量不足,操作流程轉(zhuǎn)到如圖21所示的續(xù)流程圖的步驟S211。在步驟S211中,檢查已經(jīng)記錄在第一記錄媒體8上的主要信息段的記錄日期,以便檢測日期最早的主要信息。然后,在下一個步驟S212中,提取最早信息的預(yù)確定處理單元的主要信號。預(yù)確定處理單元的主要信號也被稱為預(yù)確定分段的主要信號。隨后,在下一個步驟S213中,通過第二記錄處理單元41將預(yù)確定分段的主要信號復(fù)制到第二記錄媒體42。
然后,操作流程轉(zhuǎn)到步驟S214,檢測加入復(fù)制的主要信息中的識別符,作為指示主要信息的分段是否是概要信息的分段的識別符。然后,在下一個步驟S215中,檢查檢測的識別符,以確定該識別符是否指示復(fù)制到第二記錄媒體42的主要信息的預(yù)確定分段是否也是可用作概要信息的概要信息分段。
如果在步驟S215中進行的處理生成的確定結(jié)果指示復(fù)制到第二記錄媒體42的主要信息的預(yù)確定分段也是概要信息分段,操作流程轉(zhuǎn)到步驟S216。將這個部分的信號移動到第一記錄媒體8的預(yù)確定部分,以便防止概要信息段被分散在分離的位置上,或便于在記錄媒體8的預(yù)確定部分中收集與廣播節(jié)目有關(guān)的概要信息段。
另一方面,如果在步驟S215中進行的處理生成的確定結(jié)果指示復(fù)制到第二記錄媒體42的主要信息的預(yù)確定分段不是概要信息分段,操作流程轉(zhuǎn)到步驟S217。從第一記錄媒體8中刪除分段中的信息,并將用于存儲所刪除信息的區(qū)域用作自由記錄區(qū),或?qū)⒃撔畔⒅糜谑剐聰?shù)據(jù)覆蓋在其上面的狀態(tài)下。
在完成了在步驟S216或S217中進行的處理之后,操作流程轉(zhuǎn)到步驟S218。系統(tǒng)控制器17控制音頻分類處理單元20和視頻分類處理單元5分別從供應(yīng)給音頻分類處理單元20和視頻分類處理單元5的輸入信息(輸入數(shù)據(jù))中提取用作處理單元的預(yù)確定分段的信號。然后,在下一個步驟S219中,音頻分類處理單元20和視頻分類處理單元5根據(jù)所檢測的特征進行確定相似畫面分段的處理并對確定的相似畫面分段分類。
隨后,在下一個步驟S220中,根據(jù)音頻分類處理單元20和視頻分類處理單元5進行的處理的結(jié)果,系統(tǒng)控制器17識別要用在摘要再現(xiàn)處理中的概要信息部分并向多路復(fù)用處理單元6報告概要信息部分。多路復(fù)用處理單元6將識別符加入所識別的信號分段的多路復(fù)用的信號中。然后,在下一個步驟S221中,通過第一記錄處理單元7將加入了識別符的主要信息記錄到第一記錄媒體8上。
然后,在下一個步驟S222中,系統(tǒng)控制器17確定是否已經(jīng)從用戶那里接收到停止記錄處理的命令。如果系統(tǒng)控制器17確定已經(jīng)從用戶那里接收到停止記錄處理的命令,結(jié)束如圖20到22所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備300通常進入等待用戶輸入下一個命令的狀態(tài)。另一方面,如果在步驟S222中進行操作獲得的確定結(jié)果指示還沒有從用戶那里接收到停止記錄處理的命令,操作流程轉(zhuǎn)到步驟S223,根據(jù)例如記錄結(jié)束時間的來臨或另一個節(jié)目代碼的到達,確定記錄所需廣播節(jié)目的處理是否已經(jīng)結(jié)束了。
如果在步驟S223中進行操作獲得的確定結(jié)果指示記錄所需廣播節(jié)目的處理已經(jīng)結(jié)束了,結(jié)束如圖20到22所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備300通常進入等待用戶輸入下一個命令的狀態(tài)。另一方面,如果在步驟S223中進行操作獲得的確定結(jié)果指示記錄所需廣播節(jié)目的處理還沒有結(jié)束,操作流程轉(zhuǎn)到步驟S224,確定用戶是否已經(jīng)輸入改變操作模式的命令。
如果在步驟S224中進行處理生成的確定結(jié)果指示用戶已經(jīng)輸入改變操作模式的命令,操作流程返回到如圖20所示的主流程圖的步驟S201,從這個步驟開始重復(fù)如上所述的操作。另一方面,如果在步驟S224中進行操作生成的確定結(jié)果指示用戶還沒有輸入改變操作模式的命令,操作流程轉(zhuǎn)到步驟S225,確定把在步驟S211中確定為日期最早的主要信息的所有主要信息從第一記錄媒體8復(fù)制到第二記錄媒體42的處理是否已經(jīng)完成。
如果在步驟S225中進行處理生成的確定結(jié)果指示復(fù)制具有最早日期的所有主要信息的處理已經(jīng)完成,操作流程返回到步驟S218,從這個步驟開始重復(fù)如上所述的操作,以便繼續(xù)進行將新主要信息記錄到第一記錄媒體8上的處理。另一方面,如果在步驟S225中進行處理生成的確定結(jié)果指示復(fù)制具有最早日期的所有主要信息的處理還沒有完成,操作流程返回到步驟S212,從這個步驟開始重復(fù)如上所述的操作,以便繼續(xù)進行將日期最早的主要信息復(fù)制到第二記錄媒體直到完成的處理,從而可以將新主要信息記錄到第一記錄媒體8上。
如果在步驟S201中進行操作生成的確定結(jié)果指示所請求的處理是再現(xiàn)處理,操作流程轉(zhuǎn)到如圖22所示的另一個續(xù)流程圖的步驟S226。在步驟S226中,系統(tǒng)控制器17從用戶那里接收選擇節(jié)目的輸入。這個輸入選擇存儲在第一記錄媒體8(或主記錄媒體)中的節(jié)目或存儲在第二記錄媒體42(或次記錄媒體)中的節(jié)目,并選擇普通再現(xiàn)處理或摘要再現(xiàn)處理。
然后,操作流程轉(zhuǎn)到步驟S227,確定要再現(xiàn)存儲在第一記錄媒體8中的節(jié)目還是存儲在第二記錄媒體42中的節(jié)目。如果在步驟S227中進行的處理生成的確定結(jié)果指示要再現(xiàn)存儲在第一記錄媒體8中的節(jié)目,操作流程轉(zhuǎn)到步驟S228。設(shè)置從第一記錄媒體8中再現(xiàn)節(jié)目的再現(xiàn)模式。然后,控制第一再現(xiàn)控制單元9,以從第一記錄媒體8中讀出所選節(jié)目的主要或概要信息并采取所選方法再現(xiàn)信息。
隨后,操作流程轉(zhuǎn)到步驟S229,在步驟S229中,系統(tǒng)控制器17確定用戶是否已經(jīng)輸入停止再現(xiàn)處理的命令。如果確定結(jié)果指示用戶已經(jīng)輸入停止再現(xiàn)處理的命令,結(jié)束如圖20到22所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備300通常進入等待用戶輸入下一個命令的狀態(tài)。另一方面,如果在步驟S229中進行處理生成的確定結(jié)果指示用戶還沒有輸入停止再現(xiàn)處理的命令,操作流程轉(zhuǎn)到步驟S230,確定是否已經(jīng)接收到改變操作模式的命令。
如果在步驟S230中進行處理生成的確定結(jié)果指示已經(jīng)接收到改變操作模式的命令,操作流程返回到如圖20所示的主流程圖的步驟S201,從這個步驟開始重復(fù)如上所述的操作。另一方面,如果確定結(jié)果指示還沒有接收到改變操作模式的命令,操作流程轉(zhuǎn)到步驟S231,確定是否已經(jīng)接收到將正在再現(xiàn)的節(jié)目改變成另一個節(jié)目的命令。
如果在步驟S231中進行處理生成的確定結(jié)果指示還沒有接收到將正在再現(xiàn)的節(jié)目改變成另一個節(jié)目的命令,操作流程返回到步驟S228。從這個步驟開始重復(fù)如上所述的操作,繼續(xù)進行再現(xiàn)當前節(jié)目的處理。另一方面,如果確定結(jié)果指示已經(jīng)接收到將正在再現(xiàn)的節(jié)目改變成另一個節(jié)目的命令,操作流程返回到步驟S226。從這個步驟開始重復(fù)如上所述的操作,開始再現(xiàn)新節(jié)目的處理。
另一方面,如果在步驟S227中進行處理生成的確定結(jié)果指示要再現(xiàn)存儲在第二記錄媒體42中的節(jié)目,操作流程轉(zhuǎn)到步驟S232。設(shè)置從第二記錄媒體42中再現(xiàn)節(jié)目的再現(xiàn)模式。然后,控制第二再現(xiàn)控制單元43,以從第二記錄媒體42中讀出所選節(jié)目的主要信息并進行普通再現(xiàn)處理。
隨后,在下一個步驟S233中,系統(tǒng)控制器17確定用戶是否已經(jīng)輸入了停止再現(xiàn)處理的命令。如果確定結(jié)果指示用戶已經(jīng)輸入了停止再現(xiàn)處理的命令,結(jié)束如圖20到22所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備300通常進入等待用戶輸入下一個命令的狀態(tài)。另一方面,如果在步驟S233中進行處理生成的確定結(jié)果指示用戶還沒有輸入停止再現(xiàn)處理的命令,操作流程轉(zhuǎn)到步驟S234,確定是否已經(jīng)接收到改變操作模式的命令。
如果在步驟S234中進行處理生成的確定結(jié)果指示已經(jīng)接收到改變操作模式的命令,操作流程返回到如圖20所示的主流程圖的步驟S201,從這個步驟開始重復(fù)如上所述的操作。另一方面,如果確定結(jié)果指示還沒有接收到改變操作模式的命令,操作流程轉(zhuǎn)到步驟S235,確定是否已經(jīng)接收到將正在再現(xiàn)的節(jié)目改變成另一個節(jié)目的命令。
如果在步驟S235中進行處理生成的確定結(jié)果指示還沒有接收到將正在再現(xiàn)的節(jié)目改變成另一個節(jié)目的命令,操作流程返回到步驟S232。從這個步驟開始重復(fù)如上所述的操作,繼續(xù)進行再現(xiàn)當前節(jié)目的主要信息的處理。另一方面,如果確定結(jié)果指示已經(jīng)接收到將正在再現(xiàn)的節(jié)目改變成另一個節(jié)目的命令,操作流程返回到步驟S226。從這個步驟開始重復(fù)如上所述的操作,開始再現(xiàn)新節(jié)目的處理。
<第三實施例總結(jié)>
如上所述,當?shù)谝挥涗浢襟w8的剩余存儲容量變成小于事先確定的值時,在將新主要信息存儲到第一記錄媒體8上之前,將最早日期的主要信息從第一記錄媒體8移動到第二記錄媒體42,以便增加第一記錄媒體8的剩余存儲容量。因此,可以防止因第一記錄媒體8的剩余存儲容量變得不足的事實而不能存儲新節(jié)目的主要信息的問題出現(xiàn)。
另外,有意使具有移動到第二記錄媒體42的主要信息的節(jié)目的概要信息留在第一記錄媒體8中。因此,在任何時候都可以迅速地進行日期最早的節(jié)目的概要信息的摘要再現(xiàn)處理。除此之外,在任何時候也可以迅速地進行新節(jié)目的主要信息的普通再現(xiàn)處理以及該節(jié)目的概要信息的摘要再現(xiàn)處理。也就是說,第一記錄媒體8具有的可訪問性特征的優(yōu)點沒有變差。
此外,可以使對重新安排及保存存儲在記錄媒體中的信息信號的管理更簡單,從而可以準備好促進有效和高效率使用大量所播放的各種視頻和音頻信號的環(huán)境。
注意,在通過第三實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備300中,還記錄了附加的識別符,以便通過與主要信息相關(guān)聯(lián)而使對主要信息創(chuàng)建的概要信息被存儲在記錄媒體中。因此,第三實施例使概要信息甚至在記錄處理之后也可以被提取出來。但是,本發(fā)明決不局限于這樣的方案。
例如,與通過如上所述的第二實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備200的情況一樣,將主要信息和概要信息兩者都存儲在第一記錄媒體8中。當?shù)谝挥涗浢襟w8的剩余存儲容量變得不足時,只將最早日期的主要信息從第一記錄媒體8移動到第二記錄媒體42。
在如上所述的第三實施例中,只將日期最早的一個節(jié)目的主要信息從第一記錄媒體8移動到第二記錄媒體42。但是,也可以按日期的升序?qū)?shù)個節(jié)目的主要信息從第一記錄媒體8移動到第二記錄媒體42。例如,也可以按日期的升序?qū)蓚€或三個節(jié)目的主要信息從第一記錄媒體8移動到第二記錄媒體42。
另外,可以從日期最早的段開始一段接一段地依次移動多于一段的主要信息,直到保留了第一記錄媒體8的預(yù)確定剩余存儲容量為止。
除此之外,如前所述,將主要信息從第一記錄媒體8傳送到第二記錄媒體42的處理可以是移動處理或復(fù)制處理。在移動處理的情況下,在將主要信息從第一記錄媒體8傳送到第二記錄媒體42之后,從第一記錄媒體8中刪除作為不必要部分保留在第一記錄媒體8中的主要信息,以便重新分配空白區(qū)。
另一方面,在復(fù)制處理的情況下,在將主要信息從第一記錄媒體8傳送到第二記錄媒體42之后,將作為不必要部分保留在第一記錄媒體8中的主要信息置于使新主要信息可以覆蓋在其上面的狀態(tài)下。
另外,如前所述,有意使概要信息留在第一記錄媒體8中。如果使與傳送的主要信息相關(guān)聯(lián)的概要信息留在第一記錄媒體8中的分散位置上,那么,使第一記錄媒體8的記錄區(qū)置于蟲蝕(worm-eaten)的狀態(tài)下。為了防止記錄區(qū)被置于難以使用的狀態(tài)下,可以進行所謂的碎片整理處理,使第一記錄媒體8的記錄區(qū)可得到有效使用。
除此之外,可以通過顯示系統(tǒng)33向用戶顯示一個消息,以通知用戶第一記錄媒體8的剩余存儲容量已經(jīng)變得太小了,第二記錄媒體42的剩余存儲容量也已經(jīng)變得太小了,已經(jīng)或正在將主要信息從第一記錄媒體8傳送到第二記錄媒體42,或者已經(jīng)或正在進行碎片整理處理以防止第一記錄媒體8的記錄區(qū)被置于被蟲蝕的狀態(tài)下,或者向用戶報告其它事實。
另外,最好第二記錄媒體42的存儲容量大于第一記錄媒體8的存儲容量。
<第四實施例>
圖23是示出通過應(yīng)用了本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例的第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400的說明性方塊圖。圖24和圖25A到25C是示出通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400進行的操作的原理的說明圖。
與通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100非常相似,通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400能夠在將節(jié)目的視頻和音頻信號記錄到記錄媒體上的處理中,在預(yù)確定的時刻從電視廣播節(jié)目的視頻信號中創(chuàng)建縮小畫面(或縮略畫面),并以列表格式顯示所創(chuàng)建的縮略畫面。但是,通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400與通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的不同之處在于,記錄/再現(xiàn)設(shè)備400采用了與記錄/再現(xiàn)設(shè)備100不同的縮小畫面顯示格式。
盡管通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400具有幾乎與通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100相同的配置,但是,為了分清這些實施例之間的操作差異,將通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400的方塊圖顯示在圖23中。下面通過參照圖23的框圖,詳細說明通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400。
<操作原理>
首先,描述通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400的操作原理。如圖23所示的記錄/再現(xiàn)設(shè)備400通常接收電視廣播節(jié)目的模擬視頻和音頻信號,作為信息信號。然后,記錄/再現(xiàn)設(shè)備400將模擬視頻和音頻信號轉(zhuǎn)換成數(shù)字數(shù)據(jù),并采用MPEG方法壓縮數(shù)字數(shù)據(jù)。然后,將壓縮的數(shù)字視頻數(shù)據(jù)與要記錄到記錄媒體8上的壓縮的數(shù)字音頻數(shù)據(jù)時分多路復(fù)用。記錄媒體8是具有大存儲容量的盤狀記錄媒體。這樣盤狀記錄媒體的一個例子是硬盤。
在再現(xiàn)處理中,如圖23所示的記錄/再現(xiàn)設(shè)備400從記錄媒體8中讀出多路復(fù)用的信號,使多路復(fù)用的信號的視頻數(shù)據(jù)和音頻數(shù)據(jù)相互分開。然后,解壓縮視頻和音頻數(shù)據(jù),以恢復(fù)壓縮前的視頻和音頻數(shù)據(jù)。然后,將作為解壓縮的結(jié)果獲得的視頻和音頻數(shù)據(jù)轉(zhuǎn)換成模擬輸出信號。
另外,如圖23所示的記錄/再現(xiàn)設(shè)備400在將視頻和音頻信號記錄到記錄媒體8上的處理中,將視頻信號的畫面分類成相似畫面。與通過第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100非常相似,對作為壓縮的視頻數(shù)據(jù)的MPEG視頻數(shù)據(jù)進行分類處理。以I-畫面為單元檢測相似畫面,并將彼此相似的I畫面分類入一個相似畫面分段。
圖24A示出構(gòu)成取作一個例子的新聞節(jié)目的一系列輸入視頻信號。該系列的輸入視頻信號包括31個I畫面,它們被分類成每一個由相似I畫面組成的相似畫面分段A1、A2和A3。
在這種情況下,包括在相似畫面分段A1、A2和A3每一個中的I畫面是示出讀新聞的新聞播音員的畫面,因此,在新聞播音員移動方面顯示出相對少的變化。然而,對于只有這樣相似畫面的場景,想像得出,可以相對高效率地掌握節(jié)目的內(nèi)容。對相似畫面分段A1、A2和A3的進一步考慮還表明,在許多情況下,想像得出,相似畫面分段A1、A2和A 3每一個的起首是示出新聞播音員開始閱讀新聞文章的場景的畫面。相似畫面分段A1、A2和A3每一個的起首畫面一般在屏幕的底部顯示新聞字幕(telop)(或新聞標題)。
由于如上所述的原因,像圖24B所示那樣創(chuàng)建每一個位于新聞節(jié)目的相似畫面分段的起首或與起首非常接近的位置上的I畫面的縮小形式。然后,隨著時間的流逝,像圖25A所示的畫面1a到1g那樣,按時間順序依次顯示創(chuàng)建的縮小畫面。在這樣的屏幕中,在許多情況下,想像得出,在畫面1a到1g的每一個中還顯示出新聞字幕,使得通過僅僅觀看這個縮小畫面的列表顯示(多畫面顯示),用戶就可以迅速地和可靠地知道新聞的內(nèi)容是什么。
如果在經(jīng)過了預(yù)確定時期之后再次廣播新聞節(jié)目,則再次對當前新聞節(jié)目進行與對前面緊鄰的新聞節(jié)目進行的處理相同的處理,以生成如圖25B所示的縮小畫面1a到1h。作為前面緊鄰的新聞節(jié)目的縮小畫面,圖25A所示的縮小畫面1a到1g再次顯示在與圖25B所示的畫面2a到2g相同的屏幕上。
假設(shè)依次廣播8個新聞節(jié)目并對隨后的新聞節(jié)目進行與如上所述相同的處理。在這種情況下,如圖25C所示,在屏幕的第1到8水平行上分別顯示8個新聞節(jié)目。在每個水平行的第a到h列的每一列上,顯示出現(xiàn)在那一行上的新聞節(jié)目的縮小畫面。
如上所述,在沿著垂直方向排列的較低行上,依次顯示每一個用縮小畫面表示的前面的新聞節(jié)目。這樣,可以容易地識別出同一新聞隨著時間的變化和新的新聞隨著時間的發(fā)展。
另外,通過參照如圖8和9所示的流程圖,通過選擇以如前所述的列表格式顯示的縮小畫面中所需的一個,可以再現(xiàn)包括與所選縮小畫面相對應(yīng)的原畫面的信號分段,并且該原畫面是作為位于其起首的原畫面,或進行摘要再現(xiàn)處理,以便讓用戶知道所需新聞的詳細內(nèi)容。也就是說,可以高效率地既進行普通再現(xiàn)處理又進行摘要再現(xiàn)處理。
注意,為了高精確度地檢測新聞字幕的信號,可以與相似畫面的檢測一起檢測字幕。由于在許多情況下,一般用白色顯示構(gòu)成新聞節(jié)目的字幕的字符,所以字幕通常被顯示在字幕顯示位置上,在多數(shù)情況下,這個位置是位于屏幕下側(cè)部分的位置。因此,通過識別顯示在與屏幕的下側(cè)部分相對應(yīng)的位置上的畫面信號當中的亮度信號的特征,可以檢測顯示字幕的屏幕,這個屏幕是I畫面或幀。
<通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400的操作和配置>
如下的描述將說明通過如圖23所示的第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400的操作和配置。如圖23所示的配置可以被劃分成在記錄媒體8的左側(cè)和右側(cè)的部分。左側(cè)的部分主要是記錄系統(tǒng),而右側(cè)的部分主要是再現(xiàn)系統(tǒng)。
<記錄系統(tǒng)>
首先,說明記錄系統(tǒng)。將供應(yīng)給通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400的模擬音頻信號(音頻輸入)饋送到音頻A/D轉(zhuǎn)換器1,它將模擬音頻信號轉(zhuǎn)換成要供應(yīng)給音頻編碼器2和音頻分類處理單元20的數(shù)字音頻信號。
音頻編碼器2通過采用諸如MPEG音頻方法之類的預(yù)確定壓縮技術(shù),對數(shù)字音頻信號進行頻帶壓縮處理。將作為對數(shù)字音頻信號進行頻帶壓縮處理的結(jié)果獲得的音頻數(shù)據(jù)供應(yīng)給多路復(fù)用處理單元6。
音頻分類處理單元20通常對每個預(yù)確定分段檢測數(shù)字音頻信號中頻譜峰的連續(xù)性,以確定數(shù)字音頻信號是否是音樂信號。將確定結(jié)果供應(yīng)給多路復(fù)用處理單元6、系統(tǒng)控制器17、和畫面場景分類顯示和再現(xiàn)位置顯示單元19。下文也將畫面場景分類顯示和再現(xiàn)位置顯示單元19適當?shù)胤Q為分類顯示單元。
注意,取代對從音頻A/D轉(zhuǎn)換器1接收的數(shù)字音頻信號的處理,也可以將音頻分類處理單元20設(shè)計成這樣的配置,即該配置用于接收作為音頻編碼器2對音頻A/D轉(zhuǎn)換器1生成的數(shù)字音頻信號進行頻帶壓縮處理的結(jié)果而獲得的音頻數(shù)據(jù),如圖23所示的虛線所指,并用于對該音頻數(shù)據(jù)進行如上所述的分類處理。
另一方面,將供應(yīng)給通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400的模擬視頻信號(視頻輸入)饋送到視頻A/D轉(zhuǎn)換器3,它將模擬視頻信號轉(zhuǎn)換成要供應(yīng)給視頻編碼器4的數(shù)字視頻信號。
視頻編碼器4通過采用諸如MPEG2方法之類的預(yù)確定壓縮技術(shù),對數(shù)字視頻信號進行頻帶壓縮處理。將作為對數(shù)字視頻信號進行頻帶壓縮處理的結(jié)果獲得的視頻數(shù)據(jù)供應(yīng)給視頻分類處理單元5、多路復(fù)用處理單元6、I-畫面檢測單元21和縮小畫面處理單元22。
視頻分類處理單元5檢測從視頻編碼器4接收的視頻數(shù)據(jù)的I畫面的畫面特征,并根據(jù)檢測的特征識別畫面相似性。另外,視頻分類處理單元5還像上面參照圖24所說明的那樣識別相似畫面分段。視頻分類處理單元5還生成用于識別相似畫面分段的識別信息信號并將該信號供應(yīng)給多路復(fù)用處理單元6和分類顯示單元19。識別信息信號包括視頻數(shù)據(jù)的位置信息,視頻數(shù)據(jù)的位置信息包括關(guān)于多少個連續(xù)相似幀包括在每個相似畫面分段中的信息。
注意,取代從視頻編碼器4接收壓縮的視頻數(shù)據(jù),視頻分類處理單元5也可以如圖23所示的虛線所指,接收視頻A/D轉(zhuǎn)換器3輸出的數(shù)字視頻信號,并且根據(jù)該數(shù)字視頻信號,進行如上所述,以幀為單元識別和分類數(shù)字視頻數(shù)據(jù)的相似畫面的處理。
另外,也可以提供這種配置,其中,也可以由系統(tǒng)控制器17根據(jù)從視頻分類處理單元5和音頻分類處理單元20接收的分類處理結(jié)果,生成作為分類視頻和音頻信號的處理結(jié)果而獲得的識別信息信號,并將它供應(yīng)給多路復(fù)用處理單元6。
與通過如前所述的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的情況一樣,系統(tǒng)控制器17是這樣的微型計算機,其所包括的CPU(中央處理單元)、ROM(只讀存儲器)、RAM(隨機訪問存儲器)、非易失性存儲器和定時電路用于控制構(gòu)成記錄/再現(xiàn)設(shè)備400的每個部件。
另外,如圖23所示的配置中的I-畫面檢測單元21是從視頻數(shù)據(jù)中檢測I畫面并向系統(tǒng)控制器17報告諸如檢測時刻之類的檢測信息的部件。只檢測I畫面是因為,如上所述,通過這個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400以I-畫面為單元進行畫面相似性檢測處理和畫面分類處理。系統(tǒng)控制器17能夠根據(jù)從I-畫面檢測單元21接收的檢測信息,控制視頻分類處理單元5和縮小畫面處理單元22。
按照系統(tǒng)控制器17執(zhí)行的控制,縮小畫面處理單元22從由此接收的視頻數(shù)據(jù)(更具體地說,每一個位于相似畫面分段起首或與起首非常接近的位置上的I畫面)中生成縮小畫面數(shù)據(jù),并且將該數(shù)據(jù)供應(yīng)給多路復(fù)用處理單元6和分類顯示單元19。
在這個第四實施例中,分類顯示單元19接收來自音頻分類處理單元20的分類結(jié)果、來自視頻分類處理單元5的識別信息信號、和來自縮小畫面處理單元22的縮小畫面數(shù)據(jù),并以如圖25A到25C所示的格式,按時間順序顯示每一個位于相似畫面分段起首的縮小畫面。也就是說,通過這個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400能夠在進行將原畫面記錄到記錄媒體上的處理的同時為所記錄的原畫面顯示縮略畫面。
另外,多路復(fù)用處理單元6通常通過對包括音頻數(shù)據(jù)、視頻數(shù)據(jù)、縮小畫面數(shù)據(jù)、和從視頻分類處理單元5接收的識別信息信號的信息段進行時分多路復(fù)用處理,來生成多路復(fù)用數(shù)據(jù),然后將該多路復(fù)用數(shù)據(jù)供應(yīng)給記錄處理單元7。記錄處理單元7進行包括把糾錯碼加入多路復(fù)用數(shù)據(jù)中的處理和交織數(shù)據(jù)以創(chuàng)建要記錄的信號的處理在內(nèi)的處理,然后將該信號記錄到記錄媒體8中的預(yù)確定區(qū)域中。
然后,在這個實施例的情況下,如前所述,通過利用多路復(fù)用在多路復(fù)用數(shù)據(jù)中的識別信息信號,可能能夠識別相似畫面分段并將原畫面與代表該原畫面的縮小畫面相關(guān)聯(lián)。因此,可以在記錄處理期間、或在記錄結(jié)束時、或在記錄處理結(jié)束之后的預(yù)確定時刻,以如圖25A到25C所示的格式,按時間順序顯示每一個位于相似畫面分段起首的縮小畫面。
注意,與上面參照圖4到6說明的第一實施例非常相似,視頻分類處理單元5為用作處理單元的每個I畫面檢測視頻數(shù)據(jù)的特征,根據(jù)所檢測的特征識別相似畫面,并確定每一個由彼此相似的畫面構(gòu)成的相似畫面分段。此外,如前所述,將同一識別符指定給相似的畫面,以便通過利用這樣的識別符,可以識別哪個范圍的畫面被包括在每一個相似畫面分段中。
另外,與上面參照圖7說明的第一實施例非常相似,音頻分類處理單元20對每個預(yù)確定時間單元識別聲音的相似性,并且,與第二實施例和第三實施例非常相似,音頻分類處理單元20還檢測音頻電平。
<再現(xiàn)系統(tǒng)>
接著,說明再現(xiàn)系統(tǒng)。系統(tǒng)控制器17生成的控制信號控制再現(xiàn)控制單元9從記錄媒體8中讀出用戶指定的多路復(fù)用數(shù)據(jù),并且將該數(shù)據(jù)供應(yīng)給再現(xiàn)處理單元10。再現(xiàn)處理單元10進行包括對由此接收的多路復(fù)用數(shù)據(jù)進行解交織處理在內(nèi)的預(yù)確定處理,并且把經(jīng)處理的多路復(fù)用數(shù)據(jù)供應(yīng)給分離處理單元11。分離處理單元11多路分用(demultiplex)供應(yīng)給它的多路復(fù)用數(shù)據(jù),以生成音頻數(shù)據(jù)、視頻數(shù)據(jù)、縮小畫面數(shù)據(jù)和識別信息信號,僅舉這幾個。
將分離處理單元11生成的音頻數(shù)據(jù)供應(yīng)給音頻解碼器12。供應(yīng)給音頻解碼器12的音頻數(shù)據(jù)是采用預(yù)確定壓縮方法壓縮的數(shù)據(jù)。因此,音頻解碼器12解壓縮由此接收的壓縮的音頻數(shù)據(jù),并且把作為解壓縮結(jié)果獲得的音頻數(shù)據(jù)供應(yīng)給音頻數(shù)字/模擬轉(zhuǎn)換器13,下文將音頻數(shù)字/模擬轉(zhuǎn)換器縮寫成音頻D/A轉(zhuǎn)換器。
音頻D/A轉(zhuǎn)換器13將供應(yīng)給它的數(shù)字音頻信號轉(zhuǎn)換成模擬音頻信號,并且將該模擬音頻信號輸出到揚聲器。揚聲器根據(jù)供應(yīng)給它的模擬音頻信號生成聲音。
另外,將分離處理單元11生成的視頻數(shù)據(jù)供應(yīng)給視頻解碼器14。供應(yīng)給視頻解碼器14的視頻數(shù)據(jù)是采用預(yù)確定壓縮方法壓縮的數(shù)據(jù)。因此,視頻解碼器14解壓縮由此接收的壓縮的視頻數(shù)據(jù),并且把作為解壓縮結(jié)果獲得的視頻數(shù)據(jù)供應(yīng)給視頻數(shù)字/模擬轉(zhuǎn)換器15,下文將視頻數(shù)字/模擬轉(zhuǎn)換器縮寫成視頻D/A轉(zhuǎn)換器。
視頻D/A轉(zhuǎn)換器15將供應(yīng)給它的數(shù)字視頻信號轉(zhuǎn)換成模擬視頻信號,并且將該模擬視頻信號輸出到監(jiān)視器接收器。監(jiān)視器接收器根據(jù)供應(yīng)給它的模擬視頻信號顯示畫面。
將分離處理單元11分離的識別信息信號供應(yīng)給識別信號檢測單元16。識別信號檢測單元16從由此接收的識別信息信號中檢測必要識別信息信號,并且將該識別信息供應(yīng)給系統(tǒng)控制器17和分類顯示單元19。
另外,識別信號檢測單元16還從由此接收的識別信息信號中提取預(yù)確定時間印記信號或幀號碼,并且將時間印記信號或幀號碼供應(yīng)給系統(tǒng)控制器17。通過根據(jù)時間印記信號檢測再現(xiàn)時刻,也可以在分類顯示單元19上顯示再現(xiàn)位置。
然后,當通過用戶輸入I/F18輸入命令,作為請求顯示對記錄在記錄媒體8上的廣播節(jié)目分類的命令時,系統(tǒng)控制器17根據(jù)供應(yīng)給系統(tǒng)控制器17的識別信息信號控制再現(xiàn)控制單元9,以便從記錄媒體8中讀出所需廣播節(jié)目的縮小畫面,并且通過再現(xiàn)處理單元10和分離處理單元11將縮小畫面供應(yīng)給分類顯示單元19。另外,系統(tǒng)控制器17根據(jù)識別信息信號控制分類顯示單元19,以便像圖25A到25C所示那樣,顯示記錄在記錄媒體8上的廣播節(jié)目的分類。
如上所述,甚至在記錄處理結(jié)束之后的預(yù)確定時刻,也可以通過利用根據(jù)畫面相似性確定處理生成、然后存儲在記錄媒體中的識別信息信號以及縮小畫面信號,從而像圖25A到25C所示那樣,顯示畫面的分類。
注意,作為一個例子,本實施例是通過給出記錄新聞節(jié)目的情況來示范的。但是,本發(fā)明的實施例決不局限于這樣的情況。例如,本實施例也可以應(yīng)用于將音樂節(jié)目等記錄到記錄媒體上的情況。在將音樂節(jié)目記錄到記錄媒體上的情況下,對每一個示出唱歌的歌手的場景分類。因此,例如,可以從記錄媒體中快速地找出示出所需的唱歌歌手的場景,并因此而以正常模式迅速再現(xiàn)包括這樣的場景的節(jié)目部分。
另外,對于記錄諸如棒球或網(wǎng)球節(jié)目之類的體育節(jié)目的情況,也可以以相同的方式進行如上所述的處理。也就是說,顯示位于每個相似畫面分段的起首的畫面。在棒球節(jié)目的情況中,位于相似畫面分段起首的畫面可以是示出擊球手進入擊球位置的場景或示出投球手投球的場景。在網(wǎng)球錦標賽的情況中,位于每個相似畫面分段起首的畫面可以用于在網(wǎng)球節(jié)目中搜索發(fā)球場景。
除此之外,在記錄處理期間也可以為摘要再現(xiàn)處理生成畫面數(shù)據(jù)并為瀏覽再現(xiàn)處理生成畫面數(shù)據(jù),并且與廣播節(jié)目的主要畫面數(shù)據(jù)一起存儲這些數(shù)據(jù)段,以便可以進行廣播節(jié)目的摘要和瀏覽再現(xiàn)處理。
如果希望進行諸如摘要或瀏覽再現(xiàn)處理之類的特殊再現(xiàn)處理,用戶需要通過用戶輸入I/F18把對特殊再現(xiàn)處理作出請求的命令輸入記錄/再現(xiàn)設(shè)備400中。當接收到用戶輸入的命令時,系統(tǒng)控制器17控制再現(xiàn)控制單元9為所需的特殊再現(xiàn)方法讀出畫面數(shù)據(jù),以便使所需的特殊再現(xiàn)方法的畫面得到再現(xiàn)。
<記錄/再現(xiàn)設(shè)備400的操作>
接著,通過參照如圖26所示的流程圖,說明在記錄過程中通過如上所述的第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400進行的操作。圖26示出的流程圖參照了通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400進行的操作的說明。
當系統(tǒng)控制器17接收到用戶輸入的命令時,進行如圖26所示的流程圖所代表的處理,以便進行記錄例如新聞節(jié)目以及顯示該節(jié)目的分類的處理。
該流程圖從步驟S301開始,在步驟S301中,系統(tǒng)控制器17根據(jù),例如,作為包括在數(shù)字電視廣播的廣播信號中的指南的所播放的EPG(電子節(jié)目指南),在系統(tǒng)控制器17的非易失性存儲器中分別將一個或多個新聞節(jié)目的開始和結(jié)束時間設(shè)置成記錄開始時間和記錄結(jié)束時間。
在步驟S301進行的操作中,一個或多個新聞節(jié)目的開始和結(jié)束時間,也可以作為來自用戶輸入I/F的輸入而被接收,并且可以被分別設(shè)置成記錄開始時間和記錄結(jié)束時間。也就是說,記錄開始時間和記錄結(jié)束時間也可以由用戶人工設(shè)置。
注意,系統(tǒng)控制器17包括在圖23中未示出的時鐘電路。時鐘電路提供播放數(shù)據(jù)、星期幾播放、和播放時間。
然后,在下一個步驟S302中,系統(tǒng)控制器17確定用戶是否已經(jīng)輸入停止將例如新聞節(jié)目記錄到記錄媒體上的處理以及停止展示分類顯示的處理的命令。
如果在步驟S302中進行的操作生成的確定結(jié)果指示用戶還沒有輸入停止命令,操作流程轉(zhuǎn)到步驟S303,確定時鐘電路計算的播放時間是否已經(jīng)達到當前新聞節(jié)目的記錄開始時間。
如果在步驟S303中進行的操作生成的確定結(jié)果指示時鐘電路計算的播放時間還沒有達到當前新聞節(jié)目的記錄開始時間,則操作流程轉(zhuǎn)到步驟S304,進入等待狀態(tài)(或待命狀態(tài)),從步驟S302開始重復(fù)如上所述的操作。
另一方面,如果在步驟S303中進行的操作生成的確定結(jié)果指示時鐘電路計算的播放時間已經(jīng)達到當前新聞節(jié)目的記錄開始時間,操作流程轉(zhuǎn)到步驟S305,在步驟S305中,系統(tǒng)控制器17控制諸如視頻分類處理單元5和I畫面檢測單元21之類的部件,檢測要記錄到記錄媒體上的新聞節(jié)目的視頻數(shù)據(jù)的特征。然后,在下一個步驟S306中,進行識別相似畫面的操作。
注意,在步驟S305和S306進行的操作中,也可以控制音頻分類處理單元20識別要記錄到記錄媒體上的音頻信號中的相似分段,并且,也可以對這樣的分段加以考慮。例如,可以將包括相似畫面和相似聲音的分段的每一個都設(shè)置成相似分段。
然后,在下一個步驟S307中,系統(tǒng)控制器17還控制縮小畫面處理單元22來進行從每一個位于相似畫面分段起首的I畫面中創(chuàng)建縮小畫面的縮略操作。隨后,在下一個步驟S308中,系統(tǒng)控制器17確定時鐘電路計算的播放時間是否已經(jīng)達到當前新聞節(jié)目的記錄結(jié)束時間。
如果在步驟S308中進行的操作生成的確定結(jié)果指示時鐘電路計算的播放時間已經(jīng)達到當前新聞節(jié)目的記錄結(jié)束時間,則操作流程轉(zhuǎn)到步驟S309,在步驟S309中,系統(tǒng)控制器17控制分類顯示單元19來以多畫面顯示格式示出像那些如圖25A到25C所示的那樣的縮小畫面的列表顯示。
另一方面,如果在步驟S308中進行的操作生成的確定結(jié)果指示時鐘電路計算的播放時間還沒有達到當前新聞節(jié)目的記錄結(jié)束時間,操作流程轉(zhuǎn)到步驟S310。操作流程也可以在完成了在步驟S309中進行的操作之后轉(zhuǎn)到步驟S310。在步驟S310中,系統(tǒng)控制器17確定用戶是否已經(jīng)輸入停止將新聞節(jié)目記錄到記錄媒體上的處理和停止展示分類顯示的處理的命令。
如果在步驟S310中進行的操作生成的確定結(jié)果指示用戶還沒有輸入停止命令,操作流程返回到步驟S303,在步驟S303中,從這個步驟開始重復(fù)如上所述的操作,記錄下一次接收的新聞節(jié)目并對這個新聞節(jié)目進行分類顯示操作。另一方面,如果在步驟S310中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入停止命令,結(jié)束如圖26所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備400通常進入用戶輸入下一個命令的狀態(tài)。
<第四實施例總結(jié)>
如上所述,通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400,能夠在記錄處理中識別電視廣播節(jié)目的視頻信號和音頻信號的相似畫面分段,并能夠以列表顯示格式(或多畫面顯示格式)顯示作為縮小畫面(或縮略畫面)的每一個位于相似畫面分段中一個的起首的畫面,以及能夠通過在屏幕的頂行加入代表新節(jié)目的縮小畫面的隊列來更新列表顯示屏幕。因此,可以有效地和高效率地掌握到目前為止記錄的多個節(jié)目的內(nèi)容,以示出總是隨著時間的流逝而得到更新的內(nèi)容。
另外,由于以列表格式只能顯示信息信號的一些數(shù)據(jù),而不是顯示信號的所有數(shù)據(jù),因此可以在短期時間內(nèi)高度準確地并高度精確地掌握信息信號的內(nèi)容。
除此之外,通過指定縮小畫面,可以正常地再現(xiàn)從與該縮小畫面相對應(yīng)的畫面開始的一系列畫面,作為從與該縮小畫面相對應(yīng)的開始時刻開始的畫面序列。
如上所述,由于每當處理一個新節(jié)目時,可以識別相似畫面分段,以列表顯示格式顯示畫面并更新列表顯示屏幕,因此可以迅速地和精確地進行諸如掌握節(jié)目內(nèi)容的操作和指定再現(xiàn)時刻的操作之類的處理。
另外,由于縮小畫面也存儲在記錄媒體中,因此可以在任何時候,以如圖25A到25C所示的列表格式顯示存儲的縮小畫面。然后,可以再現(xiàn)由縮小畫面中的一個所代表的部分,作為所代表的信息信號的所需部分。
除此之外,如果屏幕容納不下分類顯示,可以沿著水平方向或垂直方向滾動分類顯示,以便使用戶能夠觀看所有縮小畫面。
并且,在第四實施例的情況下,視頻信號是第一信息信號,而作為對視頻信號的預(yù)確定I畫面進行縮小的結(jié)果而創(chuàng)建的縮小畫面(縮略畫面)對應(yīng)于第二信息信號。如上所述,第二信息信號可以是任何信號,只要該信號是作為對第一信息信號的預(yù)確定部分進行預(yù)確定處理的結(jié)果獲得的。因此,第二信息信號可以被生成為縮略畫面,其每一個作為對包括在視頻信號的預(yù)確定部分的1個幀中的畫面數(shù)據(jù)進行縮小的結(jié)果而獲得。
此外,第一信息信號決不局限于視頻信號。例如,第一信息信號可以是音頻信號。例如,如果音頻信號用作第一信息信號,那么在第四實施例中創(chuàng)建的消息可以用作第二信息信號。作為另一個例子,文本數(shù)據(jù)等也可以用作第一信息信號。
<第五實施例>
圖27是說明性方塊圖,示出通過應(yīng)用了本發(fā)明提供的信息信號處理設(shè)備和信息信號處理方法的實施例的第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500。圖28A到28C和29A到29C是示出通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500進行的操作的概況的說明圖。
通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500在將電視廣播節(jié)目記錄到記錄媒體上的處理期間,使相似畫面分段的視頻信息可從電視廣播節(jié)目的主要信息中提取出來,并使所提取的相似畫面分段的視頻信息可事先使用;或者,在記錄處理期間,事先創(chuàng)建要加入主要信息中的概要信息。因此,可以進行所謂的摘要再現(xiàn)處理。
另外,通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500配有多種摘要再現(xiàn)方法,并能夠按照所記錄的電視廣播節(jié)目的類型來選擇一種合適的方法,作為在摘要再現(xiàn)處理中被采用的方法,或者,能夠選擇一種合適的方法,作為防止再現(xiàn)時間變長的方法。
<操作原理>
接下來的描述將說明通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的操作原理。與通過如前所述的實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備非常相似,如圖27所示的記錄/再現(xiàn)設(shè)備500能夠?qū)⑼ǔJ请娨晱V播節(jié)目的模擬視頻和音頻信號的模擬信息信號轉(zhuǎn)換成數(shù)字數(shù)據(jù),壓縮該數(shù)字數(shù)據(jù),多路復(fù)用所壓縮的數(shù)字數(shù)據(jù),并將多路復(fù)用的壓縮的數(shù)字數(shù)據(jù)記錄到記錄媒體8上。記錄媒體8通常是具有大存儲容量的盤狀記錄媒體。這樣盤狀記錄媒體的一個例子是硬盤。
另外,如圖27所示的記錄/再現(xiàn)設(shè)備500能夠從記錄媒體8中讀出多路復(fù)用的壓縮的數(shù)字信號,多路分用從記錄媒體8讀出的多路復(fù)用的壓縮的數(shù)字信號,以生成相互分開的壓縮的數(shù)字視頻和音頻數(shù)據(jù),對壓縮的數(shù)字視頻和音頻數(shù)據(jù)解壓縮,以恢復(fù)成壓縮前的數(shù)字視頻和音頻數(shù)據(jù),將壓縮前的數(shù)字視頻和音頻數(shù)據(jù)轉(zhuǎn)換成模擬視頻和音頻信號并輸出該模擬視頻和音頻信號。
與通過如前所述的實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備非常相似,如圖27所示的記錄/再現(xiàn)設(shè)備500還能夠識別彼此相似的I畫面,將相似畫面分類成相似畫面分段,將識別信息加入相似畫面中以使每個相似畫面分段是可識別的,并將相似畫面分段記錄到記錄媒體上。
另外,通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500主要判別包括在輸入畫面序列中的相似畫面,識別相似畫面分段(相似畫面場景),并使識別的相似畫面分段可用在摘要再現(xiàn)處理中。
但是,正如下面所述的那樣,通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500具有四種摘要再現(xiàn)模式A、B、C和D。通過把將如圖28A所示的輸入畫面序列記錄到記錄媒體上的處理取作例子,在下面說明這些摘要再現(xiàn)模式。
在如圖28A所示的輸入畫面序列中,相似畫面分段A1包括彼此相似的畫面3、4和5。同樣,相似畫面分段A2包括彼此相似的畫面13、14、15和16。同樣,相似畫面分段A 3包括彼此相似的畫面22、23、24、25和26。
在這樣的情況下,摘要再現(xiàn)模式A是沿著如圖28B所示的時間序列依次再現(xiàn)相似畫面分段A1、A2和A3的模式。如圖2B所示的摘要再現(xiàn)模式A對于這種情況是有效的,即,通過只觀看節(jié)目中的相似畫面場景,就可以相對高效率地掌握變化相對小的節(jié)目內(nèi)容。場景的例子在新聞節(jié)目的情況下是新聞播音員的畫面場景,在現(xiàn)場訪談節(jié)目的情況下是特定表演者的畫面場景。
畫面分段B1包括相似畫面分段A1和緊鄰在相似畫面分段A1之前和之后的分段。同樣,畫面分段B2包括相似畫面分段A2和緊鄰在相似畫面分段A2之前和之后的分段。同樣,畫面分段B3包括相似畫面分段A3和緊鄰在相似畫面分段A3之前和之后的分段。摘要再現(xiàn)模式B是沿著如圖28C所示的時間序列依次再現(xiàn)相似畫面分段B1、B2和B3的模式。摘要再現(xiàn)模式B對于這種情況是有效的,即,相似畫面分段在例如棒球比賽節(jié)目的情況下是擊球場景,或在網(wǎng)球錦標賽節(jié)目的情況下是發(fā)球場景。
也就是說,如果像包括棒球比賽節(jié)目和網(wǎng)球錦標賽節(jié)目的某些種類體育節(jié)目的情況那樣,整個節(jié)目都存在連續(xù)性,則通過與相似畫面分段一起還顯示緊鄰在每個相似畫面分段之前和之后的分段,而不是只顯示相似畫面分段,緊鄰在每個相似畫面分段之前和之后的分段可以用于指示每個相似畫面分段的前后關(guān)系,從而可以有效地和高效率地掌握節(jié)目的內(nèi)容,而不會有不協(xié)調(diào)的感覺。
另外,可以從包括在電視廣播節(jié)目的信號中的播放的EPG數(shù)據(jù)中獲取使電視廣播節(jié)目的類型得到記錄的信息,即,指示節(jié)目是新聞節(jié)目、體育節(jié)目還是另一種類型的節(jié)目的信息,并且還將獲取的信息事先存儲到記錄媒體上,以便在摘要再現(xiàn)處理中可以自動選擇最適合于要再現(xiàn)的節(jié)目的類型的摘要再現(xiàn)模式。因此,可以在最佳摘要再現(xiàn)模式下進行摘要再現(xiàn)處理。
不用說,讓用戶本身指定要用在摘要再現(xiàn)處理中的優(yōu)選摘要再現(xiàn)模式,以便可以在所選的摘要再現(xiàn)模式下進行摘要再現(xiàn)處理。另外,可以以與應(yīng)用在如前所述的其它實施例的每一個中的畫面分類處理單元進行的處理相同的方式,進行及實現(xiàn)檢測相似畫面的處理和確定相似畫面分段的處理。
這些實施例的描述集中在畫面相似性上。但是,也可以把注意力放在音頻信號的屬性上。通常,音頻信號被分類成音樂聲音分段和會話語音分段,采用摘要再現(xiàn)模式A或B。
在這種情況下,例如,在音樂節(jié)目的摘要再現(xiàn)模式A下,在生成音樂的摘要再現(xiàn)處理中只回放場景,或者,在摘要再現(xiàn)處理中,編輯音樂節(jié)目,以只創(chuàng)建生成音樂的場景。因此,可以進行有效的摘要再現(xiàn)處理。
另一方面,在應(yīng)用于諸如流行歌曲節(jié)目之類的音樂節(jié)目的摘要再現(xiàn)模式B下,假設(shè),例如,可以在開始歌唱每一首歌曲之前顯示歌手或表演者的介紹。因此,可以只對作為介紹出現(xiàn)在流行歌曲節(jié)目中的歌曲歌手的部分的每一個在要歌唱的歌曲之前的介紹部分進行摘要再現(xiàn)處理,或者,可以編輯節(jié)目,以便只生成在摘要再現(xiàn)處理中要顯示的介紹部分。因此,可以進行有效的摘要再現(xiàn)處理。
注意,可以以與應(yīng)用在如前所述的其它每一個實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中的音頻分類處理單元20進行的處理相同的方式,進行和實現(xiàn)對音樂聲音分段和會話語音分段的檢測和分類處理。
順便提一下,在分別顯示在圖28B和28C的摘要再現(xiàn)模式A和B的情況中,如果相似畫面分段太長,則再現(xiàn)時間也會過分延長,從而,也相像得出這種情況,即,因此在短期時間內(nèi)不能高效率地掌握所記錄節(jié)目的內(nèi)容。
為了解決這個問題,假設(shè)在如圖29A所示的輸入畫面序列中,與如圖28A到28C所示的輸入畫面序列的情況一樣,相似畫面分段C1包括彼此相似的畫面3、4和5,相似畫面分段C2包括彼此相似的畫面13、14、15和16,相似畫面分段C3包括彼此相似的畫面22、23、24、25和26。如圖29A所示的相似畫面分段C1、C2和C2用作摘要再現(xiàn)分段。
摘要再現(xiàn)模式C是這樣一種模式,如圖29B所示,其中,事先確定每個摘要再現(xiàn)分段的長度,即,事先確定用在摘要再現(xiàn)處理中的每個畫面分段的長度,以便可以在摘要再現(xiàn)時間不超過摘要再現(xiàn)分段的所確定的長度之和的情況下進行摘要再現(xiàn)處理。
如圖29C所示的摘要再現(xiàn)模式D是這樣的模式,其中,加快如圖29B所示的摘要再現(xiàn)模式C中每個摘要再現(xiàn)分段的摘要再現(xiàn)處理,使其在領(lǐng)先于摘要再現(xiàn)分段的起首預(yù)確定的時間間隔的時刻開始。在摘要再現(xiàn)模式D的情況下,與摘要再現(xiàn)模式B的情況相同,也可以掌握相似畫面分段和先于該相似畫面分段的畫面分段之間的場景流。對于像體育節(jié)目類型那樣的某些節(jié)目類型,可以進行更有效的摘要再現(xiàn)處理,并決不使摘要再現(xiàn)時間無必要地延長。
<通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的操作和配置>
下面說明通過如圖27所示的第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的操作和配置。如圖27所示的配置可以被劃分成在記錄媒體8的左側(cè)和右側(cè)的部分。左側(cè)的部分主要是記錄系統(tǒng),而右側(cè)的部分主要是再現(xiàn)系統(tǒng)。
<記錄系統(tǒng)>
首先,說明記錄系統(tǒng)。將供應(yīng)給通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的模擬音頻信號(音頻輸入)饋送到音頻A/D轉(zhuǎn)換器1,它將模擬音頻信號轉(zhuǎn)換成要供應(yīng)給音頻編碼器2和音頻分類處理單元20的數(shù)字音頻信號。
音頻編碼器2通過采用諸如MPEG音頻方法之類的預(yù)確定壓縮技術(shù),對數(shù)字音頻信號進行頻帶壓縮處理。將作為對數(shù)字音頻信號進行頻帶壓縮處理的結(jié)果獲得的音頻數(shù)據(jù)供應(yīng)給多路復(fù)用處理單元6。
音頻分類處理單元20通常對每個預(yù)確定分段檢測數(shù)字音頻信號中頻譜峰的連續(xù)性,以確定數(shù)字音頻信號是否是音樂信號。將確定結(jié)果供應(yīng)給多路復(fù)用處理單元6、系統(tǒng)控制器17、和畫面場景分類顯示和再現(xiàn)位置顯示單元19,畫面場景分類顯示和再現(xiàn)位置顯示單元19是示出畫面場景分類顯示和再現(xiàn)位置顯示的單元。下文也將畫面場景分類顯示和再現(xiàn)位置顯示單元19適當?shù)胤Q為分類顯示單元。
注意,取代對從音頻A/D轉(zhuǎn)換器1接收的數(shù)字音頻信號的處理,也可以將音頻分類處理單元20設(shè)計成這樣的配置,即,該配置用于接收作為音頻編碼器2對音頻A/D轉(zhuǎn)換器1生成的數(shù)字模擬信號進行頻帶壓縮處理的結(jié)果獲得的音頻數(shù)據(jù),如圖1所示的虛線所指;并用于對該音頻數(shù)據(jù)進行如上所述的分類處理。
另一方面,將供應(yīng)給通過第四實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備400的模擬視頻信號(視頻輸入)饋送到視頻A/D轉(zhuǎn)換器3,它將模擬視頻信號轉(zhuǎn)換成要供應(yīng)給視頻編碼器4的數(shù)字視頻信號。
視頻編碼器4通過采用諸如MPEG2方法之類的預(yù)確定壓縮技術(shù),對數(shù)字視頻信號進行頻帶壓縮處理。將作為對數(shù)字視頻信號進行頻帶壓縮處理的結(jié)果獲得的視頻數(shù)據(jù)供應(yīng)給視頻分類處理單元5、多路復(fù)用處理單元6、I-畫面檢測單元21和縮小畫面處理單元22。
視頻分類處理單元5檢測從視頻編碼器4接收的視頻數(shù)據(jù)的I畫面的畫面特征,并根據(jù)檢測的特征識別畫面相似性。另外,視頻分類處理單元5還像上面參照圖28A到28C和29A到29C所說明的那樣識別相似畫面分段。視頻分類處理單元5還生成用于識別相似畫面分段的識別信息信號并將該信號供應(yīng)給多路復(fù)用處理單元6和分類顯示單元19。識別信息信號包括視頻數(shù)據(jù)的位置信息,視頻數(shù)據(jù)的位置信息包括有關(guān)在每個相似畫面分段中包括多少個連續(xù)相似幀的信息。
注意,取代從視頻編碼器4接收壓縮視頻數(shù)據(jù),視頻分類處理單元5也可以像如圖27所示的虛線所指,接收視頻A/D轉(zhuǎn)換器3輸出的數(shù)字視頻信號,并根據(jù)該數(shù)字視頻信號,進行如上所述的以幀為單元識別和分類數(shù)字視頻數(shù)據(jù)的相似畫面的處理。
另外,也可以提供這樣的配置,即,其中,也可以由系統(tǒng)控制器17根據(jù)從視頻分類處理單元5和音頻分類處理單元20接收的分類處理結(jié)果生成作為對視頻和音頻信號分類處理的結(jié)果而獲得的識別信息信號,并將它供應(yīng)給多路復(fù)用處理單元6。
與通過如前所述的第一實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備100的情況一樣,系統(tǒng)控制器17是這樣的微型計算機,其包括用于控制構(gòu)成記錄/再現(xiàn)設(shè)備500的其它部件的CPU(中央處理單元)、ROM(只讀存儲器)、RAM(隨機訪問存儲器)、非易失性存儲器和定時電路。
在這個實施例中,分類顯示單元19接收來自音頻分類處理單元20的分類結(jié)果和來自視頻分類處理單元5的識別信息信號,與其它信息一道,依次顯示畫面分類。
另外,多路復(fù)用處理單元6通常對音頻數(shù)據(jù)、視頻數(shù)據(jù)、和從視頻分類處理單元5接收的附加識別信息信號進行多路復(fù)用處理,生成多路復(fù)用數(shù)據(jù),然后將該多路復(fù)用數(shù)據(jù)供應(yīng)給記錄處理單元7。
除此之外,多路復(fù)用數(shù)據(jù)包括有關(guān)節(jié)目類型的附加信息,即,指示包含在多路復(fù)用數(shù)據(jù)中的節(jié)目是新聞節(jié)目、體育節(jié)目還是另一種類型的節(jié)目的節(jié)目類型信息。節(jié)目類型信息可以從包括在數(shù)字廣播信號中的EPG數(shù)據(jù)中提取,也可以由用戶輸入。
記錄處理單元7進行包括將糾錯碼加入多路復(fù)用數(shù)據(jù)中的處理和交織數(shù)據(jù)以創(chuàng)建要記錄的信號的處理在內(nèi)的處理,將信號記錄到記錄媒體8中的預(yù)確定區(qū)域中。
然后,在這個實施例的情況下,如前所述,通過利用多路復(fù)用在多路復(fù)用數(shù)據(jù)中的識別信息信號,可以識別要用作概要信息的相似畫面分段。因此,可以在記錄處理結(jié)束之后的預(yù)確定時刻,采用預(yù)確定摘要再現(xiàn)方法進行摘要再現(xiàn)處理。
注意,與上面參照圖4到6說明的第一實施例非常相似,視頻分類處理單元5為用作處理單元的每個I畫面檢測關(guān)于視頻數(shù)據(jù)的特征的信息,根據(jù)檢測的特征信息檢測相似畫面,并確定每一個包括彼此相似的畫面的相似畫面分段。此外,如前所述,將同一識別符指定給相似的畫面,以便通過利用這樣的識別信息,可以識別哪個范圍的畫面包括在每一個相似畫面分段中。
另外,與上面參照圖7說明的第一實施例非常相似,音頻分類處理單元20對每個預(yù)確定時間單元檢測聲音的相似性,并且,與第二實施例和第三實施例非常相似,音頻分類處理單元20還檢測音頻電平。
<再現(xiàn)系統(tǒng)>
接著,說明再現(xiàn)系統(tǒng)。系統(tǒng)控制器17生成的控制信號控制再現(xiàn)控制單元9從記錄媒體8中讀出用戶指定的多路復(fù)用數(shù)據(jù),并且將該數(shù)據(jù)供應(yīng)給再現(xiàn)處理單元10。再現(xiàn)處理單元10進行包括對由此接收的多路復(fù)用數(shù)據(jù)進行解交織處理在內(nèi)的預(yù)確定處理,并且把經(jīng)處理的多路復(fù)用數(shù)據(jù)供應(yīng)給分離處理單元11。分離處理單元11多路分用供應(yīng)給它的多路復(fù)用數(shù)據(jù),以生成音頻數(shù)據(jù)、視頻數(shù)據(jù)、縮小畫面數(shù)據(jù)和識別信息信號。
將分離處理單元11生成的音頻數(shù)據(jù)供應(yīng)給音頻解碼器12。供應(yīng)給音頻解碼器12的音頻數(shù)據(jù)是采用預(yù)確定壓縮方法壓縮的數(shù)據(jù)。因此,音頻解碼器12解壓縮由此接收的壓縮音頻數(shù)據(jù),并且把作為解壓縮結(jié)果獲得的音頻數(shù)據(jù)供應(yīng)給音頻數(shù)字/模擬轉(zhuǎn)換器13,下文將音頻數(shù)字/模擬轉(zhuǎn)換器縮寫成音頻D/A轉(zhuǎn)換器。
音頻D/A轉(zhuǎn)換器13將供應(yīng)給它的數(shù)字音頻信號轉(zhuǎn)換成模擬音頻信號,并且將模擬音頻信號輸出到揚聲器。揚聲器根據(jù)供應(yīng)給它的模擬音頻信號生成聲音。
另外,將分離處理單元11生成的視頻數(shù)據(jù)供應(yīng)給視頻解碼器14。供應(yīng)給視頻解碼器14的視頻數(shù)據(jù)是采用預(yù)確定壓縮方法壓縮的數(shù)據(jù)。因此,視頻解碼器14解壓縮由此接收的壓縮視頻數(shù)據(jù),并且把作為解壓縮結(jié)果獲得的視頻數(shù)據(jù)供應(yīng)給視頻數(shù)字/模擬轉(zhuǎn)換器15,下文將視頻數(shù)字/模擬轉(zhuǎn)換器縮寫成視頻D/A轉(zhuǎn)換器。
視頻D/A轉(zhuǎn)換器15將供應(yīng)給它的數(shù)字視頻信號轉(zhuǎn)換成模擬視頻信號,并且將該模擬視頻信號輸出到監(jiān)視器接收器。監(jiān)視器接收器根據(jù)供應(yīng)給它的模擬視頻信號顯示畫面。
另外,將分離處理單元11生成的識別信息信號供應(yīng)給識別信號檢測單元16。識別信號檢測單元16從由此接收的識別信息信號中檢測用于摘要再現(xiàn)的必要識別信息信號,并且將該識別信息信號供應(yīng)給系統(tǒng)控制器17,如有需要,也供應(yīng)給分類顯示單元19。
另外,識別信號檢測單元16還從由此接收的識別信息信號中提取預(yù)確定時間印記信號或幀號碼,并且將該時間印記信號或幀號碼供應(yīng)給系統(tǒng)控制器17。通過根據(jù)時間印記信號檢測再現(xiàn)時刻,也可以在分類顯示單元19上顯示再現(xiàn)位置。
當對指定節(jié)目請求摘要再現(xiàn)處理時,從加入節(jié)目的多路復(fù)用信號中的節(jié)目類型信息中識別節(jié)目的類型。然后,使再現(xiàn)控制單元9工作,以便在適合于識別的類型的摘要再現(xiàn)模式下進行摘要再現(xiàn)處理。在摘要再現(xiàn)處理中,把按照再現(xiàn)控制單元9執(zhí)行的控制而由識別信息識別以用作概要信息的相似畫面分段的畫面數(shù)據(jù)從記錄媒體中讀出。
如前所述,通過分類顯示單元19、分離處理單元11、音頻解碼器12、音頻D/A轉(zhuǎn)換器13、視頻解碼器14和視頻D/A轉(zhuǎn)換器15,將從記錄媒體讀出以用作概要信息的畫面數(shù)據(jù)輸出到進行摘要再現(xiàn)的揚聲器和監(jiān)視器接收器。
注意,即使摘要再現(xiàn)模式像上述那樣被自動識別出來,要使用的摘要再現(xiàn)模式也決不局限于按照自動識別的節(jié)目類型自動選擇的模式。用戶也可以選擇要用于進行所請求的摘要再現(xiàn)處理的摘要再現(xiàn)模式并可以作出使用所選摘要再現(xiàn)模式的請求。作為另一種選擇,可以事先將摘要再現(xiàn)模式設(shè)置成要用于進行所請求的摘要再現(xiàn)處理的模式。
<通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的操作>
接著,通過參照如圖30到32所示的流程圖,說明在記錄過程中通過如上所述的第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500進行的操作。注意,為了使說明簡單些,如下的描述假設(shè)前面參照圖28A到28C說明的摘要再現(xiàn)模式A或B用作摘要再現(xiàn)模式。
另外,在這個實施例中,可以按照節(jié)目類型選擇前面參照圖28A到28C說明的摘要再現(xiàn)模式A或B,作為默認特殊再現(xiàn)模式。
記錄/再現(xiàn)設(shè)備500按照用戶通過用戶輸入I/F18輸入的命令進行如圖30到32所示的流程圖所代表的處理,以進行普通或摘要再現(xiàn)處理。
該流程圖從步驟S401開始,在步驟S401中,當用戶輸入對再現(xiàn)處理作出請求的命令時,系統(tǒng)控制器17確定用戶請求的再現(xiàn)處理是普通還是特殊再現(xiàn)處理。普通再現(xiàn)處理是從記錄媒體8中再現(xiàn)所有主要信息的處理,而這個實施例中的特殊再現(xiàn)處理是摘要再現(xiàn)處理。
如果在步驟S401中進行的操作生成的確定結(jié)果指示用戶輸入的命令是對普通再現(xiàn)處理作出請求的命令,操作流程轉(zhuǎn)到步驟S402,在步驟S402中,系統(tǒng)控制器17控制再現(xiàn)控制單元9與這個處理相關(guān)聯(lián)的部件,以進行從記錄媒體8中再現(xiàn)節(jié)目的所有主要信息的普通再現(xiàn)處理。
然后,操作流程轉(zhuǎn)到步驟S403,確定是否已經(jīng)通過用戶輸入I/F18接收到停止普通再現(xiàn)處理的命令。如果確定結(jié)果指示還沒有接收到停止普通再現(xiàn)處理的命令,操作流程返回到步驟S401,從這個步驟開始全面重復(fù)如上所述的操作。另一方面,如果在步驟S403中進行的操作生成的確定結(jié)果指示已經(jīng)接收到停止普通再現(xiàn)處理的命令,結(jié)束如圖30和32所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S401中進行的操作生成的確定結(jié)果指示用戶輸入的命令是對特殊再現(xiàn)處理,即,摘要再現(xiàn)處理作出請求的命令,操作流程轉(zhuǎn)到步驟S404,在步驟S404中,系統(tǒng)控制器17通常檢查存儲在它自己的非易失性存儲器中的設(shè)置信息,以便確定是否采用默認再現(xiàn)模式的設(shè)置,將默認模式設(shè)置成摘要再現(xiàn)模式。
如果不采用默認模式設(shè)置來設(shè)置摘要再現(xiàn)模式的默認模式,那么,在這個實施例中,采用摘要再現(xiàn)模式A。不用說,可以將摘要再現(xiàn)模式的默認再現(xiàn)模式改變成上面參照圖29A到29C所說明的摘要再現(xiàn)模式C或D。
如果在步驟S404中進行的操作生成的確定結(jié)果指示采用默認再現(xiàn)模式的設(shè)置,操作流程轉(zhuǎn)到步驟S405,在步驟S405中,獲取有關(guān)要經(jīng)受摘要再現(xiàn)處理的節(jié)目的類型的信息。如上所述,在記錄處理中,已經(jīng)從EPG數(shù)據(jù)等中提取了有關(guān)節(jié)目類型的信息,并且將其加入多路復(fù)用數(shù)據(jù)。然后,操作流程轉(zhuǎn)到步驟S406,確定要經(jīng)受摘要再現(xiàn)處理的節(jié)目是否是新聞節(jié)目。
如果在步驟S406中進行的操作生成的確定結(jié)果指示要經(jīng)受摘要再現(xiàn)處理的節(jié)目是新聞節(jié)目,或者,如果在步驟S404中進行的操作生成的確定結(jié)果指示不采用默認模式的設(shè)置,那么,使用摘要再現(xiàn)模式A。
在步驟S406中指示新聞節(jié)目的情況下,操作流程轉(zhuǎn)到步驟S407,在步驟S407中,系統(tǒng)控制器17控制識別信號檢測單元16檢測加入要經(jīng)受摘要再現(xiàn)處理的節(jié)目中的幀號碼。然后,在下一個步驟S408中,檢測作為用于對相似畫面分段進行識別的信息的加入的識別信息。
隨后,操作流程轉(zhuǎn)到步驟S409,確定根據(jù)檢測的識別信息識別成相似畫面分段的視頻信號分段是否是新聞播音員的場景。如果相似畫面分段是,例如,新聞播音員的場景,想像得出,相似畫面分段也與另一個相似畫面分段的新聞播音員場景類似。因此,在步驟S409進行的操作中,與另一個相似畫面分段類似的相似畫面分段被識別成要經(jīng)受摘要再現(xiàn)處理的相似畫面分段。
如果在步驟S409中進行的操作生成的確定結(jié)果指示要經(jīng)受摘要再現(xiàn)處理的相似畫面分段是新聞播音員的場景,操作流程轉(zhuǎn)到步驟S410,在步驟S410中,再現(xiàn)相似畫面分段的幀。另一方面,如果在步驟S409中進行的操作生成的確定結(jié)果指示要經(jīng)受摘要再現(xiàn)處理的相似畫面分段不是新聞播音員的場景,操作流程轉(zhuǎn)到步驟S411,在步驟S411中,跳過相似畫面分段的幀。
然后,在兩者中任意一個情況下,操作流程轉(zhuǎn)到步驟S412,確定用戶是否通過用戶輸入I/F18輸入了停止摘要再現(xiàn)處理的命令。如果確定結(jié)果指示用戶已經(jīng)輸入了停止摘要再現(xiàn)處理的命令,結(jié)束如圖30和32所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S412中進行的操作生成的確定結(jié)果指示用戶還沒有輸入停止摘要再現(xiàn)處理的命令,操作流程轉(zhuǎn)到步驟S413,確定摘要再現(xiàn)處理是否已經(jīng)結(jié)束。如果在步驟S413中進行的操作生成的確定結(jié)果指示摘要再現(xiàn)處理已經(jīng)結(jié)束,終止如圖30和32所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S413中進行的操作生成的確定結(jié)果指示摘要再現(xiàn)處理還沒有結(jié)束,操作流程轉(zhuǎn)到步驟S414,確定用戶是否通過用戶輸入I/F18輸入了改變再現(xiàn)模式的命令。
如果在步驟S414中進行的操作生成的確定結(jié)果指示用戶還沒有輸入改變再現(xiàn)模式的命令,操作流程返回到步驟S407,從這個步驟開始重復(fù)如上所述的操作。在這種情況下,在摘要再現(xiàn)模式A下繼續(xù)進行摘要再現(xiàn)處理。
另一方面,如果在步驟S414中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入了改變再現(xiàn)模式的命令,操作流程返回到步驟S401,從這個步驟開始全面重復(fù)如上所述的操作。
另一方面,如果在步驟S406中進行的操作生成的確定結(jié)果指示要經(jīng)受摘要再現(xiàn)處理的節(jié)目不是新聞節(jié)目,操作流程轉(zhuǎn)到如圖31所示的續(xù)流程圖的步驟S415。在這個步驟中,在摘要再現(xiàn)模式B下開始進行摘要再現(xiàn)處理。
在步驟S415中,系統(tǒng)控制器17控制識別信號檢測單元16檢測加入要經(jīng)受摘要再現(xiàn)處理的節(jié)目的幀號碼。然后,在下一個步驟S416中,通過將變量k設(shè)置成0(零)來初始化變量k。變量k是計數(shù)從步驟S418開始的循環(huán)的迭代執(zhí)行次數(shù)的計數(shù)器。
隨后,在下一個步驟S417中,系統(tǒng)控制器17是否已經(jīng)檢測到與畫面分段相關(guān)聯(lián)的預(yù)確定識別信息。識別信息所指示的畫面分段是要依次再現(xiàn)的畫面分段之一。如上面參照圖28C所說明的那樣,這個畫面分段包括相似畫面分段和緊鄰在相似畫面分段之前和之后的預(yù)確定畫面分段。
如果在步驟S417中進行的操作生成的確定結(jié)果指示已經(jīng)檢測到與畫面分段相關(guān)聯(lián)的預(yù)確定識別信息,操作流程轉(zhuǎn)到步驟S418。在這個步驟中,為了如后所述的指示這個相似畫面分段的摘要再現(xiàn)操作已經(jīng)完成的目的,將指示已經(jīng)檢測到指定給相似畫面分段的幀的預(yù)確定識別符的標志設(shè)置成1。
然后,操作流程轉(zhuǎn)到步驟S419,在步驟S419中,系統(tǒng)控制器17確定從步驟S420開始的操作是否是第一次執(zhí)行。由于變量k的值為0,在步驟S419中進行的操作生成的確定結(jié)果指示從步驟S420開始的操作到目前為止還沒有執(zhí)行。在這種情況下,操作流程轉(zhuǎn)到步驟S420,在步驟S420中,為了再現(xiàn)緊鄰在位于相似畫面分段起首的第N幀之前的第(N-a)到第(N-1)幀的目的,將變量n設(shè)置成0來初始化第一幀設(shè)置變量n。
然后,在下一個步驟S421中,再現(xiàn)緊鄰在位于相似畫面分段起首的第N幀之前的第(N-a)到第(N-1)幀的第1個。隨后,在下一個步驟S422中,將變量n加1。然后,在下一個步驟S423中,將變量k加1。隨后,操作流程轉(zhuǎn)到步驟S424,確定第(N-a)到第(N-1)幀是否都得到再現(xiàn)。
如果在步驟S424中進行的操作生成的確定結(jié)果指示第(N-a)到第(N-1)幀還沒有全部得到再現(xiàn),操作流程返回到步驟S421,從這個步驟開始重復(fù)如上所述的操作。另一方面,如果在步驟S424中進行的操作生成的確定結(jié)果指示第(N-a)到第(N-1)幀已全部得到再現(xiàn),操作流程轉(zhuǎn)到到步驟S425,在步驟S425中,再現(xiàn)相似畫面分段的幀。如果在步驟S419中進行的操作生成的確定結(jié)果指示緊鄰在相似畫面分段之前的預(yù)確定畫面分段已經(jīng)得到再現(xiàn),操作流程也轉(zhuǎn)到步驟S425。
隨后,在下一個步驟S426中,系統(tǒng)控制器17確定用戶是否通過用戶輸入I/F18輸入了停止摘要再現(xiàn)處理的命令。在步驟S426中,如果確定結(jié)果指示用戶已經(jīng)輸入了停止摘要再現(xiàn)處理的命令,結(jié)束如圖30和32所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S426中進行的操作生成的確定結(jié)果指示用戶還沒有輸入停止摘要再現(xiàn)處理的命令,操作流程轉(zhuǎn)到步驟S427,確定再現(xiàn)所需節(jié)目的摘要再現(xiàn)處理是否已經(jīng)完成。如果在步驟S427中進行的操作生成的確定結(jié)果指示再現(xiàn)所需節(jié)目的摘要再現(xiàn)處理已經(jīng)完成,結(jié)束如圖30和32所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S427中進行的操作生成的確定結(jié)果指示再現(xiàn)所需節(jié)目的摘要再現(xiàn)處理還沒有完成,操作流程轉(zhuǎn)到步驟S428,確定用戶是否已經(jīng)輸入改變再現(xiàn)模式的命令。如果在步驟S428中進行的操作生成的確定結(jié)果指示用戶還沒有輸入改變再現(xiàn)模式的命令,操作流程返回到步驟S417,從這個步驟開始重復(fù)如上所述的操作。在這種情況下,在摘要再現(xiàn)模式B下繼續(xù)進行摘要再現(xiàn)處理。
另一方面,如果在步驟S428中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入改變再現(xiàn)模式的命令,操作流程返回到如圖30所示的主流程圖的步驟S401,從這個步驟開始全面重復(fù)如上所述的步驟。
如果在步驟S417中進行的操作生成的確定結(jié)果指示沒有檢測到要再現(xiàn)的相似畫面分段的預(yù)確定識別信息,以證明相似畫面分段的再現(xiàn)已經(jīng)完成,則操作流程轉(zhuǎn)到如圖32所示的另一個續(xù)流程圖的步驟S429。在這個步驟中,開始緊鄰在再現(xiàn)的相似畫面分段之后的預(yù)確定畫面分段的摘要再現(xiàn)處理。
首先,在步驟S429中,系統(tǒng)控制器17檢查在步驟S418中設(shè)置的標志,確定標志是否的確被設(shè)置成1,即,再現(xiàn)緊鄰在相似畫面分段之前的分段和相似畫面分段本身的摘要再現(xiàn)處理是否已經(jīng)完成。
如果在步驟S429中進行的操作生成的確定結(jié)果指示標志已經(jīng)被設(shè)置成1,操作流程轉(zhuǎn)到步驟S430,在步驟S430中,將標志重置成0。然后,在下一個步驟S431中,將變量n初始化成0。隨后,在下一個步驟S432中,再現(xiàn)緊鄰在相似畫面分段之后第(N+n)幀。然后,在下一個步驟S433中,將變量n加1。
隨后,操作流程轉(zhuǎn)到步驟S434,確定變量n是否超過預(yù)確定值b,即,再現(xiàn)緊鄰在相似畫面分段之后的預(yù)確定分段的摘要再現(xiàn)處理是否已經(jīng)完成。如果在步驟S434中進行的操作生成的確定結(jié)果指示再現(xiàn)預(yù)確定分段的摘要再現(xiàn)處理還沒有完成,操作流程返回到步驟S432,從這個步驟開始重復(fù)如上所述的操作。
另一方面,如果在步驟S434中進行的操作生成的確定結(jié)果指示再現(xiàn)緊鄰在相似畫面分段之后的預(yù)確定分段的摘要再現(xiàn)處理已經(jīng)完成,操作流程轉(zhuǎn)到步驟S435,在步驟S435中,系統(tǒng)控制器17確定用戶是否通過用戶輸入I/F18輸入了停止摘要再現(xiàn)處理的命令。如果確定結(jié)果指示用戶輸入了停止摘要再現(xiàn)處理的命令,結(jié)束如圖30和32所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S435中進行的操作生成的確定結(jié)果指示用戶還沒有輸入停止摘要再現(xiàn)處理的命令,操作流程轉(zhuǎn)到步驟S436,確定再現(xiàn)所需節(jié)目的摘要再現(xiàn)處理是否已經(jīng)完成。如果在步驟S436中進行的操作生成的確定結(jié)果指示再現(xiàn)所需節(jié)目的摘要再現(xiàn)處理已經(jīng)完成,結(jié)束如圖30和32所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S436中進行的操作生成的確定結(jié)果指示再現(xiàn)所需節(jié)目的摘要再現(xiàn)處理還沒有完成,操作流程轉(zhuǎn)到步驟S437,確定用戶是否輸入了改變再現(xiàn)模式的命令。如果在步驟S437中進行的操作生成的確定結(jié)果指示用戶還沒有輸入改變再現(xiàn)模式的命令,操作流程返回到如圖31所示的續(xù)流程圖的步驟S417,從這個步驟開始重復(fù)如上所述的操作。在這種情況下,在摘要再現(xiàn)模式B下繼續(xù)進行摘要再現(xiàn)處理。
另一方面,如果在步驟S437中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入改變再現(xiàn)模式的命令,操作流程返回到如圖30所示的主流程圖的步驟S401,從這個步驟開始全面重復(fù)如上所述的操作。
注意,另一方面,如果在步驟S429中進行的操作生成的確定結(jié)果指示標志還沒有被設(shè)置成1,操作流程轉(zhuǎn)到步驟S438,在步驟S438中,將標志重置成0。然后,在下一個步驟S439中,跳過正在處理的幀。隨后,操作流程轉(zhuǎn)到如圖32所示的步驟S435。
還值得注意的是,盡管上面的描述說明了摘要再現(xiàn)模式A和B的使用,但本實施例不局限于這些模式。例如,上面的描述也可應(yīng)用于摘要再現(xiàn)模式C和D。
另外,如果有關(guān)節(jié)目類型的信息指示節(jié)目是體育節(jié)目,還可以使用摘要再現(xiàn)模式B或D。
<第五實施例總結(jié)>
如上所述,在從記錄媒體中再現(xiàn)節(jié)目的分段的摘要再現(xiàn)處理中,通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備按照節(jié)目的類型或按照用戶輸入的信息,使用由此選擇的摘要再現(xiàn)模式。因此,可以有效地和高效率地進行摘要再現(xiàn)處理。
另外,即使數(shù)種摘要再現(xiàn)模式可以用于有效地和高效率地進行摘要再現(xiàn)處理,借助于記錄/再現(xiàn)設(shè)備的簡單配置,可以有效地和高效率地進行摘要再現(xiàn)處理,而不會使配置變得復(fù)雜。
注意,摘要再現(xiàn)模式?jīng)Q不局限于前面參照圖28A到28C和29A到29C所說明的四種摘要再現(xiàn)模式A、B、C和D。也就是說,也可以使用具有各種各樣再現(xiàn)式樣的其它任意摘要再現(xiàn)模式。
另外,在通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500中,以I-畫面為單元識別畫面的相似性和相似畫面分段。但是,識別單元決不局限于I-畫面。例如,也可以以幀為單元識別畫面的相似性和相似畫面分段。作為另一種選擇,以I-畫面為單元識別畫面的相似性和相似畫面分段,而以幀為單元進行其它的處理。
除此之外,在通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500中,根據(jù)關(guān)于視頻信息的特征的信息,將視頻信息分類成相似畫面分段。但是,用在將視頻信息分類成相似畫面分段中的根據(jù)決不局限于視頻信息的特征。例如,也可以根據(jù)音頻信號設(shè)置可用作概要信息的相似畫面分段。作為另一種選擇,也可以根據(jù)音頻和視頻信號兩者設(shè)置可用作概要信息的相似畫面分段。
<第六實施例>
即使在如上所述的第五實施例的情況中,如果包括在代表存儲在記錄媒體上的電視廣播節(jié)目的視頻信號中的每個相似畫面分段變得太長,甚至通過進行摘要再現(xiàn)處理來生成相似畫面分段,也不能快速地掌握電視廣播節(jié)目的內(nèi)容。為了解決這個問題,如圖29B和29C所示,只再現(xiàn)每個相似畫面分段的預(yù)確定部分。
不過,想像得出,還存在包括非常長連續(xù)相似畫面分段的電視廣播節(jié)目。這樣電視廣播節(jié)目的例子是新聞分析節(jié)目或討論節(jié)目。在新聞分析節(jié)目或討論節(jié)目中,示出演講者的場景持續(xù)很長期的時間。另一個例子是馬拉松賽跑節(jié)目或接力跑節(jié)目。在這樣的節(jié)目中,從不變的攝像機視角拍攝的畫面,作為示出運動員的奔跑狀況的畫面,可能持續(xù)很長期的時間。
在這樣的情況下,如果進行摘要再現(xiàn)處理,只再現(xiàn)處在每個相似畫面分段起首的預(yù)確定部分,那么,想像得出,也許不能有效地和高效率地掌握包括摘要再現(xiàn)處理中再現(xiàn)的相似畫面分段在內(nèi)的節(jié)目的內(nèi)容。
為了解決這個問題,在通過第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中,借助于記錄/再現(xiàn)設(shè)備的簡單配置,即使相似畫面分段持續(xù)相對長期的時間,也可以有效地和高效率地進行摘要再現(xiàn)處理,而不會使配置變得復(fù)雜。
注意,通過第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備具有與通過前面參照圖27所述的第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500相同的配置。因此,也通過參照示出第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的圖27來說明通過第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備。
與通過第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500非常相似,具有如圖27所示配置的通過第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500能夠數(shù)據(jù)壓縮作為電視廣播節(jié)目的數(shù)字信號的視頻和音頻信號,將壓縮的數(shù)字視頻和音頻信號存儲到記錄媒體上,并從記錄媒體上再現(xiàn)壓縮的數(shù)字視頻和音頻信號。
在將壓縮的數(shù)字視頻和音頻信號存儲到記錄媒體上的處理中,與如前所述的其它實施例非常相似,檢測相似I畫面并將它們分類成相似畫面分段,并且,在將視頻和音頻信號存儲到記錄媒體上之前,加入識別信息,使每個相似畫面分段變成可識別的。
另外,還在通過第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的情況中,基本上,還通過再現(xiàn)相似畫面分段來進行摘要再現(xiàn)處理。但是,在這種情況下,要對每個相似畫面分段的長度加以考慮。圖33A和33B以及圖34A到34C是示出通過第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的操作原理的說明圖。
在如圖33A所示的輸入畫面序列中,例如,畫面1、2和3彼此相似,畫面13、14、15、16和17彼此相似,畫面22、23、24、25、26、27、28和29彼此相似。另外,事先將再現(xiàn)分段長度(或設(shè)置的分段長度)t設(shè)置成被認為是適合于如圖33A所示的摘要再現(xiàn)處理的長度。
按照這個設(shè)置的分段長度t,將分段A1、A2和A 3取作為用于如圖33A所示的摘要再現(xiàn)處理的畫面分段。如果相似畫面分段具有比設(shè)置的分段長度t長的長度,檢查相似畫面分段在設(shè)置的分段長度t之外的部分。如果該部分長于預(yù)確定間隔分段長度s,則將該部分在預(yù)確定間隔分段長度s之外的部分取作其它附加畫面分段。如有必要,還將這個其它附加畫面分段修剪成不超過設(shè)置的分段長度t的長度。
也就是說,如圖33A所示的分段A4是摘要再現(xiàn)處理的其它附加畫面分段。在如圖33A所示的典型輸入畫面序列的情況下,代表從如圖33A所示的輸入畫面序列中提取的畫面分段A1、A2、A3和A4的視頻信號用在如圖33B所示的摘要再現(xiàn)處理中。
因此,在相似畫面分段具有超過設(shè)置的分段長度t和預(yù)確定間隔分段長度s之和的長度的情況下,設(shè)置用于摘要再現(xiàn)處理的多個畫面分段。這樣,即使節(jié)目包括長相似畫面分段,也可以有效地和高效率地掌握經(jīng)受摘要再現(xiàn)處理的節(jié)目的內(nèi)容。
另外,除了相似畫面分段之外,也可以像如圖34A到34C所示的例子的情況那樣,在設(shè)置用于摘要再現(xiàn)處理的畫面分段的過程中,對音頻信號的電平加以考慮。圖34A示出輸入畫面序列,圖34B示出伴隨著如圖34A所示的輸入畫面序列的輸入聲音序列。
在如圖34A所示的輸入畫面序列中,例如,畫面1、2和3彼此相似,畫面13、14、15、16、17和18彼此相似,畫面22、23、24、25、26、27、28和29彼此相似。另外,與如圖33A所示的輸入信號序列非常相似,設(shè)置的分段長度t和預(yù)確定間隔分段長度s用在設(shè)置要用于摘要再現(xiàn)處理的畫面分段中。但是,在如圖33A所示的輸入畫面序列的情況下,最好將具有音頻信號超過預(yù)確定電平的分段作為畫面分段,用于摘要再現(xiàn)處理。
因此,在如圖34A所示的輸入畫面序列的情況下,如上所述,畫面13、14、15、16、17和18彼此相似。但是,如圖34B所示,與畫面16、17和18有關(guān)的音頻信號的電平較高。于是,作為用于摘要再現(xiàn)處理的畫面分段,包括畫面16、17和18的分段如圖34A所示那樣設(shè)置。
如上所述,作為音頻信號超過預(yù)確定電平而長度未超過設(shè)置的分段長度t的部分,包括在相似畫面分段中的部分被設(shè)置成用于摘要再現(xiàn)處理的畫面分段。另外,如果相似畫面分段太長,以致于它的設(shè)置成用于摘要再現(xiàn)處理的畫面分段的部分具有大于設(shè)置的分段長度t的長度,則檢查在設(shè)置的分段長度t之外的部分。如果該部分長于預(yù)確定間隔分段長度s,將該部分在預(yù)確定間隔分段長度s之外的部分取作另一個附加畫面分段。如有必要,還將這個其它的附加畫面分段修剪成不超過設(shè)置的分段長度t的長度。
這樣,在如圖34A所示的輸入畫面序列的情況下,分段B1、B2、B3和B4每一個被設(shè)置成用于摘要再現(xiàn)處理的畫面分段。然后,進行摘要再現(xiàn)處理,像如圖34C所示那樣,連續(xù)再現(xiàn)分段B1、B2、B3和B4。
注意,在像那些如圖33A和34A所示的那樣的長相似畫面分段的情況下,設(shè)置用于摘要再現(xiàn)處理的多個畫面分段,并且在相似畫面分段內(nèi)導(dǎo)致出現(xiàn)長度等于預(yù)確定間隔分段長度s的跳過分段。
<通過第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的操作和配置>
下面說明通過如圖27所示的第五實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的操作和配置。通過第六實施例的記錄系統(tǒng)進行的操作與如前所述的第五實施例中的那些操作相同。但是,如果像上面參照圖34A到34C所說明的那樣,對音頻信號的電平加以考慮,則音頻分類處理單元20把用于識別所具有的音頻信號電平至少等于預(yù)確定電平的音頻信號分段的識別信息供應(yīng)給多路復(fù)用單元6。多路復(fù)用單元6還將這個識別信息加入多路復(fù)用數(shù)據(jù)中,以便可以將相似畫面分段中的畫面分段識別為與所具有的音頻信號電平至少等于預(yù)確定電平的音頻信號分段相對應(yīng)的畫面分段。
另外,通過第六實施例的再現(xiàn)系統(tǒng)進行的操作也與如前所述的第五實施例中的那些操作相同。并且,當接收到對摘要再現(xiàn)處理的執(zhí)行作出請求的命令時,為了進行摘要再現(xiàn)處理,按照受系統(tǒng)控制器17控制的再現(xiàn)控制單元9執(zhí)行的控制,從記錄媒體8中讀出用于摘要再現(xiàn)處理的畫面分段的信號,作為一部分多路復(fù)用數(shù)據(jù)。多路復(fù)用數(shù)據(jù)與加入到該多路復(fù)用數(shù)據(jù)中作為用于識別相似畫面分段的信息的識別信息一起,已經(jīng)被記錄到記錄媒體8上,這些相似畫面分段作為分類處理的結(jié)果被包括在該多路復(fù)用數(shù)據(jù)之中。在這種情況下,如果具有長于設(shè)置的分段長度t的長度,進行跳過其持續(xù)時間等于間隔分段長度s的部分的處理。
除此之外,將包括由識別信號檢測單元16檢測的預(yù)確定時間印記信號的信號供應(yīng)給系統(tǒng)控制器17,然后,系統(tǒng)控制器17從這些信號中檢測再現(xiàn)時刻,以便在分類顯示單元19上顯示當前再現(xiàn)位置,并在分類顯示單元19等上顯示作為代表性畫面的在跳過點上的畫面場景,這樣,可以使摘要再現(xiàn)處理易于被用戶理解。
<通過第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備500的操作>
通過參照如圖35和36所示的流程圖,如下的描述將說明在再現(xiàn)和記錄處理期間,第六實施例的記錄/再現(xiàn)設(shè)備500進行的操作。如圖35和36所示的流程圖所代表的操作是當用戶通過用戶輸入I/F18輸入作出進行再現(xiàn)或記錄處理的請求的命令時,記錄/再現(xiàn)設(shè)備500進行的處理。
注意,在請求再現(xiàn)處理的情況下,在如下的描述中,假設(shè)多路復(fù)用數(shù)據(jù)與作為相似性分類處理的結(jié)果獲得的每個相似畫面分段的相同識別信息一起已經(jīng)存儲在記錄媒體8上。
當用戶輸入對進行再現(xiàn)或記錄處理作出請求的命令時,流程圖從步驟S501開始,在步驟S501中,系統(tǒng)控制器17確定該命令是請求再現(xiàn)處理還是記錄處理的命令。如果在步驟S501中進行的操作生成的確定結(jié)果指示該命令是作出再現(xiàn)處理的請求的命令,則操作流程轉(zhuǎn)到步驟S502,在步驟S502中,系統(tǒng)控制器17控制記錄/再現(xiàn)設(shè)備500的部件將記錄/再現(xiàn)設(shè)備500置于再現(xiàn)模式下,開始從記錄媒體8中讀出所需節(jié)目的多路復(fù)用數(shù)據(jù)的操作。
然后,在下一個步驟S503中,進一步檢查再現(xiàn)命令,以確定所請求的再現(xiàn)處理是否是特殊再現(xiàn)處理,即,摘要再現(xiàn)處理。如果在步驟S503中進行的操作生成的確定結(jié)果指示所請求的再現(xiàn)處理是摘要再現(xiàn)處理,操作流程轉(zhuǎn)到步驟S504,在步驟S504中,檢測要通過識別信號檢測單元16再現(xiàn)的多路復(fù)用數(shù)據(jù)的識別信息。由此,操作流程轉(zhuǎn)到步驟S505,確定要再現(xiàn)的信息信號是否是用于摘要再現(xiàn)處理的畫面分段的多路復(fù)用數(shù)據(jù)。
如果在步驟S505中進行的操作生成的確定結(jié)果指示要再現(xiàn)的信息信號是用于摘要再現(xiàn)處理的畫面分段的多路復(fù)用數(shù)據(jù),操作流程轉(zhuǎn)到步驟S506,在步驟S506中,通過再現(xiàn)多路復(fù)用數(shù)據(jù)進行摘要再現(xiàn)處理,然后,在下一個步驟S507中,檢測經(jīng)過的再現(xiàn)時間的長度。
隨后,操作流程轉(zhuǎn)到步驟S508,確定作為經(jīng)過的再現(xiàn)時間的長度的在步驟S507中檢測的長度是否已經(jīng)變成等于設(shè)置的分段長度t。如果在步驟S508中進行的操作生成的確定結(jié)果指示該長度等于設(shè)置的分段長度t的數(shù)據(jù)已經(jīng)得到再現(xiàn),操作流程轉(zhuǎn)到步驟S509,在步驟S509中,進行跳過間隔分段長度s的操作。隨后,操作流程轉(zhuǎn)到步驟S510,確定用戶是否已經(jīng)輸入停止摘要再現(xiàn)處理的命令。
如果在步驟S510中進行的操作生成的確定結(jié)果指示用戶還沒有輸入停止摘要再現(xiàn)處理的命令,操作流程轉(zhuǎn)到步驟S511,確定用戶是否已經(jīng)輸入改變操作模式的命令。如果在步驟S511中進行的操作生成的確定結(jié)果指示用戶還沒有輸入改變操作模式的命令,操作流程返回到步驟S504,從這個步驟開始重復(fù)如上所述的操作。這樣,繼續(xù)進行摘要再現(xiàn)處理。
另一方面,如果在步驟S511中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入改變操作模式的命令,操作流程返回到步驟S501,從這個步驟開始全面重復(fù)如上所述的操作。這樣,按照用戶輸入的命令,可以進行從記錄媒體中再現(xiàn)節(jié)目的普通再現(xiàn)處理、從記錄媒體中再現(xiàn)節(jié)目的摘要再現(xiàn)處理、或?qū)⒐?jié)目存儲到記錄媒體上的記錄處理。
另一方面,如果在步驟S510中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入停止摘要再現(xiàn)處理的命令,系統(tǒng)控制器17結(jié)束如圖35和36所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S508中進行的操作生成的確定結(jié)果指示再現(xiàn)長度等于設(shè)置的分段長度t的數(shù)據(jù)的摘要再現(xiàn)處理還沒有完成,操作流程轉(zhuǎn)到如圖36所示的續(xù)流程圖的步驟S512,確定用戶是否已經(jīng)輸入停止摘要再現(xiàn)處理的命令。
如果在步驟S512中進行的操作生成的確定結(jié)果指示用戶還沒有輸入停止摘要再現(xiàn)處理的命令,操作流程轉(zhuǎn)到步驟S513,確定用戶是否已經(jīng)輸入改變操作模式的命令。如果在步驟S513中進行的操作生成的確定結(jié)果指示用戶還沒有輸入改變操作模式的命令,操作流程返回到如圖35所示的主流程圖的步驟S504,從這個步驟開始重復(fù)如上所述的操作。這樣繼續(xù)進行摘要再現(xiàn)處理。
另一方面,如果在步驟S513中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入改變操作模式的命令,操作流程返回到如圖35所示的主流程圖的步驟S501,從這個步驟開始全面重復(fù)如上所述的操作。這樣,按照用戶輸入的命令,可以進行從記錄媒體中再現(xiàn)節(jié)目的普通再現(xiàn)處理,從記錄媒體中再現(xiàn)節(jié)目的摘要再現(xiàn)處理,或?qū)⒐?jié)目存儲到記錄媒體上的記錄處理。
另一方面,如果在步驟S512中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入停止摘要再現(xiàn)處理的命令,系統(tǒng)控制器17結(jié)束如圖35和36所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在步驟S501中進行的操作生成的確定結(jié)果指示該命令是對記錄處理作出請求的命令,操作流程轉(zhuǎn)到如圖36所示的續(xù)流程圖的步驟S514。在步驟S514中,系統(tǒng)控制器17控制記錄/再現(xiàn)設(shè)備500的部件將記錄/再現(xiàn)設(shè)備500置于記錄模式下,開始將供應(yīng)的視頻和音頻信號存儲到記錄媒體8中的操作。
然后,操作流程轉(zhuǎn)到步驟S515,確定用戶是否已經(jīng)輸入停止記錄處理的命令。如果在步驟S515中進行的操作生成的確定結(jié)果指示用戶還沒有輸入停止記錄處理的命令,操作流程轉(zhuǎn)到步驟S516,確定用戶是否已經(jīng)輸入改變操作模式的命令。
如果在步驟S516中進行的操作生成的確定結(jié)果指示用戶還沒有輸入改變操作模式的命令,操作流程返回到步驟S514,從這個步驟開始重復(fù)如上所述的操作。這樣,繼續(xù)進行記錄處理。
另一方面,如果在步驟S516中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入改變操作模式的命令,操作流程返回到如圖35所示的主流程圖的步驟S501,從這個步驟開始全面重復(fù)如上所述的操作。這樣,按照用戶輸入的命令,可以進行從記錄媒體中再現(xiàn)節(jié)目的普通再現(xiàn)處理,從記錄媒體中再現(xiàn)節(jié)目的摘要再現(xiàn)處理,或?qū)⒐?jié)目存儲到記錄媒體上的記錄處理。
另一方面,如果在步驟S514中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入停止記錄處理的命令,系統(tǒng)控制器17結(jié)束如圖35和36所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
另一方面,如果在如圖35所示的主流程圖的步驟S503中進行的操作生成的確定結(jié)果指示所請求的再現(xiàn)處理不是摘要再現(xiàn)處理,操作流程轉(zhuǎn)到如圖36所示的續(xù)流程圖的步驟S517。在這個步驟中,系統(tǒng)控制器17控制記錄/再現(xiàn)設(shè)備500的部件將記錄/再現(xiàn)設(shè)備500置于普通再現(xiàn)模式下,開始從記錄媒體8中再現(xiàn)所需節(jié)目的多路復(fù)用數(shù)據(jù)的普通再現(xiàn)處理。
隨后,操作流程轉(zhuǎn)到步驟S518,確定用戶是否已經(jīng)輸入停止普通再現(xiàn)處理的命令。如果在步驟S518中進行的操作生成的確定結(jié)果指示用戶還沒有輸入停止普通再現(xiàn)處理的命令,操作流程轉(zhuǎn)到步驟S519,確定用戶是否已經(jīng)輸入改變操作模式的命令。
如果在步驟S519中進行的操作生成的確定結(jié)果指示用戶還沒有輸入改變操作模式的命令,操作流程返回到步驟S517,從這個步驟開始重復(fù)如上所述的操作。這樣,繼續(xù)進行摘要再現(xiàn)處理。
另一方面,如果在步驟S519中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入改變操作模式的命令,操作流程返回到如圖35所示的主流程圖的步驟S501,從這個步驟開始全面重復(fù)如上所述的操作。這樣,按照用戶輸入的命令,可以進行從記錄媒體中再現(xiàn)節(jié)目的普通再現(xiàn)處理,從記錄媒體中再現(xiàn)節(jié)目的摘要再現(xiàn)處理,或?qū)⒐?jié)目存儲到記錄媒體上的記錄處理。
另一方面,如果在步驟S517中進行的操作生成的確定結(jié)果指示用戶已經(jīng)輸入停止普通再現(xiàn)處理的命令,系統(tǒng)控制器17結(jié)束如圖35和36所示的流程圖所代表的操作的執(zhí)行。然后,記錄/再現(xiàn)設(shè)備500通常進入等待用戶輸入下一個命令的狀態(tài)。
<第六實施例總結(jié)>
如上所述,在通過第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備中,即使在記錄的節(jié)目中存在相對長的相似畫面分段,也可以通過適當?shù)貫檎佻F(xiàn)處理設(shè)置畫面分段,進行摘要再現(xiàn)處理,以便用戶可以有效地和有效率地掌握節(jié)目的內(nèi)容。
注意,當然可以讓用戶事先或在適當時刻確定設(shè)置的分段長度t和間隔分段長度s。
<其它>
在第一到第六實施例中,畫面相似性處理和創(chuàng)建相似畫面分段的處理基于壓縮MPEG數(shù)據(jù)的I-畫面單元。但是,這些處理段的基礎(chǔ)決不局限于壓縮MPEG數(shù)據(jù)的I-畫面。例如,也可以對壓縮前數(shù)據(jù)的每個幀檢測特征,然后,根據(jù)檢測的特征生成相似畫面分段。
另外,也可以提供具有包括通過第一到第六實施例實現(xiàn)的記錄/再現(xiàn)設(shè)備的所有功能的配置或具有只包括通過第一到第六實施例實現(xiàn)的適當選擇的兩種或更多種記錄/再現(xiàn)設(shè)備的功能的配置的記錄/再現(xiàn)設(shè)備。
除此之外,記錄/再現(xiàn)設(shè)備的記錄媒體8決不局限于諸如硬盤之外的磁盤,而是,記錄媒體8可以是諸如光盤、磁光盤或半導(dǎo)體存儲器之類具有相對大存儲容量的可隨機訪問記錄媒體的任何一種。
并且,通過如上所述的實施例實現(xiàn)的設(shè)備決不局限于記錄/再現(xiàn)設(shè)備,而是,除此之外,該設(shè)備還可以是與諸如通信設(shè)備和廣播用接收設(shè)備之類各種類型的家用電子設(shè)備連接的網(wǎng)絡(luò)型家用服務(wù)器。
此外,本發(fā)明也可通過將包括如前所述的縮小畫面(或縮略畫面)、如上所述的概要信息、和將縮小畫面和概要信息與主要信息相關(guān)聯(lián)的如上所述識別符在內(nèi)的數(shù)據(jù)用作所謂的元數(shù)據(jù),而用作控制諸如視頻和音頻信息之類的信息的再現(xiàn)的方法。
工業(yè)實用性記錄在大存儲容量的記錄媒體上的數(shù)字信息信號可以得到有效地和有效率地使用,還可以促進記錄媒體的有效率使用。另外,可以提供給予用戶許多方便的信息信號處理設(shè)備。
權(quán)利要求
1.一種信息信號處理設(shè)備,包括特征信息檢測裝置,用于針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;分類處理裝置,用于根據(jù)所述特征信息檢測裝置生成的檢測結(jié)果,將所述第一信息信號的分段分類成呈現(xiàn)所述特征的相似性的分段;信息信號生成裝置,用于針對所述第一信息信號的所述每個預(yù)確定處理單元,生成與所述第一信息信號具有關(guān)聯(lián)關(guān)系的第二信息信號;識別信息創(chuàng)建裝置,用于根據(jù)所述分類處理裝置生成的分類結(jié)果,創(chuàng)建有關(guān)識別符的信息,每個識別符用于識別要用在列表顯示中的所述第二信息信號,并用于針對所述分類的分段的每一個來識別所述第二信息信號的顯示位置;和記錄裝置,用于將所述第一信息信號、所述第二信息信號和所述有關(guān)識別符的信息記錄到記錄媒體上。
2.一種信息信號處理設(shè)備,包括特征信息檢測裝置,用于針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;分類處理裝置,用于根據(jù)所述特征信息檢測裝置生成的檢測結(jié)果,將所述第一信息信號的分段分類成呈現(xiàn)所述特征的相似性的分段;信息信號生成裝置,用于針對由所述分類處理裝置生成作為分類結(jié)果的所述分段的每一個,根據(jù)以所述特征信息檢測裝置生成的檢測結(jié)果為基礎(chǔ)確定的一個處理單元的所述第一信息信號,生成第二信息信號;識別信息創(chuàng)建裝置,用于根據(jù)所述分類處理裝置生成的分類結(jié)果,創(chuàng)建有關(guān)識別符的信息,每個識別符用于識別將要用在列表顯示中的所述第二信息信號的顯示位置;和記錄裝置,用于將所述第一信息信號、所述第二信息信號和所述識別信息信號記錄到記錄媒體上。
3.一種信息信號處理方法,包括如下步驟針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;根據(jù)有關(guān)所述第一信息信號的特征的所述檢測的信息,將所述第一信息信號的分段分類成呈現(xiàn)所述特征的相似性的分段;針對所述第一信息信號的所述每個預(yù)確定處理單元,生成與所述第一信息信號具有關(guān)聯(lián)關(guān)系的第二信息信號;根據(jù)呈現(xiàn)所述特征的相似性的所述分段的分類結(jié)果,創(chuàng)建有關(guān)識別符的信息,每個識別符用于識別將要用在列表顯示中的所述第二信息信號,并用于針對呈現(xiàn)所述特征的相似性的所述分段的每一個來識別所述第二信息信號的顯示位置;和除了將要記錄的所述第一信息信號之外,還把所述第二信息信號和所述識別符記錄到記錄媒體上。
4.一種信息信號處理方法,包括如下步驟針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;根據(jù)有關(guān)所述第一信息信號的特征的所述檢測的信息,將所述第一信息信號的分段分類成呈現(xiàn)所述特征的相似性的分段;針對呈現(xiàn)所述分類特征的相似性的所述分段的每一個,根據(jù)以有關(guān)所述第一信息信號的特征的所述檢測的信息為基礎(chǔ)確定的一個處理單元的所述第一信息信號,創(chuàng)建第二信息信號;根據(jù)針對呈現(xiàn)所述分類特征的相似性的所述分段的每一個的分類結(jié)果,創(chuàng)建每一個用于識別將要用在列表顯示中的所述第二信息信號的顯示位置的識別信息;和除了將要記錄的所述第一信息信號之外,還把所述第二信息信號和所述有關(guān)識別符的信息記錄到記錄媒體上。
5.一種信息信號處理設(shè)備,包括特性信息檢測裝置,用于針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;識別信息生成裝置,用于根據(jù)所述特征信息檢測裝置生成的檢測結(jié)果,生成用于識別所述第一信息信號的預(yù)確定信號分段的識別信息;和記錄裝置,用于將所述第一信息信號記錄在記錄媒體的第一記錄區(qū)中以及將第二信息信號記錄在所述記錄媒體的第二記錄區(qū)中,其中所述第一和第二記錄區(qū)是按照事先對所述記錄媒體確定的記錄方法設(shè)置的;和所述第二信息信號作為由所述識別信息識別的所述預(yù)確定信號分段中的信息信號,是包括在所述第一信息信號中的信息信號。
6.根據(jù)權(quán)利要求5所述的信息信號處理設(shè)備,其中,所述記錄裝置將多個所述第一信息信號記錄在用于容納所述第一信息信號且具有可變存儲大小的所述第一記錄區(qū)中,作為一群所述第一信息信號,并將多個所述第二信息信號記錄在用于容納所述第二信息信號且具有可變存儲大小的所述第二記錄區(qū)中,作為一群所述第二信息信號。
7.根據(jù)權(quán)利要求5所述的信息信號處理設(shè)備,其中,所述記錄裝置提供用于只記錄一段所述第一信息信號的所述第一記錄區(qū)和用于只記錄一段所述第二信息信號的所述第二記錄區(qū),并將所述段的所述第一信息信號和所述段的所述第二信息信號分別記錄在所述第一和第二記錄區(qū)中。
8.根據(jù)權(quán)利要求5所述的信息信號處理設(shè)備,所述信息信號處理設(shè)備還具有用于接收指定所選記錄方法的選擇輸入的選擇輸入接收裝置,其中,所述記錄裝置按照所述選擇輸入接收裝置接收的選擇輸入所指定的所選記錄方法,在所述記錄媒體中設(shè)置所述第一和第二記錄區(qū);和將第一信息信號存儲在所述第一記錄區(qū)中并將第二信息信號存儲在所述第二記錄區(qū)中。
9.根據(jù)權(quán)利要求8所述的信息信號處理設(shè)備,其中,所述所選記錄方法至少可以是將多個所述第一信息信號記錄在用于容納所述第一信息信號且具有可變存儲大小的所述第一記錄區(qū),作為一群所述第一信息信號,和將多個所述第二信息信號記錄在用于容納所述第二信息信號且具有可變存儲大小的所述第二記錄區(qū),作為一群所述第二信息信號的第一記錄方法;或提供用于只記錄一段所述第一信息信號的所述第一記錄區(qū)和與所述第一記錄區(qū)相鄰作為用于只記錄一段所述第二信息信號的區(qū)域的所述第二記錄區(qū),以形成交替排列,并將所述段的所述第一信息信號和所述段的所述第二信息信號分別記錄在所述第一和第二記錄區(qū)中的第二記錄方法。
10.根據(jù)權(quán)利要求5、6、7、8和9的任何一項所述的信息信號處理設(shè)備,還含有存儲大小檢測裝置,用于檢測保留在所述記錄媒體中的空白區(qū)的存儲大??;和記錄控制裝置,用于在將所述第一信息信號記錄到所述記錄媒體上的處理中,在所述存儲大小檢測裝置生成的檢測結(jié)果指示保留在所述記錄媒體中的空白區(qū)的存儲大小小到不足以存儲所述最早的第一信息信號的情況下,執(zhí)行控制,將所述最新第一信息信號記錄在包括于所述第一記錄區(qū)之內(nèi)的子區(qū)中所述最早第一信息之上,而不侵蝕(erode)所述第二記錄區(qū),其中該子區(qū)是作為記錄最早第一信息的子區(qū)。
11.一種信息信號處理方法,包括如下步驟針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;根據(jù)有關(guān)所述第一信息信號的特征的所述檢測的信息,生成用于識別所述第一信息信號的預(yù)確定信息信號的識別信息;和將所述第一信息信號記錄在記錄媒體的第一記錄區(qū)中并將第二信息信號記錄在所述記錄媒體的第二記錄區(qū)中,其中所述第一和第二記錄區(qū)是按照事先對所述記錄媒體確定的記錄方法設(shè)置的;和所述第二信息信號是由所述識別信息識別的所述預(yù)確定信息信號,位于所述第一信息信號的預(yù)確定信號分段中。
12.根據(jù)權(quán)利要求11所述的信息信號處理方法,由此,將多個所述第一信息信號記錄在用于容納所述第一信息信號且具有可變存儲大小的所述第一記錄區(qū),作為一群所述第一信息信號,并將多個所述第二信息信號記錄在用于容納所述第二信息信號而具有可變存儲大小的所述第二記錄區(qū),作為一群所述第二信息信號。
13.根據(jù)權(quán)利要求11所述的信息信號處理方法,其中,提供用于只記錄一段所述第一信息信號的所述第一記錄區(qū)和用于只記錄一段所述第二信息信號的所述第二記錄區(qū),并將所述段的所述第一信息信號和所述段的所述第二信息信號分別記錄在所述第一和第二記錄區(qū)中。
14.根據(jù)權(quán)利要求11所述的信息信號處理方法,還含有如下步驟接收指定所選記錄方法的選擇輸入;按照指定所述所選記錄方法的所述選擇輸入所指定的所選記錄方法,在所述記錄媒體中設(shè)置所述第一和第二記錄區(qū);和將第一信息信號記錄在所述第一記錄區(qū)中,將第二信息信號記錄在所述第二記錄區(qū)中。
15.根據(jù)權(quán)利要求14所述的信息信號處理方法,其中,所述所選記錄方法至少可以是將多個所述第一信息信號記錄在用于容納所述第一信息信號且具有可變存儲大小的所述第一記錄區(qū),作為一群所述第一信息信號,和將多個所述第二信息信號記錄在用于容納所述第二信息信號且具有可變存儲大小的所述第二記錄區(qū),作為一群所述第二信息信號的第一記錄方法;或提供用于只記錄一段所述第一信息信號的所述第一記錄區(qū)和與所述第一記錄區(qū)相鄰作為用于只記錄一段所述第二信息信號的區(qū)域的所述第二記錄區(qū),以形成交替排列,并將所述段的所述第一信息信號和所述段的所述第二信息信號分別記錄在所述第一和第二記錄區(qū)中的第二記錄方法。
16.根據(jù)權(quán)利要求11、12、13、14和15的任何一項所述的信息信號處理方法,還含有如下步驟檢測保留在所述記錄媒體中的空白區(qū)的存儲大?。缓驮趯⑺龅谝恍畔⑿盘栍涗浀剿鲇涗浢襟w上的處理中,在所述存儲大小檢測裝置生成的檢測結(jié)果指示保留在所述記錄媒體中的空白區(qū)的存儲大小小到不足以存儲所述最早的第一信息信號的情況下,執(zhí)行控制,將所述最新第一信息信號記錄在包括于所述第一記錄區(qū)之內(nèi)的子區(qū)中所述最早第一信息之上,而不侵蝕所述第二記錄區(qū),其中該子區(qū)是作為記錄最早第一信息的子區(qū)。
17.一種信息信號處理設(shè)備,包括特征信息檢測裝置,用于針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;識別信息生成裝置,用于根據(jù)所述特征信息檢測裝置生成的檢測結(jié)果,生成用于識別所述第一信息信號的預(yù)確定信息信號的識別信息;識別信息加入裝置,用于將所述識別信息生成裝置生成的所述識別信息加入所述第一信息信號中;第一記錄裝置,用于將包括由所述識別信息加入裝置加入其中的所述識別信息在內(nèi)的所述第一信息信號記錄到第一記錄媒體上;存儲大小檢測裝置,用于檢測在預(yù)確定時刻保留在所述第一記錄媒體中的空白區(qū)的存儲大小;和第二記錄裝置,用于在所述存儲大小檢測裝置生成的檢測結(jié)果指示保留在所述記錄媒體中的空白區(qū)的存儲大小等于或小于預(yù)確定值的情況下,將一個或多個所述第一信息信號的所有數(shù)據(jù)從所述第一記錄媒體移動到第二記錄媒體,并在所述第一記錄媒體中留下信息信號,該信息信號存儲在包括在所述移動的第一信息信號的每一個中的信號分段中并由所述識別符識別,作為第二信息信號。
18.一種信息信號處理設(shè)備,包括特征信息檢測裝置,用于針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;識別信息生成裝置,用于根據(jù)由所述特征信息檢測裝置生成的檢測結(jié)果,生成用于識別所述第一信息信號的預(yù)確定信息信號的識別信息;第一記錄裝置,用于將所述第一信息信號與第二信息信號一起記錄到第一記錄媒體上,所述第二信息信號是通過所述識別信息識別并包括在所述第一信息信號中的所述預(yù)確定信息信號;存儲大小檢測裝置,用于檢測在預(yù)確定時刻保留在所述第一記錄媒體中的空白區(qū)的存儲大?。缓偷诙涗浹b置,用于在所述存儲大小檢測裝置生成的檢測結(jié)果指示保留在所述記錄媒體中的空白區(qū)的存儲大小小于預(yù)確定值的情況下,只將一個或更多的所述第一信息信號從所述第一記錄媒體移動到第二記錄媒體。
19.一種信息信號處理方法,包括如下步驟針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;根據(jù)有關(guān)所述第一信息信號的特征的所述檢測的信息,生成用于識別所述第一信息信號的預(yù)確定信息信號的識別信息;將所述生成的識別符加入所述第一信息信號中;將包括加入其中的所述識別信息在內(nèi)的所述第一信息信號記錄到第一記錄媒體上;檢測在預(yù)確定時刻保留在所述第一記錄媒體中的空白區(qū)的存儲大?。缓驮跈z測結(jié)果指示保留在所述第一記錄媒體中的空白區(qū)的存儲大小小于預(yù)確定值的情況下,將一個或更多的所述第一信息信號的所有數(shù)據(jù)從所述第一記錄媒體移動到第二記錄媒體,并在所述第一記錄媒體中留下信息信號,該信息信號存儲在包括在所述移動的第一信息信號的每一個中的信號分段中并由所述識別信息識別,作為第二信息信號。
20.一種信息信號處理方法,包括如下步驟針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;根據(jù)有關(guān)所述第一信息信號的特征的所述檢測的信息,生成用于識別所述第一信息信號的預(yù)確定信息信號的識別信息;將所述第一信息信號與第二信息信號一起記錄到第一記錄媒體上,所述第二信息信號是由所述識別信息識別并包括在所述第一信息信號中的所述預(yù)確定信息信號;檢測在預(yù)確定時刻保留在所述第一記錄媒體中的空白區(qū)的存儲大??;和在檢測結(jié)果指示保留在所述第一記錄媒體中的空白區(qū)的存儲大小小于預(yù)確定值的情況下,只將一個或更多的所述第一信息信號的全部或一部分從所述第一記錄媒體移動到第二記錄媒體。
21.一種信息信號處理設(shè)備,包括特征信息檢測裝置,用于針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;相似畫面分段檢測裝置,用于根據(jù)所述特征信息檢測裝置生成的檢測結(jié)果,檢測所述第一信息信號的相似畫面分段;信息信號生成裝置,用于在按照所述相似畫面分段檢測裝置生成的檢測結(jié)果事先確定的位置上,生成與包括在所述第一信息信號中的一部分具有關(guān)聯(lián)關(guān)系的第二信息信號;關(guān)聯(lián)信息生成裝置,用于生成在時間方面或在位置方面將所述第一信息信號與所述第二信息信號相關(guān)聯(lián)的關(guān)聯(lián)信息;記錄裝置,用于將所述第一信息信號、所述信息信號生成裝置生成的所述第二信息信號、和所述關(guān)聯(lián)信息生成裝置生成的所述關(guān)聯(lián)信息記錄到記錄媒體上;和顯示控制裝置,用于以列表格式,按時間順序,在顯示設(shè)備上顯示根據(jù)所述第二信息信號的信息段。
22.根據(jù)權(quán)利要求21所述的信息信號處理設(shè)備,還含有選擇輸入接收裝置,用于接收根據(jù)以列表格式顯示在所述顯示設(shè)備上的所述第二信息信號選擇至少一個畫面的選擇輸入;和再現(xiàn)控制裝置,用于再現(xiàn)從與由所述選擇輸入接收裝置接收的所述選擇輸入選擇的所述畫面相對應(yīng)的位置開始的所述第一信息信號。
23.一種信息信號處理方法,包括如下步驟針對第一信息信號的每個預(yù)確定處理單元,檢測有關(guān)將要記錄的所述第一信息信號的特征的信息;根據(jù)有關(guān)所述第一信息信號的特征的所述檢測的信息,檢測所述第一信息信號的相似畫面分段;從位于按照所述檢測的相似畫面分段事先確定的位置上的所述第一信息信號中生成與包括在所述第一信息信號中的一部分具有關(guān)聯(lián)關(guān)系的第二信息信號;生成在時間方面或在位置方面將所述第一信息信號與所述第二信息信號相關(guān)聯(lián)的關(guān)聯(lián)信息;將所述第一信息信號、所述第二信息信號、和所述關(guān)聯(lián)信息記錄到記錄媒體上;和以列表格式,按時間順序,在顯示設(shè)備上顯示根據(jù)所述第二信息信號的信息段。
24.根據(jù)權(quán)利要求23所述的信息信號處理方法,還含有如下步驟接收根據(jù)以列表格式顯示在所述顯示設(shè)備上的所述第二信息信號來選擇至少一個畫面的選擇輸入;和再現(xiàn)從與由所述接收的選擇輸入選擇的所述畫面相對應(yīng)的位置開始的所述第一信息信號。
25.一種信息信號處理設(shè)備,用于在完成了對每個預(yù)確定處理單元檢測所述信息信號的特征,根據(jù)所述檢測的特征將所述信息信號的分段分類成呈現(xiàn)所述特征的相似性的分段,和將用于識別所述分類的分段的識別符加入所述信息信號中的處理之后,再現(xiàn)記錄到記錄媒體上的信息信號,所述信息信號處理設(shè)備包括讀取裝置,用于讀出記錄在所述記錄媒體上的所述信息信號;執(zhí)行命令輸入接收裝置,用于接收對執(zhí)行特殊再現(xiàn)處理作出請求的命令輸入;模式選擇裝置,用于一旦通過所述執(zhí)行命令輸入接收裝置接收到對執(zhí)行特殊再現(xiàn)處理作出請求的命令輸入,則根據(jù)有關(guān)加入到要從所述記錄媒體再現(xiàn)的所述信息信號中的特性的信息或根據(jù)從用戶接收的命令輸入,從多種特殊再現(xiàn)模式中選擇一種特殊再現(xiàn)模式;和控制裝置,用于按照所述模式選擇裝置選擇的所述特殊再現(xiàn)模式,控制所述讀取裝置改變要從所述記錄媒體中讀出的所述信息信號的范圍。
26.一種信息信號處理方法,用于在完成了對每個預(yù)確定處理單元檢測所述信息信號的特征,及根據(jù)所述檢測的特征將所述信息信號的分段分類成呈現(xiàn)所述特征的相似性的分段的處理之后,再現(xiàn)記錄到記錄媒體上的信息信號,所述信息信號處理方法包括如下步驟接收對執(zhí)行特殊再現(xiàn)處理作出請求的命令輸入;一旦接收到對執(zhí)行特殊再現(xiàn)處理作出請求的命令輸入,則根據(jù)有關(guān)加入到要從所述記錄媒體再現(xiàn)的所述信息信號中的特性的信息或根據(jù)從用戶接收的命令輸入,從多種特殊再現(xiàn)模式中選擇一種特殊再現(xiàn)模式;和按照所述選擇的特殊再現(xiàn)模式,執(zhí)行控制以改變要從所述記錄媒體中讀出的所述信息信號的范圍。
27.一種信息信號處理設(shè)備,用于在完成了對每個預(yù)確定處理單元檢測所述信息信號的特征,根據(jù)所述檢測的特征將所述信息信號的分段分類成呈現(xiàn)所述特征的相似性的相似畫面分段,和將用于識別所述分類的分段的識別符加入所述信息信號中的處理之后,再現(xiàn)記錄到記錄媒體上的信息信號,所述信息信號處理設(shè)備包括執(zhí)行命令輸入接收裝置,用于接收對執(zhí)行特殊再現(xiàn)處理作出請求的命令輸入;讀取裝置,用于讀出正在從所述記錄媒體中再現(xiàn)的所述信息信號;和再現(xiàn)控制裝置,用于一旦通過所述執(zhí)行命令輸入接收裝置接收到對執(zhí)行特殊再現(xiàn)處理作出請求的所述命令輸入,則執(zhí)行控制,從所述記錄媒體中再現(xiàn)作為所述信息信號的分段的所述讀取裝置從所述記錄媒體中讀出的所述分類的分段的每一個的一些部分,其中,從所述記錄媒體中再現(xiàn)的所述一些部分的每一個具有等于預(yù)確定設(shè)置的分段長度的長度并相互分開達預(yù)確定間隔分段長度。
28.根據(jù)權(quán)利要求27所述的信息信號處理設(shè)備,還含有重要分段檢測裝置,用于從包括在所述信息信號中的分段當中檢測重要分段,作為呈現(xiàn)所述特征的相似性的所述分段,其中,所述再現(xiàn)控制裝置設(shè)置這樣的再現(xiàn)分段,以使所述再現(xiàn)分段具有等于所述預(yù)確定設(shè)置的分段長度的長度并包括所述重要分段檢測裝置檢測的所述重要分段。
29.一種信息信號處理方法,用于在完成了對每個預(yù)確定處理單元檢測所述信息信號的特征,根據(jù)所述檢測的特征將所述信息信號的分段分類成呈現(xiàn)所述特征的相似性的相似畫面分段,和將用于識別所述分類的分段的識別符加入所述信息信號中的處理之后,再現(xiàn)記錄到記錄媒體上的信息信號,所述信息信號處理方法包括如下步驟接收對執(zhí)行特殊再現(xiàn)處理作出請求的命令輸入;一旦接收到對執(zhí)行特殊再現(xiàn)處理作出請求的所述命令輸入,則讀出正在從所述記錄媒體中再現(xiàn)的所述信息信號;和一旦接收到對執(zhí)行特殊再現(xiàn)處理作出請求的所述命令輸入,則執(zhí)行控制,從所述記錄媒體中再現(xiàn)作為所述信息信號的分段的從所述記錄媒體中讀出的所述分類的分段的每一個的一些部分,其中,從所述記錄媒體中再現(xiàn)的所述一些部分的每一個具有等于預(yù)確定設(shè)置的分段長度的長度并相互分開達預(yù)確定間隔分段長度。
30.根據(jù)權(quán)利要求29所述的信息信號處理方法,還含有如下步驟從包括在所述信息信號中的分段當中檢測重要分段,由此,設(shè)置這樣的再現(xiàn)分段,以使所述再現(xiàn)分段具有等于所述預(yù)確定設(shè)置的分段長度的長度并包括所述重要分段檢測裝置檢測的所述檢測的重要分段。
全文摘要
一種信息信號處理設(shè)備,能夠有效地和有效率地使用記錄在大容量記錄媒體上的多個信息信號并實現(xiàn)對包含信息信號的記錄媒體的有效使用。當將圖像信號記錄到記錄媒體(8)上時,圖像分類單元(5)對圖像信號的相似圖像作出判斷并將相似圖像分類成組。在分類顯示單元(19)上將每組相似圖像間隔的圖像之一顯示成縮略畫面,從而使用戶能夠通過縮略畫面列表顯示來有效地和有效率地掌握記錄在記錄媒體(8)上的圖像信號的內(nèi)容。
文檔編號G11B27/00GK1856993SQ0380602
公開日2006年11月1日 申請日期2003年1月14日 優(yōu)先權(quán)日2002年1月18日
發(fā)明者村林升, 岡本裕成 申請人:索尼株式會社
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
增城市| 通榆县| 和平县| 卢湾区| 天津市| 新河县| 东山县| 任丘市| 柘城县| 麻江县| 灵石县| 建宁县| 黄平县| 三亚市| 平果县| 信宜市| 修武县| 南投县| 长垣县| 那曲县| 岳西县| 锦州市| 江孜县| 梓潼县| 柘荣县| 平塘县| 阿拉善右旗| 漳州市| 安国市| 长海县| 上蔡县| 英吉沙县| 湖南省| 洛浦县| 屏东市| 阜康市| 隆安县| 黑山县| 沂源县| 麻栗坡县| 息烽县|