專利名稱:產(chǎn)生要記錄的信息信號(hào)的方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種產(chǎn)生要記錄的信息信號(hào)的方法、一種再現(xiàn)信息信號(hào)的方法、一種傳輸信息信號(hào)的方法、一種產(chǎn)生要記錄的信息信號(hào)的設(shè)備、一種再現(xiàn)信息信號(hào)的設(shè)備、一種傳輸信息信號(hào)的設(shè)備、一種信息信號(hào)記錄媒體以及一種傳輸信息信號(hào)的計(jì)算機(jī)程序。
背景技術(shù):
在某些情況下,模擬聲頻信號(hào)和伴有模擬聲頻信號(hào)的模擬視頻信號(hào)轉(zhuǎn)換為在記錄媒體上傳輸和記錄的數(shù)字聲頻信號(hào)和數(shù)字視頻信號(hào)。例如,數(shù)字聲頻信號(hào)轉(zhuǎn)換為數(shù)字視頻信號(hào)基于壓縮編碼過(guò)程。在數(shù)字聲頻信號(hào)和數(shù)字視頻信號(hào)之間易于產(chǎn)生時(shí)間誤差。
根據(jù)用于補(bǔ)償在聲頻和視頻之間的這種時(shí)間誤差而設(shè)計(jì)的公知系統(tǒng),將與所需的聲頻重播階段相關(guān)的第一時(shí)序信息加入到數(shù)字聲頻信號(hào)中,同時(shí)將與所需的視頻重播階段相關(guān)的第二時(shí)序信息加入到數(shù)字視頻信號(hào)中。選擇所需的聲頻重播階段和所需的視頻重播階段以在聲音和圖像之間提供同步。在重播的過(guò)程中,通過(guò)數(shù)字聲頻信號(hào)所表示的信息轉(zhuǎn)換為在通過(guò)第一時(shí)序信息所決定的時(shí)刻時(shí)的聲音,而同時(shí)在通過(guò)第二時(shí)序信息所決定的時(shí)刻顯示通過(guò)數(shù)字視頻信號(hào)所表示的信息。結(jié)果,聲頻的重播和視頻的重播彼此同步。
在公知的多路傳輸或記錄系統(tǒng)中,通過(guò)多路傳輸將與相同所需的重播階段相關(guān)的一部分?jǐn)?shù)字聲頻信號(hào)和一部分?jǐn)?shù)字視頻信號(hào)放置在相同的組中的同時(shí)傳輸或記錄它們。這種設(shè)計(jì)使得聲音和圖像的同步重播成為可能。
最近,包含壓縮編碼視頻數(shù)據(jù)和聲音數(shù)據(jù)的多路傳輸數(shù)據(jù)有時(shí)處理為位流(稱為傳輸流或節(jié)目流)的形式,并且這種形式可以使聲音和圖像的同步重播成為可能。一般地,在這種多路傳輸數(shù)據(jù)中并不容易僅僅編輯聲音數(shù)據(jù)。
這種編輯的實(shí)例是后期錄音,后期錄音僅編輯在多路傳輸數(shù)據(jù)(位流)中的聲音數(shù)據(jù)并將聲音數(shù)據(jù)以新的數(shù)據(jù)替換。后期錄音比較復(fù)雜。
日本專利申請(qǐng)公開6-275018/1994公開了記錄和再現(xiàn)設(shè)備,該設(shè)備運(yùn)行在記錄模式或再現(xiàn)模式中。在日本申請(qǐng)6-275018中的設(shè)備的運(yùn)行的記錄模式中,通過(guò)壓縮編碼過(guò)程將來(lái)自N個(gè)源的信息信號(hào)轉(zhuǎn)換為第一數(shù)字信號(hào),并對(duì)第一數(shù)字信號(hào)進(jìn)行調(diào)制并轉(zhuǎn)換為第二數(shù)字信號(hào)。分時(shí)地將第二數(shù)字信號(hào)寫入到記錄媒體中。在運(yùn)行在再現(xiàn)模式的過(guò)程中,分時(shí)地從記錄媒體中讀出第二數(shù)字信號(hào),對(duì)所讀出的第二數(shù)字信號(hào)進(jìn)行解調(diào)并轉(zhuǎn)換回再現(xiàn)的第一數(shù)字信號(hào)。再現(xiàn)的第一數(shù)字信號(hào)轉(zhuǎn)換回再現(xiàn)的信息信號(hào)。同時(shí)輸出再現(xiàn)的信息信號(hào)。
日本專利申請(qǐng)公開11-144378/1999公開了后期錄音的方法,在這種方法中從數(shù)字記錄媒體中讀出包括視頻位流的原始數(shù)據(jù)。對(duì)所讀出的原始數(shù)據(jù)進(jìn)行解碼。與原始數(shù)據(jù)的解碼過(guò)程同步地將聲音數(shù)據(jù)編碼成新的聲頻位流。新的聲頻位流被寫入到在時(shí)間位置上大致對(duì)應(yīng)于原始數(shù)據(jù)記錄區(qū)的數(shù)字記錄媒體的區(qū)域中。
日本專利申請(qǐng)公開P2000-197005A公開了具有區(qū)域“A”和區(qū)域“B”的信息記錄媒體。區(qū)域“A”存儲(chǔ)包括視頻壓縮包和聲頻壓縮包的壓縮包流。區(qū)域“B”存儲(chǔ)具有第一、第二和第三信息片段的表。通過(guò)參考在表中的第一信息片段,確定在區(qū)域“A”中的聲頻壓縮包中有無(wú)聲頻數(shù)據(jù)對(duì)應(yīng)于無(wú)聲。在聲頻壓縮包中的聲頻數(shù)據(jù)對(duì)應(yīng)于無(wú)聲的情況下,可以如下地實(shí)施后期錄音。通過(guò)參考在表中的第二和第三信息片段,將新的聲頻信號(hào)編碼成新的聲頻數(shù)據(jù),并且將新的聲頻數(shù)據(jù)格式化成新的聲頻壓縮包。新的聲頻壓縮包被寫在區(qū)域“A”中的舊的聲頻壓縮包上。
已有技術(shù)中的后期錄音將新的聲頻數(shù)據(jù)寫入到原始多路傳輸主數(shù)據(jù)流中,因此原始多路傳輸主數(shù)據(jù)流改變?yōu)樾碌臄?shù)據(jù)流。一般地,很難將新的多路傳輸主數(shù)據(jù)流再轉(zhuǎn)換回原始數(shù)據(jù)流。
在已有技術(shù)中很難后期錄音大量的新的聲頻信號(hào)并在重播的過(guò)程中從新的聲頻信號(hào)中選擇聲頻信號(hào)。
發(fā)明內(nèi)容
本發(fā)明的一個(gè)目的是提供一種產(chǎn)生要記錄的信息信號(hào)的方法,這種方法使得大量的新的聲頻信號(hào)的后期錄音、在重播的過(guò)程中從新的聲頻信號(hào)中選擇一個(gè)新的聲頻信號(hào)以及聲音和圖像的同步重播成為可能。
本發(fā)明的第二個(gè)目的是提供一種再現(xiàn)信息信號(hào)的改善的方法。
本發(fā)明的第三個(gè)目的是提供一種傳輸信息信號(hào)的改善的方法。
本發(fā)明的第四個(gè)目的是提供一種產(chǎn)生要記錄的信息信號(hào)的改善的設(shè)備。
本發(fā)明的第五個(gè)目的是提供一種再現(xiàn)信息信號(hào)的改善的設(shè)備。
本發(fā)明的第六個(gè)目的是提供一種傳輸信息信號(hào)的改善的設(shè)備。
本發(fā)明的第七個(gè)目的是提供一種改善的信息信號(hào)記錄媒體。
本發(fā)明的第八個(gè)目的是提供一種用于計(jì)算機(jī)傳輸信息信號(hào)的改善的計(jì)算機(jī)程序。
本發(fā)明的第一方面是提供一種產(chǎn)生要記錄的信息信號(hào)的方法。該方法包括如下步驟多路傳輸如下信號(hào)1)從對(duì)視頻信號(hào)的壓縮編碼中得到的壓縮編碼結(jié)果視頻信號(hào),2)從對(duì)與視頻信號(hào)具有同步關(guān)系的第一聲頻信號(hào)進(jìn)行壓縮編碼所得到的第一壓縮編碼結(jié)果聲頻信號(hào),3)與在壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)之間的同步化相關(guān)的參考時(shí)鐘信息信號(hào),以及4)基于參考時(shí)鐘信息信號(hào)并指定獲得AV多路傳輸結(jié)果信號(hào)的視頻信號(hào)的指示時(shí)序的指示時(shí)序信息信號(hào);在重播的過(guò)程中在與視頻信號(hào)同步的同時(shí)產(chǎn)生第二聲頻信號(hào)作為可以再現(xiàn)的替代第一聲頻信號(hào)的替換重播聲頻信號(hào);對(duì)第二聲頻信號(hào)進(jìn)行壓縮編碼以獲得第二壓縮編碼結(jié)果聲頻信號(hào);以及將聲音產(chǎn)生時(shí)序信息信號(hào)加入到第二壓縮編碼結(jié)果聲頻信號(hào)中以獲得替換重播聲頻信號(hào),該聲音產(chǎn)生時(shí)序信息信號(hào)基于參考時(shí)鐘信息信號(hào)并與視頻信號(hào)的同步化相關(guān)。
本發(fā)明的第二方面基于本發(fā)明的第一方面,提供進(jìn)一步包括如下的步驟的方法將該替換重播聲頻信號(hào)劃分為每個(gè)都具有預(yù)定的數(shù)據(jù)大小的包,并將參考時(shí)鐘信息信號(hào)和聲音產(chǎn)生時(shí)序信息信號(hào)與每個(gè)包一起多路傳輸。
本發(fā)明的第三方面基于本發(fā)明的第一方面,提供一種方法,其中該替換重播聲頻信號(hào)包括分別從壓縮編碼聲頻信號(hào)中得到的許多輔助替換重播聲頻信號(hào),并且將不同的標(biāo)識(shí)信號(hào)分別加入到輔助替換重播聲頻信號(hào)中。
本發(fā)明的第四方面提供一種再現(xiàn)信息信號(hào)的方法。該方法包括如下的步驟再現(xiàn)通過(guò)多路傳輸如下的信號(hào)產(chǎn)生的AV多路傳輸結(jié)果信號(hào)1)從對(duì)視頻信號(hào)的壓縮編碼中得到的壓縮編碼結(jié)果視頻信號(hào),2)從對(duì)與視頻信號(hào)具有同步關(guān)系的第一聲頻信號(hào)進(jìn)行壓縮編碼所得到的第一壓縮編碼結(jié)果聲頻信號(hào),3)與在壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)之間的同步化相關(guān)的參考時(shí)鐘信息信號(hào),以及4)基于參考時(shí)鐘信息信號(hào)并指定視頻信號(hào)的指示時(shí)序的指示時(shí)序信息信號(hào);從所再現(xiàn)的AV多路傳輸結(jié)果信號(hào)中再現(xiàn)視頻信號(hào);再現(xiàn)替換重播聲頻信號(hào)以再現(xiàn)第二聲頻信號(hào),并通過(guò)如下的方式產(chǎn)生該替換重播聲頻信號(hào)1)對(duì)第二聲頻信號(hào)進(jìn)行壓縮編碼以獲得第二壓縮編碼結(jié)果聲頻信號(hào),以及2)將聲音產(chǎn)生時(shí)序信息信號(hào)加入到第二壓縮編碼結(jié)果聲頻信號(hào)中,該聲音產(chǎn)生時(shí)序信息信號(hào)指定第二壓縮編碼結(jié)果聲頻信號(hào)的聲音產(chǎn)生時(shí)序;從再現(xiàn)的AV多路傳輸結(jié)果信號(hào)中導(dǎo)出參考時(shí)鐘信息信號(hào)和指示時(shí)序信息信號(hào);從再現(xiàn)的AV多路傳輸結(jié)果信號(hào)中導(dǎo)出壓縮編碼結(jié)果視頻信號(hào);對(duì)所導(dǎo)出的壓縮編碼結(jié)果視頻信號(hào)進(jìn)行解碼以得到解碼結(jié)果視頻信號(hào);響應(yīng)所導(dǎo)出的參考時(shí)鐘信息信號(hào)和所導(dǎo)出的指示時(shí)序信息信號(hào)將解碼結(jié)果視頻信號(hào)作為輸出視頻信號(hào)提供;從所再現(xiàn)的替換重播聲頻信號(hào)中導(dǎo)出聲音產(chǎn)生時(shí)序信息信號(hào)和第二聲頻信號(hào);響應(yīng)所導(dǎo)出的參考時(shí)鐘信息信號(hào)和所導(dǎo)出的聲音產(chǎn)生時(shí)序信息信號(hào)將所導(dǎo)出的第二聲頻信號(hào)作為輸出聲頻信號(hào)提供;比較參考時(shí)鐘信息信號(hào)和指示時(shí)序信息信號(hào)以得到第一比較結(jié)果;根據(jù)第一比較結(jié)果將視頻信號(hào)作為指示目的信號(hào)提供;比較參考時(shí)鐘信息信號(hào)和聲音產(chǎn)生時(shí)序信息信號(hào)以得到第二比較結(jié)果;根據(jù)第二比較結(jié)果將第二聲頻信號(hào)作為聲音產(chǎn)生目的信號(hào)提供。
本發(fā)明的第五方面基于本發(fā)明的第四方面,提供一種方法,其中該替換重播聲頻信號(hào)包括分別從壓縮編碼源聲頻信號(hào)中得到的許多輔助替換重播聲頻信號(hào),并且將不同的標(biāo)識(shí)信號(hào)分別加入到輔助替換重播聲頻信號(hào)中,以及其中通過(guò)參考標(biāo)識(shí)信號(hào)選擇源聲頻信號(hào)中的一個(gè)源聲頻信號(hào),以及將所選擇的源聲頻信號(hào)和視頻信號(hào)作為彼此同步的再現(xiàn)信號(hào)輸出。
本發(fā)明的第六方面提供一種傳輸信息信號(hào)的方法。該方法包括如下的步驟通過(guò)多路傳輸如下的信號(hào)產(chǎn)生主AV多路傳輸結(jié)果信號(hào)1)從對(duì)視頻信號(hào)的壓縮編碼中得到的壓縮編碼結(jié)果視頻信號(hào),2)從對(duì)與視頻信號(hào)具有同步關(guān)系的第一聲頻信號(hào)進(jìn)行壓縮編碼所得到的第一壓縮編碼結(jié)果聲頻信號(hào),3)與在壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)之間的同步化相關(guān)的參考時(shí)鐘信息信號(hào),以及4)基于參考時(shí)鐘信息信號(hào)并指定視頻信號(hào)的指示時(shí)序的指示時(shí)序信息信號(hào);并通過(guò)如下的方式產(chǎn)生替換重播聲頻信號(hào)1)對(duì)第二聲頻信號(hào)進(jìn)行壓縮編碼以獲得第二壓縮編碼結(jié)果聲頻信號(hào),以及2)將聲音產(chǎn)生時(shí)序信息信號(hào)加入到第二壓縮編碼結(jié)果聲頻信號(hào)中,該聲音產(chǎn)生時(shí)序信息信號(hào)基于參考時(shí)鐘信息信號(hào)指定第二壓縮編碼結(jié)果聲頻信號(hào)的聲音產(chǎn)生時(shí)序,其中可以再現(xiàn)第二聲頻信號(hào)替代第一聲頻信號(hào);產(chǎn)生替換AV多路傳輸結(jié)果信號(hào)作為用于將壓縮編碼結(jié)果視頻信號(hào)連同第二壓縮編碼結(jié)果聲頻信號(hào)一起再現(xiàn)的信號(hào);將替換AV多路傳輸結(jié)果信號(hào)反饋到傳輸線;從替換重播聲頻信號(hào)中導(dǎo)出第二壓縮編碼結(jié)果聲頻信號(hào);以及將在主AV多路傳輸結(jié)果信號(hào)中的第一壓縮編碼結(jié)果聲頻信號(hào)替換為所導(dǎo)出的第二壓縮編碼結(jié)果聲頻信號(hào)以在將替換AV多路傳輸結(jié)果信號(hào)反饋到傳輸線中之前將主AV多路傳輸結(jié)果信號(hào)改變?yōu)樘鎿QAV多路傳輸結(jié)果信號(hào)。
本發(fā)明的第七方面提供一種產(chǎn)生要記錄的信息信號(hào)的設(shè)備。該設(shè)備包括如下裝置多路傳輸如下信號(hào)的裝置1)從對(duì)視頻信號(hào)的壓縮編碼中得到的壓縮編碼結(jié)果視頻信號(hào),2)從對(duì)與視頻信號(hào)具有同步關(guān)系的第一聲頻信號(hào)進(jìn)行壓縮編碼所得到的第一壓縮編碼結(jié)果聲頻信號(hào),3)與在壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)之間的同步化相關(guān)的參考時(shí)鐘信息信號(hào),以及4)基于參考時(shí)鐘信息信號(hào)并指定獲得AV多路傳輸結(jié)果信號(hào)的視頻信號(hào)的指示時(shí)序的指示時(shí)序信息信號(hào);在重播的過(guò)程中在與視頻信號(hào)同步的同時(shí)產(chǎn)生第二聲頻信號(hào)作為可以再現(xiàn)的替代第一聲頻信號(hào)的替換重播聲頻信號(hào)的裝置;對(duì)第二聲頻信號(hào)進(jìn)行壓縮編碼以獲得第二壓縮編碼結(jié)果聲頻信號(hào)的裝置;以及將聲音產(chǎn)生時(shí)序信息信號(hào)加入到第二壓縮編碼結(jié)果聲頻信號(hào)中以獲得替換重播聲頻信號(hào)的裝置,該聲音產(chǎn)生時(shí)序信息信號(hào)基于參考時(shí)鐘信息信號(hào)并與視頻信號(hào)的同步化相關(guān)。
本發(fā)明的第八方面提供一種再現(xiàn)信息信號(hào)的設(shè)備。該設(shè)備包括如下的裝置再現(xiàn)通過(guò)多路傳輸如下的信號(hào)產(chǎn)生的AV多路傳輸結(jié)果信號(hào)的裝置1)從對(duì)視頻信號(hào)的壓縮編碼中得到的壓縮編碼結(jié)果視頻信號(hào),2)從對(duì)與視頻信號(hào)具有同步關(guān)系的第一聲頻信號(hào)進(jìn)行壓縮編碼所得到的第一壓縮編碼結(jié)果聲頻信號(hào),3)與在壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)之間的同步化相關(guān)的參考時(shí)鐘信息信號(hào),以及4)指定視頻信號(hào)的指示時(shí)序的指示時(shí)序信息信號(hào);從所再現(xiàn)的AV多路傳輸結(jié)果信號(hào)中再現(xiàn)視頻信號(hào)的裝置;再現(xiàn)替換重播聲頻信號(hào)以再現(xiàn)第二聲頻信號(hào)的裝置,并通過(guò)如下的方式產(chǎn)生該替換重播聲頻信號(hào)1)對(duì)第二聲頻信號(hào)進(jìn)行壓縮編碼以獲得第二壓縮編碼結(jié)果聲頻信號(hào),以及2)將聲音產(chǎn)生時(shí)序信息信號(hào)加入到第二壓縮編碼結(jié)果聲頻信號(hào)中,該聲音產(chǎn)生時(shí)序信息信號(hào)指定第二壓縮編碼結(jié)果聲頻信號(hào)的聲音產(chǎn)生時(shí)序;其中可以再現(xiàn)第二聲頻信號(hào)替代第一聲頻信號(hào);從再現(xiàn)的AV多路傳輸結(jié)果信號(hào)中導(dǎo)出參考時(shí)鐘信息信號(hào)和指示時(shí)序信息信號(hào)的裝置;從再現(xiàn)的AV多路傳輸結(jié)果信號(hào)中導(dǎo)出壓縮編碼結(jié)果視頻信號(hào)的裝置;對(duì)所導(dǎo)出的壓縮編碼結(jié)果視頻信號(hào)進(jìn)行解碼以得到解碼結(jié)果視頻信號(hào)的裝置;響應(yīng)所導(dǎo)出的參考時(shí)鐘信息信號(hào)和所導(dǎo)出的指示時(shí)序信息信號(hào)將解碼結(jié)果視頻信號(hào)作為輸出視頻信號(hào)提供的裝置;從所再現(xiàn)的替換重播聲頻信號(hào)中導(dǎo)出聲音產(chǎn)生時(shí)序信息信號(hào)和第二聲頻信號(hào)的裝置;響應(yīng)所導(dǎo)出的參考時(shí)鐘信息信號(hào)和所導(dǎo)出的聲音產(chǎn)生時(shí)序信息信號(hào)將所導(dǎo)出的第二聲頻信號(hào)作為輸出聲頻信號(hào)提供的裝置。
本發(fā)明的第九方面基于本發(fā)明的第八方面,提供一種設(shè)備,其中該替換重播聲頻信號(hào)包括分別從壓縮編碼源聲頻信號(hào)中得到的許多輔助替換重播聲頻信號(hào),并且將不同的標(biāo)識(shí)信號(hào)分別加入到輔助替換重播聲頻信號(hào)中,以及其中通過(guò)參考標(biāo)識(shí)信號(hào)選擇源聲頻信號(hào)中的一個(gè)源聲頻信號(hào),以及將所選擇的源聲頻信號(hào)和視頻信號(hào)作為彼此同步的再現(xiàn)信號(hào)輸出。
本發(fā)明的第十方面提供一種傳輸信息信號(hào)的設(shè)備。該設(shè)備包括如下的裝置通過(guò)多路傳輸如下的信號(hào)產(chǎn)生主AV多路傳輸結(jié)果信號(hào)的裝置1)從對(duì)視頻信號(hào)的壓縮編碼中得到的壓縮編碼結(jié)果視頻信號(hào),2)從對(duì)與視頻信號(hào)具有同步關(guān)系的第一聲頻信號(hào)進(jìn)行壓縮編碼所得到的第一壓縮編碼結(jié)果聲頻信號(hào),3)與在壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)之間的同步化相關(guān)的參考時(shí)鐘信息信號(hào),以及4)基于參考時(shí)鐘信息信號(hào)并指定視頻信號(hào)的指示時(shí)序的指示時(shí)序信息信號(hào);并通過(guò)如下的方式產(chǎn)生替換重播聲頻信號(hào)的裝置1)對(duì)第二聲頻信號(hào)進(jìn)行壓縮編碼以獲得第二壓縮編碼結(jié)果聲頻信號(hào),以及2)將聲音產(chǎn)生時(shí)序信息信號(hào)加入到第二壓縮編碼結(jié)果聲頻信號(hào)中,該聲音產(chǎn)生時(shí)序信息信號(hào)基于參考時(shí)鐘信息信號(hào)指定第二壓縮編碼結(jié)果聲頻信號(hào)的聲音產(chǎn)生時(shí)序,其中可以再現(xiàn)第二聲頻信號(hào)替代第一聲頻信號(hào);產(chǎn)生替換AV多路傳輸結(jié)果信號(hào)作為用于將壓縮編碼結(jié)果視頻信號(hào)連同第二壓縮編碼結(jié)果聲頻信號(hào)一起再現(xiàn)的信號(hào)的裝置;將替換AV多路傳輸結(jié)果信號(hào)反饋到傳輸線的裝置;從替換重播聲頻信號(hào)中導(dǎo)出第二壓縮編碼結(jié)果聲頻信號(hào)的裝置;以及將在主AV多路傳輸結(jié)果信號(hào)中的第一壓縮編碼結(jié)果聲頻信號(hào)替換為所導(dǎo)出的第二壓縮編碼結(jié)果聲頻信號(hào)以在將替換AV多路傳輸結(jié)果信號(hào)反饋到傳輸線中之前將主AV多路傳輸結(jié)果信號(hào)改變?yōu)樘鎿QAV多路傳輸結(jié)果信號(hào)的裝置。
本發(fā)明的第十一方面提供一種信息信號(hào)記錄媒體,該記錄媒體具有存儲(chǔ)AV多路傳輸結(jié)果信號(hào)和替換重播聲頻信號(hào)兩種信號(hào)的公共表面;通過(guò)多路傳輸如下的信號(hào)產(chǎn)生該AV多路傳輸結(jié)果信號(hào)1)從對(duì)視頻信號(hào)的壓縮編碼中得到的壓縮編碼結(jié)果視頻信號(hào),2)從對(duì)與視頻信號(hào)具有同步關(guān)系的第一聲頻信號(hào)進(jìn)行壓縮編碼所得到的第一壓縮編碼結(jié)果聲頻信號(hào),3)與在壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)之間的同步化相關(guān)的參考時(shí)鐘信息信號(hào),以及4)指定視頻信號(hào)的指示時(shí)序的指示時(shí)序信息信號(hào);通過(guò)如下的方式產(chǎn)生替換重播聲頻信號(hào)1)對(duì)第二聲頻信號(hào)進(jìn)行壓縮編碼以獲得第二壓縮編碼結(jié)果聲頻信號(hào),以及2)將第二參考時(shí)鐘信息信號(hào)加入到第二壓縮編碼結(jié)果聲頻信號(hào)中,其中可以再現(xiàn)第二聲頻信號(hào)替代第一聲頻信號(hào);其中加入到第二壓縮編碼結(jié)果聲頻信號(hào)中的第二參考時(shí)鐘信息信號(hào)等于在AV多路傳輸結(jié)果信號(hào)中的第一參考時(shí)鐘信息信號(hào),以及第二壓縮編碼結(jié)果聲頻信號(hào)包含多路傳輸?shù)姆至?,該分量是基于第一和第二參考時(shí)鐘信息信號(hào)中的一個(gè)信號(hào)并與視頻信號(hào)同步化相關(guān)的聲音產(chǎn)生時(shí)序信息信號(hào);以及其中響應(yīng)在AV多路傳輸結(jié)果信號(hào)中的第一參考時(shí)鐘信息信號(hào)再現(xiàn)該視頻信號(hào),以及響應(yīng)與用于視頻信號(hào)的再現(xiàn)的信號(hào)相同的參考時(shí)鐘信息信號(hào)使第二聲頻信號(hào)的再現(xiàn)與視頻信號(hào)的再現(xiàn)同步。
本發(fā)明的第十二方面提供一種傳輸信息信號(hào)的計(jì)算機(jī)程序。該計(jì)算機(jī)程序包括如下的步驟通過(guò)多路傳輸如下的信號(hào)產(chǎn)生主AV多路傳輸結(jié)果信號(hào)1)從對(duì)視頻信號(hào)的壓縮編碼中得到的壓縮編碼結(jié)果視頻信號(hào),2)從對(duì)與視頻信號(hào)具有同步關(guān)系的第一聲頻信號(hào)進(jìn)行壓縮編碼所得到的第一壓縮編碼結(jié)果聲頻信號(hào),3)與在壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)之間的同步化相關(guān)的參考時(shí)鐘信息信號(hào),以及4)基于參考時(shí)鐘信息信號(hào)并指定視頻信號(hào)的指示時(shí)序的指示時(shí)序信息信號(hào);并通過(guò)如下的方式產(chǎn)生替換重播聲頻信號(hào)1)對(duì)第二聲頻信號(hào)進(jìn)行壓縮編碼以獲得第二壓縮編碼結(jié)果聲頻信號(hào),以及2)將聲音產(chǎn)生時(shí)序信息信號(hào)加入到第二壓縮編碼結(jié)果聲頻信號(hào)中,該聲音產(chǎn)生時(shí)序信息信號(hào)基于參考時(shí)鐘信息信號(hào)指定第二壓縮編碼結(jié)果聲頻信號(hào)的聲音產(chǎn)生時(shí)序,其中可以再現(xiàn)第二聲頻信號(hào)替代第一聲頻信號(hào);產(chǎn)生替換AV多路傳輸結(jié)果信號(hào)作為用于將壓縮編碼結(jié)果視頻信號(hào)連同第二壓縮編碼結(jié)果聲頻信號(hào)一起再現(xiàn)的信號(hào);將替換AV多路傳輸結(jié)果信號(hào)反饋到傳輸線;從替換重播聲頻信號(hào)中導(dǎo)出第二壓縮編碼結(jié)果聲頻信號(hào);以及將在主AV多路傳輸結(jié)果信號(hào)中的第一壓縮編碼結(jié)果聲頻信號(hào)替換為所導(dǎo)出的第二壓縮編碼結(jié)果聲頻信號(hào)以在將替換AV多路傳輸結(jié)果信號(hào)反饋到傳輸線中之前將主AV多路傳輸結(jié)果信號(hào)改變?yōu)樘鎿QAV多路傳輸結(jié)果信號(hào)。
附圖1所示為根據(jù)本發(fā)明的第一實(shí)施例的信息信號(hào)記錄和再現(xiàn)系統(tǒng)的方塊圖。
附圖2所示為MPEG編碼器的方塊圖。
附圖3所示為MPEG解碼器的方塊圖。
附圖4所示為MPEG系統(tǒng)解碼設(shè)備的方塊圖。
附圖5所示為在MPEG傳輸流(TS)、MPEG節(jié)目流(PS)和分包的單元流(PES)中的關(guān)系附圖。
附圖6所示為TS包的格式的附圖。
附圖7所示為響應(yīng)包ID(PID)接收TS包的流程圖。
附圖8所示為在本發(fā)明的第一實(shí)施例中的信息信號(hào)記錄設(shè)備的方塊圖。
附圖9所示為在本發(fā)明的第一實(shí)施例中的信息信號(hào)再現(xiàn)設(shè)備的方塊圖。
附圖10所示為記錄在信息信號(hào)記錄媒體中的信息的文件結(jié)構(gòu)的附圖。
附圖11所示為在附圖10中文件“SIDE.ifo”的結(jié)構(gòu)的附圖。
附圖12所示為在附圖11中第二級(jí)程序段“GENERAL_IFO”的語(yǔ)法結(jié)構(gòu)的附圖。
附圖13所示為在附圖11中的第三級(jí)程序段“PR_IFO_0”的結(jié)構(gòu)的附圖。
附圖14所示為在附圖13中的第四級(jí)程序段“PROG_IFO”的語(yǔ)法結(jié)構(gòu)的附圖。
附圖15所示為在附圖11中播放列表信息“PLAYL_IFO”的語(yǔ)法結(jié)構(gòu)的附圖。
附圖16所示為在附圖13中的索引信息“INDEX_IFO”的語(yǔ)法結(jié)構(gòu)的附圖。
附圖17所示為記錄在硬盤上的傳輸流(TS)的格式的附圖。
附圖18所示為在本發(fā)明的第一實(shí)施例中的信息信號(hào)傳輸設(shè)備的方塊圖。
附圖19所示為在附圖18中的CPU的控制程序段的流程圖。
具體實(shí)施例方式
第一實(shí)施例附圖1所示為根據(jù)本發(fā)明的第一實(shí)施例的信息信號(hào)記錄和再現(xiàn)系統(tǒng)。附圖1的系統(tǒng)包括信息信號(hào)產(chǎn)生設(shè)備10、記錄媒體驅(qū)動(dòng)器20、信息信號(hào)記錄媒體25和信息信號(hào)再現(xiàn)設(shè)備30。信息信號(hào)產(chǎn)生設(shè)備10具有視頻編碼器11、聲頻編碼器11a和多路復(fù)用器15。記錄媒體驅(qū)動(dòng)器20與信息信號(hào)產(chǎn)生設(shè)備10和信息信號(hào)再現(xiàn)設(shè)備30連接。記錄媒體驅(qū)動(dòng)器20可以將信息信號(hào)寫在記錄媒體25中并從記錄媒體25中讀信息信號(hào)。硬盤記錄器/讀取器或光盤記錄器/讀取器可以用作記錄媒體驅(qū)動(dòng)器20。包含了信息信號(hào)的文件可以記錄在記錄媒體25上。具體地說(shuō),AV(聲頻-視頻)多路傳輸?shù)慕Y(jié)果文件25a和后期錄音聲頻文件25b可以存儲(chǔ)在記錄媒體25中??扇〉氖牵涗浢襟w25具有在其上記錄了AV多路傳輸結(jié)果文件25a和后期錄音聲頻文件25b的記錄表面。信息信號(hào)再現(xiàn)設(shè)備30具有多路信號(hào)分解器36、信號(hào)選擇器37、視頻解碼器45和聲頻解碼器45a??扇〉氖牵畔⑿盘?hào)再現(xiàn)設(shè)備30連接到監(jiān)視器TV設(shè)備。
附圖1的系統(tǒng)運(yùn)行在可以從包括記錄模式、第一重播模式和第二重播模式中選擇的不同的模式中。在運(yùn)行在記錄模式的過(guò)程中,視頻編碼器11接收伴有第一聲頻信號(hào)的視頻信號(hào)。視頻編碼器11根據(jù)視頻編碼的MPEG(運(yùn)動(dòng)圖象專家組)標(biāo)準(zhǔn)將所接收的視頻信號(hào)壓縮編碼成壓縮編碼結(jié)果視頻信號(hào)。因此,視頻編碼器11包括MPEG編碼器(MPEG視頻編碼器)。視頻編碼器11將壓縮編碼結(jié)果視頻信號(hào)反饋到多路復(fù)用器15的第一輸入端中。
聲頻編碼器11a接收伴有視頻信號(hào)的第一聲頻信號(hào)。聲頻編碼器11a根據(jù)聲頻編碼的MPEG標(biāo)準(zhǔn)將該第一聲頻信號(hào)壓縮編碼成第一壓縮編碼結(jié)果聲頻信號(hào)。聲頻編碼器11a將第一壓縮編碼結(jié)果聲頻信號(hào)反饋給多路復(fù)用器15的第二輸入端。
裝置15根據(jù)MPEG系統(tǒng)標(biāo)準(zhǔn)將壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)多路復(fù)用成AV多路傳輸結(jié)果信號(hào)。多路復(fù)用器15將該AV多路傳輸結(jié)果信號(hào)輸出到記錄媒體驅(qū)動(dòng)器20。記錄媒體驅(qū)動(dòng)器20將該AV多路傳輸結(jié)果信號(hào)記錄在記錄媒體25作為AV多路傳輸結(jié)果文件25a。
在AV多路傳輸結(jié)果文件25a的記錄完成之后,將第二聲頻信號(hào)開始記錄在記錄媒體25上作為不同于AV多路傳輸結(jié)果文件25a的后期錄音聲頻文件25b。具體地說(shuō),聲頻編碼器11a接收第二聲頻信號(hào)(后期錄音目的聲頻信號(hào))。聲頻編碼器11a根據(jù)聲頻編碼的MPEG標(biāo)準(zhǔn)將第二聲頻信號(hào)壓縮編碼成第二壓縮編碼結(jié)果聲頻信號(hào)。聲頻編碼器11a將該第二壓縮編碼結(jié)果聲頻信號(hào)反饋到多路復(fù)用器15。多路復(fù)用器15將第二壓縮編碼結(jié)果聲頻信號(hào)傳輸?shù)接涗浢襟w驅(qū)動(dòng)器20。記錄媒體驅(qū)動(dòng)器20將第二壓縮編碼結(jié)果聲頻信號(hào)記錄在記錄媒體25作為后期錄音聲頻文件25b。
第二聲頻信號(hào)不同于第一聲頻信號(hào)的內(nèi)容。第二聲頻信號(hào)與先前所提到的視頻信號(hào)同步地產(chǎn)生。例如,在再現(xiàn)視頻信號(hào)的同時(shí)產(chǎn)生第二聲頻信號(hào)。在拍攝要產(chǎn)生的視頻信號(hào)的景物的同時(shí)通過(guò)采集拍攝的景物的現(xiàn)場(chǎng)的聲音產(chǎn)生第一聲頻信號(hào)。在另一方面,產(chǎn)生第二聲頻信號(hào)作為在拍攝景物之后播放的敘述或背景音樂(lè)的表示。第二聲頻信號(hào)也稱為后期錄音目的聲頻信號(hào)。
具有完美的聲頻和視頻信息的AV信號(hào)被稱為完整包信號(hào)(完整電視節(jié)目信號(hào))。在用戶或第三人從與在完整包信號(hào)中的視頻信號(hào)相同的視頻信號(hào)和與在完整包中的聲頻信號(hào)不同的聲頻信號(hào)中制作從由完整包信號(hào)所代表的節(jié)目修改的AV節(jié)目的情況下,該聲頻信號(hào)定義為后期錄音目的聲頻信號(hào)。
附圖1的系統(tǒng)還設(shè)計(jì)成同步地再現(xiàn)在完整包信號(hào)中的視頻信號(hào)和第二聲頻信號(hào)(后期錄音聲頻信號(hào)),并且還能夠再現(xiàn)完整包信號(hào)。此外,附圖1的系統(tǒng)還設(shè)計(jì)成降低了記錄在記錄媒體25上的信息量。
如前文所述,AV多路傳輸結(jié)果信號(hào)記錄在記錄媒體25上作為AV多路傳輸結(jié)果文件25a。一般地,AV多路傳輸結(jié)果信號(hào)與完整包信號(hào)相關(guān)。在AV多路傳輸結(jié)果文件25a中的聲頻信息和視頻信息可以同步地重播。第二聲頻信號(hào)記錄在記錄媒體25作為不同于AV多路傳輸結(jié)果文件25a的后期錄音聲頻文件25b。正如下文將會(huì)解釋到,將同步信號(hào)加入到AV多路傳輸結(jié)果文件25a和后期錄音聲頻文件25b中以使在后期錄音聲頻文件25b中的聲頻信息和在AV多路傳輸結(jié)果文件25a中的視頻信息的同步播放成為可能。
在附圖1中的系統(tǒng)的操作模式包括第一重播模式和第二重播模式。操作的第一重播模式設(shè)計(jì)成再現(xiàn)完整包信號(hào)。在操作的第一重播模式中,記錄媒體驅(qū)動(dòng)器20訪問(wèn)在信息信號(hào)記錄媒體25上的AV多路傳輸結(jié)果文件25a并從其中讀出AV多路傳輸結(jié)果信號(hào)。記錄媒體驅(qū)動(dòng)器20將所讀出的AV多路傳輸結(jié)果信號(hào)反饋到多路信號(hào)分解器36中。
多路信號(hào)分解器36根據(jù)MPEG系統(tǒng)標(biāo)準(zhǔn)將AV多路傳輸結(jié)果信號(hào)分解為壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)。多路信號(hào)分解器36將壓縮編碼結(jié)果視頻信號(hào)反饋到視頻解碼器45。多路信號(hào)分解器36將第一壓縮編碼結(jié)果聲頻信號(hào)反饋到信號(hào)選擇器37。
視頻解碼器45根據(jù)視頻解碼的MPEG標(biāo)準(zhǔn)將壓縮編碼結(jié)果視頻信號(hào)擴(kuò)展地解碼成原始視頻信號(hào)。因此,視頻解碼器45包括MPEG解碼器(MPEG視頻解碼器)。視頻解碼器45將再現(xiàn)的視頻信號(hào)反饋到監(jiān)視器TV設(shè)備。監(jiān)視器TV設(shè)備的顯示器指示所再現(xiàn)的視頻信號(hào)。
信號(hào)選擇器37將第一壓縮編碼結(jié)果聲頻信號(hào)傳輸?shù)铰曨l解碼器45a。聲頻解碼器45a根據(jù)聲頻解碼的MPEG標(biāo)準(zhǔn)將第一壓縮編碼結(jié)果聲頻信號(hào)擴(kuò)展地解碼成第一原始聲頻信號(hào)(第一再現(xiàn)的聲頻信號(hào))。聲頻解碼器45a將第一再現(xiàn)的聲頻信號(hào)反饋到監(jiān)視器TV設(shè)備。監(jiān)視器TV設(shè)備的揚(yáng)聲器將第一再現(xiàn)的聲頻信號(hào)轉(zhuǎn)換為對(duì)應(yīng)的聲音。第一再現(xiàn)的聲頻信號(hào)的重播與再現(xiàn)的視頻信號(hào)的重播同步。
操作的第二重播模式設(shè)計(jì)成同步地再現(xiàn)在完整包信號(hào)中的視頻信號(hào)和第二聲頻信號(hào)(后期錄音聲頻信號(hào))。在操作的第二重播模式的過(guò)程中,記錄媒體驅(qū)動(dòng)器20分時(shí)地交替地訪問(wèn)在信息信號(hào)記錄媒體25上的AV多路傳輸結(jié)果文件25a和后期錄音聲頻文件25b。記錄媒體驅(qū)動(dòng)器20從AV多路傳輸結(jié)果文件25a中讀出AV多路傳輸結(jié)果信號(hào)。記錄媒體驅(qū)動(dòng)器20將所讀出的AV多路傳輸結(jié)果信號(hào)反饋到多路信號(hào)分解器36中。記錄媒體驅(qū)動(dòng)器20從后期錄音聲頻文件25b中讀出第二壓縮編碼結(jié)果聲頻信號(hào)。記錄媒體驅(qū)動(dòng)器20將該第二壓縮編碼結(jié)果聲頻信號(hào)反饋到信號(hào)選擇器37中。
多路信號(hào)分解器36根據(jù)MPEG系統(tǒng)標(biāo)準(zhǔn)將AV多路傳輸結(jié)果信號(hào)分解成壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)。多路信號(hào)分解器36將壓縮編碼結(jié)果視頻信號(hào)反饋到視頻解碼器45。多路信號(hào)分解器36將第一壓縮編碼結(jié)果聲頻信號(hào)反饋到信號(hào)選擇器37。
視頻解碼器45根據(jù)視頻解碼的MPEG標(biāo)準(zhǔn)將壓縮編碼結(jié)果視頻信號(hào)擴(kuò)展地解碼成原始視頻信號(hào)(再現(xiàn)的視頻信號(hào))。視頻解碼器45將再現(xiàn)的視頻信號(hào)反饋到監(jiān)視器TV設(shè)備。監(jiān)視器TV設(shè)備的顯示器指示所再現(xiàn)的視頻信號(hào)。
信號(hào)選擇器37選擇第二壓縮編碼結(jié)果聲頻信號(hào)并將所選則的信號(hào)傳輸?shù)铰曨l解碼器45a。因此,信號(hào)選擇器37拒絕來(lái)自多路信號(hào)分解器36的第一壓縮編碼結(jié)果聲頻信號(hào)。聲頻解碼器45a根據(jù)聲頻解碼的MPEG標(biāo)準(zhǔn)將第二壓縮編碼結(jié)果聲頻信號(hào)擴(kuò)展地解碼成第二原始聲頻信號(hào)(第二再現(xiàn)的聲頻信號(hào))。第二再現(xiàn)的聲頻信號(hào)是再現(xiàn)的后期錄音目的聲頻信號(hào)。聲頻解碼器45a將第二再現(xiàn)的聲頻信號(hào)反饋到監(jiān)視器TV設(shè)備。監(jiān)視器TV設(shè)備的揚(yáng)聲器將第二再現(xiàn)的聲頻信號(hào)(再現(xiàn)的后期錄音目的聲頻信號(hào))轉(zhuǎn)換成相應(yīng)的聲音。第二再現(xiàn)的聲頻信號(hào)的重播與再現(xiàn)的視頻信號(hào)的重播同步。如下文所描述,通過(guò)給在AV多路傳輸結(jié)果文件25a中的視頻信息和在后期錄音聲頻文件25b中的聲頻信息中增加同步信號(hào)提供了在第二再現(xiàn)的聲頻信號(hào)的重播和在再現(xiàn)的視頻信號(hào)的重播之間的同步化。
附圖1的系統(tǒng)包括用戶接口。用戶可以通過(guò)啟動(dòng)用戶接口指定在附圖1中的系統(tǒng)的操作的模式。信號(hào)選擇器37響應(yīng)來(lái)自用戶接口的信號(hào),該信號(hào)表示操作的指定模式是第一重播模式還是第二重播模式。在所指定的操作模式是第一重播模式時(shí),信號(hào)選擇器37將來(lái)自多路信號(hào)分解器36的第一壓縮編碼結(jié)果聲頻信號(hào)傳輸?shù)铰曨l解碼器45a。在另一方面,在所指定的操作模式是第二重播模式時(shí),信號(hào)選擇器37選擇第二壓縮編碼結(jié)果聲頻信號(hào)并將所選擇的信號(hào)傳輸給聲頻解碼器45a。
附圖2所示為可以用作在視頻編碼器11(參見附圖1)中的解碼器的MPEG解碼器50。MPEG解碼器50包括作為減法器運(yùn)行的減法器52。減法器52通過(guò)輸入端51接收輸入的視頻信號(hào)Vin。減法器52計(jì)算幀間預(yù)測(cè)誤差,即在由輸入的視頻信號(hào)Vin所代表的圖像和通過(guò)來(lái)自運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器65的輸出數(shù)據(jù)所代表的最終參考圖像(最終預(yù)測(cè)圖像)之間的殘差(誤差)。減法器52輸出指示所計(jì)算的殘差的數(shù)據(jù)(所計(jì)算的幀間預(yù)測(cè)誤差)。
通過(guò)運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器65所實(shí)施的預(yù)測(cè)設(shè)計(jì)如下。預(yù)測(cè)方向具有三種模式,即,自過(guò)去起的方向(“前向”)、自將來(lái)起的方向(“后向”)和自過(guò)去和將來(lái)兩者的方向(“內(nèi)插”)。因此,存在自過(guò)去的預(yù)測(cè)(“前向”)、自將來(lái)的預(yù)測(cè)(“后向”)和自過(guò)去和將來(lái)兩者的預(yù)測(cè)(“內(nèi)插”)。實(shí)際使用的預(yù)測(cè)方向可以一個(gè)MB一個(gè)MB地改變,這里MB表示16×16像素的微塊。每個(gè)圖像劃分為預(yù)定數(shù)量的MB。通過(guò)由輸入的視頻信號(hào)Vin所表示的每個(gè)圖像的類型基本決定了實(shí)際使用的預(yù)測(cè)方向。圖像被分為P圖像(預(yù)測(cè)性編碼圖像)、B圖像(雙向預(yù)測(cè)性編碼圖像)和I圖像(內(nèi)編碼圖像)。代表P圖像的MB是第一和第二模式。根據(jù)自過(guò)去的預(yù)測(cè)對(duì)第一模式的P-圖像MB進(jìn)行編碼。對(duì)第二模式的P圖像MB獨(dú)立地進(jìn)行編碼而不進(jìn)行預(yù)測(cè)。代表B圖像的MB是第一、第二、第三和第四模式。根據(jù)自將來(lái)的預(yù)測(cè)對(duì)第一模式的B圖像MB進(jìn)行編碼。根據(jù)自過(guò)去的預(yù)測(cè)對(duì)第二模式的B圖像MB進(jìn)行編碼。根據(jù)自過(guò)去和將來(lái)兩者的預(yù)測(cè)對(duì)第三模式的B圖像MB進(jìn)行編碼。對(duì)第四模式的B圖像MB獨(dú)立地進(jìn)行編碼而不進(jìn)行預(yù)測(cè)。對(duì)代表I圖像的MB獨(dú)立地進(jìn)行編碼而不進(jìn)行預(yù)測(cè)。
通過(guò)運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器65所實(shí)施的運(yùn)動(dòng)補(bǔ)償設(shè)計(jì)如下。根據(jù)運(yùn)動(dòng)補(bǔ)償,對(duì)每個(gè)MB執(zhí)行在兩個(gè)圖像之間匹配的模式以便以對(duì)應(yīng)于半像素的精度檢測(cè)一個(gè)或多個(gè)運(yùn)動(dòng)矢量。兩個(gè)圖像中的一個(gè)圖像由輸入的視頻信號(hào)Vin給定,而另一圖像稱為運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)的源圖像或基本參考圖像?;緟⒖紙D像根據(jù)所檢測(cè)的運(yùn)動(dòng)矢量平移?;诨緟⒖紙D像的平移產(chǎn)生最終的參考圖像(最終預(yù)測(cè)圖像)。在不存在運(yùn)動(dòng)補(bǔ)償?shù)那闆r下,基本參考圖像直接用作最終參考圖像。一般地,運(yùn)動(dòng)矢量具有水平方向分量和垂直方向分量。代表所檢測(cè)的運(yùn)動(dòng)矢量或所檢測(cè)的運(yùn)動(dòng)矢量的信息和代表預(yù)測(cè)方向或指示從其中實(shí)施預(yù)測(cè)的源圖像的MC-模式(運(yùn)動(dòng)補(bǔ)償模式)信息作為與每個(gè)MB相關(guān)的相加的信息傳輸。GOP(圖像組)定義為從I圖像開始并在下一個(gè)I圖像直接之前的圖像上結(jié)束的圖像序列。一般地,一個(gè)GOP具有大約15個(gè)連續(xù)的圖像。
通過(guò)DCT裝置53對(duì)從減法器52中輸出的剩余指示數(shù)據(jù)進(jìn)行離散余弦變換(DCT)。具體地說(shuō),DCT裝置53將由剩余指示數(shù)據(jù)所表示的每個(gè)MB劃分為4個(gè)DCT塊,每個(gè)DCT塊具有8×8個(gè)像素。DCT裝置53對(duì)每個(gè)DCT塊進(jìn)行二維DCT以產(chǎn)生表示DCT系數(shù)的數(shù)據(jù)。DCT裝置53輸出所產(chǎn)生的DCT系數(shù)數(shù)據(jù)。一般地,由于在低頻分量中視頻信號(hào)富裕,因此產(chǎn)生了對(duì)應(yīng)于低頻的許多有效的DCT系數(shù)。
通過(guò)量化器54響應(yīng)量化值對(duì)通過(guò)DCT裝置53的輸出數(shù)據(jù)所表示的DCT系數(shù)進(jìn)行量化。該量化值等于量化矩陣乘以標(biāo)量的量化比。量化矩陣具有從根據(jù)視覺對(duì)二維頻率分量進(jìn)行加權(quán)的過(guò)程中得到的8×8個(gè)元素。量化包括將DCT系數(shù)除以量化值的步驟。
從量化器54中輸出的量化結(jié)果數(shù)據(jù)通過(guò)VLC裝置55編碼成可變長(zhǎng)度代碼(VLC)數(shù)據(jù)。具體地說(shuō),通過(guò)DPCM(差分脈碼調(diào)制技術(shù))對(duì)量化結(jié)果數(shù)據(jù)的直流(DC)分量進(jìn)行編碼。沿著從高頻朝低頻的方向以Z字形掃描量化結(jié)果數(shù)據(jù)的交流(AC)分量,并進(jìn)行赫夫曼(Huffman)編碼,在這種編碼中將具有較高的發(fā)生概率的數(shù)據(jù)段分配給較短的代碼字。VLC裝置55從運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器65中接收運(yùn)動(dòng)矢量信息和MC-模式信息。VLC裝置65將運(yùn)動(dòng)矢量信息和MC模式信息加入到VLC數(shù)據(jù)中。所得的VLC數(shù)據(jù)臨時(shí)存儲(chǔ)在緩沖器56中。以預(yù)定的傳輸率將VLC數(shù)據(jù)從緩沖器56中輸出作為位流形式的編碼結(jié)果MPEG數(shù)據(jù)。
緩沖器56通知代碼量控制器57每個(gè)MB的編碼結(jié)果數(shù)據(jù)的實(shí)際量,即構(gòu)成每個(gè)MB的編碼結(jié)果數(shù)據(jù)的總位數(shù)。代碼量控制器57計(jì)算在編碼結(jié)果數(shù)據(jù)的實(shí)際量和它的目標(biāo)量之間的誤差。代碼量控制器57響應(yīng)所計(jì)算的數(shù)據(jù)量的誤差調(diào)整由量化器54所使用的量化比,由此控制量編碼結(jié)果數(shù)據(jù)的實(shí)際量。
通過(guò)反向量化器61對(duì)從量化器54所輸出的量化結(jié)果數(shù)據(jù)進(jìn)行反向量化,即轉(zhuǎn)換回DCT系數(shù)數(shù)據(jù)。反向量化器61輸出DCT系數(shù)數(shù)據(jù)。通過(guò)反向DCT裝置62對(duì)從反向量化器61中輸出的DCT系數(shù)數(shù)據(jù)進(jìn)行反向DCT,即轉(zhuǎn)換回剩余指示數(shù)據(jù)。反向DCT裝置62輸出剩余指示數(shù)據(jù)。由從反向DCT裝置62中輸出的數(shù)據(jù)所表示的剩余圖像和從運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器65中輸出的數(shù)據(jù)所表示的最終參考圖像(最終預(yù)測(cè)圖像)通過(guò)加法器63相加。加法器63輸出相加的結(jié)果視頻數(shù)據(jù)。相加的結(jié)果視頻數(shù)據(jù)臨時(shí)存儲(chǔ)在存儲(chǔ)器64中。視頻數(shù)據(jù)從存儲(chǔ)器64中反饋到運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器65中。運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器65使用來(lái)自存儲(chǔ)器64的輸出視頻數(shù)據(jù)作為運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)的源圖像或者基本參考圖像的指示。
附圖3所示為能夠用作在視頻解碼器45(參見附圖1)中的解碼器的MPEG解碼器70。MPEG解碼器70包括緩沖器72。緩沖器72通過(guò)輸入端71接收位流形式的編碼結(jié)果MPEG數(shù)據(jù)。編碼結(jié)果MPEG數(shù)據(jù)在輸出到VLD(可變長(zhǎng)度解碼)裝置73中之前臨時(shí)地存儲(chǔ)在緩沖器72中。VLC裝置73對(duì)從緩沖器72中輸出的數(shù)據(jù)相對(duì)于VLD進(jìn)行VLD反向,由此接收DC分量數(shù)據(jù)和AC分量數(shù)據(jù)。沿著從高頻到低頻的方向以Z字形掃描AC分量數(shù)據(jù)。DC分量數(shù)據(jù)和所得的AC分量數(shù)據(jù)以8×8個(gè)元素的矩陣設(shè)置。VLD裝置73將矩陣設(shè)置的數(shù)據(jù)輸出到反向量化器74中。VLD裝置73從緩沖器72輸出的數(shù)據(jù)中抽取運(yùn)動(dòng)矢量信息和MC模式信息。VLD裝置73將運(yùn)動(dòng)矢量信息和MC模式信息輸出到運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器78中。
反向量化器74響應(yīng)量化值對(duì)從VLD裝置73中輸出的數(shù)據(jù)進(jìn)行反向量化,由此恢復(fù)了DCT系數(shù)數(shù)據(jù)。反向量化包括將所處理的數(shù)據(jù)值乘以量化值的步驟。應(yīng)該指出的是,量化值等于量化矩陣乘以標(biāo)量量化比。DCT系數(shù)數(shù)據(jù)從反向量化器74中輸出到反向DCT裝置75中,進(jìn)行反向DCT,并由此轉(zhuǎn)換回剩余指示數(shù)據(jù)。反向DCT裝置75輸出剩余指示數(shù)據(jù)。由從反向DCT裝置75中輸出的數(shù)據(jù)所表示的剩余圖像和由從運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器78中輸出的數(shù)據(jù)所表示的最終參考圖像(最終預(yù)測(cè)圖像)通過(guò)加法器76相加。加法器76輸出相加的結(jié)果視頻數(shù)據(jù)作為解碼結(jié)果視頻數(shù)據(jù)(原始視頻數(shù)據(jù))。解碼剩余視頻數(shù)據(jù)朝外部發(fā)送。從加法器76中輸出的相加的結(jié)果視頻數(shù)據(jù)臨時(shí)存儲(chǔ)在存儲(chǔ)器77中。視頻數(shù)據(jù)從存儲(chǔ)器77中反饋到運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器78中。運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器78使用從存儲(chǔ)器77中輸出的視頻數(shù)據(jù)作為運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)的基本參考圖像或源圖像的指示。運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器78響應(yīng)基本參考圖像、運(yùn)動(dòng)矢量信息和MC-模式信息產(chǎn)生最終參考圖像(最終預(yù)測(cè)圖像)。運(yùn)動(dòng)補(bǔ)償預(yù)測(cè)器78輸出表示最終參考圖像的數(shù)據(jù)。
MPEG系統(tǒng)標(biāo)準(zhǔn)規(guī)定了如下的五項(xiàng)。
1)許多編碼結(jié)果位流的同步再現(xiàn);2)許多編碼結(jié)果位流多路復(fù)用成單個(gè)位流;3)在再現(xiàn)開始時(shí)對(duì)在緩沖器(在附圖3中的緩沖器72)的編碼結(jié)果數(shù)據(jù)的初始化;4)對(duì)在緩沖器中的數(shù)據(jù)的管理以獲得連續(xù)的解碼結(jié)果視頻信號(hào)和連續(xù)的解碼結(jié)果聲頻信號(hào);以及5)與時(shí)序(比如解碼開始時(shí)序和重播指示時(shí)序)的設(shè)置相關(guān)的管理。
因此根據(jù)MPEG系統(tǒng)的標(biāo)準(zhǔn),實(shí)施與編碼結(jié)果數(shù)據(jù)相關(guān)的管理。將編碼結(jié)果數(shù)據(jù)格式化或處理成包結(jié)構(gòu)的數(shù)據(jù)并且進(jìn)行多路復(fù)用。在上述的項(xiàng)目中實(shí)施操作步驟的管理數(shù)據(jù)加入到多路復(fù)用結(jié)果數(shù)據(jù)中。
符合MPEG系統(tǒng)標(biāo)準(zhǔn)的信息的多路復(fù)用包括對(duì)該信息分包的步驟。例如,在要求對(duì)視頻信息和聲頻信息進(jìn)行多路復(fù)用的情況下,將視頻信息和聲頻信息中的每種信息分為具有適合長(zhǎng)度的包。附加的信息比如標(biāo)題信息加入到每個(gè)包中。在包序列發(fā)送之前視頻信息包和聲頻信息包混合到包序列中。因此,視頻信息包和聲頻信息包分時(shí)地發(fā)送。標(biāo)題信息包括了識(shí)別相關(guān)的包是視頻包、聲頻包或其它的包的信息以及用于同步的時(shí)序信息。一般來(lái)說(shuō),包的長(zhǎng)度取決于傳輸介質(zhì)和應(yīng)用。例如,在ATM(異步傳輸模式)的情況下包的長(zhǎng)度等于53個(gè)字節(jié)。在光盤的情況下包的長(zhǎng)度等于4千個(gè)字節(jié)。根據(jù)MPEG系統(tǒng)的標(biāo)準(zhǔn),包的長(zhǎng)度可變,并且可以設(shè)定為任意的值。
要傳輸?shù)臄?shù)據(jù)劃分為壓縮包(pack),并且進(jìn)行分包。一個(gè)壓縮包由幾個(gè)包(packet)構(gòu)成。每個(gè)壓縮包的標(biāo)題部分帶有包開始代碼和SCR(系統(tǒng)時(shí)鐘基準(zhǔn))。每個(gè)包的標(biāo)題帶有流ID和時(shí)間標(biāo)記。時(shí)間標(biāo)記包含在聲頻和視頻之間同步化的時(shí)序信息。時(shí)間標(biāo)記是分別稱為DTS(解碼時(shí)間標(biāo)記)和PTS(表示時(shí)間標(biāo)記)的兩種類型中的一種。傳輸?shù)臄?shù)據(jù)包含了指示27MHz的頻率的周期性產(chǎn)生的PCR(節(jié)目時(shí)鐘參考)。與解碼器公共的參考時(shí)鐘鎖定到由PCR所指示的頻率中。DTS指示了在相關(guān)的包中的第一訪問(wèn)單元的所需的解碼開始時(shí)間,而PTS指示所需的指示開始時(shí)間(所需的重播開始時(shí)間)。一個(gè)訪問(wèn)單元對(duì)應(yīng)于在視頻情況中的一個(gè)圖像。在聲頻情況下一個(gè)訪問(wèn)單元對(duì)應(yīng)于1152個(gè)采樣。基于通過(guò)PCR所指示的頻率以一定的時(shí)間精度給定DTS和PTS。
PCR用作基準(zhǔn)時(shí)鐘信息信號(hào)。在視頻包的情況下,PTS用作指定相關(guān)的視頻信息的指示的時(shí)序的指示時(shí)序信息信號(hào)。在聲頻包的情況下,PTS用作指定將相關(guān)的聲頻信息轉(zhuǎn)換為對(duì)應(yīng)的聲音的時(shí)序的聲音產(chǎn)生時(shí)序信息信號(hào)。
附圖4所示為MPEG系統(tǒng)解碼設(shè)備,該設(shè)備包括系統(tǒng)解碼器81,該系統(tǒng)解碼器81接收包含有視頻信息和聲頻信息的多路復(fù)用結(jié)果數(shù)據(jù)(系統(tǒng)位流)。系統(tǒng)解碼器81對(duì)所接收的數(shù)據(jù)進(jìn)行多路分解為視頻數(shù)據(jù)和聲頻數(shù)據(jù)。系統(tǒng)解碼器81將聲頻數(shù)據(jù)輸出到聲頻解碼器(MPEG聲頻解碼器)82中。系統(tǒng)解碼器81將視頻數(shù)據(jù)輸出到視頻解碼器(MPEG視頻解碼器)83中。此外,系統(tǒng)解碼器81從所接收的數(shù)據(jù)中抽取每個(gè)PCR、每個(gè)視頻DTS、每個(gè)聲頻DTS、每個(gè)視頻PTS和每個(gè)聲頻PTS。系統(tǒng)解碼器81還可以從所接收的數(shù)據(jù)中抽取每個(gè)SCR。系統(tǒng)解碼器81將PCR(或者SCR)輸出到時(shí)鐘控制電路84。系統(tǒng)解碼器81將視頻DTS、聲頻DTS、視頻PTS和聲頻PTS輸出到比較電路85中。
時(shí)鐘控制電路84包括產(chǎn)生表示參考時(shí)鐘時(shí)間的參考時(shí)鐘信號(hào)的振蕩器。時(shí)鐘控制電路84將振蕩器的振蕩頻率鎖定到由PCR所表示的頻率。因此,基于PCR確定了參考時(shí)鐘時(shí)間。時(shí)鐘控制電路84通知比較電路85參考時(shí)鐘時(shí)間,即由參考時(shí)鐘信號(hào)所表示的時(shí)間。
比較電路85將由聲頻DTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以決定聲頻DTS時(shí)間是否符合參考時(shí)鐘時(shí)間。在聲頻DTS時(shí)間符合參考時(shí)鐘時(shí)間時(shí),比較電路85命令聲頻解碼器82開始聲頻數(shù)據(jù)的解碼。聲頻解碼器82實(shí)施聲頻數(shù)據(jù)的解碼。聲頻解碼器82將解碼結(jié)果聲頻數(shù)據(jù)存儲(chǔ)在存儲(chǔ)器86中。比較電路85將由視頻DTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以確定視頻DTS時(shí)間是否符合參考時(shí)鐘時(shí)間。在視頻DTS時(shí)間符合參考時(shí)鐘時(shí)間時(shí),比較電路85命令視頻解碼器83開始視頻數(shù)據(jù)的解碼。視頻解碼器83實(shí)施視頻數(shù)據(jù)的解碼。視頻解碼器83將解碼結(jié)果視頻數(shù)據(jù)存儲(chǔ)在存儲(chǔ)器87中。
比較電路85將由聲頻PTS所指示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以確定聲頻PTS時(shí)間是否符合參考時(shí)鐘時(shí)間。在聲頻PTS時(shí)間符合參考時(shí)鐘時(shí)間時(shí),比較電路85啟動(dòng)存儲(chǔ)器86以輸出解碼結(jié)果聲頻數(shù)據(jù)用于重播的目的或者聲音產(chǎn)生的目的。比較電路85將由視頻PTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以確定視頻PTS時(shí)間是否符合參考時(shí)鐘時(shí)間。在視頻PTS時(shí)間符合參考時(shí)鐘時(shí)間時(shí),比較電路85啟動(dòng)存儲(chǔ)器87以輸出解碼結(jié)果視頻數(shù)據(jù)用于表示目的。預(yù)先設(shè)定視頻PTS和聲頻PTS以使解碼結(jié)果視頻數(shù)據(jù)和解碼結(jié)果聲頻數(shù)據(jù)從存儲(chǔ)器86和87中可以同步地輸出。因此,視頻信息和聲頻信息可以同步地重播。
考慮到附圖4的MPEG系統(tǒng)解碼設(shè)備的一部分對(duì)應(yīng)于臨時(shí)存儲(chǔ)許多類型的解碼結(jié)果數(shù)據(jù)和實(shí)施許多類型的數(shù)據(jù)的同步再現(xiàn)的虛擬解碼器。虛擬解碼器稱為STD(系統(tǒng)目標(biāo)解碼器)。指定多路復(fù)用結(jié)果位流以使在STD中的存儲(chǔ)既不上溢也不下溢。
MPEG系統(tǒng)標(biāo)準(zhǔn)規(guī)定了傳輸流(TS)和節(jié)目流(PS)。通過(guò)分包的單元流(PES)和帶有其它的信息的包形成TS或PS。PES定義為用于在TS和PS之間轉(zhuǎn)換或變換的中間流。例如通過(guò)對(duì)編碼結(jié)果MPEG視頻數(shù)據(jù)、編碼結(jié)果MPEG聲頻數(shù)據(jù)或者專用流進(jìn)行分包產(chǎn)生PES。
具有公共參考時(shí)間的內(nèi)容節(jié)目的視頻和聲頻數(shù)據(jù)可以多路復(fù)用在PS中。PS包括包序列。PS的包層稱為“PES”。參考附圖5,PS的包層與TS的包層公共以在PS和TS之間提供兼容性。根據(jù)PS的STD模型,通過(guò)在PES包中的流ID將要解碼的位流的解碼模式切換到PS側(cè)。
具有公共參考時(shí)間的內(nèi)容節(jié)目的視頻和聲頻數(shù)據(jù)還可以多路復(fù)用到TS中。此外,將在參考時(shí)間中不同的內(nèi)容節(jié)目的視頻和聲頻數(shù)據(jù)多路復(fù)用成TS。通過(guò)固定長(zhǎng)度的包序列(即,188字節(jié)的包(TS包))形成TS。TS被設(shè)計(jì)用于由傳輸線所引起的數(shù)據(jù)誤差的系統(tǒng)中。從上文的解釋中可以理解的是,TS是表示多重內(nèi)容節(jié)目的數(shù)據(jù)流。雖然TS包排在PES包之前,但是TS包通常短于PES包。一般地,將一個(gè)PES包劃分為幾段,而PES包段分別放置在多個(gè)TS包中。根據(jù)TS的STD模型,通過(guò)在TS包中的包ID(PID)將要解碼的位流的解碼模型切換到PS側(cè)。
參考附圖6,TS包具有以此順序設(shè)置的標(biāo)題、自適應(yīng)域(AF)和有效負(fù)載。標(biāo)題包括以此順序設(shè)置的同步字節(jié)、誤差指示器、單元開始指示器和傳輸包優(yōu)先標(biāo)志。在該標(biāo)題中,傳輸包優(yōu)先標(biāo)志后跟著指示在相關(guān)的包中的有效負(fù)載的類型的PID(在相關(guān)的包中的有效負(fù)載中的數(shù)據(jù)類型)。在該標(biāo)題中,PID后連續(xù)跟著擾頻控制信息片段、AF控制信息片段和循環(huán)計(jì)數(shù)器。標(biāo)題的尾部是循環(huán)計(jì)數(shù)器。AF控制信息片段表示在相關(guān)的包中是否存在自適應(yīng)域。在AF控制信息片段表示不存在自適應(yīng)域時(shí),標(biāo)題后緊跟著有效負(fù)載。在另一方面,在AF控制信息片段表示存在自適應(yīng)域時(shí),標(biāo)題后連續(xù)跟著自適應(yīng)域(AF)和有效負(fù)載。循環(huán)計(jì)數(shù)器指示關(guān)于相關(guān)的包的連續(xù)性。一般地,自適應(yīng)信息放置在自適應(yīng)域(AF)中,同時(shí)內(nèi)容數(shù)據(jù)比如視頻數(shù)據(jù)或聲頻數(shù)據(jù)放置在有效負(fù)載中。無(wú)效的數(shù)據(jù)(比如啞數(shù)據(jù))可以放置在有效負(fù)載中。
如附圖6所示,自適應(yīng)域包括可選擇的域。可選擇的域的48位前端帶有PCR。
處理TS的MPEG系統(tǒng)解碼設(shè)備被設(shè)計(jì)成在接收和解碼過(guò)程中提供檢測(cè)在TS包中的PID并根據(jù)所檢測(cè)的PID對(duì)TS包進(jìn)行分類的機(jī)構(gòu)。具體地說(shuō),參考附圖7,TS包搜索在階段S1具有PID=0的一個(gè)包。換句話說(shuō),接收PID=0的TS包。PID=0的TS包稱為PAT(節(jié)目關(guān)聯(lián)表)包。PAT包帶有表示在節(jié)目號(hào)(內(nèi)容節(jié)目ID號(hào))FR和基于鏈接的專用PID之間的關(guān)系(即,在內(nèi)容節(jié)目和專用PID之間的關(guān)系)的PAT信息。在階段S1之后的階段S2中,檢測(cè)在PAT包中的PAT信息。每個(gè)專用PID對(duì)應(yīng)于PMT(節(jié)目映射表)包。PMT包帶有表示在相關(guān)的內(nèi)容節(jié)目、在表示相關(guān)的內(nèi)容節(jié)目的視頻包中的PID和在表示相關(guān)的內(nèi)容節(jié)目的聲頻包中的PID之間的關(guān)系的PMT信息。從內(nèi)容節(jié)目中事先選擇一個(gè)節(jié)目作為所需的內(nèi)容節(jié)目。在階段S2中,參考在PAT包中的PAT信息檢測(cè)對(duì)應(yīng)于所需的內(nèi)容節(jié)目的專用PID。在階段S2之后的階段S3中,接收或搜索具有與所檢測(cè)的專用PID相同的PID的PMT包。在階段S3之后的階段S4中,訪問(wèn)所接收的PMT包以獲得PMT信息。根據(jù)在所訪問(wèn)的PMT包中的PMT信息,檢測(cè)在表示所需的內(nèi)容節(jié)目的視頻包和聲頻包中的PID。此外,檢測(cè)與所需的內(nèi)容節(jié)目相關(guān)的同步時(shí)鐘包中的PID。在階段S4之后的階段S5a中,接收對(duì)應(yīng)于所檢測(cè)的視頻包PID的TS包。在階段S4之后的階段S5b中,接收對(duì)應(yīng)于所檢測(cè)的聲頻包PID的TS包。從所接收的TS包中抽取聲頻信息。在階段S4之后的階段S5c中,接收對(duì)應(yīng)于所檢測(cè)的同步時(shí)鐘包PID的TS包。從所接收的TS包中抽取同步時(shí)鐘信息。這樣,響應(yīng)所檢測(cè)的PID訪問(wèn)表示所需的內(nèi)容節(jié)目的視頻包和聲頻包。通過(guò)參考PAT和PMT實(shí)施到所需的內(nèi)容節(jié)目的輸入。PAT和PMT稱為PSI(節(jié)目專用信息)。
附圖8所示為可用作在附圖1中的信息信號(hào)產(chǎn)生設(shè)備10的信息信號(hào)產(chǎn)生設(shè)備10a。如附圖8所示,信息信號(hào)產(chǎn)生設(shè)備10a包括與CPU17連接的用戶接口17a。用戶接口17a可以由用戶支配。CPU 17具有輸入/輸出端口、處理部分、ROM和RAM的結(jié)合。CPU 17根據(jù)存儲(chǔ)在ROM和RAM中的控制程序運(yùn)行。控制程序被設(shè)計(jì)成啟動(dòng)CPU17以實(shí)施后面所提到的運(yùn)行步驟。通過(guò)處理用戶接口17a,信息信號(hào)產(chǎn)生設(shè)備10a的操作可以在不同的模式中改變,包括第一模式和第二模式。第一運(yùn)行模式設(shè)計(jì)成記錄完整包信號(hào),即主數(shù)據(jù)包含聲頻信息和視頻信息。第二運(yùn)行模式設(shè)計(jì)成記錄后期錄音目的聲頻數(shù)據(jù)。在處理用戶接口17a時(shí),從其中將運(yùn)行模式指定信號(hào)輸入到CPU 17中。運(yùn)行模式指定信號(hào)指示第一運(yùn)行模式和第二運(yùn)行模式中的哪種模式是所需的。CPU 17將運(yùn)行模式指定信號(hào)傳輸給信號(hào)選擇器16。
在運(yùn)行模式指定信號(hào)指示第一運(yùn)行模式是所需的時(shí),即在需要記錄主數(shù)據(jù)時(shí),信息信號(hào)產(chǎn)生設(shè)備10a運(yùn)行如下。輸入視頻數(shù)據(jù)(視頻信號(hào))反饋到視頻編碼器11,而伴有輸入視頻數(shù)據(jù)的輸入聲頻數(shù)據(jù)(第一聲頻信號(hào))反饋到聲頻編碼器11a。視頻編碼器11和聲頻編碼器11a類似于在附圖1中的視頻編碼器11和聲頻編碼器11a。一般地,輸入視頻數(shù)據(jù)和輸入聲頻數(shù)據(jù)都表示內(nèi)容節(jié)目(公共聲頻視頻節(jié)目),并且彼此同步。視頻編碼器11實(shí)施輸入視頻數(shù)據(jù)的MPEG編碼以產(chǎn)生編碼結(jié)果視頻數(shù)據(jù)。編碼結(jié)果視頻數(shù)據(jù)從視頻編碼器11發(fā)送到PES分包裝置12。聲頻編碼器11a實(shí)施輸入聲頻數(shù)據(jù)的MPEG編碼以產(chǎn)生編碼結(jié)果聲頻數(shù)據(jù)。該編碼結(jié)果聲頻數(shù)據(jù)從聲頻編碼器11a發(fā)送到PES分包裝置12a。PES分包裝置12將編碼結(jié)果視頻數(shù)據(jù)轉(zhuǎn)換為一系列的PES包。將PES包序列從PES分包裝置12發(fā)送到時(shí)間標(biāo)記記錄器13。PES分包裝置12a將編碼結(jié)果聲頻數(shù)據(jù)轉(zhuǎn)換為一系列的PES包。將PES包序列從PES分包裝置12a發(fā)送到時(shí)間標(biāo)記記錄器13a。
信號(hào)發(fā)生器14給時(shí)間標(biāo)記記錄器13和13a輸出27MHz的時(shí)鐘信號(hào)。時(shí)間標(biāo)記記錄器13響應(yīng)27MHz的時(shí)鐘信號(hào)產(chǎn)生時(shí)序信息片段,即,PCR和周期更新的時(shí)間標(biāo)記(視頻PTS和視頻DTS)。時(shí)間標(biāo)記記錄器13在每個(gè)PES包中記錄PCR、PTS和DTS。增加了時(shí)序信息的PES包從時(shí)間標(biāo)記記錄器13中順序地發(fā)送給多路復(fù)用器15。時(shí)間標(biāo)記記錄器13a響應(yīng)27MHz的時(shí)鐘信號(hào)產(chǎn)生PCR和周期性更新的時(shí)間標(biāo)記(聲頻PTS和聲頻DTS)。時(shí)間標(biāo)記記錄器13a在每個(gè)PES包中記錄PCR、PTS和DTS。增加了時(shí)序信息的PES包從時(shí)間標(biāo)記記錄器13a中順序地發(fā)送給多路復(fù)用器15。多路復(fù)用器15對(duì)來(lái)自時(shí)間標(biāo)記記錄器13的PES包和來(lái)自時(shí)間標(biāo)記記錄器13a的PES包進(jìn)行多路復(fù)用以產(chǎn)生PS格式或TS格式的多路復(fù)用結(jié)果數(shù)據(jù)(主數(shù)據(jù))。將多路復(fù)用結(jié)果數(shù)據(jù)從多路復(fù)用器15發(fā)送到信號(hào)選擇器16中。
信號(hào)選擇器16響應(yīng)操作模式指定信號(hào),選擇多路復(fù)用結(jié)果數(shù)據(jù)(主數(shù)據(jù))并將多路復(fù)用結(jié)果數(shù)據(jù)傳遞給緩沖器18。在將多路復(fù)用結(jié)果數(shù)據(jù)從緩沖器中輸出到記錄控制器19之前將多路復(fù)用結(jié)果數(shù)據(jù)存儲(chǔ)在其中。記錄控制器19將主數(shù)據(jù)(多路復(fù)用結(jié)果數(shù)據(jù))記錄在信息信號(hào)記錄媒體25作為具有名稱為“PR....dat”的AV多路傳輸結(jié)果文件25a(參見附圖10)。
通過(guò)時(shí)間標(biāo)記記錄器13所記錄的視頻PTS和視頻DTS和通過(guò)時(shí)間標(biāo)記記錄器13a所記錄的聲頻PTS和聲頻DTS成這樣關(guān)系使從所記錄的主數(shù)據(jù)中可以同步地再現(xiàn)視頻信息和聲頻信息。
在操作模式指定信號(hào)指示需要第二操作模式時(shí),即在需要記錄后期錄音目的聲頻數(shù)據(jù)時(shí),如下操作信息信號(hào)產(chǎn)生設(shè)備10a。CPU 17將后期錄音目的聲頻數(shù)據(jù)的標(biāo)識(shí)信息(ID信息)發(fā)送給PES分包裝置12a。將后期錄音目的聲頻數(shù)據(jù)(第二聲頻信號(hào))反饋給聲頻編碼器11a。聲頻編碼器11a對(duì)后期錄音目的聲頻數(shù)據(jù)實(shí)施MPEG編碼以產(chǎn)生編碼結(jié)果聲頻數(shù)據(jù)。將編碼結(jié)果聲頻數(shù)據(jù)從聲頻編碼器11a發(fā)送給PES分包裝置12a。
PES分包裝置12a將后期錄音ID信息加入到編碼結(jié)果聲頻數(shù)據(jù)中,并將加入了ID的編碼結(jié)果視頻數(shù)據(jù)轉(zhuǎn)換為PES包序列。將PES包序列從PES分包裝置12a發(fā)送給時(shí)間標(biāo)記記錄器13a。
信息信號(hào)再現(xiàn)設(shè)備訪問(wèn)在記錄媒體25上的AV多路傳輸結(jié)果文件25a,并從其中讀出多路復(fù)用結(jié)果數(shù)據(jù)(主數(shù)據(jù))。該信息信號(hào)再現(xiàn)設(shè)備從所讀出的多路復(fù)用結(jié)果數(shù)據(jù)中分離并再現(xiàn)視頻信號(hào)。具體地說(shuō),由信息信號(hào)產(chǎn)生設(shè)備10a和信息信號(hào)再現(xiàn)設(shè)備共同擁有的讀控制器19a訪問(wèn)記錄媒體25并再現(xiàn)該視頻信號(hào)。此外,讀控制器19a從所再現(xiàn)的視頻信號(hào)中抽取每個(gè)PCR、每個(gè)視頻PTS和每個(gè)視頻DTS??商鎿Q的是,通過(guò)在信息信號(hào)再現(xiàn)設(shè)備中的標(biāo)識(shí)信息檢測(cè)器可以獲得與所再現(xiàn)的視頻信號(hào)相關(guān)的PCR、視頻PTS和視頻DTS。讀控制器19a將所抽取的PCR發(fā)送到信號(hào)發(fā)生器14。讀控制器19a通知CPU 17所抽取的視頻PTS和所抽取的視頻DTS。信號(hào)發(fā)生器14將27兆赫茲的時(shí)鐘信號(hào)鎖定到由所抽取的PCR指示的頻率。
信號(hào)發(fā)生器14給時(shí)間標(biāo)記記錄器13a輸出27-兆赫茲的時(shí)鐘信號(hào)。時(shí)間標(biāo)記記錄器13a在受CPU 17控制的同時(shí),響應(yīng)27-兆赫茲的時(shí)鐘信號(hào)產(chǎn)生時(shí)序信息片段,即PCR和周期性更新的時(shí)間標(biāo)記(聲頻PTS和聲頻DTS)。響應(yīng)所抽取的視頻PTS和所抽取的視頻DTS,通過(guò)CPU 17對(duì)時(shí)間標(biāo)記記錄器13a的控制實(shí)施了聲頻PTS和聲頻DTS的管理,由此在后期錄音目的聲頻信號(hào)的聲頻信息和在所記錄的主數(shù)據(jù)(AV多路傳輸結(jié)果文件25a)中的視頻信息之間提供同步關(guān)系。時(shí)間標(biāo)記記錄器13a記錄在每個(gè)PES包中的PCR、聲頻PTS和聲頻DTS??扇〉氖?,將PCR、聲頻PTS和聲頻DTS設(shè)置成等于在記錄主數(shù)據(jù)的過(guò)程中已經(jīng)加入到每個(gè)聲頻PES包中的PCR、聲頻PTS和聲頻DTS。在這種情況下,在后期錄音聲頻數(shù)據(jù)與在所記錄的主數(shù)據(jù)中的視頻信息之間的計(jì)時(shí)關(guān)系與在所記錄的主數(shù)據(jù)中的聲頻信息與在其中的視頻信息之間的計(jì)時(shí)關(guān)系相同。時(shí)序信息相加的PES包順序地從時(shí)間標(biāo)記記錄器13a發(fā)送到信號(hào)選擇器16而不通過(guò)多路復(fù)用器15傳輸。信號(hào)選擇器16響應(yīng)操作模式指定信號(hào)選擇通過(guò)時(shí)間標(biāo)記記錄器13a所輸出的數(shù)據(jù)(PES包序列),并將所選擇的數(shù)據(jù)傳輸?shù)骄彌_器18a。在將所選擇的數(shù)據(jù)從緩沖器18a輸出到記錄控制器19之前將其存儲(chǔ)在該緩沖器中。記錄控制器19記錄從在記錄媒體25中的緩沖器18a中輸出的數(shù)據(jù)作為后期錄音聲頻數(shù)據(jù)。在記錄媒體25中的后期錄音聲頻數(shù)據(jù)放在名稱為“AF....dat”的后期錄音聲頻文件25b中(參見附圖10)。可取的是,記錄控制器19和信息信號(hào)再現(xiàn)設(shè)備(讀控制器19a)可以分時(shí)地交替地周期性地訪問(wèn)記錄媒體25。
類似地,第三和在后的聲頻信號(hào)(第二和在后的后期錄音目的聲頻信號(hào))可以記錄在記錄媒體25分別作為第二和在后的后期錄音聲頻文件。例如,包含第M次后期錄音聲頻信號(hào)的后期錄音聲頻文件的名稱為“AF....dat”。
根據(jù)后面提到的信息,將后期錄音目的聲頻數(shù)據(jù)記錄在信息信號(hào)記錄媒體25作為播放清單信息。具體地說(shuō),在PL文件夾中將第一后期錄音目的聲頻數(shù)據(jù)記錄成名稱為“AF-1.dat”的文件(參見附圖10)。此外,記錄第二和在后的后期錄音目的聲頻數(shù)據(jù)。此外,在PL文件夾中將第m后期錄音目的聲頻數(shù)據(jù)記錄成名稱為“AF-m.dat”的文件(參見附圖10)。因此,記錄了“m”種不同類型的后期錄音目的聲頻數(shù)據(jù)。信息片段“AF_number”(參見附圖15)識(shí)別后期錄音目的聲頻數(shù)據(jù)。由于信息片段“AF_number”具有8位(“0”無(wú)用),因此可以處理高達(dá)254種不同類型的后期錄音目的聲頻數(shù)據(jù)。
附圖9所示為可以用作在附圖1中的信息信號(hào)再現(xiàn)設(shè)備30的信息信號(hào)再現(xiàn)設(shè)備30a。如附圖9所示,信息信號(hào)再現(xiàn)設(shè)備30a包括與CPU33連接的用戶接口32。用戶可以處理用戶接口32。CPU33具有輸入/輸出端口的結(jié)合、處理部分、ROM和RAM。CPU 33根據(jù)存儲(chǔ)在ROM和RAM中的控制程序運(yùn)行。控制程序被設(shè)計(jì)成啟動(dòng)CPU 33以實(shí)施后面所提到的運(yùn)行步驟。通過(guò)處理用戶接口32,信息信號(hào)產(chǎn)生設(shè)備30a的操作可以在不同的模式中改變,包括第一模式和第二模式。第一運(yùn)行模式設(shè)計(jì)成再現(xiàn)主數(shù)據(jù)(AV多路傳輸結(jié)果文件25a)。第二運(yùn)行模式設(shè)計(jì)成產(chǎn)生后期錄音聲頻數(shù)據(jù)(后期錄音聲頻文件25b)而不是在主數(shù)據(jù)中的聲頻信息,同時(shí)同步地再現(xiàn)在主數(shù)據(jù)中的視頻信息。在處理用戶接口32時(shí),從其中將運(yùn)行模式指定信號(hào)輸入到CPU33中。運(yùn)行模式指定信號(hào)指示第一運(yùn)行模式和第二運(yùn)行模式中哪種模式是所需的。CPU33將運(yùn)行模式指定信號(hào)傳遞給信號(hào)選擇器37。此外,通過(guò)處理用戶接口32可以將標(biāo)識(shí)(ID)信息輸入到CPU33。CPU33將該標(biāo)識(shí)信息傳遞給標(biāo)識(shí)信息檢測(cè)器34。
在運(yùn)行模式指定信號(hào)指示需要第一運(yùn)行模式時(shí),即,在需要再現(xiàn)主數(shù)據(jù)(AV多路傳輸結(jié)果文件25a)時(shí),信息信號(hào)再現(xiàn)設(shè)備30a如下運(yùn)行。通過(guò)處理用戶接口32將標(biāo)識(shí)所需的主數(shù)據(jù)的信號(hào)輸入到CPU33。標(biāo)識(shí)信號(hào)標(biāo)識(shí)分配給所需的主數(shù)據(jù)的指定號(hào)(標(biāo)識(shí)號(hào))。CPU33將標(biāo)識(shí)信號(hào)傳遞給標(biāo)識(shí)信息檢測(cè)器34。標(biāo)識(shí)信息檢測(cè)器34從標(biāo)識(shí)信號(hào)中得出主數(shù)據(jù)的標(biāo)識(shí)號(hào)。標(biāo)識(shí)信息檢測(cè)器34通知讀控制器31所需的主數(shù)據(jù)的標(biāo)識(shí)號(hào)。標(biāo)識(shí)信息檢測(cè)器34指令讀控制器31從信息信號(hào)記錄媒體25中讀取對(duì)應(yīng)于所需的主數(shù)據(jù)的標(biāo)識(shí)號(hào)的名稱為“PR....dat”的主數(shù)據(jù)文件(AV多路傳輸結(jié)果文件25a)。因此,讀控制器31實(shí)施了從記錄媒體25中讀出所需的主數(shù)據(jù)。這樣,讀控制器31從記錄媒體25中讀出了所需的主數(shù)據(jù)(即所需的多路復(fù)用結(jié)果數(shù)據(jù))。將所讀出的主數(shù)據(jù)從讀控制器31發(fā)送到緩沖器35中。在將主數(shù)據(jù)從緩沖器35輸出到多路信號(hào)分解器36中之前將其存儲(chǔ)在緩沖器35中。多路信號(hào)分解器36將主數(shù)據(jù)分解為視頻數(shù)據(jù)和聲頻數(shù)據(jù)。將視頻數(shù)據(jù)從多路信號(hào)分解器36發(fā)送到時(shí)間標(biāo)記檢測(cè)器43中。聲頻數(shù)據(jù)從多路信號(hào)分解器36發(fā)送到信號(hào)選擇器37中。信號(hào)選擇器37響應(yīng)運(yùn)行模式指定信號(hào)從多路信號(hào)分解器36中選擇聲頻數(shù)據(jù),并將所選擇的聲頻數(shù)據(jù)傳輸?shù)綍r(shí)間標(biāo)記檢測(cè)器43a中。
時(shí)間標(biāo)記檢測(cè)器43檢測(cè)在視頻數(shù)據(jù)中的時(shí)序信息(每個(gè)PCR、每個(gè)視頻PTS和每個(gè)視頻DTS)。時(shí)間標(biāo)記檢測(cè)器43將所檢測(cè)的PCR、所檢測(cè)的視頻PTS和所檢測(cè)的視頻DTS發(fā)送給時(shí)間標(biāo)記比較器42中。時(shí)間標(biāo)記檢測(cè)器43將視頻數(shù)據(jù)傳輸給PES去包裝置44。時(shí)間標(biāo)記檢測(cè)器43a檢測(cè)在聲頻數(shù)據(jù)中的時(shí)序信息(每個(gè)PCR、每個(gè)聲頻PTS和每個(gè)聲頻DTS)。時(shí)間標(biāo)記檢測(cè)器43a將所檢測(cè)的PCR、所檢測(cè)的聲頻PTS和所檢測(cè)的聲頻DTS發(fā)送給時(shí)間標(biāo)記比較器42中。時(shí)間標(biāo)記檢測(cè)器43a將聲頻數(shù)據(jù)傳輸給PES去包裝置44a。
PES去包裝置44對(duì)視頻數(shù)據(jù)(PES包序列)進(jìn)行去包以產(chǎn)生去包結(jié)果視頻數(shù)據(jù)。PES去包裝置44將去包結(jié)果視頻數(shù)據(jù)輸出給視頻解碼器45。PES去包裝置44a對(duì)聲頻數(shù)據(jù)(PES包序列)進(jìn)行去包以產(chǎn)生去包結(jié)果聲頻數(shù)據(jù)。PES去包裝置44a將去包結(jié)果聲頻數(shù)據(jù)輸出給聲頻解碼器45a。視頻解碼器45和聲頻解碼器45a類似于在附圖1中的視頻解碼器45和聲頻解碼器45a。視頻解碼器45實(shí)施了視頻數(shù)據(jù)的MPEG解碼以產(chǎn)生解碼結(jié)果視頻數(shù)據(jù)。視頻解碼器45將解碼結(jié)果視頻數(shù)據(jù)存儲(chǔ)在存儲(chǔ)器46中。聲頻解碼器45a實(shí)施了聲頻數(shù)據(jù)的MPEG解碼以產(chǎn)生解碼結(jié)果聲頻數(shù)據(jù)。聲頻解碼器45a將解碼結(jié)果聲頻數(shù)據(jù)存儲(chǔ)在存儲(chǔ)器46a中。
信號(hào)發(fā)生器41給時(shí)間標(biāo)記比較器42輸出27兆赫茲的時(shí)鐘信號(hào)?;?7兆赫茲的時(shí)鐘信號(hào),時(shí)間標(biāo)記比較器42產(chǎn)生指示參考時(shí)鐘時(shí)間的參考時(shí)鐘信號(hào)。時(shí)間標(biāo)記比較器42將參考時(shí)鐘信號(hào)的頻率鎖定在由PCR所指示的頻率上。因此,參考時(shí)鐘時(shí)間由PCR決定。時(shí)間標(biāo)記比較器42將由視頻DTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以決定視頻DTS時(shí)間是否與參考時(shí)鐘時(shí)間相符合。在視頻DTS時(shí)間與參考時(shí)鐘時(shí)間相符合時(shí),時(shí)間標(biāo)記比較器42指令視頻解碼器45開始來(lái)自具有相關(guān)的視頻DTS的PES包的視頻數(shù)據(jù)的解碼。時(shí)間標(biāo)記比較器42將由聲頻DTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以決定聲頻DTS時(shí)間是否與參考時(shí)鐘時(shí)間相符合。在聲頻DTS時(shí)間與參考時(shí)鐘時(shí)間相符合時(shí),時(shí)間標(biāo)記比較器42指令聲頻解碼器45a開始對(duì)來(lái)自具有相關(guān)的聲頻DTS的PES包的聲頻數(shù)據(jù)進(jìn)行解碼。
時(shí)間標(biāo)記比較器42將由視頻PTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以決定視頻PTS時(shí)間是否與參考時(shí)鐘時(shí)間相符合。在視頻PTS時(shí)間與參考時(shí)鐘時(shí)間相符合時(shí),時(shí)間標(biāo)記比較器42指令存儲(chǔ)器46給顯示監(jiān)視器27輸出解碼結(jié)果視頻數(shù)據(jù)以便用于指示。時(shí)間標(biāo)記比較器42將由聲頻PTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以決定聲頻PTS時(shí)間是否與參考時(shí)鐘時(shí)間相符合。在聲頻PTS時(shí)間與參考時(shí)鐘時(shí)間相符合時(shí),時(shí)間標(biāo)記比較器42指令存儲(chǔ)器46a給揚(yáng)聲器28輸出解碼結(jié)果聲頻數(shù)據(jù)以便用于重播或產(chǎn)生聲音。預(yù)先設(shè)定視頻PTS和聲頻PTS以便能夠同步地重播解碼結(jié)果視頻信號(hào)和解碼結(jié)果聲頻數(shù)據(jù)。
在運(yùn)行模式指定信號(hào)指示需要第二運(yùn)行模式時(shí),即在需要再現(xiàn)后期錄音聲頻數(shù)據(jù)和主數(shù)據(jù)視頻信息時(shí),信息信號(hào)再現(xiàn)設(shè)備30a運(yùn)行如下。通過(guò)處理用戶接口32將標(biāo)識(shí)所需的主數(shù)據(jù)的信號(hào)和所需的后期錄音聲頻數(shù)據(jù)輸入到CPU33。標(biāo)識(shí)信號(hào)對(duì)應(yīng)于代表分配給所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的指定號(hào)(標(biāo)識(shí)號(hào))的在附圖15中的信息片段“AF_number”和“PR_number”。CPU33將標(biāo)識(shí)信號(hào)傳遞給標(biāo)識(shí)信息檢測(cè)器34。讀控制器31從信息信號(hào)記錄媒體25中讀出播放列表信息“PLAY_IFO”(參見附圖15),并將播放列表信息“PLAY_IFO”發(fā)送給標(biāo)識(shí)信息檢測(cè)器34。標(biāo)識(shí)信息檢測(cè)器34響應(yīng)該標(biāo)識(shí)信號(hào)通過(guò)參考播放列表信息“PLAY_IFO”檢測(cè)所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標(biāo)識(shí)號(hào)。標(biāo)識(shí)信息檢測(cè)器34將所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標(biāo)識(shí)號(hào)通知讀控制器31。標(biāo)識(shí)信息檢測(cè)器34指令讀控制器31從記錄媒體25中交替地讀出具有對(duì)應(yīng)于所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標(biāo)識(shí)號(hào)的名稱的后期錄音聲頻文件25b和主數(shù)據(jù)文件(AV多路傳輸結(jié)果文件25a)。因此,讀控制器31實(shí)施了基于交替的時(shí)分脈沖信號(hào)從記錄媒體25中讀出所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)。將所讀出的主數(shù)據(jù)從讀控制器31發(fā)送到緩沖器35。在將主數(shù)據(jù)從緩沖器輸出到多路信號(hào)分解器36之前將其存儲(chǔ)在緩沖器35中。多路信號(hào)分解器36將主數(shù)據(jù)分解為視頻數(shù)據(jù)和聲頻數(shù)據(jù)。視頻數(shù)據(jù)從多路信號(hào)分解器36發(fā)送到時(shí)間標(biāo)記檢測(cè)器43。聲頻數(shù)據(jù)從多路信號(hào)分解器36發(fā)送給信號(hào)選擇器37。所讀出的后期錄音聲頻數(shù)據(jù)從讀控制器31發(fā)送給緩沖器35a。在后期錄音聲頻數(shù)據(jù)從緩沖器35a輸出到信號(hào)選擇器37之前將其存儲(chǔ)在緩沖器35a中。信號(hào)選擇器37響應(yīng)運(yùn)行模式指定信號(hào)從緩沖器35a中選擇后期錄音聲頻數(shù)據(jù),并將所選擇的后期錄音聲頻數(shù)據(jù)傳輸給時(shí)間標(biāo)記檢測(cè)器43a。換句話說(shuō),信號(hào)選擇器37拒絕來(lái)自多路信號(hào)分解器36的聲頻數(shù)據(jù)。
時(shí)間標(biāo)記檢測(cè)器43檢測(cè)在視頻數(shù)據(jù)中的時(shí)序信息(每個(gè)PCR、每個(gè)視頻PTS和每個(gè)視頻DTS)。時(shí)間標(biāo)記檢測(cè)器43將所檢測(cè)的PCR、所檢測(cè)的視頻PTS和所檢測(cè)的視頻DTS發(fā)送給時(shí)間標(biāo)記比較器42中。時(shí)間標(biāo)記檢測(cè)器43將視頻數(shù)據(jù)傳輸給PES去包裝置44。時(shí)間標(biāo)記檢測(cè)器43a檢測(cè)在后期錄音聲頻數(shù)據(jù)中的時(shí)序信息(每個(gè)PCR、每個(gè)聲頻PTS和每個(gè)聲頻DTS)。時(shí)間標(biāo)記檢測(cè)器43a將所檢測(cè)的PCR、所檢測(cè)的聲頻PTS和所檢測(cè)的聲頻DTS發(fā)送給時(shí)間標(biāo)記比較器42中。時(shí)間標(biāo)記檢測(cè)器43a將后期錄音聲頻數(shù)據(jù)傳輸給PES去包裝置44a。
PES去包裝置44對(duì)視頻數(shù)據(jù)(PES包序列)進(jìn)行去包以產(chǎn)生去包結(jié)果視頻數(shù)據(jù)。PES去包裝置44將去包結(jié)果視頻數(shù)據(jù)輸出給視頻解碼器45。PES去包裝置44a對(duì)后期錄音聲頻數(shù)據(jù)(PES包序列)進(jìn)行去包以產(chǎn)生去包結(jié)果聲頻數(shù)據(jù)。PES去包裝置44a將去包結(jié)果聲頻數(shù)據(jù)輸出給聲頻解碼器45a。視頻解碼器45實(shí)施了視頻數(shù)據(jù)的MPEG解碼以產(chǎn)生解碼結(jié)果視頻數(shù)據(jù)。視頻解碼器45將解碼結(jié)果視頻數(shù)據(jù)存儲(chǔ)在存儲(chǔ)器46中。聲頻解碼器45a實(shí)施了聲頻數(shù)據(jù)的MPEG解碼以產(chǎn)生解碼結(jié)果聲頻數(shù)據(jù)。聲頻解碼器45a將解碼結(jié)果聲頻數(shù)據(jù)存儲(chǔ)在存儲(chǔ)器46a中。
信號(hào)發(fā)生器41給時(shí)間標(biāo)記比較器42輸出27兆赫茲的時(shí)鐘信號(hào)?;?7兆赫茲的時(shí)鐘信號(hào),時(shí)間標(biāo)記比較器42產(chǎn)生指示參考時(shí)鐘時(shí)間的參考時(shí)鐘信號(hào)。時(shí)間標(biāo)記比較器42將參考時(shí)鐘信號(hào)的頻率鎖定在由PCR所指示的頻率上。因此,參考時(shí)鐘時(shí)間由PCR決定。時(shí)間標(biāo)記比較器42將由視頻DTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以決定視頻DTS時(shí)間是否與參考時(shí)鐘時(shí)間相符合。在視頻DTS時(shí)間與參考時(shí)鐘時(shí)間相符合時(shí),時(shí)間標(biāo)記比較器42指令視頻解碼器45開始對(duì)來(lái)自具有相關(guān)的視頻DTS的PES包的視頻數(shù)據(jù)進(jìn)行解碼。時(shí)間標(biāo)記比較器42將由聲頻DTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以決定聲頻DTS時(shí)間是否與參考時(shí)鐘時(shí)間相符合。在聲頻DTS時(shí)間與參考時(shí)鐘時(shí)間相符合時(shí),時(shí)間標(biāo)記比較器42指令聲頻解碼器45a開始對(duì)來(lái)自具有相關(guān)的聲頻DTS的PES包的聲頻數(shù)據(jù)進(jìn)行解碼。
時(shí)間標(biāo)記比較器42將由視頻PTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以決定視頻PTS時(shí)間是否與參考時(shí)鐘時(shí)間相符合。在視頻PTS時(shí)間與參考時(shí)鐘時(shí)間相符合時(shí),時(shí)間標(biāo)記比較器42指令存儲(chǔ)器46給顯示監(jiān)視器27輸出解碼結(jié)果視頻數(shù)據(jù)以便用于指示。時(shí)間標(biāo)記比較器42將由聲頻PTS所表示的時(shí)間與參考時(shí)鐘時(shí)間進(jìn)行比較以決定聲頻PTS時(shí)間是否與參考時(shí)鐘時(shí)間相符合。在聲頻PTS時(shí)間與參考時(shí)鐘時(shí)間相符合時(shí),時(shí)間標(biāo)記比較器42啟動(dòng)存儲(chǔ)器46a給揚(yáng)聲器28輸出解碼結(jié)果聲頻數(shù)據(jù)以便用于重播或產(chǎn)生聲音。預(yù)先設(shè)定視頻PTS和聲頻PTS以便能夠同步地重播解碼結(jié)果視頻數(shù)據(jù)和解碼結(jié)果聲頻數(shù)據(jù)(后期錄音聲頻數(shù)據(jù))。
下面解釋記錄在信息信號(hào)記錄媒體25上的信息的格式。如附圖10所示,記錄媒體25存儲(chǔ)根目錄,在根目錄下放置有名稱為“LIB(庫(kù))”的文件夾。在文件夾“LIB”之下,有許多命名為“SIDE.ifo”(“SIDE0.ifo”,“SIDE1.ifo”,...“SIDEk.ifo”)的文件。文件“SIDE.ifo”帶有與許多內(nèi)容節(jié)目相關(guān)的輔助信息,即聲頻視頻(AV)節(jié)目。
此外,在文件夾“LIB”之下,還有分別具有信息片段“RP0.dat”,“RP1.dat”...“RPn.dat”的文件夾“PR0”,“PR1”,...“PRn”。信息片段“RP0.dat”,“RP1.dat”和“RPn.dat”用于鏈接AV多路傳輸?shù)慕Y(jié)果位流。
此外,在文件夾“LIB”之下,還有文件夾“PL0”,“PL1”,...“PLn”以用于放置后期錄音聲頻文件(帶有后期錄音聲頻信息的文件)。例如,在制作并記錄與文件夾“PRO”相關(guān)的“m”個(gè)后期錄音聲頻文件的情況下,列表信息片段“AF0-1.dat”,“AF1-2.dat”,...“AF0-n.dat”放置在文件夾“PL0”中作為與后期錄音聲頻文件的鏈接的信息。
從上文的描述中可以理解的是,與AV多路傳輸結(jié)果文件和后期錄音聲頻文件相關(guān)的鏈接信息記錄在記錄媒體25中。基于該鏈接信息可以從記錄媒體25中再現(xiàn)所需的內(nèi)容信息。
參考附圖11,每個(gè)文件“SIDE.ifo”具有分層結(jié)構(gòu)的格式。具體地說(shuō),每個(gè)文件“SIDE.ifo”具有第一級(jí)段“TOTAL_MANAGER_IFO”,它包含第二級(jí)段“GENERAL_IFO”和“CNTNT_IFO”。第二級(jí)段“GENERAL_IFO”帶有與整個(gè)當(dāng)前的輔助信息相關(guān)的參數(shù)。
第二級(jí)段“GENERAL_IFO”具有如在附圖12中所示的語(yǔ)法結(jié)構(gòu)。具體地說(shuō),第二級(jí)段“GENERAL_IFO”包括具有語(yǔ)法名稱分別“System_id”、“TMG_IFO_length”、“Num of PR_IFO”、“Numof PL_IFO”、“Start Address of PR_IFO”和“Start Address ofPL_IFO”的信息片段。信息片段“System_id”是標(biāo)識(shí)當(dāng)前的信息結(jié)構(gòu)的類型的32位信號(hào)。信息片段“TMG_IFO_length”是表示整個(gè)管理器長(zhǎng)度的32位信號(hào)。信息片段“Num of PR_IFO”是表示將在下文解釋的節(jié)目信息片段“PR_IFO”的數(shù)量的8位信號(hào)。信息片段“Num ofPL_IFO”是表示將在下文解釋的后期錄音信息片段“PL_IFO”的數(shù)量的8位信號(hào)。信息片段“Start Address of PR_IFO”是表示第一節(jié)目信息片段“PR_IFO_0”的開始地址的32位信號(hào)。信息片段“StartAddress of PL_IFO”是表示第一后期錄音信息片段“PL_IFO_0”的開始地址的32位信號(hào)。
在附圖11中的第二級(jí)段“CNTNT_IFO”包含具有分別與內(nèi)容節(jié)目(或AV多路傳輸結(jié)果文件)相關(guān)的信息片段的第三級(jí)段“PR_IFO_0”,“PR_IFO_1”,...,“PR_IFO_m”。此外,第二級(jí)段“CNTNT_IFO”還包含具有分別與內(nèi)容節(jié)目(或AV多路傳輸結(jié)果文件)相關(guān)的后期錄音聲頻數(shù)據(jù)的信息片段的第三級(jí)段“PL_IFO_0”,“PL_IFO_1”,...,“PL_IFO_m”。例如,在存在對(duì)應(yīng)于第三級(jí)段“PR_IFO_0”的后期錄音聲頻數(shù)據(jù)的情況下,第三級(jí)段“PL_IFO_0”包含具有與后期錄音聲頻文件相關(guān)的信息(播放清單信息)的第四級(jí)段“PLAY_IFO”。
第三級(jí)段“PR_IFO_0”,“PR_IFO_1”,...,“PR_IFO_m”在結(jié)構(gòu)上都類似。下文將僅僅更加詳細(xì)地解釋第三級(jí)段“PR_IFO_0”。如附圖13所示,第三級(jí)段“PR_IFO_0”包含第四級(jí)段“PROG_IFO”和“IDX_IFO”。第四級(jí)段“PROG_IFO”帶有與內(nèi)容節(jié)目相關(guān)的信息。第四級(jí)段“IDX_IFO”包含分別帶有與相關(guān)的聲頻視頻節(jié)目的相應(yīng)的索引相關(guān)的信息片段的第五級(jí)段IDX_IFO_0”,“IDX_IFO_1”,...,“IDX_IFO_n”。第五級(jí)段IDX_IFO_0”,“IDX_IFO_1”,...,“IDX_IFO_n”在結(jié)構(gòu)上都類似。例如,第五級(jí)段IDX_IFO_0”具有在其中可以將一部分相關(guān)的聲頻視頻節(jié)目寄存為索引信息的第六級(jí)段“INDEX_IFO”。
在附圖14中示出了第四級(jí)段“PROG_IFO”的語(yǔ)法結(jié)構(gòu)。具體地說(shuō),每個(gè)第四級(jí)段“PROG_IFO”包括分別具有語(yǔ)法名稱為“Sizeof PROG_IFO”、“PR number”、“Content type”和“Componenttype”的信息片段。信息片段“Size of PROG_IFO”是表示當(dāng)前的第四級(jí)段“PROG_IFO”的大小的32位信號(hào)。信息片段“PR number”是表示分配給相關(guān)的聲頻視頻節(jié)目的指定號(hào)(標(biāo)識(shí)號(hào))的8位信號(hào)。PRnumber是分別對(duì)應(yīng)于不同的聲頻視頻節(jié)目的在“0”-“255”中的變量。信息片段“Content type”是表示相關(guān)的聲頻-視頻節(jié)目的類型的8位信號(hào)。信息片段“Component type”是表示相關(guān)的數(shù)據(jù)的類型的8位信號(hào),即表示相關(guān)的數(shù)據(jù)是視頻、聲頻或其它的類型。
如前文所述,在存在后期錄音聲頻文件的情況下,提供播放清單信息“PLAY_IFO”。在存在對(duì)應(yīng)于文件夾“PR0”的“m”個(gè)后期錄音聲頻文件的情況下,將清單信息片段“AF0-1.dat”,“AF0-2.dat”,...,“AF0-m.dat”放置在文件夾“PL0”中作為與后期錄音聲頻文件鏈接的信息。
播放清單信息“PLAY_IFO”的語(yǔ)法結(jié)構(gòu)如附圖15所示。具體地說(shuō),播放清單信息“PLAY_IFO”包括分別具有語(yǔ)法名稱為“PR_number”和“AF_number”的信息片段。信息片段“PR_number”是表示分配給相關(guān)的主數(shù)據(jù)(相關(guān)的聲頻視頻節(jié)目)的分配號(hào)(標(biāo)識(shí)號(hào))的8位信號(hào)。信息片段“AF_number”是表示分配給相關(guān)的后期錄音聲頻數(shù)據(jù)的分配號(hào)(標(biāo)識(shí)號(hào))的8位信號(hào)。
關(guān)于在附圖10的文件夾“PRj”中的“n+1”個(gè)AV多路傳輸?shù)慕Y(jié)果流“PRj.dat(j=0,1,...,n)”中的每個(gè),根據(jù)用戶的請(qǐng)求可以寄存“m”個(gè)后期錄音聲頻數(shù)據(jù)。在數(shù)字“m”等于“0”時(shí),使用AV多路傳輸結(jié)果文件但不應(yīng)用后期錄音聲頻數(shù)據(jù)。在數(shù)字“m”等于或大于“1”時(shí),允許記錄后期錄音聲頻數(shù)據(jù)。在這種情況下,至少產(chǎn)生并記錄一個(gè)后期錄音聲頻文件。此外,再現(xiàn)或傳輸后期錄音聲頻數(shù)據(jù)。
在附圖13中的索引信息“INDEX_IFO”具有附圖16中所示的語(yǔ)法結(jié)構(gòu)。具體地說(shuō),索引信息“INDEX_IFO”包括具有語(yǔ)法名稱分別為“INDEX number”、“Playback Time”、“Start Address”和“End Address”的信息片段。信息片段“INDEX number”是表示分配給相關(guān)的索引的序列號(hào)的8位信號(hào)。信息片段“Playback Time”是表示相關(guān)的索引的重播時(shí)間的40位信號(hào)。信息片段“Start Address”是表示相關(guān)的索引的開始點(diǎn)的地址的64位信號(hào)。信息片段“EndAddress”是表示相關(guān)的索引的結(jié)束點(diǎn)的地址的64位信號(hào)。
這樣,設(shè)計(jì)了在附圖10中的輔助信息。基于輔助信息產(chǎn)生文件夾“PR”和“PL”的記錄信息和清單信息片段“AF”。通過(guò)參考記錄信息將規(guī)定的AV和聲頻文件記錄在記錄媒體25上。通過(guò)參考記錄信息從記錄媒體25中讀出指定的AV和聲頻文件。因此,可以重播伴有所需的聲頻信號(hào)的視頻信號(hào)同時(shí)再現(xiàn)所需的聲頻信號(hào)。
記錄媒體25包括例如DVD-RAM、DVD-RW、DVD-R、磁光盤或硬盤。如前文所述,在記錄媒體25上記錄后期錄音目的聲頻數(shù)據(jù)的過(guò)程中,從記錄媒體25中讀出主數(shù)據(jù)。在每個(gè)都對(duì)應(yīng)許多包的周期中分時(shí)地交替進(jìn)行后期錄音目的聲頻數(shù)據(jù)的記錄和主數(shù)據(jù)的讀出??扇〉氖牵笃阡浺裟康穆曨l數(shù)據(jù)記錄在也記錄主數(shù)據(jù)的記錄媒體25的表面上。
附圖17所示為記錄在硬盤上的TS的格式,該硬盤構(gòu)成了記錄媒體25。如附圖17所示,TS由TS單元序列形成。每個(gè)TS單元由包構(gòu)成。每個(gè)包由25位的時(shí)間標(biāo)記和188字節(jié)的MPEG的TS包構(gòu)成。MPEG的TS包與在附圖5中的TS包相同。在AV多路傳輸結(jié)果文件25a中的聲頻數(shù)據(jù)以在后期錄音聲頻文件25b中的聲頻數(shù)據(jù)(后期錄音聲頻數(shù)據(jù))替代的情況下,由于給每個(gè)TS包中增加了提供同步的時(shí)間標(biāo)記,因此可以保持在后期錄音聲頻數(shù)據(jù)和在AV多路傳輸結(jié)果文件25a中的視頻數(shù)據(jù)之間的同步關(guān)系。
附圖18所示為信息信號(hào)傳輸設(shè)備30b。如附圖18所示,傳輸設(shè)備30b包括與CPU33E連接的用戶接口32E。用戶可以處理用戶接口32E。CPU33E具有輸入/輸出端口的結(jié)合、處理部分、ROM和RAM。CPU 33E根據(jù)存儲(chǔ)在ROM和RAM中的控制程序運(yùn)行??刂瞥绦虮辉O(shè)計(jì)成啟動(dòng)CPU 33E以實(shí)施后面所提到的運(yùn)行步驟。通過(guò)處理用戶接口32E,傳輸設(shè)備30b的操作可以在包括第一模式和第二模式的不同模式中改變。第一運(yùn)行模式設(shè)計(jì)成傳輸主數(shù)據(jù)(AV多路傳輸結(jié)果文件25a)。第二運(yùn)行模式設(shè)計(jì)成傳輸后期錄音聲頻數(shù)據(jù)(后期錄音聲頻文件25b)而不是在主數(shù)據(jù)中的聲頻信息,同時(shí)傳輸在主數(shù)據(jù)中的視頻信息。在處理用戶接口32E時(shí),從其中將運(yùn)行模式指定信號(hào)輸入到CPU33E中。運(yùn)行模式指定信號(hào)可以從位于距離傳輸設(shè)備30b較遠(yuǎn)的位置上的信息信號(hào)接收設(shè)備中傳輸?shù)紺PU33E。運(yùn)行模式指定信號(hào)指示第一運(yùn)行模式和第二運(yùn)行模式中哪種模式是所需的。CPU33E將運(yùn)行模式指定信號(hào)傳遞給也可以作為包選擇器運(yùn)行的信號(hào)選擇器38。此外,通過(guò)處理用戶接口32E可以將標(biāo)識(shí)(ID)信息輸入到CPU33E。從接收設(shè)備可以將該標(biāo)識(shí)信息發(fā)送CPU33E。CPU33E將標(biāo)識(shí)信息傳遞給標(biāo)識(shí)信息檢測(cè)器34。
在運(yùn)行模式指定信號(hào)指示需要第一運(yùn)行模式時(shí),即,在需要再現(xiàn)主數(shù)據(jù)(AV多路傳輸結(jié)果文件25a)時(shí),傳輸設(shè)備30b如下運(yùn)行。讀控制器31從信息信號(hào)記錄媒體25中讀出主數(shù)據(jù)即AV多路傳輸?shù)慕Y(jié)果數(shù)據(jù)。將所讀出的主數(shù)據(jù)從讀控制器31發(fā)送到緩和器35。在將主數(shù)據(jù)從緩沖器35輸出到信號(hào)選擇器38之前將其存儲(chǔ)在緩沖器35中。信號(hào)選擇器38響應(yīng)運(yùn)行模式指定信號(hào)從緩沖器35中選擇主數(shù)據(jù),并將該主數(shù)據(jù)傳輸?shù)骄彌_器39。在將主數(shù)據(jù)從緩沖器39輸出到傳輸線之前將其存儲(chǔ)在緩沖器39中。主數(shù)據(jù)(AV多路傳輸?shù)慕Y(jié)果數(shù)據(jù))沿著傳輸線傳播到接收設(shè)備。接收設(shè)備同步地重播在主數(shù)據(jù)中的聲頻信息和視頻信息。
在運(yùn)行模式指定信號(hào)指示需要第二運(yùn)行模式時(shí),即在需要傳輸后期錄音聲頻數(shù)據(jù)和主數(shù)據(jù)視頻信息時(shí),傳輸設(shè)備30b運(yùn)行如下。通過(guò)處理用戶接口32E將標(biāo)識(shí)所需的主數(shù)據(jù)的信號(hào)和所需的后期錄音聲頻數(shù)據(jù)輸入到CPU33。標(biāo)識(shí)信息可以從接收設(shè)備發(fā)送到CPU33E中。標(biāo)識(shí)信號(hào)對(duì)應(yīng)于代表分配給所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的指定號(hào)(標(biāo)識(shí)號(hào))的在附圖15中的信息片段“AR_number”和“PF_number”。CPU33E將標(biāo)識(shí)信號(hào)傳遞給標(biāo)識(shí)信息檢測(cè)器34。讀控制器31從信息信號(hào)記錄媒體25中讀出播放列表信息“PLAY_IFO”。讀控制器31將播放列表信息“PLAY_IFO”發(fā)送給標(biāo)識(shí)信息檢測(cè)器34。標(biāo)識(shí)信息檢測(cè)器34通過(guò)參考播放列表信息“PLAY_IFO”(參見附圖15)響應(yīng)該標(biāo)識(shí)信號(hào)檢測(cè)所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標(biāo)識(shí)號(hào)。標(biāo)識(shí)信息檢測(cè)器34將所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標(biāo)識(shí)號(hào)通知讀控制器31。標(biāo)識(shí)信息檢測(cè)器34指令讀控制器31從記錄媒體25中交替地讀出具有對(duì)應(yīng)于所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)的標(biāo)識(shí)號(hào)的名稱的后期錄音聲頻文件25b和主數(shù)據(jù)文件(AV多路傳輸結(jié)果文件25a)。因此,讀控制器31實(shí)施了基于交替的時(shí)分脈沖信號(hào)從記錄媒體25中讀出所需的主數(shù)據(jù)和所需的后期錄音聲頻數(shù)據(jù)。將所讀出的主數(shù)據(jù)從讀控制器31發(fā)送到緩沖器35。在將主數(shù)據(jù)從緩沖器35輸出到信號(hào)選擇器38之前將其存儲(chǔ)在緩沖器35中。所讀出的后期錄音聲頻數(shù)據(jù)從讀控制器31發(fā)送到緩沖器35a。在后期錄音聲頻數(shù)據(jù)從緩沖器35a輸出到信號(hào)選擇器38之前將其存儲(chǔ)在緩沖器35a中。信號(hào)選擇器(包選擇器)38響應(yīng)運(yùn)行模式指定信號(hào)將在主數(shù)據(jù)中的聲頻數(shù)據(jù)替換為來(lái)自緩沖器35a的后期錄音聲頻數(shù)據(jù),由此將原始主數(shù)據(jù)轉(zhuǎn)換為新的主數(shù)據(jù)(新的AV多路傳輸?shù)慕Y(jié)果數(shù)據(jù))。信號(hào)選擇器38一包一包(基于一單元一單元)地實(shí)施了聲頻數(shù)據(jù)替換。新的主數(shù)據(jù)從信號(hào)選擇器38發(fā)送到緩沖器39。在將新的主數(shù)據(jù)輸出到傳輸線之前將其存儲(chǔ)在緩沖器39中。新的主數(shù)據(jù)(新的AV多路傳輸?shù)慕Y(jié)果數(shù)據(jù))沿傳輸線傳播到接收設(shè)備。接收設(shè)備同時(shí)重播在主數(shù)據(jù)中的聲頻信息和視頻信息。在將原始主數(shù)據(jù)轉(zhuǎn)換為新的主數(shù)據(jù)的過(guò)程中,不需要改變每個(gè)PCR、每個(gè)DTS和每個(gè)PTS??扇〉氖?,信號(hào)選擇器38包括計(jì)算器。計(jì)算器可以由CPU33E形成。對(duì)于已經(jīng)進(jìn)行了聲頻數(shù)據(jù)替換的新的主數(shù)據(jù)包,計(jì)算器計(jì)算新的CRC(循環(huán)冗余校驗(yàn))碼字并將老的CRC碼字替換為新的碼字。
附圖19所示為CPU33E的控制程序段的流程圖。如附圖19所示,第一步驟S11控制讀控制器31從信息信號(hào)記錄媒體25中讀出主數(shù)據(jù)(AV多路傳輸結(jié)果文件25a)。
在步驟S11之后的步驟S12確定是否要求以后期錄音聲頻信息替換在所讀出的主數(shù)據(jù)中的聲頻信息。在要求以后期錄音聲頻信息替換在所讀出的主數(shù)據(jù)中的聲頻信息時(shí),該程序從步驟S12進(jìn)行到步驟S13。否則,該程序從步驟S12跳轉(zhuǎn)步驟S17。
步驟S13控制標(biāo)識(shí)信息檢測(cè)器34和讀控制器31以從記錄媒體25中讀出具有對(duì)應(yīng)于指定標(biāo)識(shí)號(hào)的名稱的后期錄音聲頻文件25b(后期錄音聲頻數(shù)據(jù))。
在步驟S13之后的步驟S14將所讀出的AV多路傳輸結(jié)果文件25a和所讀出的后期錄音聲頻文件25b(即所讀出的主數(shù)據(jù)和所讀出的后期錄音聲頻數(shù)據(jù))分為包(單元)。
在步驟S14之后的步驟S15一個(gè)包一個(gè)包地將在所讀出的主數(shù)據(jù)中的聲頻數(shù)據(jù)替換為在重播時(shí)序中等效于在前面聲頻數(shù)據(jù)的所讀出的后期錄音聲頻數(shù)據(jù)。此后,步驟S15將原始主數(shù)據(jù)轉(zhuǎn)換為新的主數(shù)據(jù)(新的AV多路傳輸結(jié)果文件)。
在步驟S15之后的步驟S16計(jì)算新的CRC(循環(huán)冗余校驗(yàn))碼字并將老的CRC碼字替換為已經(jīng)進(jìn)行聲頻數(shù)據(jù)替換的新的主數(shù)據(jù)包的新包。因此,步驟S16產(chǎn)生CRC-碼-校正的主數(shù)據(jù)(CRC-碼-校正的AV多路傳輸結(jié)果文件)。在步驟S16之后,程序進(jìn)行到步驟S17。
步驟S17將通過(guò)步驟S11給定的AV多路傳輸結(jié)果文件或通過(guò)步驟S16給定的AV多路傳輸結(jié)果文件傳輸?shù)絺鬏斁€。
在步驟S17之后的步驟S18確定AV多路傳輸結(jié)果文件的傳輸是否已經(jīng)完成。在AV多路傳輸結(jié)果文件的傳輸還沒(méi)有完成時(shí),該程序從步驟S18返回到步驟S11。在這種情況下,重復(fù)步驟S11和后面的步驟。在另一方面,在AV多路傳輸結(jié)果文件的傳輸已經(jīng)完成時(shí),程序從步驟S18退出,然后當(dāng)前的程序段的執(zhí)行結(jié)束。步驟S18還可以響應(yīng)傳輸停止請(qǐng)求。在這種情況下,一旦接收到傳輸停止請(qǐng)求,在該程序從步驟S18中退出,然后結(jié)束當(dāng)前程序段的執(zhí)行而不管AV多路傳輸結(jié)果文件的傳輸是否完成。
如上文所述,符合MPEG系統(tǒng)標(biāo)準(zhǔn)的AV多路傳輸?shù)慕Y(jié)果數(shù)據(jù)記錄在信息信號(hào)記錄媒體上或從其中再現(xiàn)。AV多路傳輸?shù)慕Y(jié)果數(shù)據(jù)包含聲頻信息和帶有該聲頻信息的視頻信息。此外,符合MPEG系統(tǒng)標(biāo)準(zhǔn)的后期錄音目的聲頻數(shù)據(jù)記錄在該記錄媒體或從其中再現(xiàn)。后期錄音目的聲頻數(shù)據(jù)具有與在AV多路傳輸?shù)慕Y(jié)果數(shù)據(jù)中的視頻信息同步的關(guān)系。同步重播在AV多路傳輸?shù)慕Y(jié)果數(shù)據(jù)中的后期錄音目的聲頻數(shù)據(jù)和視頻信息??梢詫V多路傳輸?shù)慕Y(jié)果數(shù)據(jù)從記錄媒體通過(guò)傳輸線朝信息信號(hào)接收設(shè)備傳輸。此外,可以將在構(gòu)成新的AV多路傳輸?shù)慕Y(jié)果數(shù)據(jù)的AV多路傳輸?shù)慕Y(jié)果數(shù)據(jù)中的后期錄音目的聲頻數(shù)據(jù)和視頻信息從記錄媒體通過(guò)傳輸線朝接收設(shè)備傳輸。
如前文所述,對(duì)聲頻信號(hào)和視頻信號(hào)進(jìn)行壓縮編碼。將編碼結(jié)果數(shù)據(jù)分為單元塊(包)。給每個(gè)單元塊中加入聲頻視頻同步播放的時(shí)間標(biāo)記。所加入的時(shí)間標(biāo)記數(shù)據(jù)記錄在信息信號(hào)記錄媒體中。
對(duì)視頻信號(hào)和第一聲頻信號(hào)進(jìn)行壓縮編碼并將其多路復(fù)用在主數(shù)據(jù)中,并將該主數(shù)據(jù)記錄在信息信號(hào)記錄媒體中。將第二聲頻信號(hào)(即后期錄音目的聲頻信號(hào))壓縮編碼成后期錄音目的聲頻數(shù)據(jù)。后期錄音目的聲頻數(shù)據(jù)記錄在記錄媒體上但不與在主數(shù)據(jù)中的視頻數(shù)據(jù)進(jìn)行多路復(fù)用。
因此,簡(jiǎn)單的信號(hào)處理能夠使后期錄音目的聲頻數(shù)據(jù)記錄在信息信號(hào)記錄媒體上。此外,可以將帶有系統(tǒng)的視頻信息的多個(gè)后期錄音目的聲頻信號(hào)記錄在記錄媒體上。與視頻信息同步地重播每個(gè)后期錄音目的聲頻信號(hào)。如前文所述,在將第一聲頻信號(hào)和視頻信號(hào)作為AV多路傳輸結(jié)果文件記錄在信息信號(hào)記錄媒體上之前對(duì)其進(jìn)行多路復(fù)用。在重播的過(guò)程中,可以以每個(gè)后期錄音目的聲頻信號(hào)替換在AV多路傳輸結(jié)果文件中的第一聲頻信號(hào)。
加入到后期錄音目的聲頻數(shù)據(jù)的時(shí)序信息由基于主數(shù)據(jù)產(chǎn)生的PCR、DTS和PTS構(gòu)成。應(yīng)該指出的是,可以獨(dú)立于主數(shù)據(jù)產(chǎn)生后期錄音目的聲頻數(shù)據(jù)的PCR、DTS和PTS。
可以將獲得參考時(shí)序的信息放置在后期錄音目的聲頻數(shù)據(jù)中的時(shí)序信息的標(biāo)題中。在這種情況下,根據(jù)參考時(shí)序信息使后期錄音目的聲頻數(shù)據(jù)的重播最佳化。
拌有視頻信息的聲頻信息可以由如下的信息替換基于多路復(fù)用表示注釋的字符信息、數(shù)字信息、不同于視頻信息的圖形信息、與視頻信息的指示區(qū)相關(guān)的輔助信息或與視頻信息同步重播的其它信息。
從前述的描述中可以理解的是,關(guān)于主數(shù)據(jù)的產(chǎn)生,假設(shè)先前在單元數(shù)據(jù)中產(chǎn)生與后期錄音目的聲頻數(shù)據(jù)的類型相關(guān)的數(shù)據(jù)片段,并且后期錄音目的聲頻數(shù)據(jù)的傳輸速率等于在主數(shù)據(jù)中的原始聲頻數(shù)據(jù)的傳輸速率。
如前文所述,將視頻信號(hào)壓縮編碼成編碼結(jié)果視頻信號(hào)。拌有視頻信號(hào)的第一聲頻信號(hào)被壓縮編碼成第一壓縮編碼結(jié)果聲頻信號(hào)。編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)多路復(fù)用成多路復(fù)用結(jié)果信號(hào),將表示解碼時(shí)序和重播時(shí)序的時(shí)序信息加入到該多路復(fù)用結(jié)果信號(hào)中。該多路復(fù)用結(jié)果信號(hào)記錄在信息信號(hào)記錄媒體上。將對(duì)與視頻信號(hào)具有同步關(guān)系的第二聲頻信號(hào)(后期錄音目的聲頻信號(hào))壓縮編碼成第二壓縮編碼結(jié)果聲頻信號(hào),將與視頻信號(hào)同步的時(shí)序信息加入到該第二壓縮編碼結(jié)果聲頻信號(hào)中。該第二壓縮編碼結(jié)果聲頻信號(hào)記錄在記錄媒體上。此后,同步地再現(xiàn)在多路復(fù)用結(jié)果信號(hào)中的第二聲頻信號(hào)和視頻信號(hào)。第二壓縮編碼結(jié)果聲頻信號(hào)在時(shí)序上等效于第一壓縮編碼結(jié)果聲頻信號(hào)。因此,在第二聲頻信號(hào)的再現(xiàn)的過(guò)程中,防止了第二編碼結(jié)果聲頻信號(hào)的解碼造成麻煩。
將第一多路復(fù)用結(jié)果信號(hào)定義為包含第一聲頻信號(hào)和視頻信號(hào)的壓縮編碼型式的數(shù)據(jù)流。將第二多路復(fù)用結(jié)果信號(hào)定義為包含第二聲頻信號(hào)(后期錄音目的聲頻信號(hào))和視頻信號(hào)的壓縮編碼型式的數(shù)據(jù)流。第二聲頻信號(hào)拌有視頻信號(hào)。雖然在實(shí)際中不產(chǎn)生第二多路復(fù)用結(jié)果信號(hào),但可以重播由第二聲頻信號(hào)和聲頻信號(hào)構(gòu)成的AV信號(hào)。由于第二多路復(fù)用結(jié)果信號(hào)既不產(chǎn)生也不記錄,因此通過(guò)記錄第二多路復(fù)用結(jié)果信號(hào)可以防止擦除記錄在信息信號(hào)記錄媒體上的第一多路復(fù)用結(jié)果信號(hào)。由于不記錄第二多路復(fù)用結(jié)果信號(hào),因此通過(guò)第二多路復(fù)用結(jié)果信號(hào)可以防止記錄媒體的可用容量的降低。
多個(gè)后期錄音目的聲頻信號(hào)可以記錄在信息信號(hào)記錄媒體上。在重播的過(guò)程中,用戶可以從后期錄音目的聲頻信號(hào)中選擇一個(gè)后期錄音目的聲頻信號(hào)。在這種情況下,可以同步重播所選擇的后期錄音目的聲頻信號(hào)和拌有該聲頻信號(hào)的視頻信號(hào)。此外,可以有效地使用記錄媒體的存儲(chǔ)容量。
根據(jù)MPEG1標(biāo)準(zhǔn)或MPEG2標(biāo)準(zhǔn)對(duì)視頻信號(hào)和聲頻信號(hào)進(jìn)行壓縮編碼。根據(jù)MPEG系統(tǒng)標(biāo)準(zhǔn)產(chǎn)生AV多路傳輸結(jié)果信號(hào)。AV多路傳輸結(jié)果信號(hào)可以包含表示音樂(lè)節(jié)目的視頻信息和表示在音樂(lè)節(jié)目中的卡拉OK音樂(lè)的聲頻信息。在AV多路傳輸結(jié)果信號(hào)中,通過(guò)要與主視頻信息同步重播的第二視頻信息可以替換聲頻信息。
根據(jù)MPEG1標(biāo)準(zhǔn)、MPEG2標(biāo)準(zhǔn)和MPEG4標(biāo)準(zhǔn)進(jìn)行壓縮編碼和系統(tǒng)化(多路復(fù)用)??梢曰诓糠志幋a過(guò)程或另一編碼過(guò)程進(jìn)行壓縮編碼和系統(tǒng)化(多路復(fù)用),在該編碼過(guò)程中實(shí)施重播的信號(hào)處理,同時(shí)將編碼結(jié)果信號(hào)臨時(shí)存儲(chǔ)在預(yù)定的記錄區(qū)中。
信息信號(hào)記錄媒體25例如包括硬盤或DVD-RAM。記錄媒體25可以是另一種類型的記錄媒體,該記錄媒體具有能夠交替地讀出兩種不同的信息文件的隨機(jī)存取性能,并且具有足夠記錄預(yù)定量的數(shù)字視頻數(shù)據(jù)的存儲(chǔ)容量。
通過(guò)信息信號(hào)產(chǎn)生設(shè)備10或10a產(chǎn)生的信號(hào)記錄在信息信號(hào)記錄媒體25上。信息信號(hào)再現(xiàn)設(shè)備30或30a從記錄媒體25上再現(xiàn)所記錄的信號(hào)。通過(guò)信息信號(hào)傳輸設(shè)備30b可以傳輸所再現(xiàn)的信號(hào)。一般地說(shuō),記錄媒體25與信息信號(hào)產(chǎn)生設(shè)備10或10a、信息信號(hào)再現(xiàn)設(shè)備30或30a和信息信號(hào)傳輸設(shè)備30b連接以使信號(hào)能夠在其中直接傳遞??商鎿Q的是,通過(guò)通信裝置比如通信網(wǎng)絡(luò)記錄媒體25可以與信息信號(hào)產(chǎn)生設(shè)備10或10a、信息信號(hào)再現(xiàn)設(shè)備30或30a和信息信號(hào)傳輸設(shè)備30b連接。
第二實(shí)施例除了下文所描述的改變以外本發(fā)明的第二實(shí)施例類似于本發(fā)明的第一實(shí)施例。根據(jù)本發(fā)明的第一實(shí)施例,在產(chǎn)生主數(shù)據(jù)方面,假設(shè)事先在單元數(shù)據(jù)中產(chǎn)生與后期錄音目的聲頻數(shù)據(jù)的類型相關(guān)的數(shù)據(jù)片段,并且后期錄音目的聲頻數(shù)據(jù)的傳輸速率等于在主數(shù)據(jù)中的原始聲頻數(shù)據(jù)的傳輸速率。根據(jù)本發(fā)明的第二實(shí)施例,在主數(shù)據(jù)的產(chǎn)生方面,基于多路復(fù)用事先將在傳輸速率方面等于預(yù)期的后期錄音目的聲頻數(shù)據(jù)的單元數(shù)據(jù)記錄為啞數(shù)據(jù)。
第三實(shí)施例除了下文所描述的改變以外本發(fā)明的第三實(shí)施例類似于本發(fā)明的第一實(shí)施例。根據(jù)本發(fā)明的第三實(shí)施例,在記錄預(yù)期的后期錄音目的聲頻數(shù)據(jù)的情況下,基于多路復(fù)用事先將在傳輸速率方面等于預(yù)期的后期錄音目的聲頻數(shù)據(jù)的單元數(shù)據(jù)記錄為啞數(shù)據(jù)。在產(chǎn)生實(shí)際的后期錄音目的聲頻數(shù)據(jù)時(shí),以實(shí)際的后期錄音目的聲頻數(shù)據(jù)替換先前記錄的啞數(shù)據(jù)。在以實(shí)際的后期錄音目的聲頻數(shù)據(jù)替換先前記錄的啞數(shù)據(jù)的過(guò)程中,不需要改變每個(gè)PCR、每個(gè)DTS和每個(gè)PTS。
在實(shí)際的后期錄音目的聲頻數(shù)據(jù)的傳輸速率不等于預(yù)期的傳輸速率的情況下,基于多路復(fù)用記錄視頻數(shù)據(jù)和實(shí)際的后期錄音目的聲頻數(shù)據(jù)。在這種情況下,需要更新每個(gè)PCR、每個(gè)DTS和每個(gè)PTS。
實(shí)施例所提供的優(yōu)點(diǎn)本發(fā)明的第一、第二和第三實(shí)施例提供了如下的優(yōu)點(diǎn)。
將視頻信號(hào)、第一聲頻信號(hào)和用于視頻和聲頻的同步再現(xiàn)的時(shí)序信息多路復(fù)用為要記錄的AV多路傳輸結(jié)果信號(hào)。此外,將與視頻信號(hào)同步的第二聲頻信號(hào)的壓縮編碼型式作為要記錄的信號(hào)輸送。再現(xiàn)側(cè)可以再現(xiàn)由視頻信號(hào)和拌有視頻信號(hào)的第二聲頻信號(hào)構(gòu)成的AV信號(hào),而不給該AV信號(hào)輸送包含有視頻信號(hào)和第二聲頻信號(hào)的壓縮編碼型式的AV多路傳輸結(jié)果信號(hào)。
AV多路傳輸結(jié)果信號(hào)是加入了時(shí)序信息的包流。此外,第二聲頻信號(hào)的壓縮編碼型式是加入了時(shí)序信息的包流。因此,時(shí)序管理很容易。再現(xiàn)側(cè)可以再現(xiàn)由視頻信號(hào)和拌有視頻信號(hào)的第二聲頻信號(hào)構(gòu)成的AV信號(hào)。
將加入了標(biāo)識(shí)信號(hào)的多個(gè)第二聲頻信號(hào)定義為替代信號(hào)。在重播的過(guò)程中,可以從第二聲頻信號(hào)中選擇一個(gè)第二聲頻信號(hào),并再現(xiàn)所選擇的第二聲頻信號(hào)。
將視頻信號(hào)、第一聲頻信號(hào)和用于同步再現(xiàn)視頻和聲頻的時(shí)序信息多路復(fù)用成AV多路傳輸結(jié)果信號(hào)。第二聲頻信號(hào)的壓縮編碼型式與視頻信號(hào)具有同步關(guān)系。再現(xiàn)AV多路傳輸結(jié)果信號(hào)和第二聲頻信號(hào)的壓縮編碼型式,并從AV多路傳輸結(jié)果信號(hào)中再現(xiàn)視頻信號(hào)。將所再現(xiàn)的視頻信號(hào)和所再現(xiàn)的第二聲頻信號(hào)的壓縮編碼型式作為再現(xiàn)的彼此同步的輸出信號(hào)提供。
從加入了標(biāo)識(shí)信號(hào)的第二聲頻信號(hào)的壓縮編碼型式中選擇一個(gè)型式。所選擇的第二聲頻信號(hào)的壓縮編碼型式可以作為與視頻信號(hào)具有同步關(guān)系的再現(xiàn)的輸出信號(hào)提供。
將視頻信號(hào)、第一聲頻信號(hào)和用于同步再現(xiàn)視頻和聲頻的時(shí)序信息多路復(fù)用成AV多路傳輸結(jié)果信號(hào)。第二聲頻信號(hào)的壓縮編碼型式與視頻信號(hào)具有同步關(guān)系。再現(xiàn)AV多路傳輸結(jié)果信號(hào)和第二聲頻信號(hào)的壓縮編碼型式,并從AV多路傳輸結(jié)果信號(hào)中再現(xiàn)視頻信號(hào)。將所再現(xiàn)的視頻信號(hào)和所再現(xiàn)的第二聲頻信號(hào)的壓縮編碼型式多路復(fù)用成新的AV多路傳輸結(jié)果信號(hào)。通過(guò)傳輸線將新的AV多路傳輸結(jié)果信號(hào)傳輸?shù)皆佻F(xiàn)側(cè)。
權(quán)利要求
1.一種產(chǎn)生要記錄的信息信號(hào)的方法,該方法包括如下步驟多路傳輸如下信號(hào)1)對(duì)視頻信號(hào)進(jìn)行壓縮編碼而得到的壓縮編碼結(jié)果視頻信號(hào),2)對(duì)與視頻信號(hào)具有同步關(guān)系的第一聲頻信號(hào)進(jìn)行壓縮編碼而得到的第一壓縮編碼結(jié)果聲頻信號(hào),3)與壓縮編碼結(jié)果視頻信號(hào)和第一壓縮編碼結(jié)果聲頻信號(hào)之間的同步化相關(guān)的參考時(shí)鐘信息信號(hào),以及4)基于參考時(shí)鐘信息信號(hào)并指定獲得聲頻-視頻多路傳輸結(jié)果信號(hào)的視頻信號(hào)的指示時(shí)序的指示時(shí)序信息信號(hào);在重播的過(guò)程中在與參考時(shí)鐘信息信號(hào)同步的同時(shí)產(chǎn)生第二聲頻信號(hào)作為可以再現(xiàn)的替代第一聲頻信號(hào)的替換重播聲頻信號(hào);對(duì)第二聲頻信號(hào)進(jìn)行壓縮編碼以獲得第二壓縮編碼結(jié)果聲頻信號(hào);將聲音產(chǎn)生時(shí)序信息信號(hào)加入到第二壓縮編碼結(jié)果聲頻信號(hào)中以獲得該替換重播聲頻信號(hào),該聲音產(chǎn)生時(shí)序信息信號(hào)基于參考時(shí)鐘信息信號(hào);以及所述第二壓縮編碼結(jié)果聲頻信號(hào)在不與所述壓縮編碼結(jié)果視頻信號(hào)一起多路傳輸?shù)那闆r下被記錄在記錄介質(zhì)上。
2.如權(quán)利要求1所述的方法,進(jìn)一步包括如下的步驟將該替換重播聲頻信號(hào)劃分為每個(gè)都具有預(yù)定的數(shù)據(jù)大小的包,并將參考時(shí)鐘信息信號(hào)和聲音產(chǎn)生時(shí)序信息信號(hào)與每個(gè)包一起多路傳輸。
3.如權(quán)利要求1所述的方法,其中該替換重播聲頻信號(hào)包括分別通過(guò)對(duì)第三聲頻信號(hào)進(jìn)行壓縮編碼得到的多個(gè)輔助替換重播聲頻信號(hào),并且將不同的標(biāo)識(shí)信號(hào)分別加入到輔助替換重播聲頻信號(hào)中。
全文摘要
本發(fā)明涉及產(chǎn)生要記錄的信息信號(hào)的方法,包括多路傳輸如下信號(hào)壓縮編碼結(jié)果視頻信號(hào),第一壓縮編碼結(jié)果聲頻信號(hào),參考時(shí)鐘信息信號(hào),以及指示時(shí)序信息信號(hào)。在重播的過(guò)程中在與參考時(shí)鐘信息信號(hào)同步的同時(shí)產(chǎn)生第二聲頻信號(hào)作為可以再現(xiàn)的替代第一聲頻信號(hào)的替換重播聲頻信號(hào);對(duì)第二聲頻信號(hào)進(jìn)行壓縮編碼以獲得第二壓縮編碼結(jié)果聲頻信號(hào);將聲音產(chǎn)生時(shí)序信息信號(hào)加入到第二壓縮編碼結(jié)果聲頻信號(hào)中以獲得該替換重播聲頻信號(hào),該聲音產(chǎn)生時(shí)序信息信號(hào)基于參考時(shí)鐘信息信號(hào);第二壓縮編碼結(jié)果聲頻信號(hào)在不與所述壓縮編碼結(jié)果視頻信號(hào)一起多路傳輸?shù)那闆r下被記錄在記錄介質(zhì)上。
文檔編號(hào)G11B27/10GK1829333SQ20061005988
公開日2006年9月6日 申請(qǐng)日期2002年12月11日 優(yōu)先權(quán)日2001年12月26日
發(fā)明者菅原隆幸 申請(qǐng)人:日本勝利株式會(huì)社