專利名稱：產生要記錄的信息信號的設備的制作方法
技術領域：
本發(fā)明涉及一種產生要記錄的信息信號的方法、一種再現信息信號的方法、一種傳輸信息信號的方法、一種產生要記錄的信息信號的設備、一種再現信息信號的設備、一種傳輸信息信號的設備、一種信息信號記錄媒體以及一種傳輸信息信號的計算機程序。
背景技術：
在某些情況下，模擬聲頻信號和伴有模擬聲頻信號的模擬視頻信號轉換為在記錄媒體上傳輸和記錄的數字聲頻信號和數字視頻信號。例如，數字聲頻信號轉換為數字視頻信號基于壓縮編碼過程。在數字聲頻信號和數字視頻信號之間易于產生時間誤差。
根據用于補償在聲頻和視頻之間的這種時間誤差而設計的公知系統(tǒng)，將與所需的聲頻重播階段相關的第一時序信息加入到數字聲頻信號中，同時將與所需的視頻重播階段相關的第二時序信息加入到數字視頻信號中。選擇所需的聲頻重播階段和所需的視頻重播階段以在聲音和圖像之間提供同步。在重播的過程中，通過數字聲頻信號所表示的信息轉換為在通過第一時序信息所決定的時刻時的聲音，而同時在通過第二時序信息所決定的時刻顯示通過數字視頻信號所表示的信息。結果，聲頻的重播和視頻的重播彼此同步。
在公知的多路傳輸或記錄系統(tǒng)中，通過多路傳輸將與相同所需的重播階段相關的一部分數字聲頻信號和一部分數字視頻信號放置在相同的組中的同時傳輸或記錄它們。這種設計使得聲音和圖像的同步重播成為可能。
最近，包含壓縮編碼視頻數據和聲音數據的多路傳輸數據有時處理為位流(稱為傳輸流或節(jié)目流)的形式，并且這種形式可以使聲音和圖像的同步重播成為可能。一般地，在這種多路傳輸數據中并不容易僅僅編輯聲音數據。
這種編輯的實例是后期錄音，后期錄音僅編輯在多路傳輸數據(位流)中的聲音數據并將聲音數據以新的數據替換。后期錄音比較復雜。
日本專利申請公開6-275018/1994公開了記錄和再現設備，該設備運行在記錄模式或再現模式中。在日本申請6-275018中的設備的運行的記錄模式中，通過壓縮編碼過程將來自N個源的信息信號轉換為第一數字信號，并對第一數字信號進行調制并轉換為第二數字信號。分時地將第二數字信號寫入到記錄媒體中。在運行在再現模式的過程中，分時地從記錄媒體中讀出第二數字信號，對所讀出的第二數字信號進行解調并轉換回再現的第一數字信號。再現的第一數字信號轉換回再現的信息信號。同時輸出再現的信息信號。
日本專利申請公開11-144378/1999公開了后期錄音的方法，在這種方法中從數字記錄媒體中讀出包括視頻位流的原始數據。對所讀出的原始數據進行解碼。與原始數據的解碼過程同步地將聲音數據編碼成新的聲頻位流。新的聲頻位流被寫入到在時間位置上大致對應于原始數據記錄區(qū)的數字記錄媒體的區(qū)域中。
日本專利申請公開P2000-197005A公開了具有區(qū)域“A”和區(qū)域“B”的信息記錄媒體。區(qū)域“A”存儲包括視頻壓縮包和聲頻壓縮包的壓縮包流。區(qū)域“B”存儲具有第一、第二和第三信息片段的表。通過參考在表中的第一信息片段，確定在區(qū)域“A”中的聲頻壓縮包中有無聲頻數據對應于無聲。在聲頻壓縮包中的聲頻數據對應于無聲的情況下，可以如下地實施后期錄音。通過參考在表中的第二和第三信息片段，將新的聲頻信號編碼成新的聲頻數據，并且將新的聲頻數據格式化成新的聲頻壓縮包。新的聲頻壓縮包被寫在區(qū)域“A”中的舊的聲頻壓縮包上。
已有技術中的后期錄音將新的聲頻數據寫入到原始多路傳輸主數據流中，因此原始多路傳輸主數據流改變?yōu)樾碌臄祿?。一般地，很難將新的多路傳輸主數據流再轉換回原始數據流。
在已有技術中很難后期錄音大量的新的聲頻信號并在重播的過程中從新的聲頻信號中選擇聲頻信號。
發(fā)明內容
本發(fā)明的一個目的是提供一種產生要記錄的信息信號的方法，這種方法使得大量的新的聲頻信號的后期錄音、在重播的過程中從新的聲頻信號中選擇一個新的聲頻信號以及聲音和圖像的同步重播成為可能。
本發(fā)明的第二個目的是提供一種再現信息信號的改善的方法。
本發(fā)明的第三個目的是提供一種傳輸信息信號的改善的方法。
本發(fā)明的第四個目的是提供一種產生要記錄的信息信號的改善的設備。
本發(fā)明的第五個目的是提供一種再現信息信號的改善的設備。
本發(fā)明的第六個目的是提供一種傳輸信息信號的改善的設備。
本發(fā)明的第七個目的是提供一種改善的信息信號記錄媒體。
本發(fā)明的第八個目的是提供一種用于計算機傳輸信息信號的改善的計算機程序。
本發(fā)明的第一方面是提供一種產生要記錄的信息信號的方法。該方法包括如下步驟多路傳輸如下信號1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定獲得AV多路傳輸結果信號的視頻信號的指示時序的指示時序信息信號；在重播的過程中在與視頻信號同步的同時產生第二聲頻信號作為可以再現的替代第一聲頻信號的替換重播聲頻信號；對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號；以及將聲音產生時序信息信號加入到第二壓縮編碼結果聲頻信號中以獲得替換重播聲頻信號，該聲音產生時序信息信號基于參考時鐘信息信號并與視頻信號的同步化相關。
本發(fā)明的第二方面基于本發(fā)明的第一方面，提供進一步包括如下的步驟的方法將該替換重播聲頻信號劃分為每個都具有預定的數據大小的包，并將參考時鐘信息信號和聲音產生時序信息信號與每個包一起多路傳輸。
本發(fā)明的第三方面基于本發(fā)明的第一方面，提供一種方法，其中該替換重播聲頻信號包括分別從壓縮編碼聲頻信號中得到的許多輔助替換重播聲頻信號，并且將不同的標識信號分別加入到輔助替換重播聲頻信號中。
本發(fā)明的第四方面提供一種再現信息信號的方法。該方法包括如下的步驟再現通過多路傳輸如下的信號產生的AV多路傳輸結果信號1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定視頻信號的指示時序的指示時序信息信號；從所再現的AV多路傳輸結果信號中再現視頻信號；再現替換重播聲頻信號以再現第二聲頻信號，并通過如下的方式產生該替換重播聲頻信號1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將聲音產生時序信息信號加入到第二壓縮編碼結果聲頻信號中，該聲音產生時序信息信號指定第二壓縮編碼結果聲頻信號的聲音產生時序；從再現的AV多路傳輸結果信號中導出參考時鐘信息信號和指示時序信息信號；從再現的AV多路傳輸結果信號中導出壓縮編碼結果視頻信號；對所導出的壓縮編碼結果視頻信號進行解碼以得到解碼結果視頻信號；響應所導出的參考時鐘信息信號和所導出的指示時序信息信號將解碼結果視頻信號作為輸出視頻信號提供；從所再現的替換重播聲頻信號中導出聲音產生時序信息信號和第二聲頻信號；響應所導出的參考時鐘信息信號和所導出的聲音產生時序信息信號將所導出的第二聲頻信號作為輸出聲頻信號提供；比較參考時鐘信息信號和指示時序信息信號以得到第一比較結果；根據第一比較結果將視頻信號作為指示目的信號提供；比較參考時鐘信息信號和聲音產生時序信息信號以得到第二比較結果；根據第二比較結果將第二聲頻信號作為聲音產生目的信號提供。
本發(fā)明的第五方面基于本發(fā)明的第四方面，提供一種方法，其中該替換重播聲頻信號包括分別從壓縮編碼源聲頻信號中得到的許多輔助替換重播聲頻信號，并且將不同的標識信號分別加入到輔助替換重播聲頻信號中，以及其中通過參考標識信號選擇源聲頻信號中的一個源聲頻信號，以及將所選擇的源聲頻信號和視頻信號作為彼此同步的再現信號輸出。
本發(fā)明的第六方面提供一種傳輸信息信號的方法。該方法包括如下的步驟通過多路傳輸如下的信號產生主AV多路傳輸結果信號1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定視頻信號的指示時序的指示時序信息信號；并通過如下的方式產生替換重播聲頻信號1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將聲音產生時序信息信號加入到第二壓縮編碼結果聲頻信號中，該聲音產生時序信息信號基于參考時鐘信息信號指定第二壓縮編碼結果聲頻信號的聲音產生時序，其中可以再現第二聲頻信號替代第一聲頻信號；產生替換AV多路傳輸結果信號作為用于將壓縮編碼結果視頻信號連同第二壓縮編碼結果聲頻信號一起再現的信號；將替換AV多路傳輸結果信號反饋到傳輸線；從替換重播聲頻信號中導出第二壓縮編碼結果聲頻信號；以及將在主AV多路傳輸結果信號中的第一壓縮編碼結果聲頻信號替換為所導出的第二壓縮編碼結果聲頻信號以在將替換AV多路傳輸結果信號反饋到傳輸線中之前將主AV多路傳輸結果信號改變?yōu)樘鎿QAV多路傳輸結果信號。
本發(fā)明的第七方面提供一種產生要記錄的信息信號的設備。該設備包括如下裝置多路傳輸如下信號的裝置1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定獲得AV多路傳輸結果信號的視頻信號的指示時序的指示時序信息信號；在重播的過程中在與視頻信號同步的同時產生第二聲頻信號作為可以再現的替代第一聲頻信號的替換重播聲頻信號的裝置；對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號的裝置；以及將聲音產生時序信息信號加入到第二壓縮編碼結果聲頻信號中以獲得替換重播聲頻信號的裝置，該聲音產生時序信息信號基于參考時鐘信息信號并與視頻信號的同步化相關。
本發(fā)明的第八方面提供一種再現信息信號的設備。該設備包括如下的裝置再現通過多路傳輸如下的信號產生的AV多路傳輸結果信號的裝置1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)指定視頻信號的指示時序的指示時序信息信號；從所再現的AV多路傳輸結果信號中再現視頻信號的裝置；再現替換重播聲頻信號以再現第二聲頻信號的裝置，并通過如下的方式產生該替換重播聲頻信號1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將聲音產生時序信息信號加入到第二壓縮編碼結果聲頻信號中，該聲音產生時序信息信號指定第二壓縮編碼結果聲頻信號的聲音產生時序；其中可以再現第二聲頻信號替代第一聲頻信號；從再現的AV多路傳輸結果信號中導出參考時鐘信息信號和指示時序信息信號的裝置；從再現的AV多路傳輸結果信號中導出壓縮編碼結果視頻信號的裝置；對所導出的壓縮編碼結果視頻信號進行解碼以得到解碼結果視頻信號的裝置；響應所導出的參考時鐘信息信號和所導出的指示時序信息信號將解碼結果視頻信號作為輸出視頻信號提供的裝置；從所再現的替換重播聲頻信號中導出聲音產生時序信息信號和第二聲頻信號的裝置；響應所導出的參考時鐘信息信號和所導出的聲音產生時序信息信號將所導出的第二聲頻信號作為輸出聲頻信號提供的裝置。
本發(fā)明的第九方面基于本發(fā)明的第八方面，提供一種設備，其中該替換重播聲頻信號包括分別從壓縮編碼源聲頻信號中得到的許多輔助替換重播聲頻信號，并且將不同的標識信號分別加入到輔助替換重播聲頻信號中，以及其中通過參考標識信號選擇源聲頻信號中的一個源聲頻信號，以及將所選擇的源聲頻信號和視頻信號作為彼此同步的再現信號輸出。
本發(fā)明的第十方面提供一種傳輸信息信號的設備。該設備包括如下的裝置通過多路傳輸如下的信號產生主AV多路傳輸結果信號的裝置1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定視頻信號的指示時序的指示時序信息信號；并通過如下的方式產生替換重播聲頻信號的裝置1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將聲音產生時序信息信號加入到第二壓縮編碼結果聲頻信號中，該聲音產生時序信息信號基于參考時鐘信息信號指定第二壓縮編碼結果聲頻信號的聲音產生時序，其中可以再現第二聲頻信號替代第一聲頻信號；產生替換AV多路傳輸結果信號作為用于將壓縮編碼結果視頻信號連同第二壓縮編碼結果聲頻信號一起再現的信號的裝置；將替換AV多路傳輸結果信號反饋到傳輸線的裝置；從替換重播聲頻信號中導出第二壓縮編碼結果聲頻信號的裝置；以及將在主AV多路傳輸結果信號中的第一壓縮編碼結果聲頻信號替換為所導出的第二壓縮編碼結果聲頻信號以在將替換AV多路傳輸結果信號反饋到傳輸線中之前將主AV多路傳輸結果信號改變?yōu)樘鎿QAV多路傳輸結果信號的裝置。
本發(fā)明的第十一方面提供一種信息信號記錄媒體，該記錄媒體具有存儲AV多路傳輸結果信號和替換重播聲頻信號兩種信號的公共表面；通過多路傳輸如下的信號產生該AV多路傳輸結果信號1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)指定視頻信號的指示時序的指示時序信息信號；通過如下的方式產生替換重播聲頻信號1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將第二參考時鐘信息信號加入到第二壓縮編碼結果聲頻信號中，其中可以再現第二聲頻信號替代第一聲頻信號；其中加入到第二壓縮編碼結果聲頻信號中的第二參考時鐘信息信號等于在AV多路傳輸結果信號中的第一參考時鐘信息信號，以及第二壓縮編碼結果聲頻信號包含多路傳輸的分量，該分量是基于第一和第二參考時鐘信息信號中的一個信號并與視頻信號同步化相關的聲音產生時序信息信號；以及其中響應在AV多路傳輸結果信號中的第一參考時鐘信息信號再現該視頻信號，以及響應與用于視頻信號的再現的信號相同的參考時鐘信息信號使第二聲頻信號的再現與視頻信號的再現同步。
本發(fā)明的第十二方面提供一種傳輸信息信號的計算機程序。該計算機程序包括如下的步驟通過多路傳輸如下的信號產生主AV多路傳輸結果信號1)從對視頻信號的壓縮編碼中得到的壓縮編碼結果視頻信號，2)從對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼所得到的第一壓縮編碼結果聲頻信號，3)與在壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定視頻信號的指示時序的指示時序信息信號；并通過如下的方式產生替換重播聲頻信號1)對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號，以及2)將聲音產生時序信息信號加入到第二壓縮編碼結果聲頻信號中，該聲音產生時序信息信號基于參考時鐘信息信號指定第二壓縮編碼結果聲頻信號的聲音產生時序，其中可以再現第二聲頻信號替代第一聲頻信號；產生替換AV多路傳輸結果信號作為用于將壓縮編碼結果視頻信號連同第二壓縮編碼結果聲頻信號一起再現的信號；將替換AV多路傳輸結果信號反饋到傳輸線；從替換重播聲頻信號中導出第二壓縮編碼結果聲頻信號；以及將在主AV多路傳輸結果信號中的第一壓縮編碼結果聲頻信號替換為所導出的第二壓縮編碼結果聲頻信號以在將替換AV多路傳輸結果信號反饋到傳輸線中之前將主AV多路傳輸結果信號改變?yōu)樘鎿QAV多路傳輸結果信號。
附圖1所示為根據本發(fā)明的第一實施例的信息信號記錄和再現系統(tǒng)的方塊圖。
附圖2所示為MPEG編碼器的方塊圖。
附圖3所示為MPEG解碼器的方塊圖。
附圖4所示為MPEG系統(tǒng)解碼設備的方塊圖。
附圖5所示為在MPEG傳輸流(TS)、MPEG節(jié)目流(PS)和分包的單元流(PES)中的關系附圖。
附圖6所示為TS包的格式的附圖。
附圖7所示為響應包ID(PID)接收TS包的流程圖。
附圖8所示為在本發(fā)明的第一實施例中的信息信號記錄設備的方塊圖。
附圖9所示為在本發(fā)明的第一實施例中的信息信號再現設備的方塊圖。
附圖10所示為記錄在信息信號記錄媒體中的信息的文件結構的附圖。
附圖11所示為在附圖10中文件“SIDE.ifo”的結構的附圖。
附圖12所示為在附圖11中第二級程序段“GENERAL_IFO”的語法結構的附圖。
附圖13所示為在附圖11中的第三級程序段“PR_IFO_0”的結構的附圖。
附圖14所示為在附圖13中的第四級程序段“PROG_IFO”的語法結構的附圖。
附圖15所示為在附圖11中播放列表信息“PLAYL_IFO”的語法結構的附圖。
附圖16所示為在附圖13中的索引信息“INDEX_IFO”的語法結構的附圖。
附圖17所示為記錄在硬盤上的傳輸流(TS)的格式的附圖。
附圖18所示為在本發(fā)明的第一實施例中的信息信號傳輸設備的方塊圖。
附圖19所示為在附圖18中的CPU的控制程序段的流程圖。
具體實施例方式
第一實施例附圖1所示為根據本發(fā)明的第一實施例的信息信號記錄和再現系統(tǒng)。附圖1的系統(tǒng)包括信息信號產生設備10、記錄媒體驅動器20、信息信號記錄媒體25和信息信號再現設備30。信息信號產生設備10具有視頻編碼器11、聲頻編碼器11a和多路復用器15。記錄媒體驅動器20與信息信號產生設備10和信息信號再現設備30連接。記錄媒體驅動器20可以將信息信號寫在記錄媒體25中并從記錄媒體25中讀信息信號。硬盤記錄器/讀取器或光盤記錄器/讀取器可以用作記錄媒體驅動器20。包含了信息信號的文件可以記錄在記錄媒體25上。具體地說，AV(聲頻-視頻)多路傳輸的結果文件25a和后期錄音聲頻文件25b可以存儲在記錄媒體25中?？扇〉氖牵涗浢襟w25具有在其上記錄了AV多路傳輸結果文件25a和后期錄音聲頻文件25b的記錄表面。信息信號再現設備30具有多路信號分解器36、信號選擇器37、視頻解碼器45和聲頻解碼器45a?？扇〉氖?，信息信號再現設備30連接到監(jiān)視器TV設備。
附圖1的系統(tǒng)運行在可以從包括記錄模式、第一重播模式和第二重播模式中選擇的不同的模式中。在運行在記錄模式的過程中，視頻編碼器11接收伴有第一聲頻信號的視頻信號。視頻編碼器11根據視頻編碼的MPEG(運動圖象專家組)標準將所接收的視頻信號壓縮編碼成壓縮編碼結果視頻信號。因此，視頻編碼器11包括MPEG編碼器(MPEG視頻編碼器)。視頻編碼器11將壓縮編碼結果視頻信號反饋到多路復用器15的第一輸入端中。
聲頻編碼器11a接收伴有視頻信號的第一聲頻信號。聲頻編碼器11a根據聲頻編碼的MPEG標準將該第一聲頻信號壓縮編碼成第一壓縮編碼結果聲頻信號。聲頻編碼器11a將第一壓縮編碼結果聲頻信號反饋給多路復用器15的第二輸入端。
裝置15根據MPEG系統(tǒng)標準將壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號多路復用成AV多路傳輸結果信號。多路復用器15將該AV多路傳輸結果信號輸出到記錄媒體驅動器20。記錄媒體驅動器20將該AV多路傳輸結果信號記錄在記錄媒體25作為AV多路傳輸結果文件25a。
在AV多路傳輸結果文件25a的記錄完成之后，將第二聲頻信號開始記錄在記錄媒體25上作為不同于AV多路傳輸結果文件25a的后期錄音聲頻文件25b。具體地說，聲頻編碼器11a接收第二聲頻信號(后期錄音目的聲頻信號)。聲頻編碼器11a根據聲頻編碼的MPEG標準將第二聲頻信號壓縮編碼成第二壓縮編碼結果聲頻信號。聲頻編碼器11a將該第二壓縮編碼結果聲頻信號反饋到多路復用器15。多路復用器15將第二壓縮編碼結果聲頻信號傳輸到記錄媒體驅動器20。記錄媒體驅動器20將第二壓縮編碼結果聲頻信號記錄在記錄媒體25作為后期錄音聲頻文件25b。
第二聲頻信號不同于第一聲頻信號的內容。第二聲頻信號與先前所提到的視頻信號同步地產生。例如，在再現視頻信號的同時產生第二聲頻信號。在拍攝要產生的視頻信號的景物的同時通過采集拍攝的景物的現場的聲音產生第一聲頻信號。在另一方面，產生第二聲頻信號作為在拍攝景物之后播放的敘述或背景音樂的表示。第二聲頻信號也稱為后期錄音目的聲頻信號。
具有完美的聲頻和視頻信息的AV信號被稱為完整包信號(完整電視節(jié)目信號)。在用戶或第三人從與在完整包信號中的視頻信號相同的視頻信號和與在完整包中的聲頻信號不同的聲頻信號中制作從由完整包信號所代表的節(jié)目修改的AV節(jié)目的情況下，該聲頻信號定義為后期錄音目的聲頻信號。
附圖1的系統(tǒng)還設計成同步地再現在完整包信號中的視頻信號和第二聲頻信號(后期錄音聲頻信號)，并且還能夠再現完整包信號。此外，附圖1的系統(tǒng)還設計成降低了記錄在記錄媒體25上的信息量。
如前文所述，AV多路傳輸結果信號記錄在記錄媒體25上作為AV多路傳輸結果文件25a。一般地，AV多路傳輸結果信號與完整包信號相關。在AV多路傳輸結果文件25a中的聲頻信息和視頻信息可以同步地重播。第二聲頻信號記錄在記錄媒體25作為不同于AV多路傳輸結果文件25a的后期錄音聲頻文件25b。正如下文將會解釋到，將同步信號加入到AV多路傳輸結果文件25a和后期錄音聲頻文件25b中以使在后期錄音聲頻文件25b中的聲頻信息和在AV多路傳輸結果文件25a中的視頻信息的同步播放成為可能。
在附圖1中的系統(tǒng)的操作模式包括第一重播模式和第二重播模式。操作的第一重播模式設計成再現完整包信號。在操作的第一重播模式中，記錄媒體驅動器20訪問在信息信號記錄媒體25上的AV多路傳輸結果文件25a并從其中讀出AV多路傳輸結果信號。記錄媒體驅動器20將所讀出的AV多路傳輸結果信號反饋到多路信號分解器36中。
多路信號分解器36根據MPEG系統(tǒng)標準將AV多路傳輸結果信號分解為壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號。多路信號分解器36將壓縮編碼結果視頻信號反饋到視頻解碼器45。多路信號分解器36將第一壓縮編碼結果聲頻信號反饋到信號選擇器37。
視頻解碼器45根據視頻解碼的MPEG標準將壓縮編碼結果視頻信號擴展地解碼成原始視頻信號。因此，視頻解碼器45包括MPEG解碼器(MPEG視頻解碼器)。視頻解碼器45將再現的視頻信號反饋到監(jiān)視器TV設備。監(jiān)視器TV設備的顯示器指示所再現的視頻信號。
信號選擇器37將第一壓縮編碼結果聲頻信號傳輸到聲頻解碼器45a。聲頻解碼器45a根據聲頻解碼的MPEG標準將第一壓縮編碼結果聲頻信號擴展地解碼成第一原始聲頻信號(第一再現的聲頻信號)。聲頻解碼器45a將第一再現的聲頻信號反饋到監(jiān)視器TV設備。監(jiān)視器TV設備的揚聲器將第一再現的聲頻信號轉換為對應的聲音。第一再現的聲頻信號的重播與再現的視頻信號的重播同步。
操作的第二重播模式設計成同步地再現在完整包信號中的視頻信號和第二聲頻信號(后期錄音聲頻信號)。在操作的第二重播模式的過程中，記錄媒體驅動器20分時地交替地訪問在信息信號記錄媒體25上的AV多路傳輸結果文件25a和后期錄音聲頻文件25b。記錄媒體驅動器20從AV多路傳輸結果文件25a中讀出AV多路傳輸結果信號。記錄媒體驅動器20將所讀出的AV多路傳輸結果信號反饋到多路信號分解器36中。記錄媒體驅動器20從后期錄音聲頻文件25b中讀出第二壓縮編碼結果聲頻信號。記錄媒體驅動器20將該第二壓縮編碼結果聲頻信號反饋到信號選擇器37中。
多路信號分解器36根據MPEG系統(tǒng)標準將AV多路傳輸結果信號分解成壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號。多路信號分解器36將壓縮編碼結果視頻信號反饋到視頻解碼器45。多路信號分解器36將第一壓縮編碼結果聲頻信號反饋到信號選擇器37。
視頻解碼器45根據視頻解碼的MPEG標準將壓縮編碼結果視頻信號擴展地解碼成原始視頻信號(再現的視頻信號)。視頻解碼器45將再現的視頻信號反饋到監(jiān)視器TV設備。監(jiān)視器TV設備的顯示器指示所再現的視頻信號。
信號選擇器37選擇第二壓縮編碼結果聲頻信號并將所選則的信號傳輸到聲頻解碼器45a。因此，信號選擇器37拒絕來自多路信號分解器36的第一壓縮編碼結果聲頻信號。聲頻解碼器45a根據聲頻解碼的MPEG標準將第二壓縮編碼結果聲頻信號擴展地解碼成第二原始聲頻信號(第二再現的聲頻信號)。第二再現的聲頻信號是再現的后期錄音目的聲頻信號。聲頻解碼器45a將第二再現的聲頻信號反饋到監(jiān)視器TV設備。監(jiān)視器TV設備的揚聲器將第二再現的聲頻信號(再現的后期錄音目的聲頻信號)轉換成相應的聲音。第二再現的聲頻信號的重播與再現的視頻信號的重播同步。如下文所描述，通過給在AV多路傳輸結果文件25a中的視頻信息和在后期錄音聲頻文件25b中的聲頻信息中增加同步信號提供了在第二再現的聲頻信號的重播和在再現的視頻信號的重播之間的同步化。
附圖1的系統(tǒng)包括用戶接口。用戶可以通過啟動用戶接口指定在附圖1中的系統(tǒng)的操作的模式。信號選擇器37響應來自用戶接口的信號，該信號表示操作的指定模式是第一重播模式還是第二重播模式。在所指定的操作模式是第一重播模式時，信號選擇器37將來自多路信號分解器36的第一壓縮編碼結果聲頻信號傳輸到聲頻解碼器45a。在另一方面，在所指定的操作模式是第二重播模式時，信號選擇器37選擇第二壓縮編碼結果聲頻信號并將所選擇的信號傳輸給聲頻解碼器45a。
附圖2所示為可以用作在視頻編碼器11(參見附圖1)中的解碼器的MPEG解碼器50。MPEG解碼器50包括作為減法器運行的減法器52。減法器52通過輸入端51接收輸入的視頻信號Vin。減法器52計算幀間預測誤差，即在由輸入的視頻信號Vin所代表的圖像和通過來自運動補償預測器65的輸出數據所代表的最終參考圖像(最終預測圖像)之間的殘差(誤差)。減法器52輸出指示所計算的殘差的數據(所計算的幀間預測誤差)。
通過運動補償預測器65所實施的預測設計如下。預測方向具有三種模式，即，自過去起的方向(“前向”)、自將來起的方向(“后向”)和自過去和將來兩者的方向(“內插”)。因此，存在自過去的預測(“前向”)、自將來的預測(“后向”)和自過去和將來兩者的預測(“內插”)。實際使用的預測方向可以一個MB一個MB地改變，這里MB表示16×16像素的微塊。每個圖像劃分為預定數量的MB。通過由輸入的視頻信號Vin所表示的每個圖像的類型基本決定了實際使用的預測方向。圖像被分為P圖像(預測性編碼圖像)、B圖像(雙向預測性編碼圖像)和I圖像(內編碼圖像)。代表P圖像的MB是第一和第二模式。根據自過去的預測對第一模式的P-圖像MB進行編碼。對第二模式的P圖像MB獨立地進行編碼而不進行預測。代表B圖像的MB是第一、第二、第三和第四模式。根據自將來的預測對第一模式的B圖像MB進行編碼。根據自過去的預測對第二模式的B圖像MB進行編碼。根據自過去和將來兩者的預測對第三模式的B圖像MB進行編碼。對第四模式的B圖像MB獨立地進行編碼而不進行預測。對代表I圖像的MB獨立地進行編碼而不進行預測。
通過運動補償預測器65所實施的運動補償設計如下。根據運動補償，對每個MB執(zhí)行在兩個圖像之間匹配的模式以便以對應于半像素的精度檢測一個或多個運動矢量。兩個圖像中的一個圖像由輸入的視頻信號Vin給定，而另一圖像稱為運動補償預測的源圖像或基本參考圖像?；緟⒖紙D像根據所檢測的運動矢量平移?；诨緟⒖紙D像的平移產生最終的參考圖像(最終預測圖像)。在不存在運動補償的情況下，基本參考圖像直接用作最終參考圖像。一般地，運動矢量具有水平方向分量和垂直方向分量。代表所檢測的運動矢量或所檢測的運動矢量的信息和代表預測方向或指示從其中實施預測的源圖像的MC-模式(運動補償模式)信息作為與每個MB相關的相加的信息傳輸。GOP(圖像組)定義為從I圖像開始并在下一個I圖像直接之前的圖像上結束的圖像序列。一般地，一個GOP具有大約15個連續(xù)的圖像。
通過DCT裝置53對從減法器52中輸出的剩余指示數據進行離散余弦變換(DCT)。具體地說，DCT裝置53將由剩余指示數據所表示的每個MB劃分為4個DCT塊，每個DCT塊具有8×8個像素。DCT裝置53對每個DCT塊進行二維DCT以產生表示DCT系數的數據。DCT裝置53輸出所產生的DCT系數數據。一般地，由于在低頻分量中視頻信號富裕，因此產生了對應于低頻的許多有效的DCT系數。
通過量化器54響應量化值對通過DCT裝置53的輸出數據所表示的DCT系數進行量化。該量化值等于量化矩陣乘以標量的量化比。量化矩陣具有從根據視覺對二維頻率分量進行加權的過程中得到的8×8個元素。量化包括將DCT系數除以量化值的步驟。
從量化器54中輸出的量化結果數據通過VLC裝置55編碼成可變長度代碼(VLC)數據。具體地說，通過DPCM(差分脈碼調制技術)對量化結果數據的直流(DC)分量進行編碼。沿著從高頻朝低頻的方向以Z字形掃描量化結果數據的交流(AC)分量，并進行赫夫曼(Huffman)編碼，在這種編碼中將具有較高的發(fā)生概率的數據段分配給較短的代碼字。VLC裝置55從運動補償預測器65中接收運動矢量信息和MC-模式信息。VLC裝置65將運動矢量信息和MC模式信息加入到VLC數據中。所得的VLC數據臨時存儲在緩沖器56中。以預定的傳輸率將VLC數據從緩沖器56中輸出作為位流形式的編碼結果MPEG數據。
緩沖器56通知代碼量控制器57每個MB的編碼結果數據的實際量，即構成每個MB的編碼結果數據的總位數。代碼量控制器57計算在編碼結果數據的實際量和它的目標量之間的誤差。代碼量控制器57響應所計算的數據量的誤差調整由量化器54所使用的量化比，由此控制量編碼結果數據的實際量。
通過反向量化器61對從量化器54所輸出的量化結果數據進行反向量化，即轉換回DCT系數數據。反向量化器61輸出DCT系數數據。通過反向DCT裝置62對從反向量化器61中輸出的DCT系數數據進行反向DCT，即轉換回剩余指示數據。反向DCT裝置62輸出剩余指示數據。由從反向DCT裝置62中輸出的數據所表示的剩余圖像和從運動補償預測器65中輸出的數據所表示的最終參考圖像(最終預測圖像)通過加法器63相加。加法器63輸出相加的結果視頻數據。相加的結果視頻數據臨時存儲在存儲器64中。視頻數據從存儲器64中反饋到運動補償預測器65中。運動補償預測器65使用來自存儲器64的輸出視頻數據作為運動補償預測的源圖像或者基本參考圖像的指示。
附圖3所示為能夠用作在視頻解碼器45(參見附圖1)中的解碼器的MPEG解碼器70。MPEG解碼器70包括緩沖器72。緩沖器72通過輸入端71接收位流形式的編碼結果MPEG數據。編碼結果MPEG數據在輸出到VLD(可變長度解碼)裝置73中之前臨時地存儲在緩沖器72中。VLC裝置73對從緩沖器72中輸出的數據相對于VLD進行VLD反向，由此接收DC分量數據和AC分量數據。沿著從高頻到低頻的方向以Z字形掃描AC分量數據。DC分量數據和所得的AC分量數據以8×8個元素的矩陣設置。VLD裝置73將矩陣設置的數據輸出到反向量化器74中。VLD裝置73從緩沖器72輸出的數據中抽取運動矢量信息和MC模式信息。VLD裝置73將運動矢量信息和MC模式信息輸出到運動補償預測器78中。
反向量化器74響應量化值對從VLD裝置73中輸出的數據進行反向量化，由此恢復了DCT系數數據。反向量化包括將所處理的數據值乘以量化值的步驟。應該指出的是，量化值等于量化矩陣乘以標量量化比。DCT系數數據從反向量化器74中輸出到反向DCT裝置75中，進行反向DCT，并由此轉換回剩余指示數據。反向DCT裝置75輸出剩余指示數據。由從反向DCT裝置75中輸出的數據所表示的剩余圖像和由從運動補償預測器78中輸出的數據所表示的最終參考圖像(最終預測圖像)通過加法器76相加。加法器76輸出相加的結果視頻數據作為解碼結果視頻數據(原始視頻數據)。解碼剩余視頻數據朝外部發(fā)送。從加法器76中輸出的相加的結果視頻數據臨時存儲在存儲器77中。視頻數據從存儲器77中反饋到運動補償預測器78中。運動補償預測器78使用從存儲器77中輸出的視頻數據作為運動補償預測的基本參考圖像或源圖像的指示。運動補償預測器78響應基本參考圖像、運動矢量信息和MC-模式信息產生最終參考圖像(最終預測圖像)。運動補償預測器78輸出表示最終參考圖像的數據。
MPEG系統(tǒng)標準規(guī)定了如下的五項。
1)許多編碼結果位流的同步再現；2)許多編碼結果位流多路復用成單個位流；3)在再現開始時對在緩沖器(在附圖3中的緩沖器72)的編碼結果數據的初始化；4)對在緩沖器中的數據的管理以獲得連續(xù)的解碼結果視頻信號和連續(xù)的解碼結果聲頻信號；以及5)與時序(比如解碼開始時序和重播指示時序)的設置相關的管理。
因此根據MPEG系統(tǒng)的標準，實施與編碼結果數據相關的管理。將編碼結果數據格式化或處理成包結構的數據并且進行多路復用。在上述的項目中實施操作步驟的管理數據加入到多路復用結果數據中。
符合MPEG系統(tǒng)標準的信息的多路復用包括對該信息分包的步驟。例如，在要求對視頻信息和聲頻信息進行多路復用的情況下，將視頻信息和聲頻信息中的每種信息分為具有適合長度的包。附加的信息比如標題信息加入到每個包中。在包序列發(fā)送之前視頻信息包和聲頻信息包混合到包序列中。因此，視頻信息包和聲頻信息包分時地發(fā)送。標題信息包括了識別相關的包是視頻包、聲頻包或其它的包的信息以及用于同步的時序信息。一般來說，包的長度取決于傳輸介質和應用。例如，在ATM(異步傳輸模式)的情況下包的長度等于53個字節(jié)。在光盤的情況下包的長度等于4千個字節(jié)。根據MPEG系統(tǒng)的標準，包的長度可變，并且可以設定為任意的值。
要傳輸的數據劃分為壓縮包(pack)，并且進行分包。一個壓縮包由幾個包(packet)構成。每個壓縮包的標題部分帶有包開始代碼和SCR(系統(tǒng)時鐘基準)。每個包的標題帶有流ID和時間標記。時間標記包含在聲頻和視頻之間同步化的時序信息。時間標記是分別稱為DTS(解碼時間標記)和PTS(表示時間標記)的兩種類型中的一種。傳輸的數據包含了指示27MHz的頻率的周期性產生的PCR(節(jié)目時鐘參考)。與解碼器公共的參考時鐘鎖定到由PCR所指示的頻率中。DTS指示了在相關的包中的第一訪問單元的所需的解碼開始時間，而PTS指示所需的指示開始時間(所需的重播開始時間)。一個訪問單元對應于在視頻情況中的一個圖像。在聲頻情況下一個訪問單元對應于1152個采樣?；谕ㄟ^PCR所指示的頻率以一定的時間精度給定DTS和PTS。
PCR用作基準時鐘信息信號。在視頻包的情況下，PTS用作指定相關的視頻信息的指示的時序的指示時序信息信號。在聲頻包的情況下，PTS用作指定將相關的聲頻信息轉換為對應的聲音的時序的聲音產生時序信息信號。
附圖4所示為MPEG系統(tǒng)解碼設備，該設備包括系統(tǒng)解碼器81，該系統(tǒng)解碼器81接收包含有視頻信息和聲頻信息的多路復用結果數據(系統(tǒng)位流)。系統(tǒng)解碼器81對所接收的數據進行多路分解為視頻數據和聲頻數據。系統(tǒng)解碼器81將聲頻數據輸出到聲頻解碼器(MPEG聲頻解碼器)82中。系統(tǒng)解碼器81將視頻數據輸出到視頻解碼器(MPEG視頻解碼器)83中。此外，系統(tǒng)解碼器81從所接收的數據中抽取每個PCR、每個視頻DTS、每個聲頻DTS、每個視頻PTS和每個聲頻PTS。系統(tǒng)解碼器81還可以從所接收的數據中抽取每個SCR。系統(tǒng)解碼器81將PCR(或者SCR)輸出到時鐘控制電路84。系統(tǒng)解碼器81將視頻DTS、聲頻DTS、視頻PTS和聲頻PTS輸出到比較電路85中。
時鐘控制電路84包括產生表示參考時鐘時間的參考時鐘信號的振蕩器。時鐘控制電路84將振蕩器的振蕩頻率鎖定到由PCR所表示的頻率。因此，基于PCR確定了參考時鐘時間。時鐘控制電路84通知比較電路85參考時鐘時間，即由參考時鐘信號所表示的時間。
比較電路85將由聲頻DTS所表示的時間與參考時鐘時間進行比較以決定聲頻DTS時間是否符合參考時鐘時間。在聲頻DTS時間符合參考時鐘時間時，比較電路85命令聲頻解碼器82開始聲頻數據的解碼。聲頻解碼器82實施聲頻數據的解碼。聲頻解碼器82將解碼結果聲頻數據存儲在存儲器86中。比較電路85將由視頻DTS所表示的時間與參考時鐘時間進行比較以確定視頻DTS時間是否符合參考時鐘時間。在視頻DTS時間符合參考時鐘時間時，比較電路85命令視頻解碼器83開始視頻數據的解碼。視頻解碼器83實施視頻數據的解碼。視頻解碼器83將解碼結果視頻數據存儲在存儲器87中。
比較電路85將由聲頻PTS所指示的時間與參考時鐘時間進行比較以確定聲頻PTS時間是否符合參考時鐘時間。在聲頻PTS時間符合參考時鐘時間時，比較電路85啟動存儲器86以輸出解碼結果聲頻數據用于重播的目的或者聲音產生的目的。比較電路85將由視頻PTS所表示的時間與參考時鐘時間進行比較以確定視頻PTS時間是否符合參考時鐘時間。在視頻PTS時間符合參考時鐘時間時，比較電路85啟動存儲器87以輸出解碼結果視頻數據用于表示目的。預先設定視頻PTS和聲頻PTS以使解碼結果視頻數據和解碼結果聲頻數據從存儲器86和87中可以同步地輸出。因此，視頻信息和聲頻信息可以同步地重播。
考慮到附圖4的MPEG系統(tǒng)解碼設備的一部分對應于臨時存儲許多類型的解碼結果數據和實施許多類型的數據的同步再現的虛擬解碼器。虛擬解碼器稱為STD(系統(tǒng)目標解碼器)。指定多路復用結果位流以使在STD中的存儲既不上溢也不下溢。
MPEG系統(tǒng)標準規(guī)定了傳輸流(TS)和節(jié)目流(PS)。通過分包的單元流(PES)和帶有其它的信息的包形成TS或PS。PES定義為用于在TS和PS之間轉換或變換的中間流。例如通過對編碼結果MPEG視頻數據、編碼結果MPEG聲頻數據或者專用流進行分包產生PES。
具有公共參考時間的內容節(jié)目的視頻和聲頻數據可以多路復用在PS中。PS包括包序列。PS的包層稱為“PES”。參考附圖5，PS的包層與TS的包層公共以在PS和TS之間提供兼容性。根據PS的STD模型，通過在PES包中的流ID將要解碼的位流的解碼模式切換到PS側。
具有公共參考時間的內容節(jié)目的視頻和聲頻數據還可以多路復用到TS中。此外，將在參考時間中不同的內容節(jié)目的視頻和聲頻數據多路復用成TS。通過固定長度的包序列(即，188字節(jié)的包(TS包))形成TS。TS被設計用于由傳輸線所引起的數據誤差的系統(tǒng)中。從上文的解釋中可以理解的是，TS是表示多重內容節(jié)目的數據流。雖然TS包排在PES包之前，但是TS包通常短于PES包。一般地，將一個PES包劃分為幾段，而PES包段分別放置在多個TS包中。根據TS的STD模型，通過在TS包中的包ID(PID)將要解碼的位流的解碼模型切換到PS側。
參考附圖6，TS包具有以此順序設置的標題、自適應域(AF)和有效負載。標題包括以此順序設置的同步字節(jié)、誤差指示器、單元開始指示器和傳輸包優(yōu)先標志。在該標題中，傳輸包優(yōu)先標志后跟著指示在相關的包中的有效負載的類型的PID(在相關的包中的有效負載中的數據類型)。在該標題中，PID后連續(xù)跟著擾頻控制信息片段、AF控制信息片段和循環(huán)計數器。標題的尾部是循環(huán)計數器。AF控制信息片段表示在相關的包中是否存在自適應域。在AF控制信息片段表示不存在自適應域時，標題后緊跟著有效負載。在另一方面，在AF控制信息片段表示存在自適應域時，標題后連續(xù)跟著自適應域(AF)和有效負載。循環(huán)計數器指示關于相關的包的連續(xù)性。一般地，自適應信息放置在自適應域(AF)中，同時內容數據比如視頻數據或聲頻數據放置在有效負載中。無效的數據(比如啞數據)可以放置在有效負載中。
如附圖6所示，自適應域包括可選擇的域?？蛇x擇的域的48位前端帶有PCR。
處理TS的MPEG系統(tǒng)解碼設備被設計成在接收和解碼過程中提供檢測在TS包中的PID并根據所檢測的PID對TS包進行分類的機構。具體地說，參考附圖7，TS包搜索在階段S1具有PID＝0的一個包。換句話說，接收PID＝0的TS包。PID＝0的TS包稱為PAT(節(jié)目關聯表)包。PAT包帶有表示在節(jié)目號(內容節(jié)目ID號)FR和基于鏈接的專用PID之間的關系(即，在內容節(jié)目和專用PID之間的關系)的PAT信息。在階段S1之后的階段S2中，檢測在PAT包中的PAT信息。每個專用PID對應于PMT(節(jié)目映射表)包。PMT包帶有表示在相關的內容節(jié)目、在表示相關的內容節(jié)目的視頻包中的PID和在表示相關的內容節(jié)目的聲頻包中的PID之間的關系的PMT信息。從內容節(jié)目中事先選擇一個節(jié)目作為所需的內容節(jié)目。在階段S2中，參考在PAT包中的PAT信息檢測對應于所需的內容節(jié)目的專用PID。在階段S2之后的階段S3中，接收或搜索具有與所檢測的專用PID相同的PID的PMT包。在階段S3之后的階段S4中，訪問所接收的PMT包以獲得PMT信息。根據在所訪問的PMT包中的PMT信息，檢測在表示所需的內容節(jié)目的視頻包和聲頻包中的PID。此外，檢測與所需的內容節(jié)目相關的同步時鐘包中的PID。在階段S4之后的階段S5a中，接收對應于所檢測的視頻包PID的TS包。在階段S4之后的階段S5b中，接收對應于所檢測的聲頻包PID的TS包。從所接收的TS包中抽取聲頻信息。在階段S4之后的階段S5c中，接收對應于所檢測的同步時鐘包PID的TS包。從所接收的TS包中抽取同步時鐘信息。這樣，響應所檢測的PID訪問表示所需的內容節(jié)目的視頻包和聲頻包。通過參考PAT和PMT實施到所需的內容節(jié)目的輸入。PAT和PMT稱為PSI(節(jié)目專用信息)。
附圖8所示為可用作在附圖1中的信息信號產生設備10的信息信號產生設備10a。如附圖8所示，信息信號產生設備10a包括與CPU17連接的用戶接口17a。用戶接口17a可以由用戶支配。CPU 17具有輸入/輸出端口、處理部分、ROM和RAM的結合。CPU 17根據存儲在ROM和RAM中的控制程序運行?？刂瞥绦虮辉O計成啟動CPU 17以實施后面所提到的運行步驟。通過處理用戶接口17a，信息信號產生設備10a的操作可以在不同的模式中改變，包括第一模式和第二模式。第一運行模式設計成記錄完整包信號，即主數據包含聲頻信息和視頻信息。第二運行模式設計成記錄后期錄音目的聲頻數據。在處理用戶接口17a時，從其中將運行模式指定信號輸入到CPU 17中。運行模式指定信號指示第一運行模式和第二運行模式中的哪種模式是所需的。CPU 17將運行模式指定信號傳輸給信號選擇器16。
在運行模式指定信號指示第一運行模式是所需的時，即在需要記錄主數據時，信息信號產生設備10a運行如下。輸入視頻數據(視頻信號)反饋到視頻編碼器11，而伴有輸入視頻數據的輸入聲頻數據(第一聲頻信號)反饋到聲頻編碼器11a。視頻編碼器11和聲頻編碼器11a類似于在附圖1中的視頻編碼器11和聲頻編碼器11a。一般地，輸入視頻數據和輸入聲頻數據都表示內容節(jié)目(公共聲頻視頻節(jié)目)，并且彼此同步。視頻編碼器11實施輸入視頻數據的MPEG編碼以產生編碼結果視頻數據。編碼結果視頻數據從視頻編碼器11發(fā)送到PES分包裝置12。聲頻編碼器11a實施輸入聲頻數據的MPEG編碼以產生編碼結果聲頻數據。該編碼結果聲頻數據從聲頻編碼器11a發(fā)送到PES分包裝置12a。PES分包裝置12將編碼結果視頻數據轉換為一系列的PES包。將PES包序列從PES分包裝置12發(fā)送到時間標記記錄器13。PES分包裝置12a將編碼結果聲頻數據轉換為一系列的PES包。將PES包序列從PES分包裝置12a發(fā)送到時間標記記錄器13a。
信號發(fā)生器14給時間標記記錄器13和13a輸出27MHz的時鐘信號。時間標記記錄器13響應27MHz的時鐘信號產生時序信息片段，即，PCR和周期更新的時間標記(視頻PTS和視頻DTS)。時間標記記錄器13在每個PES包中記錄PCR、PTS和DTS。增加了時序信息的PES包從時間標記記錄器13中順序地發(fā)送給多路復用器15。時間標記記錄器13a響應27MHz的時鐘信號產生PCR和周期性更新的時間標記(聲頻PTS和聲頻DTS)。時間標記記錄器13a在每個PES包中記錄PCR、PTS和DTS。增加了時序信息的PES包從時間標記記錄器13a中順序地發(fā)送給多路復用器15。多路復用器15對來自時間標記記錄器13的PES包和來自時間標記記錄器13a的PES包進行多路復用以產生PS格式或TS格式的多路復用結果數據(主數據)。將多路復用結果數據從多路復用器15發(fā)送到信號選擇器16中。
信號選擇器16響應操作模式指定信號，選擇多路復用結果數據(主數據)并將多路復用結果數據傳遞給緩沖器18。在將多路復用結果數據從緩沖器中輸出到記錄控制器19之前將多路復用結果數據存儲在其中。記錄控制器19將主數據(多路復用結果數據)記錄在信息信號記錄媒體25作為具有名稱為“PR....dat”的AV多路傳輸結果文件25a(參見附圖10)。
通過時間標記記錄器13所記錄的視頻PTS和視頻DTS和通過時間標記記錄器13a所記錄的聲頻PTS和聲頻DTS成這樣關系使從所記錄的主數據中可以同步地再現視頻信息和聲頻信息。
在操作模式指定信號指示需要第二操作模式時，即在需要記錄后期錄音目的聲頻數據時，如下操作信息信號產生設備10a。CPU 17將后期錄音目的聲頻數據的標識信息(ID信息)發(fā)送給PES分包裝置12a。將后期錄音目的聲頻數據(第二聲頻信號)反饋給聲頻編碼器11a。聲頻編碼器11a對后期錄音目的聲頻數據實施MPEG編碼以產生編碼結果聲頻數據。將編碼結果聲頻數據從聲頻編碼器11a發(fā)送給PES分包裝置12a。
PES分包裝置12a將后期錄音ID信息加入到編碼結果聲頻數據中，并將加入了ID的編碼結果視頻數據轉換為PES包序列。將PES包序列從PES分包裝置12a發(fā)送給時間標記記錄器13a。
信息信號再現設備訪問在記錄媒體25上的AV多路傳輸結果文件25a，并從其中讀出多路復用結果數據(主數據)。該信息信號再現設備從所讀出的多路復用結果數據中分離并再現視頻信號。具體地說，由信息信號產生設備10a和信息信號再現設備共同擁有的讀控制器19a訪問記錄媒體25并再現該視頻信號。此外，讀控制器19a從所再現的視頻信號中抽取每個PCR、每個視頻PTS和每個視頻DTS?？商鎿Q的是，通過在信息信號再現設備中的標識信息檢測器可以獲得與所再現的視頻信號相關的PCR、視頻PTS和視頻DTS。讀控制器19a將所抽取的PCR發(fā)送到信號發(fā)生器14。讀控制器19a通知CPU 17所抽取的視頻PTS和所抽取的視頻DTS。信號發(fā)生器14將27兆赫茲的時鐘信號鎖定到由所抽取的PCR指示的頻率。
信號發(fā)生器14給時間標記記錄器13a輸出27-兆赫茲的時鐘信號。時間標記記錄器13a在受CPU 17控制的同時，響應27-兆赫茲的時鐘信號產生時序信息片段，即PCR和周期性更新的時間標記(聲頻PTS和聲頻DTS)。響應所抽取的視頻PTS和所抽取的視頻DTS，通過CPU 17對時間標記記錄器13a的控制實施了聲頻PTS和聲頻DTS的管理，由此在后期錄音目的聲頻信號的聲頻信息和在所記錄的主數據(AV多路傳輸結果文件25a)中的視頻信息之間提供同步關系。時間標記記錄器13a記錄在每個PES包中的PCR、聲頻PTS和聲頻DTS?？扇〉氖?，將PCR、聲頻PTS和聲頻DTS設置成等于在記錄主數據的過程中已經加入到每個聲頻PES包中的PCR、聲頻PTS和聲頻DTS。在這種情況下，在后期錄音聲頻數據與在所記錄的主數據中的視頻信息之間的計時關系與在所記錄的主數據中的聲頻信息與在其中的視頻信息之間的計時關系相同。時序信息相加的PES包順序地從時間標記記錄器13a發(fā)送到信號選擇器16而不通過多路復用器15傳輸。信號選擇器16響應操作模式指定信號選擇通過時間標記記錄器13a所輸出的數據(PES包序列)，并將所選擇的數據傳輸到緩沖器18a。在將所選擇的數據從緩沖器18a輸出到記錄控制器19之前將其存儲在該緩沖器中。記錄控制器19記錄從在記錄媒體25中的緩沖器18a中輸出的數據作為后期錄音聲頻數據。在記錄媒體25中的后期錄音聲頻數據放在名稱為“AF....dat”的后期錄音聲頻文件25b中(參見附圖10)。可取的是，記錄控制器19和信息信號再現設備(讀控制器19a)可以分時地交替地周期性地訪問記錄媒體25。
類似地，第三和在后的聲頻信號(第二和在后的后期錄音目的聲頻信號)可以記錄在記錄媒體25分別作為第二和在后的后期錄音聲頻文件。例如，包含第M次后期錄音聲頻信號的后期錄音聲頻文件的名稱為“AF....dat”。
根據后面提到的信息，將后期錄音目的聲頻數據記錄在信息信號記錄媒體25作為播放清單信息。具體地說，在PL文件夾中將第一后期錄音目的聲頻數據記錄成名稱為“AF-1.dat”的文件(參見附圖10)。此外，記錄第二和在后的后期錄音目的聲頻數據。此外，在PL文件夾中將第m后期錄音目的聲頻數據記錄成名稱為“AF-m.dat”的文件(參見附圖10)。因此，記錄了“m”種不同類型的后期錄音目的聲頻數據。信息片段“AF_number”(參見附圖15)識別后期錄音目的聲頻數據。由于信息片段“AF_number”具有8位(“0”無用)，因此可以處理高達254種不同類型的后期錄音目的聲頻數據。
附圖9所示為可以用作在附圖1中的信息信號再現設備30的信息信號再現設備30a。如附圖9所示，信息信號再現設備30a包括與CPU33連接的用戶接口32。用戶可以處理用戶接口32。CPU33具有輸入/輸出端口的結合、處理部分、ROM和RAM。CPU 33根據存儲在ROM和RAM中的控制程序運行?？刂瞥绦虮辉O計成啟動CPU 33以實施后面所提到的運行步驟。通過處理用戶接口32，信息信號產生設備30a的操作可以在不同的模式中改變，包括第一模式和第二模式。第一運行模式設計成再現主數據(AV多路傳輸結果文件25a)。第二運行模式設計成產生后期錄音聲頻數據(后期錄音聲頻文件25b)而不是在主數據中的聲頻信息，同時同步地再現在主數據中的視頻信息。在處理用戶接口32時，從其中將運行模式指定信號輸入到CPU33中。運行模式指定信號指示第一運行模式和第二運行模式中哪種模式是所需的。CPU33將運行模式指定信號傳遞給信號選擇器37。此外，通過處理用戶接口32可以將標識(ID)信息輸入到CPU33。CPU33將該標識信息傳遞給標識信息檢測器34。
在運行模式指定信號指示需要第一運行模式時，即，在需要再現主數據(AV多路傳輸結果文件25a)時，信息信號再現設備30a如下運行。通過處理用戶接口32將標識所需的主數據的信號輸入到CPU33。標識信號標識分配給所需的主數據的指定號(標識號)。CPU33將標識信號傳遞給標識信息檢測器34。標識信息檢測器34從標識信號中得出主數據的標識號。標識信息檢測器34通知讀控制器31所需的主數據的標識號。標識信息檢測器34指令讀控制器31從信息信號記錄媒體25中讀取對應于所需的主數據的標識號的名稱為“PR....dat”的主數據文件(AV多路傳輸結果文件25a)。因此，讀控制器31實施了從記錄媒體25中讀出所需的主數據。這樣，讀控制器31從記錄媒體25中讀出了所需的主數據(即所需的多路復用結果數據)。將所讀出的主數據從讀控制器31發(fā)送到緩沖器35中。在將主數據從緩沖器35輸出到多路信號分解器36中之前將其存儲在緩沖器35中。多路信號分解器36將主數據分解為視頻數據和聲頻數據。將視頻數據從多路信號分解器36發(fā)送到時間標記檢測器43中。聲頻數據從多路信號分解器36發(fā)送到信號選擇器37中。信號選擇器37響應運行模式指定信號從多路信號分解器36中選擇聲頻數據，并將所選擇的聲頻數據傳輸到時間標記檢測器43a中。
時間標記檢測器43檢測在視頻數據中的時序信息(每個PCR、每個視頻PTS和每個視頻DTS)。時間標記檢測器43將所檢測的PCR、所檢測的視頻PTS和所檢測的視頻DTS發(fā)送給時間標記比較器42中。時間標記檢測器43將視頻數據傳輸給PES去包裝置44。時間標記檢測器43a檢測在聲頻數據中的時序信息(每個PCR、每個聲頻PTS和每個聲頻DTS)。時間標記檢測器43a將所檢測的PCR、所檢測的聲頻PTS和所檢測的聲頻DTS發(fā)送給時間標記比較器42中。時間標記檢測器43a將聲頻數據傳輸給PES去包裝置44a。
PES去包裝置44對視頻數據(PES包序列)進行去包以產生去包結果視頻數據。PES去包裝置44將去包結果視頻數據輸出給視頻解碼器45。PES去包裝置44a對聲頻數據(PES包序列)進行去包以產生去包結果聲頻數據。PES去包裝置44a將去包結果聲頻數據輸出給聲頻解碼器45a。視頻解碼器45和聲頻解碼器45a類似于在附圖1中的視頻解碼器45和聲頻解碼器45a。視頻解碼器45實施了視頻數據的MPEG解碼以產生解碼結果視頻數據。視頻解碼器45將解碼結果視頻數據存儲在存儲器46中。聲頻解碼器45a實施了聲頻數據的MPEG解碼以產生解碼結果聲頻數據。聲頻解碼器45a將解碼結果聲頻數據存儲在存儲器46a中。
信號發(fā)生器41給時間標記比較器42輸出27兆赫茲的時鐘信號?；?7兆赫茲的時鐘信號，時間標記比較器42產生指示參考時鐘時間的參考時鐘信號。時間標記比較器42將參考時鐘信號的頻率鎖定在由PCR所指示的頻率上。因此，參考時鐘時間由PCR決定。時間標記比較器42將由視頻DTS所表示的時間與參考時鐘時間進行比較以決定視頻DTS時間是否與參考時鐘時間相符合。在視頻DTS時間與參考時鐘時間相符合時，時間標記比較器42指令視頻解碼器45開始來自具有相關的視頻DTS的PES包的視頻數據的解碼。時間標記比較器42將由聲頻DTS所表示的時間與參考時鐘時間進行比較以決定聲頻DTS時間是否與參考時鐘時間相符合。在聲頻DTS時間與參考時鐘時間相符合時，時間標記比較器42指令聲頻解碼器45a開始對來自具有相關的聲頻DTS的PES包的聲頻數據進行解碼。
時間標記比較器42將由視頻PTS所表示的時間與參考時鐘時間進行比較以決定視頻PTS時間是否與參考時鐘時間相符合。在視頻PTS時間與參考時鐘時間相符合時，時間標記比較器42指令存儲器46給顯示監(jiān)視器27輸出解碼結果視頻數據以便用于指示。時間標記比較器42將由聲頻PTS所表示的時間與參考時鐘時間進行比較以決定聲頻PTS時間是否與參考時鐘時間相符合。在聲頻PTS時間與參考時鐘時間相符合時，時間標記比較器42指令存儲器46a給揚聲器28輸出解碼結果聲頻數據以便用于重播或產生聲音。預先設定視頻PTS和聲頻PTS以便能夠同步地重播解碼結果視頻信號和解碼結果聲頻數據。
在運行模式指定信號指示需要第二運行模式時，即在需要再現后期錄音聲頻數據和主數據視頻信息時，信息信號再現設備30a運行如下。通過處理用戶接口32將標識所需的主數據的信號和所需的后期錄音聲頻數據輸入到CPU33。標識信號對應于代表分配給所需的主數據和所需的后期錄音聲頻數據的指定號(標識號)的在附圖15中的信息片段“AF_number”和“PR_number”。CPU33將標識信號傳遞給標識信息檢測器34。讀控制器31從信息信號記錄媒體25中讀出播放列表信息“PLAY_IFO”(參見附圖15)，并將播放列表信息“PLAY_IFO”發(fā)送給標識信息檢測器34。標識信息檢測器34響應該標識信號通過參考播放列表信息“PLAY_IFO”檢測所需的主數據和所需的后期錄音聲頻數據的標識號。標識信息檢測器34將所需的主數據和所需的后期錄音聲頻數據的標識號通知讀控制器31。標識信息檢測器34指令讀控制器31從記錄媒體25中交替地讀出具有對應于所需的主數據和所需的后期錄音聲頻數據的標識號的名稱的后期錄音聲頻文件25b和主數據文件(AV多路傳輸結果文件25a)。因此，讀控制器31實施了基于交替的時分脈沖信號從記錄媒體25中讀出所需的主數據和所需的后期錄音聲頻數據。將所讀出的主數據從讀控制器31發(fā)送到緩沖器35。在將主數據從緩沖器輸出到多路信號分解器36之前將其存儲在緩沖器35中。多路信號分解器36將主數據分解為視頻數據和聲頻數據。視頻數據從多路信號分解器36發(fā)送到時間標記檢測器43。聲頻數據從多路信號分解器36發(fā)送給信號選擇器37。所讀出的后期錄音聲頻數據從讀控制器31發(fā)送給緩沖器35a。在后期錄音聲頻數據從緩沖器35a輸出到信號選擇器37之前將其存儲在緩沖器35a中。信號選擇器37響應運行模式指定信號從緩沖器35a中選擇后期錄音聲頻數據，并將所選擇的后期錄音聲頻數據傳輸給時間標記檢測器43a。換句話說，信號選擇器37拒絕來自多路信號分解器36的聲頻數據。
時間標記檢測器43檢測在視頻數據中的時序信息(每個PCR、每個視頻PTS和每個視頻DTS)。時間標記檢測器43將所檢測的PCR、所檢測的視頻PTS和所檢測的視頻DTS發(fā)送給時間標記比較器42中。時間標記檢測器43將視頻數據傳輸給PES去包裝置44。時間標記檢測器43a檢測在后期錄音聲頻數據中的時序信息(每個PCR、每個聲頻PTS和每個聲頻DTS)。時間標記檢測器43a將所檢測的PCR、所檢測的聲頻PTS和所檢測的聲頻DTS發(fā)送給時間標記比較器42中。時間標記檢測器43a將后期錄音聲頻數據傳輸給PES去包裝置44a。
PES去包裝置44對視頻數據(PES包序列)進行去包以產生去包結果視頻數據。PES去包裝置44將去包結果視頻數據輸出給視頻解碼器45。PES去包裝置44a對后期錄音聲頻數據(PES包序列)進行去包以產生去包結果聲頻數據。PES去包裝置44a將去包結果聲頻數據輸出給聲頻解碼器45a。視頻解碼器45實施了視頻數據的MPEG解碼以產生解碼結果視頻數據。視頻解碼器45將解碼結果視頻數據存儲在存儲器46中。聲頻解碼器45a實施了聲頻數據的MPEG解碼以產生解碼結果聲頻數據。聲頻解碼器45a將解碼結果聲頻數據存儲在存儲器46a中。
信號發(fā)生器41給時間標記比較器42輸出27兆赫茲的時鐘信號?；?7兆赫茲的時鐘信號，時間標記比較器42產生指示參考時鐘時間的參考時鐘信號。時間標記比較器42將參考時鐘信號的頻率鎖定在由PCR所指示的頻率上。因此，參考時鐘時間由PCR決定。時間標記比較器42將由視頻DTS所表示的時間與參考時鐘時間進行比較以決定視頻DTS時間是否與參考時鐘時間相符合。在視頻DTS時間與參考時鐘時間相符合時，時間標記比較器42指令視頻解碼器45開始對來自具有相關的視頻DTS的PES包的視頻數據進行解碼。時間標記比較器42將由聲頻DTS所表示的時間與參考時鐘時間進行比較以決定聲頻DTS時間是否與參考時鐘時間相符合。在聲頻DTS時間與參考時鐘時間相符合時，時間標記比較器42指令聲頻解碼器45a開始對來自具有相關的聲頻DTS的PES包的聲頻數據進行解碼。
時間標記比較器42將由視頻PTS所表示的時間與參考時鐘時間進行比較以決定視頻PTS時間是否與參考時鐘時間相符合。在視頻PTS時間與參考時鐘時間相符合時，時間標記比較器42指令存儲器46給顯示監(jiān)視器27輸出解碼結果視頻數據以便用于指示。時間標記比較器42將由聲頻PTS所表示的時間與參考時鐘時間進行比較以決定聲頻PTS時間是否與參考時鐘時間相符合。在聲頻PTS時間與參考時鐘時間相符合時，時間標記比較器42啟動存儲器46a給揚聲器28輸出解碼結果聲頻數據以便用于重播或產生聲音。預先設定視頻PTS和聲頻PTS以便能夠同步地重播解碼結果視頻數據和解碼結果聲頻數據(后期錄音聲頻數據)。
下面解釋記錄在信息信號記錄媒體25上的信息的格式。如附圖10所示，記錄媒體25存儲根目錄，在根目錄下放置有名稱為“LIB(庫)”的文件夾。在文件夾“LIB”之下，有許多命名為“SIDE.ifo”(“SIDE0.ifo”，“SIDE1.ifo”，...“SIDEk.ifo”)的文件。文件“SIDE.ifo”帶有與許多內容節(jié)目相關的輔助信息，即聲頻視頻(AV)節(jié)目。
此外，在文件夾“LIB”之下，還有分別具有信息片段“RP0.dat”，“RP1.dat”...“RPn.dat”的文件夾“PR0”，“PR1”，...“PRn”。信息片段“RP0.dat”，“RP1.dat”和“RPn.dat”用于鏈接AV多路傳輸的結果位流。
此外，在文件夾“LIB”之下，還有文件夾“PL0”，“PL1”，...“PLn”以用于放置后期錄音聲頻文件(帶有后期錄音聲頻信息的文件)。例如，在制作并記錄與文件夾“PRO”相關的“m”個后期錄音聲頻文件的情況下，列表信息片段“AF0-1.dat”，“AF1-2.dat”，...“AF0-n.dat”放置在文件夾“PL0”中作為與后期錄音聲頻文件的鏈接的信息。
從上文的描述中可以理解的是，與AV多路傳輸結果文件和后期錄音聲頻文件相關的鏈接信息記錄在記錄媒體25中。基于該鏈接信息可以從記錄媒體25中再現所需的內容信息。
參考附圖11，每個文件“SIDE.ifo”具有分層結構的格式。具體地說，每個文件“SIDE.ifo”具有第一級段“TOTAL_MANAGER_IFO”，它包含第二級段“GENERAL_IFO”和“CNTNT_IFO”。第二級段“GENERAL_IFO”帶有與整個當前的輔助信息相關的參數。
第二級段“GENERAL_IFO”具有如在附圖12中所示的語法結構。具體地說，第二級段“GENERAL_IFO”包括具有語法名稱分別“System_id”、“TMG_IFO_length”、“Num of PR_IFO”、“Numof PL_IFO”、“Start Address of PR_IFO”和“Start Address ofPL_IFO”的信息片段。信息片段“System_id”是標識當前的信息結構的類型的32位信號。信息片段“TMG_IFO_length”是表示整個管理器長度的32位信號。信息片段“Num of PR_IFO”是表示將在下文解釋的節(jié)目信息片段“PR_IFO”的數量的8位信號。信息片段“Num ofPL_IFO”是表示將在下文解釋的后期錄音信息片段“PL_IFO”的數量的8位信號。信息片段“Start Address of PR_IFO”是表示第一節(jié)目信息片段“PR_IFO_0”的開始地址的32位信號。信息片段“StartAddress of PL_IFO”是表示第一后期錄音信息片段“PL_IFO_0”的開始地址的32位信號。
在附圖11中的第二級段“CNTNT_IFO”包含具有分別與內容節(jié)目(或AV多路傳輸結果文件)相關的信息片段的第三級段“PR_IFO_0”，“PR_IFO_1”，...，“PR_IFO_m”。此外，第二級段“CNTNT_IFO”還包含具有分別與內容節(jié)目(或AV多路傳輸結果文件)相關的后期錄音聲頻數據的信息片段的第三級段“PL_IFO_0”，“PL_IFO_1”，...，“PL_IFO_m”。例如，在存在對應于第三級段“PR_IFO_0”的后期錄音聲頻數據的情況下，第三級段“PL_IFO_0”包含具有與后期錄音聲頻文件相關的信息(播放清單信息)的第四級段“PLAY_IFO”。
第三級段“PR_IFO_0”，“PR_IFO_1”，...，“PR_IFO_m”在結構上都類似。下文將僅僅更加詳細地解釋第三級段“PR_IFO_0”。如附圖13所示，第三級段“PR_IFO_0”包含第四級段“PROG_IFO”和“IDX_IFO”。第四級段“PROG_IFO”帶有與內容節(jié)目相關的信息。第四級段“IDX_IFO”包含分別帶有與相關的聲頻視頻節(jié)目的相應的索引相關的信息片段的第五級段IDX_IFO_0”，“IDX_IFO_1”，...，“IDX_IFO_n”。第五級段IDX_IFO_0”，“IDX_IFO_1”，...，“IDX_IFO_n”在結構上都類似。例如，第五級段IDX_IFO_0”具有在其中可以將一部分相關的聲頻視頻節(jié)目寄存為索引信息的第六級段“INDEX_IFO”。
在附圖14中示出了第四級段“PROG_IFO”的語法結構。具體地說，每個第四級段“PROG_IFO”包括分別具有語法名稱為“Size ofPROG_IFO”、“PR number”、“Content type”和“Componenttype”的信息片段。信息片段“Size of PROG_IFO”是表示當前的第四級段“PROG_IFO”的大小的32位信號。信息片段“PR number”是表示分配給相關的聲頻視頻節(jié)目的指定號(標識號)的8位信號。PRnumber是分別對應于不同的聲頻視頻節(jié)目的在“0”-“255”中的變量。信息片段“Content type”是表示相關的聲頻-視頻節(jié)目的類型的8位信號。信息片段“Component type”是表示相關的數據的類型的8位信號，即表示相關的數據是視頻、聲頻或其它的類型。
如前文所述，在存在后期錄音聲頻文件的情況下，提供播放清單信息“PLAY_IFO”。在存在對應于文件夾“PR0”的“m”個后期錄音聲頻文件的情況下，將清單信息片段“AF0-1.dat”，“AF0-2.dat”，...，“AF0-m.dat”放置在文件夾“PL0”中作為與后期錄音聲頻文件鏈接的信息。
播放清單信息“PLAY_IFO”的語法結構如附圖15所示。具體地說，播放清單信息“PLAY_IFO”包括分別具有語法名稱為“PR_number”和“AF_number”的信息片段。信息片段“PR_number”是表示分配給相關的主數據(相關的聲頻視頻節(jié)目)的分配號(標識號)的8位信號。信息片段“AF_number”是表示分配給相關的后期錄音聲頻數據的分配號(標識號)的8位信號。
關于在附圖10的文件夾“PRj”中的“n+1”個AV多路傳輸的結果流“PRj.dat(j＝0，1，...，n)”中的每個，根據用戶的請求可以寄存“m”個后期錄音聲頻數據。在數字“m”等于“0”時，使用AV多路傳輸結果文件但不應用后期錄音聲頻數據。在數字“m”等于或大于“1”時，允許記錄后期錄音聲頻數據。在這種情況下，至少產生并記錄一個后期錄音聲頻文件。此外，再現或傳輸后期錄音聲頻數據。
在附圖13中的索引信息“INDEX_IFO”具有附圖16中所示的語法結構。具體地說，索引信息“INDEX_IFO”包括具有語法名稱分別為“INDEX number”、“Playback Time”、“Start Address”和“End Address”的信息片段。信息片段“INDEX number”是表示分配給相關的索引的序列號的8位信號。信息片段“Playback Time”是表示相關的索引的重播時間的40位信號。信息片段“Start Address”是表示相關的索引的開始點的地址的64位信號。信息片段“EndAddress”是表示相關的索引的結束點的地址的64位信號。
這樣，設計了在附圖10中的輔助信息?；谳o助信息產生文件夾“PR”和“PL”的記錄信息和清單信息片段“AF”。通過參考記錄信息將規(guī)定的AV和聲頻文件記錄在記錄媒體25上。通過參考記錄信息從記錄媒體25中讀出指定的AV和聲頻文件。因此，可以重播伴有所需的聲頻信號的視頻信號同時再現所需的聲頻信號。
記錄媒體25包括例如DVD-RAM、DVD-RW、DVD-R、磁光盤或硬盤。如前文所述，在記錄媒體25上記錄后期錄音目的聲頻數據的過程中，從記錄媒體25中讀出主數據。在每個都對應許多包的周期中分時地交替進行后期錄音目的聲頻數據的記錄和主數據的讀出?？扇〉氖?，后期錄音目的聲頻數據記錄在也記錄主數據的記錄媒體25的表面上。
附圖17所示為記錄在硬盤上的TS的格式，該硬盤構成了記錄媒體25。如附圖17所示，TS由TS單元序列形成。每個TS單元由包構成。每個包由25位的時間標記和188字節(jié)的MPEG的TS包構成。MPEG的TS包與在附圖5中的TS包相同。在AV多路傳輸結果文件25a中的聲頻數據以在后期錄音聲頻文件25b中的聲頻數據(后期錄音聲頻數據)替代的情況下，由于給每個TS包中增加了提供同步的時間標記，因此可以保持在后期錄音聲頻數據和在AV多路傳輸結果文件25a中的視頻數據之間的同步關系。
附圖18所示為信息信號傳輸設備30b。如附圖18所示，傳輸設備30b包括與CPU33E連接的用戶接口32E。用戶可以處理用戶接口32E。CPU33E具有輸入/輸出端口的結合、處理部分、ROM和RAM。CPU 33E根據存儲在ROM和RAM中的控制程序運行?？刂瞥绦虮辉O計成啟動CPU 33E以實施后面所提到的運行步驟。通過處理用戶接口32E，傳輸設備30b的操作可以在包括第一模式和第二模式的不同模式中改變。第一運行模式設計成傳輸主數據(AV多路傳輸結果文件25a)。第二運行模式設計成傳輸后期錄音聲頻數據(后期錄音聲頻文件25b)而不是在主數據中的聲頻信息，同時傳輸在主數據中的視頻信息。在處理用戶接口32E時，從其中將運行模式指定信號輸入到CPU33E中。運行模式指定信號可以從位于距離傳輸設備30b較遠的位置上的信息信號接收設備中傳輸到CPU33E。運行模式指定信號指示第一運行模式和第二運行模式中哪種模式是所需的。CPU33E將運行模式指定信號傳遞給也可以作為包選擇器運行的信號選擇器38。此外，通過處理用戶接口32E可以將標識(ID)信息輸入到CPU33E。從接收設備可以將該標識信息發(fā)送CPU33E。CPU33E將標識信息傳遞給標識信息檢測器34。
在運行模式指定信號指示需要第一運行模式時，即，在需要再現主數據(AV多路傳輸結果文件25a)時，傳輸設備30b如下運行。讀控制器31從信息信號記錄媒體25中讀出主數據即AV多路傳輸的結果數據。將所讀出的主數據從讀控制器31發(fā)送到緩和器35。在將主數據從緩沖器35輸出到信號選擇器38之前將其存儲在緩沖器35中。信號選擇器38響應運行模式指定信號從緩沖器35中選擇主數據，并將該主數據傳輸到緩沖器39。在將主數據從緩沖器39輸出到傳輸線之前將其存儲在緩沖器39中。主數據(AV多路傳輸的結果數據)沿著傳輸線傳播到接收設備。接收設備同步地重播在主數據中的聲頻信息和視頻信息。
在運行模式指定信號指示需要第二運行模式時，即在需要傳輸后期錄音聲頻數據和主數據視頻信息時，傳輸設備30b運行如下。通過處理用戶接口32E將標識所需的主數據的信號和所需的后期錄音聲頻數據輸入到CPU33。標識信息可以從接收設備發(fā)送到CPU33E中。標識信號對應于代表分配給所需的主數據和所需的后期錄音聲頻數據的指定號(標識號)的在附圖15中的信息片段“AR_number”和“PF_number”。CPU33E將標識信號傳遞給標識信息檢測器34。讀控制器31從信息信號記錄媒體25中讀出播放列表信息“PLAY_IFO”。讀控制器31將播放列表信息“PLAY_IFO”發(fā)送給標識信息檢測器34。標識信息檢測器34通過參考播放列表信息“PLAY_IFO”(參見附圖15)響應該標識信號檢測所需的主數據和所需的后期錄音聲頻數據的標識號。標識信息檢測器34將所需的主數據和所需的后期錄音聲頻數據的標識號通知讀控制器31。標識信息檢測器34指令讀控制器31從記錄媒體25中交替地讀出具有對應于所需的主數據和所需的后期錄音聲頻數據的標識號的名稱的后期錄音聲頻文件25b和主數據文件(AV多路傳輸結果文件25a)。因此，讀控制器31實施了基于交替的時分脈沖信號從記錄媒體25中讀出所需的主數據和所需的后期錄音聲頻數據。將所讀出的主數據從讀控制器31發(fā)送到緩沖器35。在將主數據從緩沖器35輸出到信號選擇器38之前將其存儲在緩沖器35中。所讀出的后期錄音聲頻數據從讀控制器31發(fā)送到緩沖器35a。在后期錄音聲頻數據從緩沖器35a輸出到信號選擇器38之前將其存儲在緩沖器35a中。信號選擇器(包選擇器)38響應運行模式指定信號將在主數據中的聲頻數據替換為來自緩沖器35a的后期錄音聲頻數據，由此將原始主數據轉換為新的主數據(新的AV多路傳輸的結果數據)。信號選擇器38一包一包(基于一單元一單元)地實施了聲頻數據替換。新的主數據從信號選擇器38發(fā)送到緩沖器39。在將新的主數據輸出到傳輸線之前將其存儲在緩沖器39中。新的主數據(新的AV多路傳輸的結果數據)沿傳輸線傳播到接收設備。接收設備同時重播在主數據中的聲頻信息和視頻信息。在將原始主數據轉換為新的主數據的過程中，不需要改變每個PCR、每個DTS和每個PTS?？扇〉氖?，信號選擇器38包括計算器。計算器可以由CPU33E形成。對于已經進行了聲頻數據替換的新的主數據包，計算器計算新的CRC(循環(huán)冗余校驗)碼字并將老的CRC碼字替換為新的碼字。
附圖19所示為CPU33E的控制程序段的流程圖。如附圖19所示，第一步驟S11控制讀控制器31從信息信號記錄媒體25中讀出主數據(AV多路傳輸結果文件25a)。
在步驟S11之后的步驟S12確定是否要求以后期錄音聲頻信息替換在所讀出的主數據中的聲頻信息。在要求以后期錄音聲頻信息替換在所讀出的主數據中的聲頻信息時，該程序從步驟S12進行到步驟S13。否則，該程序從步驟S12跳轉步驟S17。
步驟S13控制標識信息檢測器34和讀控制器31以從記錄媒體25中讀出具有對應于指定標識號的名稱的后期錄音聲頻文件25b(后期錄音聲頻數據)。
在步驟S13之后的步驟S14將所讀出的AV多路傳輸結果文件25a和所讀出的后期錄音聲頻文件25b(即所讀出的主數據和所讀出的后期錄音聲頻數據)分為包(單元)。
在步驟S14之后的步驟S15一個包一個包地將在所讀出的主數據中的聲頻數據替換為在重播時序中等效于在前面聲頻數據的所讀出的后期錄音聲頻數據。此后，步驟S15將原始主數據轉換為新的主數據(新的AV多路傳輸結果文件)。
在步驟S15之后的步驟S16計算新的CRC(循環(huán)冗余校驗)碼字并將老的CRC碼字替換為已經進行聲頻數據替換的新的主數據包的新包。因此，步驟S16產生CRC-碼-校正的主數據(CRC-碼-校正的AV多路傳輸結果文件)。在步驟S16之后，程序進行到步驟S17。
步驟S17將通過步驟S11給定的AV多路傳輸結果文件或通過步驟S16給定的AV多路傳輸結果文件傳輸到傳輸線。
在步驟S17之后的步驟S18確定AV多路傳輸結果文件的傳輸是否已經完成。在AV多路傳輸結果文件的傳輸還沒有完成時，該程序從步驟S18返回到步驟S11。在這種情況下，重復步驟S11和后面的步驟。在另一方面，在AV多路傳輸結果文件的傳輸已經完成時，程序從步驟S18退出，然后當前的程序段的執(zhí)行結束。步驟S18還可以響應傳輸停止請求。在這種情況下，一旦接收到傳輸停止請求，在該程序從步驟S18中退出，然后結束當前程序段的執(zhí)行而不管AV多路傳輸結果文件的傳輸是否完成。
如上文所述，符合MPEG系統(tǒng)標準的AV多路傳輸的結果數據記錄在信息信號記錄媒體上或從其中再現。AV多路傳輸的結果數據包含聲頻信息和帶有該聲頻信息的視頻信息。此外，符合MPEG系統(tǒng)標準的后期錄音目的聲頻數據記錄在該記錄媒體或從其中再現。后期錄音目的聲頻數據具有與在AV多路傳輸的結果數據中的視頻信息同步的關系。同步重播在AV多路傳輸的結果數據中的后期錄音目的聲頻數據和視頻信息。可以將AV多路傳輸的結果數據從記錄媒體通過傳輸線朝信息信號接收設備傳輸。此外，可以將在構成新的AV多路傳輸的結果數據的AV多路傳輸的結果數據中的后期錄音目的聲頻數據和視頻信息從記錄媒體通過傳輸線朝接收設備傳輸。
如前文所述，對聲頻信號和視頻信號進行壓縮編碼。將編碼結果數據分為單元塊(包)。給每個單元塊中加入聲頻視頻同步播放的時間標記。所加入的時間標記數據記錄在信息信號記錄媒體中。
對視頻信號和第一聲頻信號進行壓縮編碼并將其多路復用在主數據中，并將該主數據記錄在信息信號記錄媒體中。將第二聲頻信號(即后期錄音目的聲頻信號)壓縮編碼成后期錄音目的聲頻數據。后期錄音目的聲頻數據記錄在記錄媒體上但不與在主數據中的視頻數據進行多路復用。
因此，簡單的信號處理能夠使后期錄音目的聲頻數據記錄在信息信號記錄媒體上。此外，可以將帶有系統(tǒng)的視頻信息的多個后期錄音目的聲頻信號記錄在記錄媒體上。與視頻信息同步地重播每個后期錄音目的聲頻信號。如前文所述，在將第一聲頻信號和視頻信號作為AV多路傳輸結果文件記錄在信息信號記錄媒體上之前對其進行多路復用。在重播的過程中，可以以每個后期錄音目的聲頻信號替換在AV多路傳輸結果文件中的第一聲頻信號。
加入到后期錄音目的聲頻數據的時序信息由基于主數據產生的PCR、DTS和PTS構成。應該指出的是，可以獨立于主數據產生后期錄音目的聲頻數據的PCR、DTS和PTS。
可以將獲得參考時序的信息放置在后期錄音目的聲頻數據中的時序信息的標題中。在這種情況下，根據參考時序信息使后期錄音目的聲頻數據的重播最佳化。
拌有視頻信息的聲頻信息可以由如下的信息替換基于多路復用表示注釋的字符信息、數字信息、不同于視頻信息的圖形信息、與視頻信息的指示區(qū)相關的輔助信息或與視頻信息同步重播的其它信息。
從前述的描述中可以理解的是，關于主數據的產生，假設先前在單元數據中產生與后期錄音目的聲頻數據的類型相關的數據片段，并且后期錄音目的聲頻數據的傳輸速率等于在主數據中的原始聲頻數據的傳輸速率。
如前文所述，將視頻信號壓縮編碼成編碼結果視頻信號。拌有視頻信號的第一聲頻信號被壓縮編碼成第一壓縮編碼結果聲頻信號。編碼結果視頻信號和第一壓縮編碼結果聲頻信號多路復用成多路復用結果信號，將表示解碼時序和重播時序的時序信息加入到該多路復用結果信號中。該多路復用結果信號記錄在信息信號記錄媒體上。將對與視頻信號具有同步關系的第二聲頻信號(后期錄音目的聲頻信號)壓縮編碼成第二壓縮編碼結果聲頻信號，將與視頻信號同步的時序信息加入到該第二壓縮編碼結果聲頻信號中。該第二壓縮編碼結果聲頻信號記錄在記錄媒體上。此后，同步地再現在多路復用結果信號中的第二聲頻信號和視頻信號。第二壓縮編碼結果聲頻信號在時序上等效于第一壓縮編碼結果聲頻信號。因此，在第二聲頻信號的再現的過程中，防止了第二編碼結果聲頻信號的解碼造成麻煩。
將第一多路復用結果信號定義為包含第一聲頻信號和視頻信號的壓縮編碼型式的數據流。將第二多路復用結果信號定義為包含第二聲頻信號(后期錄音目的聲頻信號)和視頻信號的壓縮編碼型式的數據流。第二聲頻信號拌有視頻信號。雖然在實際中不產生第二多路復用結果信號，但可以重播由第二聲頻信號和聲頻信號構成的AV信號。由于第二多路復用結果信號既不產生也不記錄，因此通過記錄第二多路復用結果信號可以防止擦除記錄在信息信號記錄媒體上的第一多路復用結果信號。由于不記錄第二多路復用結果信號，因此通過第二多路復用結果信號可以防止記錄媒體的可用容量的降低。
多個后期錄音目的聲頻信號可以記錄在信息信號記錄媒體上。在重播的過程中，用戶可以從后期錄音目的聲頻信號中選擇一個后期錄音目的聲頻信號。在這種情況下，可以同步重播所選擇的后期錄音目的聲頻信號和拌有該聲頻信號的視頻信號。此外，可以有效地使用記錄媒體的存儲容量。
根據MPEG1標準或MPEG2標準對視頻信號和聲頻信號進行壓縮編碼。根據MPEG系統(tǒng)標準產生AV多路傳輸結果信號。AV多路傳輸結果信號可以包含表示音樂節(jié)目的視頻信息和表示在音樂節(jié)目中的卡拉OK音樂的聲頻信息。在AV多路傳輸結果信號中，通過要與主視頻信息同步重播的第二視頻信息可以替換聲頻信息。
根據MPEG1標準、MPEG2標準和MPEG4標準進行壓縮編碼和系統(tǒng)化(多路復用)。可以基于部分編碼過程或另一編碼過程進行壓縮編碼和系統(tǒng)化(多路復用)，在該編碼過程中實施重播的信號處理，同時將編碼結果信號臨時存儲在預定的記錄區(qū)中。
信息信號記錄媒體25例如包括硬盤或DVD-RAM。記錄媒體25可以是另一種類型的記錄媒體，該記錄媒體具有能夠交替地讀出兩種不同的信息文件的隨機存取性能，并且具有足夠記錄預定量的數字視頻數據的存儲容量。
通過信息信號產生設備10或10a產生的信號記錄在信息信號記錄媒體25上。信息信號再現設備30或30a從記錄媒體25上再現所記錄的信號。通過信息信號傳輸設備30b可以傳輸所再現的信號。一般地說，記錄媒體25與信息信號產生設備10或10a、信息信號再現設備30或30a和信息信號傳輸設備30b連接以使信號能夠在其中直接傳遞?？商鎿Q的是，通過通信裝置比如通信網絡記錄媒體25可以與信息信號產生設備10或10a、信息信號再現設備30或30a和信息信號傳輸設備30b連接。
第二實施例除了下文所描述的改變以外本發(fā)明的第二實施例類似于本發(fā)明的第一實施例。根據本發(fā)明的第一實施例，在產生主數據方面，假設事先在單元數據中產生與后期錄音目的聲頻數據的類型相關的數據片段，并且后期錄音目的聲頻數據的傳輸速率等于在主數據中的原始聲頻數據的傳輸速率。根據本發(fā)明的第二實施例，在主數據的產生方面，基于多路復用事先將在傳輸速率方面等于預期的后期錄音目的聲頻數據的單元數據記錄為啞數據。
第三實施例除了下文所描述的改變以外本發(fā)明的第三實施例類似于本發(fā)明的第一實施例。根據本發(fā)明的第三實施例，在記錄預期的后期錄音目的聲頻數據的情況下，基于多路復用事先將在傳輸速率方面等于預期的后期錄音目的聲頻數據的單元數據記錄為啞數據。在產生實際的后期錄音目的聲頻數據時，以實際的后期錄音目的聲頻數據替換先前記錄的啞數據。在以實際的后期錄音目的聲頻數據替換先前記錄的啞數據的過程中，不需要改變每個PCR、每個DTS和每個PTS。
在實際的后期錄音目的聲頻數據的傳輸速率不等于預期的傳輸速率的情況下，基于多路復用記錄視頻數據和實際的后期錄音目的聲頻數據。在這種情況下，需要更新每個PCR、每個DTS和每個PTS。
實施例所提供的優(yōu)點本發(fā)明的第一、第二和第三實施例提供了如下的優(yōu)點。
將視頻信號、第一聲頻信號和用于視頻和聲頻的同步再現的時序信息多路復用為要記錄的AV多路傳輸結果信號。此外，將與視頻信號同步的第二聲頻信號的壓縮編碼型式作為要記錄的信號輸送。再現側可以再現由視頻信號和拌有視頻信號的第二聲頻信號構成的AV信號，而不給該AV信號輸送包含有視頻信號和第二聲頻信號的壓縮編碼型式的AV多路傳輸結果信號。
AV多路傳輸結果信號是加入了時序信息的包流。此外，第二聲頻信號的壓縮編碼型式是加入了時序信息的包流。因此，時序管理很容易。再現側可以再現由視頻信號和拌有視頻信號的第二聲頻信號構成的AV信號。
將加入了標識信號的多個第二聲頻信號定義為替代信號。在重播的過程中，可以從第二聲頻信號中選擇一個第二聲頻信號，并再現所選擇的第二聲頻信號。
將視頻信號、第一聲頻信號和用于同步再現視頻和聲頻的時序信息多路復用成AV多路傳輸結果信號。第二聲頻信號的壓縮編碼型式與視頻信號具有同步關系。再現AV多路傳輸結果信號和第二聲頻信號的壓縮編碼型式，并從AV多路傳輸結果信號中再現視頻信號。將所再現的視頻信號和所再現的第二聲頻信號的壓縮編碼型式作為再現的彼此同步的輸出信號提供。
從加入了標識信號的第二聲頻信號的壓縮編碼型式中選擇一個型式。所選擇的第二聲頻信號的壓縮編碼型式可以作為與視頻信號具有同步關系的再現的輸出信號提供。
將視頻信號、第一聲頻信號和用于同步再現視頻和聲頻的時序信息多路復用成AV多路傳輸結果信號。第二聲頻信號的壓縮編碼型式與視頻信號具有同步關系。再現AV多路傳輸結果信號和第二聲頻信號的壓縮編碼型式，并從AV多路傳輸結果信號中再現視頻信號。將所再現的視頻信號和所再現的第二聲頻信號的壓縮編碼型式多路復用成新的AV多路傳輸結果信號。通過傳輸線將新的AV多路傳輸結果信號傳輸到再現側。
權利要求
1.一種產生要記錄的信息信號的設備，包括多路傳輸如下信號的裝置1)對視頻信號進行壓縮編碼而得到的壓縮編碼結果視頻信號，2)對與視頻信號具有同步關系的第一聲頻信號進行壓縮編碼而得到的第一壓縮編碼結果聲頻信號，3)與壓縮編碼結果視頻信號和第一壓縮編碼結果聲頻信號之間的同步化相關的參考時鐘信息信號，以及4)基于參考時鐘信息信號并指定獲得聲頻-視頻多路傳輸結果信號的視頻信號的指示時序的指示時序信息信號；在重播的過程中在與參考時鐘信息信號同步的同時產生第二聲頻信號作為替代第一聲頻信號的可以再現的替換重播聲頻信號的裝置；對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號的裝置；將聲音產生時序信息信號加入到第二壓縮編碼結果聲頻信號中以獲得替換重播聲頻信號的裝置，該聲音產生時序信息信號基于參考時鐘信息信號；以及在不與所述壓縮編碼結果視頻信號一起多路傳輸的情況下將所述第二壓縮編碼結果聲頻信號記錄在記錄介質上的裝置。
2.如權利要求1所述的設備，進一步包括將該替換重播聲頻信號劃分為每個都具有預定的數據大小的包的裝置，以及將參考時鐘信息信號和聲音產生時序信息信號與每個包一起多路傳輸的裝置。
3.如權利要求1所述的設備，其中該替換重播聲頻信號包括分別通過對第三聲頻信號進行壓縮編碼得到的多個輔助替換重播聲頻信號，該設備還包括將不同的標識信號分別加入到輔助替換重播聲頻信號中的裝置。
全文摘要
本發(fā)明涉及產生要記錄的信息信號的設備，包括多路傳輸如下信號的裝置壓縮編碼結果視頻信號，第一壓縮編碼結果聲頻信號，參考時鐘信息信號，以及指示時序信息信號。在重播的過程中在與參考時鐘信號同步的同時產生第二聲頻信號作為可以再現的替代第一聲頻信號的替換重播聲頻信號的裝置；對第二聲頻信號進行壓縮編碼以獲得第二壓縮編碼結果聲頻信號的裝置；將聲音產生時序信息信號加入到第二壓縮編碼結果聲頻信號中以獲得該替換重播聲頻信號的裝置，該聲音產生時序信息信號基于參考時鐘信息信號；在不與所述壓縮編碼結果視頻信號一起多路傳輸的情況下將第二壓縮編碼結果聲頻信號記錄在記錄介質上的裝置。
文檔編號G11B20/10GK1829331SQ20061005988
公開日2006年9月6日 申請日期2002年12月11日 優(yōu)先權日2001年12月26日
發(fā)明者菅原隆幸 申請人:日本勝利株式會社