專利名稱：影像聲音變換裝置及影像聲音變換方法
技術(shù)領(lǐng)域：
本發(fā)明涉及影像聲音變換裝置及其方法，接收將第一編碼影像數(shù)據(jù)及第一編碼聲音數(shù)據(jù)進(jìn)行復(fù)用得到的第一復(fù)用數(shù)據(jù)作為輸入，并快速地進(jìn)行速率變換錄制。
背景技術(shù)：
在過(guò)去的HDD (Hard Disk Drive :硬盤驅(qū)動(dòng))/DVD (Digital VersatileDisc :數(shù)字通用盤)錄制器等進(jìn)行通常的記錄再現(xiàn)的記錄再現(xiàn)裝置中，存在具有速率變換錄制功能的裝置，該功能用于進(jìn)行將記錄在HDD中的尺寸大于DVD的記錄容量的影像聲音數(shù)據(jù)變換為能夠收納在DVD中的尺寸的速率變換，并記錄在DVD中。
通常，對(duì)被記錄在HDD等中的按照MPEG (Moving Picture ExpertsGroup :動(dòng)態(tài)圖像專家組)等被壓縮的影像聲音數(shù)據(jù)進(jìn)行解碼，并進(jìn)行已解碼的影像聲音數(shù)據(jù)的顯示控制，同時(shí)進(jìn)行已解碼的影像聲音數(shù)據(jù)的編碼并記錄在DVD等中，由此實(shí)現(xiàn)速率變換錄制。但是，在上述控制中，解碼及編碼是與電視機(jī)的輸出同步地進(jìn)行速率變換錄制，因而需要與顯示時(shí)間相同的復(fù)制時(shí)間。作為解決這種情況并實(shí)現(xiàn)快速的速率變換錄制的方法，例如有專利文獻(xiàn)I記載的與影像聲音數(shù)據(jù)相關(guān)的速率變換錄制方法。在上述專利文獻(xiàn)I記載的速率變換錄制中，首先在影像聲音解碼部中開(kāi)始規(guī)定單位的影像聲音數(shù)據(jù)的解碼。在解碼完成后，從影像聲音解碼部向影像聲音編碼部發(fā)送解碼完成通知。在接收到該完成通知的影像聲音編碼部中馬上開(kāi)始已被解碼的影像聲音數(shù)據(jù)的編碼(在編解碼的處理中，按照比變換前的壓縮率高的壓縮率進(jìn)行影像聲音數(shù)據(jù)的再壓縮)。在編碼完成后，從影像聲音編碼部向影像聲音解碼部發(fā)送編碼完成通知。在接收到該完成通知的影像聲音解碼部中馬上開(kāi)始下一個(gè)影像聲音數(shù)據(jù)的解碼。通過(guò)進(jìn)行這種控制，影像聲音解碼部及影像聲音編碼部的處理不再需要與電視機(jī)的輸出同步，因而能夠縮短速率變換錄制的處理時(shí)間?，F(xiàn)有技術(shù)文獻(xiàn)專利文獻(xiàn)專利文獻(xiàn)1:國(guó)際公開(kāi)第08/023763號(hào)公報(bào)發(fā)明概要發(fā)明要解決的問(wèn)題但是，在上述專利文獻(xiàn)I記載的速率變換技術(shù)中，通過(guò)逐次處理來(lái)切換影像聲音解碼部和影像聲音編碼部，并進(jìn)行速率變換錄制。由此，在影像聲音解碼部及影像聲音編碼部中分別產(chǎn)生停止期間，因而導(dǎo)致處理的效率降低，速率變換錄制的處理時(shí)間延長(zhǎng)。

發(fā)明內(nèi)容
為了解決上述問(wèn)題，本發(fā)明的目的在于提供一種影像聲音變換裝置及方法，在進(jìn)行與影像聲音數(shù)據(jù)相關(guān)的速率變換錄制時(shí)，影像聲音解碼部及影像聲音編碼部高效率地并行動(dòng)作，由此能夠縮短處理時(shí)間。用于解決問(wèn)題的手段為了達(dá)到上述目的，本發(fā)明的某個(gè)方面涉及的影像聲音變換裝置從將第一編碼影像數(shù)據(jù)及第一編碼聲音數(shù)據(jù)進(jìn)行復(fù)用得到的第一復(fù)用數(shù)據(jù)，生成將第二編碼影像數(shù)據(jù)及第二編碼聲音數(shù)據(jù)進(jìn)行復(fù)用得到的第二復(fù)用數(shù)據(jù)，該影像聲音變換裝置具有分離部，從第一復(fù)用數(shù)據(jù)復(fù)用分離出第一編碼影像數(shù)據(jù)及第一編碼聲音數(shù)據(jù)；影像解碼部，對(duì)由所述分離部復(fù)用分離出來(lái)的第一編碼影像數(shù)據(jù)進(jìn)行解碼，由此生成影像數(shù)據(jù)；聲音解碼部，對(duì)由所述分離部復(fù)用分離出來(lái)的第一編碼聲音數(shù)據(jù)進(jìn)行解碼，由此生成聲音數(shù)據(jù)；影像編碼部，對(duì)由所述影像解碼部生成的影像數(shù)據(jù)進(jìn)行編碼，由此生成第二編碼影像數(shù)據(jù)；聲音編碼部，對(duì)由所述聲音解碼部生成的聲音數(shù)據(jù)進(jìn)行編碼，由此生成第二編碼聲音數(shù)據(jù)；以及復(fù)用部，進(jìn)行由所述影像編碼部生成的第二編碼影像數(shù)據(jù)和由所述聲音編碼部生成的第二編碼聲音數(shù)據(jù)的復(fù)用，由此生成第二復(fù)用數(shù)據(jù)，所述分離部根據(jù)由所述影像解碼部及所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，控制由所述分離部進(jìn)行的復(fù)用分離的停止及重啟，所述影像解碼部根據(jù)由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r及由所述 影像編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，控制由所述影像解碼部進(jìn)行的解碼的停止及重啟，所述聲音解碼部根據(jù)由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r及由所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，控制由所述聲音解碼部進(jìn)行的解碼的停止及重啟，所述影像編碼部根據(jù)由所述影像解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r及由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，控制由所述影像編碼部進(jìn)行的編碼的停止及重啟，所述聲音編碼部根據(jù)由所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r及由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，控制由所述聲音編碼部進(jìn)行的編碼的停止及重啟，所述復(fù)用部根據(jù)由所述影像編碼部及所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，控制由所述復(fù)用部進(jìn)行的復(fù)用的停止及重啟。根據(jù)這種結(jié)構(gòu)，各個(gè)處理部根據(jù)其前后處理部的處理的進(jìn)展?fàn)顩r來(lái)控制自身的處理的停止及重啟，以便吸收分離部、影像解碼部、聲音解碼部、影像編碼部、聲音編碼部及復(fù)用部的處理速度的差。由此，分離部、影像解碼部、聲音解碼部、影像編碼部、聲音編碼部及復(fù)用部以最佳的處理速度進(jìn)行動(dòng)作，由此能夠進(jìn)行快速的速率變換錄制。另外，也可以是，所述分離部還將附加在所述第一復(fù)用數(shù)據(jù)中的時(shí)刻信息通知給所述復(fù)用部，所述復(fù)用部使用由所述分離部通知的所述時(shí)刻信息，進(jìn)行第二編碼影像數(shù)據(jù)和第二編碼聲音數(shù)據(jù)的復(fù)用，生成所述第二復(fù)用數(shù)據(jù)。另外，也可以是，所述分離部通過(guò)監(jiān)視在將由所述分離部復(fù)用分離出來(lái)的第一編碼影像數(shù)據(jù)從所述分離部向所述影像解碼部傳送時(shí)臨時(shí)存儲(chǔ)該第一編碼影像數(shù)據(jù)的第一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將由所述分離部復(fù)用分離出來(lái)的第一編碼聲音數(shù)據(jù)從所述分離部向所述聲音解碼部傳送時(shí)臨時(shí)存儲(chǔ)該第一編碼聲音數(shù)據(jù)的第二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，所述影像解碼部通過(guò)監(jiān)視所述第一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述影像解碼部生成的影像數(shù)據(jù)從所述影像解碼部向所述影像編碼部傳送時(shí)臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，所述聲音解碼部通過(guò)監(jiān)視所述第二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述聲音解碼部生成的聲音數(shù)據(jù)從所述聲音解碼部向所述聲音編碼部傳送時(shí)臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，所述影像編碼部通過(guò)監(jiān)視所述第三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述影像編碼部生成的第二編碼影像數(shù)據(jù)從所述影像編碼部 向所述復(fù)用部傳送時(shí)臨時(shí)存儲(chǔ)該第二編碼影像數(shù)據(jù)的第五中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，所述聲音編碼部通過(guò)監(jiān)視所述第四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述聲音編碼部生成的第二編碼聲音數(shù)據(jù)從所述聲音編碼部向所述復(fù)用部傳送時(shí)臨時(shí)存儲(chǔ)該第二編碼聲音數(shù)據(jù)的第六中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，所述復(fù)用部通過(guò)監(jiān)視所述第五中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視所述第六中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r。另外，也可以是，上述的影像聲音變換裝置還具有同步控制部，用于調(diào)整將所述影像解碼部生成的影像數(shù)據(jù)向所述影像編碼部傳送的定時(shí)、和將所述聲音解碼部生成的聲音數(shù)據(jù)向所述聲音編碼部傳送的定時(shí)，所述分離部還將附加在所述第一復(fù)用數(shù)據(jù)中的時(shí)刻信息通知所述同步控制部，所述時(shí)刻信息包括與影像數(shù)據(jù)的輸出相關(guān)的影像輸出時(shí)刻信息和與聲音數(shù)據(jù)的輸出相關(guān)的聲音輸出時(shí)刻信息，所述同步控制部響應(yīng)與系統(tǒng)基準(zhǔn)時(shí)間成比例地合計(jì)的基準(zhǔn)時(shí)間達(dá)到了所述影像輸出時(shí)刻信息這一情況，進(jìn)行所述影像解碼部生成的影像數(shù)據(jù)的傳送，并且響應(yīng)與系統(tǒng)基準(zhǔn)時(shí)間成比例地合計(jì)的基準(zhǔn)時(shí)間達(dá)到了所述聲音輸出時(shí)刻信息這一情況，進(jìn)行所述聲音解碼部生成的聲音數(shù)據(jù)的傳送，由此進(jìn)行影像數(shù)據(jù)和聲音數(shù)據(jù)的同步控制，所述影像解碼部根據(jù)由所述影像編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r、即由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制由所述影像解碼部進(jìn)行的解碼的停止及重啟，所述聲音解碼部根據(jù)由所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r、即由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制由所述聲音解碼部進(jìn)行的解碼的停止及重啟，所述影像編碼部進(jìn)行所述影像解碼部生成的影像數(shù)據(jù)的編碼、即進(jìn)行通過(guò)所述同步控制部而同步的影像數(shù)據(jù)的編碼，并根據(jù)由所述影像解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r、即由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制編碼的停止及重啟，所述聲音編碼部進(jìn)行所述聲音解碼部生成的聲音數(shù)據(jù)的編碼、即進(jìn)行通過(guò)所述同步控制部而同步的聲音數(shù)據(jù)的編碼，并根據(jù)由所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r、即由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制編碼的停止及重啟。根據(jù)這種結(jié)構(gòu)，同步控制部進(jìn)行影像數(shù)據(jù)和聲音數(shù)據(jù)的同步控制。由此，分離部、影像解碼部、聲音解碼部、影像編碼部、聲音編碼部及復(fù)用部以最佳的處理速度進(jìn)行動(dòng)作，由此能夠進(jìn)行快速的速率變換錄制。另外，也可以是，所述分離部通過(guò)監(jiān)視在將由所述分離部復(fù)用分離出來(lái)的第一編碼影像數(shù)據(jù)從所述分離部向所述影像解碼部傳送時(shí)臨時(shí)存儲(chǔ)該第一編碼影像數(shù)據(jù)的第七中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將由所述分離部復(fù)用分離出來(lái)的第一編碼聲音數(shù)據(jù)從所述分離部向所述聲音解碼部傳送時(shí)臨時(shí)存儲(chǔ)該第一編碼聲音數(shù)據(jù)的第八中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，所述影像解碼部通過(guò)監(jiān)視所述第七中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述影像解碼部生成的影像數(shù)據(jù)從所述影像解碼部向所述同步控制部傳送時(shí)臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第九中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，所述聲音解碼部通過(guò)監(jiān)視所述第八中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述聲音解碼部生成的聲音數(shù)據(jù)從所述聲音解碼部向所述同步控制部傳送時(shí)臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，所述影像編碼部通過(guò)監(jiān)視在將由所述同步控制部實(shí)施同步控制的影像數(shù)據(jù)從所述同步控制部向所述影像編碼部傳送時(shí)臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第十一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述影像編碼部生成的第二編碼影像數(shù)據(jù)從所述影像編碼部向所述復(fù)用部傳送時(shí)臨時(shí)存儲(chǔ)該第二編碼影像數(shù)據(jù)的第十三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，所述聲音編碼部通過(guò)監(jiān)視在將由所述同步控制部實(shí)施同步控制的聲音數(shù)據(jù)從所述同步控制部向所述聲音編碼部傳送時(shí)臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述聲音編碼部生成的第二編碼聲音數(shù)據(jù)從所述聲音編碼部向所述復(fù)用部傳送時(shí)臨時(shí)存 儲(chǔ)該第二編碼聲音數(shù)據(jù)的第十四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，所述復(fù)用部通過(guò)監(jiān)視所述第十三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視所述第十四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r。另外，也可以是，所述同步控制部以N倍速度進(jìn)行同步控制，所述N是所述分離部、所述影像解碼部、所述聲音解碼部、所述影像編碼部、所述聲音編碼部及所述復(fù)用部能夠動(dòng)作的速率變換錄制的變換速度的倍速值的最小值。另外，也可以是，上述的影像聲音變換裝置還具有延遲控制部，向所述同步控制部進(jìn)行延遲的控制通知；第一延遲檢測(cè)部，監(jiān)視由所述影像解碼部進(jìn)行的解碼相對(duì)于由所述同步控制部進(jìn)行的同步控制的延遲，并將延遲狀況通知給所述延遲控制部；第二延遲檢測(cè)部，監(jiān)視由所述聲音解碼部進(jìn)行的解碼相對(duì)于由所述同步控制部進(jìn)行的同步控制的延遲，并將延遲狀況通知給所述延遲控制部；第三延遲檢測(cè)部，監(jiān)視由所述影像編碼部進(jìn)行的編碼相對(duì)于由所述同步控制部進(jìn)行的同步控制的延遲，并將延遲狀況通知給所述延遲控制部；以及第四延遲檢測(cè)部，監(jiān)視由所述聲音編碼部進(jìn)行的編碼相對(duì)于由所述同步控制部進(jìn)行的同步控制的延遲，并將延遲狀況通知給所述延遲控制部，所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部均是如果檢測(cè)到延遲，則向所述延遲控制部進(jìn)行延遲通知，如果檢測(cè)到延遲的消除，則向所述延遲控制部進(jìn)行重啟通知，所述延遲控制部在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到延遲通知時(shí)，作為延遲的控制通知向所述同步控制部進(jìn)行同步控制的停止通知，在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到重啟通知時(shí)，作為延遲的控制通知向所述同步控制部進(jìn)行同步控制的重啟通知。根據(jù)這種結(jié)構(gòu)，各個(gè)延遲檢測(cè)部監(jiān)視在各個(gè)處理部中進(jìn)行的處理的延遲，根據(jù)該監(jiān)視的結(jié)果來(lái)進(jìn)行同步控制部的處理。由此，分離部、影像解碼部、聲音解碼部、影像編碼部、聲音編碼部及復(fù)用部以最佳的處理速度進(jìn)行動(dòng)作，由此能夠進(jìn)行快速的速率變換錄制。另外，也可以是，所述第一延遲檢測(cè)部根據(jù)在將所述影像解碼部生成的影像數(shù)據(jù)從所述影像解碼部向所述同步控制部傳送時(shí)臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第九中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)由所述影像解碼部進(jìn)行的解碼的延遲，所述第二延遲檢測(cè)部根據(jù)在將所述聲音解碼部生成的聲音數(shù)據(jù)從所述聲音解碼部向所述同步控制部傳送時(shí)臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)由所述聲音解碼部進(jìn)行的解碼的延遲，所述第三延遲檢測(cè)部根據(jù)在將所述同步控制部實(shí)施了同步控制的影像數(shù)據(jù)從所述同步控制部向所述影像編碼部傳送時(shí)臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第十一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)由所述影像編碼部進(jìn)行的編碼的延遲，所述第四延遲檢測(cè)部根據(jù)在將所述同步控制部實(shí)施了同步控制的聲音數(shù)據(jù)從所述同步控制部向所述聲音編碼部傳送時(shí)臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)由所述聲音編碼部進(jìn)行的編碼的延遲。
另外，也可以是，所述第一延遲檢測(cè)部通過(guò)監(jiān)視所述影像解碼部生成的影像數(shù)據(jù)的幀數(shù)和所述同步控制部進(jìn)行了同步控制的影像數(shù)據(jù)的幀數(shù)，檢測(cè)由所述影像解碼部進(jìn)行的解碼的延遲，所述第二延遲檢測(cè)部通過(guò)監(jiān)視所述聲音解碼部生成的聲音數(shù)據(jù)的幀數(shù)和所述同步控制部進(jìn)行了同步控制的聲音數(shù)據(jù)的幀數(shù)，檢測(cè)由所述聲音解碼部進(jìn)行的解碼的延遲，所述第三延遲檢測(cè)部通過(guò)監(jiān)視所述同步控制部進(jìn)行了同步控制的影像數(shù)據(jù)的幀數(shù)和所述影像編碼部生成的第二編碼影像數(shù)據(jù)的幀數(shù)，檢測(cè)由所述影像編碼部進(jìn)行的編碼的延遲，所述第四延遲檢測(cè)部通過(guò)監(jiān)視所述同步控制部進(jìn)行了同步控制的聲音數(shù)據(jù)的幀數(shù)和所述聲音編碼部生成的第二編碼聲音數(shù)據(jù)的幀數(shù)，檢測(cè)由所述聲音編碼部進(jìn)行的編碼的延遲。另外，也可以是，所述延遲控制部在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到延遲通知時(shí)，將同步控制的停止信號(hào)通知給所述同步控制部，在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到重啟通知時(shí)，將同步控制的重啟信號(hào)通知所述同步控制部，所述同步控制部在從所述延遲控制部接收到停止信號(hào)時(shí)，保持同步控制的狀態(tài)但停止同步控制，在從所述延遲控制部接收到重啟信號(hào)時(shí)，在所保持的停止時(shí)的狀態(tài)下重啟同步控制。另外，也可以是，所述同步控制部以N倍速度進(jìn)行同步控制，所述N是所述分離部、所述影像解碼部、所述聲音解碼部、所述影像編碼部、所述聲音編碼部及所述復(fù)用部能夠動(dòng)作的速率變換錄制的變換速度的倍速值的最小值，所述延遲控制部在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到延遲通知時(shí)，將在同步控制中使用的所述N的切換信號(hào)通知給所述同步控制部，在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到重啟通知時(shí)，將同步控制的重啟信號(hào)通知所述同步控制部，所述同步控制部在從所述延遲控制部接收到切換信號(hào)時(shí)，使用減去了規(guī)定的值后的所述N作為同步控制的倍速值，在從所述延遲控制部接收到重啟信號(hào)時(shí)，使用所述N作為同步控制的倍速值。另外，也可以是，上述的影像聲音變換裝置還具有向所述同步控制部進(jìn)行所述N的通知的倍速通知部。
另外，也可以是，所述倍速通知部根據(jù)來(lái)自外部的指示，選擇所通知的所述N。另外，也可以是，上述的影像聲音變換裝置還具有將與動(dòng)作設(shè)定對(duì)應(yīng)的所述N通知給所述倍速通知部的動(dòng)作模式判定部，所述動(dòng)作設(shè)定將影響到所述分離部的復(fù)用分離、所述影像解碼部的解碼、所述聲音解碼部的解碼、所述影像編碼部的編碼、所述聲音編碼部的編碼、或者所述復(fù)用部的復(fù)用，所述倍速通知部將由所述動(dòng)作模式判定部通知的所述N通知給所述同步控制部。根據(jù)這種結(jié)構(gòu)，通過(guò)選擇分離部、影像解碼部、聲音解碼部、影像編碼部、聲音編碼部及復(fù)用部進(jìn)行最佳動(dòng)作的N值，能夠進(jìn)行最佳的速率變換錄制。因此，影像解碼部、聲音解碼部、影像編碼部及聲音編碼部能夠?qū)Ω弋?huà)質(zhì)化、高音質(zhì)化的處理分配時(shí)間，能夠生成高質(zhì)量的第二復(fù)用數(shù)據(jù)。另外，也可以是，上述的影像聲音變換裝置還具有倍速測(cè)定部，在速率變換錄制開(kāi)始前進(jìn)行所述N的測(cè)定，并將測(cè)定到的所述N通知給所述倍速通知部，所述倍速通知部將由所述倍速測(cè)定部通知的所述N通知給所述同步控制部。根據(jù)這種結(jié)構(gòu)，不需事前確定每種動(dòng)作模式的最佳的N值，就能夠以分離部、影像解碼部、聲音解碼部、影像編碼部、聲音編碼部及復(fù)用部進(jìn)行最佳動(dòng)作的N值進(jìn)行速率變換錄制。另外，也可以是，上述的影像聲音變換裝置還具有動(dòng)作模式判定部，判定與動(dòng)作設(shè)定對(duì)應(yīng)的動(dòng)作模式，所述動(dòng)作設(shè)定將影響到所述分離部的復(fù)用分離、所述影像解碼部的解碼、所述聲音解碼部的解碼、所述影像編碼部的編碼、所述聲音編碼部的編碼、或者所述復(fù)用部的復(fù)用；倍速測(cè)定部，在速率變換錄制開(kāi)始前進(jìn)行所述N的測(cè)定；以及倍速記錄存儲(chǔ)器，記錄所測(cè)定到的所述N，在與動(dòng)作模式對(duì)應(yīng)的所述N被記錄在所述倍速記錄存儲(chǔ)器中的情況下，所述動(dòng)作模式判定部將所記錄的所述N通知給所述倍速通知部，在與動(dòng)作模式對(duì)應(yīng)的所述N沒(méi)有記錄在所述倍速記錄存儲(chǔ)器中的情況下，所述動(dòng)作模式判定部向所述倍速測(cè)定部進(jìn)行啟動(dòng)通知，所述倍速測(cè)定部按照每種動(dòng)作模式來(lái)測(cè)定最佳的所述N，將每種動(dòng)作模式的所述N記錄在所述倍速記錄存儲(chǔ)器中，并將所述N通知給所述倍速通知部。根據(jù)這種結(jié)構(gòu)，不需事前確定每種動(dòng)作模式的最佳的N值，就能夠以分離部、影像解碼部、聲音解碼部、影像編碼部、聲音編碼部及復(fù)用部進(jìn)行最佳動(dòng)作的N值進(jìn)行速率變換錄制。并且，在以相同的動(dòng)作模式進(jìn)行動(dòng)作的情況下，能夠縮短截止到開(kāi)始速率變換錄制的時(shí)間。另外，也可以是，上述的影像聲音變換裝置還具有倍速通知部，在進(jìn)行速率變換錄制的過(guò)程中切換進(jìn)行同步控制的速度的倍率即N，并通知給所述同步控制部。另外，也可以是，上述的影像聲音變換裝置還具有倍速測(cè)定部，當(dāng)在規(guī)定的期間中基于所述延遲控制部的同步控制的定時(shí)調(diào)整的發(fā)生次數(shù)多于規(guī)定次數(shù)的情況下，所述倍速測(cè)定部將從所述N減去規(guī)定的值得到的值作為所述N，并通知給所述倍速通知部，在沒(méi)有發(fā)生同步控制的定時(shí)調(diào)整的情況下，所述倍速測(cè)定部將向所述N加上規(guī)定的值得到的值作為所述N，并通知給所述倍速通知部，所述延遲控制部通知所述倍速測(cè)定部發(fā)生了同步控制的定時(shí)調(diào)整，所述倍速通知部將由所述倍速測(cè)定部通知的所述N通知給所述同步控制部。根據(jù)這種結(jié)構(gòu)，即使是在動(dòng) 作模式被切換的情況下，也能夠以分離部、影像解碼部、聲音解碼部、影像編碼部、聲音編碼部及復(fù)用部進(jìn)行最佳動(dòng)作的N值進(jìn)行速率變換錄制。另外，也能夠結(jié)合被輸入分離部的第一復(fù)用數(shù)據(jù)，以分離部、影像解碼部、聲音解碼部、影像編碼部、聲音編碼部及復(fù)用部進(jìn)行最佳動(dòng)作的N值進(jìn)行速率變換錄制。另外，也可以是，上述的影像聲音變換裝置還具有根據(jù)所述N進(jìn)行動(dòng)作設(shè)定的倍速判定部，所述動(dòng)作設(shè)定將影響到所述分離部的復(fù)用分離、所述影像解碼部的解碼、所述聲音解碼部的解碼、所述影像編碼部的編碼、所述聲音編碼部的編碼、或者所述復(fù)用部的復(fù)用。另外，本發(fā)明不僅能夠?qū)崿F(xiàn)為具有這種特征性的處理部的影像聲音變換裝置，而且也能夠?qū)崿F(xiàn)為將影像聲音變換裝置所包含的特征性的處理部執(zhí)行的處理作為步驟的影像聲音變換方法。并且，也能夠?qū)崿F(xiàn)為使計(jì)算機(jī)執(zhí)行影像聲音變換方法所包含的特征性步驟的程序。并且,這種程序當(dāng)然能夠通過(guò)⑶一 R0M(Compact — Disc — Read Only Memory)等計(jì)算機(jī)可讀的非易失性記錄介質(zhì)或因特網(wǎng)等通信網(wǎng)絡(luò)進(jìn)行流通。發(fā)明效果 根據(jù)本發(fā)明，通過(guò)進(jìn)行調(diào)整控制，所述分離部、所述影像解碼部、所述聲音解碼部、所述影像編碼部、所述聲音編碼部及所述復(fù)用部能夠以最佳的處理速度進(jìn)行動(dòng)作，由此能夠進(jìn)行快速的速率變換錄制，所述調(diào)整控制用于吸收所述分離部、所述影像解碼部、所述聲音解碼部、所述影像編碼部、所述聲音編碼部及所述復(fù)用部的處理速度的差。


圖1是表示實(shí)施方式I的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。圖2是表示實(shí)施方式2的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。圖3是實(shí)施方式2的同步控制的定時(shí)圖。圖4是實(shí)施方式2的基于同步定時(shí)的基準(zhǔn)時(shí)間STC’和VPTS及APTS的關(guān)系圖。圖5是表示實(shí)施方式3的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。圖6是實(shí)施方式3的基于停止及重啟的延遲控制的定時(shí)圖。圖7是實(shí)施方式3的基于N值調(diào)整的延遲控制的定時(shí)圖。圖8是實(shí)施方式3的聲音數(shù)據(jù)沒(méi)有被供給所述第十中間緩沖器的模式的圖。圖9是表示實(shí)施方式4的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。圖10是表不實(shí)施方式4的倍速信息表的圖。圖11是表示實(shí)施方式5的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。圖12是表示實(shí)施方式5的倍速測(cè)定控制的動(dòng)作的流程圖。圖13是表示實(shí)施方式6的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。圖14是表示實(shí)施方式6的倍速確定控制的動(dòng)作的流程圖。圖15是表示實(shí)施方式7的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。圖16是實(shí)施方式7的倍速切換控制的定時(shí)圖。圖17是表示實(shí)施方式7的倍速切換控制的動(dòng)作的流程圖。圖18是表示實(shí)施方式8的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。圖19是表不實(shí)施方式8的倍速信息表的圖。
具體實(shí)施方式
下面，參照

用于實(shí)施本發(fā)明的方式。(實(shí)施方式I)圖1是表示本發(fā)明的實(shí)施方式I的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。在實(shí)施方式I中，HDD001和DVD002是記錄單元，在HDD001中記錄有例如電視廣播的按照MPEG等被壓縮的第一復(fù)用數(shù)據(jù)。DVD002用于記錄速率變換錄制后的第二復(fù)用數(shù)據(jù)。另外，記錄單元也可以是HDD、BD> SD卡等記錄介質(zhì)。影像聲音變換裝置由分離部101、影像解碼部102、聲音解碼部103、影像編碼部104、聲音編碼部105及復(fù)用部106構(gòu)成。并且，分離部101具有將時(shí)刻信息通知復(fù)用部106的功能(SIG201)，復(fù)用部106具有利用時(shí)刻信息進(jìn)行影像數(shù)據(jù)與聲音數(shù)據(jù)的同步控制的功能。下面，說(shuō)明這些各個(gè)單元和信號(hào)的流程。
分離部101進(jìn)行被記錄在HDD001中的第一復(fù)用數(shù)據(jù)的復(fù)用分離，并分離為按照MPEG等被實(shí)施編碼的第一編碼影像數(shù)據(jù)和按照AC — 3 (AudioCode number3)等被實(shí)施編碼的第一編碼聲音數(shù)據(jù)，將第一編碼影像數(shù)據(jù)存儲(chǔ)在第一中間緩沖器301中，將第一編碼聲音數(shù)據(jù)存儲(chǔ)在第二中間緩沖器302中。并且，分離部101將針對(duì)被附加在第一復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)和聲音數(shù)據(jù)的輸出時(shí)刻信息(PTS)和解碼時(shí)刻信息(DTS)、系統(tǒng)時(shí)刻基準(zhǔn)信息(SCR)、以及程序時(shí)刻基準(zhǔn)信息(PCR)等時(shí)刻信息通知復(fù)用部106 (SIG201)。影像解碼部102對(duì)被存儲(chǔ)在第一中間緩沖器301中的第一編碼影像數(shù)據(jù)進(jìn)行解碼處理，將進(jìn)行解碼得到的影像數(shù)據(jù)存儲(chǔ)在第三中間緩沖器303中。聲音解碼部103對(duì)被存儲(chǔ)在第二中間緩沖器302中的第一編碼聲音數(shù)據(jù)進(jìn)行解碼處理，將進(jìn)行解碼得到的聲音數(shù)據(jù)存儲(chǔ)在第四中間緩沖器304中。影像編碼部104對(duì)被存儲(chǔ)在第三中間緩沖器303中的影像數(shù)據(jù)進(jìn)行編碼處理使成為MPEG等的壓縮數(shù)據(jù)，將進(jìn)行編碼得到的第二編碼影像數(shù)據(jù)存儲(chǔ)在第五中間緩沖器305中。此時(shí)，影像編碼部104也可以在對(duì)影像解碼部102進(jìn)行解碼得到的影像數(shù)據(jù)另外實(shí)施高畫(huà)質(zhì)化或者析像度變換等影像處理后，進(jìn)行編碼處理。聲音編碼部105對(duì)被存儲(chǔ)在第四中間緩沖器304中的聲音數(shù)據(jù)進(jìn)行編碼處理使成為規(guī)定的壓縮數(shù)據(jù)，將進(jìn)行編碼得到的第二編碼聲音數(shù)據(jù)存儲(chǔ)在第六中間緩沖器306中。此時(shí)，聲音編碼部105也可以在對(duì)聲音解碼部103進(jìn)行解碼得到的聲音數(shù)據(jù)另外實(shí)施高畫(huà)質(zhì)化等聲音處理后，進(jìn)行編碼處理。在影像編碼部104和聲音編碼部105的編碼處理中，以與記錄在HDD001中時(shí)的壓縮率不同的壓縮率對(duì)數(shù)據(jù)進(jìn)行再壓縮(速率變換)。進(jìn)行再壓縮的方法例如有在現(xiàn)有示例中說(shuō)明的方法，也能夠應(yīng)用于本實(shí)施方式。復(fù)用部106使用由分離部101通知的時(shí)刻信息，將被存儲(chǔ)在第五中間緩沖器305中的第二編碼影像數(shù)據(jù)和被存儲(chǔ)在第六中間緩沖器306中的第二編碼聲音數(shù)據(jù)，分別配置成為在第一復(fù)用數(shù)據(jù)中的第一編碼影像數(shù)據(jù)和第一編碼聲音數(shù)據(jù)之間時(shí)間軸上的關(guān)系是相同的，由此生成第二復(fù)用數(shù)據(jù)。通過(guò)這樣控制，在進(jìn)行第二編碼影像數(shù)據(jù)和第二編碼聲音數(shù)據(jù)的同步控制并進(jìn)行復(fù)用后，將第二復(fù)用數(shù)據(jù)記錄在DVD002中。另外，影像聲音變換裝置也可以僅對(duì)影像數(shù)據(jù)和聲音數(shù)據(jù)中一方進(jìn)行再壓縮。說(shuō)明僅對(duì)影像數(shù)據(jù)進(jìn)行再壓縮的情況。分離部101進(jìn)行第一復(fù)用數(shù)據(jù)的復(fù)用分離，并分離成為按照MPEG等被實(shí)施編碼的第一編碼影像數(shù)據(jù)和按照AC - 3等被實(shí)施編碼的第一編碼聲音數(shù)據(jù)。第一編碼影像數(shù)據(jù)被傳送給第一中間緩沖器301，以后由影像解碼部102進(jìn)行解碼，由影像編碼部104進(jìn)行編碼，然后傳送給第五中間緩沖器305。另一方面，第一編碼聲音數(shù)據(jù)不傳送給第二中間緩沖器302，而是直接傳送給第六中間緩沖器306。復(fù)用部106進(jìn)行被存儲(chǔ)在第五中間緩沖器305中的第二編碼影像數(shù)據(jù)和被存儲(chǔ)在第六中間緩沖器306中的第一編碼聲音數(shù)據(jù)的復(fù)用，將第二復(fù)用數(shù)據(jù)記錄在DVD002中。在此，對(duì)影像數(shù)據(jù)的再壓縮進(jìn)行了說(shuō)明，對(duì)于僅對(duì)聲音數(shù)據(jù)進(jìn)行再壓縮時(shí)，也是進(jìn)行相同的處理。下面，說(shuō)明基于分離部101、影像解碼部102、聲音解碼部103、影像編碼部104、聲音編碼部105及復(fù)用部106的處理速度之差分的、各個(gè)中間緩沖器的上溢和下溢的避免控制。分離部101、影像解碼部102、聲音解碼部103、影像編碼部104、聲音編碼部105及復(fù)用部106分別監(jiān)視位于其前段的中間緩沖器(對(duì)于分離部101而言不存在位于其前段的緩沖器，因而不適用)及位于其后段的中間緩沖器(對(duì)于復(fù)用部106而言不存在位于其后段的中間緩沖器，因而不適用)的數(shù)據(jù)的蓄積狀態(tài)。分離部101、影像解碼部102、聲音解碼部103、影像編碼部104、聲音編碼部105及復(fù)用部106均是在位于其前段的中間緩沖器內(nèi)的數(shù)據(jù)余 量低于規(guī)定的閾值的情況下，停止處理使得不產(chǎn)生中間緩沖器的下溢，而在數(shù)據(jù)余量高于規(guī)定的閾值的情況下重新開(kāi)始處理。并且，在位于其后段的中間緩沖器內(nèi)的空閑余量低于規(guī)定的閾值的情況下，停止處理使得不產(chǎn)生中間緩沖器的上溢，而在空閑余量高于規(guī)定的閾值的情況下重新開(kāi)始處理。根據(jù)這種結(jié)構(gòu)，分離部101、影像解碼部102、聲音解碼部103、影像編碼部104、聲音編碼部105及復(fù)用部106能夠以最佳的處理速度實(shí)現(xiàn)速率變換錄制。并且，通過(guò)使用第一復(fù)用數(shù)據(jù)的時(shí)刻信息，可以生成能夠?qū)崿F(xiàn)取得了影像與聲音的同步的準(zhǔn)確再現(xiàn)的第二復(fù)用數(shù)據(jù)。另外，本發(fā)明的影像聲音變換裝置的必須的構(gòu)成要素是分離部101、影像解碼部102、聲音解碼部103、影像編碼部104、聲音編碼部105及復(fù)用部106，其它的構(gòu)成要素也可以設(shè)于影像聲音變換裝置的外部。(實(shí)施方式2)圖2是表示本發(fā)明的實(shí)施方式2的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。與實(shí)施方式I相同地，HDD001和DVD002是記錄單元，在HDD001中記錄有例如電視廣播的按照MPEG等被壓縮的第一復(fù)用數(shù)據(jù)。DVD002用于記錄速率變換錄制后的第二復(fù)用數(shù)據(jù)。另外，記錄單元也可以是SD卡等。實(shí)施方式2的影像聲音變換裝置由分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111、復(fù)用部112、同步控制部401、第七中間緩沖器501、第八中間緩沖器502、第九中間緩沖器503、第十中間緩沖器504、第十一中間緩沖器505、第十二中間緩沖器506、第十三中間緩沖器507、第十四中間緩沖器508構(gòu)成。分離部107進(jìn)行被記錄在HDD001中的第一復(fù)用數(shù)據(jù)的復(fù)用分離，并分離為按照MPEG等被實(shí)施編碼的第一編碼影像數(shù)據(jù)和按照AC — 3等被實(shí)施編碼的第一編碼聲音數(shù)據(jù)。影像解碼部108對(duì)由分離部107進(jìn)行復(fù)用分離得到的第一編碼影像數(shù)據(jù)進(jìn)行解碼。聲音解碼部109對(duì)由分離部107進(jìn)行復(fù)用分離得到的第一編碼聲音數(shù)據(jù)進(jìn)行解碼。
影像編碼部110對(duì)由影像解碼部108進(jìn)行解碼得到的影像數(shù)據(jù)進(jìn)行編碼。聲音編碼部111對(duì)由聲音解碼部109進(jìn)行解碼得到的聲音數(shù)據(jù)進(jìn)行編碼。復(fù)用部112進(jìn)行由影像編碼部110進(jìn)行編碼得到的第二編碼影像數(shù)據(jù)和由聲音編碼部111進(jìn)行編碼得到的第二編碼聲音數(shù)據(jù)的復(fù)用，并生成第二復(fù)用數(shù)據(jù)。同步控制部401調(diào)整由影像解碼部108進(jìn)行解碼得到的影像數(shù)據(jù)向影像編碼部110傳送的定時(shí)、和由聲音解碼部109進(jìn)行解碼得到的聲音數(shù)據(jù)向聲音編碼部111傳送的定時(shí)。第七中間緩沖器501在將由分離部107進(jìn)行復(fù)用分離得到的第一編碼影像數(shù)據(jù)從分離部107向影像解碼部108傳送時(shí)進(jìn)行臨時(shí)存儲(chǔ)。第八中間緩沖器502在將由分離部107進(jìn)行復(fù)用分離得到的第一編碼聲音數(shù)據(jù)從分離部107向聲音解碼部109傳送時(shí)進(jìn)行臨時(shí)存儲(chǔ)。第九中間緩沖器503在將由影像解碼部108進(jìn)行解碼得到的影像數(shù)據(jù)從影像解碼部108向同步控制部401傳送時(shí)進(jìn)行臨時(shí)存儲(chǔ)。第十中間緩沖器504在將由聲音解碼部109進(jìn)行解碼得到的聲音數(shù)據(jù)從聲音解碼部109向同步控制部401傳送時(shí)進(jìn)行臨時(shí)存儲(chǔ)。第十一中間緩沖器505在將由同步控制部401進(jìn)行了同步控制的影像數(shù)據(jù)從同步控制部401向影像編碼部110傳送時(shí)進(jìn)行臨時(shí)存儲(chǔ)。第十二中間緩沖器506在將由同步控制部401進(jìn)行了同步控制的聲音數(shù)據(jù)從同步控制部401向聲音編碼部111傳送時(shí)進(jìn)行臨時(shí)存儲(chǔ)。第十三中間緩沖器507在將由影像編碼部110進(jìn)行編碼得到的第二編碼影像數(shù)據(jù)從影像編碼部110向復(fù)用部112傳送時(shí)進(jìn)行臨時(shí)存儲(chǔ)。第十四中間緩沖器508在將由聲音編碼部111進(jìn)行編碼得到的第二編碼聲音數(shù)據(jù)從聲音編碼部111向復(fù)用部112傳送時(shí)進(jìn)行臨時(shí)存儲(chǔ)。另外，分離部107具有將時(shí)刻信息通知同步控制部401的功能(SIG402)。下面，說(shuō)明這些各個(gè)單元和信號(hào)的流程。圖3表示在同步控制部401的同步控制定時(shí)。圖3中的橫軸表示自速率變換錄制開(kāi)始起的經(jīng)過(guò)時(shí)間t。在設(shè)速率變換錄制的變換速度的倍速值為N的情況下，同步控制部401進(jìn)行由影像解碼部108按照視頻巾貞周期(例如,對(duì)于HDTV (High DefinitionTelevision)的1080i是1/29. 97Hz)的1/N倍周期進(jìn)行解碼得到的影像數(shù)據(jù)的傳送控制。并且，同步控制部401進(jìn)行由聲音解碼部109按照音頻巾貞周期(例如,對(duì)于AAC (AdvancedAudio Coding)是1024/48kHz)的1/N倍周期進(jìn)行解碼得到的聲音數(shù)據(jù)的傳送控制。S卩，在N= I (I倍速)的情況下，按照影像及聲音的幀周期進(jìn)行同步控制，在N = 2(2倍速)的情況下，按照影像及聲音的幀周期的1/2周期進(jìn)行同步控制。圖4是用于說(shuō)明在同步控制部401的同步控制的圖。圖4中的橫軸表示自速率變換錄制開(kāi)始起的經(jīng)過(guò)時(shí)間t，縱軸表示時(shí)刻信息的值。同步控制部401在速率變換錄制開(kāi)始時(shí)求出將系統(tǒng)基準(zhǔn)時(shí)間STC (System TimeClock)與N值(N的值)相乘得到的值，再?gòu)挠煞蛛x部107通知的第一次的時(shí)刻信息(時(shí)間戮、SCR (System Clock Reference)、或者 PCR (Program Clock Reference)等)中減去，求出stc_base。然后，同步控制部401在所述影像數(shù)據(jù)傳送的同步控制定時(shí),將對(duì)stc_base加上STC與所述N值相乘得到的值而求出的STC’、與由分離部107通知的時(shí)刻信息中所包含的與影像數(shù)據(jù)的輸出相關(guān)的影像輸出時(shí)刻信息(VPTS)進(jìn)行比較。在從VPTS減去STC’得到的值小于規(guī)定的閾值、或者從STC’減去VPTS得到的值小于規(guī)定的閾值的情況下，同步控制部401進(jìn)行由影像解碼部108進(jìn)行解碼得到的影像數(shù)據(jù)的傳送控制。在從VPTS減去STC’得到的值大于規(guī)定的閾值的情況下，同步控制部401判定為未達(dá)到相應(yīng)的影像數(shù)據(jù)的輸出時(shí)間，進(jìn)行黑色數(shù)據(jù)或者在前一次的同步控制定時(shí)傳送的影像數(shù)據(jù)的傳送控制。在從STC’減去VPTS得到的值大于規(guī)定的閾值的情況下，同步控制部401判定為已經(jīng)過(guò)相應(yīng)的影像數(shù)據(jù)的輸出時(shí)間，對(duì)于相應(yīng)的影像數(shù)據(jù)不進(jìn)行傳送而將其廢棄，進(jìn)行下一個(gè)VPTS與STC’的比較。在由于影像數(shù)據(jù)的缺失或者錯(cuò)誤使得VPTS是不正常的值的情況下，也進(jìn)行相同的·控制。另外，在影像數(shù)據(jù)不存在的情況下或者影像數(shù)據(jù)缺失的情況下，如果分離部107沒(méi)有通知新的VPTS，同步控制部401進(jìn)行黑色數(shù)據(jù)或者在前一次的同步控制定時(shí)傳送的影像數(shù)據(jù)的傳送控制。求出stc_base及STC’的算式如下所示。stc_base =時(shí)刻信息一STCXN …式 ISTC’ = stc_base + STCXN …式 2另外，同步控制部401在所述聲音數(shù)據(jù)輸出的同步控制定時(shí)，將所述STC’和由分離部107通知的時(shí)刻信息中所包含的與聲音數(shù)據(jù)的輸出相關(guān)的聲音輸出時(shí)刻信息(APTS)進(jìn)行比較。在從APTS減去STC’得到的值小于規(guī)定的閾值、或者從STC’減去APTS得到的值小于規(guī)定的閾值的情況下，同步控制部401進(jìn)行由聲音解碼部109進(jìn)行解碼得到的聲音數(shù)據(jù)的傳送控制。在從APTS減去STC’得到的值大于規(guī)定的閾值的情況下，同步控制部401判定為沒(méi)有達(dá)到相應(yīng)的聲音數(shù)據(jù)的輸出時(shí)間，進(jìn)行無(wú)聲數(shù)據(jù)的傳送控制。在從STC’減去APTS得到的值大于規(guī)定的閾值的情況下，同步控制部401判定為已經(jīng)過(guò)相應(yīng)的聲音數(shù)據(jù)的輸出時(shí)間，對(duì)于相應(yīng)的聲音數(shù)據(jù)不進(jìn)行傳送而將其廢棄，進(jìn)行下一個(gè)APTS與STC’的比較。在由于聲音數(shù)據(jù)的缺失或者錯(cuò)誤而使得APTS是不正常的值的情況下，也進(jìn)行相同的控制。另外，在聲音數(shù)據(jù)不存在的情況下或者聲音數(shù)據(jù)缺失的情況下，如果分離部107沒(méi)有通知新的APTS，同步控制部401進(jìn)行無(wú)聲數(shù)據(jù)的傳送控制。由此，影像編碼部110和聲音編碼部111能夠在取得了影像數(shù)據(jù)與聲音數(shù)據(jù)的同步的狀態(tài)下進(jìn)行編碼。并且，在復(fù)用部112中，對(duì)于根據(jù)影像數(shù)據(jù)及聲音數(shù)據(jù)的幀周期和編碼完成的幀數(shù)而確定的復(fù)用的時(shí)間，可以按照規(guī)定的順序?qū)τ捎跋窬幋a部110和聲音編碼部111進(jìn)行編碼得到的第二編碼影像數(shù)據(jù)和第二編碼聲音數(shù)據(jù)進(jìn)行復(fù)用，因而不需要在實(shí)施方式I中示出的同步控制。另外，關(guān)于由于分離部107將時(shí)刻信息通知復(fù)用部112的定時(shí)不固定而導(dǎo)致的時(shí)刻信息與STC’的偏差，由于不是要求實(shí)時(shí)性的等倍的速率變換錄制定時(shí)，因而不需要進(jìn)行特殊考慮。對(duì)速率變換錄制的變換速度的倍速值的N進(jìn)行說(shuō)明。N值是能夠保證使用實(shí)施方式2示出的影像聲音變換裝置進(jìn)行速率變換錄制的值，而且在分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112不會(huì)產(chǎn)生延遲。下面示出了 N值的計(jì)算公式。N = min (SI, S2, S3, S4, S5, S6) …式 3
SI (Slmin = SI = SImax):分離部 107 的吞吐量(through-put)的倍率S2 (S2min ^ S2 ^ S2max):影像解碼部108的吞吐量的倍率S3 (S3min ^ S3 ^ S3max):聲音解碼部109的吞吐量的倍率S4 (S4min = S4 = S4max):影像編碼部110的吞吐量的倍率S5 (S5min ^ S5 ^ S5max):聲音編碼部111的吞吐量的倍率S6 (S6min ^ S6 ^ S6max):復(fù)用部112的吞吐量的倍率用于計(jì)算N的函數(shù)minO是從自變量中求出最小的值的函數(shù)。另外，各個(gè)自變量表示分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111或者復(fù)用部112的吞吐量的倍率，由于處理中的變動(dòng)而取Simin到Simax的值(i表示各個(gè)單元的 序號(hào))。例如，在作為函數(shù)minO的自變量的各個(gè)單元的吞吐量的倍率S取以下的值的情況下，N為2. 4。SI (3.1 芻 SI 芻 4. 9)S2 (2. 7 芻 S2 芻 4. 0)S3 (2. 4 芻 S3 芻 4.1)S4 (3. 4 芻 S4 芻 4. 4)S5 (2. 9 芻 S5 芻 4. 7)S6 (2. 8 芻 S6 芻 3. 9)通過(guò)選擇最小的N，能夠進(jìn)行速率變換錄制，而且分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112相對(duì)于同步控制沒(méi)有延遲。另外，影像解碼部108也可以根據(jù)由影像編碼部110進(jìn)行的編碼的進(jìn)展?fàn)顩r、即由同步控制部401進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制由影像解碼部108進(jìn)行的解碼的停止及重啟。聲音解碼部109也可以根據(jù)由聲音編碼部111進(jìn)行的編碼的進(jìn)展?fàn)顩r、即由同步控制部401進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制由聲音解碼部109進(jìn)行的解碼的停止及重啟。影像編碼部110也可以進(jìn)行由影像解碼部108生成的影像數(shù)據(jù)的編碼、即進(jìn)行通過(guò)同步控制部401而同步的影像數(shù)據(jù)的編碼，并根據(jù)由影像解碼部108進(jìn)行的解碼的進(jìn)展?fàn)顩r、即由同步控制部401進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制編碼的停止及重啟。聲音編碼部111也可以進(jìn)行由聲音解碼部109生成的聲音數(shù)據(jù)的編碼、即進(jìn)行通過(guò)同步控制部401而同步的聲音數(shù)據(jù)的編碼，并根據(jù)由聲音解碼部109進(jìn)行的解碼的進(jìn)展?fàn)顩r、即由同步控制部401進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制編碼的停止及重啟。另外，分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112分別監(jiān)視位于其前段的中間緩沖器(對(duì)于分離部107而言不存在位于其前段的緩沖器，因而不適用)及位于其后段的中間緩沖器(對(duì)于復(fù)用部112而言不存在位于其后段的中間緩沖器，因而不適用)的數(shù)據(jù)的蓄積狀態(tài)。分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112均是在位于其前段的中間緩沖器內(nèi)的數(shù)據(jù)余量低于規(guī)定的閾值的情況下，停止處理使得不產(chǎn)生中間緩沖器的下溢，而在數(shù)據(jù)余量高于規(guī)定的閾值的情況下重新開(kāi)始處理。并且，在位于其后段的中間緩沖器內(nèi)的空閑余量低于規(guī)定的閾值的情況下，停止處理使得不產(chǎn)生中間緩沖器的上溢，而在空閑余量高于規(guī)定的閾值的情況下重新開(kāi)始處理。由此，能夠避免由于分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112的處理速度之差分而導(dǎo)致的各個(gè)中間緩沖器的上溢和下溢。根據(jù)這種結(jié)構(gòu)，能夠?qū)崿F(xiàn)也可以應(yīng)對(duì)第一復(fù)用數(shù)據(jù)的時(shí)刻信息的異?；蛘哂跋駭?shù)據(jù)及聲音數(shù)據(jù)的缺失等異常系統(tǒng)的N倍速的速率變換錄制。并且，通過(guò)使用第一復(fù)用數(shù)據(jù)的時(shí)刻信息，可以生成能夠取得影像和聲音的同步的準(zhǔn)確再現(xiàn)的第二復(fù)用數(shù)據(jù)。(實(shí)施方式3)圖5是表示實(shí)施方式3的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。實(shí)施方式3的影像聲音變換裝置在圖2所示的實(shí)施方式2的影像聲音變換裝置的結(jié)構(gòu)的基礎(chǔ)上，還具有倍速通知部1201、延遲控制部701、第一延遲檢測(cè)部801、第二延遲檢測(cè)部802、第三延遲檢測(cè)部803、第四延遲檢測(cè)部804。
倍速通知部1201將速率變換錄制的變換速度的倍速值通知給同步控制部401。延遲控制部701向同步控制部401進(jìn)行延遲的控制通知(SIG702)。第一延遲檢測(cè)部801檢測(cè)由影像解碼部108進(jìn)行的解碼的延遲。第二延遲檢測(cè)部802檢測(cè)由聲音解碼部109進(jìn)行的解碼的延遲。第三延遲檢測(cè)部803檢測(cè)由影像編碼部110進(jìn)行的編碼的延遲。第四延遲檢測(cè)部804檢測(cè)由聲音編碼部111進(jìn)行的編碼的延遲。另外，分離部107具有這樣的功能在第一復(fù)用數(shù)據(jù)異常時(shí)，使第一延遲檢測(cè)部801、第二延遲檢測(cè)部802、第三延遲檢測(cè)部803、第四延遲檢測(cè)部804停止。下面，說(shuō)明這些各個(gè)單元和信號(hào)的流程。倍速通知部1201在速率變換錄制開(kāi)始時(shí)將超過(guò)根據(jù)實(shí)施方式2的式3求出的N值的值(例如N+ I等)作為N值，并通知給同步控制部401 (SIG1202)。同步控制部401使用來(lái)自倍速通知部1201的N值作為同步控制定時(shí)及所述STC’的計(jì)算值。第一延遲檢測(cè)部801檢測(cè)由影像解碼部108進(jìn)行的解碼相對(duì)于同步控制的延遲。第二延遲檢測(cè)部802檢測(cè)由聲音解碼部109進(jìn)行的解碼相對(duì)于同步控制的延遲。第三延遲檢測(cè)部803檢測(cè)由影像編碼部110進(jìn)行的編碼相對(duì)于同步控制的延遲。第四延遲檢測(cè)部804檢測(cè)由聲音編碼部111進(jìn)行的編碼相對(duì)于同步控制的延遲。第一延遲檢測(cè)部801、第二延遲檢測(cè)部802、第三延遲檢測(cè)部803、第四延遲檢測(cè)部804在檢測(cè)到延遲的情況下，向延遲控制部701進(jìn)行延遲通知。延遲控制部701在從第一延遲檢測(cè)部801、第二延遲檢測(cè)部802、第三延遲檢測(cè)部803及第四延遲檢測(cè)部804中的任意一方接收到延遲通知時(shí)，作為延遲的控制通知向同步控制部401進(jìn)行同步控制的停止通知。在通過(guò)同步控制的停止而消除了延遲時(shí)，第一延遲檢測(cè)部801、第二延遲檢測(cè)部802、第三延遲檢測(cè)部803及第四延遲檢測(cè)部804中進(jìn)行了延遲通知的單元，向延遲控制部701進(jìn)行重啟通知。延遲控制部701在接收到重啟通知后,作為延遲的控制通知向同步控制部401進(jìn)行同步控制的重啟通知(將上述的控制稱為延遲控制)。通過(guò)所述延遲控制，能夠避免由于以超過(guò)實(shí)施方式2的影像聲音變換裝置能夠保證的N倍的倍速進(jìn)行同步控制而導(dǎo)致的、分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112的處理相對(duì)于同步控制的延遲。關(guān)于延遲控制方法，參照?qǐng)D6進(jìn)行詳細(xì)說(shuō)明。為了簡(jiǎn)化起見(jiàn)，將數(shù)值簡(jiǎn)單化。圖6中的橫軸表示自速率變換錄制開(kāi)始起的經(jīng)過(guò)時(shí)間t。
同步控制部401在從延遲控制部701接收到停止通知時(shí)進(jìn)行同步控制的停止，并且分別記錄同步控制的停止位置(相對(duì)于影像數(shù)據(jù)的同步控制的周期及聲音數(shù)據(jù)的同步控制的周期而前進(jìn)了的位置)和停止時(shí)的STC’ (past STC’ = 40)。在同步控制停止的期間，分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112繼續(xù)進(jìn)行動(dòng)作。由此，在成為瓶頸的部分被消除后，第一延遲檢測(cè)部801、第二延遲檢測(cè)部802、第三延遲檢測(cè)部803及第四延遲檢測(cè)部804中已進(jìn)行了延遲通知的單元，向延遲控制部701進(jìn)行重啟通知，延遲控制部701在接收到延遲重啟通知后，向同步控制部401發(fā)送重啟通知。同步控制部401在接收到重啟通知后，在保持停止前的影像數(shù)據(jù)的傳送定時(shí)和聲音數(shù)據(jù)的傳送定時(shí)的狀態(tài)下重啟同步控制。此時(shí)，即使是在停止期間中STC也在前進(jìn)，因而根據(jù)式2求出的STC’(= 52)也在前進(jìn)，需要進(jìn)行校正。因此，將重啟時(shí)的STC’ (preSTC’ = 52)和停止時(shí)的STC’ (past STC = 40)之差分作為校正值STC’ _diff，并從STC’中減去，由此在重啟時(shí)同步不會(huì)錯(cuò)位。另外，在計(jì)算式I的stc_base時(shí),STC’_diff被清空為O。包括校正在內(nèi)的STC’的計(jì)算公式如下所示。STC，_diff = STC，_diff + (pre STC — past STC) …式 4 STC’ = stc_base + STCXN — STC，_diff …式 5STC’_diff :重啟時(shí)的校正值pre STC，:重啟時(shí)的STC’的值past STC’ 停止時(shí)的 STC’ 的值通過(guò)這樣進(jìn)行同步控制定時(shí)的狀態(tài)恢復(fù)和STC’的校正，能夠重啟同步控制，而且即使是在進(jìn)行延遲控制之后也不會(huì)擾亂影像數(shù)據(jù)的傳送定時(shí)和聲音數(shù)據(jù)的傳送定時(shí)。另外，在來(lái)自第一延遲檢測(cè)部801、第二延遲檢測(cè)部802、第三延遲檢測(cè)部803及第四延遲檢測(cè)部804的延遲通知、重啟通知重合的情況下，延遲控制部701能夠通過(guò)設(shè)計(jì)例如與各個(gè)延遲檢測(cè)部對(duì)應(yīng)的旗標(biāo)來(lái)進(jìn)行應(yīng)對(duì)。延遲控制部701進(jìn)行這樣的控制根據(jù)來(lái)自各個(gè)延遲檢測(cè)部的延遲通知使旗標(biāo)升起，根據(jù)重啟通知使旗標(biāo)降下，在全部旗標(biāo)降下的時(shí)刻重啟同步控制?；蛘?，通過(guò)進(jìn)行在針對(duì)多個(gè)延遲通知的相同數(shù)量的重啟通知達(dá)到的時(shí)刻重啟同步控制的控制，即使是在來(lái)自第一延遲檢測(cè)部801、第二延遲檢測(cè)部802、第三延遲檢測(cè)部803及第四延遲檢測(cè)部804的延遲通知、重啟通知重合的情況下，也能夠?qū)崿F(xiàn)保持整合性的控制。另外，關(guān)于延遲控制方法也可以不是同步控制的停止、重啟控制，而是通過(guò)調(diào)整速率變換錄制的倍速值即N值來(lái)進(jìn)行。圖7是表示基于N值的調(diào)整的延遲控制方法的圖。圖7中的橫軸表示自速率變換錄制開(kāi)始起的經(jīng)過(guò)時(shí)間t。延遲控制部701在接收到來(lái)自任意一個(gè)延遲檢測(cè)部的延遲通知時(shí)，將N值通知給同步控制部401(2—1)。從延遲控制部701接收到N值的同步控制部401，求出將系統(tǒng)基準(zhǔn)時(shí)間STC與所述N值相乘得到的值，并從STC’中減去，由此校正stc_base。并且，同步控制部401分別切換同步控制的定時(shí)(幀周期X 1/2 —幀周期X 1/1)和STC’的合計(jì)(countup)值(2 — I)來(lái)進(jìn)行同步控制。由此，在成為瓶頸的部分被消除時(shí)，發(fā)送了延遲通知的延遲檢測(cè)部向延遲控制部701發(fā)送重啟通知。延遲控制部701接收到重啟通知后，將N值通知給同步控制部401 (I — 2)。從延遲控制部701接收到N值的同步控制部401，求出將系統(tǒng)基準(zhǔn)時(shí)間STC與所述N值相乘得到的值，并從STC’中減去，由此校正stc_base。同步控制部401分別切換同步控制的定時(shí)(幀周期X 1/1 —幀周期X 1/2)和STC’的合計(jì)值(I — 2)來(lái)進(jìn)行同步控制。校正時(shí)的stc_base的計(jì)算公式如下所示。stc_base = STC，一 STCXN…式 6通過(guò)上述控制，能夠通過(guò)調(diào)整N值來(lái)實(shí)現(xiàn)延遲控制。下面，詳細(xì)說(shuō)明第一延遲檢測(cè)部801、第二延遲檢測(cè)部802、第三延遲檢測(cè)部803及第四延遲檢測(cè)部804的動(dòng)作。第一延遲檢測(cè)部801監(jiān)視第九中間緩沖器503內(nèi)的數(shù)據(jù)量，以便檢測(cè)由影像解碼部108進(jìn)行的解碼的延遲。在由于由影像解碼部108進(jìn)行的解碼的延遲，使得第九中間緩沖器503內(nèi)的數(shù)據(jù)量低于延遲判定用的閾值的情況下，第一延遲檢測(cè)部801向延遲控制部 701進(jìn)行延遲通知，以便使同步控制臨時(shí)停止。同步控制通過(guò)延遲控制部701的延遲控制而停止，第一中間緩沖器301內(nèi)的數(shù)據(jù)不被消耗，因而數(shù)據(jù)量通過(guò)由影像解碼部108進(jìn)行的解碼而增加下去。在數(shù)據(jù)量增加并超過(guò)重啟判定用的閾值的情況下，第一延遲檢測(cè)部801向延遲控制部701進(jìn)行重啟通知，以便重啟同步控制。由此，能夠防止通過(guò)使影像解碼部108的處理延遲而發(fā)生的第九中間緩沖器503的下溢。另外，第三延遲檢測(cè)部803監(jiān)視第十一中間緩沖器505內(nèi)的數(shù)據(jù)量，以便檢測(cè)由影像編碼部110進(jìn)行的編碼的延遲。在由于由影像編碼部110進(jìn)行的編碼的延遲，使得第十一中間緩沖器505內(nèi)的數(shù)據(jù)量超過(guò)延遲判定用的閾值的情況下，第三延遲檢測(cè)部803向延遲控制部701進(jìn)行延遲通知，以便使同步控制臨時(shí)停止。同步控制通過(guò)延遲控制部701的延遲控制而停止，第十一中間緩沖器505不被供給影像數(shù)據(jù)，因而數(shù)據(jù)量通過(guò)由影像編碼部110進(jìn)行的編碼而減少下去。在數(shù)據(jù)量減少并低于重啟判定用的閾值的情況下，第三延遲檢測(cè)部803向延遲控制部701進(jìn)行重啟通知，以便重啟同步控制。由此，能夠防止通過(guò)使影像編碼部110的編碼延遲而發(fā)生的第十一中間緩沖器505的上溢。例如，在對(duì)中間緩沖器的數(shù)據(jù)量設(shè)計(jì)閾值的情況下，也可以從影像數(shù)據(jù)的析像度求出I幀量的尺寸，并用作閾值。即，在已被解碼的影像數(shù)據(jù)的析像度是1920X 1080為I像素 24bit 的情況下，以 1920X1080X24 = 49766400bit (6220800byte)單位計(jì)算閾值并使用。另外，關(guān)于延遲檢測(cè)方法也可以取代對(duì)中間緩沖器的數(shù)據(jù)量的監(jiān)視，而是監(jiān)視被存儲(chǔ)在中間緩沖器中的幀數(shù)。在此，說(shuō)明由影像解碼部108進(jìn)行的解碼和由影像編碼部110進(jìn)行的編碼的延遲，但關(guān)于由聲音解碼部109進(jìn)行的解碼和由聲音編碼部111進(jìn)行的編碼的延遲，是在第二延遲檢測(cè)部802和第四延遲檢測(cè)部804中進(jìn)行相同的處理。另外，第一延遲檢測(cè)部801也可以監(jiān)視由影像解碼部108生成的影像數(shù)據(jù)的幀數(shù)和由同步控制部401進(jìn)行了同步控制的影像數(shù)據(jù)的幀數(shù)，由此檢測(cè)由影像解碼部108進(jìn)行的解碼的延遲。第二延遲檢測(cè)部802也可以監(jiān)視由聲音解碼部109生成的聲音數(shù)據(jù)的幀數(shù)和由同步控制部401進(jìn)行了同步控制的聲音數(shù)據(jù)的幀數(shù)，由此檢測(cè)由聲音解碼部109進(jìn)行的解碼的延遲。第三延遲檢測(cè)部803也可以監(jiān)視由同步控制部401進(jìn)行了同步控制的影像數(shù)據(jù)的幀數(shù)和由影像編碼部110生成的第二編碼影像數(shù)據(jù)的幀數(shù)，由此檢測(cè)由影像編碼部110進(jìn)行的編碼的延遲。第四延遲檢測(cè)部804也可以監(jiān)視由同步控制部401進(jìn)行了同步控制的聲音數(shù)據(jù)的幀數(shù)和由聲音編碼部111生成的第二編碼聲音數(shù)據(jù)的幀數(shù)，由此檢測(cè)由聲音編碼部111進(jìn)行的編碼的延遲。下面，說(shuō)明異常系統(tǒng)的延遲控制。圖8是表示第十中間緩沖器504不被供給聲音數(shù)據(jù)時(shí)的模式的圖。對(duì)各個(gè)模式的延遲控制進(jìn)行說(shuō)明。對(duì)由于不存在聲音的第一復(fù)用數(shù)據(jù)而使得第十中間緩沖器504不被供給聲音數(shù)據(jù)的情況進(jìn)行說(shuō)明。分離部107通過(guò)分析例如MPEG的系統(tǒng)標(biāo)題等的信息，判定不存在第一編碼聲音數(shù)據(jù)。通過(guò)該判定，在判定為第一復(fù)用數(shù)據(jù)中不存在第一編碼聲音數(shù)據(jù)之后，分離部107使第二延遲檢測(cè)部802和第四延遲檢測(cè)部804停止(SIG703)。通過(guò)這種異常系統(tǒng)的控制，即使是在由于不存在聲音的第一復(fù)用數(shù)據(jù)而使得第十中間緩沖器504不被供給聲音數(shù)據(jù)的情況下，同步控制也不會(huì)停止。對(duì)由于第一編碼聲音數(shù)據(jù)缺失或者第一編碼聲音數(shù)據(jù)在不固定的期間中不存在、而使得第十中間緩沖器504不被供給聲音數(shù)據(jù)的情況進(jìn)行說(shuō)明。分離部107根據(jù)SCR或者 PCR等時(shí)刻信息和聲音輸出時(shí)刻信息，判定相對(duì)于STC’不存在第一編碼聲音數(shù)據(jù)的期間。通過(guò)該判定，如果判定為是第一復(fù)用數(shù)據(jù)中不存在第一編碼聲音數(shù)據(jù)的期間，分離部107使第二延遲檢測(cè)部802和第四延遲檢測(cè)部804停止。通過(guò)這種異常系統(tǒng)的控制，即使是在由于第一編碼聲音數(shù)據(jù)缺失或者第一編碼聲音數(shù)據(jù)在不固定的期間中不存在、而使得第十中間緩沖器504不被供給聲音數(shù)據(jù)的情況下，同步控制也不會(huì)停止。在分離部107的復(fù)用分離相對(duì)于同步控制而延遲、使得第十中間緩沖器504不被供給聲音數(shù)據(jù)的情況下，不需要異常系統(tǒng)的控制，而是進(jìn)行正常系統(tǒng)的延遲控制。在此，對(duì)聲音數(shù)據(jù)的情況進(jìn)行了說(shuō)明，但對(duì)于影像數(shù)據(jù)也是進(jìn)行相同的處理。根據(jù)這種結(jié)構(gòu)，通過(guò)具有與實(shí)施方式2相同的異常系統(tǒng)的機(jī)構(gòu)、并以比實(shí)施方式2的N值大的N值進(jìn)行同步控制，并且針對(duì)分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112相對(duì)于同步控制的延遲進(jìn)行延遲控制，能夠?qū)崿F(xiàn)比實(shí)施方式2更快速的速率變換錄制，而且不會(huì)擾亂影像數(shù)據(jù)和聲音數(shù)據(jù)的同步。并且，在提高了各個(gè)單元的處理性能的情況下，不需改變其結(jié)構(gòu)，僅需變更N值，即可提高速率變換錄制的性能。(實(shí)施方式4)圖9是表示實(shí)施方式4的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。實(shí)施方式4的影像聲音變換裝置在圖5所示的實(shí)施方式3的影像聲音變換裝置的結(jié)構(gòu)的基礎(chǔ)上，還具有動(dòng)作模式判定部1401。下面，說(shuō)明各個(gè)單元和信號(hào)的流程。動(dòng)作模式判定部1401通過(guò)進(jìn)行影響到速率變換錄制時(shí)的分離部107的復(fù)用分離、影像解碼部108的解碼、聲音解碼部109的解碼、影像編碼部110的編碼、聲音編碼部111的編碼或者復(fù)用部112的復(fù)用的各個(gè)要素(例如，沒(méi)有遺漏地指如下等的全部要素第一復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的析像度、第二復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的析像度、第一復(fù)用數(shù)據(jù)的比特率、第二復(fù)用數(shù)據(jù)的比特率、第一復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的幀速率、第二復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的幀速率、第一復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的采樣頻率、第二復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的采樣頻率、第一復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的編解碼、第二復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的編解碼、第一復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的編解碼、第二復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的編解碼、第一復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的信道數(shù)、第二復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的信道數(shù)、第一復(fù)用數(shù)據(jù)的復(fù)用形式、或者第二復(fù)用數(shù)據(jù)的復(fù)用形式等)的判定，來(lái)確定動(dòng)作模式。根據(jù)析像度、比特率等各個(gè)要素的組合，將動(dòng)作模式分別定義為動(dòng)作模式1、2、3…。動(dòng)作模式判定部1401從圖10所示的倍速信息表中按照每種動(dòng)作模式來(lái)選擇最佳的N值，并通知倍速通知部1201 (SIG1402)。接收到N值的倍速通知部1201將N值通知給同步控制部401。根據(jù)這種結(jié)構(gòu)，通過(guò)按照每種動(dòng)作模式來(lái)選擇分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112進(jìn)行最佳動(dòng)作的N值，能夠進(jìn)行最佳的速率變換錄制。另外，通過(guò)使以N值小于I的倍速進(jìn)行動(dòng)作，能夠?qū)Ψ蛛x部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112分配較多的處理時(shí)間，因而影像解碼部108、聲音解碼部109、影像編碼部110及聲音編碼部111能夠?qū)Ω弋?huà)質(zhì)化、高音質(zhì)化的處理分配時(shí)間，能夠生成高質(zhì)量的第二復(fù)用數(shù)據(jù)。
另外，在本實(shí)施方式中示出了根據(jù)動(dòng)作模式來(lái)確定N值的示例，但也可以與動(dòng)作模式無(wú)關(guān)地，由倍速通知部1201按照來(lái)自外部的指示來(lái)選擇所通知的N。(實(shí)施方式5)圖11是表示實(shí)施方式5的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。實(shí)施方式5的影像聲音變換裝置在圖5所示的實(shí)施方式3的影像聲音變換裝置的結(jié)構(gòu)的基礎(chǔ)上，還具有倍速測(cè)定部1501。并且，延遲控制部701具有將延遲發(fā)生的信息通知倍速測(cè)定部1501的功能(SIG1503)。下面，說(shuō)明這些各個(gè)單元和信號(hào)的流程。在實(shí)施方式5中，作為與實(shí)施方式4不同的速率變換錄制的N值的選擇方法，說(shuō)明通過(guò)在速率變換錄制開(kāi)始之前測(cè)定N值來(lái)選擇N值的方法。圖12是用于說(shuō)明在速率變換錄制開(kāi)始之前測(cè)定N值的倍速測(cè)定方法的流程圖。在SlOl，倍速測(cè)定部1501取得根據(jù)所述式3求出的N值。在S102，倍速測(cè)定部1501將在確定了速率變換錄制用的N值時(shí)使用的N值設(shè)為N’保存在緩沖器(未圖示)中。在S103，倍速測(cè)定部1501對(duì)N值加上規(guī)定的值a，由此求出在速率變換錄制中使用的N值。在S104執(zhí)行規(guī)定期間的速率變換錄制，倍速測(cè)定部1501從延遲控制部701接收延遲發(fā)生的信息(SIG1502)，并計(jì)數(shù)延遲控制的發(fā)生次數(shù)。在S105，倍速測(cè)定部1501判定延遲控制的發(fā)生次數(shù)和規(guī)定的閾值。在此，如果延遲控制的發(fā)生次數(shù)超過(guò)閾值，則進(jìn)入到S106，如果低于閾值則返回到S102，將N值設(shè)為N’保存在緩沖器(未圖示)中，再次進(jìn)行速率變換錄制。在S106，倍速測(cè)定部1501將在S102被保存在緩沖器中的N’的值代入N值，由此確定用于通知倍速通知部1201的在實(shí)際的速率變換錄制中使用的N值。根據(jù)這種結(jié)構(gòu)，不需事前確定每種動(dòng)作模式的最佳的N值，即可以最分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112進(jìn)行最佳動(dòng)作的N值進(jìn)行速率變換錄制。關(guān)于a的值，如果賦予較小的值，則最佳的N值的精度提高，但是達(dá)到最佳的值需要花費(fèi)時(shí)間。另外，如果賦予較大的值，雖然達(dá)到最佳的值所需要的時(shí)間縮短，但是最佳的N值的精度下降。另外，a的值可以是裝置固有的值，也可以從外部進(jìn)行賦值。(實(shí)施方式6)
圖13是表示實(shí)施方式6的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。實(shí)施方式6的影像聲音變換裝置在圖5所示的實(shí)施方式3的影像聲音變換裝置的結(jié)構(gòu)的基礎(chǔ)上，還具有第二動(dòng)作模式判定部1601、第二倍速測(cè)定部1602和倍速記錄存儲(chǔ)器1603。下面，說(shuō)明這些各個(gè)單元和信號(hào)的流程。第二動(dòng)作模式判定部1601判定與動(dòng)作設(shè)定對(duì)應(yīng)的動(dòng)作模式，所述動(dòng)作設(shè)定將影響到分離部107的復(fù)用分離、影像解碼部108的解碼、聲音解碼部109的解碼、影像編碼部110的編碼、聲音編碼部111的編碼、或者復(fù)用部112的復(fù)用。如前面所述，根據(jù)析像度、t匕特率等各個(gè)要素的組合，將動(dòng)作模式分別定義為動(dòng)作模式1、2、3…。第二倍速測(cè)定部1602在速率變換錄制開(kāi)始前進(jìn)行所述N的測(cè)定。倍速記錄存儲(chǔ)器1603記錄所測(cè)定到的所述N。 在與動(dòng)作模式對(duì)應(yīng)的所述N被記錄在倍速記錄存儲(chǔ)器1603中的情況下，第二動(dòng)作模式判定部1601將所記錄的所述N通知給倍速通知部1201(SIG1604)，在與動(dòng)作模式對(duì)應(yīng)的所述N沒(méi)有記錄在倍速記錄存儲(chǔ)器1603中的情況下，第二動(dòng)作模式判定部1601向第二倍速測(cè)定部1602進(jìn)行啟動(dòng)通知(SIG1605)。第二倍速測(cè)定部1602按照每種動(dòng)作模式來(lái)測(cè)定最佳的所述N，將每種動(dòng)作模式的所述N記錄在倍速記錄存儲(chǔ)器1603中(SIG1607)，并將所述N通知給倍速通知部1201(SIG1606)。在實(shí)施方式6中，說(shuō)明與實(shí)施方式4及實(shí)施方式5不同的速率變換錄制的N值的選擇方法。圖14是用于說(shuō)明在速率變換錄制開(kāi)始之前測(cè)定N值的倍速測(cè)定方法的流程圖。在S201，第二動(dòng)作模式判定部1601進(jìn)行影響到速率變換錄制時(shí)的動(dòng)作的各個(gè)要素(例如，沒(méi)有遺漏地指如下等的全部要素第一復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的析像度、第二復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的析像度、第一復(fù)用數(shù)據(jù)的比特率、第二復(fù)用數(shù)據(jù)的比特率、第一復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的幀速率、第二復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的幀速率、第一復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的采樣頻率、第二復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的采樣頻率、第一復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的編解碼、第二復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的編解碼、第一復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的編解碼、第二復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的編解碼、第一復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的信道數(shù)、第二復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的信道數(shù)、第一復(fù)用數(shù)據(jù)的復(fù)用形式、或者第二復(fù)用數(shù)據(jù)的復(fù)用形式等)的判定，并確定動(dòng)作模式。在S202，第二動(dòng)作模式判定部1601進(jìn)行在倍速記錄存儲(chǔ)器1603中是否記錄有動(dòng)作模式的N值的判定。如果記錄有N值，則進(jìn)入到S203，如果沒(méi)有記錄，則進(jìn)入到S204。在S203，第二動(dòng)作模式判定部1601按照每種動(dòng)作模式從倍速記錄存儲(chǔ)器1603中選擇最佳的N值，并將N值通知給倍速通知部1201(SIG1604)，由此確定在速率變換錄制中使用的N值。在S204，第二動(dòng)作模式判定部1601向第二倍速測(cè)定部1602進(jìn)行啟動(dòng)通知(SIG1605)。在S205，第二倍速測(cè)定部1602取得根據(jù)所述式3求出的N值。在S206，第二倍速測(cè)定部1602將在確定了速率變換錄制用的N值時(shí)使用的N值設(shè)為N’保存在緩沖器(未圖示)中。
在S207，第二倍速測(cè)定部1602向N值加上規(guī)定的值a，由此求出在速率變換錄制中使用的N值。在S208執(zhí)行規(guī)定期間的速率變換錄制，第二倍速測(cè)定部1602從延遲控制部701接收延遲發(fā)生的信息(SIG1502)，并計(jì)數(shù)延遲控制的發(fā)生次數(shù)。在S209，第二倍速測(cè)定部1602判定延遲控制的發(fā)生次數(shù)和規(guī)定的閾值。在此，如果延遲控制的發(fā)生次數(shù)超過(guò)閾值，則進(jìn)入到S210，如果低于閾值則返回到S206，將N值設(shè)為N’保存在緩沖器(未圖示)中，再次進(jìn)行速率變換錄制。在S210，第二倍速測(cè)定部1602將在S206被保存在緩沖器中的N’的值代入N值。在S211，第二倍速測(cè)定部1602將N值記錄在倍速記錄存儲(chǔ)器1603中(SIG1607)。在S212，第二倍速測(cè)定部1602將N值通知倍速通知部1201 (SIG1606),由此決定在速率變換錄制中使用的N值。根據(jù)這種結(jié)構(gòu)，不需事前確定每種動(dòng)作模式的最佳的N值，即可以分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112進(jìn)行最佳動(dòng)作的N值進(jìn)行速率變換錄制。并且，在以相同的動(dòng)作模式進(jìn)行動(dòng)作的情況下，與實(shí)施方式5相比，能夠縮短到開(kāi)始速率變換錄制為止的時(shí)間。關(guān)于a的值，如前面所述，如果賦予較小的值，則最佳的N值的精度提高，但是達(dá)到最佳的值需要花費(fèi)時(shí)間。另外，如果賦予較大的值，雖然達(dá)到最佳的值所需要的時(shí)間縮短，但是最佳的N值的精度下降。另外，a的值可以是裝置固有的值，也可以從外部進(jìn)行賦值。(實(shí)施方式7)圖15是表示實(shí)施方式7的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。實(shí)施方式7的影像聲音變換裝置在圖5所示的實(shí)施方式3的影像聲音變換裝置的結(jié)構(gòu)的基礎(chǔ)上，還具有第三動(dòng)作模式判定部1801和第三倍速測(cè)定部1802。下面，說(shuō)明這些各個(gè)單元和信號(hào)的流程。倍速通知部1201在速率變換錄制過(guò)程中切換向同步控制部401通知的所述N。當(dāng)在速率變換錄制過(guò)程中動(dòng)作模式被切換的情況下，在同步控制中使用的N值不再是最佳的值，因而認(rèn)為速率變換錄制的速度下降。在實(shí)施方式7中說(shuō)明當(dāng)在速率變換錄制過(guò)程中動(dòng)作模式被切換的情況 下切換為最佳的N值的動(dòng)作。圖16是示出N值切換的圖。圖16中的橫軸表示自速率變換錄制開(kāi)始起的經(jīng)過(guò)時(shí)間t。第三動(dòng)作模式判定部1801監(jiān)視在速率變換錄制過(guò)程中的動(dòng)作模式的切換。如果動(dòng)作模式被切換，第三動(dòng)作模式判定部1801按照每種動(dòng)作模式來(lái)選擇最佳的N值，并通知給倍速通知部1201 (SIG1803)。接收到N值的倍速通知部1201將N值通知給同步控制部401 (2—1)。從倍速通知部1201接收到N值的同步控制部401根據(jù)所述式6求出新的stc_base0并且，同步控制部401分別切換同步控制部401的定時(shí)(幀周期X 1/2 —幀周期X 1/1)和STC’的合計(jì)值(2— 1)，并進(jìn)行同步控制。通過(guò)上述控制，能夠在速率變換錄制過(guò)程中切換N值。圖17是用于說(shuō)明在速率變換錄制過(guò)程中測(cè)定最佳的N值的控制的流程圖。在S301，第三倍速測(cè)定部1802在速率變換錄制過(guò)程中計(jì)數(shù)規(guī)定期間內(nèi)的延遲發(fā)生次數(shù)。在S302，第三倍速測(cè)定部1802判定延遲控制的發(fā)生次數(shù)和規(guī)定的閾值。在此，如果延遲控制的發(fā)生次數(shù)超過(guò)閾值，則進(jìn)入到S303，如果低于閾值則進(jìn)入到S304。在S303，第三倍速測(cè)定部1802從N值減去規(guī)定的值P，由此求出在速率變換錄制中使用的N值。在S304，第三倍速測(cè)定部1802判定是否發(fā)生了延遲控制。在此，如果沒(méi)有發(fā)生延遲控制則進(jìn)入到S305，如果發(fā)生了則返回到S301，再次進(jìn)行規(guī)定期間的延遲發(fā)生次數(shù)的計(jì)數(shù)。在S305，第三倍速測(cè)定部1802向N值加上規(guī)定的值Y，由此求出在速率變換錄制中使用的N值。在S306，第三倍速測(cè)定部1802將N值通知給倍速通知部1201 (SIG1804)。在S307，倍速通知部1201對(duì)N值進(jìn)行切換控制。根據(jù)這種結(jié)構(gòu)，即使是在動(dòng)作模式被切換的情況下，也能夠以分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112進(jìn)行最佳動(dòng)作的N值進(jìn)行速率變換錄制。另外，也能夠配合被輸入到分離部107的第一復(fù)用數(shù)據(jù)，以分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112進(jìn)行最佳動(dòng)作的N值進(jìn)行速率變換錄制。關(guān)于P、Y的值，與a的值相同地，如果賦予較小的值，則最佳的N值的精度提高，但是達(dá)到最佳的值需要花費(fèi)時(shí)間。另外，如果賦予較大的值，雖然達(dá)到最佳的值所需要的時(shí)間縮短，但是最佳的N值的精度下降。另外，y的值可以是裝置固有的值，也可以從外部進(jìn)行賦值。(實(shí)施方式8)圖18是表示實(shí)施方式8的影像聲音變換裝置的功能性結(jié)構(gòu)的框圖。實(shí)施方式8的影像聲音變換裝置在圖2所示的實(shí)施方式2的影像聲音變換裝置的結(jié)構(gòu)的基礎(chǔ)上，還具有倍速判定部1901和倍速通知部1905。下面，說(shuō)明這些各個(gè)單元和信號(hào)的流程。倍速判定部1901在速率變換錄制開(kāi)始時(shí)從倍速通知部1905接收N值(SIG1902)，并設(shè)定動(dòng)作模式使能夠?qū)崿F(xiàn)基于N值的速率變換錄制(SIG1903)。例如，如圖19所示的倍速信息表那樣，按照每種N值來(lái)選擇動(dòng)作模式，并進(jìn)行影響到速率變換錄制時(shí)的動(dòng)作的各個(gè)要素(例如，沒(méi)有遺漏地指如下等的全部要素第二復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的析像度、第二復(fù)用數(shù)據(jù)的比特率、第二復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的幀速率、第二復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的采樣頻率、第二復(fù)用數(shù)據(jù)中的影像數(shù)據(jù)的編解碼、第二復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的編解碼、第一復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的信道數(shù)、第二復(fù)用數(shù)據(jù)中的聲音數(shù)據(jù)的信道數(shù)、或者第二復(fù)用數(shù)據(jù)的復(fù)用形式等)的設(shè)定。如果N值在表中所定義的范圍之外，則以與表中最接近的值的N值對(duì)應(yīng)的動(dòng)作模式，進(jìn)行分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112的設(shè)定，并將N值通知倍速通知部1905 (SIG1904)。倍速通知部1905將從倍速判定部1901接收到的N值通知同步控制部401 (SIG1906)。另外，作為動(dòng)作模式的選擇方案，也 可以追加選擇分離部107、影像解碼部108、聲音解碼部109、影像編碼部110、聲音編碼部111及復(fù)用部112的優(yōu)先度或者有無(wú)模式變更。
根據(jù)這種結(jié)構(gòu)，針對(duì)規(guī)定倍率的速率變換錄制，能夠生成高質(zhì)量的第二復(fù)用數(shù)據(jù)。上述的各個(gè)裝置也可以利用硬件來(lái)實(shí)現(xiàn)。另外，上述的各個(gè)裝置具體地講可以構(gòu)成為由微處理器、ROM、RAM、硬盤驅(qū)動(dòng)、顯示器單元、鍵盤、鼠標(biāo)等構(gòu)成的計(jì)算機(jī)系統(tǒng)。在RAM或者硬盤驅(qū)動(dòng)中存儲(chǔ)有計(jì)算機(jī)程序。微處理器按照計(jì)算機(jī)程序而動(dòng)作，由此各個(gè)裝置實(shí)現(xiàn)其功能。在此，計(jì)算機(jī)程序?yàn)榱藢?shí)現(xiàn)規(guī)定的功能，可以組合多個(gè)表示對(duì)計(jì)算機(jī)的指令的命令代碼而構(gòu)成。另外，構(gòu)成上述各個(gè)裝置的構(gòu)成要素的一部分或者全部可以由一個(gè)系統(tǒng)LSI(Large Scale Integration :大規(guī)模集成電路)構(gòu)成。系統(tǒng)LSI可以是在一個(gè)芯片上集成多個(gè)構(gòu)成部分而制得的超多功能LSI，具體地講，可以是包括微處理器、ROM、RAM等在內(nèi)構(gòu)成的計(jì)算機(jī)系統(tǒng)。在RAM中存儲(chǔ)有計(jì)算機(jī)程序。微處理器按照計(jì)算機(jī)程序而動(dòng)作，由此系統(tǒng)LSI實(shí)現(xiàn)其功能。 另外，構(gòu)成上述各個(gè)裝置的構(gòu)成要素的一部分或者全部也可以由能夠在各個(gè)裝置上插拔的IC卡或者單體模塊構(gòu)成。IC卡或者模塊是由微處理器、R0M、RAM等構(gòu)成的計(jì)算機(jī)系統(tǒng)。IC卡或者模塊也可以包含上述的超多功能LSI。微處理器按照計(jì)算機(jī)程序而動(dòng)作，由此IC卡或者模塊實(shí)現(xiàn)其功能。該IC卡或者該模塊可以具有反篡改性。另外，本發(fā)明也可以是以上所示的方法。并且，也可以是利用計(jì)算機(jī)實(shí)現(xiàn)這些方法的計(jì)算機(jī)程序，還可以是由所述計(jì)算機(jī)程序構(gòu)成的數(shù)字信號(hào)。另外，本發(fā)明也可以將所述計(jì)算機(jī)程序或者所述數(shù)字信號(hào)記錄在計(jì)算機(jī)可以讀取的非易失性的記錄介質(zhì)中，所述記錄介質(zhì)例如是軟盤、硬盤、⑶一 ROM、MO、DVD、DVD — ROM、DVD — RAM、BD (Blu-ray Disc (注冊(cè)商標(biāo))藍(lán)光光盤)、半導(dǎo)體存儲(chǔ)器等。并且，本發(fā)明還可以是記錄在這些非易失性的記錄介質(zhì)中的所述所述數(shù)字信號(hào)。另外，本發(fā)明也可以構(gòu)成為經(jīng)由電氣通信線路、無(wú)線或者有線通信線路、以因特網(wǎng)為代表的網(wǎng)絡(luò)、數(shù)據(jù)播放等，傳輸所述計(jì)算機(jī)程序或所述數(shù)字信號(hào)。另外，本發(fā)明也可以構(gòu)成為具有微處理器和存儲(chǔ)器的計(jì)算機(jī)系統(tǒng)，所述存儲(chǔ)器存儲(chǔ)所述計(jì)算機(jī)程序，所述微處理器按照所述計(jì)算機(jī)程序而動(dòng)作。另外，本發(fā)明也可以構(gòu)成為將所述程序或者所述數(shù)字信號(hào)記錄在所述非易失性的記錄介質(zhì)中并傳輸，或者經(jīng)由所述網(wǎng)絡(luò)等傳輸所述程序或者所述數(shù)字信號(hào)，從而能夠利用獨(dú)立的其他計(jì)算機(jī)系統(tǒng)來(lái)實(shí)施。另外，本發(fā)明也可以分別組合上述實(shí)施方式和上述變形例來(lái)實(shí)施。此次公開(kāi)的實(shí)施方式僅是所有方面中的示例，不能認(rèn)為是限制性的方式。本發(fā)明的范圍不在于上述的說(shuō)明，而在于利用權(quán)利要求書(shū)公開(kāi)的內(nèi)容，并且包含與權(quán)利要求書(shū)同等意義及范圍內(nèi)的所有變更。產(chǎn)業(yè)上的可利用性本發(fā)明的影像聲音變換裝置及方法能夠應(yīng)用于進(jìn)行快速的速率變換錄制的影像聲音變換裝置及方法等。
權(quán)利要求
1.一種影像聲音變換裝置，從將第一編碼影像數(shù)據(jù)及第一編碼聲音數(shù)據(jù)進(jìn)行復(fù)用得到的第一復(fù)用數(shù)據(jù)，生成將第二編碼影像數(shù)據(jù)及第二編碼聲音數(shù)據(jù)進(jìn)行復(fù)用得到的第二復(fù)用數(shù)據(jù)，該影像聲音變換裝置具有分離部，從第一復(fù)用數(shù)據(jù)復(fù)用分離出第一編碼影像數(shù)據(jù)及第一編碼聲音數(shù)據(jù)；影像解碼部，對(duì)由所述分離部復(fù)用分離出來(lái)的第一編碼影像數(shù)據(jù)進(jìn)行解碼，由此生成影像數(shù)據(jù)；聲音解碼部，對(duì)由所述分離部復(fù)用分離出來(lái)的第一編碼聲音數(shù)據(jù)進(jìn)行解碼，由此生成聲音數(shù)據(jù)；影像編碼部，對(duì)由所述影像解碼部生成的影像數(shù)據(jù)進(jìn)行編碼，由此生成第二編碼影像數(shù)據(jù)；聲音編碼部，對(duì)由所述聲音解碼部生成的聲音數(shù)據(jù)進(jìn)行編碼，由此生成第二編碼聲音數(shù)據(jù)；以及復(fù)用部，進(jìn)行由所述影像編碼部生成的第二編碼影像數(shù)據(jù)和由所述聲音編碼部生成的第二編碼聲音數(shù)據(jù)的復(fù)用，由此生成第二復(fù)用數(shù)據(jù)，所述分離部根據(jù)由所述影像解碼部及所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，控制由所述分離部進(jìn)行的復(fù)用分離的停止及重啟，所述影像解碼部根據(jù)由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r及由所述影像編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，控制由所述影像解碼部進(jìn)行的解碼的停止及重啟，所述聲音解碼部根據(jù)由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r及由所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，控制由所述聲音解碼部進(jìn)行的解碼的停止及重啟，所述影像編碼部根據(jù)由所述影像解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r及由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，控制由所述影像編碼部進(jìn)行的編碼的停止及重啟，所述聲音編碼部根據(jù)由所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r及由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，控制由所述聲音編碼部進(jìn)行的編碼的停止及重啟，所述復(fù)用部根據(jù)由所述影像編碼部及所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，控制由所述復(fù)用部進(jìn)行的復(fù)用的停止及重啟。
2.根據(jù)權(quán)利要求1所述的影像聲音變換裝置，所述分離部還將附加在所述第一復(fù)用數(shù)據(jù)中的時(shí)刻信息通知給所述復(fù)用部，所述復(fù)用部使用由所述分離部通知的所述時(shí)刻信息，進(jìn)行第二編碼影像數(shù)據(jù)和第二編碼聲音數(shù)據(jù)的復(fù)用，生成所述第二復(fù)用數(shù)據(jù)。
3.根據(jù)權(quán)利要求2所述的影像聲音變換裝置，所述分離部通過(guò)監(jiān)視在將由所述分離部復(fù)用分離出來(lái)的第一編碼影像數(shù)據(jù)從所述分離部向所述影像解碼部傳送時(shí)臨時(shí)存儲(chǔ)該第一編碼影像數(shù)據(jù)的第一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將由所述分離部復(fù)用分離出來(lái)的第一編碼聲音數(shù)據(jù)從所述分離部向所述聲音解碼部傳送時(shí)臨時(shí)存儲(chǔ)該第一編碼聲音數(shù)據(jù)的第二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)， 判定由所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，所述影像解碼部通過(guò)監(jiān)視所述第一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述影像解碼部生成的影像數(shù)據(jù)從所述影像解碼部向所述影像編碼部傳送時(shí)臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，所述聲音解碼部通過(guò)監(jiān)視所述第二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述聲音解碼部生成的聲音數(shù)據(jù)從所述聲音解碼部向所述聲音編碼部傳送時(shí)臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，所述影像編碼部通過(guò)監(jiān)視所述第三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述影像編碼部生成的第二編碼影像數(shù)據(jù)從所述影像編碼部向所述復(fù)用部傳送時(shí)臨時(shí)存儲(chǔ)該第二編碼影像數(shù)據(jù)的第五中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，所述聲音編碼部通過(guò)監(jiān)視所述第四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述聲音編碼部生成的第二編碼聲音數(shù)據(jù)從所述聲音編碼部向所述復(fù)用部傳送時(shí)臨時(shí)存儲(chǔ)該第二編碼聲音數(shù)據(jù)的第六中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，所述復(fù)用部通過(guò)監(jiān)視所述第五中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視所述第六中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r。
4.根據(jù)權(quán)利要求1所述的影像聲音變換裝置，所述影像聲音變換裝置還具有同步控制部，用于調(diào)整將所述影像解碼部生成的影像數(shù)據(jù)向所述影像編碼部傳送的定時(shí)、和將所述聲音解碼部生成的聲音數(shù)據(jù)向所述聲音編碼部傳送的定時(shí)，所述分離部還將附加在所述第一復(fù)用數(shù)據(jù)中的時(shí)刻信息通知給所述同步控制部， 所述時(shí)刻信息包括與影像數(shù)據(jù)的輸出相關(guān)的影像輸出時(shí)刻信息和與聲音數(shù)據(jù)的輸出相關(guān)的聲音輸出時(shí)刻信息，所述同步控制部響應(yīng)與系統(tǒng)基準(zhǔn)時(shí)間成比例地合計(jì)的基準(zhǔn)時(shí)間達(dá)到了所述影像輸出時(shí)刻信息這一情況，進(jìn)行所述影像解碼部生成的影像數(shù)據(jù)的傳送，并且響應(yīng)與系統(tǒng)基準(zhǔn)時(shí)間成比例地合計(jì)的基準(zhǔn)時(shí)間達(dá)到了所述聲音輸出時(shí)刻信息這一情況，進(jìn)行所述聲音解碼部生成的聲音數(shù)據(jù)的傳送，由此進(jìn)行影像數(shù)據(jù)和聲音數(shù)據(jù)的同步控制，所述影像解碼部根據(jù)由所述影像編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r、即由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制由所述影像解碼部進(jìn)行的解碼的停止及重啟，所述聲音解碼部根據(jù)由所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r、即由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制由所述聲音解碼部進(jìn)行的解碼的停止及重啟，所述影像編碼部進(jìn)行所述影像解碼部生成的影像數(shù)據(jù)的編碼、即進(jìn)行通過(guò)所述同步控制部而同步的影像數(shù)據(jù)的編碼，并根據(jù)由所述影像解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r、即由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制編碼的停止及重啟，所述聲音編碼部進(jìn)行所述聲音解碼部生成的聲音數(shù)據(jù)的編碼、即進(jìn)行通過(guò)所述同步控制部而同步的聲音數(shù)據(jù)的編碼，并根據(jù)由所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r、即由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制編碼的停止及重啟。
5.根據(jù)權(quán)利要求4所述的影像聲音變換裝置，所述分離部通過(guò)監(jiān)視在將由所述分離部復(fù)用分離出來(lái)的第一編碼影像數(shù)據(jù)從所述分離部向所述影像解碼部傳送時(shí)臨時(shí)存儲(chǔ)該第一編碼影像數(shù)據(jù)的第七中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將由所述分離部復(fù)用分離出來(lái)的第一編碼聲音數(shù)據(jù)從所述分離部向所述聲音解碼部傳送時(shí)臨時(shí)存儲(chǔ)該第一編碼聲音數(shù)據(jù)的第八中間緩沖器的數(shù)據(jù)蓄積狀態(tài)， 判定由所述聲音解碼部進(jìn)行的解碼的進(jìn)展?fàn)顩r，所述影像解碼部通過(guò)監(jiān)視所述第七中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述影像解碼部生成的影像數(shù)據(jù)從所述影像解碼部向所述同步控制部傳送時(shí)臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第九中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，所述聲音解碼部通過(guò)監(jiān)視所述第八中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述分離部進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述聲音解碼部生成的聲音數(shù)據(jù)從所述聲音解碼部向所述同步控制部傳送時(shí)臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，所述影像編碼部通過(guò)監(jiān)視在將由所述同步控制部實(shí)施了同步控制的影像數(shù)據(jù)從所述同步控制部向所述影像編碼部傳送時(shí)臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第十一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述影像編碼部生成的第二編碼影像數(shù)據(jù)從所述影像編碼部向所述復(fù)用部傳送時(shí)臨時(shí)存儲(chǔ)該第二編碼影像數(shù)據(jù)的第十三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，所述聲音編碼部通過(guò)監(jiān)視在將由所述同步控制部實(shí)施了同步控制的聲音數(shù)據(jù)從所述同步控制部向所述聲音編碼部傳送時(shí)臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述同步控制部進(jìn)行的同步控制的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視在將所述聲音編碼部生成的第二編碼聲音數(shù)據(jù)從所述聲音編碼部向所述復(fù)用部傳送時(shí)臨時(shí)存儲(chǔ)該第二編碼聲音數(shù)據(jù)的第十四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述復(fù)用部進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，所述復(fù)用部通過(guò)監(jiān)視所述第十三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述影像編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視所述第十四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定由所述聲音編碼部進(jìn)行的編碼的進(jìn)展?fàn)顩r。
6.根據(jù)權(quán)利要求4所述的影像聲音變換裝置，所述同步控制部以N倍速度進(jìn)行同步控制，所述N是所述分離部、所述影像解碼部、所述聲音解碼部、所述影像編碼部、所述聲音編碼部及所述復(fù)用部能夠動(dòng)作的速率變換錄制的變換速度的倍速值的最小值。
7.根據(jù)權(quán)利要求4所述的影像聲音變換裝置，所述影像聲音變換裝置還具有延遲控制部，向所述同步控制部進(jìn)行延遲的控制通知；第一延遲檢測(cè)部，監(jiān)視由所述影像解碼部進(jìn)行的解碼相對(duì)于由所述同步控制部進(jìn)行的同步控制的延遲，并將延遲狀況通知給所述延遲控制部；第二延遲檢測(cè)部，監(jiān)視由所述聲音解碼部進(jìn)行的解碼相對(duì)于由所述同步控制部進(jìn)行的同步控制的延遲，并將延遲狀況通知給所述延遲控制部；第三延遲檢測(cè)部，監(jiān)視由所述影像編碼部進(jìn)行的編碼相對(duì)于由所述同步控制部進(jìn)行的同步控制的延遲，并將延遲狀況通知給所述延遲控制部；以及第四延遲檢測(cè)部，監(jiān)視由所述聲音編碼部進(jìn)行的編碼相對(duì)于由所述同步控制部進(jìn)行的同步控制的延遲，并將延遲狀況通知給所述延遲控制部，所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部均是如果檢測(cè)到延遲，則向所述延遲控制部進(jìn)行延遲通知，如果檢測(cè)到延遲的消除，則向所述延遲控制部進(jìn)行重啟通知，所述延遲控制部在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到延遲通知時(shí)，作為延遲的控制通知向所述同步控制部進(jìn)行同步控制的停止通知，在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到重啟通知時(shí)，作為延遲的控制通知向所述同步控制部進(jìn)行同步控制的重啟通知。
8.根據(jù)權(quán)利要求7所述的影像聲音變換裝置，所述第一延遲檢測(cè)部根據(jù)在將所述影像解碼部生成的影像數(shù)據(jù)從所述影像解碼部向所述同步控制部傳送時(shí)臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第九中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)由所述影像解碼部進(jìn)行的解碼的延遲，所述第二延遲檢測(cè)部根據(jù)在將由所述聲音解碼部生成的聲音數(shù)據(jù)從所述聲音解碼部向所述同步控制部傳送時(shí)臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)由所述聲音解碼部進(jìn)行的解碼的延遲，所述第三延遲檢測(cè)部根據(jù)在將由所述同步控制部實(shí)施了同步控制的影像數(shù)據(jù)從所述同步控制部向所述影像編碼部傳送時(shí)臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第十一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)由所述影像編碼部進(jìn)行的編碼的延遲，所述第四延遲檢測(cè)部根據(jù)在將所述同步控制部實(shí)施了同步控制的聲音數(shù)據(jù)從所述同步控制部向所述聲音編碼部傳送時(shí)臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)由所述聲音編碼部進(jìn)行的編碼的延遲。
9.根據(jù)權(quán)利要求7所述的影像聲音變換裝置，所述第一延遲檢測(cè)部通過(guò)監(jiān)視所述影像解碼部生成的影像數(shù)據(jù)的幀數(shù)和所述同步控制部進(jìn)行了同步控制的影像數(shù)據(jù)的幀數(shù)，檢測(cè)由所述影像解碼部進(jìn)行的解碼的延遲，所述第二延遲檢測(cè)部通過(guò)監(jiān)視所述聲音解碼部生成的聲音數(shù)據(jù)的幀數(shù)和所述同步控制部進(jìn)行了同步控制的聲音數(shù)據(jù)的幀數(shù)，檢測(cè)由所述聲音解碼部進(jìn)行的解碼的延遲，所述第三延遲檢測(cè)部通過(guò)監(jiān)視所述同步控制部進(jìn)行了同步控制的影像數(shù)據(jù)的幀數(shù)和所述影像編碼部所生成的第二編碼影像數(shù)據(jù)的幀數(shù)，檢測(cè)由所述影像編碼部進(jìn)行的編碼的延遲，所述第四延遲檢測(cè)部通過(guò)監(jiān)視所述同步控制部進(jìn)行了同步控制的聲音數(shù)據(jù)的幀數(shù)和所述聲音編碼部生成的第二編碼聲音數(shù)據(jù)的幀數(shù)，檢測(cè)由所述聲音編碼部進(jìn)行的編碼的延遲。
10.根據(jù)權(quán)利要求7所述的影像聲音變換裝置，所述延遲控制部在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到延遲通知時(shí)，將同步控制的停止信號(hào)通知給所述同步控制部，在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到重啟通知時(shí)，將同步控制的重啟信號(hào)通知給所述同步控制部，所述同步控制部在從所述延遲控制部接收到停止信號(hào)時(shí)，保持同步控制的狀態(tài)但停止同步控制，在從所述延遲控制部接收到重啟信號(hào)時(shí)，在所保持的停止時(shí)的狀態(tài)下重啟同步控制。
11.根據(jù)權(quán)利要求7所述的影像聲音變換裝置，所述同步控制部以N倍速度進(jìn)行同步控制，所述N是所述分離部、所述影像解碼部、所述聲音解碼部、所述影像編碼部、所述聲音編碼部及所述復(fù)用部能夠動(dòng)作的速率變換錄制的變換速度的倍速值的最小值，所述延遲控制部在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到延遲通知時(shí)，將在同步控制中使用的所述N 的切換信號(hào)通知給所述同步控制部，在從所述第一延遲檢測(cè)部、所述第二延遲檢測(cè)部、所述第三延遲檢測(cè)部及所述第四延遲檢測(cè)部中的任意一方接收到重啟通知時(shí)，將同步控制的重啟信號(hào)通知給所述同步控制部，所述同步控制部在從所述延遲控制部接收到切換信號(hào)時(shí)，使用減去了規(guī)定的值后的所述N作為同步控制的倍速值，在從所述延遲控制部接收到重啟信號(hào)時(shí)，使用所述N作為同步控制的倍速值。
12.根據(jù)權(quán)利要求6所述的影像聲音變換裝置，所述影像聲音變換裝置還具有向所述同步控制部通知所述N的倍速通知部。
13.根據(jù)權(quán)利要求12所述的影像聲音變換裝置，所述倍速通知部根據(jù)來(lái)自外部的指示，選擇所通知的所述N。
14.根據(jù)權(quán)利要求12所述的影像聲音變換裝置，所述影像聲音變換裝置還具有將與動(dòng)作設(shè)定對(duì)應(yīng)的所述N通知給所述倍速通知部的動(dòng)作模式判定部，所述動(dòng)作設(shè)定將影響到所述分離部的復(fù)用分離、所述影像解碼部的解碼、所述聲音解碼部的解碼、所述影像編碼部的編碼、所述聲音編碼部的編碼、或者所述復(fù)用部的復(fù)用，所述倍速通知部將由所述動(dòng)作模式判定部通知的所述N通知給所述同步控制部。
15.根據(jù)權(quán)利要求12所述的影像聲音變換裝置，所述影像聲音變換裝置還具有倍速測(cè)定部，該倍速測(cè)定部在速率變換錄制開(kāi)始前進(jìn)行所述N的測(cè)定，并將測(cè)定到的所述N通知給所述倍速通知部，所述倍速通知部將由所述倍速測(cè)定部通知的所述N通知給所述同步控制部。
16.根據(jù)權(quán)利要求12所述的影像聲音變換裝置，所述影像聲音變換裝置還具有動(dòng)作模式判定部，判定與動(dòng)作設(shè)定對(duì)應(yīng)的動(dòng)作模式，所述動(dòng)作設(shè)定將影響到所述分離部的復(fù)用分離、所述影像解碼部的解碼、所述聲音解碼部的解碼、所述影像編碼部的編碼、 所述聲音編碼部的編碼、或者所述復(fù)用部的復(fù)用；倍速測(cè)定部，在速率變換錄制開(kāi)始前進(jìn)行所述N的測(cè)定；以及倍速記錄存儲(chǔ)器，記錄所測(cè)定到的所述N，在與動(dòng)作模式對(duì)應(yīng)的所述N被記錄在所述倍速記錄存儲(chǔ)器中的情況下，所述動(dòng)作模式判定部將所記錄的所述N通知給所述倍速通知部，在與動(dòng)作模式對(duì)應(yīng)的所述N沒(méi)有記錄在所述倍速記錄存儲(chǔ)器中的情況下，所述動(dòng)作模式判定部向所述倍速測(cè)定部進(jìn)行啟動(dòng)通知，所述倍速測(cè)定部按照每種動(dòng)作模式來(lái)測(cè)定最佳的所述N，將每種動(dòng)作模式的所述N記錄在所述倍速記錄存儲(chǔ)器中，并將所述N通知給所述倍速通知部。
17.根據(jù)權(quán)利要求7所述的影像聲音變換裝置，所述影像聲音變換裝置還具有倍速通知部，該倍速通知部在進(jìn)行速率變換錄制的過(guò)程中切換進(jìn)行同步控制的速度的倍率即N，并通知給所述同步控制部。
18.根據(jù)權(quán)利要求17所述的影像聲音變換裝置，所述影像聲音變換裝置還具有倍速測(cè)定部，當(dāng)在規(guī)定的期間中基于所述延遲控制部的同步控制的定時(shí)調(diào)整的發(fā)生次數(shù)多于規(guī)定次數(shù)的情況下，所述倍速測(cè)定部將從所述N減去規(guī)定的值后得到的值作為所述N，并通知給所述倍速通知部，在沒(méi)有發(fā)生同步控制的定時(shí)調(diào)整的情況下，所述倍速測(cè)定部將向所述N 加上規(guī)定的值后得到的值作為所述N，并通知給所述倍速通知部，所述延遲控制部通知所述倍速測(cè)定部發(fā)生了同步控制的定時(shí)調(diào)整，所述倍速通知部將由所述倍速測(cè)定部通知的所述N通知給所述同步控制部。
19.根據(jù)權(quán)利要求6所述的影像聲音變換裝置，所述影像聲音變換裝置還具有根據(jù)所述N進(jìn)行動(dòng)作設(shè)定的倍速判定部，所述動(dòng)作設(shè)定將影響到所述分離部的復(fù)用分離、所述影像解碼部的解碼、所述聲音解碼部的解碼、所述影像編碼部的編碼、所述聲音編碼部的編碼、或者所述復(fù)用部的復(fù)用。
20.一種影像聲音變換方法，從將第一編碼影像數(shù)據(jù)及第一編碼聲音數(shù)據(jù)進(jìn)行復(fù)用得到的第一復(fù)用數(shù)據(jù)，生成將第二編碼影像數(shù)據(jù)及第二編碼聲音數(shù)據(jù)進(jìn)行復(fù)用得到的第二復(fù)用數(shù)據(jù)，該影像聲音變換方法包括分離步驟，從第一復(fù)用數(shù)據(jù)復(fù)用分離出影像數(shù)據(jù)及聲音數(shù)據(jù)；影像解碼步驟，對(duì)通過(guò)所述分離步驟而復(fù)用分離出來(lái)的第一編碼影像數(shù)據(jù)進(jìn)行解碼， 由此生成影像數(shù)據(jù)；聲音解碼步驟，對(duì)通過(guò)所述分離步驟而復(fù)用分離出來(lái)的第一編碼聲音數(shù)據(jù)進(jìn)行解碼， 由此生成聲音數(shù)據(jù)；影像編碼步驟，對(duì)通過(guò)所述影像解碼步驟而生成的影像數(shù)據(jù)進(jìn)行編碼，由此生成第二編碼影像數(shù)據(jù)；聲音編碼步驟，對(duì)通過(guò)所述聲音解碼步驟而生成的聲音數(shù)據(jù)進(jìn)行編碼，由此生成第二編碼聲音數(shù)據(jù)；以及復(fù)用步驟，進(jìn)行通過(guò)所述影像編碼步驟而生成的第二編碼影像數(shù)據(jù)和通過(guò)所述聲音編碼步驟而生成的第二編碼聲音數(shù)據(jù)的復(fù)用，由此生成第二復(fù)用數(shù)據(jù)，在所述分離步驟中，根據(jù)在所述影像解碼步驟及所述聲音解碼步驟進(jìn)行的解碼的進(jìn)展?fàn)顩r，控制復(fù)用分離的停止及重啟，在所述影像解碼步驟中，根據(jù)在所述分離步驟進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r及在所述影像編碼步驟進(jìn)行的編碼的進(jìn)展?fàn)顩r，控制解碼的停止及重啟，在所述聲音解碼步驟中，根據(jù)在所述分離步驟進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r及在所述聲音編碼步驟進(jìn)行的編碼的進(jìn)展?fàn)顩r，控制解碼的停止及重啟，在所述影像編碼步驟中，根據(jù)在所述影像解碼步驟進(jìn)行的解碼的進(jìn)展?fàn)顩r及在所述復(fù)用步驟進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，控制編碼的停止及重啟，在所述聲音編碼步驟中，根據(jù)在所述聲音解碼步驟進(jìn)行的解碼的進(jìn)展?fàn)顩r及在所述復(fù)用步驟進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，控制編碼的停止及重啟，在所述復(fù)用步驟中，根據(jù)在所述影像編碼步驟及所述聲音編碼步驟進(jìn)行的編碼的進(jìn)展?fàn)顩r，控制復(fù)用的停止及重啟。
21.根據(jù)權(quán)利要求20所述的影像聲音變換方法，在所述分離步驟中，還輸出被附加在所述第一復(fù)用數(shù)據(jù)中的時(shí)刻信息，在所述復(fù)用步驟中，使用通過(guò)所述分離步驟而輸出的所述時(shí)刻信息生成第二復(fù)用數(shù)據(jù)。
22.根據(jù)權(quán)利要求21所述的影像聲音變換方法，在所述分離步驟中，通過(guò)監(jiān)視為了將通過(guò)所述分離步驟復(fù)用分離出來(lái)的第一編碼影像數(shù)據(jù)在所述影像解碼步驟中進(jìn)行解碼而臨時(shí)存儲(chǔ)該第一編碼影像數(shù)據(jù)的第一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述影像解碼步驟中進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視為了將通過(guò)所述分離步驟復(fù)用分離出來(lái)的第一編碼聲音數(shù)據(jù)在所述聲音解碼步驟中進(jìn)行解碼而臨時(shí)存儲(chǔ)該一編碼聲音數(shù)據(jù)的第二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述聲音解碼步驟中進(jìn)行的解碼的進(jìn)展?fàn)顩r，在所述影像解碼步驟中，通過(guò)監(jiān)視所述第一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述分離步驟中進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視為了將通過(guò)所述影像解碼步驟生成的影像數(shù)據(jù)在所述影像編碼步驟中進(jìn)行編碼而臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述影像編碼步驟中進(jìn)行的編碼的進(jìn)展?fàn)顩r，在所述聲音解碼步驟中，通過(guò)監(jiān)視所述第二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述分離步驟中進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視為了將通過(guò)所述聲音解碼步驟生成的聲音數(shù)據(jù)在所述聲音編碼步驟中進(jìn)行編碼而臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述聲音編碼步驟中進(jìn)行的編碼的進(jìn)展?fàn)顩r，在所述影像編碼步驟中，通過(guò)監(jiān)視所述第三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述影像解碼步驟中進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視為了將通過(guò)所述影像編碼步驟生成的影像數(shù)據(jù)在所述復(fù)用步驟中進(jìn)行復(fù)用而臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第五中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述復(fù)用步驟中進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，在所述聲音編碼步驟中，通過(guò)監(jiān)視所述第四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述聲音解碼步驟中進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視為了將通過(guò)所述聲音編碼步驟生成的聲音數(shù)據(jù)在所述復(fù)用步驟中進(jìn)行復(fù)用而臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第六中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述復(fù)用步驟中進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，在所述復(fù)用步驟中，通過(guò)監(jiān)視所述第五中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述影像編碼步驟中進(jìn)行的編碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視所述第六中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述聲音編碼步驟中進(jìn)行的編碼的進(jìn)展?fàn)顩r。
23.根據(jù)權(quán)利要求20所述的影像聲音變換方法，所述影像聲音變換方法還包括同步控制步驟，用于調(diào)整為了將通過(guò)所述影像解碼步驟生成的影像數(shù)據(jù)在所述影像編碼步驟中進(jìn)行編碼而傳送該影像數(shù)據(jù)的定時(shí)、和為了將通過(guò)所述聲音解碼步驟生成的聲音數(shù)據(jù)在所述聲音編碼步驟中進(jìn)行編碼而傳送該影像數(shù)據(jù)的定時(shí)，在所述分離步驟中，還輸出被附加在所述第一復(fù)用數(shù)據(jù)中的時(shí)刻信息，所述時(shí)刻信息包括與影像數(shù)據(jù)的輸出相關(guān)的影像輸出時(shí)刻信息和與聲音數(shù)據(jù)的輸出相關(guān)的聲音輸出時(shí)刻信息，在所述同步控制步驟中，響應(yīng)與系統(tǒng)基準(zhǔn)時(shí)間成比例地合計(jì)的基準(zhǔn)時(shí)間達(dá)到了所述影像輸出時(shí)刻信息這一情況，進(jìn)行在所述影像解碼步驟中生成的影像數(shù)據(jù)的傳送，并且響應(yīng)與系統(tǒng)基準(zhǔn)時(shí)間成比例地合計(jì)的基準(zhǔn)時(shí)間達(dá)到了所述聲音輸出時(shí)刻信息這一情況，進(jìn)行在所述聲音解碼步驟中生成的聲音數(shù)據(jù)的傳送，由此進(jìn)行影像數(shù)據(jù)和聲音數(shù)據(jù)的同步控制，在所述影像解碼步驟中，根據(jù)在所述影像編碼步驟中進(jìn)行的編碼的進(jìn)展?fàn)顩r、即在所述同步控制步驟中進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制解碼的停止及重啟，在所述聲音解碼步驟中，根據(jù)在所述聲音編碼步驟中進(jìn)行的編碼的進(jìn)展?fàn)顩r、即在所述同步控制步驟中進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制解碼的停止及重啟，在所述影像編碼步驟中，進(jìn)行通過(guò)所述影像解碼步驟而生成的影像數(shù)據(jù)的編碼、即進(jìn)行通過(guò)所述同步控制步驟而同步的影像數(shù)據(jù)的編碼，并根據(jù)在所述影像解碼步驟中進(jìn)行的解碼的進(jìn)展?fàn)顩r、即在所述同步控制步驟中進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制編碼的停止及重啟，在所述聲音編碼步驟中，進(jìn)行通過(guò)所述聲音解碼步驟而生成的聲音數(shù)據(jù)的編碼、即進(jìn)行通過(guò)所述同步控制步驟而同步的聲音數(shù)據(jù)的編碼，并根據(jù)在所述聲音解碼步驟中進(jìn)行的解碼的進(jìn)展?fàn)顩r、即在所述同步控制步驟中進(jìn)行的同步控制的進(jìn)展?fàn)顩r，控制編碼的停止及重啟。
24.根據(jù)權(quán)利要求23所述的影像聲音變換方法，在所述分離步驟中，通過(guò)監(jiān)視為了將通過(guò)所述分離步驟復(fù)用分離出來(lái)的第一編碼影像數(shù)據(jù)在所述影像解碼步驟進(jìn)行解碼而臨時(shí)存儲(chǔ)該第一編碼影像數(shù)據(jù)的第七中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述影像解碼步驟中進(jìn)行的解碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視為了將通過(guò)所述分離步驟復(fù)用分離出來(lái)的第一編碼聲音數(shù)據(jù)在所述聲音解碼步驟進(jìn)行解碼而臨時(shí)存儲(chǔ)該第一編碼聲音數(shù)據(jù)的第八中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述聲音解碼步驟中進(jìn)行的解碼的進(jìn)展?fàn)顩r，在所述影像解碼步驟中，通過(guò)監(jiān)視所述第七中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述分離步驟中進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視為了將通過(guò)所述影像解碼步驟生成的影像數(shù)據(jù)在所述同步控制步驟中進(jìn)行同步控制而臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第九中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述同步控制步驟中進(jìn)行的同步控制的進(jìn)展?fàn)顩r，在所述聲音解碼步驟中，通過(guò)監(jiān)視所述第八中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述分離步驟中進(jìn)行的復(fù)用分離的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視為了將通過(guò)所述聲音解碼步驟生成的聲音數(shù)據(jù)在所述同步控制步驟中進(jìn)行同步控制而臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述同步控制步驟中進(jìn)行的同步控制的進(jìn)展?fàn)顩r，在所述影像編碼步驟中，通過(guò)監(jiān)視為了將通過(guò)所述同步控制步驟被實(shí)施了同步控制的影像數(shù)據(jù)在所述影像編碼步驟中進(jìn)行編碼而臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第十一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述同步控制步驟中進(jìn)行的同步控制的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視為了將通過(guò)所述影像編碼步驟生成的影像數(shù)據(jù)在所述復(fù)用步驟中進(jìn)行復(fù)用而臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第十三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述復(fù)用步驟中進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r，在所述聲音編碼步驟中，通過(guò)監(jiān)視為了將通過(guò)所述同步控制步驟被實(shí)施了同步控制的聲音數(shù)據(jù)在所述聲音編碼步驟中進(jìn)行編碼而臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述同步控制步驟中進(jìn)行的同步控制的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視為了將通過(guò)所述聲音編碼步驟生成的聲音數(shù)據(jù)在所述復(fù)用步驟中進(jìn)行復(fù)用而臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述復(fù)用步驟中進(jìn)行的復(fù)用的進(jìn)展?fàn)顩r， 在所述復(fù)用步驟中，通過(guò)監(jiān)視所述第十三中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，判定在所述影像編碼步驟中進(jìn)行的編碼的進(jìn)展?fàn)顩r，通過(guò)監(jiān)視所述第十四中間緩沖器的數(shù)據(jù)蓄積狀態(tài)， 判定在所述聲音編碼步驟中進(jìn)行的編碼的進(jìn)展?fàn)顩r。
25.根據(jù)權(quán)利要求23所述的影像聲音變換方法，在所述同步控制步驟中，以N倍速度進(jìn)行同步控制，所述N是在所述分離步驟、所述影像解碼步驟、所述聲音解碼步驟、所述影像編碼步驟、所述聲音編碼步驟及所述復(fù)用步驟中能夠進(jìn)行動(dòng)作的倍速值的最小值。
26.根據(jù)權(quán)利要求23所述的影像聲音變換方法，所述影像聲音變換方法還包括延遲控制步驟，進(jìn)行延遲的控制通知，以便在所述同步控制步驟中進(jìn)行同步控制；第一延遲檢測(cè)步驟，監(jiān)視在所述影像解碼步驟中進(jìn)行的解碼相對(duì)于在所述同步控制步驟中進(jìn)行的同步控制的延遲，并通知延遲狀況以便在所述延遲控制步驟中進(jìn)行延遲控制；第二延遲檢測(cè)步驟，監(jiān)視在所述聲音解碼步驟中進(jìn)行的解碼相對(duì)于在所述同步控制步驟中進(jìn)行的同步控制的延遲，并通知延遲狀況以便在所述延遲控制步驟中進(jìn)行延遲控制；第三延遲檢測(cè)步驟，監(jiān)視在所述影像編碼步驟中進(jìn)行的編碼相對(duì)于在所述同步控制步驟中進(jìn)行的同步控制的延遲，并通知延遲狀況以便在所述延遲控制步驟中進(jìn)行延遲控制； 以及第四延遲檢測(cè)步驟，監(jiān)視在所述聲音編碼步驟中進(jìn)行的編碼相對(duì)于在所述同步控制步驟中進(jìn)行的同步控制的延遲，并通知延遲狀況以便在所述延遲控制部步驟中進(jìn)行延遲控制，在所述第一延遲檢測(cè)步驟、所述第二延遲檢測(cè)步驟、所述第三延遲檢測(cè)步驟及所述第四延遲檢測(cè)步驟的各個(gè)步驟中，如果檢測(cè)到延遲，則進(jìn)行延遲通知，如果檢測(cè)到延遲的消除，則進(jìn)行重啟通知，在所述延遲控制步驟中，當(dāng)在所述第一延遲檢測(cè)步驟、所述第二延遲檢測(cè)步驟、所述第三延遲檢測(cè)步驟及所述第四延遲檢測(cè)步驟中的任意一個(gè)步驟中進(jìn)行了延遲通知時(shí)，作為延遲的控制通知進(jìn)行同步控制的停止通知，以便在所述同步控制步驟中進(jìn)行同步控制，當(dāng)在所述第一延遲檢測(cè)步驟、所述第二延遲檢測(cè)步驟、所述第三延遲檢測(cè)步驟及所述第四延遲檢測(cè)步驟中的任意一個(gè)步驟中進(jìn)行了重啟通知時(shí)，作為延遲的控制通知進(jìn)行同步控制的重啟通知，以便在所述同步控制步驟中進(jìn)行同步控制。
27.根據(jù)權(quán)利要求26所述的影像聲音變換方法，在所述第一延遲檢測(cè)步驟中，根據(jù)為了將通過(guò)所述影像解碼步驟生成的影像數(shù)據(jù)在所述同步控制步驟中進(jìn)行同步控制而臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第九中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)在所述影像解碼步驟中進(jìn)行的解碼的延遲，在所述第二延遲檢測(cè)步驟中，根據(jù)為了將通過(guò)所述聲音解碼步驟生成的聲音數(shù)據(jù)在所述同步控制步驟中進(jìn)行同步控制而臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)在所述聲音解碼步驟中進(jìn)行的解碼的延遲，在所述第三延遲檢測(cè)步驟中，根據(jù)為了將通過(guò)所述同步控制步驟被實(shí)施了同步控制的影像數(shù)據(jù)在所述影像編碼步驟中進(jìn)行編碼而臨時(shí)存儲(chǔ)該影像數(shù)據(jù)的第十一中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)在所述影像編碼步驟中進(jìn)行的編碼的延遲，在所述第四延遲檢測(cè)步驟中，根據(jù)為了將通過(guò)所述同步控制步驟被實(shí)施了同步控制的聲音數(shù)據(jù)在所述聲音編碼步驟中進(jìn)行編碼而臨時(shí)存儲(chǔ)該聲音數(shù)據(jù)的第十二中間緩沖器的數(shù)據(jù)蓄積狀態(tài)，檢測(cè)在所述聲音編碼步驟中進(jìn)行的編碼的延遲。
28.根據(jù)權(quán)利要求26所述的影像聲音變換方法，在所述第一延遲檢測(cè)步驟中，通過(guò)監(jiān)視在所述影像解碼步驟中生成的影像數(shù)據(jù)的幀數(shù)和在所述同步控制步驟中進(jìn)行了同步控制的影像數(shù)據(jù)的幀數(shù)，檢測(cè)在所述影像解碼步驟中進(jìn)行的解碼的延遲，在所述第二延遲檢測(cè)步驟中，通過(guò)監(jiān)視在所述聲音解碼步驟中生成的聲音數(shù)據(jù)的幀數(shù)和在所述同步控制步驟中進(jìn)行了同步控制的聲音數(shù)據(jù)的幀數(shù)，檢測(cè)在所述聲音解碼步驟中進(jìn)行的解碼的延遲，在所述第三延遲檢測(cè)步驟中，通過(guò)監(jiān)視在所述同步控制步驟中進(jìn)行了同步控制的影像數(shù)據(jù)的幀數(shù)和在所述影像編碼步驟中生成的影像數(shù)據(jù)的幀數(shù)，檢測(cè)在所述影像編碼步驟中進(jìn)行的編碼的延遲，在所述第四延遲檢測(cè)步驟中，通過(guò)監(jiān)視在所述同步控制步驟中進(jìn)行了同步控制的聲音數(shù)據(jù)的幀數(shù)和在所述聲音編碼步驟中生成的聲音數(shù)據(jù)的幀數(shù)，檢測(cè)在所述聲音編碼步驟中進(jìn)行的編碼的延遲。
29.根據(jù)權(quán)利要求26所述的影像聲音變換方法，在所述延遲控制步驟中，當(dāng)在所述第一延遲檢測(cè)步驟、所述第二延遲檢測(cè)步驟、所述第三延遲檢測(cè)步驟及所述第四延遲檢測(cè)步驟中的任意一個(gè)步驟中進(jìn)行了延遲通知時(shí)，通知同步控制的停止信號(hào)，以便在所述同步控制步驟中進(jìn)行同步控制，當(dāng)在所述第一延遲檢測(cè)步驟、所述第二延遲檢測(cè)步驟、所述第三延遲檢測(cè)步驟及所述第四延遲檢測(cè)步驟中的任意一個(gè)步驟中進(jìn)行了重啟通知時(shí)，通知同步控制的重啟信號(hào)，以便在所述同步控制步驟中進(jìn)行同步控制，在所述同步控制步驟中，當(dāng)在所述延遲控制步驟中通知了停止信號(hào)時(shí)，保持同步控制的狀態(tài)但停止同步控制，當(dāng)在所述延遲控制步驟中通知了重啟信號(hào)時(shí)，在所保持的停止時(shí)的狀態(tài)下重啟同步控制。
30.根據(jù)權(quán)利要求26所述的影像聲音變換方法，在所述延遲控制步驟中，當(dāng)在所述第一延遲檢測(cè)步驟、所述第二延遲檢測(cè)步驟、所述第三延遲檢測(cè)步驟及所述第四延遲檢測(cè)步驟中的任意一個(gè)步驟中進(jìn)行了延遲通知時(shí)，通知在所述同步控制步驟的同步控制中使用的所述N的切換信號(hào)，當(dāng)在所述第一延遲檢測(cè)步驟、所述第二延遲檢測(cè)步驟、所述第三延遲檢測(cè)步驟及所述第四延遲檢測(cè)步驟中的任意一個(gè)步驟中進(jìn)行了重啟通知時(shí)，通知所述同步控制步驟中的同步控制的重啟信號(hào)，在所述同步控制步驟中，當(dāng)在所述延遲控制步驟中通知了切換信號(hào)時(shí)，使用減去了規(guī)定的值后的所述N作為同步控制的倍速值，當(dāng)在所述延遲控制步驟中通知了重啟信號(hào)時(shí)， 使用所述N作為同步控制的倍速值。
31.根據(jù)權(quán)利要求25所述的影像聲音變換方法，所述影像聲音變換方法還包括進(jìn)行所述N的通知的倍速通知步驟，以便實(shí)現(xiàn)在所述同步控制步驟中進(jìn)行的同步控制。
32.根據(jù)權(quán)利要求31所述的影像聲音變換方法，在所述倍速通知步驟中，根據(jù)來(lái)自外部的指示，選擇所通知的所述N。
33.根據(jù)權(quán)利要求31所述的影像聲音變換方法，所述影像聲音變換方法還包括通知與動(dòng)作設(shè)定對(duì)應(yīng)的所述N的動(dòng)作模式判定步驟，以便在所述倍速通知步驟中進(jìn)行通知，所述動(dòng)作設(shè)定將影響到所述分離步驟中的復(fù)用分離、所述影像解碼步驟中的解碼、所述聲音解碼步驟中的解碼、所述影像編碼步驟中的編碼、所述聲音編碼步驟中的編碼、或者所述復(fù)用步驟中的復(fù)用，在所述倍速通知步驟中，通知通過(guò)所述動(dòng)作模式判定步驟而通知了的所述N，以便實(shí)現(xiàn)在所述同步控制步驟中進(jìn)行的同步控制。
34.根據(jù)權(quán)利要求31所述的影像聲音變換方法，所述影像聲音變換方法還包括倍速測(cè)定步驟，在速率變換錄制開(kāi)始前進(jìn)行所述N的測(cè)定，并通知測(cè)定到的所述N，以便在所述倍速通知步驟中進(jìn)行通知，在所述倍速通知步驟中，通知通過(guò)所述倍速測(cè)定步驟而通知了的所述N，以便在所述同步控制步驟中進(jìn)行同步控制。
35.根據(jù)權(quán)利要求31所述的影像聲音變換方法，所述影像聲音變換方法還包括動(dòng)作模式判定步驟，判定與動(dòng)作設(shè)定對(duì)應(yīng)的動(dòng)作模式，所述動(dòng)作設(shè)定將影響到所述分離步驟中的復(fù)用分離、所述影像解碼步驟中的解碼、所述聲音解碼步驟中的解碼、所述影像編碼步驟中的編碼、所述聲音編碼步驟中的編碼、或者所述復(fù)用步驟中的復(fù)用；倍速測(cè)定步驟，在速率變換錄制開(kāi)始前進(jìn)行所述N的測(cè)定；以及記錄步驟，在倍速記錄存儲(chǔ)器中記錄所測(cè)定到的所述N，在所述動(dòng)作模式判定步驟中，在與動(dòng)作模式對(duì)應(yīng)的所述N被記錄在所述倍速記錄存儲(chǔ)器中的情況下，通知所記錄的所述N，以便在所述倍速通知步驟中進(jìn)行通知，在與動(dòng)作模式對(duì)應(yīng)的所述N沒(méi)有記錄在所述倍速記錄存儲(chǔ)器中的情況下進(jìn)行啟動(dòng)通知，以便在所述倍速測(cè)定步驟中進(jìn)行測(cè)定，在所述倍速測(cè)定步驟中，按照每種動(dòng)作模式來(lái)測(cè)定最佳的所述N，將每種動(dòng)作模式的所述N記錄在所述倍速記錄存儲(chǔ)器中，并且通知所述N，以便在所述倍速通知步驟中進(jìn)行通知。
36.根據(jù)權(quán)利要求26所述的影像聲音變換方法，所述影像聲音變換方法還包括倍速通知步驟，在進(jìn)行速率變換錄制的過(guò)程中切換在所述同步控制中進(jìn)行同步控制的速度的倍率即N，并進(jìn)行通知，以便在所述同步控制步驟中進(jìn)行同步控制。
37.根據(jù)權(quán)利要求36所述的影像聲音變換方法，所述影像聲音變換方法還包括倍速測(cè)定步驟，當(dāng)在規(guī)定的期間中基于所述延遲控制步驟的同步控制的定時(shí)調(diào)整的發(fā)生次數(shù)多于規(guī)定次數(shù)的情況下，將從所述N減去規(guī)定的值后得到的值作為所述N并進(jìn)行通知，以便在所述倍速通知步驟中進(jìn)行通知，在沒(méi)有發(fā)生同步控制的定時(shí)調(diào)整的情況下，將向所述N加上規(guī)定的值后得到的值作為所述N并進(jìn)行通知，以便在所述倍速通知步驟中進(jìn)行通知，在所述延遲控制步驟中，通知發(fā)生了同步控制的定時(shí)調(diào)整，以便在所述倍速測(cè)定步驟中測(cè)定定時(shí)調(diào)整的發(fā)生次數(shù)，在所述倍速通知步驟中通知在所述倍速測(cè)定步驟中通知了的所述N，以便在所述同步控制步驟中進(jìn)行同步控制。
38.根據(jù)權(quán)利要求25所述的影像聲音變換方法，所述影像聲音變換方法還包括根據(jù)所述N進(jìn)行動(dòng)作設(shè)定的倍速判定步驟，所述動(dòng)作設(shè)定將影響到所述分離步驟中的復(fù)用分離、 所述影像解碼步驟中的解碼、所述聲音解碼步驟中的解碼、所述影像編碼步驟中的編碼、所述聲音編碼步驟中的編碼、或者所述復(fù)用步驟中的復(fù)用。
全文摘要
在進(jìn)行速率變換錄制時(shí)，分離部(101)、影像解碼部(102)、聲音解碼部(103)、影像編碼部(104)、聲音編碼部(105)及復(fù)用部(106)高效率地并行動(dòng)作，由此能夠縮短處理時(shí)間。分離部(101)、影像解碼部(102)、聲音解碼部(103)、影像編碼部(104)、聲音編碼部(105)及復(fù)用部(106)通過(guò)監(jiān)視前段及后段的處理部的處理狀態(tài)，并進(jìn)行處理的停止及重啟的控制，由此能夠使各個(gè)處理部以最佳的處理速度進(jìn)行動(dòng)作，能夠縮短速率變換錄制的處理時(shí)間。
文檔編號(hào)H04N5/92GK103004185SQ20118003403
公開(kāi)日2013年3月27日 申請(qǐng)日期2011年3月4日 優(yōu)先權(quán)日2010年7月14日
發(fā)明者向井一生, 西岡哲志, 渡邊伸一, 山口良二, 木下聰 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社