專利名稱：與視頻/音頻播放協(xié)同的視頻/音頻及圖形演示系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖形對象如重疊在多媒體電視演示上的文本或畫面(sprites)的顯示，更準(zhǔn)確的說，涉及與多媒體演示協(xié)同的動畫圖形顯示或視頻、音頻的播放。
許多視頻應(yīng)用，包括交互式以及多媒體應(yīng)用，利用視頻觀眾的裝備能夠在象電視或個(gè)人計(jì)算機(jī)顯示器的視頻屏幕上重疊圖形顯示，這些圖形顯示或者象許多電子節(jié)目向?qū)Щ虿藛蔚那闆r那樣控制整個(gè)屏幕，或者控制其一些部分，在這些圖形重疊后的影像，整個(gè)或部分地變朦朧，從而干擾了景物的感受，用于電子節(jié)目向?qū)а菔镜南到y(tǒng)，例如在美國專利5,737,030，5,592,551，5,541,738和5,353,121中所描述的，顯示這種向?qū)r(shí)或者在屏幕上缺乏視頻影像，或者使用靜止幀，或者是活動影像簡單地作為背景，并且在影像中的項(xiàng)目位置和圖形疊加位置之間不相配合。
當(dāng)前，觀眾的設(shè)備如象機(jī)頂盒(STB)還沒有能力確定對象是否位于視頻影像中，在視頻影像中對象位置的確定是必需的，以便在視頻演示時(shí)在不干擾對象顯現(xiàn)的位置上放置圖形對象，如屏幕上的文本或動畫角色。
如象在美國專利5,585,856中描述的這一系統(tǒng)，通過把設(shè)計(jì)成與視頻內(nèi)容相適應(yīng)的圖形重疊屏，試圖協(xié)調(diào)視頻和包含在廣播流，或預(yù)先存儲在觀眾的設(shè)備中的圖形顯示。然而，這些屏必需在演示之前被完好地生成，故此缺乏靈活性，以合適地產(chǎn)生及顯示無干擾的圖形重疊。另外，這種系統(tǒng)在演示時(shí)于特定的“觸發(fā)點(diǎn)”顯示圖形，而不是在貫穿演示過程的任意點(diǎn)上。
另外的系統(tǒng)是附加圖形或音頻內(nèi)容到現(xiàn)存的演示中，例如在美國專利號5,708,764中所描述的系統(tǒng)，它要求演示過程中觀眾的主動參與。觀眾例如可被要求在演示之前或演示期間回答一些問題，這些響應(yīng)則在預(yù)定時(shí)間被顯示在屏幕上。
為各個(gè)用戶提供的個(gè)性化內(nèi)容的系統(tǒng)在Web瀏覽的環(huán)境中是熟知的。其它的系統(tǒng)，例如在美國專利5,585,858和4,616,327中所描述的系統(tǒng)，由觀眾設(shè)備以預(yù)定的文本或圖形，提供有限的介紹。如美國專利4,839,743，4,786,967和4,847,700所描述的某些系統(tǒng)，通過少量改變同時(shí)廣播的視頻和音頻道中選擇，提供音頻和/或視頻的個(gè)性化，此選擇在觀眾的設(shè)備上實(shí)現(xiàn)。
需要這樣的系統(tǒng)，借此使視頻對象的位置和定時(shí)以及音頻事件為觀眾的顯示設(shè)備所知，給這種設(shè)備以靈活性，按適應(yīng)的方式遍及整個(gè)演示而不是在有限的點(diǎn)上，在其認(rèn)定合適的時(shí)間和位置加入不引起干擾的圖形或音頻。這種能力將使觀眾的設(shè)備產(chǎn)生協(xié)同的視頻/音頻/圖形演示，無須觀眾在演示過程中的主動參與。這種系統(tǒng)必須允許協(xié)調(diào)未預(yù)先存儲的圖形內(nèi)容如廣播新聞公告，以及執(zhí)行靜止或動畫視頻圖形重疊，視頻疊加或替代，還有與演示的現(xiàn)有視頻和音頻內(nèi)容協(xié)調(diào)的音頻替換。
本發(fā)明是用以規(guī)定及使用信息的一系統(tǒng)，它使與數(shù)字視頻演示的視頻和音頻演播協(xié)同顯示或演播音頻、視頻或圖形對象成為可能。由此得以提高的演示可通過廣播或以點(diǎn)播電視腳本的方式得到。在視頻分配系統(tǒng)上，視頻可從象陸地電視廣播那樣的單向系統(tǒng)中得到，或者利用雙向通信，如象帶有返回信道能力的光纖/同軸混合有線系統(tǒng)。
本發(fā)明通過在視頻或音頻演示中定義視頻和音頻“窗口(holes)”，在這些窗口中沒有明顯的視頻或音頻活動，使得能夠協(xié)同演示附加的音頻、視頻或圖形。上述的“窗口”的位置和時(shí)間都處在視頻演示之中，圖形或音頻對象由STB(機(jī)頂盒)合適地呈現(xiàn)在這些“窗口”中，STB被告知與這些“窗口”相關(guān)的位置和/或時(shí)間，以及其它的信息，這些信息表示STB需要呈現(xiàn)的素材的特性。
用了這些信息，本發(fā)明允許STB明智地安放圖形對象到屏幕上或演播的音頻或視頻內(nèi)容中，并避免干擾視頻對象或音頻事件。由STB顯示的圖形對象可以是靜態(tài)的或動態(tài)的，即動畫方式的。這樣，本發(fā)明還能夠產(chǎn)生視頻演示，其中在原始視頻或動畫中的對象與通過觀眾的設(shè)備添加的視頻或圖形對象協(xié)同交互以及移動。例如，一卡通可被產(chǎn)生，其中幾個(gè)角色可同時(shí)在屏幕上見到，并且一個(gè)“窗口”留給附加的動畫角色，該角色由觀眾的設(shè)備如STB所添加。
另外，“窗口”可被定義在相對不重要的角色位置上，這個(gè)角色能被STB-動畫角色所遮蔽。當(dāng)觀眾的STB不支持本發(fā)明時(shí)，將仍然能看到?jīng)]有視頻“窗口”的演示。關(guān)于什么類型的角色可被添加，加在屏蔽上什么位置，什么時(shí)間，以及可選擇的此附加角色的運(yùn)動信息，必需在角色顯示之前遞交給STB。
類似地，此發(fā)明允許協(xié)調(diào)演示的音頻內(nèi)容和由STB產(chǎn)生的音頻內(nèi)容之間的音頻播放。
此發(fā)明允許由STB產(chǎn)生的視頻，圖形或音頻內(nèi)容的個(gè)性化。個(gè)性化是通過觀眾當(dāng)他或她指定幾個(gè)個(gè)人參數(shù)，例如經(jīng)觀眾界面輸入的名字及年齡而得到的。接著以上的例子，孩子的名字也可以被輸入到STB的個(gè)性化信息中，當(dāng)觀看準(zhǔn)備好的演示時(shí)，當(dāng)此角色呈現(xiàn)在視頻“窗口”位置時(shí)，STB-動畫角色能顯示這個(gè)孩子的名字。另外，在音頻“窗口”期間STB可以播放孩子名字的音頻剪輯。個(gè)性化的音頻或視頻剪輯可被記錄及存儲在STB中為協(xié)同播放時(shí)使用。
這樣，本發(fā)明允許單一版本的素材如卡通演示被生成和廣播，仍然可被不同觀眾有差別地見到和聽到，以及對他們進(jìn)行專門的剪裁，原始演示和由觀眾的STB產(chǎn)生并送到“窗口”中的圖形和/或音頻加在一起，混合的演示得以有效地生成。
相應(yīng)地，在本發(fā)明的個(gè)性化信息中，音頻和視頻片段以及可能有的“窗口”信息被存儲在STB中。STB接收嵌有“窗口”信息的多媒體演示流?！按翱凇毙畔⑹窃趧?chuàng)作階段嵌進(jìn)流中，此時(shí)演示的創(chuàng)作者確定“窗口”的位置和時(shí)間。此“窗口”信息在STB被取出，同時(shí)音頻和視頻片段還有預(yù)先存儲在STB中的個(gè)性化信息同此“窗口”相協(xié)調(diào)，并且與多媒體演示被協(xié)同播放。


圖1是一監(jiān)示器屏幕的視圖，用視頻“窗口”指示的“位置”顯示動畫演示。
圖2是如同圖1同樣屏幕的視圖，在視頻“窗口”位置外加STB-動畫角色。
圖3是一流程圖，顯示包含在提取和處理多媒體演示流中“窗口”信息的步驟。
圖4給出提取“窗口”信息和顯示協(xié)同內(nèi)容所必需的設(shè)備。
按照本發(fā)明，準(zhǔn)備和播放與STB視頻圖形顯示和/或音頻、視頻播放協(xié)調(diào)演示所必需的步驟包括1.在創(chuàng)作階段定義視頻和音頻“窗口”，并當(dāng)成控制信號的一部分把它們嵌到具有視頻和音頻的演示流中；2.在觀眾的STB上執(zhí)行個(gè)性化；3.遞交此演示流到觀眾的STB；4.由STB從演示流中提取控制信息并做分析；5.與STB在“窗口”時(shí)間和位置上提供的圖形，音頻，或視頻對象一起，顯示演示流的視頻和音頻。創(chuàng)作階段為了指定視頻和音頻“窗口”的位置和時(shí)間，視頻演示必需用控制信息做上標(biāo)記。在此優(yōu)選實(shí)施例中，這是通過使用作標(biāo)記處理的創(chuàng)作導(dǎo)流脫機(jī)完成的，并在美國專利申請09/032,491中做了說明。
通過向STB指出視頻“窗口”，控制信息也可以實(shí)時(shí)地加到現(xiàn)場演播中。STB將使用此信息去顯示與節(jié)目(例如新聞或體育節(jié)目)相關(guān)聯(lián)的文本，并隨著視頻和音頻一起廣播。用以顯示的文本的選擇可以根據(jù)已經(jīng)存儲在STB中的個(gè)性化信息進(jìn)行。
創(chuàng)作系統(tǒng)接受作為輸入的視頻/音頻內(nèi)容。創(chuàng)作者在全部內(nèi)容中標(biāo)記視頻和/或音頻“窗口”的位置。這樣產(chǎn)生的標(biāo)記由創(chuàng)作系統(tǒng)使用以生成描述這些“窗口”的控制信息，這些“窗口”被插入到視頻/音頻內(nèi)容中。
在此優(yōu)選實(shí)施例中，控制信號采用HTML標(biāo)記的形式，它指出1.“窗口”標(biāo)識符，用于配合“窗口”插入應(yīng)用，2.“窗口”類型，例如視頻或音頻，3.“窗口”的開始時(shí)間，4.“窗口”的結(jié)束時(shí)間，5.“窗口”的開始屏幕位置，例如在視頻影像中的x，y坐標(biāo)，6.“窗口”的結(jié)束屏幕位置，例如在視頻影像中的x，y坐標(biāo)，7.在視頻中“窗口”運(yùn)動的運(yùn)動矢量，
8.要被插進(jìn)視頻“窗口”中的位圖描述，以及9.被插入音頻的音量級別。
自動對象識別可被加入到創(chuàng)作系統(tǒng)中以簡化創(chuàng)作過程。創(chuàng)作者指出視頻對象，例如一不太重要的角色的起始位置，那么其后繼位置被創(chuàng)作系統(tǒng)檢測出，隨著對象的移動它把合適的控制信息插入到流中。
對于數(shù)字視頻流，可以采用運(yùn)動圖象專家組(MPEG-2)對音頻和視頻信號壓縮，以及MPEG-2系統(tǒng)傳送以傳送這些信號。由于數(shù)字視頻要求高的位率，在通過網(wǎng)絡(luò)傳輸之前，壓縮的方法通常被用到視頻上。在此優(yōu)選實(shí)施例中，視頻和音頻內(nèi)容使用MPEG-2壓縮進(jìn)行壓縮，如同在ISO/IEC 13818-2對視頻和ISO/IEC 13818-3對音頻詳細(xì)說明的那樣。
MPEG-2標(biāo)準(zhǔn)還指出由音頻和視頻元素流組成的演示如何在“傳輸流”中被復(fù)合在一起，這是在MPEG-2系統(tǒng)規(guī)范，ISO/IEC 13818-1中指定的。MPEG-2系統(tǒng)規(guī)范通過使用“私有數(shù)據(jù)”流，提供演示傳輸流中的非視頻和非音頻流的內(nèi)容。全部傳輸流包不管其內(nèi)容，都是一樣的大小(188字節(jié))和格式。“節(jié)目特有信息”也被裝入傳輸流中，該攜帶的信息涉及哪些元素流已復(fù)合到傳輸流中，它們攜帶了什么類型的內(nèi)容，以及它們?nèi)绾伪环纸?。在此?shí)施例中，控制信息被裝入MPEG-2傳輸流的私有數(shù)據(jù)流。
在使用MPEG-2視頻的實(shí)施例中，“窗口”開始和結(jié)束時(shí)間的技術(shù)要求在“窗口”出現(xiàn)的那些幀的演示時(shí)間標(biāo)記(PTS)項(xiàng)中被規(guī)定。PTS通常出現(xiàn)在每個(gè)第三幀的各個(gè)幀中，這樣用以同步已是足夠了，因?yàn)閷TSC視頻其幀率是30幀/每秒。視頻“窗口”為矩形，于是由一(x，y)坐標(biāo)對來指示。其它實(shí)施例可使用更復(fù)雜的多邊形以描述視頻“窗口”的形狀，這就要求更多坐標(biāo)和說明那一個(gè)多邊形要被使用，在開始和結(jié)束屏幕位置之間視頻“窗口”的移動是線性的。另外，更復(fù)雜的功能可在其它的實(shí)施例中被指定，以描述視頻“窗口”的運(yùn)動。遞交階段作為本發(fā)明的功能，控制信息可被特意地產(chǎn)生，用處在視頻和/或音頻中的“窗口”以供STB插入內(nèi)容。為了對那些他們的STB不支持本發(fā)明的觀眾展現(xiàn)完整的演示，“窗口”實(shí)際上可以是視頻或音頻的缺省單元。未針對本發(fā)明設(shè)計(jì)的演示可被改型以適應(yīng)本發(fā)明，即可在能被重疊的現(xiàn)存內(nèi)容區(qū)域和/或聲音處找到“窗口”。
在形成控制信息以后，視頻演示與這種控制信息一起，依靠以下方式可以送到觀眾的STBa.在模擬視頻信號的視頻消隱期間被傳送，并以類似于閉路字幕信息所用的方式由觀眾的設(shè)備提?。籦.在獨(dú)立的殘留邊帶信道上傳送；c.在數(shù)字視頻/音頻流中傳送，并以類似于提取視頻或音頻流所用的方式由觀眾的設(shè)備提取。STB圖4顯示本發(fā)明所必需的典型設(shè)備，包括電視機(jī)或監(jiān)示器屏幕4，接收多媒體演示的電纜6，STB 5用以接收、處理及通過電纜7傳送要在監(jiān)示器屏幕4上顯示的作為結(jié)果的演示。MPEG-2分配器，MPEG-2音頻解碼器和MPEG-2視頻解碼器現(xiàn)在廣泛地可以得到。C-CubeC19110傳輸分配器，C-Cube C19100 MPEG-2視頻解碼器，和CrystalSemiconductor CS4920 MPEG音頻解碼器就是例證。在此優(yōu)選實(shí)施例中，視頻和音頻解碼器可用一單個(gè)芯片一起實(shí)現(xiàn)，例如用IBM CD21MPEG-2音頻/視頻解碼器。如果音頻和視頻解碼器不結(jié)合在一起，在解碼器的輸出端為了從數(shù)字轉(zhuǎn)換為模擬，以及在視頻的情況下編碼到所要求的視頻模擬信號格式如NTSC，PAL或SECAM，中間集成電路是必需的。來自這些集成電路的S-Video輸出是可選項(xiàng)。
重疊視頻內(nèi)容的屏幕上圖形對象，通過使用STB中MPEG-2視頻解碼器的屏幕顯示(OSD)功能而被成像。這些解碼器按提供的OSD的先進(jìn)技術(shù)和用于控制OSD的應(yīng)用程序接口(API)而有不同。各個(gè)象元能被尋址，并且位圖被用于許多文本和圖形對象。最小等級的OSD圖形能力提供16種顏色。更可取的能力提供256種顏色以及多級混合能力。OSD的混合能力允許改變圖形重疊的不透明程度。
音頻內(nèi)容的重疊在MPEG音頻情況下由STB音頻解碼器執(zhí)行，或由利用API到媒體播放器的STB處理器執(zhí)行。被這種播放器支持的文件格式包括“.wav”，“.rmi”和“.mid”。另外，音頻播放功能能被加入到STB自身的應(yīng)用中。
視頻的替換或添加能由STB中另一視頻解碼器執(zhí)行。具有“畫中畫”能力的系統(tǒng)能使用這一特性以添加或替換視頻對象。
在兩種情況下都是用STB的音頻輸出使播放的音頻與原始的音頻演示混合或先取原始音頻。在另外的實(shí)施例中，其中可以得到二個(gè)聲道，一個(gè)用于音樂，一個(gè)用于對話，在準(zhǔn)許前者象往常一樣工作的同時(shí)，STB能替換后一聲道的內(nèi)容。
要被觀看的本發(fā)明的演示，可使用NTSC或PAL模擬電視標(biāo)準(zhǔn)以及ATSC或DVB數(shù)字電視標(biāo)準(zhǔn)廣播，在其它實(shí)施例中，演示可被觀看并基于每個(gè)用戶進(jìn)行控制，如象使用點(diǎn)播電視系統(tǒng)或從錄像帶觀看。
實(shí)現(xiàn)本發(fā)明所需的處理能力很容易同當(dāng)前大多數(shù)STB中起始值粗略為1MIPS的處理器的處理能力相適應(yīng)，此處理器運(yùn)行視頻/音頻內(nèi)容的插入請求，并且控制OSD和音頻功能的使用。
STB 5通常具有1到4MB的RAM，本發(fā)明的程序需要下載到或存儲在STB的RAM中，它大約要占據(jù)0.5MB。
對于家庭中全部觀眾，只需要少量STB 5存儲器來存儲個(gè)性化信息。在此優(yōu)選實(shí)施例中，對每個(gè)觀眾的個(gè)性化信息包括1.名字，2.年齡，3.內(nèi)容限制，例如PG-13，4.文本選擇，例如大字體，5.允許音頻替換，6.允許視頻替換，及7.指向與觀眾關(guān)聯(lián)的光標(biāo)的指針。這些信息需要存儲在不易失存儲器中，為的是在觀眾的STB電源關(guān)閉或電源故障時(shí)信息仍能保持。為此目的一般的STB都有不易失RAM。
圖1和圖2給出作為示例的屏幕顯示，它與為協(xié)同播放最初準(zhǔn)備的演示相對應(yīng)。圖1顯示具有一個(gè)視頻角色20的動畫節(jié)目屏10?！按翱凇?0的位置用點(diǎn)劃線40表示圍繞“窗口”30的點(diǎn)劃線40只是一示例并不會出現(xiàn)在實(shí)際節(jié)目上。關(guān)于“窗口”30位置的控制信息被嵌在視頻流中并由STB來提取。
圖2是帶有附加STB動畫角色50的相同屏幕，角色50被顯示在“窗口”30的位置上。另外，STB還可能利用“窗口”30顯示例如描述上述角色的圖形文本。
還可以利用尋找自然出現(xiàn)在音頻和視頻演示中“窗口”30位置的機(jī)制以制備演示。另外，通過現(xiàn)存聲道的空白部分或影像屏的陰暗部分，將“窗口”30產(chǎn)生在演示中。
裝載到STB并用于分析視頻演示流的控制數(shù)據(jù)，以及在演示的“窗口”中顯示存儲在STB中的信息的應(yīng)用，其邏輯流程視示于圖3，當(dāng)前演示的程序說明信息(PSI)在步驟80被分析。在步驟81確定是否關(guān)于“窗口”位置的任何控制信息隨此演示而到來。如該信息將不到來，程序控制返回到步驟80，并且下一演示將被分析。如果信息將會到來，那么在步82多路分解器隊(duì)列被設(shè)置以接收此信息。在步83，判斷控制數(shù)據(jù)是否已經(jīng)到達(dá)多路分解器隊(duì)列。如果沒有，步83的檢測被重復(fù)。當(dāng)信息已達(dá)到隊(duì)列時(shí)，它在步84被分析以查明HTML標(biāo)記。在步85將HTML標(biāo)記與“窗口”信息匹配，如果不匹配，程序控制返回到步83，如果匹配，步86把接收的數(shù)據(jù)賦給相關(guān)的變量，并返回程序控制到步83。
當(dāng)全部關(guān)于“窗口”的信息和重疊信息被分析并安裝到STB時(shí)，則它變成了簡單的公眾所知的STB任務(wù)，用以在視頻監(jiān)示器上顯示演示流的同時(shí)，在給定“窗口”處疊加內(nèi)容與疊加數(shù)據(jù)相協(xié)調(diào)。類似的處理也應(yīng)用到音頻“窗口”處。
當(dāng)本發(fā)明已被專門地展示并通過優(yōu)選實(shí)施例的具體描述后，在熟悉本領(lǐng)域的人士都會懂得，形式上內(nèi)容上、前面的和其它的改變都可能做出。這些都不會脫離本發(fā)明范圍的形式和精神，只受所附的權(quán)利要求書范圍的限制。
權(quán)利要求
1.一種與多媒體演示協(xié)同地顯示音頻、視頻和圖形單元內(nèi)容的方法，多媒體演示具有指示顯示所說的音頻、視頻和圖形單元的預(yù)定位置和時(shí)間的“窗口”，此方法包括傳送多媒體演示流到接收裝置；判斷是否所說的“窗口”信息被嵌在上述多媒體演示流中；提取所說的“窗口”信息；以及與所說多媒體演示協(xié)同，在上述多媒體演示的所說“窗口”中顯示所說的音頻，視頻和圖形單元。
2.按照權(quán)利要求1的方法，其中所說的音頻，視頻以及圖形單元被存儲在上述接收裝置中。
3.按照權(quán)利要求2的方法，其中所說的音頻，視頻以及圖形單元與所說的多媒體演示有聯(lián)系。
4.按照權(quán)利要求3的方法，其中所說的“窗口”信息在傳送步驟之前的創(chuàng)作步被確定，并被嵌入到多媒體演示流中。
5.按照權(quán)利要求4的方法，其中所說的“窗口”信息允許在上述接收裝置中經(jīng)用戶接口而被改變。
6.按照權(quán)利要求5的方法，其中所說的“窗口”信息包括與插入應(yīng)用相配合的標(biāo)識符，媒體類型，開始時(shí)間，結(jié)束時(shí)間，開始屏幕位置，結(jié)束屏幕位置，視頻中運(yùn)動的運(yùn)動矢量，在所說視頻要被插入時(shí)其位圖的描述，以及在音頻要被插入時(shí)其音量的等級。
7.按照權(quán)利要求6的方法，其中所說的“窗口”信息按下述方式而被規(guī)定所顯示的音頻、視頻以及圖形單元將不干擾觀看所說的多媒體演示。
8.按照權(quán)利要求7的方法，其中所說的“窗口”信息與所說多媒體演示中可見對象相協(xié)調(diào)而被規(guī)定。
9.按照權(quán)利要求8的方法，其中所說的“窗口”信息按下述方式而被規(guī)定，音頻播放可被執(zhí)行，不干擾所說多媒體演示中的聲音。
10.按照權(quán)利要求9的方法，其中所說的“窗口”信息按下述方式而被規(guī)定音頻單元可與所說多媒體演示的音頻單元協(xié)同產(chǎn)生。
11.按照權(quán)利要求10的方法，其中所說的“窗口”信息用于以不干擾所說多媒體演示的視聽方式顯示上述音頻，視頻和圖形單元。
12.按照權(quán)利要求11的方法，其中所說的“窗口”信息用于顯示與所說多媒體演示的音頻視頻和圖形單元相協(xié)調(diào)的上述音頻，視頻以及圖形單元，根據(jù)上述多媒體演示內(nèi)容和所說音頻，視頻和圖形單元內(nèi)容的結(jié)合，形成協(xié)調(diào)的演示混合。
13.按照權(quán)利要求12的方法，其中個(gè)性化信息是通過所說用戶接口，存儲在所說的接收裝置中。
14.按照權(quán)利要求13的方法，其中所說的個(gè)性化信息包括所說觀眾的名字，觀眾的年齡，對上述觀眾的內(nèi)容限制，文本選擇，音頻替換允許開關(guān)，視頻替換允許開關(guān)，以及指向與觀眾相關(guān)的光標(biāo)的指針。
15.一種可被機(jī)器讀取的計(jì)算機(jī)程序裝置，它實(shí)際地包含有可由機(jī)器執(zhí)行的程序指令，以實(shí)現(xiàn)與多媒體演示協(xié)同顯示音頻，視頻和圖形單元內(nèi)容的方法步驟，上述多媒體演示具有指示顯示所說音頻，視頻以及圖形單元的預(yù)定位置和時(shí)間的“窗口”，此方法包括傳送多媒體演示流到接收裝置；判斷是否所說的“窗口”信息被嵌在上述多媒體演示流中；提取所說的“窗口”信息；以及與所說多媒體演示協(xié)同，在上述多媒體演示的所說“窗口”中顯示所說的音頻，視頻和圖形單元。
16.按照權(quán)利要求15的方法，其中所說的音頻，視頻以及圖形單元被存儲在上述接收裝置中。
17.按照權(quán)利要求16的方法，其中所說的音頻，視頻以及圖形單元與所說的多媒體演示有聯(lián)系。
18.按照權(quán)利要求17的方法，其中所說的“窗口”信息在傳送步驟之前的創(chuàng)作步被確定，并被嵌入到多媒體演示流中。
19.按照權(quán)利要求18的方法，其中所說的“窗口”信息允許在上述接收裝置中經(jīng)用戶接口而被改變。
20.按照權(quán)利要求19的方法，其中所說的“窗口”信息包括與插入應(yīng)用相配合的標(biāo)識符，媒體類型，開始時(shí)間，結(jié)束時(shí)間，開始屏幕位置，結(jié)束屏幕位置，視頻中運(yùn)動的運(yùn)動矢量，在所說視頻要被插入時(shí)其位圖的描述，以及在音頻要被插入時(shí)其音量的等級。
21.按照權(quán)利要求20的方法，其中所說的“窗口”信息按下述方式而被規(guī)定所顯示的音頻、視頻以及圖形單元將不干擾觀看所說的多媒體演示。
22.按照權(quán)利要求21的方法，其中所說的“窗口”信息與所說多媒體演示中可見對象相協(xié)調(diào)而被規(guī)定。
23.按照權(quán)利要求22的方法，其中所說的“窗口”信息按下述方式而被規(guī)定音頻播放可被執(zhí)行，不干擾所說多媒體演示中的聲音。
24.按照權(quán)利要求23的方法，其中所說的“窗口”信息按下述方式而被規(guī)定音頻單元可與所說多媒體演示的音頻單元協(xié)同產(chǎn)生。
25.按照權(quán)利要求24的方法，其中所說的“窗口”信息用于以不干擾所說多媒體演示的視聽方式顯示上述音頻，視頻和圖形單元。
26.按照權(quán)利要求25的方法，其中所說的“窗口”信息用于顯示與所說多媒體演示的音頻視頻和圖形單元相協(xié)調(diào)的上述音頻，視頻以及圖形單元，根據(jù)上述多媒體演示內(nèi)容和所說音頻，視頻和圖形單元內(nèi)容的結(jié)合，形成協(xié)調(diào)的演示混合。
27.按照權(quán)利要求26的方法，其中個(gè)性化信息是通過所說用戶接口，存儲在所說的接收裝置中。
28.按照權(quán)利要求27的方法，其中所說的個(gè)性化信息包括所說觀眾的名字，觀眾的年齡，對上述觀眾的內(nèi)容限制，文本選擇，音頻替換允許開關(guān)，視頻替換允許開關(guān)，以及指向與觀眾相關(guān)的光標(biāo)的指針。
全文摘要
一種用以協(xié)調(diào)和顯示與多媒體演示相結(jié)合的圖形或播放音頻或視頻的方法。如象文本或畫面的圖形對象,它們可以是動畫表示的,被顯示在觀眾的設(shè)備上。設(shè)備通常是先進(jìn)的播放視頻和音頻的電視或機(jī)頂盒。圖形對象被顯示在附加在視頻對象位置的位置上。類似地,存儲在機(jī)頂盒或嵌入到流中的音頻或視頻片段,在合適的時(shí)間可顯示在演示中被稱做視頻和音頻“窗口”的屏幕位置上。描述這些“窗口”的數(shù)據(jù)以及其它控制信息被嵌入到視頻流中,并且由觀眾的STB提取用以協(xié)調(diào)協(xié)同播放。
文檔編號H04N7/081GK1256583SQ9912434
公開日2000年6月14日 申請日期1999年11月24日 優(yōu)先權(quán)日1998年11月25日
發(fā)明者理查德·斯蒂芬·切爾諾克, 波羅·迪特里, 弗蘭克·安德雷·沙法, 戴維·伊斯萊爾·塞德曼 申請人:國際商業(yè)機(jī)器公司