專利名稱:一種多媒體數(shù)據(jù)流的剪輯方法及系統(tǒng)的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域,尤其涉及ー種多媒體數(shù)據(jù)流的剪輯方法及系統(tǒng)。
背景技術(shù):
電影、電視劇、音樂作品等通常都需要制作音/視頻剪輯來進行宣傳。為了達到好的宣傳效果,需要保留能夠帶給觀眾好的觀看感受的片段,而不是相對平淡的片段?,F(xiàn)有方法通過人工剪輯方式來實現(xiàn),導(dǎo)演和剪輯人員根據(jù)經(jīng)驗來判斷保留哪些片段作為剪輯。此方法有以下缺陷増加了人的工作量,所保留的片段可能不是最能夠帶給觀眾好的觀看感受的片段
發(fā)明內(nèi)容
本發(fā)明提供一種更加完善的多媒體數(shù)據(jù)流的剪輯方法及系統(tǒng)。為了提供一種更加完善的多媒體數(shù)據(jù)流的剪輯方法及系統(tǒng),本發(fā)明采取以下技術(shù)方案。ー種多媒體數(shù)據(jù)流的剪輯方法,包括對觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情進行監(jiān)控;根據(jù)觀眾的面部表情從所述多媒體數(shù)據(jù)流中截取至少ー個片段;將截取的片段進行組接完成剪輯。進ー步地,根據(jù)觀眾的面部表情從所述多媒體數(shù)據(jù)流中截取至少ー個片段的方法包括根據(jù)預(yù)設(shè)原則從所監(jiān)控到的面部表情中選擇至少ー個符合要求的面部表情;從所述多媒體數(shù)據(jù)流中截取觀眾產(chǎn)生所述符合要求的面部表情時所觀看的片段。進ー步地,從所述多媒體數(shù)據(jù)流中截取觀眾產(chǎn)生所述符合要求的面部表情時所觀看的片段的方法包括記錄觀眾產(chǎn)生所述符合要求的面部表情時所觀看的多媒體數(shù)據(jù)流的時間點;從所述時間點之前的時間長度Tl開始,到所述時間點之后的時間長度T2結(jié)束,截取這段時間內(nèi)的片段。進ー步地,根據(jù)預(yù)設(shè)原則從所監(jiān)控到的面部表情中選擇至少ー個符合要求的面部表情的方法具體為根據(jù)預(yù)設(shè)的正面表情樣本和/或負(fù)面表情樣本,對所監(jiān)控到的面部表情進行篩選,篩選出至少ー個符合要求的面部表情。進ー步地,所述正面表情樣本包括人在高興、激動、恐懼和/或驚訝時的標(biāo)準(zhǔn)表情樣本;所述負(fù)面表情樣本包括人在睡覺、打盹和/或聊天時的標(biāo)準(zhǔn)表情樣本。進ー步地,根據(jù)預(yù)設(shè)原則從所監(jiān)控到的面部表情中選擇至少ー個符合要求的面部表情的方法具體為對所監(jiān)控到的各個面部表情進行量化,得到與各個面部表情對應(yīng)的體驗度數(shù)量值;選擇體驗度數(shù)量值排名靠前的至少ー個面部表情作為符合要求的面部表情。進ー步地,所述多媒體數(shù)據(jù)流為視頻數(shù)據(jù)流和/或音頻數(shù)據(jù)流。ー種多媒體數(shù)據(jù)流的剪輯系統(tǒng),包括監(jiān)控單元和截取處理單元和剪輯處理単元所述監(jiān)控単元用于對觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情進行監(jiān)控;所述截取處理單元用于根據(jù)觀眾的面部表情從所述多媒體數(shù)據(jù)流中截取至少ー個片段;所述剪輯處理單元用于將截取的片段進行組接完成剪輯。進ー步地,所述截取處理單元包括選擇單元和截取單元所述選擇単元用于根據(jù)預(yù)設(shè)原則從所監(jiān)控到的面部表情中選擇至少ー個符合要求的面部表情;所述截取単元用于從所述多媒體數(shù)據(jù)流中截取觀眾產(chǎn)生所述符合要求的面部表情時所觀看的片段。進ー步地,所述截取単元包括記錄子単 元和截取子単元所述記錄子単元用于記錄觀眾產(chǎn)生所述符合要求的面部表情時所觀看的多媒體數(shù)據(jù)流的時間點;所述截取子単元用于從所述時間點之前的時間長度Tl開始,到所述時間點之后的時間長度T2結(jié)束,截取這段時間內(nèi)的片段。進ー步地,所述選擇単元包括量化處理單元和第一選擇子単元,其中,所述量化處理單元用于對所監(jiān)控到的各個面部表情進行量化,得到與各個面部表情對應(yīng)的體驗度數(shù)量值,所述第一選擇子単元用于選擇體驗度數(shù)量值排名靠前的至少ー個面部表情作為符合要求的面部表情;或者所述選擇単元具體為第二選擇子単元,用于根據(jù)預(yù)設(shè)的正面表情樣本和/或負(fù)面表情樣本,對所監(jiān)控到的面部表情進行篩選,篩選出至少ー個符合要求的面部表情。本發(fā)明的有益效果是通過對觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情的監(jiān)控,根據(jù)觀眾的面部表情從多媒體數(shù)據(jù)流中截取片段完成剪輯,相對于現(xiàn)有的剪輯方式而言,減少了人的工作量,而且剪輯中所保留的片段均是能夠帶給觀眾好的觀看感受的片段。
圖I為本發(fā)明一實施例提供的多媒體數(shù)據(jù)流的剪輯方法的流程圖;圖2為本發(fā)明一實施例提供的多媒體數(shù)據(jù)流的剪輯系統(tǒng)的示意圖。
具體實施例方式本發(fā)明的主要構(gòu)思是,選擇ー些觀眾對多媒體數(shù)據(jù)流進行預(yù)先觀看,根據(jù)這些觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情截取片段,完成剪輯。其中,多媒體數(shù)據(jù)流為視頻數(shù)據(jù)流和/或音頻數(shù)據(jù)流。圖I為本發(fā)明一實施例提供的多媒體數(shù)據(jù)流的剪輯方法的流程圖,如圖I所示,該多媒體數(shù)據(jù)流的剪輯方法包括如下步驟S101、對觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情進行監(jiān)控。優(yōu)選的,選擇n (n > I)個觀眾對多媒體數(shù)據(jù)流進行預(yù)先觀看,監(jiān)控這η個觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情,并記錄各觀眾的各個面部表情與產(chǎn)生該面部表情時觀眾所觀看的多媒體數(shù)據(jù)流的時間點,建立各觀眾的各個面部表情與多媒體數(shù)據(jù)流的時間點的對應(yīng)關(guān)系。將各觀眾的各個面部表情、時間點及該對應(yīng)關(guān)系保存至存儲空間。S102、根據(jù)觀眾的面部表情從所述多媒體數(shù)據(jù)流中截取至少ー個片段。優(yōu)選的,步驟S102可以進一歩包括以下步驟步驟S102a、根據(jù)預(yù)設(shè)原則從所監(jiān)控到的面部表情中選擇至少ー個符合要求的面部表情。當(dāng)觀眾人數(shù)大于I時,對每個觀眾,分別選擇至少ー個符合要求的面部表情。步驟S102a的實現(xiàn)方式包括但不局限于以下兩種
其一、根據(jù)預(yù)設(shè)的正面表情樣本和/或負(fù)面表情樣本,對所監(jiān)控到的面部表情進行篩選,篩選出至少ー個符合要求的面部表情。優(yōu)選的,正面表情樣本包括人在高興、激動、恐懼和/或驚訝時的標(biāo)準(zhǔn)表情樣本;負(fù)面表情樣本包括人在睡覺、打盹和/或聊天時的標(biāo)準(zhǔn)表情樣本。根據(jù)預(yù)設(shè)的正面表情樣本,對所監(jiān)控到的面部表情進行篩選的可以是將所監(jiān)控到的面部表情與正面表情樣本對比,將與正面表情樣本匹配的面部表情篩選出來,作為符合要求的面部表情。根據(jù)預(yù)設(shè)的負(fù)面表情樣本,對所監(jiān)控到的面部表情進行篩選的可以是將所監(jiān)控到的面部表情與負(fù)面表情樣本對比,將與負(fù)面表情樣本匹配的面部表情篩選出去,將剩余的面部表情作為符合要求的面部表情。其ニ、對所監(jiān)控到的各個面部表情進行量化,得到與各個面部表情對應(yīng)的體驗度數(shù)量值;選擇體驗度數(shù)量值排名靠前的至少ー個面部表情作為符合要求的面部表情。
步驟S102b、從所述多媒體數(shù)據(jù)流中截取觀眾產(chǎn)生所述符合要求的面部表情時所觀看的片段。步驟S102b的實現(xiàn)方式包括但不局限于以下所列舉的步驟bl、記錄觀眾產(chǎn)生所述符合要求的面部表情時所觀看的多媒體數(shù)據(jù)流的時間點,進入步驟b2。如果在步驟SlOl中,已經(jīng)記錄了各觀眾的各個面部表情與產(chǎn)生該面部表情時觀眾所觀看的多媒體數(shù)據(jù)流的時間點,建立各觀眾的各個面部表情與多媒體數(shù)據(jù)流的時間點的對應(yīng)關(guān)系。那么步驟bl中,只需要根據(jù)所述符合要求的面部表情從該對應(yīng)關(guān)系中查找出對應(yīng)的時間點即可,不需要重復(fù)記錄時間點。步驟b2、將所述符合要求的面部表情所對應(yīng)的多媒體數(shù)據(jù)流的時間點作為基點,從該時間點之前的時間長度Tl開始,到該時間點之后的時間長度T2結(jié)束,截取這段時間內(nèi)的片段。Tl等于或不等于T2。截取這段時間內(nèi)的片段之后,對于該時間點之前的時間長度Tl以內(nèi)和/或該時間點之后的時間長度T2以內(nèi)所監(jiān)控到的面部表情可以直接刪除,不做表情樣本的比對或量化處理,以節(jié)省時間和簡化操作。S103、將截取的片段進行組接完成剪輯。圖2為本發(fā)明一實施例提供的多媒體數(shù)據(jù)流的剪輯系統(tǒng)的示意圖,如圖2所示,多媒體數(shù)據(jù)流的剪輯系統(tǒng)包括監(jiān)控單元I和截取處理單元2和剪輯處理単元3,其中,選擇η(η ^ I)個觀眾對多媒體數(shù)據(jù)流進行預(yù)先觀看,監(jiān)控單元I用于對這η個觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情進行監(jiān)控;并記錄各觀眾的各個面部表情與產(chǎn)生該面部表情時觀眾所觀看的多媒體數(shù)據(jù)流的時間點,建立各觀眾的各個面部表情與多媒體數(shù)據(jù)流的時間點的對應(yīng)關(guān)系,將各觀眾的各個面部表情、時間點及該對應(yīng)關(guān)系保存至存儲空間。截取處理單元2用于根據(jù)監(jiān)控單元I所監(jiān)控到的觀眾的面部表情從多媒體數(shù)據(jù)流中截取至少ー個片段。剪輯處理単元3用于將截取的片段進行組接完成剪輯。進ー步地,截取處理單元2包括選擇單元21和截取單元22 ;選擇單元21用于根據(jù)預(yù)設(shè)原則從所監(jiān)控到的面部表情中選擇至少ー個符合要求的面部表情;截取單元22用于從所述多媒體數(shù)據(jù)流中截取觀眾產(chǎn)生所述符合要求的面部表情時所觀看的片段。進ー步地,選擇單元21包括量化處理單元211和第一選擇子單元212,其中,量化處理單元211用于對所監(jiān)控到的各個面部表情進行量化,得到與各個面部表情對應(yīng)的體驗度數(shù)量值;第一選擇子単元212用于選擇體驗度數(shù)量值排名靠前的至少ー個面部表情作為符合要求的面部表情?;蛘哌x擇單元21具體為第二選擇子単元,用于根據(jù)預(yù)設(shè)的正面表情樣本和/或負(fù)面表情樣本,對所監(jiān)控到的面部表情進行篩選,篩選出至少ー個符合要求的面部表情;預(yù)設(shè)的正面表情樣本和/或負(fù)面表情樣本可以保存在存儲空間中。進ー步地,截取單元22包括記錄子單元221和截取子單元222 ;記錄子單元221用于記錄觀眾產(chǎn)生所述符合要求的面部表情時所觀看的多媒體數(shù)據(jù)流的時間點;截取子単元222用于從所述時間點之前的時間長度Tl開始,到所述時間點之后的時間長度T2結(jié)束,截取這段時間內(nèi)的片段。本發(fā)明通過選擇ー些觀眾對多媒體數(shù)據(jù)流進行預(yù)先觀看,根據(jù)這些觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情,從多媒體數(shù)據(jù)流中截取片段完成剪輯,相對于現(xiàn)有的剪輯方式而言,減少了人的工作量,而且剪輯中所保留的片段均是能夠帶給觀眾好的觀 看感受的片段。以上內(nèi)容是結(jié)合具體的實施方式對本發(fā)明所作的進ー步詳細(xì)說明,不能認(rèn)定本發(fā)明的具體實施只局限于這些說明。對于本發(fā)明所屬技術(shù)領(lǐng)域的普通技術(shù)人員來說,在不脫離本發(fā)明構(gòu)思的前提下,還可以做出若干簡單推演或替換,都應(yīng)當(dāng)視為屬于本發(fā)明的保護范圍。
權(quán)利要求
1.ー種多媒體數(shù)據(jù)流的剪輯方法,其特征在于,包括 對觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情進行監(jiān)控; 根據(jù)觀眾的面部表情從所述多媒體數(shù)據(jù)流中截取至少ー個片段; 將截取的片段進行組接完成剪輯。
2.如權(quán)利要求I所述的多媒體數(shù)據(jù)流 的剪輯方法,其特征在于,根據(jù)觀眾的面部表情從所述多媒體數(shù)據(jù)流中截取至少ー個片段的方法包括 根據(jù)預(yù)設(shè)原則從所監(jiān)控到的面部表情中選擇至少ー個符合要求的面部表情; 從所述多媒體數(shù)據(jù)流中截取觀眾產(chǎn)生所述符合要求的面部表情時所觀看的片段。
3.如權(quán)利要求2所述的多媒體數(shù)據(jù)流的剪輯方法,其特征在干,從所述多媒體數(shù)據(jù)流中截取觀眾產(chǎn)生所述符合要求的面部表情時所觀看的片段的方法包括 記錄觀眾產(chǎn)生所述符合要求的面部表情時所觀看的多媒體數(shù)據(jù)流的時間點; 從所述時間點之前的時間長度Tl開始,到所述時間點之后的時間長度T2結(jié)束,截取這段時間內(nèi)的片段。
4.如權(quán)利要求2所述的多媒體數(shù)據(jù)流的剪輯方法,其特征在干,根據(jù)預(yù)設(shè)原則從所監(jiān)控到的面部表情中選擇至少ー個符合要求的面部表情的方法具體為根據(jù)預(yù)設(shè)的正面表情樣本和/或負(fù)面表情樣本,對所監(jiān)控到的面部表情進行篩選,篩選出至少ー個符合要求的面部表情。
5.如權(quán)利要求I所述的多媒體數(shù)據(jù)流的剪輯方法,其特征在于,所述正面表情樣本包括人在聞興、激動、恐懼和/或驚訝時的標(biāo)準(zhǔn)表情樣本;所述負(fù)面表情樣本包括人在睡覺、打盹和/或聊天時的標(biāo)準(zhǔn)表情樣本。
6.如權(quán)利要求3所述的多媒體數(shù)據(jù)流的剪輯方法,其特征在干,根據(jù)預(yù)設(shè)原則從所監(jiān)控到的面部表情中選擇至少ー個符合要求的面部表情的方法具體為 對所監(jiān)控到的各個面部表情進行量化,得到與各個面部表情對應(yīng)的體驗度數(shù)量值; 選擇體驗度數(shù)量值排名靠前的至少ー個面部表情作為符合要求的面部表情。
7.如權(quán)利要求I至6任一項所述的多媒體數(shù)據(jù)流的剪輯方法,其特征在于,所述多媒體數(shù)據(jù)流為視頻數(shù)據(jù)流和/或音頻數(shù)據(jù)流。
8.ー種多媒體數(shù)據(jù)流的剪輯系統(tǒng),其特征在于,包括監(jiān)控單元和截取處理單元和剪輯處理單元 所述監(jiān)控単元用于對觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情進行監(jiān)控; 所述截取處理單元用于根據(jù)觀眾的面部表情從所述多媒體數(shù)據(jù)流中截取至少ー個片段; 所述剪輯處理單元用于將截取的片段進行組接完成剪輯。
9.如權(quán)利要求8所述的多媒體數(shù)據(jù)流的剪輯系統(tǒng),其特征在干,所述截取處理單元包括選擇單元和截取單元 所述選擇単元用于根據(jù)預(yù)設(shè)原則從所監(jiān)控到的面部表情中選擇至少ー個符合要求的面部表情; 所述截取単元用于從所述多媒體數(shù)據(jù)流中截取觀眾產(chǎn)生所述符合要求的面部表情時所觀看的片段。
10.如權(quán)利要求9所述的多媒體數(shù)據(jù)流的剪輯系統(tǒng),其特征在于,所述截取単元包括記錄子單元和截取子単元 所述記錄子単元用于記錄觀眾產(chǎn)生所述符合要求的面部表情時所觀看的多媒體數(shù)據(jù)流的時間點; 所述截取子単元用于從所述時間點之前的時間長度Tl開始,到所述時間點之后的時間長度T2結(jié)束,截取這段時間內(nèi)的片段。
11.如權(quán)利要求9所述的多媒體數(shù)據(jù)流的剪輯系統(tǒng),其特征在于,所述選擇単元包括量化處理單元和第一選擇子単元,其中,所述量化處理單元用于對所監(jiān)控到的各個面部表情進行量化,得到與各個面部表情對應(yīng)的體驗度數(shù)量值,所述第一選擇子単元用于選擇體驗度數(shù)量值排名靠前的至少ー個面部表情作為符合要求的面部表情;或者所述選擇単元具體為第二選擇子単元,用于根據(jù)預(yù)設(shè)的正面表情樣本和/或負(fù)面表情樣本,對所監(jiān)控到的面部表情進行篩選,篩選出至少ー個符合要求的面部表情。
全文摘要
本發(fā)明公開一種多媒體數(shù)據(jù)流的剪輯方法及系統(tǒng),該方法包括對觀眾在觀看多媒體數(shù)據(jù)流過程中所產(chǎn)生的面部表情進行監(jiān)控;根據(jù)觀眾的面部表情從所述多媒體數(shù)據(jù)流中截取至少一個片段;將截取的片段進行組接完成剪輯。本發(fā)明通過以上技術(shù)方案,提供一種更加完善的多媒體數(shù)據(jù)流的剪輯方法及系統(tǒng)。
文檔編號G06K9/00GK102842327SQ20121032171
公開日2012年12月26日 申請日期2012年9月3日 優(yōu)先權(quán)日2012年9月3日
發(fā)明者成富平 申請人:深圳市迪威視訊股份有限公司