視頻處理方法及裝置制造方法
【專利摘要】本發(fā)明公開了一種視頻處理方法及裝置，屬于視頻處理【技術(shù)領(lǐng)域】。方法包括：采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像；對每個縮略圖像進行編碼，得到縮略圖像碼流；對每個原始圖像進行編碼，得到原始圖像碼流;將縮略圖像碼流插入到原始圖像碼流中，得到視頻碼流，以使解碼端在獲取到視頻碼流后，對視頻碼流進行解碼，得到解碼后的多個原始圖像和解碼后的多個縮略圖像，并播放解碼后的多個原始圖像和解碼后的多個縮略圖像。本發(fā)明由于將縮略圖像碼流插入到原始視頻碼流中，從而用戶通過終端指針在視頻播放進度條上進行拖動，便可在縮略圖播放窗口中實時看見對應(yīng)的縮略圖像，提升了視頻檢索效率。
【專利說明】視頻處理方法及裝置
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及視頻處理【技術(shù)領(lǐng)域】，特別涉及一種視頻處理方法及裝置。
【背景技術(shù)】
[0002]隨著視頻處理技術(shù)的不斷進步，用戶在觀看一段視頻之前，可進行視頻檢索，即用戶可預(yù)先瀏覽視頻，找出其感興趣的視頻區(qū)間，進而觀看該視頻區(qū)間對應(yīng)的視頻內(nèi)容。而為了降低用戶進行視頻檢索的時間，如何對視頻進行處理，成為了一個關(guān)鍵問題。
[0003]現(xiàn)有技術(shù)通常采取兩種視頻處理方式。第一種方式，采用高速快進方式播放視頻。一般有2倍速、4倍速、8倍速、16倍速等。在播放視頻時，一種情形是解碼視頻中的全部幀，并按照預(yù)設(shè)比例播放解碼后的一部分視頻幀，丟棄剩余的視頻幀；另一種情形是選擇可獨立解碼的I幀進行解碼，并播放解碼后的I幀，丟棄剩余的視頻幀。第二種方式，在視頻播放進度條上設(shè)置播放點，當(dāng)用戶選取了某一個播放點后，從該播放點對應(yīng)的視頻幀處向前搜索I幀，并從該I幀開始進行解碼，并按照正常的速度播放解碼后的視頻。
[0004]在實現(xiàn)本發(fā)明的過程中，發(fā)明人發(fā)現(xiàn)現(xiàn)有技術(shù)至少存在以下問題:
[0005]針對第一種方式，由于在快進播放時會丟棄一部分視頻幀，所以存在將包含關(guān)鍵信息的視頻幀丟棄的情況，對視頻檢索的正確性造成不良影響；且采用高速快進的播放方式，會解碼大量的視頻幀，因此，占用了過多的系統(tǒng)資源。針對第二種方式，用戶在選取播放點的時候，由于播放點對應(yīng)的視頻內(nèi)容未知，所以選擇播放的精度不高，用戶常常需要重復(fù)選擇播放點，較浪費時間，視頻檢索的效率較低。

【發(fā)明內(nèi)容】

[0006]為了解決現(xiàn)有技術(shù)的問題，本發(fā)明實施例提供了一種視頻處理方法及裝置。所述技術(shù)方案如下:
[0007]第一方面，提供了一種視頻處理方法，所述方法包括:
[0008]采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像；
[0009]對每個縮略圖像進行編碼，得到縮略圖像碼流；
[0010]對每個原始圖像進行編碼，得到原始圖像碼流；
[0011]將所述縮略圖像碼流插入到所述原始圖像碼流中，得到視頻碼流，以使解碼端在獲取到所述視頻碼流后，對所述視頻碼流進行解碼，得到解碼后的多個原始圖像和解碼后的多個縮略圖像，并播放解碼后的多個原始圖像和解碼后的多個縮略圖像。
[0012]在第一方面的第一種可能的實現(xiàn)方式中，所述對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像，包括:
[0013]對于多個原始圖像中的每個原始圖像，將所述原始圖像的寬度縮放到預(yù)設(shè)寬度；
[0014]根據(jù)所述原始圖像的寬高比，對所述原始圖像的高度進行縮放，得到所述原始圖像的縮略圖像。[0015]結(jié)合第一方面，在第一方面的第二種可能的實現(xiàn)方式中，所述對多個縮略圖像進行編碼，包括:
[0016]將存儲在縮略圖像隊列中的縮略圖像進行JPEG (Joint Photographic ExpertsGroup,聯(lián)合圖像專家小組)編碼。
[0017]結(jié)合第一方面的第二種可能的實現(xiàn)方式，在第一方面的第三種可能的實現(xiàn)方式中，所述對多個原始圖像進行編碼，包括:
[0018]對于多個原始圖像中的每個原始圖像，當(dāng)確定所述縮略圖像隊列中存儲有與所述原始圖像相匹配的縮略圖像后，對所述原始圖像進行H.264編碼。
[0019]結(jié)合第一方面，在第一方面的第四種可能的實現(xiàn)方式中，所述將所述縮略圖像碼流插入到所述原始圖像碼流中，包括:
[0020]對于所述原始圖像碼流中每個原始圖像的編碼數(shù)據(jù)，確定所述縮略圖碼流中與所述原始圖像的編碼數(shù)據(jù)相匹配的縮略圖像編碼數(shù)據(jù)，將所述縮略圖像的編碼數(shù)據(jù)打包為一個 SEI (Supplemental Enhancement Informatian,補充增強信息)包，并將所述 SEI 包插入到與所述原始圖像的編碼數(shù)據(jù)相鄰的位置。
[0021]第二方面，提供了一種視頻處理裝置，所述裝置包括:
[0022]圖像采集模塊，用于采集視頻的原始圖像；
[0023]圖像縮放模塊，用于對圖像采集模塊采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像；
[0024]縮略圖像編碼模塊，用于對每個縮略圖像進行編碼，得到縮略圖像碼流；
[0025]原始圖像編碼模塊，用于對每個原始圖像進行編碼，得到原始圖像碼流；
[0026]插入模塊，用于將所述縮略圖像碼流插入到所述原始圖像碼流中，得到視頻碼流，以使解碼端在獲取到所述視頻碼流后，對所述視頻碼流進行解碼，得到解碼后的多個原始圖像和解碼后的多個縮略圖像，并播放解碼后的多個原始圖像和解碼后的多個縮略圖像。
[0027]在第二方面的第一種可能的實現(xiàn)方式中，所述縮放模塊，包括:
[0028]寬度縮放單元，用于對于多個原始圖像中的每個原始圖像，將所述原始圖像的寬度縮放到預(yù)設(shè)寬度；
[0029]高度縮放單元，用于根據(jù)所述原始圖像的寬高比，對所述原始圖像的高度進行縮放，得到所述原始圖像的縮略圖像。
[0030]結(jié)合第二方面，在第二方面的第二種可能的實現(xiàn)方式中，所述縮略圖像編碼模塊，用于將存儲在縮略圖像隊列中的縮略圖像進行JPEG編碼。
[0031]結(jié)合第二方面的第二種可能的實現(xiàn)方式，在第二方面的第三種可能的實現(xiàn)方式中，所述原始圖像編碼模塊，用于對于多個原始圖像中的每個原始圖像，當(dāng)確定所述縮略圖像隊列中存儲有與所述原始圖像相匹配的縮略圖像后，對所述原始圖像進行H.264編碼。
[0032]結(jié)合第二方面，在第二方面的第四種可能的實現(xiàn)方式中，所述插入模塊，包括:
[0033]確定單元，用于對于所述原始圖像碼流中每個原始圖像的編碼數(shù)據(jù)，確定所述縮略圖碼流中與所述原始圖像的編碼數(shù)據(jù)相匹配的縮略圖像編碼數(shù)據(jù)；
[0034]插入單元，用于將所述縮略圖像的編碼數(shù)據(jù)打包為一個SEI包，并將所述SEI包插入到與所述原始圖像的編碼數(shù)據(jù)相鄰的位置。
[0035]第三方面，提供了一種視頻處理方法，所述方法包括:[0036]從編碼端獲取視頻碼流；
[0037]當(dāng)終端指針在視頻播放進度條上產(chǎn)生位移時，在所述視頻碼流中獲取與所述終端指針的當(dāng)前位置相應(yīng)的SEI包；
[0038]將所述SEI包進行解碼，得到縮略圖像；
[0039]將所述縮略圖像在所述縮略圖像播放窗口中進行播放。
[0040]在第三方面的第一種可能的實現(xiàn)方式中，所述在所述視頻碼流中獲取與所述終端指針的當(dāng)前位置相應(yīng)的SEI包之前,所述方法還包括:
[0041]將所述視頻碼流進行切割，得到多個切割包；
[0042]對于多個切割包中的每個切割包，從所述切割包中提取SEI包。
[0043]結(jié)合第三方面，在第三方面的第二種可能的實現(xiàn)方式中，所述獲取編碼端的視頻碼流之后，所述方法還包括:
[0044]從所述視頻碼流中獲取原始圖像碼流；
[0045]將所述原始圖像碼流進行解碼，得到多個原始圖像；
[0046]按照預(yù)設(shè)幀率將所述多個原始圖像在原始視頻播放窗口中進行播放。
[0047]第四方面，提供了一種視頻處理裝置，所述裝置包括:
[0048]碼流獲取模塊，用于從編碼端獲取視頻碼流；
[0049]所述碼流獲取模塊，還用于當(dāng)終端指針在視頻播放進度條上產(chǎn)生位移時，在所述視頻碼流中獲取與所述終端指針的當(dāng)前位置相應(yīng)的SEI包；
[0050]縮略圖像解碼模塊，用于將所述SEI包進行解碼，得到縮略圖像；
[0051]縮略圖像播放模塊，用于將所述縮略圖像在所述縮略圖像播放窗口中進行播放。
[0052]在第四方面的第一種可能的實現(xiàn)方式中，所述裝置還包括:
[0053]切割模塊，用于將所述視頻碼流進行切割，得到多個切割包；
[0054]提取模塊，用于對于多個切割包中的每個切割包，從所述切割包中提取SEI包。
[0055]結(jié)合第四方面，在第四方面的第二種可能的實現(xiàn)方式中，所述裝置還包括:
[0056]所述碼流獲取模塊，還用于從所述視頻碼流中獲取原始圖像碼流；
[0057]原始圖像解碼模塊，用于將所述原始圖像碼流進行解碼，得到多個原始圖像；
[0058]原始圖像播放模塊，用于按照預(yù)設(shè)幀率將所述多個原始圖像在原始視頻播放窗口中進行播放。
[0059]本發(fā)明實施例提供的技術(shù)方案帶來的有益效果是:
[0060]在采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像后，對每個縮略圖像及每個原始視頻圖像進行編碼，并將縮略圖像碼流插入到原始圖像碼流中，由于將縮略圖像碼流插入到原始視頻碼流中，從而用戶在解碼端瀏覽視頻時，通過終端指針在視頻播放進度條上進行拖動，便可在縮略圖播放窗口中實時看見對應(yīng)的縮略圖像，視頻檢索精度大大提聞，提升了視頻檢索效率。
【專利附圖】

【附圖說明】
[0061]為了更清楚地說明本發(fā)明實施例中的技術(shù)方案，下面將對實施例描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實施例，對于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動的前提下，還可以根據(jù)這些附圖獲得其他的附圖。
[0062]圖1是本發(fā)明實施例一提供的一種視頻處理的方法流程圖；
[0063]圖2是本發(fā)明實施例二提供的一種視頻處理的方法流程圖；
[0064]圖3是本發(fā)明實施例三提供的一種編碼端的系統(tǒng)架構(gòu)圖；
[0065]圖4是本發(fā)明實施例三提供的一種視頻處理的方法流程圖；
[0066]圖5是本發(fā)明實施例三提供的一種視頻碼流的結(jié)構(gòu)圖；
[0067]圖6是本發(fā)明實施例三提供的一種解碼端的系統(tǒng)架構(gòu)圖；
[0068]圖7是本發(fā)明實施例三提供的一種縮略圖提取設(shè)備的內(nèi)部示意圖；
[0069]圖8是本發(fā)明實施例四提供的一種視頻處理裝置的結(jié)構(gòu)示意圖；
[0070]圖9是本發(fā)明實施例五提供的一種視頻處理裝置的結(jié)構(gòu)示意圖；
[0071]圖10是本發(fā)明實施例六提供的一種視頻處理設(shè)備的結(jié)構(gòu)示意圖；
[0072]圖11是本發(fā)明實施例七提供的一種視頻處理設(shè)備的結(jié)構(gòu)示意圖。
【具體實施方式】
[0073]為使本發(fā)明的目的、技術(shù)方案和優(yōu)點更加清楚，下面將結(jié)合附圖對本發(fā)明實施方式作進一步地詳細描述。
[0074]實施例一
[0075]本發(fā)明實施例提供了一種視頻處理方法，以編碼端執(zhí)行的角度為例，參見圖1，本實施例提供的方法流程包括:
[0076]101、采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像。
[0077]102、對每個縮略圖像進行編碼，得到縮略圖像碼流。
[0078]103、對每個原始圖像進行編碼，得到原始圖像碼流。
[0079]104、將縮略圖像碼流插入到原始圖像碼流中，得到視頻碼流，以使解碼端在獲取到視頻碼流后，對視頻碼流進行解碼，得到解碼后的多個原始圖像和解碼后的多個縮略圖像，并播放解碼后的多個原始圖像和解碼后的多個縮略圖像。
[0080]本實施例提供的方法，在采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像后，對每個縮略圖像及每個原始視頻圖像進行編碼，并將縮略圖像碼流插入到原始圖像碼流中，由于將縮略圖像碼流插入到原始視頻碼流中，從而用戶在解碼端瀏覽視頻時，通過終端指針在視頻播放進度條上進行拖動，便可在縮略圖播放窗口中實時看見對應(yīng)的縮略圖像，視頻檢索精度大大提聞，提升了視頻檢索效率。
[0081]可選地，對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像，包括:
[0082]對于多個原始圖像中的每個原始圖像，將原始圖像的寬度縮放到預(yù)設(shè)寬度；
[0083]根據(jù)原始圖像的寬高比，對原始圖像的高度進行縮放，得到原始圖像的縮略圖像。
[0084]可選地，對多個縮略圖像進行編碼，包括:
[0085]將存儲在縮略圖像隊列中的縮略圖像進行JPEG編碼。
[0086]可選地，對多個原始圖像進行編碼，包括:
[0087]對于多個原始圖像中的每個原始圖像，當(dāng)確定縮略圖像隊列中存儲有與原始圖像相匹配的縮略圖像后,對原始圖像進行H.264編碼。
[0088]可選地，將縮略圖像碼流插入到原始圖像碼流中，包括:
[0089]對于原始圖像碼流中每個原始圖像的編碼數(shù)據(jù)，確定縮略圖碼流中與原始圖像的編碼數(shù)據(jù)相匹配的縮略圖像編碼數(shù)據(jù)，將縮略圖像的編碼數(shù)據(jù)打包為一個SEI包，并將SEI包插入到與原始圖像的編碼數(shù)據(jù)相鄰的位置。
[0090]需要說明的是，上述可選內(nèi)容可與上述步驟101、步驟102、步驟103和步驟104以任何組合形式進行組合，用于執(zhí)行本實施例提供的發(fā)送消息的方法，本實施例對組合形式不進行具體限定。
[0091]實施例二
[0092]本發(fā)明實施例提供了一種視頻處理方法，以解碼端執(zhí)行的角度為例，參見圖2，本實施例提供的方法流程包括:
[0093]201、從編碼端獲取視頻碼流。
[0094]202、當(dāng)終端指針在視頻播放進度條上產(chǎn)生位移時，在視頻碼流中獲取與終端指針的當(dāng)前位置相應(yīng)的SEI包。
[0095]203、將SEI包進行解碼，得到縮略圖像。
[0096]204、將縮略圖像在縮略圖像播放窗口中進行播放。
[0097]本實施例提供的方法，從編碼端獲取視頻碼流后，在用戶在解碼端瀏覽視頻時，通過終端指針在視頻播放進度條上進行拖動，便可在縮略圖播放窗口中實時看見對應(yīng)的縮略圖像，視頻檢索精度大大提聞，提升了視頻檢索效率。
[0098]可選地，在視頻碼流中獲取與終端指針的當(dāng)前位置相應(yīng)的SEI包之前，該方法還包括:
[0099]將視頻碼流進行切割，得到多個切割包；
[0100]對于多個切割包中的每個切割包，從切割包中提取SEI包。
[0101]可選地，獲取編碼端的視頻碼流之后，該方法還包括:
[0102]從視頻碼流中獲取原始圖像碼流；
[0103]將原始圖像碼流進行解碼，得到多個原始圖像；
[0104]按照預(yù)設(shè)幀率將多個原始圖像在原始視頻播放窗口中進行播放。
[0105]實施例三
[0106]在對本實施例提供的視頻處理方法進行闡述之前，先對編碼端的系統(tǒng)架構(gòu)及組成進行介紹。參見圖3，編碼端主要包括五大部分，分別為圖像采集設(shè)備、圖像處理設(shè)備、調(diào)度設(shè)備、原始圖像編碼設(shè)備、縮略圖像編碼設(shè)備及碼流輸出設(shè)備。其中，圖像采集設(shè)備，用于采集視頻的原始圖像，并將采集到的原始圖像輸出給圖像處理設(shè)備；圖像處理設(shè)備，用于對原始圖像進行前處理及對原始圖像進行縮放；其中，前處理包括但不限于圖像去噪處理、圖像銳化處理及隔行掃描處理；調(diào)度設(shè)備，用于完成編碼調(diào)度、原始圖像碼流和縮略圖像碼流的緩沖、原始圖像和縮略圖像的同步等等；原始圖像編碼設(shè)備，用于對原始圖像進行H.264編碼；縮略圖編碼設(shè)備，用于對縮略圖像進行JPEG編碼；碼流輸出設(shè)備，用于輸出視頻碼流，方便用戶線程獲取視頻碼流。
[0107]本發(fā)明提供了一種視頻處理方法，現(xiàn)結(jié)合上述實施例一及實施例二以及圖3所示的系統(tǒng)架構(gòu)對本發(fā)明實施例提供的視頻處理方式進行詳細地解釋說明。參見圖4，本實施例提供的方法流程包括:
[0108]401、編碼端采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像。
[0109]在對采集到的原始圖像進行縮放處理時，為了保證縮放后的圖像不變形、不失真，在本實施例中，采取如下方式對采集到的原始圖像進行縮放處理:
[0110]對于多個原始圖像中的每個原始圖像，將原始圖像的寬度縮放到預(yù)設(shè)寬度；根據(jù)原始圖像的寬高比，對原始圖像的高度進行縮放，得到原始圖像的縮略圖像。
[0111]在本實施例中，若采集到的原始圖像大小為640像素*480像素，也即，采集到的原始圖像的寬高比為4:3，則在對原始圖像進行縮放處理，得到縮略圖像之后，縮略圖像的寬高比同樣為4:3，以保證縮放后的圖像不變形、不失真。若將原始圖像的寬度縮放至160像素，則將原始圖像的高度相應(yīng)地縮放到120像素。
[0112]其中，本實施例將預(yù)設(shè)寬度設(shè)置為160像素。當(dāng)然，預(yù)設(shè)寬度的大小除160像素外，還可為其他數(shù)值，例如200像素或300像素等等，本實施例對預(yù)設(shè)寬度的大小不進行具體限定。本實施例僅以預(yù)設(shè)寬度為160像素為例進行說明。
[0113]此外，在圖像處理設(shè)備對原始圖像進行縮放處理的同時，還將進行兩路圖像輸出，一路輸出原始圖像至調(diào)度設(shè)備的原始圖像隊列，一路輸出縮略圖像至調(diào)度設(shè)備的縮略圖像隊列；其中，原始圖像隊列用于緩存原始圖像，在后續(xù)原始圖像編碼過程中，原始圖像編碼設(shè)備從該原始圖像隊列中獲取原始圖像進行編碼。縮略圖像隊列用于緩存縮略圖像，在后續(xù)縮略圖像編碼過程中，縮略圖像編碼設(shè)備從該縮略圖像隊列中獲取縮略圖像進行編碼。
[0114]在本實施例中，調(diào)度設(shè)備可調(diào)度縮略圖像編碼設(shè)備和原始圖像編碼設(shè)備；當(dāng)調(diào)度設(shè)備調(diào)度到縮略圖像編碼設(shè)備后，縮率圖像編碼設(shè)備按照下述步驟402的方式，進行編碼；當(dāng)調(diào)度設(shè)備調(diào)度到原始圖像編碼設(shè)備后，原始圖像編碼設(shè)備按照下述步驟403的方式，進行編碼。
[0115]402、編碼端對每個縮略圖像進行編碼，得到縮略圖像碼流。
[0116]當(dāng)調(diào)度設(shè)備調(diào)度到縮略圖像編碼設(shè)備后，縮略圖像編碼設(shè)備先查看縮略圖像隊列中是否存在縮略圖像；如果縮略圖像隊列中存在至少一個縮略圖像，則啟動JPEG編碼；在將縮略圖像隊列中的縮略圖像編碼完畢，得到縮略圖像碼流后，調(diào)度設(shè)備從縮略圖像編碼設(shè)備中獲取縮略圖像碼流，并將獲取到的縮略圖像碼流緩存在調(diào)度設(shè)備的縮略圖像碼流隊列中。
[0117]需要說明的是，由于對縮略圖像進行JPEG編碼，也即，采取靜態(tài)編碼協(xié)議對縮略圖像進行編碼，所以在后續(xù)過程中對編碼后的縮略圖像進行解碼時，不需要參考其他幀便可對編碼后的縮略圖像進行解碼。因此，終端指針放在視頻播放進度條上的任一點處都可以實時顯示對應(yīng)的解碼后的縮略圖像，延時非常小，進而減少了視頻檢索的時間。
[0118]403、編碼端對每個原始圖像進行編碼，得到原始圖像碼流。
[0119]當(dāng)調(diào)度設(shè)備調(diào)度到原始圖像編碼設(shè)備后，原始圖像編碼設(shè)備先查看原始圖像隊列中是否存在原始圖像；如果原始圖像隊列中存在至少一個原始圖像，則進一步查看縮略圖像碼流隊列中是否存在與原始圖像相對應(yīng)的縮略圖像的編碼數(shù)據(jù)；如果縮略圖像碼流隊列中存在與原始圖像相對應(yīng)的縮略圖像的編碼數(shù)據(jù)，則啟動H.264編碼，得到原始圖像碼流。
[0120]404、編碼端將縮略圖像碼流插入到原始圖像碼流中，得到視頻碼流。[0121]在通過上述步驟402和步驟403分別對縮略圖像和原始圖像進行編碼之后，為了在原始圖像碼流中以用戶數(shù)據(jù)的形式插入縮略圖像碼流，進而提高視頻檢索效率。在本實施例中，原始圖像編碼設(shè)備采取如下方式將縮略圖像碼流插入到原始圖像碼流中:
[0122]對于原始圖像碼流中每個原始圖像的編碼數(shù)據(jù)，確定縮略圖碼流中與原始圖像的編碼數(shù)據(jù)相匹配的縮略圖像編碼數(shù)據(jù)，將縮略圖像的編碼數(shù)據(jù)打包為一個SEI包，并將SEI包插入到與原始圖像的編碼數(shù)據(jù)相鄰的位置。
[0123]在確定縮略圖碼流中與原始圖像的編碼數(shù)據(jù)相匹配的縮略圖像編碼數(shù)據(jù)時，由于原始圖像編碼和縮略圖像編碼均是按照一定的順序進行的，因此，若某一原始圖像優(yōu)先于其他所有原始圖像進行編碼，則與其對應(yīng)的縮略圖像也優(yōu)先于其他所有縮略圖像進行編碼。所以根據(jù)縮略圖像和原始圖像的編碼順序便可確定縮略圖碼流中與原始圖像的編碼數(shù)據(jù)相匹配的縮略圖像編碼數(shù)據(jù)。
[0124]其中，插入縮略圖像碼流之后的原始圖像碼流可參見圖5。在圖5中，每一個原始圖像都存在與之對應(yīng)的SEI包，且一個SEI包中僅包括一個縮略圖像的編碼數(shù)據(jù)。其中，一個SEI包中包括六個部分；000001是H.264的起始碼；06表示SEI ；0xFl表示SEI包的類型，SEI包的類型可自定義；0xFl是保留字段，提供擴展方式；之后的兩個字節(jié)是SEI包的長度；最后是縮略圖像的編碼數(shù)據(jù)。
[0125]需要說明的是，在通過上述步驟401至步驟404將縮略圖像碼流插入到原始圖像碼流中，得到視頻碼流后，原始圖像編碼設(shè)備將通知碼流輸出設(shè)備獲取視頻碼流，在碼流輸出設(shè)備獲取到視頻碼流后，將視頻碼流存儲在自身的碼流隊列中，等待用戶線程獲取視頻碼流。當(dāng)用戶線程從碼流輸出設(shè)備中獲取視頻碼流后，還可對視頻碼流進行文件格式的封裝，常見的封裝格式如AVI (Audio Video Interleaved,音頻視頻交錯格式)、MP4 (MovingPicture Experts Group,動態(tài)圖像專家組)等。也可以使用客戶私有的文件格式，由于文件格式封裝與本方法沒有直接關(guān)系，可以參考相應(yīng)的協(xié)議，此處不再贅述。此外，編碼端在將縮略圖像碼流插入到原始圖像碼流中后，解碼端便可從用戶線程中獲取視頻碼流，并將獲取到的視頻碼流進行解碼及播放，具體過程詳見下述步驟405至步驟410。在對解碼端的視頻處理方式進行詳細地解釋說明之前，先對解碼端的系統(tǒng)架構(gòu)及組成進行介紹。
[0126]參見圖6，解碼端一共分為三大部分，分別為播放窗口、解碼器及縮略圖像提取設(shè)備。其中，播放窗口分為原始圖像播放窗口及縮略圖像播放窗口 ；原始圖像播放窗口，用于按照正常的播放速度播放原始圖像；縮略圖像播放窗口，用于播放縮略圖像，且當(dāng)終端指針劃過視頻播放進度條的時候顯示縮略圖像播放窗口，播放終端指針?biāo)谖恢命c對應(yīng)的縮略圖像，當(dāng)終端指針離開視頻播放進度條的時候自動隱藏縮略圖像播放窗口。解碼器分為原始圖像碼流解碼器和縮略圖像碼流解碼器；原始圖像碼流解碼器用于解碼原始圖像碼流，并忽略插入的SEI包不解析，得到原始圖像；縮略圖像碼流解碼器用于解碼縮略圖像碼流，也即，僅解析插入的SEI包，得到縮略圖像。縮略圖提取設(shè)備用于從視頻碼流中提取SEI包，并將提取到的SEI包發(fā)送給縮略圖碼流解碼器。
[0127]405、解碼端從編碼端獲取視頻碼流。
[0128]由于用戶線程已從編碼端的碼流輸出設(shè)備中獲取視頻碼流，因此，解碼端在獲取編碼端的視頻碼流時，可直接從用戶線程中獲取。
[0129]406、解碼端從視頻碼流中獲取原始圖像碼流，并將原始圖像碼流進行解碼，得到多個原始圖像。
[0130]由于插入的SEI包中的數(shù)據(jù)06代表SEI，因此，解碼端從視頻碼流中獲取原始圖像碼流時，可直接獲取不包含數(shù)據(jù)06的編碼數(shù)據(jù)，而不包含數(shù)據(jù)06的編碼數(shù)據(jù)便為原始圖像碼流。
[0131]可選地，也可參考后續(xù)步驟408的方式，從切割得到的Nalu包中獲取除SEI包以外的數(shù)據(jù)，該數(shù)據(jù)中便包含原始圖像的編碼數(shù)據(jù)，根據(jù)起始碼便可將原始圖像的編碼數(shù)據(jù)提取出來，而該原始圖像的編碼數(shù)據(jù)便為原始圖像碼流。
[0132]在對原始圖像進行解碼時，由于解碼過程與編碼過程互為逆過程，所以原始圖像碼流解碼器可同樣按照H.264協(xié)議進行解碼，得到原始圖像。
[0133]407、解碼端按照預(yù)設(shè)幀率將多個原始圖像在原始視頻播放窗口中進行播放。
[0134]其中，預(yù)設(shè)幀率具體可為24幀/秒。當(dāng)然，預(yù)設(shè)幀率除24幀/秒外，還可為其他數(shù)值，例如，25幀/秒，本實施例對預(yù)設(shè)幀率的大小不進行具體限定。
[0135]由于人眼的反應(yīng)能力有限，而原始圖像解碼器解碼原始圖像碼流的速度很快，若按照解碼的速度播放碼流，那么整個視頻相當(dāng)于以快進的速度進行播放。因此，為了適應(yīng)人眼的反應(yīng)能力，需要對解碼出來的原始圖像進行播放控制，也即，按照預(yù)設(shè)幀率(比如，24幀/秒)在原始圖像播放窗口中播放解碼出來的原始圖像。
[0136]需要說明的是，解碼端的原始圖像播放窗口一直處于顯示狀態(tài)，且原始圖像播放窗口可一直處于播放原始圖像狀態(tài)；而縮略圖播放窗口僅在終端指針移動到視頻播放進度條上時才顯示，且縮略圖播放窗口僅播放終端指針?biāo)谖恢命c對應(yīng)的縮略圖。當(dāng)終端指針離開視頻播放進度條時，縮略圖播放窗口將自動隱藏。
[0137]408、當(dāng)終端指針在視頻播放進度條上產(chǎn)生位移時，解碼端在視頻碼流中獲取與終端指針的當(dāng)前位置相應(yīng)的SEI包。
[0138]由于視頻播放進度條上的各個位置點均與一個縮略圖像相對應(yīng)，因此，當(dāng)終端指針在視頻播放進度條上處于不斷移動的狀態(tài)時，可實時獲取終端指針的當(dāng)前位置，并根據(jù)位置點與縮略圖像的對應(yīng)關(guān)系獲取與終端指針當(dāng)前位置相對應(yīng)的縮略圖像，從而在后續(xù)步驟中將獲取到的縮略圖像顯示在縮略圖像播放窗口中。此外，在獲取與終端指針當(dāng)前位置相對應(yīng)的縮略圖像時，還需獲取包含該縮略圖像的編碼數(shù)據(jù)的SEI包，而在獲取SEI包時可具體采取如下方式獲取:將視頻碼流進行切割，得到多個切割包；對于多個切割包中的每個切割包，從切割包中提取SEI包。參見圖7，縮略圖提取設(shè)備包含一個碼流切割設(shè)備、一個硬件驅(qū)動程序(ScdDrv)及兩個碼流緩沖區(qū)。其中，碼流切割設(shè)備用于切割視頻碼流，生成一個一個切割包(Nalu包)；硬件驅(qū)動程序是碼流切割設(shè)備的驅(qū)動程序，用于啟動碼流切割設(shè)備并處理Nalu包；兩個碼流緩沖區(qū)分為視頻碼流存放緩沖區(qū)(StreamBuffer)和縮略圖碼流存放緩沖區(qū)(ScdBuffer);視頻碼流存放緩沖區(qū)用來存放視頻碼流；縮略圖碼流存放緩沖區(qū)用來存放切割之后的碼流。其中，硬件驅(qū)動程序(ScdDrv)的啟動函數(shù)可檢查視頻碼流存放緩沖區(qū)(StreamBuffer)和縮略圖像碼流存放緩沖區(qū)(ScdBuffer)的狀態(tài)；如果視頻碼流存放緩沖區(qū)(StreamBuffer)有剩余碼流且縮略圖像碼流存放緩沖區(qū)(ScdBuffer)有剩余空間，則啟動碼流切割設(shè)備，進行碼流切割。在得到切割包(Nalu包)后，硬件驅(qū)動程序(ScdDrv)的完成函數(shù)繼續(xù)處理切割包(Nalu包)，提取切割包(Nalu包)中的SEI包，其他的包全部做丟棄處理。[0139]409、解碼端將SEI包進行解碼，得到縮略圖像。
[0140]在對SEI包進行解碼之前，還需先對SEI包進行解析，得到SEI包的解析類型和長度，從而根據(jù)SEI的類型和長度從SEI包中提取以JPEG協(xié)議編碼的縮略圖像的編碼數(shù)據(jù)，之后，將得到的縮略圖像的編碼數(shù)據(jù)(也即，縮略圖像碼流)發(fā)送到縮略圖像碼流解碼器，由縮略圖像碼流解碼器對縮略圖像的編碼數(shù)據(jù)進行解碼，得到縮略圖像。此外，在縮略圖像提取設(shè)備發(fā)送縮略圖像碼流過程中，縮略圖像碼流解碼器會將接收到的縮略圖像碼流拷貝到自身內(nèi)部的碼流緩沖區(qū)中，且在每次數(shù)據(jù)處理之后，縮略圖像碼流存放緩沖區(qū)(ScdBuffer)都可以進行數(shù)據(jù)清空，以等待下一次切割后的碼流。
[0141]410、解碼端將縮略圖像在縮略圖像播放窗口中進行播放。
[0142]在通過上述步驟408和步驟409得到縮略圖后，便可在終端指針的當(dāng)前位置處顯示縮略圖像播放窗口，并在縮略圖像播放窗口中顯示與該當(dāng)前位置相對應(yīng)的縮略圖，而解碼端的用戶根據(jù)縮略圖像播放窗口中的縮略圖便可進行視頻瀏覽，從而確定視頻是否具有欣賞價值、或該視頻中是否有其感興趣的視頻區(qū)間，進而為用戶提供了可視化的視頻檢索方式，大大提聞了視頻檢索精度。
[0143]本實施例提供的方法，在采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像后，對每個縮略圖像及每個原始視頻圖像進行編碼，并將縮略圖像碼流插入到原始圖像碼流中，由于將縮略圖像碼流插入到原始視頻碼流中，從而用戶在解碼端瀏覽視頻時，通過終端指針在視頻播放進度條上進行拖動，便可在縮略圖播放窗口中實時看見對應(yīng)的縮略圖像，視頻檢索精度大大提高，提升了視頻檢索效率。且由于縮略圖像在編碼端是以靜態(tài)編碼協(xié)議編碼的，所以縮略圖像碼流在解碼端進行解碼時，不需要參考其他幀，因此，當(dāng)終端指針在視頻播放進度條上進行移動時，縮放圖像播放窗口中可迅速顯示縮略圖像，時延很小。
[0144]需要說明的是，解碼端通過上述步驟405至步驟410對原始視頻碼流和縮略圖像碼流均進行了解碼及播放，這樣無疑加大了解碼端的解碼性能消耗。而為了降低解碼端的解碼性能消耗，還可僅解碼縮略圖像碼流，并僅播放縮略圖像。該種情形具體可應(yīng)用于如下二種場景中。
[0145]第一種場景:畫中畫場景。
[0146]由于解碼端的原始圖像播放窗口本身就比較小，所以可以不播放原始圖像，而直接播放縮略圖像。由于此種情況下，不需要對原始圖像碼流進行解碼，因此，可大幅減少解碼端的解碼性能消耗和圖像縮放處理性能消耗，圖像尺寸的降低可以使解碼性能消耗降低2個數(shù)量級。所以解碼端可不創(chuàng)建原始圖像碼流解碼器，僅創(chuàng)建縮略圖像提取設(shè)備和縮略圖像碼流解碼器，僅在縮略圖像播放窗口顯示縮略圖像，并按照正常幀率(比如，24幀/秒或25幀/秒)播放縮略圖像。因此，縮略圖像碼流中的縮略圖可用于小尺寸播放，
[0147]第二種場景:圖形操作系統(tǒng)下文件圖標(biāo)顯示。
[0148]在可視化操作系統(tǒng)中，當(dāng)用戶打開瀏覽器時，進行縮率圖像的提取、縮略圖像的解碼，解碼出一個縮略圖像，并將該解碼出來的縮略圖像用作文件圖標(biāo)，從而通過該縮略圖像更直觀地顯示文件的內(nèi)容。實現(xiàn)了縮略圖像碼流中的縮略圖在可視化操作系統(tǒng)中的應(yīng)用。
[0149]第三種場景:低帶寬網(wǎng)絡(luò)點播場景。
[0150]在進行網(wǎng)絡(luò)點播時，首先查詢帶寬狀態(tài)，在低帶寬網(wǎng)絡(luò)點播的場景下，創(chuàng)建縮略圖像提取模塊，提取縮略圖像碼流，把提取出來的以JPEG協(xié)議編碼的縮略圖像碼流封裝成Motion-JPEG格式進行發(fā)送，客戶端僅需創(chuàng)建縮略圖像碼流解碼器進行解碼縮略圖像解碼即可實現(xiàn)通過縮略圖像播放窗口播放縮略圖像，得到網(wǎng)絡(luò)點播的目的。由于縮略圖像的尺寸較小，既減少了網(wǎng)絡(luò)帶寬的占用，又減少了解碼端的解碼性能消耗和圖像縮放處理的性能消耗。
[0151]實施例四
[0152]本發(fā)明實施例提供了 一種視頻處理裝置，用于執(zhí)行上述實施例一或?qū)嵤├峁┑姆椒?，參見圖8，該裝置包括:
[0153]圖像采集模塊81，用于采集視頻的原始圖像；圖像采集模塊81與圖像縮放模塊82連接；圖像縮放模塊82，用于對圖像采集模塊81采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像；圖像縮放模塊82與縮略圖像編碼模塊83連接；縮略圖像編碼模塊83，用于對每個縮略圖像進行編碼，得到縮略圖像碼流；縮略圖像編碼模塊83與原始圖像編碼模塊84連接；原始圖像編碼模塊84，用于對每個原始圖像進行編碼，得到原始圖像碼流；原始圖像編碼模塊84與插入模塊85連接；插入模塊85，用于將縮略圖像碼流插入到原始圖像碼流中，得到視頻碼流，以使解碼端在獲取到視頻碼流后，對視頻碼流進行解碼，得到解碼后的多個原始圖像和解碼后的多個縮略圖像，并播放解碼后的多個原始圖像和解碼后的多個縮略圖像。
[0154]可選地，縮放模塊，包括:
[0155]寬度縮放單元，用于對于多個原始圖像中的每個原始圖像，將原始圖像的寬度縮放到預(yù)設(shè)寬度；
[0156]高度縮放單元，用于根據(jù)原始圖像的寬高比，對原始圖像的高度進行縮放，得到原始圖像的縮略圖像。
[0157]可選地，縮略圖像編碼模塊，用于將存儲在縮略圖像隊列中的縮略圖像進行JPEG編碼。
[0158]可選地，原始圖像編碼模塊，用于對于多個原始圖像中的每個原始圖像，當(dāng)確定縮略圖像隊列中存儲有與原始圖像相匹配的縮略圖像后，對原始圖像進行H.264編碼。
[0159]可選地，插入模塊，包括:
[0160]確定單元，用于對于原始圖像碼流中每個原始圖像的編碼數(shù)據(jù)，確定縮略圖碼流中與原始圖像的編碼數(shù)據(jù)相匹配的縮略圖像編碼數(shù)據(jù)；
[0161]插入單元，用于將縮略圖像的編碼數(shù)據(jù)打包為一個SEI包，并將SEI包插入到與原始圖像的編碼數(shù)據(jù)相鄰的位置。
[0162]綜上所述，本發(fā)明實施例提供的裝置，在采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像后，對每個縮略圖像及每個原始視頻圖像進行編碼，并將縮略圖像碼流插入到原始圖像碼流中，由于將縮略圖像碼流插入到原始視頻碼流中，從而用戶在解碼端瀏覽視頻時，通過終端指針在視頻播放進度條上進行拖動，便可在縮略圖播放窗口中實時看見對應(yīng)的縮略圖像，視頻檢索精度大大提聞，提升了視頻檢索效率。
[0163]實施例五
[0164]本發(fā)明實施例提供了 一種視頻處理裝置，用于執(zhí)行上述實施例二或?qū)嵤├峁┑姆椒?，參見圖9，該裝置包括:
[0165]碼流獲取模塊91，用于從編碼端獲取視頻碼流；碼流獲取模塊，還用于當(dāng)終端指針在視頻播放進度條上產(chǎn)生位移時，在視頻碼流中獲取與終端指針的當(dāng)前位置相應(yīng)的SEI包；碼流獲取模塊91與縮略圖像解碼模塊92連接；縮略圖像解碼模塊92，用于將SEI包進行解碼，得到縮略圖像；縮略圖像解碼模塊92與縮略圖像播放模塊93連接；縮略圖像播放模塊93，用于將縮略圖像在縮略圖像播放窗口中進行播放。
[0166]可選地，該裝置還包括:
[0167]切割模塊，用于將視頻碼流進行切割，得到多個切割包；
[0168]提取模塊，用于對于多個切割包中的每個切割包，從切割包中提取SEI包。
[0169]可選地，該裝置還包括:
[0170]碼流獲取模塊，還用于從視頻碼流中獲取原始圖像碼流；
[0171]原始圖像解碼模塊，用于將原始圖像碼流進行解碼，得到多個原始圖像；
[0172]原始圖像播放模塊，用于按照預(yù)設(shè)幀率將多個原始圖像在原始視頻播放窗口中進行播放。
[0173]本發(fā)明實施例提供的裝置，從編碼端獲取視頻碼流后，在用戶在解碼端瀏覽視頻時，通過終端指針在視頻播放進度條上進行拖動，便可在縮略圖播放窗口中實時看見對應(yīng)的縮略圖像，視頻檢索精度大大提聞，提升了視頻檢索效率。
[0174]實施例六
[0175]本發(fā)明提供了一種視頻處理設(shè)備的結(jié)構(gòu)示意圖，參見圖10，該設(shè)備包括至少一個處理器701，例如CPU，至少一個網(wǎng)絡(luò)接口 704或者其他用戶接口 703，存儲器705，和至少一個通信總線702。通信總線702用于實現(xiàn)這些裝置之間的連接通信。用戶接口 703可以是顯示器，鍵盤或者點擊設(shè)備。存儲器705可能包含高速Ram存儲器，也可能還包括非易失性存儲器(non-volatile memory),例如至少一個磁盤存儲器。
[0176]處理器701用于執(zhí)行存儲器705存放的程序，以實現(xiàn)如下方法:
[0177]采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像；對每個縮略圖像進行編碼，得到縮略圖像碼流；對每個原始圖像進行編碼，得到原始圖像碼流；將縮略圖像碼流插入到原始圖像碼流中，得到視頻碼流，以使解碼端在獲取到視頻碼流后，對視頻碼流進行解碼，得到解碼后的多個原始圖像和解碼后的多個縮略圖像，并播放解碼后的多個原始圖像和解碼后的多個縮略圖像。
[0178]進一步地，處理器701，具體用于對于多個原始圖像中的每個原始圖像，將原始圖像的寬度縮放到預(yù)設(shè)寬度；根據(jù)原始圖像的寬高比，對原始圖像的高度進行縮放，得到原始圖像的縮略圖像。
[0179]進一步地，處理器701，具體用于將存儲在縮略圖像隊列中的縮略圖像進行JPEG編碼。
[0180]進一步地，處理器701，具體用于對于多個原始圖像中的每個原始圖像，當(dāng)確定縮略圖像隊列中存儲有與原始圖像相匹配的縮略圖像后，對原始圖像進行H.264編碼。
[0181]進一步地，處理器701，具體用于對于原始圖像碼流中每個原始圖像的編碼數(shù)據(jù)，確定縮略圖碼流中與原始圖像的編碼數(shù)據(jù)相匹配的縮略圖像編碼數(shù)據(jù)，將縮略圖像的編碼數(shù)據(jù)打包為一個補充增強信息SEI包，并將SEI包插入到與原始圖像的編碼數(shù)據(jù)相鄰的位置。
[0182]本實施例提供的設(shè)備，在采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像后，對每個縮略圖像及每個原始視頻圖像進行編碼，并將縮略圖像碼流插入到原始圖像碼流中，由于將縮略圖像碼流插入到原始視頻碼流中，從而用戶在解碼端瀏覽視頻時，通過終端指針在視頻播放進度條上進行拖動，便可在縮略圖播放窗口中實時看見對應(yīng)的縮略圖像，視頻檢索精度大大提聞，提升了視頻檢索效率。
[0183]實施例七
[0184]本發(fā)明提供了一種視頻處理設(shè)備的結(jié)構(gòu)示意圖，參見圖11，該設(shè)備包括至少一個處理器801，例如CPU，至少一個網(wǎng)絡(luò)接口 804或者其他用戶接口 803，存儲器805，和至少一個通信總線802。通信總線802用于實現(xiàn)這些裝置之間的連接通信。用戶接口 803可以是顯示器，鍵盤或者點擊設(shè)備。存儲器805可能包含高速Ram存儲器，也可能還包括非易失性存儲器(non-volatile memory),例如至少一個磁盤存儲器。
[0185]處理器801用于執(zhí)行存儲器805存放的程序，以實現(xiàn)如下方法:
[0186]從編碼端獲取視頻碼流；當(dāng)終端指針在視頻播放進度條上產(chǎn)生位移時，在視頻碼流中獲取與終端指針的當(dāng)前位置相應(yīng)的SEI包；將SEI包進行解碼，得到縮略圖像；將縮略圖像在縮略圖像播放窗口中進行播放。
[0187]進一步地，處理器801，具體用于將視頻碼流進行切割，得到多個切割包；對于多個切割包中的每個切割包，從切割包中提取SEI包。
[0188]進一步地，處理器801，具體用于從視頻碼流中獲取原始圖像碼流；將原始圖像碼流進行解碼，得到多個原始圖像；按照預(yù)設(shè)幀率將多個原始圖像在原始視頻播放窗口中進行播放。
[0189]本實施例提供的設(shè)備，從編碼端獲取視頻碼流后，在用戶在解碼端瀏覽視頻時，通過終端指針在視頻播放進度條上進行拖動，便可在縮略圖播放窗口中實時看見對應(yīng)的縮略圖像，視頻檢索精度大大提聞，提升了視頻檢索效率。
[0190]需要說明的是:上述實施例提供的視頻處理裝置在進行視頻處理時，僅以上述各功能模塊的劃分進行舉例說明，實際應(yīng)用中，可以根據(jù)需要而將上述功能分配由不同的功能模塊完成，即將設(shè)備的內(nèi)部結(jié)構(gòu)劃分成不同的功能模塊，以完成以上描述的全部或者部分功能。另外，上述實施例提供的視頻處理裝置與視頻處理方法實施例屬于同一構(gòu)思，其具體實現(xiàn)過程詳見方法實施例，這里不再贅述。
[0191]上述本發(fā)明實施例序號僅僅為了描述，不代表實施例的優(yōu)劣。
[0192]本領(lǐng)域普通技術(shù)人員可以理解實現(xiàn)上述實施例的全部或部分步驟可以通過硬件來完成，也可以通過程序來指令相關(guān)的硬件完成，所述的程序可以存儲于一種計算機可讀存儲介質(zhì)中，上述提到的存儲介質(zhì)可以是只讀存儲器，磁盤或光盤等。
[0193]以上所述僅為本發(fā)明的較佳實施例，并不用以限制本發(fā)明，凡在本發(fā)明的精神和原則之內(nèi)，所作的任何修改、等同替換、改進等，均應(yīng)包含在本發(fā)明的保護范圍之內(nèi)。
【權(quán)利要求】
1.一種視頻處理方法，其特征在于，所述方法包括: 采集視頻的原始圖像，并對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像； 對每個縮略圖像進行編碼，得到縮略圖像碼流； 對每個原始圖像進行編碼，得到原始圖像碼流； 將所述縮略圖像碼流插入到所述原始圖像碼流中，得到視頻碼流，以使解碼端在獲取到所述視頻碼流后，對所述視頻碼流進行解碼，得到解碼后的多個原始圖像和解碼后的多個縮略圖像，并播放解碼后的多個原始圖像和解碼后的多個縮略圖像。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像，包括: 對于多個原始圖像中的每個原始圖像，將所述原始圖像的寬度縮放到預(yù)設(shè)寬度； 根據(jù)所述原始圖像的寬高比，對所述原始圖像的高度進行縮放，得到所述原始圖像的縮略圖像。
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對多個縮略圖像進行編碼，包括: 將存儲在縮略圖像隊列中的縮略圖像進行聯(lián)合圖像專家小組JPEG編碼。
4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述對多個原始圖像進行編碼，包括: 對于多個原始圖像中的每個原始圖像，當(dāng)確定所述縮略圖像隊列中存儲有與所述原始圖像相匹配的縮略圖像后，對所述原始圖像進行H.264編碼。
5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所述縮略圖像碼流插入到所述原始圖像碼流中，包括: 對于所述原始圖像碼流中每個原始圖像的編碼數(shù)據(jù)，確定所述縮略圖碼流中與所述原始圖像的編碼數(shù)據(jù)相匹配的縮略圖像編碼數(shù)據(jù)，將所述縮略圖像的編碼數(shù)據(jù)打包為一個補充增強信息SEI包，并將所述SEI包插入到與所述原始圖像的編碼數(shù)據(jù)相鄰的位置。
6.一種視頻處理裝置，其特征在于，所述裝置包括: 圖像采集模塊，用于采集視頻的原始圖像； 圖像縮放模塊，用于對圖像采集模塊采集到的原始圖像進行縮放處理，得到每個原始圖像的縮略圖像； 縮略圖像編碼模塊，用于對每個縮略圖像進行編碼，得到縮略圖像碼流； 原始圖像編碼模塊，用于對每個原始圖像進行編碼，得到原始圖像碼流； 插入模塊，用于將所述縮略圖像碼流插入到所述原始圖像碼流中，得到視頻碼流，以使解碼端在獲取到所述視頻碼流后，對所述視頻碼流進行解碼，得到解碼后的多個原始圖像和解碼后的多個縮略圖像，并播放解碼后的多個原始圖像和解碼后的多個縮略圖像。
7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述縮放模塊，包括: 寬度縮放單元，用于對于多個原始圖像中的每個原始圖像，將所述原始圖像的寬度縮放到預(yù)設(shè)寬度； 高度縮放單元，用于根據(jù)所述原始圖像的寬高比，對所述原始圖像的高度進行縮放，得到所述原始圖像的縮略圖像。
8.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述縮略圖像編碼模塊，用于將存儲在縮略圖像隊列中的縮略圖像進行聯(lián)合圖像專家小組JPEG編碼。
9.根據(jù)權(quán)利要求8所述的裝置，其特征在于，所述原始圖像編碼模塊，用于對于多個原始圖像中的每個原始圖像，當(dāng)確定所述縮略圖像隊列中存儲有與所述原始圖像相匹配的縮略圖像后，對所述原始圖像進行H.264編碼。
10.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述插入模塊，包括: 確定單元，用于對于所述原始圖像碼流中每個原始圖像的編碼數(shù)據(jù)，確定所述縮略圖碼流中與所述原始圖像的編碼數(shù)據(jù)相匹配的縮略圖像編碼數(shù)據(jù)； 插入單元，用于將所述縮略圖像的編碼數(shù)據(jù)打包為一個補充增強信息SEI包，并將所述SEI包插入到與所述原始圖像的編碼數(shù)據(jù)相鄰的位置。
11.一種視頻處理方法，其特征在于，所述方法包括: 從編碼端獲取視頻碼流； 當(dāng)終端指針在視頻播放進度條上產(chǎn)生位移時，在所述視頻碼流中獲取與所述終端指針的當(dāng)前位置相應(yīng)的補充增強信息SEI包； 將所述SEI包進行解碼，得到縮略圖像； 將所述縮略圖像在所述縮略圖像播放窗口中進行播放。
12.根據(jù)權(quán)利要求11所述的方法，其特征在于，所述在所述視頻碼流中獲取與所述終端指針的當(dāng)前位置相應(yīng)的補充增強信息SEI包之前，所述方法還包括: 將所述視頻碼流進行切割，得到多個切割包； 對于多個切割包中的每個切割包，從所述切割包中提取SEI包。
13.根據(jù)權(quán)利要求11所述的方法，其特征在于，所述獲取編碼端的視頻碼流之后，所述方法還包括: 從所述視頻碼流中獲取原始圖像碼流； 將所述原始圖像碼流進行解碼，得到多個原始圖像； 按照預(yù)設(shè)幀率將所述多個原始圖像在原始視頻播放窗口中進行播放。
14.一種視頻處理裝置，其特征在于，所述裝置包括: 碼流獲取模塊，用于從編碼端獲取視頻碼流； 所述碼流獲取模塊，還用于當(dāng)終端指針在視頻播放進度條上產(chǎn)生位移時，在所述視頻碼流中獲取與所述終端指針的當(dāng)前位置相應(yīng)的補充增強信息SEI包； 縮略圖像解碼模塊，用于將所述SEI包進行解碼，得到縮略圖像； 縮略圖像播放模塊，用于將所述縮略圖像在所述縮略圖像播放窗口中進行播放。
15.根據(jù)權(quán)利要求14所述的裝置，其特征在于，所述裝置還包括: 切割模塊，用于將所述視頻碼流進行切割，得到多個切割包； 提取模塊，用于對于多個切割包中的每個切割包，從所述切割包中提取SEI包。
16.根據(jù)權(quán)利要求14所述的裝置，其特征在于，所述裝置還包括: 所述碼流獲取模塊，還用于從所述視頻碼流中獲取原始圖像碼流； 原始圖像解碼模塊，用于將所述原始圖像碼流進行解碼，得到多個原始圖像； 原始圖像播放模塊，用于按照預(yù)設(shè)幀率將所述多個原始圖像在原始視頻播放窗口中進行播放。
【文檔編號】H04N19/44GK103747259SQ201310739607
【公開日】2014年4月23日 申請日期:2013年12月27日 優(yōu)先權(quán)日:2013年12月27日
【發(fā)明者】付洋, 李旭, 李俊嬋 申請人:華為技術(shù)有限公司