專利名稱:運動圖像顯示裝置的制作方法
技術領域:
本發(fā)明涉及一種運動圖像(動態(tài)圖像)顯示技術,尤其涉及一種具有運動圖像顯示功能的便攜式終端裝置中的運動圖像內(nèi)容的一覽顯示技術。
背景技術:
近年來,便攜式終端裝置的性能提高的同時,內(nèi)容的質·量也均變得充實,由此能夠蓄積多個運動圖像內(nèi)容并且再現(xiàn)享受這些多個運動圖像內(nèi)容。在下述專利文獻1所記載的發(fā)明中,記載了并行地解碼 再現(xiàn)多個運動圖像的技術。例如,如果接收到復用了多個信道的圖像信號的多個運動圖像,則對指定的信道的編碼數(shù)據(jù)進行通常的解碼處理,對除此以外的信道的編碼數(shù)據(jù)僅僅解碼指定幀,由此能夠并行地解碼·再現(xiàn)多信道的運動圖像。先行技術文獻專利文獻專利文獻1特開2001-157211號公報(圖像解碼方法及裝置以及存儲介質)發(fā)明的概要發(fā)明所要解決的課題圖20是能夠顯示多個運動圖像內(nèi)容的裝置中的多個運動圖像(圖20中示出將4 個運動圖像顯示在一個畫面上的例子。)的預覽顯示畫面的一例的圖。這里的“預覽”是指,為了能夠迅速確認運動圖像內(nèi)容的內(nèi)容本身,從而將從運動圖像內(nèi)容中提取的1枚或者多枚幀圖像、或者運動圖像的1場景進行縮小顯示、或者將運動圖像內(nèi)容單純地縮小顯示。下面,在本說明書中以這樣的含義來使用“預覽”。如圖20所示,在指示預覽的開始時, 首先,解除圖中的最左邊的運動圖像I(Videol)的加密,并且開始進行運動圖像的解碼處理。在顯示畫面上,顯示多個(這里作為例子示出了對4個運動圖像文件進行預覽顯示的例子。)的運動圖像的預覽區(qū)域,并且顯示4個運動圖像的運動圖像信息(運動圖像內(nèi)容的索引)。然而,只顯示Videol的代表圖像,而不顯示運動圖像2 (Video》以后的圖像,直到完成Videol的加密解除等圖像處理為止。接著,在完成了 Videol的加密解除處理等之后,開始進行從左起第2個Video2的加密解除處理和運動圖像的解碼處理。在該狀態(tài)中, 顯示Video2的代表圖像,但是不顯示Video3以后的代表圖像。接著,在完成了從左起第3 個Video2的加密解除處理等之后,開始進行Video3的加密解除處理、運動圖像的解碼處理。在該時間點,顯示Video3的代表圖像,但是尚未顯示Video4的代表圖像。接著,在完成了從左起第4個的Video3的加密解除處理等之后,解除Video4的加密處理,并且開始進行運動圖像的解碼處理。在該時間點,才進行一覽顯示的所有的0個)預覽圖像的顯示, 到進行所有的運動圖像的內(nèi)容的預覽顯示為止需要較長時間。從而,到用戶能掌握顯示怎樣的運動圖像為止需要時間。該問題進一步變得深刻。
發(fā)明內(nèi)容
本發(fā)明的目的在于,能讓用戶更迅速地辨別多個運動圖像的概要的技術。
用于解決課題的手段本發(fā)明是一種運動圖像顯示裝置,其具有處理綜合控制部,并行地再現(xiàn)多個運動圖像,并將在顯示部上進行顯示的處理進行綜合控制(integrated-control,統(tǒng)括,);基于所述處理綜合控制部的指示進行動作的接口部、存儲部、代表圖像獲取部和顯示圖像處理部,所述接口部獲取運動圖像數(shù)據(jù)的接口部,所述存儲部保存作為所述接口部所獲取的運動圖像數(shù)據(jù)的第1運動圖像數(shù)據(jù)和第2運動圖像數(shù)據(jù),所述代表圖像獲取部從所述存儲部中存儲的所述運動圖像數(shù)據(jù)提取或者創(chuàng)建靜止圖像數(shù)據(jù),所述顯示圖像處理部,如果指示所述第1運動圖像數(shù)據(jù)和所述第2運動圖像數(shù)據(jù)的一覽顯示,則將從所述第1運動圖像數(shù)據(jù)提取或者創(chuàng)建的第1靜止圖像數(shù)據(jù)、和從所述第2運動圖像數(shù)據(jù)提取或者創(chuàng)建的第2靜止圖像數(shù)據(jù)顯示在所述顯示部之后,以運動圖像的形式顯示所述第1運動圖像數(shù)據(jù)。優(yōu)選地,所述第1靜止圖像數(shù)據(jù)是所述第1運動圖像數(shù)據(jù)的1幀的數(shù)據(jù),所述顯示圖像處理部,在所述第1運動圖像數(shù)據(jù)的運動圖像顯示時,從所述1幀起進行運動圖像顯
7J\ ο另外,優(yōu)選地,所述第1靜止圖像數(shù)據(jù)是所述第1運動圖像數(shù)據(jù)的1幀的數(shù)據(jù),所述顯示圖像處理部,在所述第1運動圖像數(shù)據(jù)的運動圖像顯示時,從所述1幀的下一幀起進行運動圖像顯示。另外,優(yōu)選地,所述代表圖像獲取部從所述運動圖像數(shù)據(jù)提取或者創(chuàng)建多枚靜止圖像數(shù)據(jù),所述顯示圖像處理部在將所述第ι靜止圖像數(shù)據(jù)或者所述第2靜止圖像數(shù)據(jù)顯示在所述顯示部時,依次顯示多枚靜止圖像數(shù)據(jù)。另外,優(yōu)選地,具有預覽再現(xiàn)處理部,所述預覽再現(xiàn)處理部進行基于所述存儲部中存儲的所述運動圖像數(shù)據(jù)創(chuàng)建用于運動圖像的預覽顯示的預覽數(shù)據(jù)的圖像處理,所述顯示圖像處理部,如果收取由所述預覽再現(xiàn)處理部完成處理的預覽數(shù)據(jù),則以所述預覽數(shù)據(jù)置換對應的運動圖像的所述靜止圖像數(shù)據(jù)。優(yōu)選地,所述靜止圖像數(shù)據(jù)是不需要參照代表所述運動圖像的靜止圖像或者運動圖像的前后幀的圖像。另外,本發(fā)明是一種運動圖像顯示方法,并行地再現(xiàn)多個運動圖像并顯示在顯示部,所述運動圖像顯示方法包括獲取運動圖像數(shù)據(jù)的步驟;保存所獲取的運動圖像數(shù)據(jù)即第1運動圖像數(shù)據(jù)和第2運動圖像數(shù)據(jù)的步驟;代表圖像獲取步驟,從保存的所述運動圖像數(shù)據(jù)提取或者創(chuàng)建靜止圖像數(shù)據(jù);和顯示圖像處理步驟,如果指示所述第1運動圖像數(shù)據(jù)和所述第2運動圖像數(shù)據(jù)的一覽顯示,則將從所述第1運動圖像數(shù)據(jù)提取或者創(chuàng)建的第1 靜止圖像數(shù)據(jù)、和從所述第2運動圖像數(shù)據(jù)提取或者創(chuàng)建的第2靜止圖像數(shù)據(jù)顯示在所述顯示部之后,以運動圖像的形式顯示所述第1運動圖像數(shù)據(jù),來置換所述第1靜止圖像數(shù)據(jù)的顯示。另外,本發(fā)明的一種程序,用于使計算機執(zhí)行上述記載的運動圖像顯示方法。本說明書包含本申請的優(yōu)先權基礎的日本專利申請2009-120114號的說明書以及/或者附圖中記載的內(nèi)容。發(fā)明效果能夠迅速地進行所顯示的多個運動圖像的內(nèi)容的辨別。
圖1是表示本發(fā)明的一實施方式的具有運動圖像顯示功能的便攜式電話終端的外觀結構例的圖。圖2(a)是表示便攜式電話終端的利用方式的一例的圖,圖2(b)是表示外部存儲裝置中存儲的文件群的一結構例的圖。圖3是表示本實施方式的便攜式電話終端A的一結構例的功能模塊圖。圖4是表示本實施方式的便攜式電話終端的綜合控制處理部中的處理的流程的圖。圖5是表示本實施方式的便攜式電話終端的代表圖像獲取部(運動圖像識別數(shù)據(jù)獲取部)的處理的流程的圖。圖6A是表示外部存儲裝置內(nèi)的數(shù)據(jù)結構的圖。圖6B是表示加密數(shù)據(jù)的加密解除的處理的例子的圖。圖6C是表示PES數(shù)據(jù)包的獲取的情形的圖。圖6D是表示PES數(shù)據(jù)部的獲取的情形的圖。圖6E是表示代表(開頭)圖像數(shù)據(jù)的獲取的情形的圖。圖6F是表示代表(開頭)圖像數(shù)據(jù)獲取處理的流程的圖。圖6G是表示代表(開頭)圖像數(shù)據(jù)獲取處理的流程的圖。圖6H是表示代表(開頭)圖像數(shù)據(jù)獲取處理的流程的圖。圖7是表示運動圖像數(shù)據(jù)獲取部中的處理的流程的圖。圖8是表示預覽再現(xiàn)處理部中的處理的流程的圖。圖9是表示外部存儲裝置中的具體的處理的情形的圖。圖10是表示主存儲裝置(存儲器)中的具體的處理的情形的圖。圖11是表示運動圖像數(shù)據(jù)獲取部中的具體的處理的情形的圖。圖12是表示代表圖像獲取部(運動圖像識別數(shù)據(jù)獲取部)中的具體的處理的情形的圖。圖13是表示預覽再現(xiàn)處理部中的具體的處理的情形的圖。圖14是表示顯示圖像處理部中的具體的處理的情形的圖。
圖15是表示通常的MPEG2TS數(shù)據(jù)的一結構例的圖。圖16是表示運動圖像數(shù)據(jù)的保存例的圖。圖17是表示數(shù)據(jù)的加密的例子的圖。圖18是表示數(shù)據(jù)加密處理的流程的圖。圖19是表示本實施方式的能夠再現(xiàn)多個運動圖像內(nèi)容的裝置中的多個運動圖像的預覽顯示畫面的一例的圖。圖20是表示能夠再現(xiàn)多個運動圖像內(nèi)容的裝置中的多個運動圖像的預覽顯示畫面的一例的圖。符號說明A…便攜式電話終端(運動圖像顯示裝置)、3…顯示裝置、3a···觸摸面板、7…按鍵輸入裝置、11···外部記錄裝置、21···輸入裝置接口、23···處理綜合控制部、25···存儲器 (DRAM)、27…運動圖像數(shù)據(jù)獲取部、31···代表圖像獲取部(運動圖像識別數(shù)據(jù)獲取部)、
633…運動圖像解碼處理部、35…預覽再現(xiàn)處理部、37…顯示圖像處理部、41···存儲裝置I/O 接口、45···加密解除處理部。
具體實施例方式在本說明書中,運動圖像是指,當運動圖像數(shù)據(jù)中包含再現(xiàn)定時的情況下,按照該再現(xiàn)定時進行再現(xiàn)的圖像、或者當不使用在運動圖像數(shù)據(jù)中包含的再現(xiàn)定時的情況以及運動圖像數(shù)據(jù)中未包含再現(xiàn)定時的情況下進行以一定的時間間隔更新幀這樣的再現(xiàn)的圖像。 代表圖像是指,代表運動圖像數(shù)據(jù)的圖像,是從運動圖像數(shù)據(jù)中提取或者創(chuàng)建的靜止圖像、 例如、剪切運動圖像的一部分的靜止圖像、不需要前后其他幀的參照的運動圖像的1幀分量的數(shù)據(jù)等。另外,代表圖像在這里作為靜止圖像來處理,因此從運動圖像文件的任何地方提取的代表圖像,不依賴于該運動圖像文件中包含的再現(xiàn)定時。從而,即使經(jīng)過了時間,也繼續(xù)進行相同幀(靜止圖像)的顯示。從運動圖像數(shù)據(jù)中提取代表圖像的處理,是比進行運動圖像的顯示或者運動圖像的預覽顯示的處理更快的處理。這是,提取代表圖像的處理中, 將包含1幀分量的數(shù)據(jù)的運動圖像數(shù)據(jù)的一部分作為處理的對象,與進行將運動圖像數(shù)據(jù)的整體作為處理的對象的運動圖像的顯示或者預覽顯示的處理相比,在存儲器中讀入的運動圖像數(shù)據(jù)的長度極小。此外,將縮小運動圖像或部分提取運動圖像并進行顯示的情況稱為預覽顯示。將不進行這樣的處理并顯示運動圖像的情況簡稱為運動圖像的顯示。下面,作為本發(fā)明的一實施方式的運動圖像顯示裝置的一例,以通常的便攜式電話終端為例,參照附圖進行說明。圖1是表示便攜式電話終端A的外觀結構例的圖,也可以具有框體1、LCD顯示裝置3、揚聲器5、按鍵輸入裝置7、外部存儲裝置11 (內(nèi)置的閃存或者可拆卸的存儲卡等)和麥克15。顯示裝置3也可以具有觸摸面板3a。在外部存儲裝置11 中能夠保存多個運動圖像內(nèi)容,下面以記錄有多個運動圖像內(nèi)容的情況為前提進行說明。 運動圖像可以是由未圖示的附屬相機攝影的圖像,也可以是流接收的圖像。圖2 (a)是表示便攜式電話終端A的利用方式的一例的圖,示出了在IXD顯示裝置 3上作為運動圖像內(nèi)容的菜單顯示例顯示4個運動圖像內(nèi)容的索引的狀態(tài)。內(nèi)容圖像顯示 (1) 內(nèi)容圖像顯示G),是顯示外部存儲裝置11中保存的視頻內(nèi)容(Videol到Video4) 的代表圖像的運動圖像內(nèi)容一覽顯示畫面。剛顯示該運動圖像內(nèi)容一覽顯示畫面之后(例如、針對多個運動圖像內(nèi)容剛進行預覽顯示的指示之后),顯示各視頻內(nèi)容的例如最初的幀圖像作為代表圖像。再有,雖然是任意的,但是作為內(nèi)容信息顯示,為了與代表圖像相對應, 顯示各視頻內(nèi)容(VideoX)這樣的標題和創(chuàng)建日期時間、其他的文本等的Video信息。這些 Video信息描述在按每個視頻內(nèi)容生成的信息文件中。如果經(jīng)過了時間,則逐漸在各個代表圖像的顯示區(qū)域中開始進行各視頻內(nèi)容的 “運動圖像”的預覽顯示,由此能夠詳細地在視覺上獲知運動圖像的信息。圖2(b)是表示外部存儲裝置11中存儲的文件群的一例的圖。如圖2(b)所示,將 Video文件、Video信息文件、Video媒體偏置信息文件和Video管理信息文件成為一組來保存。在該例子中,以采用SD-Video形式來保存的運動圖像內(nèi)容作為例子。在SD-Video 形式(格式)中,以SBl文件、PGI文件、MOI文件、MAI文件的4個文件來記錄運動圖像內(nèi)容。在圖2(b)的各文件圖形內(nèi)記載的文件名之中,SBl文件是運動圖像 聲音的編碼后的數(shù)據(jù)串(已加密)。MOI (媒體對象信息,Media Object Information)文件是將SBl文件中的保存媒體數(shù)據(jù)的位置以偏置信息來記錄的文件。PGI文件是保存有標題、創(chuàng)建日期時間等的文件。MAI文件是管理用文件。在本實施方式中,SBl文件與MOI文件有關系。此外, 視頻內(nèi)容包括以MPEG4/AVC編碼的影像數(shù)據(jù)、以MPEG4-Audio(AAC)編碼的聲音數(shù)據(jù)。另外,這些視頻內(nèi)容,通常在保存于存儲裝置中的狀態(tài)下被實施用于內(nèi)容保護的加密,但是不限于這樣的內(nèi)容。圖3是表示本實施方式的便攜式電話終端A的一結構例的功能模塊圖。圖3所示的便攜式電話終端A具有具備觸摸面板3a功能的顯示裝置3 ;按鍵輸入裝置7,是用戶為了開始進行多個運動圖像的一覽顯示而操作的輸入設備;保存內(nèi)容的作為閃存或者存儲卡的外部存儲裝置11 ;加密解除處理部45,解除外部存儲裝置11內(nèi)保存的加密后的視頻內(nèi)容的加密;CPU(虛線內(nèi)是在CPU內(nèi)部進行的處理部)。CPU內(nèi)包含以下的結構。a)處理綜合控制部23 對進行多個運動圖像的預覽的一覽顯示的一系列的處理進行綜合控制。b)存儲裝置I/O接口 41 是對向外部存儲裝置11的數(shù)據(jù)的讀寫進行管理的接口, 針對來自下述的代表圖像數(shù)據(jù)獲取部或者運動圖像數(shù)據(jù)獲取部的數(shù)據(jù)讀出請求,從外部存儲裝置11讀出請求數(shù)據(jù)并返回。當請求數(shù)據(jù)是加密后的數(shù)據(jù)情況下,解除加密之后返回。c)存儲器(DRAM) 25 是通常廣泛利用的存儲器,DRAM (Dynamic Random Access Memory)的一種。d)運動圖像數(shù)據(jù)獲取部27 從外部存儲裝置11所保存的運動圖像內(nèi)容數(shù)據(jù)中讀入一定大小分量(例如720kB)的數(shù)據(jù),并且向存儲器(DRAM) 25進行寫入處理。e)代表圖像獲取部31(運動圖像識別數(shù)據(jù)獲取部)從外部存儲裝置11所保存的運動圖像內(nèi)容數(shù)據(jù)中,讀入包含運動圖像的開頭圖像的數(shù)據(jù)等,并且進行解碼圖像數(shù)據(jù)的處理?;蛘?,進行從前述的Video信息中獲取能夠進行該運動圖像內(nèi)容數(shù)據(jù)的識別的數(shù)據(jù)的處理。f)預覽再現(xiàn)處理部35 讀出存儲器中寫入的運動圖像內(nèi)容數(shù)據(jù),并且依次解碼運動圖像數(shù)據(jù),向顯示圖像處理部發(fā)送數(shù)據(jù)。g)運動圖像解碼處理部33 是通常利用的H. 264解碼器的一種。h)顯示圖像處理部37 進行從代表圖像處理部31以及預覽再現(xiàn)處理部35收取的圖像數(shù)據(jù)的合成處理,并且進行顯示畫面的更新。i)顯示裝置(IXD)3 是通常廣泛利用的液晶面板等顯示部。j)輸入裝置接口 21 接受來自觸摸面板3a、按鍵輸入裝置7的輸入并傳遞到處理綜合控制部23。圖9至圖14是表示各處理部中的具體的處理的情形的圖。如圖9所示,外部存儲裝置11針對從Videol至4為止的各數(shù)據(jù)串,配置了以HPI表示的開頭、配置在離開該開頭的位置上且包含IDR圖的PES數(shù)據(jù)包、以及除此以外的包含IDR圖以外的數(shù)據(jù)的PES數(shù)據(jù)包。外部存儲裝置所保存的運動圖像內(nèi)容數(shù)據(jù)通常為了內(nèi)容保護而被加密。這里,處理綜合控制部23最初向代表圖像獲取部31指示包含成為代表圖像的圖像數(shù)據(jù)在內(nèi)的開頭的數(shù)據(jù)塊的獲取。如果完成了 N個所有的代表圖像的獲取,則向運動圖像數(shù)據(jù)獲取部27指示僅獲取存儲單元(memory slot)(圖10)中存放的分量的運動圖像數(shù)據(jù)塊。
代表圖像獲取部31按照來自處理綜合控制部23的指示,從數(shù)據(jù)的開頭獲取包含 IDR圖的數(shù)據(jù)塊。該數(shù)據(jù)塊是指,包含圖9所示的IDR圖的PES數(shù)據(jù)包(HPI)。由于所獲取的數(shù)據(jù)已被編碼,因此利用運動圖像解碼處理部33解碼圖像數(shù)據(jù)。將解碼的圖像作為代表圖像向顯示裝置3輸出指示。如圖10所示,主存儲裝置(存儲器)25是指RAM (Random Access Memory)。嚴格來講,就RAM25而言,所有的處理部進行利用,但是這里僅針對與本發(fā)明的關鍵點有關系的部分進行說明。存儲器25中,設有多個存儲單元,在各個存儲單元中,保存有與圖9對應的數(shù)據(jù)。如圖11所示,運動圖像數(shù)據(jù)獲取部27從外部存儲裝置11獲取各個Video數(shù)據(jù),在預覽顯示的情況下,例如在存儲器中僅復制SOOkB分量。通過運動圖像數(shù)據(jù)獲取部27的該處理,圖9所示的各Video的多個PES數(shù)據(jù)包如圖10所示那樣保存在存儲單元中。此外, 由于作為預覽顯示的目的,例如只要有10至15秒程度的數(shù)據(jù)即可,因此具有存儲器利用量的削減、預覽處理的高速化這樣的效果。如圖12所示,代表圖像獲取部31,按每個Video數(shù)據(jù),提取出根據(jù)包含IDR圖的 PES數(shù)據(jù)包即HPI來解碼的代表圖像數(shù)據(jù)。如圖13所示,預覽再現(xiàn)處理部35與代表圖像獲取部31并行地動作。預覽再現(xiàn)處理部35監(jiān)視存儲單元(圖10)并且等待在此處保存運動圖像數(shù)據(jù)。如果確認存儲單元中保存了運動圖像數(shù)據(jù),則讀入該數(shù)據(jù),并且利用運動圖像解碼處理部33,開始進行運動圖像數(shù)據(jù)的解碼。解碼后的運動圖像數(shù)據(jù),與內(nèi)容的編號一起發(fā)送到顯示裝置3,指示從代表圖像向對應的運動圖像更新顯示圖像。這些是針對所有的存儲單元進行的,但是成為處理對象的存儲單元的切換以時間分割的方式進行逐次處理。如圖14所示,顯示圖像處理部37進行如下處理最初顯示代表圖像,如果發(fā)送運動圖像數(shù)據(jù),則進行以運動圖像顯示來置換代表圖像顯示并進行更新的處理。例如,進行如下處理作為運動圖像顯示,進行預覽顯示的情況下,每當從預覽再現(xiàn)處理部35發(fā)送預覽數(shù)據(jù)時,以預覽顯示來置換代表圖像顯示并進行更新的處理。通過該處理,向代表圖像的顯示、預覽顯示的置換處理順利地進行。此外,控制流程表示箭頭發(fā)生塊向箭頭目的地的塊指示處理或者進行數(shù)據(jù)請求的流程。數(shù)據(jù)流程表示從箭頭發(fā)生塊向箭頭目的地的塊的運動圖像數(shù)據(jù)等、數(shù)據(jù)的流程。接著,參照圖15至圖17,對視頻內(nèi)容的數(shù)據(jù)格式進行說明。作為對象的數(shù)據(jù)格式是MPEG2TS(IS0/IEC) 13818-1。此外,MPEG2TS中,如圖15所示,編碼后的影像數(shù)據(jù) 聲音數(shù)據(jù)作為由稱為TS數(shù)據(jù)包的固定長度(188字節(jié))的數(shù)據(jù)塊構成的數(shù)據(jù)流來創(chuàng)建文件。H(報頭字段)中包含數(shù)據(jù)包標識符等。合適字段中包含成為用于對運動圖像數(shù)據(jù)進行再現(xiàn)的基準的時間信息、填充數(shù)據(jù)(用于長度調(diào)節(jié)的冗余數(shù)據(jù))。有效載荷中保存影像數(shù)據(jù)、聲音數(shù)據(jù)等。圖16是表示運動圖像數(shù)據(jù)的保存例的圖。圖16(a)是表示將運動圖像數(shù)據(jù)保存在MPEG2TS中的例子的圖。運動圖像由IDR、P、P、…構成,聲音數(shù)據(jù)由Frame構成,這些按運動圖像、聲音的順序配置在時間軸上。由虛線的框圍住的區(qū)域表示需要取同步的部分。如圖16(b)的上圖所示,需要取同步的影像、聲音匯集在1個PES數(shù)據(jù)包中。在包含IDR圖數(shù)據(jù)的情況下,其必須包含在PES數(shù)據(jù)包的開頭中。如其下的圖所示,PES數(shù)據(jù)包被分割為184字節(jié)以下的數(shù)據(jù)以便被收斂在TS數(shù)據(jù)包中。圖16(b)的下圖是表示在被分割的有效載荷中附加4字節(jié)的報頭和合適字段來構成TS數(shù)據(jù)包的情形的圖。在附加報頭時,在保存PES數(shù)據(jù)包的開頭數(shù)據(jù)的TS數(shù)據(jù)包中,設置有表示開頭的標記(PUSI = 1)。就被分割的接下來的數(shù)據(jù)而言,設置PUSI = 0。另外, 還包含用于對流進行再現(xiàn)的基準時間信息。在需要下次的同步的地方,在開頭設置PUSI = 1的標記。此外,這些數(shù)據(jù)格式是基于MPEG2TS(IS0/IEC13818-1)以及one_seg( 7 >七夕‘ 一)規(guī)定的格式,以例示的方式示出了這些數(shù)據(jù)格式。接著,本發(fā)明中是任意的處理,然而對數(shù)據(jù)的加密進行說明。圖17是表示以下的實施方式中說明的加密處理的概要的圖。在圖17上示出了未實施加密的運動圖像數(shù)據(jù)的數(shù)據(jù)結構,由多個TS數(shù)據(jù)包構成。如果對該數(shù)據(jù)實施加密,則如其下的圖所示,由報頭和流的組的重復來構成,以影像 聲音的PES數(shù)據(jù)包為單位實施加密(從PUSI = 1的數(shù)據(jù)包至剛好出現(xiàn)下一 PUSI = 1的數(shù)據(jù)包之前的數(shù)據(jù)包為止被判斷為PES數(shù)據(jù)包)。由上圖的粗線包圍的區(qū)域的詳細結構為下圖所示。就未實施加密的運動圖像數(shù)據(jù)而言,H(報頭)、合適字段和有效載荷的單位被交換。如果進行加密,則由H、合適字段和加密后的有效載荷的組構成。PUSI = 1的數(shù)據(jù)包的報頭以及合適字段未被加密(該合適字段中包含成為用于對流進行再現(xiàn)的基準的時間信息)。利用它可以對流進行再現(xiàn)。圖18是表示根據(jù)上述的加密后的內(nèi)容獲取運動圖像流為止的簡單的流程的流程圖。如圖18所示,首先,準備加密數(shù)據(jù)(步驟S61),并解除加密后設為MPEG2TS流(步驟 S62)。加密的解除由加密解除處理部45來進行,所獲取的MPEG2TS流通過存儲裝置I/O 接口 41傳遞到運動圖像數(shù)據(jù)獲取部27以及代表圖像獲取部31。此外,運動圖像數(shù)據(jù)獲取部27將收取的MPEG2TS數(shù)據(jù)原樣寫入到存儲器(DRAM) 25。接著,代表圖像獲取部31以及預覽再現(xiàn)處理部35根據(jù)所得到的MPEG2TS數(shù)據(jù)包,合并TS數(shù)據(jù)包并設為PES數(shù)據(jù)包(步驟S6!3)。再有,代表圖像獲取部31以及預覽再現(xiàn)處理部35從所得到的PES數(shù)據(jù)包中分離 H. 264流并設為H. 264字節(jié)流(訪問單元)(步驟S64)。根據(jù)最終得到的H. 264字節(jié)流(訪問單元)使用運動圖像解碼處理部(H. 264解碼器)能夠得到代表圖像以及運動圖像。下面,對本實施方式的處理的細節(jié)進行說明。圖4是表示處理綜合控制部23中的處理的流程的圖。如果用戶通過按鍵輸入裝置7或者觸摸面板3a指示多個運動圖像的一覽顯示處理的開始,則開始進行處理綜合控制部23的處理(步驟Sl 開始(START))。接著,在步驟S2中,向顯示圖像處理部37指示一覽顯示畫面的生成。在步驟S3中,在存儲器 25內(nèi)確保用于保存運動圖像數(shù)據(jù)的存儲單元區(qū)域(參照圖10) (a-Ο)。在步驟S4中,向代表圖像獲取部31(參照圖12)指示處理的開始(a-Ι)。此外,在完成了基于(a-Ι)的處理的時間點,在一覽顯示中顯示要顯示的所有的運動圖像內(nèi)容的代表圖像。在步驟S5中,向運動圖像數(shù)據(jù)獲取部27 (參照圖11)指示處理的開始(a-2)。在完成了基于該(a_2)的指示的處理的時間點,在一覽顯示中要顯示的所有的運動圖像內(nèi)容處于可再現(xiàn)的狀態(tài)(預覽顯示成為可能)。在步驟S6中,執(zhí)行一覽顯示。在步驟S7中,由用戶進行一覽顯示的結束處理的操作為止等待,在一覽顯示執(zhí)行中預覽顯示部繼續(xù)動作,重復進行運動圖像再現(xiàn)。如果檢測出操作(“是”),則向預覽再現(xiàn)處理部指示處理的結束,在步驟S9中結束處理。圖5是表示代表圖像獲取部31的處理的流程的圖,通過來自處理綜合控制部23 的指示開始進行處理(步驟Sll 從圖4的a-Ι)。接著,在步驟S12中,作為i (代表圖像的顯示的順序)設定i = 1。
在步驟S13中,向存儲裝置I/O接口 41請求運動圖像數(shù)據(jù)(Video[i]。在本實施方式中將與視頻內(nèi)容Videol對應的運動圖像數(shù)據(jù)(第1運動圖像數(shù)據(jù))設為i = l(Video[l])、將與視頻內(nèi)容Video2對應的運動圖像數(shù)據(jù)(第2運動圖像數(shù)據(jù))設為i = 2 (Video [2]))的開頭數(shù)據(jù)(PES數(shù)據(jù)包)的獲取。如圖16所示,由于在運動圖像數(shù)據(jù)的開頭數(shù)據(jù)(PES數(shù)據(jù)包)中包含IDR圖數(shù)據(jù),因此在此請求1個開頭PES數(shù)據(jù)包分量的數(shù)據(jù)的獲取。在步驟S14中,從所獲取的PES數(shù)據(jù)包中分離包含IDR圖的H. 264字節(jié)數(shù)據(jù)串。這里,從PES數(shù)據(jù)包中分離成為IDR圖的H. 264的字節(jié)流。通過解析H. 264的訪問單元能夠進行分離。接著,在步驟S15中,利用運動圖像解碼處理部33將所分離的IDR圖的H. 264字節(jié)數(shù)據(jù)串進行解碼。根據(jù)在上述的過程中獲取的IDR圖數(shù)據(jù),利用圖像解碼處理部33,獲取 YUV420形式的圖像數(shù)據(jù)(1枚)。此外,IDR圖數(shù)據(jù)封閉在1幀內(nèi)(不需要前后幀的參照)。 在步驟S16中,將解碼后的圖像縮小為要顯示的大小。由于在一覽顯示時需要縮小圖像大小,因此在該階段進行縮小處理。在步驟S17中,向顯示圖像處理部37指示解碼后的代表圖像(縮小圖像)的輸出。 更詳細而言,將縮小圖像寫入到顯示圖像處理部37的視頻緩存中,并指示再描繪。在步驟 S18中,設為i = i+Ι,在步驟S19中判斷是否為i <= 4,如果為“否”則在步驟S20中結束處理并返回到(a-Ι)。在該時間點,在顯示裝置3上顯示從Video[l](第1運動圖像數(shù)據(jù)) 提取且創(chuàng)建的縮小圖像即靜止圖像(第1靜止圖像數(shù)據(jù))、從Video[2](第2運動圖像數(shù)據(jù))提取且創(chuàng)建的縮小圖像即靜止圖像(第2靜止圖像數(shù)據(jù))。如果為“是”,則返回到步驟S13,并重復處理。在完成了這些處理之后,所顯示的代表圖像數(shù)據(jù)(包含第1靜止圖像數(shù)據(jù)、第2靜止圖像數(shù)據(jù)),成為靜止的狀態(tài)直到由后述的預覽再現(xiàn)處理部進行的運動圖像再現(xiàn)處理(包含第1運動圖像數(shù)據(jù)的再現(xiàn)處理)為止。在該實施例中,作為解碼單位利用 PES數(shù)據(jù)包(基于one-seg規(guī)定),但是只要是基于H. 264訪問單元的解碼單位,即使是其他方式也可以適用(例如能夠適用于MP4文件格式等中)。圖6A至圖6E以及圖6F至圖6H是分別表示代表(開頭)圖像數(shù)據(jù)獲取方法的概要和處理的流程的圖。圖6A是表示外部存儲裝置11內(nèi)的數(shù)據(jù)結構的圖。在外部存儲裝置11內(nèi)所保存的數(shù)據(jù)、例如SD卡(商標名)內(nèi)的SBl文件(已加密的情況下),由以“報頭” + “加密數(shù)據(jù)”為1個單位的數(shù)據(jù)串構成。在報頭的位置中,包含固定的數(shù)據(jù)模式(pattern)。再有, 在MOI文件中描述了包含IDR圖的數(shù)據(jù)的位置(偏置)的一覽,能夠根據(jù)數(shù)據(jù)開始位置和偏置計算出下一數(shù)據(jù)的開始位置。如圖6F所示,如果開始進行處理(start),則在步驟S21-0中代表圖像獲取部31 向外部存儲裝置I/O接口部41請求包含IDR圖的“開頭數(shù)據(jù)”的獲取。在步驟S21-1中, 外部存儲裝置I/O接口部41參照上述的MOI文件,根據(jù)包含IDR圖的數(shù)據(jù)串的偏置,計算出“開頭數(shù)據(jù)”的范圍。在步驟S21-2中,外部存儲裝置I/O接口部41基于所計算出的“開頭數(shù)據(jù)”的范圍提取出加密數(shù)據(jù),使用加密解除處理部45,進行加密的解除。在步驟S21-3 中,外部存儲裝置I/O接口部41將解除了加密的數(shù)據(jù)串(MPEG2TQ返回給代表圖像獲取部 31 (返回的數(shù)據(jù)保存在存儲器25中)。此外,在以未實施加密的數(shù)據(jù)(MPEG2TS數(shù)據(jù))作為對象的情況下,不進行步驟S21-2、21-3的處理,直接將存儲卡所保存的“開頭數(shù)據(jù)”的范圍返回給代表圖像獲取部31。
圖6B是表示加密解除的處理的例子的圖。是表示解除加密數(shù)據(jù)的加密來創(chuàng)建 MPEG2TS數(shù)據(jù)串的情形的圖。如果解除“代表數(shù)據(jù)”的加密,則還原由多個TS數(shù)據(jù)包構成的MPEG2TS形式的數(shù)據(jù)串。由于TS數(shù)據(jù)包是188字節(jié)的固定長度,因此在保存影像數(shù)據(jù)的情況下,有時不能完全存放到1個TS數(shù)據(jù)包中。在這樣的情況下,將影像數(shù)據(jù)分割為多個TS數(shù)據(jù)包。TS數(shù)據(jù)包中包含的數(shù)據(jù)是否被分割是通過確認TS數(shù)據(jù)包的報頭中包含的“PUSI”標記來能夠判斷。 PUSI = 1的數(shù)據(jù)包表示包含分割后的數(shù)據(jù)的開始位置,PUSI = 0的數(shù)據(jù)包表示包含分割后的數(shù)據(jù)的中途(或者最后尾)。圖6C是表示PES數(shù)據(jù)包的獲取的情形的圖。在從上述的MPEG2TS的數(shù)據(jù)串獲取 PES數(shù)據(jù)包的情況下,連結MPEG2TS的數(shù)據(jù)串的有效載荷,能夠獲取由PES報頭和編碼后的影像數(shù)據(jù)的數(shù)據(jù)串構成的PES數(shù)據(jù)包。圖6D是表示PES數(shù)據(jù)部的獲取的情形的圖。如上所述,在PES數(shù)據(jù)部中包含編碼后的影像數(shù)據(jù)的數(shù)據(jù)串。在PES數(shù)據(jù)包中包含的、編碼后的影像數(shù)據(jù)的數(shù)據(jù)串成為“訪問單元(AU) ”連結的數(shù)據(jù)串。訪問單元(AU)是編碼的1個單位,針對1個訪問單元,對應1枚分量的IDR圖數(shù)據(jù)或者1枚分量的P圖數(shù)據(jù)。在訪問單元(AU)連結的情況下,在1個PES 數(shù)據(jù)包中包含多個圖數(shù)據(jù),但是在PES數(shù)據(jù)包中包含IDR圖數(shù)據(jù)的情況下,該IDR圖數(shù)據(jù)必須剛好配置在PES報頭之后,P圖數(shù)據(jù)配置在該IDR圖數(shù)據(jù)的后部。代表(開頭)圖像部在獲取了 PES數(shù)據(jù)包之后,解析PES報頭,檢測出數(shù)據(jù)串的開頭位置,進行包含影像數(shù)據(jù)的訪問單元的獲取。接著,如步驟S22-4所示,代表圖像獲取部31根據(jù)收取的MPEG2TS數(shù)據(jù)串的開頭位置解析MPEG2TS數(shù)據(jù)串中包含的TS數(shù)據(jù)包的報頭,并且搜索PUSI = 1的數(shù)據(jù)包(通常, 位于MPEG2TS數(shù)據(jù)串的開頭)。在步驟S22-5中,代表圖像獲取部31從所發(fā)現(xiàn)的TS數(shù)據(jù)包的報頭中獲取合適字段的長度,計算出TS數(shù)據(jù)包內(nèi)的有效載荷開始位置和有效載荷長度。 在步驟S22-6中,代表圖像獲取部31使用所計算出的有效載荷開始位置和有效載荷長度, 提取有效載荷數(shù)據(jù)。在步驟S22-7中,代表圖像獲取部31將MPEG2TS數(shù)據(jù)串的參照位置移到下一 TS數(shù)據(jù)包的位置。如圖6G所示,在步驟S23-8中,代表圖像獲取部31解析TS數(shù)據(jù)包的報頭,如果為PUSI = 0,則重復進行步驟S22-5至步驟S22-7為止的處理,并連結所提取的有效載荷數(shù)據(jù)。在步驟S23-9中,代表圖像獲取部31重復進行直到檢測出PUSI = 1的TS數(shù)據(jù)包或者到達MPEG2TS數(shù)據(jù)串的最后尾為止。此外,在完成了步驟S23-9的處理的時間點,連結的有效載荷構成PES數(shù)據(jù)包。在步驟S24-10中,代表圖像獲取部31解析所獲取的PES數(shù)據(jù)包的報頭,獲取PES數(shù)據(jù)包的數(shù)據(jù)大小和PES數(shù)據(jù)部的開始位置,提取PES數(shù)據(jù)部。在步驟 S24-11中,代表圖像獲取部31將從PES數(shù)據(jù)包獲取的PES數(shù)據(jù)部輸入到運動圖像解碼處理部33,指示解碼處理。圖6E是表示開頭圖像數(shù)據(jù)的獲取的情形的圖。將上述圖6D所示的PES數(shù)據(jù)部分離為包含IDR圖的訪問單元。在1個訪問單元中,包含1幀分量的圖像數(shù)據(jù)(IDR圖、P圖的任何情況下)。在訪問單元的開始位置中,具有訪問單元分隔符(Access Unit Delimeter) 這樣的固定模式。從而,通過搜索該模式,能夠分割為各數(shù)據(jù)。接著,將包含IDR圖的訪問單元進行解碼,并且設為圖像數(shù)據(jù)(YUV420形式)。以1個訪問單元單位,執(zhí)行解碼,能夠獲取解碼后的圖像數(shù)據(jù)(YUV420形式)。如圖6H所示,在步驟S25-12中,代表圖像獲取部31將從PES數(shù)據(jù)包獲取的PES 數(shù)據(jù)部輸入到運動圖像解碼處理部33,并指示解碼處理。在步驟S25-13中,運動圖像解碼處理部33根據(jù)所輸入的PES數(shù)據(jù)部,搜索訪問單元分隔符(Access Unit Delimiter),并提取成為代表圖像數(shù)據(jù)的IDR圖數(shù)據(jù)的位置。在步驟S25-14中,運動圖像解碼處理部33進行所提取的IDR圖數(shù)據(jù)的解碼,并獲取圖像數(shù)據(jù)(YUV420形式)。在步驟S25-15中,運動圖像解碼處理部33將所獲取的圖像數(shù)據(jù)調(diào)整大小為顯示中采用的圖像大小。在步驟S25-16 中,運動圖像解碼處理部33將所獲取的圖像數(shù)據(jù)調(diào)整大小為顯示中采用的圖像大小(對數(shù)據(jù)間隔提取)。在步驟S25-17中,運動圖像解碼處理部33輸出調(diào)整大小后的圖像數(shù)據(jù),并返回到代表圖像獲取部31。以下,代表圖像獲取部31指示向顯示裝置3的輸出。此外,針對預覽再現(xiàn)處理部35,上述步驟S22-4 步驟S25-12為止進行與上述過程同樣的處理,在步驟S25-13 17中,不限于IDR圖數(shù)據(jù),進行訪問單元分隔符(Access Unit Delimiter)的搜索,并重復進行分離和解碼的處理,直到到達數(shù)據(jù)的最后尾為止。圖7是表示運動圖像數(shù)據(jù)獲取部27中的處理的流程的圖。首先,在運動圖像數(shù)據(jù)獲取部27中通過來自處理綜合控制部23的指示開始進行處理(步驟S31 開始(START)、 圖4的a-幻。此外,由處理綜合控制部23預先確保保存運動圖像數(shù)據(jù)的區(qū)域。在步驟S33 中,設置保存從此獲取的運動圖像數(shù)據(jù)的存儲器區(qū)域的開頭位置。按每個內(nèi)容,將各個保存目的地存儲器區(qū)域(存儲單元)的開頭地址建立關聯(lián)(參照圖10)。在步驟S34中,向存儲裝置I/O接口 41請求運動圖像數(shù)據(jù)(Video[i])的一定長度分量的數(shù)據(jù)獲取。這里,與圖5的步驟S13的情況不同,請求指定的大小分量(例如SOOkB)的運動圖像數(shù)據(jù)的數(shù)據(jù)獲取。在步驟S35中,將從存儲裝置I/O接口返回的數(shù)據(jù)原樣保存于在步驟S33中設置的存儲器區(qū)域中。這里獲取的數(shù)據(jù)并沒有暫時保存在工作存儲器(Working Memory)等中,而是直接寫入(進行傳輸)到存儲單元。在步驟S36中,向預覽再現(xiàn)處理部35指示運動圖像再現(xiàn)處理(c-1),如果完成對存儲器區(qū)域的寫入,則開始進行預覽再現(xiàn)處理部35的動作。預覽再現(xiàn)處理,能夠與運動圖像數(shù)據(jù)獲取部27的處理以及處理綜合控制部23的處理并行地動作(并行動作能夠利用操作系統(tǒng)(OS)提供的功能)。如果完成處理,則向處理綜合控制部23返回控制權(圖4的步驟S5的a-2)。在步驟S37中設為i = i+Ι,在步驟S38中判斷是否為i <= 4,如果為“否”,則在步驟S39中結束處理,返回到步驟S5。如果為“是”, 則返回到步驟S33并繼續(xù)進行處理。圖8是表示預覽再現(xiàn)處理部35中的處理的流程的圖。通過來自運動圖像數(shù)據(jù)獲取部27的通知開始進行處理。首先,在步驟S41中開始進行處理(START),在步驟S42中, 將存儲器讀入位置設置在存儲單元的開頭位置。接著,在步驟S43中,從存儲單元讀入1解碼單位(PES數(shù)據(jù)包)分量的數(shù)據(jù)并分離編碼后的影像數(shù)據(jù)(流)。由于有時在1個PES數(shù)據(jù)包中保存多枚幀數(shù)據(jù),因此進一步分割為幀單位。在步驟S44中,將分離后的影像數(shù)據(jù)(流)分割為幀單位(設為分割為K個)。在該處理中的幀數(shù)據(jù)解碼中,除了 IDR圖以外,還包含使用解碼完的過去的幀數(shù)據(jù)來還原圖像數(shù)據(jù)的P圖。在P圖的解碼中,由于進行運動補償?shù)鹊膸g的校正處理,因此通常與在幀內(nèi)完結處理的IDR圖相比演算量增多的步驟S45中,從PES數(shù)據(jù)包獲取PES中包含的幀數(shù)據(jù)的再現(xiàn)時刻。
在步驟S46中,根據(jù)PES所包含的幀數(shù)據(jù)的再現(xiàn)時刻計算出第j個幀數(shù)據(jù)的再現(xiàn)時刻。當在PES數(shù)據(jù)包中包含K個幀數(shù)據(jù)的情況下,在讀入下一數(shù)據(jù)之前,將所包含的K個數(shù)據(jù)的所有的圖像進行解碼,并進行圖像的顯示。在步驟S48中,針對第j個幀數(shù)據(jù),利用運動圖像解碼處理部33進行解碼處理,在步驟S49中,將解碼后的圖像縮小為要顯示的大小。 在步驟S50中,與再現(xiàn)時刻一起向顯示圖像處理部37指示解碼后的幀圖像(縮小圖像)的輸出。收到輸出的指示的顯示圖像處理部37按照與幀圖像一起收取的再現(xiàn)時刻,對預覽顯示圖像進行更新,并輸出到顯示裝置。在步驟S51中,設為j = j+1,在步驟S52中判斷是否為J > K,如果為“是”,則進入步驟S53,在下一 PES數(shù)據(jù)包位置上查找存儲器的參照位置。 接著,在步驟S54中,判斷是否存在下一 PES數(shù)據(jù)包,如果為“是”,則返回到步驟S42,如果為“否”則返回到步驟S47。此外,如果從處理綜合控制部23有了結束指示(步驟S55),則進入中斷(可利用 OS的功能),并中斷所有的處理,釋放存儲器25 (步驟S56),結束處理(步驟S57)。圖19是表示基于上述的處理的本實施方式的能夠再現(xiàn)多個運動圖像內(nèi)容的裝置中的多個運動圖像(圖19中表示顯示4個運動圖像的例子)的預覽顯示畫面的一例的圖, 是與圖20對應的圖。如圖19所示,如果指示預覽的開始,則首先進行運動圖像I(Videol) 的加密解除處理,并且進行Videol至Video4為止的所有的代表圖像的顯示處理。繼續(xù)從 Videol起按順序開始進行數(shù)據(jù)的剪切、加密解除以及運動圖像的解碼。Videol的顯示圖像從代表圖像更新為運動圖像。接下來,Video2也同樣進行數(shù)據(jù)的剪切、加密解除以及運動圖像的解碼,Video2的顯示從代表圖像顯示更新為預覽顯示。在Video2的更新后,Video3 也同樣從代表圖像更新為運動圖像,此后Video4也從代表圖像顯示更新為預覽顯示。在該時間點,進行一覽顯示的所有的0個)預覽(代表圖像的顯示),通過預覽顯示能夠確認所有的運動圖像的內(nèi)容。與圖20的情況進行比較,在成為能夠進行預覽顯示的狀態(tài)為止的期間能夠迅速地進行代表圖像的顯示,因此對用戶來講具有能夠更早獲知是怎樣的運動圖像的內(nèi)容的優(yōu)點。此外,在本實施方式中,說明了作為代表圖像使用1枚靜止圖像的例子,但是也能夠對代表圖像使用多枚靜止圖像。在代表圖像獲取部中,即使將作為處理的對象的運動圖像數(shù)據(jù)的長度增大至包含幾幀分量的數(shù)據(jù)的長度,并且實施按順序顯示所提取的幾幀分量的數(shù)據(jù)這樣的擴展,也可以獲得與本實施方式同樣的效果。在該情況下,所提取的幀的幀數(shù)比運動圖像數(shù)據(jù)的幀數(shù)更少。此外,在本實施方式中,作為運動圖像顯示裝置的例子以便攜式電話終端為例進行了說明,但是也可以適用于其他的one-seg廣播顯示裝置、視頻記錄器、數(shù)碼電視接收裝置、個人計算機等中的GUI等中。再有,具有分辨率高的顯示裝置的數(shù)碼電視接收裝置、搭載高速的CPU或大容量存儲器的個人計算機等中應用本發(fā)明的情況下,在不需要縮小圖像大小時,也可以省略用于預覽顯示的縮小處理,不是預覽顯示而是以原來的圖像大小進行顯不。此外,在對多個運動圖像A、B并行地運動圖像(預覽)顯示時,有如下的情況,這些也納入本發(fā)明的范疇。(變形例1將代表圖像置換為任意的運動圖像識別數(shù)據(jù))在顯示了作為運動圖像A的1幀的靜止圖像之后,自動開始進行A的運動圖像(預覽)顯示為止的期間,與運動圖像A的靜止圖像獨立顯示作為運動圖像B的1幀的靜止圖像。此外,靜止圖像優(yōu)選是運動圖像的開頭的1幀,但是也可以是其他的幀。取代該靜止圖像,運動圖像文件(包含流)也可以顯示與運動圖像的1幀獨立地具有的靜止圖像、靜止圖像以外的對運動圖像附加特征的信息(文件名等)。將前述的代表圖像(包含上述的靜止圖像)、與運動圖像的1幀獨立地具有的靜止圖像、對運動圖像附加特征的信息(文件名等。 包含前述的Video信息)總稱為運動圖像識別數(shù)據(jù)。運動圖像識別數(shù)據(jù)與運動圖像數(shù)據(jù)建立對應,使各運動圖像數(shù)據(jù)的識別成為可能。(變形例2代表圖像和運動圖像顯示的定時的調(diào)整)另外,包含下述情況進行A的幀1顯示(靜止圖像),將A的幀1顯示持續(xù)至B的靜止圖像顯示為止,在B的靜止圖像顯示之后對A的幀“2”以后進行運動圖像(預覽)顯示這樣的情況。也即,靜止圖像的顯示與運動圖像(預覽)顯示的定時能夠適當調(diào)整。(變形例3:將代表圖像和與該代表圖像對應的運動圖像顯示在不同的位置)另外,也可以將代表圖像(靜止圖像)和與該代表圖像對應的運動圖像顯示在不同的位置。將顯示代表圖像的狀態(tài)下顯示運動圖像的顯示方式、消除代表圖像的顯示并顯示運動圖像的顯示方式包含在該例子中。此外,在上述的例子中,以通常記錄的運動圖像數(shù)據(jù)為例進行了說明,但是成為對象的運動圖像數(shù)據(jù)也可以是流。另外,在上述的實施方式中,記載了將運動圖像數(shù)據(jù)(Video數(shù)據(jù))保存在外部存儲裝置11內(nèi),通過存儲裝置I/O接口 41傳遞給運動圖像數(shù)據(jù)獲取部27或者代表圖像獲取部31的例子,但是運動圖像數(shù)據(jù)的保存也可以在便攜式電話終端A內(nèi)的存儲部(硬盤、存儲器等)中進行。或者,也可取代外部存儲裝置11,在位于便攜式電話終端A的外部的服務器等中保存運動圖像數(shù)據(jù)。在該情況下,取代存儲裝置I/O接口 41而采用通信接口。通信接口是對無線或者有線LAN等的網(wǎng)絡或電話線路、與運動圖像數(shù)據(jù)獲取部27以及代表圖像獲取部 31進行連接的接口。通信接口從網(wǎng)絡等接收運動圖像數(shù)據(jù),向運動圖像數(shù)據(jù)獲取部27以及代表圖像獲取部31傳遞該運動圖像數(shù)據(jù)。另外,在上述的實施方式中,對于附圖中圖示的結構等,不限于這些結構,在發(fā)揮本發(fā)明的效果的范圍內(nèi)能夠進行適當變更。除此以外,只要不脫離本發(fā)明的目的的范圍就能夠適當變更之后中進行實施。另外,也可以將用于實現(xiàn)在本實施方式中說明的功能的程序記錄在計算機能夠讀取的記錄介質中,通過使計算機系統(tǒng)讀入并執(zhí)行記錄在該記錄介質中的程序來進行各部分的處理。并且,這里所說的“計算機系統(tǒng)”包含OS和周邊設備等硬件。另外,如果是利用WWW系統(tǒng)的情況,則“計算機系統(tǒng)”也包含主頁提供環(huán)境(或者顯示環(huán)境)。此外,所謂“計算機能讀取的記錄介質”是指軟盤、光磁盤、ROM、⑶-ROM等可移動介質以及內(nèi)設在計算機系統(tǒng)中的硬盤等存儲裝置。另外,所謂“計算機能讀取的記錄介質” 還包含像經(jīng)由互聯(lián)網(wǎng)等網(wǎng)絡和電話線路等通信線路來發(fā)送程序的情況下的通信線那樣在短時間的期間內(nèi)動態(tài)地保持程序的裝置和像成為該情況下的服務器和客戶端的計算機系統(tǒng)內(nèi)部的易失性存儲器那樣將程序保持一定時間的裝置。并且,上述程序可以用于實現(xiàn)上述功能的一部分,也可以通過與已經(jīng)記錄在計算機系統(tǒng)中的程序的組合來實現(xiàn)上述功能。另外,作為本實施例的其他的變形例具有以下的變形例。在預覽顯示多個運動圖像之中的運動圖像A之前,顯示運動圖像A、運動圖像B的靜止圖像等代表圖像。由于獲取代表圖像的代表圖像獲取部的處理快,因此與從未顯示狀態(tài)起進行運動圖像A、B的預覽顯示的情況相比,從相同狀態(tài)起顯示A、B的靜止圖像的情況更迅速地完成。如果能夠進行預覽顯示則以預覽顯示來置換靜止圖像。提供一種運動圖像顯示裝置,其具有處理綜合控制部,并行地再現(xiàn)多個運動圖像,并將在顯示部上進行顯示的處理進行綜合控制;基于所述處理綜合控制部的指示進行動作的接口部、存儲部、代表圖像獲取部和顯示圖像處理部,所述接口部獲取運動圖像數(shù)據(jù),所述存儲部暫時保存所述接口部所獲取的運動圖像數(shù)據(jù);所述代表圖像獲取部提取所述存儲部中存儲的所述運動圖像數(shù)據(jù)的代表圖像,所述顯示圖像處理部,在將作為所述代表圖像的第1靜止圖像以及第2靜止圖像顯示在所述顯示部之后,以與所述第1靜止圖像對應的運動圖像來置換所述第1靜止圖像。接受來自例如操作部等的多個運動圖像的一覽顯示的指示后開始進行上述處理。 具有預覽再現(xiàn)處理部,其進行基于所述存儲部中存儲的所述運動圖像數(shù)據(jù)創(chuàng)建用于運動圖像的預覽顯示的預覽數(shù)據(jù)的圖像處理,所述顯示圖像處理部,如果收取由所述預覽再現(xiàn)處理部完成處理的預覽數(shù)據(jù),則以所述預覽數(shù)據(jù)來置換對應的運動圖像的所述代表圖像。所述代表圖像優(yōu)選是不需要參照代表所述運動圖像的靜止圖像或者運動圖像的前后幀的參照的圖像。另外,具有存儲器,其將所述運動圖像數(shù)據(jù)暫時保存在按每個數(shù)據(jù)創(chuàng)建的存儲單元,所述處理綜合控制部優(yōu)選讀出在所述存儲器中寫入的運動圖像數(shù)據(jù),并依次解碼所述運動圖像數(shù)據(jù)之后向所述顯示圖像處理部發(fā)送所述運動圖像數(shù)據(jù)。所述處理綜合控制部優(yōu)選對按每個所述存儲單元保存有運動圖像數(shù)據(jù)的情況進行監(jiān)視,如果已保存則開始進行該運動圖像數(shù)據(jù)的讀入。也可以是運動圖像顯示方法、用于使計算機執(zhí)行運動圖像顯示方法的程序、記錄該程序的計算機可讀取的記錄介質。程序也可以通過互聯(lián)網(wǎng)等傳輸介質來獲取。產(chǎn)業(yè)上的可利用性本發(fā)明可利用于運動圖像顯示裝置。在本說明書中引用的所有的發(fā)行物、專利以及專利申請作為參照直接引入到本說明書中。
權利要求
1.一種運動圖像顯示裝置,其具有處理綜合控制部,并行地再現(xiàn)多個運動圖像,并將在顯示部上進行顯示的處理進行綜合控制;接口部、存儲部、代表圖像獲取部和顯示圖像處理部,基于所述處理綜合控制部的指示進行動作,所述接口部,獲取運動圖像數(shù)據(jù),所述存儲部,保存作為所述接口部所獲取的運動圖像數(shù)據(jù)的第1運動圖像數(shù)據(jù)和第2 運動圖像數(shù)據(jù),所述代表圖像獲取部,從所述存儲部中存儲的所述運動圖像數(shù)據(jù)提取或者創(chuàng)建靜止圖像數(shù)據(jù),所述顯示圖像處理部,如果指示所述第1運動圖像數(shù)據(jù)和所述第2運動圖像數(shù)據(jù)的一覽顯示,則將從所述第1運動圖像數(shù)據(jù)提取或者創(chuàng)建的第1靜止圖像數(shù)據(jù)、和從所述第2運動圖像數(shù)據(jù)提取或者創(chuàng)建的第2靜止圖像數(shù)據(jù)顯示在所述顯示部之后,以運動圖像的形式顯示所述第1運動圖像數(shù)據(jù)。
2.根據(jù)權利要求1所述的運動圖像顯示裝置,其特征在于,所述第1靜止圖像數(shù)據(jù)是所述第1運動圖像數(shù)據(jù)的1幀的數(shù)據(jù),所述顯示圖像處理部,在以運動圖像的形式顯示所述第1運動圖像數(shù)據(jù)時,從所述1幀起進行運動圖像顯示。
3.根據(jù)權利要求1所述的運動圖像顯示裝置,其特征在于,所述第1靜止圖像數(shù)據(jù)是所述第1運動圖像數(shù)據(jù)的1幀的數(shù)據(jù),所述顯示圖像處理部,在以運動圖像的形式顯示所述第1運動圖像數(shù)據(jù)時,從所述1幀的下一幀起進行運動圖像顯示。
4.根據(jù)權利要求1至3中任一項所述的運動圖像顯示裝置,其特征在于,所述代表圖像獲取部從所述運動圖像數(shù)據(jù)提取或者創(chuàng)建多枚靜止圖像數(shù)據(jù),所述顯示圖像處理部在將所述第1靜止圖像數(shù)據(jù)或者所述第2靜止圖像數(shù)據(jù)顯示在所述顯示部時,依次顯示多枚靜止圖像數(shù)據(jù)。
5.根據(jù)權利要求1至4中任一項所述的運動圖像顯示裝置,其特征在于,具有預覽再現(xiàn)處理部,所述預覽再現(xiàn)處理部進行基于所述存儲部中存儲的所述運動圖像數(shù)據(jù)創(chuàng)建用于運動圖像的預覽顯示的預覽數(shù)據(jù)的圖像處理,所述顯示圖像處理部,如果收取由所述預覽再現(xiàn)處理部完成處理的預覽數(shù)據(jù),則以所述預覽數(shù)據(jù)置換對應的運動圖像的所述靜止圖像數(shù)據(jù)。
6.根據(jù)權利要求1至5中任一項所述的運動圖像顯示裝置,其特征在于,所述靜止圖像數(shù)據(jù)是不需要參照代表所述運動圖像的靜止圖像或者運動圖像的前后幀的圖像。
7.一種運動圖像顯示方法,并行地再現(xiàn)多個運動圖像并顯示在顯示部,所述運動圖像顯示方法包括獲取運動圖像數(shù)據(jù)的步驟;保存所獲取的運動圖像數(shù)據(jù)即第1運動圖像數(shù)據(jù)和第2運動圖像數(shù)據(jù)的步驟;代表圖像獲取步驟,從保存的所述運動圖像數(shù)據(jù)提取或者創(chuàng)建靜止圖像數(shù)據(jù);和顯示圖像處理步驟,如果指示所述第1運動圖像數(shù)據(jù)和所述第2運動圖像數(shù)據(jù)的一覽顯示,則將從所述第1運動圖像數(shù)據(jù)提取或者創(chuàng)建的第1靜止圖像數(shù)據(jù)、和從所述第2運動圖像數(shù)據(jù)提取或者創(chuàng)建的第2靜止圖像數(shù)據(jù)顯示在所述顯示部之后,將所述第1運動圖像數(shù)據(jù)以運動圖像的形式顯示。
8. 一種程序,用于使計算機執(zhí)行權利要求7所述的運動圖像顯示方法。
全文摘要
如果指示運動圖像的一覽顯示開始,則進行Video1、Video2各個代表圖像的顯示處理。并且進行Video1的運動圖像的解碼,顯示Video1的運動圖像。由此,用戶能夠迅速地進行所顯示的多個運動圖像的內(nèi)容的辨別。
文檔編號G11B27/10GK102428517SQ201080021628
公開日2012年4月25日 申請日期2010年5月17日 優(yōu)先權日2009年5月18日
發(fā)明者大久保宏, 木村旭 申請人:夏普株式會社