專利名稱：圖像文件的生成的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及從多個靜止圖像數(shù)據(jù)生成靜止圖像數(shù)據(jù)的圖像處理技術(shù)。
背景技術(shù)：
近年來，從用數(shù)字視頻攝像機(jī)及其他動態(tài)圖像攝像裝置記錄的動態(tài)圖像數(shù)據(jù)，生成靜止圖像數(shù)據(jù)的技術(shù)正在普及。但是，在來自動態(tài)圖像數(shù)據(jù)的靜止圖像數(shù)據(jù)的生成處理中，一般的，如存在導(dǎo)致丟失被攝體的移動矢量或攝像工作的動態(tài)信息的問題。另一方面，從時序上連續(xù)的靜止圖像數(shù)據(jù)生成的更高分辨率的靜止圖像數(shù)據(jù)，具有如進(jìn)行特定的畫質(zhì)調(diào)整畫質(zhì)就會過度的惡化的性質(zhì)。這樣，由于從動態(tài)圖像數(shù)據(jù)那樣的時序上連續(xù)的靜止圖像所生成的靜止圖像數(shù)據(jù)具有固有的性質(zhì)，所以期望在該圖像處理中能有特別的考慮。
但是，現(xiàn)今，在靜止圖像數(shù)據(jù)的生成后，表現(xiàn)出上述固有的性質(zhì)的信息委托給使用者來處理，因此在圖像處理中的特別考慮的請求成為使用者的負(fù)擔(dān)。

發(fā)明內(nèi)容
本發(fā)明，是為了解決現(xiàn)有技術(shù)中的上述課題而做出的，其目的在于，提供在生成圖像文件的圖像文件的生成方法中，將對于從時序上連續(xù)的多個源靜止圖像數(shù)據(jù)所生成的靜止圖像的圖像處理中可利用的信息，作為屬性信息包含于圖像文件中的技術(shù)。
為了解決上述課題的至少一部分，本發(fā)明提供生成圖像文件的圖像文件生成方法。該圖像文件生成方法，其特征在于，包括由時序上連續(xù)的多個源靜止圖像數(shù)據(jù)，生成至少1個靜止圖像數(shù)據(jù)的靜止圖像數(shù)據(jù)生成步驟；生成所述靜止圖像數(shù)據(jù)的屬性信息的屬性信息生成步驟；使用所述生成的靜止圖像數(shù)據(jù)和所述屬性信息生成所述靜止圖像數(shù)據(jù)文件的數(shù)據(jù)文件生成步驟。其中，所述屬性信息生成步驟包括根據(jù)所述靜止圖像數(shù)據(jù)的生成，將在對所述靜止圖像數(shù)據(jù)的圖像處理中可利用的信息作為所述屬性信息生成的步驟。
根據(jù)本發(fā)明的方法，因?yàn)樯闪烁鶕?jù)由時序上連續(xù)的多個源靜止圖像數(shù)據(jù)的靜止圖像數(shù)據(jù)的生成，將對于靜止圖像數(shù)據(jù)的圖像處理中可利用的信息作為屬性信息予以包含的數(shù)據(jù)文件，所以不過度增大使用者的負(fù)擔(dān)而能夠?qū)崿F(xiàn)考慮了如上述生成的靜止圖像數(shù)據(jù)的固有性質(zhì)的圖像處理。
另外，靜止圖像數(shù)據(jù)文件，不一定是單一的數(shù)據(jù)文件，也可以是能與本發(fā)明相關(guān)聯(lián)的各種文件的方式來構(gòu)成。
本發(fā)明的第1方式，是由動態(tài)圖像數(shù)據(jù)生成靜止圖像數(shù)據(jù)文件的靜止圖像數(shù)據(jù)文件生成裝置。該靜止圖像數(shù)據(jù)文件的生成裝置，備有靜態(tài)圖像生成部，其由所述動態(tài)圖像數(shù)據(jù)生成靜止圖像數(shù)據(jù)；屬性信息生成部，其生成所述靜止圖像數(shù)據(jù)的屬性信息；數(shù)據(jù)文件生成部，其使用所述靜止圖像數(shù)據(jù)和所述屬性信息，生成所述靜止圖像數(shù)據(jù)文件。其中，所述屬性信息生成部，其特征在于，使用包含于所述動態(tài)圖像數(shù)據(jù)中的信息中的所述靜止圖像數(shù)據(jù)所包含的信息以外的信息，生成所述屬性信息。
根據(jù)本發(fā)明的第1方式的靜止圖像數(shù)據(jù)文件的生成裝置，由于使用包含于動態(tài)圖像數(shù)據(jù)中的信息中的所述靜止圖像數(shù)據(jù)所包含的信息以外的信息生成的屬性信息被保存在生成的靜止圖像數(shù)據(jù)文件中，所以可以得到如下的優(yōu)點(diǎn)的至少一部分。
例如，(1)即使假如動態(tài)圖像數(shù)據(jù)丟失，作為動態(tài)圖像的一部分的靜止圖像的操作還可進(jìn)行。(2)使用如此屬性信息的靜止圖像數(shù)據(jù)文件，可以很容易地進(jìn)行作為動態(tài)圖像數(shù)據(jù)的數(shù)據(jù)管理。(3)由于來自動態(tài)圖像數(shù)據(jù)的靜止圖像數(shù)據(jù)的生成中所使用的屬性信息，可能會在其他的靜止圖像數(shù)據(jù)的生成中能再利用，所以由此可以實(shí)現(xiàn)處理的高速化。
在上述的靜止圖像數(shù)據(jù)文件生成裝置中，所述屬性信息，也可以以包含指定動作區(qū)域的信息，該動作區(qū)域是由所述靜止圖像數(shù)據(jù)所表示的圖像區(qū)域中檢測出動作的區(qū)域。這樣能夠?qū)崿F(xiàn)例如關(guān)注被攝體的自動修整(trim)處理。這是因?yàn)閯討B(tài)區(qū)域多為被攝體的緣故。
在所述靜止圖像數(shù)據(jù)文件生成裝置中，所述靜止圖像數(shù)據(jù)生成部，也可以從所述靜止圖像數(shù)據(jù)中提取所述動作區(qū)域。
在所述靜止圖像數(shù)據(jù)文件生成裝置中，所述屬性信息，可以包含移動信息，該移動信息表示在所述動作區(qū)域中的所述圖像區(qū)域中的并進(jìn)移動狀態(tài)。這樣，可以實(shí)現(xiàn)如根據(jù)被攝體的移動狀態(tài)自動地進(jìn)行最佳配置的修整處理。
在所述靜止圖像數(shù)據(jù)文件生成裝置中，所述屬性信息，也可以包含表示所述動作區(qū)域內(nèi)的圖像的性質(zhì)的被攝體信息。這樣，例如，基于屬性信息檢索或數(shù)據(jù)庫化靜止圖像數(shù)據(jù)的時候，使用者可以很容易地取得有用的信息。
本發(fā)明第1方式的圖像處理裝置，其特征在于，是根據(jù)包含靜止圖像數(shù)據(jù)和所述靜止圖像數(shù)據(jù)的屬性信息的靜止圖像數(shù)據(jù)文件，對所述靜止圖像數(shù)據(jù)進(jìn)行圖像處理的圖像處理裝置。所述屬性信息，包含指定動作區(qū)域的信息，該動作區(qū)域是在由所述靜止圖像數(shù)據(jù)所表示的圖像區(qū)域中檢測出動作的區(qū)域。所述圖像處理裝置，根據(jù)所述屬性信息，從由所述靜止圖像數(shù)據(jù)所表示的圖像區(qū)域中提取所述動作區(qū)域。
根據(jù)本發(fā)明的第1方式的圖像處理裝置，因?yàn)槟軌驈撵o止圖像數(shù)據(jù)中，自動地提取出被攝體，所以例如在向被攝體的其他的圖像的合成這樣的以被攝體為中心的圖像處理中，可以減輕使用者的負(fù)擔(dān)。
在所述圖像處理裝置機(jī)中，所述屬性信息包含移動信息，該移動信息表示并進(jìn)移動狀態(tài)，該并進(jìn)移動狀態(tài)包含在所述動作區(qū)域的所述圖像區(qū)域中的移動方向。所述圖像處理裝置，可以用于根據(jù)所述移動信息，提取在所述動作區(qū)域的所述移動方向側(cè)附加了規(guī)定區(qū)域的區(qū)域的圖像。
這樣，能夠自動地提取以移動的被攝體為優(yōu)選的配置的圖像。一般，在被攝體移動的情況下，在構(gòu)圖上優(yōu)選在移動方向上設(shè)置空區(qū)域。
在所述的圖像處理裝置中，所述圖像處理裝置，可以根據(jù)所述移動信息，提取在所述動作區(qū)域的所述移動方向側(cè)上將比所述移動方向的相反側(cè)更大的區(qū)域附加在了所述動作區(qū)域上的區(qū)域的圖像。
在所述圖像處理裝置中，所述圖像處理裝置，決定由所述圖像處理應(yīng)生成的靜止圖像數(shù)據(jù)所表示的圖像形狀，并且以將在具有所述已被決定形狀的圖像區(qū)域內(nèi)產(chǎn)生的剩余區(qū)域在所述移動方向較多分配的方式配置所述動作區(qū)域。
在所述圖像處理裝置中，在所述形狀為具有規(guī)定的縱橫比的矩形的時候，所述圖像處理裝置，可以將在具有規(guī)定的縱橫比的圖像區(qū)域內(nèi)配置所述動作區(qū)域時所產(chǎn)生的剩余區(qū)域，以在所述移動方向上最近的上下左右中的任一側(cè)中多分配的方式進(jìn)行配置。
本發(fā)明的第2方式的圖像生成裝置，是生成圖像文件的圖像生成裝置。該圖像生成裝置備有圖像合成部，其從多個圖像數(shù)據(jù)中，將時序上排列的多個圖像數(shù)據(jù)作為合成源圖像數(shù)據(jù)取得，并合成所述取得的合成源圖像數(shù)據(jù)，生成表示比所述多個圖像數(shù)據(jù)所表示的圖像更清晰的高清晰圖像數(shù)據(jù)的高清晰圖像數(shù)據(jù)；圖像特性信息生成部，其生成用于限制對所述生成的高清晰圖像數(shù)據(jù)的特定畫質(zhì)調(diào)整的圖像特性信息；圖像文件生成部，其生成高清晰圖像文件，該高清晰圖像文件包含所述生成的圖像特性信息和所述高清晰圖像數(shù)據(jù)。
該圖像生成裝置，能夠?qū)⒑铣稍磮D像數(shù)據(jù)進(jìn)行合成，生成高清晰圖像數(shù)據(jù)，并且生成用于限制對高清晰圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的圖像特性信息，且生成包含高清晰圖像數(shù)據(jù)和圖像特性信息的高清晰圖像文件。因此，對這樣生成的高清晰圖像文件進(jìn)行畫質(zhì)調(diào)整時，能夠限制若對高清晰圖像數(shù)據(jù)實(shí)施便可能會降低畫質(zhì)的特定的畫質(zhì)調(diào)整。因此，對于表示合成多個圖像數(shù)據(jù)而生成的高清晰圖像的高清晰圖像數(shù)據(jù)進(jìn)行畫質(zhì)調(diào)整的時候，能夠抑制畫質(zhì)的降低。
另外，在本說明書中，所謂“高清晰”，意思是指象素間距小，所謂“低清晰”意思是指象素間距大。
在所述圖像生成裝置中，所述特定的畫質(zhì)調(diào)整，也可以是在所述圖像合成部中對所述高清晰圖像數(shù)據(jù)不實(shí)施的畫質(zhì)調(diào)整。
這樣，可以限制如果由高清晰圖像數(shù)據(jù)的特性對高清晰圖像數(shù)據(jù)執(zhí)行畫質(zhì)調(diào)整可能會降低畫質(zhì)那樣畫質(zhì)調(diào)整的執(zhí)行。
在所述圖像生成裝置中，所述特定的畫質(zhì)調(diào)整，也可以是銳度的調(diào)整。
這樣，能夠限制如果對高清晰圖像數(shù)據(jù)執(zhí)行畫質(zhì)降低的可能性會特別大的銳度調(diào)整的執(zhí)行。
另外，在上述圖像生成裝置中，所述多個圖像數(shù)據(jù)，也可以是構(gòu)成動態(tài)圖像的時序上連續(xù)的幀圖像數(shù)據(jù)。
這樣，在對從構(gòu)成動態(tài)圖像的時序上連續(xù)的幀圖像數(shù)據(jù)生成的高清晰圖像數(shù)據(jù)進(jìn)行畫質(zhì)調(diào)整時，能夠抑制畫質(zhì)的降低。
本發(fā)明的第2方式的圖像處理裝置，是進(jìn)行圖像數(shù)據(jù)的畫質(zhì)調(diào)整的裝置。該圖像處理裝置備有圖像文件取得部，其取得高清晰圖像文件，該高清晰圖像文件包括高清晰圖像數(shù)據(jù)和圖像特性信息，所述高清晰圖像數(shù)據(jù)表示比通過合成從多個圖像數(shù)據(jù)中取得的時序上排列的多個圖像數(shù)據(jù)而生成的所述多個圖像數(shù)據(jù)所表示圖像更清晰的高清晰圖像，所述圖像特性信息用于限制對所述生成的高清晰圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整；圖像特性信息分析部，其分析包含在所述取得的高清晰圖像文件中的所述圖像特性信息；畫質(zhì)調(diào)整部，其根據(jù)所述圖像特性信息的分析結(jié)果，限制對所述高清晰圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的執(zhí)行。
該圖像處理裝置，分析包含在高清晰圖像文件中的圖像特性信息，根據(jù)該分析結(jié)果，能夠限制對高清晰圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的執(zhí)行。因此，在對表示合成多個圖像數(shù)據(jù)而生成的高清晰圖像的高清晰圖像數(shù)據(jù)進(jìn)行畫質(zhì)調(diào)整的時候，可以抑制畫質(zhì)的降低。
另外，本發(fā)明可以以各種方式實(shí)現(xiàn)，例如，可以以圖像生成方法及裝置、圖像處理方法及裝置、圖像變換方法及裝置、圖像輸出方法及裝置、用于實(shí)現(xiàn)這些方法或者裝置的功能的計算機(jī)程序、存儲該計算機(jī)程序的記錄介質(zhì)、包含該計算機(jī)程序在載波中具體實(shí)現(xiàn)的數(shù)據(jù)信號等方式實(shí)現(xiàn)。


圖1是表示作為本發(fā)明的一實(shí)施例的圖像處理系統(tǒng)100的說明圖。
圖2是表示在顯示器18a中所顯示的圖像文件生成處理中的操作顯示畫面200的說明圖。
圖3是表示本發(fā)明的第1實(shí)施例中的靜止圖像數(shù)據(jù)生成處理的內(nèi)容的流程圖。
圖4是表示本發(fā)明的第1實(shí)施例中所使用動態(tài)圖像數(shù)據(jù)的構(gòu)成的一個例子的說明書。
圖5是表示本發(fā)明的第1實(shí)施例中的幀圖像提取處理的內(nèi)容的流程圖。
圖6是表示本發(fā)明的第1實(shí)施例中的評價值計算處理的內(nèi)容的流程圖。
圖7是表示本發(fā)明的第1實(shí)施例中的模塊化處理的情況的說明圖。
圖8是表示本發(fā)明的實(shí)施例中的幀間比較處理的結(jié)果的說明圖。
圖9是表示本發(fā)明的第1實(shí)施例中所使用的系數(shù)表的說明圖。
圖10是表示本實(shí)施例中的屬性信息的一個例子的說明圖。
圖11是表示本實(shí)施例中的圖像數(shù)據(jù)文件GF的構(gòu)成的說明圖。
圖12是表示本發(fā)明的第1實(shí)施例中的模板圖像合成處理中的內(nèi)容的流程圖。
圖13是表示在顯示器18a中所顯示的模板圖像合成處理中的操作顯示畫面200a的說明圖。
圖14是表示本發(fā)明的第1實(shí)施例中的圖像插入處理的內(nèi)容的流程圖。
圖15是表示本發(fā)明的第1實(shí)施例中的最佳構(gòu)圖決定處理的內(nèi)容的流程圖。
圖16是表示本發(fā)明的第1實(shí)施例中最佳構(gòu)圖被決定的情況的說明圖。
圖17是表示在第1實(shí)施例的變形例中提取圖像的情況的說明圖。
圖18是概略性表示在本發(fā)明的第2實(shí)施例中的圖像生成、處理裝置的構(gòu)成的說明圖。
圖19是表示由第2實(shí)施例中的圖像生成、處理裝置進(jìn)行高清晰圖像文件的生成及高清晰圖像的畫質(zhì)調(diào)整的概要的說明圖。
圖20是表示由第2實(shí)施例中的圖像生成、處理裝置進(jìn)行的高清晰圖像文件生成的流程的流程圖。
圖21是概略性表示在第2實(shí)施例中的高清晰圖像文件的內(nèi)部構(gòu)成的一個例子的說明圖。
圖22是表示由在第2實(shí)施例中圖像生成、處理裝置進(jìn)行的高清晰圖像的畫質(zhì)調(diào)整的流程的流程圖。
圖23是表示進(jìn)行在第2實(shí)施例中的高清晰圖像的畫質(zhì)調(diào)整時的圖像生成、處理裝置的用戶接口的一個例子的說明圖。
圖24是表示在第2實(shí)施例中由圖像合成部進(jìn)行的圖像合成的流程的流程圖。
圖25是表示有關(guān)在第2實(shí)例中的基準(zhǔn)幀圖像和對象幀圖像之間的位置偏差的說明圖。
圖26是表示有關(guān)在第2實(shí)例中的基準(zhǔn)幀圖像和對象幀圖像之間的位置偏差的補(bǔ)正的說明圖。
圖27是放大表示在第2實(shí)例中的基準(zhǔn)幀圖像和對象幀圖像補(bǔ)正偏差配置后的情況的說明圖。
圖28是表示有關(guān)第2實(shí)施例中的雙線性法的插值處理的說明圖。
圖29是示意性表示第2實(shí)施例中的閾值R的大小和高清晰圖像Gp的畫質(zhì)之間的關(guān)系的說明圖。
具體實(shí)施例方式
下面，基于實(shí)施例以以下順序說明本發(fā)明的實(shí)施方式。
A-1.本發(fā)明的第1實(shí)施例中的圖像處理系統(tǒng)的構(gòu)成A-2.本發(fā)明的第1實(shí)施例中的靜止圖像數(shù)據(jù)文件生成處理A-3.本發(fā)明的第1實(shí)施例中的模板圖像合成處理A-4.本發(fā)明的第1實(shí)施例的變形例B-1.本發(fā)明的第2實(shí)施例中的圖像生成、處理裝置的構(gòu)成B-2.本發(fā)明的第2實(shí)施例中的處理的概要B-3.本發(fā)明的第2實(shí)施例中的高清晰圖像文件的生成B-4.本發(fā)明的第2實(shí)施例中的高清晰圖像的畫質(zhì)調(diào)整B-5.本發(fā)明的第2實(shí)施例中的圖像合成B-6.本發(fā)明的第2實(shí)施例的變形例
C.變形例A-1.本發(fā)明的第1實(shí)施例中的圖像處理系統(tǒng)的構(gòu)成圖1是表示作為本發(fā)明一個實(shí)施例的圖像處理系統(tǒng)100的說明圖。圖像處理系統(tǒng)100備有供給動態(tài)圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)庫部30；用于從動態(tài)圖像數(shù)據(jù)中取得的多個靜止圖像數(shù)據(jù)的指定或圖像處理用的用戶接口部18；作為對從動態(tài)圖像數(shù)據(jù)庫部30取得的多個靜止圖像數(shù)據(jù)進(jìn)行圖像處理機(jī)的圖像處理裝置的個人計算機(jī)PC；作為將處理后的靜止圖像數(shù)據(jù)輸出的輸出裝置的彩色打印機(jī)20。
個人計算機(jī)PC備有執(zhí)行來自動態(tài)圖像數(shù)據(jù)的靜止圖像數(shù)據(jù)的提取和其他的圖像處理的圖像處理應(yīng)用程序10；管理動態(tài)圖像數(shù)據(jù)庫部30或用戶接口部18、彩色打印機(jī)20這類的外圍設(shè)備之間的接口的接口部15。
圖像處理應(yīng)用程序10備有從動態(tài)圖像數(shù)據(jù)生成靜止圖像數(shù)據(jù)的靜止圖像數(shù)據(jù)生成部11；在各靜止圖像數(shù)據(jù)生成之際生成屬性信息的屬性信息生成部12；從生成的靜止圖像數(shù)據(jù)和其屬性信息生成靜止圖像數(shù)據(jù)文件的數(shù)據(jù)文件生成部13；合成靜止圖像數(shù)據(jù)文件和預(yù)先準(zhǔn)備的模板圖像的圖像合成處理部14。
動態(tài)圖像數(shù)據(jù)庫部30，作為動態(tài)圖像數(shù)據(jù)的供給源具有數(shù)字視頻攝像機(jī)30a、DVD30b及硬盤30c。動態(tài)圖像數(shù)據(jù)在本實(shí)施例中作為非隔行掃描方式的幀圖像數(shù)據(jù)。
用戶接口部18，是用于使用者指定從動態(tài)圖像數(shù)據(jù)中取得的幀圖像數(shù)據(jù)的用戶接口。用戶接口部18備有將由動態(tài)圖像數(shù)據(jù)庫部30供給的動態(tài)圖像、生成中的靜止圖像及后述的操作顯示畫面進(jìn)行顯示的顯示器18a，和接受來自使用者的輸入的鍵盤18b或鼠標(biāo)18c。
圖2是表示在顯示器18a中所顯示的圖像文件生成處理中的操作顯示畫面200的說明圖。操作顯示畫面200包括選擇作為處理對象的源圖像數(shù)據(jù)的種類的源圖像數(shù)據(jù)種類選擇開關(guān)121；用于從被選擇的種類的源圖像數(shù)據(jù)當(dāng)中選擇一個的源圖像數(shù)據(jù)選擇窗口122；對由作為處理對象的源圖像數(shù)據(jù)所表示圖像進(jìn)行顯示的圖像顯示區(qū)域123；用于靜止圖像數(shù)據(jù)生成處理的操作按鈕。另外，在圖2的例子中，在源圖像數(shù)據(jù)選擇窗口122中顯示動態(tài)圖像數(shù)據(jù)Gs被選擇了的狀態(tài)。
在用于靜態(tài)圖像數(shù)據(jù)生成處理的操作按鈕中包含用于控制在圖像顯示區(qū)域123中所顯示的動態(tài)圖像的各種按鈕。用于控制動態(tài)圖像的各種按鈕中包含播放按鈕231、停止按鈕232、暫時停止按鈕233、后退按鈕234，快進(jìn)按鈕235。
用于靜止圖像數(shù)據(jù)生成處理的操作按鈕中，還包含用于從動態(tài)圖像數(shù)據(jù)生成靜止圖像的手動提取按鈕125和自動提取按鈕124。手動提取按鈕125是用于邊控制動態(tài)圖像使用者邊生成靜態(tài)圖像的按鈕。另一方面，自動提取按鈕124是用于自動地從動態(tài)圖像數(shù)據(jù)生成靜止圖像數(shù)據(jù)的按鈕。
以上說明的系統(tǒng)構(gòu)成中，如果按下自動提取按鈕124，則如以下所示那樣，生成將包含在動態(tài)圖像中的動態(tài)信息作為屬性信息予以包括的靜止圖像數(shù)據(jù)文件。另外，在本實(shí)施例中，所謂“動態(tài)信息”是表示被攝體的動作的信息。
A-2.本發(fā)明的第1實(shí)施例中的靜止圖像數(shù)據(jù)文件處理圖3是表示本發(fā)明的第1實(shí)施例中的靜止圖像數(shù)據(jù)生成處理的內(nèi)容的流程圖。在步驟S100中，圖像處理應(yīng)用程序10(圖1)，接受來自動態(tài)圖像數(shù)據(jù)庫部30的動態(tài)圖像數(shù)據(jù)的供給。被供給的動態(tài)圖像數(shù)據(jù)，在圖中未示出的存儲器中被緩存，并在圖像顯示區(qū)123(圖2)中被顯示。
圖4是表示本發(fā)明的第1實(shí)施例中所使用的動態(tài)圖像數(shù)據(jù)的構(gòu)成的一個例子的說明圖。動態(tài)圖像數(shù)據(jù)是1幀時間為33ms的時序上連續(xù)的幀圖像數(shù)據(jù)的集合，在各幀圖像數(shù)據(jù)中，以時序的順序付與幀號碼。在圖4的例子中，動態(tài)圖像數(shù)據(jù)顯示了足球選手中的一個人向球門帶球的情形。
在步驟S200中，靜止圖像數(shù)據(jù)生成部11執(zhí)行幀圖像提取處理。所謂幀圖像提取處理，在本實(shí)施例中，是指從作為幀圖像數(shù)據(jù)集合的動態(tài)圖像數(shù)據(jù)中選擇特定的幀圖像數(shù)據(jù)的處理。
圖5是表示在本實(shí)施例中的幀圖像提取處理的內(nèi)容的流程圖。在步驟S210中，靜止圖像數(shù)據(jù)生成部11，進(jìn)行采樣處理。所謂采樣處理，是指從動態(tài)圖像數(shù)據(jù)提取幀圖像數(shù)據(jù)的處理。該提取，例如以每隔1秒選擇幀圖像數(shù)據(jù)的方式進(jìn)行。這樣提取的幀圖像數(shù)據(jù)，在本說明書中被稱為“采樣圖像數(shù)據(jù)”。
在步驟S220中，靜止圖像數(shù)據(jù)生成部11進(jìn)行評價值計算處理。所謂評價值計算處理，是指計算各幀圖像的評價值的處理。關(guān)于該處理將在后面敘述。
在步驟S230中，靜止圖像數(shù)據(jù)生成部11進(jìn)行幀圖像選擇處理。幀圖像選擇處理，可以通過從采樣圖像數(shù)據(jù)中選擇計算出的評價值比事先決定的預(yù)定的閾值大的幀圖像數(shù)據(jù)而進(jìn)行。
圖6是表示本實(shí)施例中的評價值計算處理的內(nèi)容的流程圖。在步驟S222中，靜止圖像數(shù)據(jù)生成部11執(zhí)行模塊化處理。所謂模塊化處理是指將選擇的幀圖像數(shù)據(jù)區(qū)域按照每個規(guī)定的模塊分割的處理。
圖7是表示在本實(shí)施例中的模塊化處理的情況的說明圖。圖7(a)、圖7(b)及圖7(c)分別表示了圖4(a)、圖4(b)及圖4(c)所示的3幅圖像的數(shù)據(jù)被模塊化處理后的情況。各幀圖像數(shù)據(jù)，在縱方向上被分割為3行，然后在橫方向上被分割為6列。
在步驟S224中，靜止圖像數(shù)據(jù)生成部11，執(zhí)行采樣圖像比較處理。所謂采樣圖像比較處理是指，將連續(xù)的采樣圖像按照每一模塊進(jìn)行比較處理。比較方法，例如可以使用梯度法檢測模塊的動作的有無。另外，在本實(shí)施例中，作為“動作”不僅僅檢測并進(jìn)移動，還有旋轉(zhuǎn)移動或特征部的大小變動。
圖8是表示本實(shí)施例中的幀間比較處理結(jié)果的說明圖。圖8(a)、圖8(b)及圖8(c)，分別表示圖7(a)、圖7(b)及圖7(c)所示的幀圖像數(shù)據(jù)的處理結(jié)果。處理結(jié)果表示為將檢測出“動作”的模塊(動作模塊)的模塊值為“1”，將沒有檢測出“動作”的模塊(靜止模塊)的模塊值為“0”。
具體地說，進(jìn)行如下的處理。例如對于圖7(a)所示的幀，E列3行，E列4行，F(xiàn)列3行及F列4行的4個模塊被決定為動作模塊。這是由于足球選手在這些模塊內(nèi)移動的緣故。其結(jié)果，對于該4個模塊，模塊值定為“1”，對于其他模塊，模塊值定為“0”。
進(jìn)行同樣的處理，對于圖7(b)所示的幀圖像，只是D列2行，D列3行，E列2行及E列3行4個模塊的模塊值被決定為“1”，同樣對于在圖7(c)中所示的幀圖像，只是C列2行，C列3行及D列3行的3個模塊的模塊值被決定為“1”。
在步驟S226中，靜止圖像數(shù)據(jù)生成部11，執(zhí)行模塊組生成處理。所謂模塊組生成處理，是指將模塊值為“1”的連續(xù)的模塊的集合作為模塊組的分組化處理。這是因?yàn)橛捎谶@樣的模塊組多為主要被攝體，所以如果注重模塊組進(jìn)行處理，可以準(zhǔn)確的推斷被攝體的狀況的緣故。另外，在本實(shí)施例中，模塊組相對于權(quán)利要求范圍中的“動作區(qū)域”。
在步驟S228中，靜止圖像數(shù)據(jù)生成部11進(jìn)行計數(shù)表乘法處理。計算表乘法處理，是以各個模塊組計算出在圖9所示的計算表和模塊值的乘積后的值的總和的處理。例如，對于圖7(a)的幀圖像數(shù)據(jù)所包含的模塊組，分別計算E列3行，E列4行，F(xiàn)列3行及F列4行的模塊的模塊值和計數(shù)表的相應(yīng)的模塊的計數(shù)的乘法。另外，對于其他的模塊，因?yàn)槟K值為“0”因此可以忽略。
該計算表(圖9)，是在被攝體存在于圖像區(qū)域的中央部分的情況下為高評價值的方式構(gòu)成的。因此，周邊部分的系數(shù)變?yōu)樨?fù)值，并且中央部分的系數(shù)變?yōu)檎龜?shù)。另外，本實(shí)施例的計算表，是為了使說明清楚易懂而被簡化的計算表。
具體地說，執(zhí)行以下的計算。對于E行3列，模塊值“1”和系數(shù)表中的相應(yīng)的計數(shù)“1”相乘，計算出乘法運(yùn)算值“1”。進(jìn)行同樣的處理，對E列4行，F(xiàn)列3行及F列4行計算出乘法運(yùn)算值“-1”。這些值的總和為“-3”。同樣，對于包含在圖7(b)及圖7(c)的幀圖像中的各個模塊組，分別為“4”、“3”。
這樣，在圖7(a)、圖7(b)及圖7(c)所示的幀圖像的評價值，分別算出為“-3”、“4”及“3”。
在步驟S230(圖5)中，靜止圖像數(shù)據(jù)生成部11，執(zhí)行采樣圖像選擇處理。所謂采樣圖像選擇處理，是基于計算出的評價值選擇包含模塊組的幀圖像數(shù)據(jù)的處理。例如，如果以包含評價值在4以上的模塊組為選擇基準(zhǔn)，就會只選擇圖7(b)所示的幀圖像。
在步驟S300(圖3)中，屬性信息生成部12，生成屬性信息。所謂屬性信息，是具有包含了靜止圖像數(shù)據(jù)的動態(tài)圖像數(shù)據(jù)的動態(tài)屬性信息。在本實(shí)施例中，模塊組移動矢量、即移動方向和其大小為屬性信息。該屬性信息，按照每個靜止圖像數(shù)據(jù)中生成。
圖10是本實(shí)施例中的屬性信息的一個例子的說明圖。圖10的例子中，從右下向左上的移動矢量Vb相當(dāng)于屬性信息。移動矢量Vb例如可以作為2個數(shù)字組合生成。
在步驟S400中，數(shù)據(jù)文件生成部13，執(zhí)行圖像文件生成處理。圖像文件生成處理，是使用選擇的幀圖像數(shù)據(jù)和生成的屬性信息生成靜止圖像數(shù)據(jù)文件的處理。
圖11是表示本實(shí)施例中的圖像數(shù)據(jù)文件GF的構(gòu)成的說明圖。圖像數(shù)據(jù)文件GF，由圖像數(shù)據(jù)存儲區(qū)域90和圖像數(shù)據(jù)信息存儲區(qū)域80構(gòu)成。在圖像數(shù)據(jù)存儲區(qū)域90和圖像數(shù)據(jù)信息存儲區(qū)域80中，分別存儲幀圖像數(shù)據(jù)和其屬性信息。
圖11的例子中，在圖像數(shù)據(jù)信息存儲區(qū)域80中作為屬性信息儲存有模塊組(動作區(qū)域)的大小和該模塊組的移動矢量。模塊組的大小，比如能表示為縱向和橫向的象素數(shù)。
圖像數(shù)據(jù)文件GF，也可以具有符合數(shù)字靜止照像機(jī)用圖像文件格式標(biāo)準(zhǔn)(Exif)的文件結(jié)構(gòu)。該標(biāo)準(zhǔn)由日本電子信息技術(shù)產(chǎn)業(yè)協(xié)會(JEITA)所制定。在這種情況下，屬性信息，例如可以存儲在“Maker Note”。另外，取代存儲在圖像數(shù)據(jù)信息存儲區(qū)域80中，可以作為電子水印存儲在靜止圖像數(shù)據(jù)內(nèi)。
這樣生成的靜止圖像數(shù)據(jù)文件所包含的屬性信息，可以有效利用在以下說明的模板圖像合成處理中。
A-3.本發(fā)明的第1實(shí)施例中的靜止圖像模板生成處理圖12是表示本發(fā)明的第1實(shí)施例中的模板圖像合成處理的內(nèi)容的流程圖。所謂模板圖像合成處理，是指在本實(shí)施例中，對于預(yù)先準(zhǔn)備的模板圖像，合成提取的靜止圖像數(shù)據(jù)的一部分區(qū)域的處理。
圖13是表示在顯示器18a中顯示的模板圖像合成處理中的操作顯示畫面200a的說明圖。操作顯示畫面200a，同上述的操作顯示畫面200同樣，包括選擇作為處理對象的源圖像數(shù)據(jù)的種類的源圖像數(shù)據(jù)種類選擇開關(guān)121；用于從被選擇的種類的源圖像數(shù)據(jù)當(dāng)中選擇1個的源圖像數(shù)據(jù)選擇窗口122；顯示作為處理對象的源圖像數(shù)據(jù)所表示的圖像的圖像顯示區(qū)域123。關(guān)于用于靜止圖像數(shù)據(jù)生成處理的操作按鈕，代替用于控制在圖像顯示區(qū)域123中所表示動態(tài)圖像的各種按鈕，而包括手動修整按鈕126和自動修整按鈕127。
在步驟S1100中，使用者選擇模板圖像。所謂模板圖像，是指為了在照片圖像中施以修飾而合成的圖像，是與膠片照片畫框相當(dāng)?shù)膱D像。模板圖像的選擇，是可以由使用者用選擇源圖像數(shù)據(jù)種類選擇開關(guān)121選擇“模板”，同時用源圖像數(shù)據(jù)選擇窗口122點(diǎn)擊期望的圖像而進(jìn)行。這樣，若選擇了模板圖像，就在圖像顯示區(qū)域123中顯示被選擇的模板圖像。另外，在圖13例子中，在源圖像數(shù)據(jù)選擇窗口122中，顯示了靜止圖像數(shù)據(jù)文件Ts被選擇后的狀態(tài)。
這樣被選擇的模板圖像，具有用于插入靜止圖像的兩個圖像插入窗口W1、W2。兩個圖像插入窗口W1、W2的尺寸和縱橫比這些信息，作為各模板圖像的屬性信息按照各個模板圖像予以存儲。
在步驟S1200中，使用者指定圖像插入窗口。圖像插圖窗口的指定，在圖13的例子中，是可以通過鼠標(biāo)18c指定兩個圖像插入窗口W1、W2中的任一個。若指定了圖像插入窗口，將被指定的圖像插入窗口的尺寸和縱橫比這些信息輸入到圖像合成處理部14(圖1)。
在步驟S1300中，使用者進(jìn)行圖像插入處理。所謂圖像插入處理，是指在被指定的模板圖像的窗口內(nèi)部，插入、合成提取出的靜止圖像數(shù)據(jù)的一部分區(qū)域的處理。
圖14是表示在本發(fā)明的第1實(shí)施例中的圖像插入處理的內(nèi)容的流程圖。在步驟S1310中，使用者選擇作為處理對象的靜止圖像數(shù)據(jù)。靜止圖像數(shù)據(jù)的選擇，可以是以使用者用源圖像數(shù)據(jù)種類選擇開關(guān)121選擇“靜止圖像”，并用源圖像數(shù)據(jù)選擇窗口122點(diǎn)擊期望的靜止圖像的方式而進(jìn)行。
在步驟S1320中，圖像合成處理部14執(zhí)行屬性數(shù)據(jù)讀入處理。在屬性數(shù)據(jù)讀入處理中，讀入靜止圖像數(shù)據(jù)的屬性數(shù)據(jù)和模板圖像的指定插入窗口的屬性數(shù)據(jù)。若讀入雙方的圖像數(shù)據(jù)的屬性，則在步驟S1330的最佳構(gòu)圖決定處理中進(jìn)行處理。由此，圖像合成處理部14，能夠基于插入窗口的屬性數(shù)據(jù)，決定應(yīng)該插入的靜止圖像的形狀。
圖15是表示本發(fā)明的第1實(shí)施例中的最佳構(gòu)圖決定處理的內(nèi)容的流程圖。所謂最佳構(gòu)圖決定處理，是指用于將靜止圖像數(shù)據(jù)的一部分區(qū)域(以下稱為插入?yún)^(qū)域)，適當(dāng)?shù)嘏渲迷谥付ǖ牟迦氪翱谥械奶幚?。在本?shí)施例中，所謂適當(dāng)配置，意思是如考慮靜止圖像數(shù)據(jù)的插入?yún)^(qū)域的移動矢量，在移動方向上擴(kuò)大空間的配置。
圖16是表示在本發(fā)明的第1實(shí)施例中最佳構(gòu)圖被決定的情況的說明圖。圖16(a)表示插入?yún)^(qū)域。圖16(b)表示了插入?yún)^(qū)域配置在插入窗口中央的情況。圖16(c)表示了通過最佳配置處理插入?yún)^(qū)域被配置在插入窗口的右側(cè)的情況。圖16(d)表示最佳配置的合成圖像。另外，在圖16(b)及圖16(c)中，插入?yún)^(qū)域(圖16(a))用虛線表示。
在步驟S1332中，圖像合成處理部14，決定在靜止圖像數(shù)據(jù)的屬性數(shù)據(jù)中是否包含表示移動矢量的移動矢量信息。在不包含移動矢量信息的情況下，處理進(jìn)入步驟S1338，插入?yún)^(qū)域如在圖16(b)中所示，插入?yún)^(qū)域被配置在插入窗口的中央。另一方面，在包含移動矢量信息的情況下，進(jìn)入步驟S1334。
在步驟S1334中，圖像合成處理部14執(zhí)行縱橫比比較處理。所謂縱橫比比較處理，是指將插入窗口和插入?yún)^(qū)域的縱橫比(aspect ratio)進(jìn)行比較，決定在插入窗口內(nèi)縱方向和橫方向中的哪一方向上的能實(shí)現(xiàn)空區(qū)域的處理。例如，在圖16的例子中可知在被插入的窗口內(nèi)在橫方向上能實(shí)現(xiàn)空區(qū)域。另外，在未發(fā)生空區(qū)域的方向上，通過調(diào)整插入圖像的尺寸，使插入窗口W1和插入?yún)^(qū)域的尺寸一致。
在步驟S1336中，圖像合成處理部14執(zhí)行插入?yún)^(qū)域配置處理。所謂插入?yún)^(qū)域配置處理，是指基于移動矢量將插入圖像配置在插入窗口內(nèi)的最佳位置的處理。具體地說，插入圖像，以在插入窗口內(nèi)移動方向的前側(cè)產(chǎn)生空區(qū)域的方式配置。這是因?yàn)?，一般，在被攝體移動的情況下，優(yōu)選在移動方向上設(shè)置空區(qū)域的構(gòu)圖的緣故。
在步驟S1400中，圖像合成處理部14，匹配、合成插入圖像和插入窗口的尺寸，生成圖16(c)所示的合成圖像。另外，上述的最佳配置，只在移動矢量在規(guī)定大小以上的情況下執(zhí)行，在不足規(guī)定大小的情況下，可以作為配置在中央位置之用。
如此，在本實(shí)施例中，由于基于在從動態(tài)圖像數(shù)據(jù)生成靜止圖像數(shù)據(jù)時生成的信息，可以自動地進(jìn)行執(zhí)行最佳配置的合成處理，所以在向由動態(tài)圖像中提取的靜止圖像的模板圖像的合成處理中能夠減輕使用者的負(fù)擔(dān)。
A-4.本發(fā)明的第1實(shí)施例的變形例在上述的第1實(shí)施例中，屬性信息是模塊組(動作區(qū)域)的移動矢量，但也可以是例如表示動作區(qū)域內(nèi)的圖像的特征的信息。這樣的屬性信息，例如能通過生成模塊組內(nèi)的象素值的色調(diào)矩形圖、判斷膚色區(qū)域的比例而實(shí)現(xiàn)。表示圖像的特征的屬性信息，為例如使用者基于屬性信息檢索(包含縮小范圍)靜止圖像數(shù)據(jù)時，或進(jìn)行靜止圖像數(shù)據(jù)的數(shù)據(jù)庫化時的有用信息。
作為檢索的例子，例如假設(shè)為插入窗口左方向移動的情況，如果使用者點(diǎn)擊該圖像插入窗口，則可以實(shí)現(xiàn)如下的構(gòu)成只提取靜止圖像數(shù)據(jù)并向使用者提示，該靜止圖像數(shù)據(jù)具有動作區(qū)域，該動作區(qū)域是作為屬性信息具有左方向的移動矢量的動作區(qū)域。
在上述第1實(shí)施例中，雖然屬性信息由包含在動態(tài)圖像數(shù)據(jù)中的幀圖像數(shù)據(jù)生成，但是也可以是例如根據(jù)將日期或語音、與時序有關(guān)的信息(例如順序)這樣的動態(tài)圖像數(shù)據(jù)作為屬性信息予以包含這樣的信息，生成靜態(tài)圖像的屬性信息。再有，也可以在屬性信息中包含全景或變焦這樣的推測的攝像技術(shù)。在本發(fā)明中靜止圖像數(shù)據(jù)的屬性信息，一般的，包含在動態(tài)圖像屬性中的信息當(dāng)中，可以是使用在所述靜止圖像數(shù)據(jù)所包含的信息以外的信息生成。
與時序有關(guān)的信息，例如在能夠配置時序上的多個靜止圖像的模板圖像中嵌入靜止圖像時，可以使用。日期，例如在模板圖像中存在表示日期的窗口的情況下，能直接利用。語音，在模板圖像文件具有存儲語音文件的區(qū)域的情況下，在帶有語音的圖像文件生成時可利用。
另外，本發(fā)明中的靜止圖像數(shù)據(jù)的屬性信息例如以以下的過程生成。
(1)從動態(tài)圖像數(shù)據(jù)中提取靜止圖像數(shù)據(jù)的過程，(2)從動態(tài)圖像數(shù)據(jù)生成靜止圖像數(shù)據(jù)的過程(例如清晰化)，或者(3)與其他的幀圖像比較的過程，在上述第1實(shí)施例中，表示了在一個靜止圖像數(shù)據(jù)中檢測出1個動作區(qū)域的例子，但是也可以在一個靜止圖像數(shù)據(jù)中包含多個動作區(qū)域。在包含多個動作區(qū)域的情況下，優(yōu)選標(biāo)示各個動作區(qū)域，并按照每個動作區(qū)域附加屬性信息。這是因?yàn)?，這樣做，例如在動態(tài)圖像中包含多個被攝體的情況下，能夠按照各個被攝體中的每一個管理屬性信息的緣故。由此，例如使各個動作區(qū)域的每一個的最佳修整(trimming)、其他的圖像處理或數(shù)據(jù)庫管理成為可能。
在上述的第1實(shí)施例中，動態(tài)圖像數(shù)據(jù)以非隔行掃描方式的幀圖像構(gòu)成，但是本發(fā)明也可以適用于隔行掃描方式的動態(tài)圖像數(shù)據(jù)。在這樣的情況下，在上述實(shí)施例中的各幀圖像數(shù)據(jù)，成為相當(dāng)于由第奇數(shù)號碼的掃描線的圖像數(shù)據(jù)構(gòu)成奇數(shù)場(field)的靜止圖像數(shù)據(jù)，和第偶數(shù)號碼的掃描線的圖像數(shù)據(jù)構(gòu)成的偶數(shù)場的靜止圖像數(shù)據(jù)構(gòu)成的靜止圖像數(shù)據(jù)。
在上述第1實(shí)施例中，作為在模塊的移動有無判定中所使用的幀間比較處理，使用梯度法作為模塊的“動作”檢測移動，但是也可以使用例如幀間差分法或背景差分法這樣的其他方法檢測被攝體的移動。還有，也可以不檢測被攝體的移動，而檢測被攝體的大小的變化或旋轉(zhuǎn)這類的被攝體的變動。
在上述的第1實(shí)施例中，在提取靜止圖像中的動作區(qū)域并插入到插入窗口的時候，以匹配于插入窗口的方式?jīng)Q定空區(qū)域，但是例如也可以事先提取靜止圖像的動作區(qū)域，這樣做，存在可以減小靜止圖像數(shù)據(jù)的數(shù)據(jù)大小的優(yōu)點(diǎn)。
在這樣的情況下，優(yōu)選除動態(tài)區(qū)域之外，預(yù)先還提取表示在移動方向側(cè)的規(guī)定區(qū)域的圖像。規(guī)定區(qū)域，例如如圖17(a)所示，配置在動態(tài)區(qū)域Pa1的移動方向側(cè)。具有這樣生成的具有圖像區(qū)域Pa2的靜止圖像數(shù)據(jù)，插入到例如圖17(b)所示的圖像插入窗口W3中的時候，可以通過刪除從圖像插入窗口W3露出的部分，使其匹配于圖像插入窗口W3。另外，規(guī)定區(qū)域的大小，可以設(shè)為預(yù)先規(guī)定的大小(例如1～2倍)，可以根據(jù)移動矢量的大小決定。
另外，在生成具有矩形的圖像區(qū)域的靜止圖像數(shù)據(jù)的時候，優(yōu)選規(guī)定的區(qū)域，相對于動態(tài)區(qū)域，配置在上下左右的4個方向中與移動方向最近的方向。規(guī)定的區(qū)域的延長方向的大小只要是例如具有動態(tài)區(qū)域的1～2倍的大小就足夠了。這是由于插入窗口的縱橫比，一般的在1～3倍的范圍內(nèi)的緣故。
在上述的第1實(shí)施例中，可以只在動態(tài)區(qū)域的移動方向上設(shè)置空區(qū)域，但是也可以例如在動態(tài)區(qū)域的相反側(cè)也設(shè)置比移動方向側(cè)的小的空區(qū)域。在本發(fā)明中，還可以構(gòu)成為在動態(tài)區(qū)域的移動方向上，將比移動方向的相反側(cè)大的區(qū)域附加在移動區(qū)域中而構(gòu)成。
B-1.本發(fā)明的第2實(shí)施例中的圖像生成、處理裝置的構(gòu)成圖18是概略地表示作為本發(fā)明的第2實(shí)施例的圖像生成、處理裝置的構(gòu)成的說明圖。該圖像生成、處理裝置10000備有計算機(jī)1000；作為將信息輸入到計算機(jī)1000中的裝置鍵盤3000及鼠標(biāo)4000；作為將信息輸出的裝置的顯示器2000及打印機(jī)7000；將動態(tài)圖像數(shù)據(jù)輸入到計算機(jī)1000中的數(shù)字視頻攝像機(jī)6000及CD-R/RW驅(qū)動器5000。另外，作為輸入動態(tài)圖像數(shù)據(jù)的裝置，可以備有可從DVD驅(qū)動器等各種信息存儲介質(zhì)中讀取數(shù)據(jù)的驅(qū)動裝置。
計算機(jī)1000，通過在規(guī)定的操作系統(tǒng)中，執(zhí)行用于生成高清晰圖像文件的應(yīng)用程序，進(jìn)行高清晰圖像文件的生成。高清晰圖像文件，包含高清晰圖像數(shù)據(jù)和圖像特性信息。高清晰圖像數(shù)據(jù)，是比通過合成構(gòu)成動態(tài)圖像數(shù)據(jù)的多個幀圖像數(shù)據(jù)而生成的幀圖像數(shù)據(jù)所表示幀圖像更高清晰的靜止圖像。圖像特性信息包含用于限制對高清晰圖像數(shù)據(jù)的畫質(zhì)調(diào)整的信息。該應(yīng)用程序，具有圖像合成部1100和圖像特性信息生成部1200和圖像文件生成部1300的功能。
另外，計算機(jī)1000，通過在規(guī)定的操作系統(tǒng)中，執(zhí)行用于高清晰圖像的畫質(zhì)調(diào)整的應(yīng)用程序，進(jìn)行高清晰圖像的畫質(zhì)調(diào)整。高清晰圖像的畫質(zhì)調(diào)整，是為了調(diào)整包含于高清晰圖像文件中的高清晰圖像數(shù)據(jù)所顯示高清晰圖像的畫質(zhì)，而進(jìn)行高清晰圖像數(shù)據(jù)的圖像變換的處理。該應(yīng)用程序具有圖像文件取得部1400、圖像特性信息分析部1500和畫質(zhì)調(diào)整部1600的功能。
再有，計算機(jī)1000，備有控制對圖像輸出裝置的輸出的圖像輸出控制部1700。
B-2.本發(fā)明的第2實(shí)施例中的處理的概要圖19是表示圖像生成、處理裝置所進(jìn)行的處理的概要的說明圖。在圖19中，顯示圖像生成、處理裝置10000(圖18)，生成高清晰圖像數(shù)據(jù)，生成高清晰圖像文件GF，進(jìn)行高清晰圖像Gp的畫質(zhì)調(diào)整，將高清晰畫質(zhì)Gp在打印機(jī)7000中印刷為止的處理流程。
在圖19的上段中，表示將構(gòu)成用于高清晰圖像的生成的動態(tài)圖像(以下成為“源動態(tài)圖像”)的多個幀圖像Gf，從圖的左側(cè)向右側(cè)以時序順序排列。另外，在本說明書中，將表示源動態(tài)圖像的動態(tài)圖像數(shù)據(jù)稱為“源動態(tài)圖像數(shù)據(jù)”。
幀圖像F0，是在高清晰圖像數(shù)據(jù)的生成中，作為圖像合成的基準(zhǔn)的圖像(以下稱為“基準(zhǔn)幀圖像數(shù)據(jù)”)。緊接其后的兩個幀圖像F1、F2為圖像合成對象的圖像(以下成為“對象幀圖像”)。另外，設(shè)在以下的說明中，圖像和表示該圖像的圖像數(shù)據(jù)使用相同符號。
圖像生成、處理裝置10000(圖18)，使用表示基準(zhǔn)幀圖像F0的基準(zhǔn)幀圖像數(shù)據(jù)F0和表示對象幀圖像F1、F2的對象幀圖像數(shù)據(jù)F1、F2，進(jìn)行高清晰圖像數(shù)據(jù)的生成。另外，在本說明書中，將基準(zhǔn)幀圖像數(shù)據(jù)F0和對象幀圖像數(shù)據(jù)F1、F2合稱為“合成源幀圖像數(shù)據(jù)”。
在圖19中表示通過將合成源幀圖像數(shù)據(jù)F0、F1、F2合成、生成的高清晰圖像GP。高清晰圖像Gp，作為比構(gòu)成源動態(tài)圖像的幀圖像Gf更高清晰的圖像生成。
接著，圖像生成、處理裝置10000生成用于限制對高清晰圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整用的圖像特征信息，生成包含高清晰圖像數(shù)據(jù)和圖像特性信息的高清晰圖像文件GF。在圖19中，表示被生成的高清晰圖像文件GF。
另外，圖像生成、處理裝置10000，根據(jù)使用者的指示、或者自動地對包含在高清晰圖像文件GF中的高清晰圖像數(shù)據(jù)進(jìn)行畫質(zhì)調(diào)整。此時，圖像生成、處理裝置10000，分析包含在高清晰圖像文件GF中的圖像特性信息，根據(jù)該分析結(jié)果，限制對于高清晰圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的執(zhí)行。在圖19中表示的是，根據(jù)圖像特性信息、畫質(zhì)調(diào)整被限制的情況。另外，表示經(jīng)畫質(zhì)調(diào)整后的高清晰圖像Gp。
然后，圖像生成、處理裝置10000，由打印機(jī)7000輸出經(jīng)畫質(zhì)調(diào)整后的高清晰圖像Gp。
以下，對由圖像生成、處理裝置10000進(jìn)行高清晰圖像文件的生成及高清晰圖像的畫質(zhì)調(diào)整的內(nèi)容進(jìn)行詳細(xì)地說明。
B-3.本發(fā)明的第2實(shí)施例中的高清晰圖像文件的生成圖20是表示由圖像生成、處理裝置進(jìn)行高清晰圖像文件的生成的流程的流程圖。在步驟S10000中，圖像生成、處理裝置10000的圖像合成部1100(圖18)進(jìn)行圖像合成。如上所述，在圖像合成部1100進(jìn)行的圖像合成，使用合成源幀圖像數(shù)據(jù)F0、F1、F2進(jìn)行。作為基準(zhǔn)幀圖像F0，例如，在播放在數(shù)字視頻攝像機(jī)6000中所記錄的動態(tài)圖像，并在顯示器2000顯示中，當(dāng)輸入來自使用者的高清晰圖像生成的指示時，選擇在顯示器2000中顯示的幀圖像。另外，作為對象幀圖像F1、F2，選擇緊接基準(zhǔn)幀圖像F0之后的兩個幀圖像。
圖像合成部1100，從存儲在數(shù)字視頻攝像機(jī)6000中的源動態(tài)圖像數(shù)據(jù)中參照絕對幀號碼取得合成源幀圖像數(shù)據(jù)F0、F1、F2，將合成源幀圖像數(shù)據(jù)F0、F1、F2合成，生成高清晰圖像數(shù)據(jù)。另外，在本說明書中，所謂“絕對幀號碼”意思是在動態(tài)圖像數(shù)據(jù)中的、從最初的幀圖像數(shù)據(jù)連續(xù)計數(shù)出的號碼。對于由圖像合成部1100所進(jìn)行的圖像合成的詳細(xì)說明在后述進(jìn)行。
在步驟S20000中，圖像特性信息生成部1200(圖18)生成圖像特征信息。圖像特征信息，如上所述，包含用于限制對高清晰圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的信息。在這里，限制特定的信息畫質(zhì)調(diào)整的目的，不僅僅在于為了防止由于對高清晰圖像數(shù)據(jù)已進(jìn)行的圖像調(diào)整再度進(jìn)行而引起畫質(zhì)降低或處理時間的增加，還為了限制由于高清晰圖像數(shù)據(jù)的特性、如對高清晰圖像數(shù)據(jù)實(shí)施則可能會導(dǎo)致畫質(zhì)降低的畫質(zhì)調(diào)制的執(zhí)行。
在本實(shí)施例中，特定的畫質(zhì)調(diào)整是銳度的調(diào)整，圖像特性信息，作為禁止銳度的調(diào)整的信息生成。這是因?yàn)橛捎诤笫龅母咔逦鷪D像數(shù)據(jù)的特性，如對高清晰圖像數(shù)據(jù)進(jìn)行銳度調(diào)整的話，畫質(zhì)降低的可能性特別大的緣故。具體地說，圖像特性信息生成部1200，生成意味著對高清晰圖像數(shù)據(jù)的銳度調(diào)整禁止的標(biāo)志。
在步驟S30000中，圖像文件生成部1300(圖18)生成高清晰圖像文件。高清晰圖像文件GF，如上所述，是包含高清晰圖像數(shù)據(jù)和圖像特性信息的圖像文件。
圖21是概略性表示高清晰圖像文件的內(nèi)部構(gòu)成的一個例子的說明圖。高清晰圖像文件GF備有存儲高清晰圖像數(shù)據(jù)的圖像數(shù)據(jù)存儲區(qū)域9000；存儲圖像數(shù)據(jù)信息的圖像數(shù)據(jù)信息存儲區(qū)域8000。這里，圖像數(shù)據(jù)信息意味著與高清晰圖像數(shù)據(jù)有關(guān)的各種信息，其中，包含圖像特性信息。高清晰圖像數(shù)據(jù)，例如以JPEG形式存儲，圖像數(shù)據(jù)信息，例如以TIFF形式存儲。另外，在本實(shí)施例中文件的結(jié)構(gòu)，數(shù)據(jù)的結(jié)構(gòu)這些用語意思是指文件或數(shù)據(jù)在存儲裝置中存儲的狀態(tài)下文件或數(shù)據(jù)的結(jié)構(gòu)。
高清晰圖像文件GF，基本上備有上述的圖像數(shù)據(jù)存儲區(qū)域9000和圖像數(shù)據(jù)信息存儲區(qū)域8000就可以，也可以采取遵照已經(jīng)標(biāo)準(zhǔn)化的文件形式的文件結(jié)構(gòu)。以下，對使有關(guān)本實(shí)施例的高清晰圖像文件GF適用于標(biāo)準(zhǔn)化的文件形式的情況進(jìn)行具體的說明。
高清晰圖像文件GF，例如，可以有遵照數(shù)字視頻攝像機(jī)用圖像文件格式標(biāo)準(zhǔn)(Exif)的文件結(jié)構(gòu)。Exif文件標(biāo)準(zhǔn)，由電子信息技術(shù)產(chǎn)業(yè)協(xié)會(JEITA)制定。另外，Exif文件形式，同圖21中所示示意圖一樣，備有存儲JPEG形式的圖像數(shù)據(jù)的JPEG圖像數(shù)據(jù)存儲區(qū)域和存儲與被存儲JPEG圖像數(shù)據(jù)相關(guān)的各種信息的附屬信息存儲區(qū)域。JPEG圖像數(shù)據(jù)存儲區(qū)域相當(dāng)于圖21中的圖像數(shù)據(jù)存貯區(qū)域9000，附屬信息存儲區(qū)域相當(dāng)于圖像數(shù)據(jù)信息存儲區(qū)域8000。另外，正如本領(lǐng)域技術(shù)人員周知的那樣，在Exif文件形式的文件中，有時為了特定各個數(shù)據(jù)而使用標(biāo)簽，各個數(shù)據(jù)根據(jù)標(biāo)簽名而稱呼。
在附屬信息存儲區(qū)域中，圖21所示的圖像特性信息，根據(jù)規(guī)定的地址或者偏移值存儲。圖像特性信息，例如，是附屬信息存儲區(qū)域內(nèi)的未定義區(qū)域，可以存儲向使用者開放的使用者定義區(qū)域內(nèi)。
如上說明，本實(shí)施例的圖像生成、處理裝置10000，能夠生成包含高清晰圖像數(shù)據(jù)和圖像特性信息的高清晰圖像文件GF。
B-4.本發(fā)明的第2實(shí)施例中的高清晰圖像的畫質(zhì)調(diào)整圖22是表示圖像生成、處理裝置所進(jìn)行的高清晰圖像的畫質(zhì)調(diào)整度的流程的流程圖。另外，圖23是表示進(jìn)行高清晰圖像的畫質(zhì)調(diào)整時的圖像生成、處理裝置的用戶接口的一個例子的說明圖。在步驟S50000(圖22)中，使用者進(jìn)行作為畫質(zhì)調(diào)整的對象的高清晰圖像文件GF的選擇。
在圖23中表示在顯示器2000(圖18)中所顯示的用戶接口畫面20000。而且，圖23(a)表示用戶接口畫面20000的初始畫面。在用戶接口畫面20000中顯示了目錄指定按鈕21000、微縮圖像顯示畫面22000、圖像信息畫面23000、畫質(zhì)調(diào)整按鈕23200、印刷按鈕24000。
使用者，能夠操作目錄指定按鈕21000，指定存儲有欲在微縮圖像顯示畫面22000中顯示的微縮圖像的圖像文件的目錄。在微縮圖像顯示畫面22000中顯示存儲在指定的目錄下的所有圖像文件的微縮圖像。
使用者，參照在微縮圖像顯示畫面22000中所顯示的微縮圖像，選擇成為畫質(zhì)調(diào)整對象的圖像文件。在圖23(a)中，將被選擇的圖像文件的微縮圖像用粗框包圍顯示。在圖23的例子中，設(shè)被選擇的圖像文件，為高清晰圖像文件GF。
另外，如果使用者選擇圖像文件，在圖像信息畫面23000中，表示被選擇的圖像文件的圖像信息。另外，使用者能操作圖像信息畫面23000、指定印刷頁數(shù)，還能操作印刷按鈕24000、執(zhí)行在被選擇的圖像文件中所包含的圖像印刷指示。
在步驟S60000(圖22)中，圖像文件取得部1400(圖18)，取得由步驟S50000所選擇的高清晰圖像文件。在步驟S70000中，圖像特性信息分析部1500(圖18)分析已取得的高清晰圖像文件中所包含的圖像特性信息。
在步驟S80000中，使用者進(jìn)行畫質(zhì)調(diào)整的設(shè)定。使用者，通過操作畫質(zhì)調(diào)整按鈕23200(圖23)，可以進(jìn)行對已選擇的高清晰圖像文件GF中所包含的高清晰圖像數(shù)據(jù)進(jìn)行的畫質(zhì)調(diào)整的設(shè)定。如果使用者操作畫質(zhì)調(diào)整按鈕23200，則在用戶接口畫面20000中，顯示圖23(b)中所示的畫質(zhì)調(diào)整的執(zhí)行畫面。此時，在用戶接口畫面20000中顯示圖像顯示畫面25000、畫質(zhì)調(diào)整畫面26000、用于退回圖23(a)所示的初始畫面的“退回”按鈕27000。
在圖像顯示畫面25000中，顯示在被選擇的高清晰圖像文件GF中所包含的高清晰圖像數(shù)據(jù)所表示的高清晰圖像。在畫質(zhì)調(diào)整畫面26000中，顯示能夠進(jìn)行畫質(zhì)調(diào)整的項(xiàng)目，并且顯示用于使用者指定關(guān)于各個項(xiàng)目的畫質(zhì)調(diào)整量的滑桿26200、26400。使用者或指定在畫質(zhì)調(diào)整畫面26000中表示的畫質(zhì)調(diào)整項(xiàng)目，或移動滑桿26200、26400，進(jìn)行畫質(zhì)調(diào)整。
此時，畫質(zhì)調(diào)整部1600(圖18)，根據(jù)步驟S70000中的圖像特征信息的分析結(jié)果，限制對于高清晰圖像數(shù)據(jù)的畫質(zhì)調(diào)整的執(zhí)行。在本實(shí)施例中，在高清晰圖像文件GF中所包含的圖像特性信息，作為禁止銳度的調(diào)整的信息生成。因此，畫質(zhì)調(diào)整部1600，根據(jù)圖像特性信息的分析結(jié)果，限制對高清晰圖像數(shù)據(jù)的銳度調(diào)整的執(zhí)行。
即，如圖23所示，在畫質(zhì)調(diào)整畫面26000所顯示的各畫質(zhì)調(diào)整項(xiàng)目內(nèi)，用于銳度調(diào)整的銳度調(diào)整用滑桿26400例如為虛線表示，不能為使用者所操作。因此，使用者，不能進(jìn)行銳度調(diào)整的指示。這樣，對于高清晰圖像數(shù)據(jù)的銳度調(diào)整被禁止。
在步驟S90000(圖22)中，畫質(zhì)調(diào)整部1600(圖18)根據(jù)使用者的設(shè)定，進(jìn)行對于高清晰圖像文件GF中所包含的高清晰圖像數(shù)據(jù)的畫質(zhì)調(diào)整。
這樣，本實(shí)施例的圖像生成、處理裝置10000，在執(zhí)行對于高清晰圖像文件GF中所包含的高清晰圖像數(shù)據(jù)的畫質(zhì)調(diào)整的時候，通過分析圖像特性信息，能夠禁止畫質(zhì)降低的可能性特別大的銳度調(diào)整。因此在進(jìn)行對于高清晰圖像數(shù)據(jù)的畫質(zhì)調(diào)整時，能夠抑制畫質(zhì)的降低，該高清晰圖像數(shù)據(jù)表示合成多個幀圖像數(shù)據(jù)而生成的高清晰圖像。
B-5.本發(fā)明的第2實(shí)施例中的圖像合成以下，對于上述高清晰圖像文件的生成中的圖像合成(圖20的步驟S10000)進(jìn)行詳細(xì)地說明。圖24是表示由圖像合成部進(jìn)行的圖像合成的流程的流程圖。在步驟S11000中，圖像合成部1100(圖18)，取得合成源動態(tài)幀圖像數(shù)據(jù)。如上所述，所謂合成源動態(tài)幀圖像數(shù)據(jù)，是指在源動態(tài)圖像數(shù)據(jù)中的幀圖像數(shù)據(jù)內(nèi)，用于圖像合成的幀圖像數(shù)據(jù)，在本實(shí)施例中，是表示基準(zhǔn)幀圖像F0、對象幀圖像F1及F2共計3幀圖像Gf的幀圖像數(shù)據(jù)。由圖像合成部1100所取得的合成源幀圖像數(shù)據(jù)，暫時存儲在存儲器或硬盤等的存儲裝置(圖中未示出)中。
在步驟S12000中，圖像合成部1100，執(zhí)行用于補(bǔ)正已取得的合成源幀圖像數(shù)據(jù)的各個幀圖像互相的偏差(位置偏差)的補(bǔ)正量的推測。在該補(bǔ)正量的推測中，分別推測用于對對象幀圖像F1及F2相相對于基準(zhǔn)幀圖像F0的位置偏差的補(bǔ)正用的補(bǔ)正量。
圖25是表示對于基準(zhǔn)幀圖像和對象幀圖像之間的位置偏差的說明圖，圖26是表示對于基準(zhǔn)幀圖形和對象幀圖像之間的位置偏差的補(bǔ)正的說明圖。
在以下的說明中，對于已取得3幀圖像數(shù)據(jù)所表示的幀圖像付與連續(xù)的號碼n(n＝0，1，2)，將幀圖像使用其連續(xù)的號碼n來稱呼。即、連續(xù)號碼n的幀圖像稱為幀圖像Fn。例如，將連續(xù)號碼n的值為0的幀圖像稱為幀圖像F0。這里，F(xiàn)0表示基準(zhǔn)幀圖像F0，F(xiàn)1及F2表示對象幀圖像F1及F2。
圖像偏差用并進(jìn)(橫方向或縱方向)的偏差和旋轉(zhuǎn)偏差的組合表示。在圖25中，表示了基準(zhǔn)幀圖像F0的邊緣和對象幀圖像F2的邊緣重合的狀態(tài)。另外，在基準(zhǔn)幀圖像F0上的中心位置追記假想的十字圖像X0，該十字圖像X0，與對象幀圖像F2同樣存在偏差，在對象幀圖像F2上，表示作為偏差的結(jié)果圖像的十字圖像X2。另外，用粗實(shí)線表示基準(zhǔn)幀圖像F0和十字圖像X0，同時用細(xì)虛線表示對象幀圖像F2和十字圖像X2。
在本實(shí)施例中，將橫方向的并進(jìn)偏差量表示為“um”，縱方向的并進(jìn)偏差量表示為“vm”，旋轉(zhuǎn)偏差量表示為“δm”。另外，關(guān)于對象幀圖像Fn(n＝1，2)的偏差量分別表示為“umn”、“vmn”、“δmn”。例如，如圖25所示，對象幀圖像F2，相對于基準(zhǔn)幀圖像F0產(chǎn)生并進(jìn)偏差、及旋轉(zhuǎn)偏差，該偏差量表示為um2、vm2、δm2。
這里，由于將對象幀圖形F1、F2與基準(zhǔn)幀圖像F0合成，補(bǔ)正對象幀圖像F1、F2與基準(zhǔn)幀圖像F0之間的偏差，以消除對象幀圖像F1、F2與基準(zhǔn)幀圖像F0之間的偏差的方式。將用于該補(bǔ)正的橫方向的并進(jìn)補(bǔ)正量表示為“u”，縱方向的并進(jìn)補(bǔ)正量表示為“v”，旋轉(zhuǎn)補(bǔ)正量表示為“δ”。另外，關(guān)于幀圖像Fn(n＝1、2)的這些補(bǔ)正量表示為“un”、“vn”、“δn”。例如，對于對象幀圖像F2的補(bǔ)正量表示為u2、v2、δ2。
這里，所謂的補(bǔ)正，意思是將對象幀圖像Fn(n＝1、2)的各個象素的位置移動到在橫方向施加un移動、在縱方向施加vn移動及施加δn旋轉(zhuǎn)后的位置。因此，對象幀圖像Fn(n＝1、2)的補(bǔ)正量un、vn、δn，用un＝-umn、vn＝-vmn、δn＝-δmn的關(guān)系表示。例如，對于對象幀圖像F2的補(bǔ)正量u2、v2、δ2，用u2＝-um2、v2＝-vm2、δ2＝-δm2表示。
根據(jù)以上，例如，如圖26所示，通過使用補(bǔ)正量u2、v2、δ2，補(bǔ)正對象幀圖像F2的各個象素的位置，可以消除對象幀圖像F2和基準(zhǔn)幀圖像F0之間的偏差。此時，將補(bǔ)正后的對象幀圖像F2和基準(zhǔn)幀圖像F0用顯示器2000(圖18)顯示，如圖26所示，對象幀圖像F2，以相對于基準(zhǔn)幀圖像F0部分一致的狀態(tài)顯示。另外，為了清楚易懂地顯示該補(bǔ)正結(jié)果，在圖26中，標(biāo)記了和圖25同樣的假想的十字圖像X0及十字圖像X2，如圖26所示，作為補(bǔ)正結(jié)果，消除了十字圖像X2和十字圖像X0之間地偏差而達(dá)到一致。
同樣，對于對象幀圖像F1，使用補(bǔ)正量u1、v1、δ1各值施以補(bǔ)正，可以置換對象幀圖像F1的各象素的位置。
但是，對于各對象幀圖像Fn(n＝1、2)的補(bǔ)正量un、vn、δn，在圖像合成部1100(圖18)中，基于基準(zhǔn)幀圖像F0的圖像數(shù)據(jù)和對象幀圖像F1～F2的圖像數(shù)據(jù)，使用例如由圖形匹配法或梯度法及最小二乘法的規(guī)定的公式計算。而且，計算出的補(bǔ)正量un、vn、δn，作為并進(jìn)補(bǔ)正量數(shù)據(jù)un、vn及旋轉(zhuǎn)補(bǔ)正量數(shù)據(jù)δn，存儲在存儲器內(nèi)(圖中未示出)的規(guī)定區(qū)域中。
在本實(shí)施例中，圖像合成部1100，使用推測出的補(bǔ)正量un、vn、δn，補(bǔ)正基準(zhǔn)幀圖像F0和對象幀圖像F1～F2之間的位置偏差。
在步驟S13000(圖7)中，圖像合成部1100(圖18)，合成基準(zhǔn)幀圖像數(shù)據(jù)和補(bǔ)正后的對象幀圖像數(shù)據(jù)，生成表示高清晰圖像Gp的高清晰圖像數(shù)據(jù)。此時，圖像合成部1100，在構(gòu)成生成的高清晰圖像GP的各個象素(以下稱為“生成圖像”)中，對于不存在于基準(zhǔn)幀圖像F0及對象幀圖像F1、F2中的任一個的的象素，使用表示存在于該生成象素的周邊的象素的象素值的象素數(shù)據(jù)(表示灰度值的灰度數(shù)據(jù))，通過進(jìn)行預(yù)定的補(bǔ)正處理，邊進(jìn)行合成邊進(jìn)行高清晰化。
圖27是放大表示對基準(zhǔn)幀圖像和對象幀圖像進(jìn)行了補(bǔ)正偏差配置情況的說明圖。在圖27中，高清晰圖像Gp的各個象素的中心位置用黑點(diǎn)表示，同時基準(zhǔn)幀圖像F0的各象素的中心用空白的四邊形表示，補(bǔ)正后的對象幀圖像F1～F2的各象素的中心位置，用施以陰影線的四邊形表示。另外，在以下，設(shè)高清晰圖像Gp的象素的數(shù)目，相對基準(zhǔn)幀圖像F0的象素的數(shù)目，縱橫分別為1.5倍。另外，高清晰圖像Gp的各象素的中心，位于每隔兩個象素與基準(zhǔn)幀圖像F0的各象素的中心重合的位置。但是，高清晰圖像Gp的象素的中心，不必一定要位于與基準(zhǔn)幀圖像F0的各象素的中心重合的位置。例如，所有高清晰圖像Gp的各象素的中心，也可以位于基準(zhǔn)幀圖像F0的各象素的中心的中間，還可以設(shè)為各種位置。另外，高清晰圖像Gp和基準(zhǔn)幀圖像F0之間的圖像大小的比，也不限定于縱橫分別為1.5倍，還可以設(shè)為各種值。
以下，關(guān)注高清晰圖像GP內(nèi)的某象素G(j)(以下稱為“關(guān)注象素G(j)”)進(jìn)行說明。這里，變量j是付與構(gòu)成高清晰圖像Gp的所有象素的識別號碼。對高清晰圖像Gp的象素的識別號碼的付與方法，例如將圖像的左上端的象素作為j＝1，將其右鄰的象素作為j＝2，如此向右橫方向順序付與號碼，如果到圖像的右端象素為止付與了號碼，轉(zhuǎn)移到下1段的左端，同樣在向右橫方向付與號碼，最后，對右下端的象素付與號碼。
圖像合成部1100(圖18)，在基準(zhǔn)幀圖像F0及對象幀圖像F1、F2的象素內(nèi)，探索該象素的中心和關(guān)注象素的G(j)的中心之間的距離比規(guī)定的閾值R小的象素，將檢測到象素設(shè)定為“近旁象素”。
在圖27所示的例子中，閾值R的值為R1時，由于對象幀圖像F2的象素F(2，p)的中心和關(guān)注象素G(j)的中心之間的距離L2比R1小，因此將象素F(2，p)設(shè)定為近旁象素。另一方面，基準(zhǔn)幀圖像F0的象素F(0，z)和對象幀圖像F1的象素F(1，c)，由于各個象素中心和關(guān)注象素G(j)中心間的距離(L0，L1)比R1大，因此不設(shè)定為近旁象素。另外，在本說明書中，將幀圖像Fn的第i號的象素表記為F(n，i)，變量i是付與構(gòu)成幀圖像Fn的所有象素的識別號碼。對于幀圖像Fn的象素的識別號碼的付與方法，和對于上述的高清晰圖像Gp的象素的識別號碼的付與方法相同。另外，c、p、z分別表示常數(shù)。
另外，在閾值R的值為R2時，將所有基準(zhǔn)幀圖像F0的象素F(0，z)、對象幀圖像F1的象素F(1，c)、對象幀圖像F2的象素F(2，p)，設(shè)定為近旁象素。
接著，圖像合成部1100，使用設(shè)定的近旁象素和在包含該近旁象素的幀圖像中包圍關(guān)注象素G(j)的其他象素的象素數(shù)據(jù)，通過雙線性法、雙立方法、最近象素法等各種插值處理生成關(guān)注象素G(j)的圖像數(shù)據(jù)。在圖27的例子中，由于閾值R的值為R1的時候，將對象幀圖像F2的象素F(2，p)設(shè)定為近旁象素，因此，關(guān)注象素G(j)的象素數(shù)據(jù)的生成，使用在對象幀圖像F2中包圍關(guān)注象素G(j)的4個象素的象素數(shù)據(jù)進(jìn)行。另外，由于，閾值R的值為R2時，還將基準(zhǔn)幀圖像F0的象素F(0，z)和對象幀圖像F1的象素F(1，c)設(shè)定為近旁象素，因此關(guān)注象素G(j)的象素數(shù)據(jù)的生成，使用在基準(zhǔn)幀圖像F0和對象幀圖像F1及F2中，包圍關(guān)注象素G(j)的合計12個象素的象素數(shù)據(jù)進(jìn)行。以下，對于在閾值R的值為R1時的由雙線性法進(jìn)行的插值處理的一個例子進(jìn)行說明。
圖28是表示對由雙線性法進(jìn)行插值處理的說明圖。圖28表示閾值R為R1時的例子。關(guān)注象素G(j)，因?yàn)槭遣淮嬖谟诨鶞?zhǔn)幀圖像F0及位置偏差補(bǔ)正后的對象幀圖像F1～F2中的任一個中的象素，所以不存在象素數(shù)據(jù)。另外，按照以上所述，對象幀圖像F2的象素F(2，p)設(shè)定為近旁象素。此時，圖像合成部1100(圖18)，使用在對象幀圖像F2中，包圍關(guān)注象素G(j)的4個象素(F(2，p)、F(2，p+1)、F(2、q)、F(2、q+1))進(jìn)行插值處理。另外，在本說明書中，用于關(guān)注象素G(j)的插值處理的幀圖像的、包圍關(guān)注象素G(j)的象素稱為周圍象素，將周圍象素的中心稱為周圍象素中心。
圖像合成部1100，首先，將被包圍在4個周圍象素中心的四邊形，通過連接各周圍象素中心和關(guān)注象素G(j)的中心連接的4個線段分割為4個三角形。而且，使用被包圍在4個周圍象素中心的四邊形的面積和該四邊形內(nèi)的4個三角形的面積，計算出各周圍象素的權(quán)重系數(shù)。即對于各周圍象素，計算出4個三角形內(nèi)與其周圍象素中心不接觸的兩個三角形的面積的總和、相對于被包圍在4個周圍象素中心的四邊形的面積的比，并將計算出的值，作為該周圍象素的權(quán)重系數(shù)。由此，如果計算出權(quán)重系數(shù)，距關(guān)注象素G(j)的距離越近的周圍象素，則其權(quán)重系數(shù)越大。
關(guān)注象素G(j)的象素數(shù)據(jù)，通過對各周圍象素，合計其周圍象素的象素數(shù)據(jù)和其周圍象素的權(quán)重系數(shù)之積的方式而計算出。
另外，如在圖27中閾值R的值為R2時那樣，關(guān)注象素G(j)的象素數(shù)據(jù)的生成中使用多個幀圖像時，也和上述的一樣計算出權(quán)重，通過合計周圍象素的象素數(shù)據(jù)和該周圍象素的權(quán)重系數(shù)之積，進(jìn)行圖像數(shù)據(jù)的生成。
如以上說明過的那樣，由圖像合成部1100進(jìn)行的圖像合成，根據(jù)閾值R的值，處理的內(nèi)容產(chǎn)生變化。即閾值R的值越小，用于高清晰圖像Gp的各象素的象素數(shù)據(jù)的生成的幀圖像的數(shù)目越少。另外，閾值R的值越大，用于高清晰圖像Gp的各象素的象素數(shù)據(jù)的生成的幀圖像的數(shù)目越多。而且，在高清晰圖像Gp的生成中，根據(jù)用于高清晰圖像Gp的各象素的象素數(shù)據(jù)的生成的幀圖像數(shù)目的多少，改變生成的高清晰圖像Gp的畫質(zhì)。
圖29是示意地表示閾值R的大小和高清晰圖像Gp的畫質(zhì)之間的關(guān)系的說明圖。在圖像合成部1100進(jìn)行的補(bǔ)正量的推測(圖7的步驟S12000)中，由于動態(tài)圖像生成時的透鏡的畸變或噪聲、局部的動作等的影響，有時會對于推測的補(bǔ)正量產(chǎn)生誤差。圖29顯示的是在補(bǔ)正量的推測中產(chǎn)生誤差時的例子。在圖29(a)中，放大表示用于圖像合成的偏差補(bǔ)正后的兩個幀圖像中的、表示對應(yīng)的圖像的一部分。如圖29(a)所示，由于補(bǔ)正量的推測中的誤差影響，在兩圖像邊界部分產(chǎn)生偏差。
在圖29(b)～(d)中表示，圖像合成部1100使用圖29(a)所示的兩個圖像，進(jìn)行圖像合成的結(jié)果。圖29(b)是表示在閾值R的值小的時候的圖像合成結(jié)果，圖29(c)、圖29(d)分別是表示在閾值R的值適當(dāng)?shù)臅r候和閾值R的值大的時候的圖像合成結(jié)果。
另一方面，如圖29(d)中所示，由于如果閾值R的值大，則用于高清晰圖像Gp的各象素的象素數(shù)據(jù)的生成的幀圖像數(shù)目多，因此平均化了在補(bǔ)正量推測中的誤差的影響，圖像的邊界部分的偏差變得不引人注目。另外，噪聲也通過平均化、容易降低。但是導(dǎo)致圖像數(shù)據(jù)也被平均化，容易成為銳度低的圖像。
如此，在高清晰圖像Gp的生成中，銳度的提高與抑制補(bǔ)正量的推測誤差的影響及降低噪聲是相反的。在此，如果設(shè)定閾值R的值為適當(dāng)?shù)闹?，則如圖29(c)所示，能夠?qū)⒏咔逦鷪D像Gp做成取得了兩者的平衡的圖像。如此，由圖像合成部1100進(jìn)行的圖像合成中的閾值R，事先被實(shí)驗(yàn)性地進(jìn)行調(diào)整，以取得生成的高清晰圖像Gp的、銳度的提高與抑制補(bǔ)正量的推測誤差的影像及降低噪聲之間的平衡。。
為此，如果對表示生成的高清晰圖像Gp的高清晰圖像數(shù)據(jù)進(jìn)行銳度調(diào)整，則有可能變?yōu)閳D29(b)或圖29(d)所示的圖像。因此，如果對于高清晰圖像數(shù)據(jù)進(jìn)行銳度調(diào)整，則畫質(zhì)降低的可能性特別大。
B-6.第2實(shí)施例的變形例在上述第2實(shí)施例的變形例中，圖像特征信息，作為禁止銳度調(diào)整的信息生成，但是圖像特征信息，也可能作為限制銳度的調(diào)整范圍的信息生成。即，所謂的銳度調(diào)整的限制，包含銳度調(diào)整的禁止和銳度調(diào)整的范圍的限制。
如果對高清晰圖像數(shù)據(jù)限制銳度調(diào)整的調(diào)整范圍，則例如，圖6(b)所示的用戶接口畫面20000的畫質(zhì)調(diào)整畫面26000中的銳度調(diào)整用滑桿26400的滑動范圍顯示得狹，使用者能夠指定的銳度調(diào)整范圍被限制。即使這樣，在對于高清晰圖像數(shù)據(jù)進(jìn)行畫質(zhì)調(diào)整的時候，能夠抑制畫質(zhì)的降低。
在上述第2實(shí)施例中，作為圖像特征信息，可以生成表示對高清晰圖像的銳度調(diào)整的禁止的標(biāo)志，但作為圖像特性信息，也可以生成表示包含在圖像文件中的圖像數(shù)據(jù)為高清晰圖像數(shù)據(jù)的標(biāo)志。對包含這樣的圖像特征信息的圖像文件進(jìn)行圖像調(diào)整時，畫質(zhì)調(diào)整部1600(圖18)，識別包含在圖像文件中的圖像數(shù)據(jù)為高清晰圖像數(shù)據(jù)，限制對圖像數(shù)據(jù)的銳度調(diào)整。這樣，對高清晰圖像數(shù)據(jù)進(jìn)行畫質(zhì)調(diào)整的時候，也能夠抑制畫質(zhì)降低。
在上述第2實(shí)施例中，特定的畫質(zhì)調(diào)整是作為銳度的調(diào)整，但是，特定的畫質(zhì)調(diào)整也可以是在圖像生成部1100(圖18)中對高清晰圖像數(shù)據(jù)未執(zhí)行的其他的畫質(zhì)調(diào)整。這樣，由高清晰圖像數(shù)據(jù)的特性，限制如對高清晰圖像數(shù)據(jù)進(jìn)行則可能會導(dǎo)致畫質(zhì)降低的畫質(zhì)調(diào)整的執(zhí)行，能夠抑制伴隨畫質(zhì)調(diào)整的畫質(zhì)降低。另外，特定的畫質(zhì)調(diào)整，還可以是對高清晰圖像數(shù)據(jù)已經(jīng)進(jìn)行的畫質(zhì)調(diào)整。這樣可以防止由于再次執(zhí)行對高清晰圖像數(shù)據(jù)已經(jīng)進(jìn)行的畫質(zhì)調(diào)整造成的畫質(zhì)降低或處理時間的增加。
在上述的第2實(shí)施例中，在根據(jù)使用者的指示對高清晰圖像數(shù)據(jù)進(jìn)行的畫質(zhì)調(diào)整中，使用限制特定的畫質(zhì)調(diào)整的例子進(jìn)行說明的，但是在自動地對高清晰圖像數(shù)據(jù)進(jìn)行的畫質(zhì)調(diào)整中，也當(dāng)然可以限制特定的畫質(zhì)調(diào)整。
在上述第2實(shí)施例中，對象幀圖像為緊接基準(zhǔn)幀圖像之后的兩個幀圖像，但是對象幀圖像的選定方法或選定數(shù)目可以任意設(shè)定。例如，可以把緊靠基準(zhǔn)幀圖像的之前的兩個幀圖像作為對象幀圖像進(jìn)行設(shè)定。另外，可以將從基準(zhǔn)幀圖像相距規(guī)定的幀數(shù)目的幀圖像作為對象幀圖像進(jìn)行設(shè)定。還有，可以將對象幀圖像設(shè)定為3個。另外，對象幀圖像的選定方法或選定數(shù)目可以是使用者來設(shè)定。
在上述第2實(shí)施例中，在微縮圖像顯示畫面22000中，顯示的是微縮圖像，但是在微縮圖像顯示畫面22000中也可以顯示包含在圖像文件中的圖像數(shù)據(jù)所表示的圖像本身。
在上述第2實(shí)施例中，使用用構(gòu)成動態(tài)圖像的多個幀圖像數(shù)據(jù)生成高清晰圖像數(shù)據(jù)的例子進(jìn)行說明，但也可以是用幀圖像數(shù)據(jù)以外的其他的圖像數(shù)據(jù)生成高清晰圖像數(shù)據(jù)。例如，能用多個靜止圖像數(shù)據(jù)生成高清晰圖像數(shù)據(jù)。
在上述第2實(shí)施例中，在推測圖像整體的偏差補(bǔ)正量的時候，使用并進(jìn)偏差(橫方向u、縱方向v)及旋轉(zhuǎn)偏差(δ)這3個參數(shù)推測偏差補(bǔ)正量，但是本發(fā)明并不局限于此。例如，可以改變參數(shù)數(shù)目推測補(bǔ)正量，也可以使用其他種類的參數(shù)推測偏差補(bǔ)正量。
C.其他變形例另外，本發(fā)明并不局限于上述實(shí)施例或?qū)嵤┓绞?，在不脫離其主旨的范圍內(nèi)可以以各種方式實(shí)施，例如可以有如下的變形。
在上述實(shí)施例中，生成的是包含生成的靜止圖像數(shù)據(jù)和屬性信息的圖像文件，但是不一定需要將靜止圖像數(shù)據(jù)和屬性信息存放在同一文件中，可以為相關(guān)聯(lián)的各自的文件。
在所述各實(shí)施例中，也可以將由硬件實(shí)現(xiàn)的構(gòu)成的一部分置換為軟件，相反，也可以將由軟件實(shí)現(xiàn)的構(gòu)成的一部分置換為硬件。
在用軟件實(shí)現(xiàn)本發(fā)明的功能的一部分或全部的情況下，該軟件(計算機(jī)程序)，可以以存儲在計算機(jī)可讀取的記錄介質(zhì)中的形式提供。在本發(fā)明中，所謂“計算機(jī)可讀取的記錄介質(zhì)”，并不局限于如軟盤或CC-ROM這樣的便攜型的記錄介質(zhì)，也包含各種的RAM或ROM等的計算機(jī)內(nèi)的內(nèi)部存儲裝置或硬盤等的固定在計算機(jī)中的外部存儲裝置。
最后，通過參照，作為本申請的主張優(yōu)先權(quán)的基礎(chǔ)的以下的日本的專利，也包含在本申請的公開中。
(1)特愿2004-57158(申請日平成16年3月2日)(2)特愿2004-57163(申請日平成16年3月2日)
權(quán)利要求
1.一種圖像文件生成方法，是生成圖像文件的圖像文件生成方法，其特征在于，備有由時序上連續(xù)的多個源靜止圖像數(shù)據(jù)，生成至少1個靜止圖像數(shù)據(jù)的靜止圖像數(shù)據(jù)生成步驟；生成所述靜止圖像數(shù)據(jù)的屬性信息的屬性信息生成步驟；使用所述生成的靜止圖像數(shù)據(jù)和所述屬性信息生成所述靜止圖像數(shù)據(jù)文件的數(shù)據(jù)文件生成步驟，其中，所述屬性信息生成步驟包括根據(jù)所述靜止圖像數(shù)據(jù)的生成，將在對所述靜止圖像數(shù)據(jù)的圖像處理中可利用的信息作為所述屬性信息生成的步驟。
2.根據(jù)權(quán)利要求1所述的圖像文件生成方法，其特征在于，所述多個源靜止圖像數(shù)據(jù)是動態(tài)圖像數(shù)據(jù)，所述屬性信息生成步驟包括使用所述動態(tài)圖像數(shù)據(jù)所包含的信息中除所述靜止圖像數(shù)據(jù)所包含的信息以外的信息，生成所述屬性信息的步驟。
3.根據(jù)權(quán)利要求2所述的圖像文件生成方法，其特征在于，所述屬性信息包含在由所述靜止圖像所表示的圖像區(qū)域中，指定作為檢測出動作的區(qū)域的動作區(qū)域的信息。
4.根據(jù)權(quán)利要求3所述的圖像文件生成方法，其特征在于，所述靜止圖像數(shù)據(jù)生成步驟包括從所述靜止圖像數(shù)據(jù)中提取所述動作區(qū)域的步驟。
5.根據(jù)權(quán)利要求3或4所述的圖像文件生成方法，其特征在于，所述屬性信息包含表示所述動作區(qū)域的所述圖像區(qū)域中的并進(jìn)移動狀態(tài)的移動信息。
6.根據(jù)權(quán)利要求3或4所述的圖像文件生成方法，其特征在于，所述屬性信息包含表示所述動作區(qū)域內(nèi)的圖像性質(zhì)的被攝體信息。
7.根據(jù)權(quán)利要求1所述的圖像文件生成方法，其特征在于，所述靜止圖像數(shù)據(jù)生成部，由所述多個源靜止圖像數(shù)據(jù)，生成比所述多個源靜止圖像數(shù)據(jù)的最低分辨率更高的分辨率的高分辨率靜止圖像數(shù)據(jù)，所述屬性信息包含用于限制對所述生成的高分辨率靜止圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的圖像特性信息。
8.根據(jù)權(quán)利要求7所述的圖像文件生成方法，其特征在于，所述特定的畫質(zhì)調(diào)整包括在所述圖像合成部中對所述高分辨率靜止圖像數(shù)據(jù)未實(shí)行的畫質(zhì)調(diào)整。
9.根據(jù)權(quán)利要求7或8所述的圖像文件生成方法，其特征在于，所述特定的畫質(zhì)調(diào)整是銳度的調(diào)整。
10.根據(jù)權(quán)利要求7或8所述的圖像文件生成方法，其特征在于，所述多個源靜止圖像數(shù)據(jù)，是構(gòu)成動態(tài)圖像數(shù)據(jù)的幀圖像數(shù)據(jù)。
11.一種圖像處理方法，是根據(jù)包含靜止圖像數(shù)據(jù)和所述靜止圖像數(shù)據(jù)的屬性信息的靜止圖像數(shù)據(jù)文件，對所述靜止圖像數(shù)據(jù)進(jìn)行圖像處理的圖像處理方法，其特征在于，所述屬性信息包含在由所述靜止圖像數(shù)據(jù)所表示的圖像區(qū)域中，指定作為檢測出動作的區(qū)域中的動作區(qū)域的信息，所述圖像處理方法，根據(jù)所述屬性信息，從由所述靜止圖像數(shù)據(jù)所表示圖像區(qū)域中提取所述動作區(qū)域的步驟。
12.根據(jù)權(quán)利要求11所述的圖像處理方法，其特征在于，所述屬性信息包含移動信息，該移動信息表示在所述移動區(qū)域的所述圖像區(qū)域中包含移動方向的并進(jìn)移動狀態(tài)，所述圖像處理方法包括根據(jù)所述移動信息，提取在所述動作區(qū)域的所述移動方向側(cè)附加了規(guī)定區(qū)域的區(qū)域的圖像的步驟。
13.根據(jù)權(quán)利要求12所述的圖像處理方法，其特征在于，所述圖像處理方法包括根據(jù)所述移動信息，提取在所述移動區(qū)域的所述移動方向側(cè)上將比所述移動方向的相反側(cè)更大的區(qū)域附加在所述動作區(qū)域上的區(qū)域的圖像的步驟。
14.根據(jù)權(quán)利要求12所述的圖像處理方法，其特征在于，所述圖像處理方法，決定由所述圖像處理應(yīng)生成的靜止圖像數(shù)據(jù)所表示的圖像的形狀，并且將在具有所述被決定了的形狀的圖像區(qū)域內(nèi)產(chǎn)生的剩余區(qū)域，以在所述移動方向上多分配的方式，配置所述動作區(qū)域的步驟。
15.根據(jù)權(quán)利要求14所述的圖像處理方法，其特征在于，所述形狀是具有規(guī)定的縱橫比的矩形，所述圖像處理方法具備將在具有所述規(guī)定的縱橫比的圖像區(qū)域內(nèi)配置所述動作區(qū)域時所產(chǎn)生的剩余區(qū)域，以在所述移動方向上最近的上下左右中的任一側(cè)多分配的方式來配置的步驟。
16.一種圖像文件處理方法，是對包含由時序上連續(xù)的多個源靜止圖像數(shù)據(jù)生成的靜止圖像數(shù)據(jù)和屬性信息的圖像文件進(jìn)行圖像處理的圖像文件處理方法，其特征在于，所述屬性信息包含用于限制對所述被生成的高分辨率靜止圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的圖像特性信息，所述圖像文件處理方法具備對所述靜止圖像數(shù)據(jù)進(jìn)行圖像處理的圖像處理步驟，所述圖像處理步驟包括根據(jù)所述屬性信息，限制對所述高分辨率靜止圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的實(shí)行的步驟。
17.一種圖像文件生成裝置，是生成圖像文件的圖像文件生成裝置，其特征在于，備有靜態(tài)圖像生成部，其由時序上連續(xù)的多個源靜止數(shù)據(jù)，生成至少1個的靜止圖像數(shù)據(jù)；屬性信息生成部，其生成所述靜止圖像數(shù)據(jù)的屬性信息；數(shù)據(jù)文件生成部，其使用所述生成的靜止圖像數(shù)據(jù)和所述屬性信息，生成所述靜止圖像數(shù)據(jù)文件，其中，所述屬性信息生成部，根據(jù)所述靜止圖像數(shù)據(jù)的生成，將在對所述靜止圖像數(shù)據(jù)的圖像處理中可利用的信息作為所述屬性信息生成。
18.一種圖像處理裝置，是根據(jù)包含靜止圖像數(shù)據(jù)和所述靜止圖像數(shù)據(jù)的屬性信息的靜止圖像數(shù)據(jù)文件，對所述靜止圖像數(shù)據(jù)進(jìn)行圖像處理的圖像處理裝置，其特征在于，所述屬性信息包含在由所述靜止圖像數(shù)據(jù)所表示的圖像區(qū)域中指定作為檢測出動作的區(qū)域的動作區(qū)域的信息，所述圖像處理裝置，根據(jù)所述屬性信息，從由所述靜止圖像數(shù)據(jù)所表示的圖像區(qū)域中提取所述動作區(qū)域。
19.一種圖像文件處理裝置，是對包含由時序上連續(xù)的多個源靜止圖像數(shù)據(jù)生成的靜止圖像數(shù)據(jù)和屬性信息的圖像文件進(jìn)行圖像處理的圖像文件處理裝置，其特征在于，所述屬性信息包含用于限制對所述生成的高分辨率靜止圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的圖像特性信息，所述圖像文件處理裝置具備對所述靜止圖像進(jìn)行圖像處理的圖像處理部，所述圖像處理部，根據(jù)所述屬性信息，限制對所述高分辨率靜止圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的實(shí)行。
20.一種計算機(jī)程序產(chǎn)品，是用于使計算機(jī)執(zhí)行用于生成圖像文件的處理的計算機(jī)程序產(chǎn)品，其特征在于，具有計算機(jī)可讀取的介質(zhì)、和存儲在所述計算機(jī)可讀取的介質(zhì)上的計算機(jī)程序，所述計算機(jī)程序，具有第一程序，其由時序上連續(xù)的多個源靜止圖像數(shù)據(jù)，生成至少1個靜止圖像數(shù)據(jù)；第二程序，其生成所述靜止圖像數(shù)據(jù)的屬性信息；第三程序，其使用所述生成的靜止圖像數(shù)據(jù)和所述屬性信息生成所述靜止數(shù)據(jù)文件，所述第二程序包含根據(jù)所述靜止圖像數(shù)據(jù)的生成，將在對所述靜止圖像數(shù)據(jù)的圖像處理中可利用的信息作為所述屬性信息生成的程序。
21.一種計算機(jī)程序產(chǎn)品，是根據(jù)包含靜止圖像數(shù)據(jù)和所述靜止圖像數(shù)據(jù)的屬性信息的靜止圖像數(shù)據(jù)文件，使計算機(jī)實(shí)行對所述靜止圖像數(shù)據(jù)進(jìn)行圖像處理用的處理的計算機(jī)程序產(chǎn)品，其特征在于，具有計算機(jī)可讀取的介質(zhì)、和存儲在所述計算機(jī)可讀取的介質(zhì)上的計算機(jī)程序，所述屬性信息包含在由所述靜止圖像數(shù)據(jù)所表示的圖像區(qū)域中指定作為檢測出動作的區(qū)域的動作區(qū)域的信息，所述計算機(jī)程序具備根據(jù)所述屬性信息，從所述靜止圖像數(shù)據(jù)所表示的圖像區(qū)域中提取所述動作區(qū)域的程序。
22.一種計算機(jī)程序產(chǎn)品，是用于使計算機(jī)實(shí)行對包含由時序上連續(xù)的多個源靜止圖像數(shù)據(jù)生成的靜止圖像數(shù)據(jù)和屬性信息的圖像文件進(jìn)行圖像處理用的處理的計算機(jī)程序產(chǎn)品，其特征在于，具有計算機(jī)可讀取的介質(zhì)、和存儲在所述計算機(jī)可讀取的介質(zhì)上的計算機(jī)程序，所述屬性信息包含用于限制對所述生成的高分辨率靜止圖像數(shù)據(jù)的特定的畫質(zhì)調(diào)整的圖像特性信息，所述計算機(jī)程序具有用于對所述靜止圖像數(shù)據(jù)進(jìn)行圖像處理的程序，所述程序包含根據(jù)所述屬性信息，限制對所述高分辨率靜止圖像數(shù)據(jù)的特定畫質(zhì)調(diào)整的實(shí)行的程序。
全文摘要
本發(fā)明提供一種生成圖像文件的圖像文件生成方法。該圖像文件生成方法包括由時序上連續(xù)的多個源靜止圖像數(shù)據(jù)，生成至少1個靜止圖像數(shù)據(jù)的靜止圖像數(shù)據(jù)生成步驟；生成所述靜止圖像數(shù)據(jù)的屬性信息的屬性信息生成步驟；使用所述生成的靜止圖像數(shù)據(jù)和所述屬性信息，生成所述靜止圖像數(shù)據(jù)文件的數(shù)據(jù)文件生成步驟。所述屬性信息生成步驟包括根據(jù)所述靜止圖像數(shù)據(jù)的生成，將在對所述靜止圖像數(shù)據(jù)的圖像處理中可利用的信息作為所述屬性信息生成的步驟。
文檔編號H04N1/00GK1664859SQ20051005292
公開日2005年9月7日 申請日期2005年3月2日 優(yōu)先權(quán)日2004年3月2日
發(fā)明者相磯政司, 鍬田直樹 申請人:精工愛普生株式會社