專利名稱：圖像感測(cè)設(shè)備及其控制方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像感測(cè)設(shè)備和該圖像感測(cè)設(shè)備的控制方法，以及信息處理設(shè)備，打印設(shè)備，和打印數(shù)據(jù)生成方法，更具體來說，涉及通過圖像感測(cè)設(shè)備、信息處理設(shè)備和打印設(shè)備執(zhí)行的運(yùn)動(dòng)圖像的圖像感測(cè)和打印，以及該圖像感測(cè)設(shè)備的控制方法，和打印數(shù)據(jù)生成方法。
背景技術(shù)：
近年來，諸如數(shù)字?jǐn)z像機(jī)和數(shù)字視頻攝像機(jī)之類的可以利用簡(jiǎn)單操作感測(cè)圖像并將該感測(cè)的圖像轉(zhuǎn)換為數(shù)字圖像數(shù)據(jù)的圖像感測(cè)設(shè)備已經(jīng)得到廣泛使用。結(jié)果，在PC顯示監(jiān)視器和電視屏幕上查看利用數(shù)字?jǐn)z像機(jī)或數(shù)字視頻攝像機(jī)感測(cè)的靜止圖像和運(yùn)動(dòng)圖像以及使用工作室打印服務(wù)或家用個(gè)人打印機(jī)打印它們的機(jī)會(huì)增加。 此外，利用數(shù)字?jǐn)z像機(jī)的技術(shù)性能的新發(fā)展，不僅組合了靜止圖像感測(cè)，而且還組合了運(yùn)動(dòng)圖像感測(cè)功能的數(shù)字?jǐn)z像機(jī)正在變得普遍。 在這些情況下，常規(guī)上，到打印店并使用底片或索引打印，以手寫方式指定用于創(chuàng)建打印的信息，如希望打印的幀以及這樣的幀的數(shù)量，日期打印等。近年來，已經(jīng)可以在自己的數(shù)字?jǐn)z像機(jī)中設(shè)置此類信息，并直接記錄到諸如存儲(chǔ)卡之類的可移動(dòng)介質(zhì)中。此功能通過簡(jiǎn)單地將可移動(dòng)介質(zhì)附連到打印機(jī)，使得能夠自動(dòng)地根據(jù)指定進(jìn)行打印。替代在核對(duì)數(shù)字?jǐn)z像機(jī)或打印機(jī)上的數(shù)字圖像的同時(shí)一次一張地打印每一個(gè)圖像，這可以節(jié)省時(shí)間和避免麻煩，減輕對(duì)用戶的負(fù)擔(dān)。 為了實(shí)現(xiàn)上文所描述的功能，已知稱為DPOF(Digital PrintOrder Format，數(shù)字打印命令格式)的標(biāo)準(zhǔn)。DPOF是這樣的一種格式為了實(shí)現(xiàn)上文所描述的對(duì)于用戶的優(yōu)點(diǎn)，獲取自動(dòng)打印信息，如打印的數(shù)量、大小、是否包括日期、標(biāo)題、修整等，并將它與圖像文件一起存儲(chǔ)在可移動(dòng)介質(zhì)中，以便在打印時(shí)使用。 目前廣泛公知的DP0F假設(shè)要打印的是靜止圖像，并具有下列類型的打印 標(biāo)準(zhǔn)打印…每1張打印布置1個(gè)圖像文件。 索引打印和多圖像打印…每1張打印布置多個(gè)圖像文件。 特定大小打印…每1張打印布置1個(gè)圖像文件，但是指定圖像尺寸。 那么，自動(dòng)打印信息被存儲(chǔ)在文本文件中，存儲(chǔ)該信息的文件稱為DP0F文件。 此外，近來，已經(jīng)開發(fā)了直接打印系統(tǒng)，該系統(tǒng)使得數(shù)字圖像數(shù)據(jù)能夠直接從數(shù)字
攝像機(jī)傳輸?shù)酱蛴C(jī)并打印，而無需經(jīng)過PC。此外，還開發(fā)出了這樣的打印機(jī)，其中，利用數(shù)
字?jǐn)z像機(jī)感測(cè)的圖像被保存到諸如存儲(chǔ)卡之類的介質(zhì)中，該介質(zhì)被直接附連到打印機(jī)，并
且該介質(zhì)中存儲(chǔ)的圖像被打印。
3
此外，還需要運(yùn)動(dòng)圖像打印，不僅打印靜止圖像，而且打印運(yùn)動(dòng)圖像的幀。例如，在專利文件l中提出了用于打印運(yùn)動(dòng)圖像的技術(shù)。此外，例如，在專利文件2中還提出了在以DP0F打印運(yùn)動(dòng)圖像中包括的技術(shù)。 此外，在專利文件3中，公開了這樣的技術(shù)連續(xù)地計(jì)算幀間差值，并提取運(yùn)動(dòng)圖像的場(chǎng)景變化的時(shí)刻。 專利文件1 :日本專利特開No. 2004-040393
專利文件2 :日本專利特開No. 2001-251573
專利文件3 :日本專利特開No. 2004-080599

發(fā)明內(nèi)容
本發(fā)明要解決的問題 然而，在常規(guī)的發(fā)明中，對(duì)于運(yùn)動(dòng)圖像的單個(gè)指定的幀圖像，執(zhí)行諸如邊緣突出和亮度校正之類的普通的圖像校正，此后，生成用于打印的靜止圖像。結(jié)果，難以去除運(yùn)動(dòng)圖像所特有的圖像噪聲。此外，為了從運(yùn)動(dòng)圖像中提取場(chǎng)景的變化，如在專利文件3中那樣，必須一次一個(gè)地檢查幀之間的相關(guān)性，而這樣的處理花費(fèi)時(shí)間。 此外，對(duì)于靜止圖像，圖像感測(cè)條件數(shù)據(jù)存儲(chǔ)在頭部中，此外，靜止圖像本身基本上記錄了時(shí)間上的凍結(jié)瞬間(frozen moment)，從而，當(dāng)靜止圖像被打印時(shí)，只使用單個(gè)打印的數(shù)據(jù)來執(zhí)行圖像校正以及打印靜止圖像。 相反，對(duì)于運(yùn)動(dòng)圖像打印，從時(shí)間上連續(xù)的圖像中提取單個(gè)打印，并進(jìn)行打印。在此情況下，已知這樣的技術(shù)，所述技術(shù)使用要打印的圖像的之前和之后在時(shí)間上連續(xù)的圖像，并將圖像分割為運(yùn)動(dòng)區(qū)域和靜止區(qū)域，并執(zhí)行兩種圖像處理，或者所述技術(shù)在放大并打印來自場(chǎng)圖像的幀圖像時(shí)執(zhí)行像素插入。 執(zhí)行這種合成或校正在提供增強(qiáng)的圖像分辨率和感光度時(shí)是有效的，如果對(duì)象靜止不動(dòng)，則隨著用于合成和校正的圖像的數(shù)量增大，效果會(huì)提高。然而，在進(jìn)行運(yùn)動(dòng)圖像感測(cè)時(shí)，很可能視角或曝光發(fā)生變化。結(jié)果，當(dāng)嘗試打印單個(gè)場(chǎng)景時(shí)，按原樣利用常規(guī)技術(shù)，難以最佳地校正圖像和改進(jìn)其質(zhì)量。 本發(fā)明是在考慮到上文描述的現(xiàn)有技術(shù)的問題而作出的，并且其目的在于使得能夠更可靠并迅速地生成用于高質(zhì)量打印的運(yùn)動(dòng)圖像數(shù)據(jù)。
解決問題的手段 要實(shí)現(xiàn)上文所描述的目標(biāo)，本發(fā)明提供了一種能夠感測(cè)運(yùn)動(dòng)圖像的圖像感測(cè)設(shè)備，包括存儲(chǔ)單元，存儲(chǔ)在運(yùn)動(dòng)圖像的圖像感測(cè)期間感測(cè)的運(yùn)動(dòng)圖像的圖像數(shù)據(jù)，并且存儲(chǔ)所述運(yùn)動(dòng)圖像的圖像感測(cè)條件數(shù)據(jù)；選擇單元，從存儲(chǔ)在所述存儲(chǔ)單元中的構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀；合成單元，合成構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)并生成用于打印的圖像數(shù)據(jù)；以及確定單元，基于由所述選擇單元選擇的幀的圖像感測(cè)條件，確定要合成的幀的數(shù)量，所述合成單元合成所選擇的幀的圖像數(shù)據(jù)和所選擇的幀之前和之后感測(cè)的由所述確定單元確定的所述數(shù)量的幀的圖像數(shù)據(jù)。 在另一個(gè)配置中，本發(fā)明的圖像處理設(shè)備包括輸入單元，輸入構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述運(yùn)動(dòng)圖像的圖像感測(cè)條件數(shù)據(jù)；選擇單元，從所輸入的多個(gè)幀中選擇用于打印的幀；合成單元，合成構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)并生成用于打印的圖
4像數(shù)據(jù)；以及確定單元，基于由所述選擇單元選擇的幀的圖像感測(cè)條件，確定要合成的幀的數(shù)量，所述合成單元合成所選擇的幀的圖像數(shù)據(jù)和所選擇的幀之前和之后感測(cè)的由所述確定單元確定的所述數(shù)量的幀的圖像數(shù)據(jù)。 在另一個(gè)配置中，本發(fā)明的打印設(shè)備包括輸入單元，輸入構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述運(yùn)動(dòng)圖像的圖像感測(cè)條件數(shù)據(jù)；選擇單元，從所輸入的多個(gè)幀中選擇用于打印的幀；合成單元，合成構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)并生成用于打印的圖像數(shù)據(jù)；確定單元，基于由所述選擇單元選擇的幀的圖像感測(cè)條件，確定要合成的幀的數(shù)量；以及打印單元，打印由所述合成單元合成的用于打印的圖像數(shù)據(jù)，所述合成單元合成所選擇的幀的圖像數(shù)據(jù)和所選擇的幀之前和之后感測(cè)的由所述確定單元確定的所述數(shù)量的幀的圖像數(shù)據(jù)。 本發(fā)明的打印數(shù)據(jù)生成方法包括獲取步驟，獲取構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述運(yùn)動(dòng)圖像的圖像感測(cè)條件數(shù)據(jù)；選擇步驟，從所獲取的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀；合成步驟，合成構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)并生成用于打印的圖像數(shù)據(jù)；以及確定步驟，基于在所述選擇步驟中選擇的幀的圖像感測(cè)條件，確定要在所述合成步驟中合成的幀的數(shù)量，所述合成步驟合成所選擇的幀的圖像數(shù)據(jù)和所述幀之前和之后感測(cè)的在所述確定步驟中確定的所述數(shù)量的幀的圖像數(shù)據(jù)。 在另一個(gè)配置中，一種能夠感測(cè)運(yùn)動(dòng)圖像的圖像感測(cè)設(shè)備包括圖像感測(cè)單元，感測(cè)運(yùn)動(dòng)圖像；以及記錄單元，將由所述圖像感測(cè)單元新獲取的幀的圖像數(shù)據(jù)與所述新獲取的幀緊前面感測(cè)的幀的圖像數(shù)據(jù)之間的相關(guān)性連同所述新獲取的幀的圖像數(shù)據(jù)一起記錄在記錄介質(zhì)上。 在另一個(gè)和其它配置中，本發(fā)明的圖像處理設(shè)備包括輸入單元，輸入構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述多個(gè)幀的圖像數(shù)據(jù)之間的相關(guān)性；選擇單元，從所輸入的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀；提取單元，基于所述相關(guān)性，提取與所選擇的幀具有相關(guān)性的另一個(gè)幀；合成單元，合成所選擇的幀的圖像數(shù)據(jù)和由所述提取單元提取的幀的圖像數(shù)據(jù)，并生成用于打印的圖像數(shù)據(jù)；以及輸出單元，將由所述合成單元合成的用于打印的圖像數(shù)據(jù)輸出到打印設(shè)備。 在另一個(gè)和其它配置中，本發(fā)明的打印設(shè)備包括輸入單元，輸入構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和所述多個(gè)幀的圖像數(shù)據(jù)之間的相關(guān)性；選擇單元，從所輸入的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀；提取單元，基于所述相關(guān)性，提取與所選擇的幀具有相關(guān)性的另一個(gè)幀；合成單元，合成所選擇的幀的圖像數(shù)據(jù)和由所述提取單元提取的幀的圖像數(shù)據(jù)，并生成用于打印的圖像數(shù)據(jù)；以及打印單元，打印由所述合成單元合成的用于打印的圖像數(shù)據(jù)。 —種能夠感測(cè)運(yùn)動(dòng)圖像的圖像感測(cè)設(shè)備的控制方法包括圖像感測(cè)步驟，利用圖像感測(cè)單元感測(cè)運(yùn)動(dòng)圖像；以及記錄步驟，將在所述圖像感測(cè)步驟中新獲取的幀的圖像數(shù)據(jù)與所述新獲取的幀緊前面感測(cè)的幀的圖像數(shù)據(jù)之間的相關(guān)性連同所述新獲取的幀的圖像數(shù)據(jù)一起記錄在記錄介質(zhì)上。 在另一個(gè)和其它配置中，本發(fā)明的打印數(shù)據(jù)生成方法包括獲取步驟，獲取構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)和涉及所述多個(gè)幀的圖像數(shù)據(jù)之間的相關(guān)性的信息；選擇步驟，從所獲取的多個(gè)幀的圖像數(shù)據(jù)中選擇用于打印的幀；提取步驟，基于所述相關(guān)性，提取與所選擇的幀具有相關(guān)性的另一個(gè)幀；合成步驟，合成所選擇的幀的圖像數(shù)據(jù)和在所述提取步驟中提取的幀的圖像數(shù)據(jù)，并生成用于打印的圖像數(shù)據(jù)；以及輸出步驟，將在所述合成步驟中合成的用于打印的圖像數(shù)據(jù)輸出到打印單元。 通過下面的結(jié)合附圖的描述，本發(fā)明的其它特征和優(yōu)點(diǎn)將變得顯而易見，其中，在多個(gè)視圖中類似的參考字符表示類似或相同的部分。


附圖包括在本說明書中說明書的描述一起用于描述本發(fā)
圖1是示出本發(fā)明第一
圖2是示出本發(fā)明第一
圖3是示出本發(fā)明第一
圖4是示出本發(fā)明第一例的示圖； 圖5是示出本發(fā)明第例的示圖； 圖6是示出本發(fā)明第一
圖7是示出本發(fā)明第一
圖8是示出本發(fā)明第一
，并構(gòu)成本說明書的一部分，示出本發(fā)明的實(shí)施例，并與本明的基本原理，其中實(shí)施例的系統(tǒng)的配置的方框?qū)嵤├膱D像感測(cè)設(shè)備的運(yùn)動(dòng)圖像感測(cè)過程的流程圖；實(shí)施例的生成運(yùn)動(dòng)圖像打印用靜止圖像的過程的流程圖；實(shí)施例中的記錄在記錄介質(zhì)上的圖像文件的目錄結(jié)構(gòu)示
一實(shí)施例中的記錄在記錄介質(zhì)上的圖像文件的目錄結(jié)構(gòu)示
實(shí)施例的運(yùn)動(dòng)圖像幀圖像和相關(guān)性標(biāo)記的示意圖；實(shí)施例的用于打印的靜止圖像的示例的示圖；實(shí)施例的記錄在存儲(chǔ)介質(zhì)上的管理文件的結(jié)構(gòu)示例的示 圖9是示出本發(fā)明第一實(shí)施例的變型例的系統(tǒng)的配置的示圖； 圖10A是示出本發(fā)明第二實(shí)施例的系統(tǒng)的配置的方框圖； 圖10B是示出本發(fā)明第二實(shí)施例的系統(tǒng)的配置的方框圖； 圖11是示出本發(fā)明第二實(shí)施例中的以時(shí)間序列示出曝光變化的圖像感測(cè)條件數(shù)據(jù)的示例的示圖； 圖12是示出本發(fā)明第二實(shí)施例中的指定打印圖像的時(shí)刻和曝光變化之間的關(guān)系的示圖；以及 圖13是示出本發(fā)明第二實(shí)施例中的生成運(yùn)動(dòng)圖像打印用靜止圖像的過程的流程
具體實(shí)施例方式
現(xiàn)在將根據(jù)附圖詳細(xì)描述本發(fā)明的優(yōu)選實(shí)施例。
(第一實(shí)施例) 圖1是示出本發(fā)明第一實(shí)施例的系統(tǒng)的配置的方框圖，主要包括圖像感測(cè)設(shè)備1和打印設(shè)備3。 圖像感測(cè)設(shè)備1是能夠感測(cè)運(yùn)動(dòng)圖像的圖像感測(cè)設(shè)備，如數(shù)字靜態(tài)照相機(jī)、數(shù)字視頻攝像機(jī)等。在本發(fā)明第一實(shí)施例的圖像感測(cè)設(shè)備1中，參考標(biāo)號(hào)11表示包括聚焦透鏡、變焦透鏡等的透鏡，12表示配備有光圈功能的快門(在數(shù)字視頻攝像機(jī)100的情況下，表示光圈)，以及13表示由CCD傳感器、CMOS傳感器等所代表的圖像感測(cè)元件。
參考標(biāo)號(hào)14表示相關(guān)雙取樣/自動(dòng)增益控制電路(CDS/AGC) ， 15表示數(shù)字信號(hào)處 理電路，16表示具有能夠存儲(chǔ)至少兩個(gè)幀的數(shù)據(jù)的容量的幀存儲(chǔ)器。應(yīng)該指出的是，雖然 第一實(shí)施例被描述為如稍后所描述的，在從圖像感測(cè)元件13的單個(gè)輸出操作中讀出單個(gè) 幀的圖像信號(hào)，但是不言而喻，也可以通過隔行掃描輸出單個(gè)場(chǎng)的圖像信號(hào)。此外，不管它 是幀還是場(chǎng)，在單個(gè)輸出操作中從圖像感測(cè)元件13輸出的運(yùn)動(dòng)圖像在本實(shí)施例中都稱為 "幀"。 參考標(biāo)號(hào)17表示主微型計(jì)算機(jī)，該主微型計(jì)算機(jī)控制圖像感測(cè)設(shè)備1的總體操 作。參考標(biāo)號(hào)18表示圖像總線，19表示圖像編解碼器，20表示記錄單元，該記錄單元將由 圖像編解碼器19壓縮的圖像數(shù)據(jù)記錄到諸如存儲(chǔ)卡、數(shù)字視頻磁帶、DVD等之類的可移動(dòng) 外部記錄介質(zhì)29，并從外部記錄介質(zhì)29中讀出圖像數(shù)據(jù)。 參考標(biāo)號(hào)21表示諸如液晶顯示器(LCD)等之類的顯示單元，22表示控制顯示單元 21的顯示的顯示控制器。參考標(biāo)號(hào)23表示NTSC編碼器，24表示視頻輸出終端，而25表示 IEEE 1394標(biāo)準(zhǔn)、USB標(biāo)準(zhǔn)或其它這樣的標(biāo)準(zhǔn)通信接口 (I/F)。參考標(biāo)號(hào)26表示相關(guān)性確 定單元，其判斷圖像數(shù)據(jù)之間的相關(guān)性，而28表示由按鈕、開關(guān)、轉(zhuǎn)盤、觸摸面板等構(gòu)成的 操作單元。 打印設(shè)備3包括CPU 31、存儲(chǔ)器32、內(nèi)部總線38、諸如存儲(chǔ)卡、HDD等之類的存儲(chǔ) 介質(zhì)33、顯示操作面板和預(yù)覽屏幕的顯示單元35、以及控制顯示單元35的顯示的顯示控 制器34。此外，打印設(shè)備3包括IEEE 1394標(biāo)準(zhǔn)、USB標(biāo)準(zhǔn)或其它這樣的標(biāo)準(zhǔn)通信接口 (1/ F)37、打印機(jī)引擎36等。 圖像感測(cè)設(shè)備1和打印設(shè)備3通過通信電纜2連接，并傳輸打印數(shù)據(jù)，以及交換各 種控制數(shù)據(jù)。應(yīng)該指出的是，雖然在圖l所示的示例中，設(shè)備通過電纜連接，但是本發(fā)明不 受通信標(biāo)準(zhǔn)或連接形式的限制。例如，在通信接口是基于諸如紅外通信、藍(lán)牙標(biāo)準(zhǔn)等之類的 通信標(biāo)準(zhǔn)的無線通信裝置的情況下，可以以無線方式進(jìn)行通信。此外，圖像感測(cè)設(shè)備1的記 錄介質(zhì)29可以作為打印設(shè)備3的存儲(chǔ)介質(zhì)33安裝，并且經(jīng)由記錄介質(zhì)29交換打印數(shù)據(jù)和 各種類型的控制數(shù)據(jù)。 現(xiàn)在參照?qǐng)D2所示的流程圖，描述利用具有圖1所示配置的圖像感測(cè)設(shè)備1執(zhí)行 的運(yùn)動(dòng)圖像感測(cè)操作。 來自對(duì)象的光進(jìn)入透鏡11和快門12，撞擊圖像感測(cè)元件13，并被轉(zhuǎn)換為電信號(hào)。 此時(shí)，如果從操作單元28指示運(yùn)動(dòng)圖像記錄，則圖像感測(cè)元件13在清除已存儲(chǔ)電信號(hào)后的 預(yù)定時(shí)間段上存儲(chǔ)電信號(hào)之后，將單個(gè)幀的存儲(chǔ)電荷(圖像信號(hào))輸出到CDS/AGC 14。CDS/ AGC 14取樣保持如此獲得的圖像信號(hào)，并將它調(diào)節(jié)到適當(dāng)?shù)男盘?hào)電平。已經(jīng)由CDS/AGC 14 進(jìn)行了電平調(diào)節(jié)的圖像信號(hào)在數(shù)字信號(hào)處理電路15處經(jīng)受數(shù)字信號(hào)處理，生成的圖像數(shù) 據(jù)被存儲(chǔ)在幀存儲(chǔ)器16的預(yù)定區(qū)域中(步驟Sll)。 隨后，在步驟S12中，確定在幀存儲(chǔ)器16中是否存在之前幀的圖像數(shù)據(jù)。如果幀 存儲(chǔ)器16中沒有之前幀的圖像數(shù)據(jù)，那么，因?yàn)樵诓襟ESll中獲取的圖像數(shù)據(jù)是該運(yùn)動(dòng)圖 像感測(cè)操作中的第一圖像數(shù)據(jù)，所以處理返回到步驟Sll。如果在幀存儲(chǔ)器16中存在之前 幀的圖像數(shù)據(jù)(在步驟S12中"是")，那么，處理轉(zhuǎn)到步驟S13，并且相關(guān)性確定單元26從 幀存儲(chǔ)器l中6讀出此時(shí)獲取的圖像數(shù)據(jù)和之前幀的圖像數(shù)據(jù)，并確定相關(guān)性。應(yīng)該指出 的是，相關(guān)性確定單元26使用已知的方法確定相關(guān)性。
如果由相關(guān)性確定單元26執(zhí)行的確定結(jié)果表明相關(guān)性高于預(yù)定級(jí)別(在步驟S14 中為"是")，則相關(guān)性標(biāo)記被設(shè)置為Y(步驟S16)，如果低于預(yù)定級(jí)別(在步驟S14中為 "否")，則相關(guān)性標(biāo)記被設(shè)置為N(步驟S15)。 隨后，在步驟S17中，圖像編解碼器19從幀存儲(chǔ)器16中讀出此時(shí)獲取的圖像數(shù) 據(jù)，利用適合于運(yùn)動(dòng)圖像的方法對(duì)圖像數(shù)據(jù)進(jìn)行壓縮編碼，并將經(jīng)過壓縮編碼的圖像數(shù)據(jù) 傳輸?shù)接涗泦卧?0。在記錄單元20，經(jīng)過壓縮編碼的圖像數(shù)據(jù)被轉(zhuǎn)換為適合于記錄的格 式，并連同從相關(guān)性確定單元26中獲得的相關(guān)性標(biāo)記一起記錄到記錄介質(zhì)29上。
—旦完成了通過上文所描述的處理記錄一個(gè)幀的圖像數(shù)據(jù)，則在步驟S18中，確 定是否由操作單元28指示運(yùn)動(dòng)圖像感測(cè)結(jié)束，如果指示，則結(jié)束圖像感測(cè)處理。如果沒有 指示圖像感測(cè)結(jié)束，則處理返回到步驟S11，并且讀出下一個(gè)幀的圖像信號(hào)。應(yīng)該指出的是， 在下一個(gè)例程中，新輸出的圖像數(shù)據(jù)被存儲(chǔ)在幀存儲(chǔ)器16的這樣的區(qū)域中，在前一例程中 在該區(qū)域處存儲(chǔ)了之前幀的圖像數(shù)據(jù)。 如此，如上文所描述的，在本發(fā)明第一實(shí)施例中的運(yùn)動(dòng)圖像感測(cè)期間，每一個(gè)幀的 圖像數(shù)據(jù)和與之前幀的圖像數(shù)據(jù)的相關(guān)性標(biāo)記被記錄在記錄介質(zhì)29上。
圖4是示出記錄在記錄介質(zhì)29上的圖像文件的目錄結(jié)構(gòu)示例的示圖。圖4示出 這樣的狀態(tài)，在圖像感測(cè)設(shè)備1能夠形成靜止圖像的情況下，感測(cè)的靜止圖像和運(yùn)動(dòng)圖像 混合在一起存儲(chǔ)在同一記錄介質(zhì)29上。 圖5是示出記錄在記錄介質(zhì)29上的運(yùn)動(dòng)圖像文件的一般結(jié)構(gòu)的示意圖。如上文 參考圖2所描述的，當(dāng)預(yù)先研究各個(gè)運(yùn)動(dòng)圖像幀之間的相關(guān)性并將這些幀的圖像數(shù)據(jù)記錄 在運(yùn)動(dòng)圖像文件中時(shí)，圖像感測(cè)設(shè)備1將相關(guān)性標(biāo)記作為屬性信息添加到每一個(gè)幀中。
現(xiàn)在將參考圖3，描述當(dāng)打印上文所述記錄的運(yùn)動(dòng)圖像時(shí)執(zhí)行的、由圖像感測(cè)設(shè)備 1執(zhí)行的生成用于打印的靜止圖像的過程。 首先，等待用戶指定要打印的運(yùn)動(dòng)圖像的幀(步驟S21)。在如如圖4所示那樣的 圖像文件被保存在記錄介質(zhì)29上的情況下，用戶選擇他/她希望打印的運(yùn)動(dòng)圖像的圖像文 件，然后，在重放選擇的圖像文件的同時(shí)選擇要打印的幀。 例如，在運(yùn)動(dòng)圖像的幀圖像和相關(guān)性標(biāo)記被如圖6所示的那樣記錄的情況下，首 先，提取場(chǎng)景變化點(diǎn)，并在該幀停止運(yùn)動(dòng)圖像。這里，由于幀2和幀1之間的變化量大，所以 運(yùn)動(dòng)圖像在幀2處停止。此后，用戶利用顯示單元21檢查圖像的幀，同時(shí)從幀2開始向顯 示屏幕一次傳送一個(gè)幀，并使用操作單元28在所期望的幀指定打印。這里，例如，指定幀3 來進(jìn)行打印。 —旦指定了打印，從指定的運(yùn)動(dòng)圖像幀開始，檢查之前運(yùn)動(dòng)圖像幀的相關(guān)性標(biāo)記， 以查找連續(xù)相關(guān)幀的第一幀編號(hào)(相關(guān)開始幀)(步驟S22)。這里，首先，確認(rèn)指定幀的相 關(guān)性標(biāo)記是否是Y。如果相關(guān)性標(biāo)記是N，那么確定指定的幀是相關(guān)開始幀。相反，如果標(biāo) 記是Y，那么檢查指定幀之前的幀的相關(guān)性標(biāo)記。如果該之前的幀的相關(guān)性標(biāo)記是N，那么 確定該之前的幀是相關(guān)開始幀。相反，如果該之前的幀的相關(guān)性標(biāo)記是Y，那么檢查指定幀 兩幀之前的幀的相關(guān)性標(biāo)記。重復(fù)此相關(guān)性標(biāo)記確認(rèn)操作，直到到達(dá)其相關(guān)性標(biāo)記是N的 幀，并且確定其相關(guān)性標(biāo)記是N的幀是相關(guān)開始幀。然后，存儲(chǔ)相關(guān)開始幀(步驟S23)。在 圖6所示的示例中，幀2被存儲(chǔ)作為相關(guān)開始幀。 隨后，從指定的運(yùn)動(dòng)圖像，連續(xù)地檢查下列運(yùn)動(dòng)圖像幀的相關(guān)性標(biāo)記，以查找連續(xù)
8相關(guān)幀的最后一個(gè)幀編號(hào)(相關(guān)結(jié)束幀)(步驟S24)。這里，首先，確認(rèn)指定幀之后的幀的 相關(guān)性標(biāo)記是否是Y。如果相關(guān)性標(biāo)記是N，那么，確定指定幀是相關(guān)結(jié)束幀。相反，如果標(biāo) 記是Y，那么，檢查指定幀兩幀之后的幀的相關(guān)性標(biāo)記。如果指定幀兩幀之后的幀的相關(guān)性 標(biāo)記是N，那么，確定指定幀之后的幀是相關(guān)結(jié)束幀。相反，如果指定幀兩幀之后的幀的相關(guān) 性標(biāo)記是Y，那么，檢查指定幀三幀之后的幀的相關(guān)性標(biāo)記。重復(fù)此相關(guān)性標(biāo)記確認(rèn)操作，直 到到達(dá)其相關(guān)性標(biāo)記是N的幀，此時(shí)，確定其相關(guān)性標(biāo)記是N的幀之前的幀是相關(guān)結(jié)束幀。 那么，存儲(chǔ)相關(guān)結(jié)束幀(步驟S25)。在如圖6所示的示例中，幀5作為相關(guān)結(jié)束幀存儲(chǔ)。
通過上文所描述的過程，可以獲得與在步驟S21中指定用于打印的運(yùn)動(dòng)圖像幀具 有高相關(guān)性的幀的范圍。在圖6所示的示例中，對(duì)于指定用于打印的幀3，獲得幀2-5作為 相關(guān)性高的幀。 隨后，在步驟S26中，合成上文所描述的檢測(cè)到的范圍(在圖6中的示例中，幀 2-5)內(nèi)的所有幀的圖像數(shù)據(jù)，使得能夠生成用于打印所需運(yùn)動(dòng)圖像幀的靜止圖像。
圖7是示出通過合成圖6所示的高相關(guān)性的多個(gè)運(yùn)動(dòng)圖像幀(幀2-5)所產(chǎn)生的 用于打印的靜止圖像示例的示圖。運(yùn)動(dòng)圖像信號(hào)是以幀周期重復(fù)相似圖像信息的信號(hào)，并 且?guī)g的相關(guān)性極其強(qiáng)。相反，對(duì)于圖像信號(hào)中包括的噪聲分量沒有相關(guān)性。結(jié)果，作為 合成的圖像，例如，當(dāng)以幀為單位對(duì)圖像信號(hào)進(jìn)行時(shí)間平均時(shí)，在信號(hào)分量基本上保持原狀 的同時(shí)只有噪聲分量減小，由此使得噪聲能夠減少。 圖像感測(cè)設(shè)備1通過通信接口 25將以此方式生成的用于打印的靜止圖像傳送到 打印設(shè)備3。在打印設(shè)備3中，打印通過通信接口 1/F37接收到的用于打印的靜止圖像。
如此，如上文所描述的，根據(jù)本發(fā)明第一實(shí)施例，由于在記錄運(yùn)動(dòng)圖像期間將表示 相關(guān)性的信息連同幀的圖像數(shù)據(jù)一起記錄，所以當(dāng)進(jìn)行打印時(shí)，可以快速地提取相關(guān)的幀。 此外，合成提取的幀的圖像數(shù)據(jù)，以生成用于打印的靜止圖像，以高質(zhì)量地快速地打印運(yùn)動(dòng) 圖像場(chǎng)景。(第一實(shí)施例的變型例) 雖然在上面所描述的第一實(shí)施例中，描述了在圖像感測(cè)設(shè)備1處生成用于打印的 靜止圖像數(shù)據(jù)，但是，另選地，可以在打印設(shè)備3處生成用于打印的這樣的靜止圖像數(shù)據(jù)。 在這樣的情況下，可以由打印設(shè)備3執(zhí)行參考圖3描述的處理。 此外，參考圖3描述的處理可以在圖像感測(cè)設(shè)備1和打印設(shè)備3之間分配。例如， 在圖像感測(cè)設(shè)備1處，由用戶指定用于打印的幀可以作為管理文件保持在記錄介質(zhì)29上， 打印設(shè)備3基于該管理文件生成用于打印的靜止圖像。 圖8是示出記錄在記錄介質(zhì)29上的管理文件的結(jié)構(gòu)示例的示圖?？梢詫?duì)于單個(gè) 文件"運(yùn)動(dòng)圖像文件A"記錄多個(gè)被指定用于打印的幀。這樣做，使得能夠在執(zhí)行單個(gè)打印 時(shí)指定用于打印的多個(gè)用于打印的幀。此外，如圖8所示，可以向管理文件添加相關(guān)性標(biāo)記 信息。在這樣的情況下，因?yàn)橄嚓P(guān)性標(biāo)記不需要嵌入在運(yùn)動(dòng)圖像文件中，因此，它具有易于 安裝的優(yōu)點(diǎn)。 此外，也可以由圖像感測(cè)設(shè)備1和打印設(shè)備3之外的圖像處理設(shè)備執(zhí)行參考圖3 所描述的處理。圖9示出這樣的系統(tǒng)配置的示例。 在圖9中，在圖像感測(cè)設(shè)備1和打印設(shè)備3之間插入圖像處理設(shè)備的處理不同于 圖l所示的系統(tǒng)的配置。在此配置中，通過記錄介質(zhì)29或通信I/F向圖像處理設(shè)備4輸入
9由圖像感測(cè)設(shè)備1記錄的運(yùn)動(dòng)圖像文件，由圖像處理設(shè)備4執(zhí)行圖3所示的處理，并生成用
于打印的靜止圖像數(shù)據(jù)。然后，向打印設(shè)備3傳送用于打印的生成的靜止圖像數(shù)據(jù)。 此外，在上文所描述的第一實(shí)施例中，在指定用于打印之后，產(chǎn)生用于打印的靜止
圖像。相反，在圖像感測(cè)設(shè)備1中，可以使用在圖3所示的步驟S22-S26中描述的算法，與
運(yùn)動(dòng)圖像感測(cè)同時(shí)產(chǎn)生用于打印的靜止圖像，并將該用于打印的靜止圖像記錄在運(yùn)動(dòng)圖像
數(shù)據(jù)中或存儲(chǔ)介質(zhì)29中。在這樣的情況下，當(dāng)在打印設(shè)備3中指定用于打印的給定運(yùn)動(dòng)圖
像幀時(shí)，簡(jiǎn)單地檢索和打印使用該運(yùn)動(dòng)圖像幀生成的用于打印的靜止圖像，使得能夠縮短
從打印指定到打印的時(shí)間，并提高生產(chǎn)率。(第二實(shí)施例) 現(xiàn)在描述本發(fā)明第二實(shí)施例。 圖IOA和圖IOB是示出本發(fā)明第二實(shí)施例的系統(tǒng)的一般配置的方框圖，主要包括 圖像感測(cè)設(shè)備5 (圖10A)和打印設(shè)備8 (圖10B)。 在圖像感測(cè)設(shè)備5中，參考標(biāo)號(hào)51表示包括聚焦透鏡、變焦透鏡等的透鏡，而52 表示配備有光圈功能的快門(在數(shù)字視頻攝像機(jī)的情況下，為光圈)。參考標(biāo)號(hào)53表示由 CCD傳感器、CM0S傳感器等代表的圖像感測(cè)元件。參考標(biāo)號(hào)60表示控制圖像感測(cè)設(shè)備5的 總體操作的控制器。參考標(biāo)號(hào)61表示AF處理器，該AF處理器從控制器60接收指令，并且 驅(qū)動(dòng)透鏡51的聚焦透鏡，并執(zhí)行AF處理，參考標(biāo)號(hào)62表示AE處理器，該AE處理器從控制 器60接收指令，并且控制光圈和快門速度，并執(zhí)行AE處理。 參考標(biāo)號(hào)54是A/D轉(zhuǎn)換器，該A/D轉(zhuǎn)換器將從圖像感測(cè)元件53輸出的模擬圖像 信號(hào)轉(zhuǎn)換為數(shù)字圖像信號(hào)，55是圖像處理器，該圖像處理器對(duì)由A/D轉(zhuǎn)換器54轉(zhuǎn)換的數(shù)字 圖像信號(hào)執(zhí)行特定像素插入處理和顏色轉(zhuǎn)換處理。參考標(biāo)號(hào)56表示格式轉(zhuǎn)換器，該格式轉(zhuǎn) 換器將由圖像處理器55處理過的圖像數(shù)據(jù)轉(zhuǎn)換為適合于進(jìn)行記錄的格式，如MPEG或JPEG 等。參考標(biāo)號(hào)58表示具有用于臨時(shí)存儲(chǔ)圖像數(shù)據(jù)的緩沖功能的存儲(chǔ)器，57表示圖像記錄單 元，該圖像記錄單元將由格式轉(zhuǎn)換器56進(jìn)行了格式轉(zhuǎn)換的圖像數(shù)據(jù)記錄在緩沖區(qū)58中。
參考標(biāo)號(hào)63表示閃光單元，64表示EF (Electric Flash,電子閃光)處理器，59表 示由按鈕和開關(guān)、觸摸面板、轉(zhuǎn)盤等構(gòu)成的操作單元。參考標(biāo)號(hào)65表示諸如LCD之類的顯 示單元，66表示用于將圖像感測(cè)設(shè)備5連接到另一個(gè)設(shè)備的外部連接器。
參考標(biāo)號(hào)67表示運(yùn)動(dòng)圖像感測(cè)條件數(shù)據(jù)產(chǎn)生單元，該單元在運(yùn)動(dòng)圖像感測(cè)期間 生成圖像感測(cè)條件數(shù)據(jù)。稍后描述圖像感測(cè)條件數(shù)據(jù)。參考標(biāo)號(hào)72表示圖像感測(cè)條件數(shù) 據(jù)傳送器單元，該單元向打印設(shè)備8傳送圖像感測(cè)條件數(shù)據(jù)。 參考標(biāo)號(hào)68表示運(yùn)動(dòng)圖像擴(kuò)展單元，該單元擴(kuò)展臨時(shí)存儲(chǔ)在緩沖區(qū)58中的預(yù)定 格式的圖像數(shù)據(jù)，69表示打印圖像確定單元，該單元確定要打印的圖像。參考標(biāo)號(hào)70表示 圖像壓縮單元，該單元再一次壓縮由打印圖像確定單元69確定的要打印的圖像數(shù)據(jù)(靜止 圖像)，71表示將由圖像壓縮單元70壓縮的圖像數(shù)據(jù)傳送到打印設(shè)備8的圖像傳送器。
在打印設(shè)備8中，參考標(biāo)號(hào)81和85分別表示圖像接收器和圖像感測(cè)條件數(shù)據(jù)接 收器，它們分別接收從圖像感測(cè)設(shè)備5傳送的圖像數(shù)據(jù)和圖像感測(cè)條件數(shù)據(jù)。參考標(biāo)號(hào)82 表示臨時(shí)存儲(chǔ)經(jīng)由圖像接收器81接收的圖像數(shù)據(jù)的圖像緩沖區(qū)，而83表示圖像擴(kuò)展單元， 該圖像擴(kuò)展單元擴(kuò)展存儲(chǔ)在圖像緩沖區(qū)82中的圖像數(shù)據(jù)。參考標(biāo)號(hào)86表示之前/之后圖 像曝光值計(jì)算器，該計(jì)算器計(jì)算已經(jīng)擴(kuò)展的多個(gè)圖像數(shù)據(jù)的曝光值。參考標(biāo)號(hào)84表示打印機(jī)校正值計(jì)算器，該計(jì)算器使用經(jīng)由圖像感測(cè)條件數(shù)據(jù)接收器85接收的圖像感測(cè)條件數(shù) 據(jù)來確定在打印中使用的校正值，而87表示打印機(jī)圖像處理器，該打印機(jī)圖像處理器使用 確定的校正值對(duì)圖像數(shù)據(jù)執(zhí)行校正處理。參考標(biāo)號(hào)88表示打印機(jī)控制器，該打印機(jī)控制器 響應(yīng)于圖像感測(cè)設(shè)備5的控制器60的控制，對(duì)打印機(jī)進(jìn)行控制，而89表示打印單元，該打 印單元打印由打印機(jī)圖像處理器87處理的圖像。 現(xiàn)在參考圖10A和圖IOB，描述圖像感測(cè)設(shè)備5中的運(yùn)動(dòng)圖像感測(cè)期間的處理。
當(dāng)用戶首先使用操作單元59指示運(yùn)動(dòng)圖像感測(cè)時(shí)，控制器60分別向AF處理器61 和AE處理器62發(fā)出AF和AE處理指令，移動(dòng)透鏡51和配備有光圈功能的快門52，并執(zhí)行 適當(dāng)?shù)腁F和AE處理。通過透鏡51和快門52入射的光撞擊圖像感測(cè)元件53并被轉(zhuǎn)換為 模擬圖像信號(hào)，進(jìn)一步被A/D轉(zhuǎn)換器54轉(zhuǎn)換為數(shù)字圖像信號(hào)，并被向圖像處理器55傳送。 以預(yù)定周期重復(fù)前面的處理，直到從操作單元59輸入運(yùn)動(dòng)圖像感測(cè)結(jié)束指令。在運(yùn)動(dòng)圖像 感測(cè)結(jié)束指令之后，由格式轉(zhuǎn)換器56確定并產(chǎn)生從圖像處理器55傳送的數(shù)據(jù)的格式，并且 圖像記錄單元57將圖像文件保存在緩沖區(qū)58中。 此外，與運(yùn)動(dòng)圖像數(shù)據(jù)一起，還保存運(yùn)動(dòng)圖像感測(cè)期間的圖像感測(cè)條件數(shù)據(jù)。此 外，作為產(chǎn)生縮略圖文件(獨(dú)立于圖像文件保存)，描述第二實(shí)施例。由運(yùn)動(dòng)圖像感測(cè)條件 數(shù)據(jù)產(chǎn)生單元67產(chǎn)生的圖像感測(cè)條件數(shù)據(jù)被附加到縮略圖文件，并被存儲(chǔ)。
作為縮略圖文件中描述的圖像感測(cè)條件數(shù)據(jù)，例如有諸如光圈、快門速度、ISO 感光度、Bv值、曝光校正值、閃光量、圖像感測(cè)場(chǎng)景信息、光度加權(quán)信息等之類的曝光條件； 來自角速度傳感器的攝像機(jī)抖動(dòng)信息；以及透鏡信息。此外，為了實(shí)現(xiàn)運(yùn)動(dòng)圖像感測(cè)，第二 實(shí)施例還提供了運(yùn)動(dòng)圖像感測(cè)期間參數(shù)隨時(shí)間的變化量的圖像感測(cè)條件數(shù)據(jù)。例如，雖然 在運(yùn)動(dòng)圖像感測(cè)期間可能發(fā)生視角變化，但是，在這樣的情況下，還有曝光變化，而這樣的 變化數(shù)據(jù)也包括在圖像感測(cè)條件數(shù)據(jù)中。然而，因?yàn)榇嬖谶@樣的風(fēng)險(xiǎn)，B卩，如果要存儲(chǔ)所有 幀圖像的曝光信息，則數(shù)據(jù)量會(huì)變得非常大，所以例如，存儲(chǔ)曝光變化的開始時(shí)間和結(jié)束時(shí) 間時(shí)的光圈Av、快門速度Tv以及增益Gain。 作為圖像感測(cè)條件數(shù)據(jù)的示例，圖11是示出亮度Bv、光圈Av、快門速度Tv，以及增 益Gain的隨著時(shí)間的變化的關(guān)系，作為以時(shí)間序列顯示曝光變化的參數(shù)的示圖。在圖11 的情況下，第一曝光變化開始時(shí)間是tll，第一曝光變化結(jié)束時(shí)間是t13。類似地，第二曝光 變化開始時(shí)間是tl4，第二曝光變化結(jié)束時(shí)間是t16。相應(yīng)地，曝光穩(wěn)定區(qū)域是tl3-tl4和 tl6-tl7。此信息在運(yùn)動(dòng)圖像打印輸出期間使用。 此外，涉及視角變化和對(duì)象運(yùn)動(dòng)的變化開始時(shí)間、變化結(jié)束時(shí)間、變化量以及矢 量，也作為以時(shí)間序列顯示變化的參數(shù)來記錄。使用了涉及視角變化的角速度傳感器和針 對(duì)對(duì)象運(yùn)動(dòng)的電子防振等的使用的技術(shù)。 此外，有關(guān)更換透鏡(像單透鏡反光式照相機(jī)中的更換透鏡)的信息被包括在由 上文所描述的運(yùn)動(dòng)圖像感測(cè)條件數(shù)據(jù)產(chǎn)生單元67產(chǎn)生的攝像機(jī)特性數(shù)據(jù)中。除了諸如名 稱/類型/設(shè)計(jì)值/變焦位置/F值等之類的圖像感測(cè)條件之外，該透鏡信息的內(nèi)容包括， 諸如環(huán)境光量損耗數(shù)據(jù)/色差信息之類的特性數(shù)據(jù)。在可分離的更換透鏡的情況下，當(dāng)直 接連接時(shí)，透鏡本身保存的信息可以通過攝像機(jī)傳輸?shù)酱蛴C(jī)側(cè)。 諸如上文所描述的曝光變化、視角變化、對(duì)象運(yùn)動(dòng)等之類的圖像感測(cè)條件數(shù)據(jù)被 連續(xù)地記錄在縮略像中，在圖像感測(cè)結(jié)束時(shí)連同運(yùn)動(dòng)圖像數(shù)據(jù)一起被格式轉(zhuǎn)換器56
11轉(zhuǎn)換，并被圖像記錄單元57記錄在緩沖區(qū)58中。 應(yīng)該指出的是，雖然上面的示例是作為將曝光變化數(shù)據(jù)附加到縮略圖文件(該文 件單獨(dú)地附加到運(yùn)動(dòng)圖像數(shù)據(jù))描述的，但是，本發(fā)明不限于此，運(yùn)動(dòng)圖像的每一個(gè)瞬間的 曝光數(shù)據(jù)可以記錄在運(yùn)動(dòng)圖像數(shù)據(jù)本身中。 現(xiàn)在將參照?qǐng)D12和圖13，描述當(dāng)打印運(yùn)動(dòng)圖像時(shí)的處理。 圖12是示出當(dāng)對(duì)于發(fā)生了如圖ll所示的曝光變化的圖像執(zhí)行打印指令時(shí)的時(shí)序 的示圖。圖13是示出運(yùn)動(dòng)圖像打印過程的流程圖。圖12所示的示例示出tl3-tl4之間的 運(yùn)動(dòng)圖像幀(指定的圖像a)、tl4-tl5之間的運(yùn)動(dòng)圖像幀(指定的圖像b)，以及tl6-tl7之 間的運(yùn)動(dòng)圖像幀(指定的圖像c)被指定用于打印的情況。 首先，當(dāng)用戶在顯示單元65上重放運(yùn)動(dòng)圖像文件并使用打印圖像確定單元69從 感測(cè)的圖像中指定他/她希望打印的圖像幀時(shí)，由打印機(jī)圖像處理器87開始圖13所示的 處理。 在步驟S31中，確定是否將圖像感測(cè)條件數(shù)據(jù)附加到被指定用于打印的運(yùn)動(dòng)圖像 幀中。作為圖像感測(cè)條件數(shù)據(jù)，如上文所描述的，有諸如光圈(Av)、快門速度(Tv)、增益 (Gain)等之類的曝光變化，以及視角和對(duì)象運(yùn)動(dòng)。然而，這里，作為曝光變化，描述圖像感測(cè) 條件數(shù)據(jù)。 當(dāng)沒有圖像感測(cè)條件數(shù)據(jù)時(shí)，處理轉(zhuǎn)到步驟S35，選擇被指定用于打印的運(yùn)動(dòng)圖像 幀之前和之后的運(yùn)動(dòng)圖像幀(總共三個(gè)幀)，并且處理轉(zhuǎn)到步驟S40。 當(dāng)有圖像感測(cè)條件數(shù)據(jù)時(shí)，確定被指定用于打印的運(yùn)動(dòng)圖像幀是否是曝光穩(wěn)定性 區(qū)域幀(步驟S32)。在如圖12所示的示例中，指定的圖像a和指定的圖像c是曝光穩(wěn)定性 區(qū)域中的被指定用于打印的運(yùn)動(dòng)圖像幀。當(dāng)在曝光穩(wěn)定性區(qū)域中沒有被指定用于打印的運(yùn) 動(dòng)圖像幀時(shí)，處理轉(zhuǎn)到步驟S36，只選擇被指定用于打印的運(yùn)動(dòng)圖像幀，并且處理轉(zhuǎn)到步驟 S40。 在步驟S32中，當(dāng)被指定用于打印的運(yùn)動(dòng)圖像幀是位于曝光穩(wěn)定性區(qū)域中的幀 時(shí)，在步驟S33中，確定快門速度(Tv)是否低于預(yù)定值(TvTH)。 一般而言，快門速度越慢， 攝像機(jī)抖動(dòng)越大，如此，如果Tv < TvTH，則處理轉(zhuǎn)到步驟S37，選擇被指定用于打印的運(yùn)動(dòng) 圖像幀分別之前和之后三個(gè)幀(總共七個(gè)幀)，并且處理轉(zhuǎn)到步驟S40。
如果Tv > TvTH，則處理轉(zhuǎn)到步驟S34，并確定增益(Gain)是否大于閾值 (GainTH)。由于增益越大，噪聲越大，優(yōu)選情況下，增大在稍后所描述的圖像合成中所使用 的幀的數(shù)量，并去除噪聲。因此，如果Gain > GainTH，則處理轉(zhuǎn)到步驟S39，選擇被指定用 于打印的運(yùn)動(dòng)圖像幀分別之前和之后的五個(gè)幀(總共ll個(gè)幀)。如果Gain《GainTH，在 步驟S38中，選擇分別之前和之后的三個(gè)幀(總共七個(gè)幀)，并且處理轉(zhuǎn)到步驟S40。
應(yīng)該指出的是，上文所描述的步驟S35-S39中選擇的幀的數(shù)量是其一個(gè)示例，但 是，本發(fā)明不限于這些數(shù)量的幀。此外，用于確定要選擇的幀的數(shù)量的參數(shù)不僅是TV和 Gain，另選地，可以使用光圈、視角變化量、對(duì)象運(yùn)動(dòng)量，或圖像感測(cè)條件數(shù)據(jù)中的任何其它 信息。 在步驟S40中，在步驟S35-S39中的任何一個(gè)步驟中選擇的運(yùn)動(dòng)圖像幀中，只選擇 曝光穩(wěn)定性區(qū)域中的圖像，并且在步驟S41中，通過平均進(jìn)行合成。然后，經(jīng)由圖像傳送器 71傳送合成的圖像數(shù)據(jù)，并經(jīng)由圖像感測(cè)條件數(shù)據(jù)傳送器單元72向打印設(shè)備8傳送圖像感測(cè)條件數(shù)據(jù)(步驟S42)。應(yīng)該指出的是，打印設(shè)備8分別通過圖像接收器81和圖像感測(cè)條 件數(shù)據(jù)接收器85接收傳送的圖像數(shù)據(jù)和圖像感測(cè)條件數(shù)據(jù)，并進(jìn)行打印。
此外，在一次性地全部指定所指定的圖像a-c(多個(gè)圖像)的情況下，一次只保留 指定的幀圖像的時(shí)間，然后，在打印處理期間一次性地全部進(jìn)行處理。當(dāng)指定時(shí)間時(shí)，由圖 像記錄單元57調(diào)用重放運(yùn)動(dòng)圖像文件的縮略像，從記錄的圖像感測(cè)條件數(shù)據(jù)中使要 打印的指定的圖像a-c的曝光變化信息和指定的時(shí)間相關(guān)，確定要在合成中使用的圖像 (幀)的數(shù)量。
(變型例) 在上文所描述的第二實(shí)施例中，描述了這樣的情況一旦在圖13所示的步驟 S35-S40中確定要傳送到打印設(shè)備8的幀，在圖像感測(cè)設(shè)備5側(cè)合成相關(guān)的運(yùn)動(dòng)圖像幀，并 將用于打印的合成的靜止圖像傳送到打印設(shè)備8。 然而，可以在打印設(shè)備8中執(zhí)行合成確定的運(yùn)動(dòng)圖像幀的過程，在這種情況下，要 被傳送到在圖5所示的步驟S35-S40中確定的打印設(shè)備8的幀被按原樣傳送到打印設(shè)備8 并且在那里執(zhí)行合成過程。 雖然在上文所描述的第二實(shí)施例中，當(dāng)攝像機(jī)和打印機(jī)彼此直接連接時(shí)，由用戶 設(shè)置圖像校正處理，但是在PC和打印機(jī)之間存在連接的配置也在本發(fā)明的范圍內(nèi)。
(其它實(shí)施例) 也可以按如下方式實(shí)現(xiàn)本發(fā)明的目的。首先，將在其上面記錄有實(shí)現(xiàn)上文所描述 的實(shí)施例的功能的軟件程序代碼的存儲(chǔ)介質(zhì)(或記錄介質(zhì))提供到系統(tǒng)或設(shè)備。然后，系 統(tǒng)或設(shè)備的計(jì)算機(jī)(或CPU、MPU等)讀取并執(zhí)行存儲(chǔ)在存儲(chǔ)介質(zhì)上的程序代碼。在此情況 下，從存儲(chǔ)介質(zhì)中讀出的程序代碼本身實(shí)現(xiàn)上文所描述的實(shí)施例的功能，并且存儲(chǔ)程序代 碼的存儲(chǔ)介質(zhì)構(gòu)成了本發(fā)明。 除了通過由計(jì)算機(jī)執(zhí)行讀取的程序來實(shí)現(xiàn)根據(jù)實(shí)施例的如前所述的功能的情 況，在計(jì)算機(jī)上運(yùn)行的操作系統(tǒng)(OS)等可以執(zhí)行實(shí)際處理的全部或一部分，以便可以通 過此處理實(shí)現(xiàn)前述實(shí)施例的功能?？梢杂糜谔峁┏绦虼a的存儲(chǔ)介質(zhì)的示例有軟盤、硬 盤、R0M、 RAM、磁帶、非易失性存儲(chǔ)卡、CD-R0M、 CD-R、 DVD、光盤、磁光盤以及M0。此外，諸如 LAN(局域網(wǎng))或WAN(廣域網(wǎng))之類的計(jì)算機(jī)網(wǎng)絡(luò)可以用于提供程序代碼。
本發(fā)明不限于上文所描述的實(shí)施例，可以在不偏離本發(fā)明的精神和范圍的情況 下，對(duì)本發(fā)明進(jìn)行許多修改和變型。因此，為了公開本發(fā)明的范圍，附加以下權(quán)利要求。
本申請(qǐng)要求于2006年6月26日提出的日本專利申請(qǐng)No. 2006-175786的優(yōu)先權(quán)， 通過引用將該申請(qǐng)全部并入本文。
權(quán)利要求
一種能夠感測(cè)運(yùn)動(dòng)圖像的圖像感測(cè)設(shè)備，包括圖像感測(cè)單元，感測(cè)運(yùn)動(dòng)圖像；以及記錄單元，將由所述圖像感測(cè)單元新獲取的幀的圖像數(shù)據(jù)與所述新獲取的幀緊前面感測(cè)的幀的圖像數(shù)據(jù)之間的相關(guān)性連同所述新獲取的幀的圖像數(shù)據(jù)一起記錄在記錄介質(zhì)上。
2. 根據(jù)權(quán)利要求1所述的圖像感測(cè)設(shè)備，進(jìn)一步包括生成單元，所述生成單元基于所述相關(guān)性生成表示互相關(guān)的幀的信息，其中，所述記錄單元將所生成的表示互相關(guān)的幀的信息記錄在所述記錄介質(zhì)上。
3. 根據(jù)權(quán)利要求1所述的圖像感測(cè)設(shè)備，進(jìn)一步包括合成單元，所述合成單元基于所述相關(guān)性合成互相關(guān)的幀的圖像數(shù)據(jù)，并生成合成的圖像數(shù)據(jù)，其中，所述記錄單元將所述合成的圖像數(shù)據(jù)記錄在所述記錄介質(zhì)上。
4. 根據(jù)權(quán)利要求1所述的圖像感測(cè)設(shè)備，進(jìn)一步包括選擇單元，從記錄在所述記錄介質(zhì)上的運(yùn)動(dòng)圖像的多個(gè)幀中選擇要打印的幀；提取單元，基于所述相關(guān)性，提取與所選擇的幀具有相關(guān)性的幀；合成單元，合成所選擇的幀的圖像數(shù)據(jù)和由所述提取單元提取的幀的圖像數(shù)據(jù)，并生成合成的圖像；以及輸出單元，將由所述合成單元合成的用于打印的圖像數(shù)據(jù)輸出到打印設(shè)備。
5. —種能夠感測(cè)運(yùn)動(dòng)圖像的圖像感測(cè)設(shè)備的控制方法，包括圖像感測(cè)步驟，利用圖像感測(cè)單元感測(cè)運(yùn)動(dòng)圖像；以及記錄步驟，將在所述圖像感測(cè)步驟中新獲取的幀的圖像數(shù)據(jù)與所述新獲取的幀緊前面感測(cè)的幀的圖像數(shù)據(jù)之間的相關(guān)性連同所述新獲取的幀的圖像數(shù)據(jù)一起記錄在記錄介質(zhì)上。
6. 根據(jù)權(quán)利要求5所述的控制方法，進(jìn)一步包括生成步驟，所述生成步驟基于所述相關(guān)性生成表示互相關(guān)的幀的信息，其中，所述記錄步驟將所生成的表示互相關(guān)的幀的信息記錄在所述記錄介質(zhì)上。
7. 根據(jù)權(quán)利要求5所述的控制方法，進(jìn)一步包括合成步驟，所述合成步驟基于所述相關(guān)性合成互相關(guān)的幀的圖像數(shù)據(jù)，并生成合成的圖像數(shù)據(jù)，其中，所述記錄步驟將所述合成的圖像數(shù)據(jù)記錄在所述記錄介質(zhì)上。
全文摘要
本發(fā)明公開一種圖像感測(cè)設(shè)備及其控制方法。所述感測(cè)運(yùn)動(dòng)圖像的圖像感測(cè)設(shè)備包括圖像感測(cè)單元，感測(cè)運(yùn)動(dòng)圖像；以及記錄單元，將由所述圖像感測(cè)單元新獲取的幀的圖像數(shù)據(jù)與所述新獲取的幀緊前面感測(cè)的幀的圖像數(shù)據(jù)之間的相關(guān)性連同所述新獲取的幀的圖像數(shù)據(jù)一起記錄在記錄介質(zhì)上。
文檔編號(hào)H04N5/77GK101754033SQ20091026198
公開日2010年6月23日 申請(qǐng)日期2007年6月13日 優(yōu)先權(quán)日2006年6月26日
發(fā)明者宮崎康嘉, 高木淳 申請(qǐng)人:佳能株式會(huì)社