攝像裝置及其控制方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種攝像裝置及其控制方法。
【背景技術(shù)】
[0002]近來(lái)，隨著通過(guò)互聯(lián)網(wǎng)共享拍攝的動(dòng)態(tài)圖像的動(dòng)態(tài)圖像共享站點(diǎn)的發(fā)展，用戶越來(lái)越多地希望拍有創(chuàng)意且有趣的動(dòng)態(tài)圖像。然而，對(duì)于不習(xí)慣拍攝動(dòng)態(tài)圖像的典型用戶，拍攝此類(lèi)有創(chuàng)意且有趣的動(dòng)態(tài)圖像并不容易。此外，諸如對(duì)動(dòng)態(tài)圖像添加特效、將動(dòng)態(tài)圖像組合到一起等的編輯作業(yè)對(duì)此類(lèi)典型用戶來(lái)說(shuō)是復(fù)雜的，因此，在創(chuàng)建有趣的動(dòng)態(tài)圖像時(shí)會(huì)產(chǎn)生問(wèn)題。
[0003]日本特開(kāi)第2002-218384號(hào)公報(bào)被認(rèn)為是使將動(dòng)態(tài)圖像組合到一起更容易的技術(shù)。根據(jù)日本特開(kāi)第2002-218384號(hào)公報(bào)公開(kāi)的數(shù)字照相機(jī)，當(dāng)使用模式設(shè)置撥盤(pán)設(shè)置連續(xù)記錄模式時(shí)，將拍攝的動(dòng)態(tài)圖像追加記錄在記錄有其他動(dòng)態(tài)圖像的現(xiàn)存文件中。
[0004]同時(shí)，主要作為智能手機(jī)應(yīng)用(app)，也正在提出使用戶能夠通過(guò)簡(jiǎn)單的操作來(lái)拍攝添加了特效的動(dòng)態(tài)圖像的功能。例如，提出了用于對(duì)動(dòng)態(tài)圖像添加特殊顏色/色調(diào)轉(zhuǎn)換濾波效果的功能、用于多次拍攝預(yù)定短長(zhǎng)度動(dòng)態(tài)圖像，然后自動(dòng)將動(dòng)態(tài)圖像組合到一起的功能等。
[0005]此外，提出了如下技術(shù):通過(guò)基于在拍攝動(dòng)態(tài)圖像時(shí)照相機(jī)設(shè)備中的加速度，在調(diào)整動(dòng)態(tài)圖像的幀速率的同時(shí)記錄動(dòng)態(tài)圖像，而使動(dòng)態(tài)圖像的回放速度變化(參見(jiàn)日本特開(kāi)第 2006-262135 號(hào)公報(bào))。
[0006]當(dāng)連續(xù)回放組合到一起的多個(gè)動(dòng)態(tài)圖像時(shí)，用戶將連續(xù)地注意到對(duì)各動(dòng)態(tài)圖像添加的任何特效。還能夠認(rèn)為從動(dòng)態(tài)圖像到動(dòng)態(tài)圖像的特效間的關(guān)系會(huì)影響生成的動(dòng)態(tài)圖像的有趣程度，而傳統(tǒng)技術(shù)并未考慮這點(diǎn)。同時(shí)，當(dāng)多種特效可用時(shí)，確定分別適合于各動(dòng)態(tài)圖像的特效并基于確定結(jié)果應(yīng)用那些特效會(huì)增加處理負(fù)荷。
[0007]針對(duì)用于使動(dòng)態(tài)圖像的回放速度變化的技術(shù)，日本特開(kāi)第2006-262135號(hào)公報(bào)中公開(kāi)的技術(shù)僅考慮了照相機(jī)設(shè)備的加速度，而并未考慮被攝體的運(yùn)動(dòng)、這樣的被攝體中的主要被攝體的類(lèi)型等。

【發(fā)明內(nèi)容】

[0008]鑒于這種情況，本發(fā)明提供一種根據(jù)特效的類(lèi)型控制是否對(duì)多個(gè)動(dòng)態(tài)圖像統(tǒng)一添加特效的技術(shù)。本發(fā)明還提供一種使得能夠基于通常不被考慮的條件來(lái)控制記錄的動(dòng)態(tài)圖像的回放速度的技術(shù)。
[0009]根據(jù)本發(fā)明的第一方面，提供一種攝像裝置，所述攝像裝置包括:攝像單元，其被配置為拍攝多個(gè)動(dòng)態(tài)圖像；控制單元，其被配置為向所述多個(gè)動(dòng)態(tài)圖像中的每個(gè)添加所述多個(gè)動(dòng)態(tài)圖像的全部所通用的第一特效，而向所述多個(gè)動(dòng)態(tài)圖像中的一個(gè)或更多個(gè)動(dòng)態(tài)圖像的每個(gè)添加基于逐個(gè)動(dòng)態(tài)圖像確定的第二特效；以及生成單元，其被配置為生成通過(guò)所述控制單元添加了特效的所述多個(gè)動(dòng)態(tài)圖像構(gòu)成的組合動(dòng)態(tài)圖像。
[0010]根據(jù)本發(fā)明的第二方面，提供一種攝像裝置的控制方法，所述攝像裝置的控制方法包括:拍攝步驟，其拍攝多個(gè)動(dòng)態(tài)圖像；控制步驟，其向所述多個(gè)動(dòng)態(tài)圖像中的每個(gè)添加所述多個(gè)動(dòng)態(tài)圖像的全部所通用的第一特效，并向所述多個(gè)動(dòng)態(tài)圖像中的一個(gè)或更多個(gè)動(dòng)態(tài)圖像的每個(gè)添加基于逐個(gè)動(dòng)態(tài)圖像確定的第二特效；以及生成步驟，其生成由在所述控制步驟中添加了特效的所述多個(gè)動(dòng)態(tài)圖像構(gòu)成的組合動(dòng)態(tài)圖像。
[0011]根據(jù)本發(fā)明的第三方面，提供一種攝像裝置，所述攝像裝置包括:攝像單元，其配置為拍攝動(dòng)態(tài)圖像；記錄單元，其被配置為記錄所述動(dòng)態(tài)圖像；確定單元，其被配置為基于所述動(dòng)態(tài)圖像中的被攝體的運(yùn)動(dòng)及所述被攝體中的主要被攝體的類(lèi)型中的至少一者確定所述動(dòng)態(tài)圖像的回放速度；以及控制單元，其被配置為控制所述攝像單元及所述記錄單元，以便記錄以通過(guò)所述確定單元確定的回放速度回放的動(dòng)態(tài)圖像。
[0012]根據(jù)本發(fā)明的第四方面，提供一種攝像裝置的控制方法，所述攝像裝置的控制方法包括:拍攝步驟，其拍攝動(dòng)態(tài)圖像；記錄步驟，其記錄所述動(dòng)態(tài)圖像；確定步驟，其基于所述動(dòng)態(tài)圖像中被攝體的運(yùn)動(dòng)及所述被攝體中的主要被攝體的類(lèi)型確定所述動(dòng)態(tài)圖像的回放速度；以及控制步驟，其控制所述拍攝步驟及所述記錄步驟，以便記錄所述確定步驟中確定的以所述回放速度回放的動(dòng)態(tài)圖像。
[0013]根據(jù)以下參照附圖對(duì)示例性實(shí)施例的詳細(xì)描述，本發(fā)明的其他特征將變得清楚。
【附圖說(shuō)明】
[0014]圖1是例示根據(jù)第一實(shí)施例的攝像裝置100的配置的框圖。
[0015]圖2是例示包含攝像裝置100生成的多章的組合動(dòng)態(tài)圖像文件的概念圖。
[0016]圖3是例示模板合成效果的示例圖。
[0017]圖4A至圖4C是例示可變幀率效果的示例圖。
[0018]圖5是例示各種特效的分類(lèi)的圖。
[0019]圖6是例示攝像裝置100執(zhí)行的動(dòng)態(tài)圖像拍攝處理的流程圖。
[0020]圖7是例示用于確定圖6的步驟S603中的特效處理A組的處理的詳情的流程圖。
[0021]圖8是例示用于圖7的步驟S702中的特效處理A組的選擇算法的詳情的流程圖。
[0022]圖9是例示用于特效處理A組的選擇算法中的評(píng)價(jià)值的更新的概念圖。
[0023]圖10是例示用于確定圖6的步驟S604中的特效處理B組的可變幀率效果的處理的詳情的流程圖。
[0024]圖11A至圖11C是例示用于檢測(cè)被攝體的運(yùn)動(dòng)的方法的概念圖。
[0025]圖12是例示運(yùn)動(dòng)確定區(qū)域的概念圖。
[0026]圖13是例示用于確定針對(duì)可變幀率效果的權(quán)重模式的方法的概念圖。
[0027]圖14是例示用于可變幀率效果的權(quán)重模式的示例圖。
[0028]圖15是例示圖10的步驟S1007中執(zhí)行的處理的詳情的流程圖。
[0029]圖16是例示用于確定可變幀率效果的處理的其他示例圖。
[0030]圖17是例示用于確定可變幀率效果的處理的另一其他示例圖。
[0031]圖18是例示添加了各種特效的組合動(dòng)態(tài)圖像文件的示例圖。
【具體實(shí)施方式】
[0032]現(xiàn)將參照附圖描述本發(fā)明的實(shí)施例。應(yīng)當(dāng)注意，本發(fā)明的技術(shù)范圍由權(quán)利要求定義，并且不限于以下描述的任何實(shí)施例。此外，并非實(shí)施例中描述的特征的所有組合都是實(shí)現(xiàn)本發(fā)明所必須的。
[0033]第一實(shí)施例
[0034]圖1是例示根據(jù)第一實(shí)施例的攝像裝置100的配置的框圖。在圖1中，101表示包括多個(gè)透鏡組和光圈機(jī)構(gòu)的光學(xué)系統(tǒng)，尤其是聚焦透鏡、變焦透鏡及光圈機(jī)構(gòu)。
[0035]102表示由(XD、CM0S等構(gòu)成的圖像傳感器，并包括將模擬信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)的A/D轉(zhuǎn)換器。例如通過(guò)諸如拜耳陣列等的RGB顏色濾波器覆蓋圖像傳感器102的表面，并將圖像傳感器102的表面配置為能夠拍攝彩色圖像。當(dāng)在圖像傳感器102上形成被攝體圖像時(shí)，生成圖像數(shù)據(jù)(圖像信號(hào))并將其存儲(chǔ)于存儲(chǔ)器103中。
[0036]103表示存儲(chǔ)器，其能夠保持通過(guò)圖像傳感器102生成的圖像信號(hào)、針對(duì)通過(guò)攝像裝置100執(zhí)行的全部處理所需的數(shù)據(jù)等。104表示圖像處理電路，其對(duì)存儲(chǔ)器103中保持的圖像信號(hào)執(zhí)行預(yù)定像素插值處理、顏色轉(zhuǎn)換處理等。圖像處理電路104使用拍攝的圖像數(shù)據(jù)執(zhí)行預(yù)定運(yùn)算處理，基于獲得的處理結(jié)果確定拍攝條件，并向系統(tǒng)控制單元105傳達(dá)拍攝條件。圖像處理電路104還具有諸如圖像分析、濾波處理、降噪處理、合成處理等的各種功能，并包括特效處理確定單元，特效處理確定單元根據(jù)將隨后描述的算法選擇適合于拍攝場(chǎng)景的特效。
[0037]105表示作為整體控制攝像裝置100的系統(tǒng)控制單元。系統(tǒng)控制單元105監(jiān)督對(duì)快門(mén)速度、光圈機(jī)構(gòu)、聚焦透鏡以及變焦透鏡的控制，以便在圖像處理電路104確定的拍攝條件下拍攝圖像。這樣，系統(tǒng)控制單元105向曝光量控制單元106、聚焦透鏡控制單元107及焦距控制單元108發(fā)出指令。
[0038]106表示曝光量控制單元，其通過(guò)調(diào)整光學(xué)系統(tǒng)101的光圈機(jī)構(gòu)以及圖像傳感器102的曝光時(shí)間及拍攝敏感度執(zhí)行控制以達(dá)到適當(dāng)?shù)钠毓饬俊?07表示聚焦透鏡控制單元，其控制光學(xué)系統(tǒng)101的聚焦透鏡。108表示焦距控制單元，其控制光學(xué)系統(tǒng)101的變焦透鏡，并根據(jù)來(lái)自系統(tǒng)控制單元105的指示改變焦距。
[0039]109表示壓縮電路，其根據(jù)通過(guò)H.264/AVC示例的壓縮算法壓縮動(dòng)態(tài)圖像，并將動(dòng)態(tài)圖像轉(zhuǎn)換為MPEG文件、MOV文件等。將轉(zhuǎn)換的動(dòng)態(tài)圖像記錄到記錄介質(zhì)110中。
[0040]111表示顯示單元，其在攝像裝置100的IXD、外部監(jiān)視器等中顯示通過(guò)圖像處理電路104生成的所拍攝圖像。112表示控制單元，其接受用戶的輸入，并具有按鈕、觸摸面板等。系統(tǒng)控制單元105基于通過(guò)控制單元112接受的用戶操作確定并改變通過(guò)攝像裝置100執(zhí)行的操作。
[0041]接下來(lái)，將參照?qǐng)D2至圖5描述通過(guò)攝像裝置100執(zhí)行的動(dòng)態(tài)圖像拍攝處理概覽。攝像裝置100執(zhí)行多次動(dòng)態(tài)圖像拍攝，將從各拍攝實(shí)例獲得的動(dòng)態(tài)圖像數(shù)據(jù)組合到一起，并生成單幅動(dòng)態(tài)圖像數(shù)據(jù)。在圖2中，“章”表示從單個(gè)拍攝實(shí)例獲得的動(dòng)態(tài)圖像數(shù)據(jù)，而“組合的動(dòng)態(tài)圖像文件”表示通過(guò)將多章組合到一起而獲得的單幅動(dòng)態(tài)圖像數(shù)據(jù)。
[0042]攝像裝置100對(duì)拍攝的各動(dòng)態(tài)圖像(各章)添加各種特效，以下將舉出特效的示例。
[0043](1)顏色/色調(diào)轉(zhuǎn)換濾波效果
[0044](2)模板合成效果
[0045](3)可變幀率效果
[0046](4)殘像效果
[0047]“ (1)顏色/色調(diào)轉(zhuǎn)換濾波效果”是通過(guò)使用圖像處理電路104改變動(dòng)態(tài)圖像的著色、對(duì)比度等而向動(dòng)態(tài)圖像添加適合被攝體、拍攝場(chǎng)景等氛圍的特效。換言之，“(1)顏色/色調(diào)轉(zhuǎn)換濾波效果”對(duì)應(yīng)于應(yīng)用轉(zhuǎn)換顏色和色調(diào)中的至少一者的濾波器的控制。例如，圖像處理電路104能夠從拍攝的彩色動(dòng)態(tài)圖像生成高對(duì)比度黑白動(dòng)態(tài)圖像。