專利名稱：構(gòu)圖確定裝置、構(gòu)圖確定方法以及程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及構(gòu)圖確定裝置、其方法以及該裝置執(zhí)行的程序，該裝 置是一種被配置成對圖像數(shù)據(jù)的圖像內(nèi)容具有的構(gòu)圖進(jìn)行確定的裝 置。
背景技術(shù)：
與對鑒賞者產(chǎn)生良好印象的照片的拍攝技術(shù)有關(guān)的一個示例要
素是構(gòu)圖設(shè)置。在此所使用的術(shù)語"構(gòu)圖(composition)"也稱為"取 景(framing)"，是指將主題(subject)放置在構(gòu)成例如照片的圖像框 (frame)內(nèi)的狀態(tài)。
盡管存在幾種通用的進(jìn)行良好構(gòu)圖的基本技術(shù)，但是構(gòu)圖良好的 照片的拍攝對于普通攝像機(jī)用戶來說絕非容易的技藝，除非用戶具有 足夠的有關(guān)攝影的知識和技巧。因此，需要一種使得用戶能夠以容易 且簡單的方式拍攝具有良好構(gòu)圖的照片的技術(shù)。
例如，日本待審專利申請公報59-208983公開了 一種與自動跟蹤裝 置有關(guān)的技術(shù)，其中確定以預(yù)時序間間隔的圖像之差，計算這些圖像之 差的重心，利用重心的運(yùn)動量和方向來檢測主題圖像相對于成像屏面 (screen)的運(yùn)動量和方向，然后對成像設(shè)備進(jìn)行控制，從而將主題圖像設(shè) 定在成像屏面的基準(zhǔn)區(qū)內(nèi)。
此外，日本待審專利申請公報2001-268425公開了 一種與自動跟蹤 裝置有關(guān)的技術(shù)，其中在自動跟蹤人時，執(zhí)行跟蹤使得人面孔位于屏面 的中央，而且面孔的區(qū)域是屏面上主題圖像的整個區(qū)域的20%以上，從 而在跟蹤的同時以可靠方式拍攝人面孔。
從確定構(gòu)圖的角度來說，這些技術(shù)方案使得能夠自動跟蹤主題 (是人)，并以某種設(shè)定的構(gòu)圖將主題定位在成像屏面中。
7此外，日本待審專利申請公報2007-282118公開了一種配置，將相 對于要識別的主題的基準(zhǔn)主題距離的容許范圍內(nèi)包含的主題距離的主題 指定為與要識別的主題一起的主要主題，以及一種配置，將其檢測的面 孔區(qū)域尺寸具有某個閾值或更大的主題指定為與要識別的主題一起的主 要主題。

發(fā)明內(nèi)容
已經(jīng)實(shí)現(xiàn)需求，在對某個主題執(zhí)行構(gòu)圖確定的情況下，能夠只對 期望的相關(guān)主題執(zhí)行構(gòu)圖確定，而適當(dāng)排除應(yīng)當(dāng)被處理成對構(gòu)圖確定 無關(guān)的主題以使這種主題不會作為對象而被包括進(jìn)來。
根據(jù)本發(fā)明一個實(shí)施例，提供一種構(gòu)圖確定裝置，包括主題 檢測單元，被配置成基于獲得的圖像數(shù)據(jù)來檢測圖像中的主題；實(shí)際 主題尺寸檢測單元，被配置成為所述主題檢測單元檢測的每個主題檢 測能夠視為與實(shí)際測量等效的實(shí)際尺寸；主題區(qū)分單元，被配置成基
題的合適值的確定，從所述主題檢測單元檢測的主題中區(qū)分出相關(guān)主 題；以及構(gòu)圖確定單元，被配置成僅以所述主題區(qū)分單元區(qū)分出的相 關(guān)主題為對象來確定構(gòu)圖。
根據(jù)本發(fā)明一個實(shí)施例，提供一種構(gòu)圖確定裝置，包括主題檢 測單元，被配置成基于獲得的圖像數(shù)據(jù)來檢測圖像中的主題；主題尺 寸檢測單元，被配置成為所述主題檢測單元檢測的每個主題檢測所述 圖像內(nèi)尺寸；主題區(qū)分單元，被配置成基于對所述主題尺寸檢測單元 檢測的所述圖像內(nèi)尺寸是否是對應(yīng)于相關(guān)主題的合適值的確定，從所 述主題檢測單元檢測的主題中區(qū)分出相關(guān)主題；以及構(gòu)圖確定單元， 被配置成僅以所述主題區(qū)分單元區(qū)分出的相關(guān)主題為對象來確定構(gòu) 圖。
根據(jù)本發(fā)明一個實(shí)施例，提供一種構(gòu)圖確定裝置，包括主題檢 測單元，被配置成基于獲得的圖像數(shù)據(jù)來檢測圖像中的主題；主題距 離檢測單元，被配置成為所述主題檢測單元檢測的每個主題檢測主題距離；主題區(qū)分單元，被配置成基于對所述主題距離檢測單元檢測的 主題距離是否是對應(yīng)于相關(guān)主題的合適值的確定，從所述主題檢測單 元檢測的主題中區(qū)分出相關(guān)主題；以及構(gòu)圖確定單元，被配置成僅以 所述主題區(qū)分單元區(qū)分出的相關(guān)主題為對象來確定構(gòu)圖。
根據(jù)以上配置，對從圖像數(shù)據(jù)檢測的每個主題來檢測區(qū)分參數(shù) (實(shí)際尺寸、圖像內(nèi)尺寸或主題距離)，然后確定這些區(qū)分參數(shù)是否是 對應(yīng)于相關(guān)主題的合適值?；诖_定結(jié)果，從主題檢測單元檢測的主 題中區(qū)分出相關(guān)主題，然后僅以所區(qū)分出的相關(guān)主題為對象來執(zhí)行構(gòu) 圖確定。這樣，根據(jù)本發(fā)明，僅對被判斷為相關(guān)主題的檢測主題執(zhí)行 構(gòu)圖確定處理，而排除被判斷為無關(guān)主題的那些主題。
這樣，根據(jù)本發(fā)明，可以僅對相關(guān)主題執(zhí)行精確的構(gòu)圖確定，而 適當(dāng)排除對構(gòu)圖確定無關(guān)的主題。


圖l是例示與本發(fā)明第一實(shí)施例相對應(yīng)的構(gòu)圖確定的基本結(jié)構(gòu)示 例框圖2是例示與第一實(shí)施例相對應(yīng)的構(gòu)圖確定的另 一基本結(jié)構(gòu)示例
框圖3是例示根據(jù)第一實(shí)施例的構(gòu)圖確定塊執(zhí)行的處理過程示例的 流程圖4是例示圖3的主題區(qū)分處理的過程示例的流程圖5A到5D是示意性地例示作為第一實(shí)施例的根據(jù)主題區(qū)分算 法的構(gòu)圖確定有關(guān)的實(shí)際示例的圖6A到6D是示意性地例示作為第一實(shí)施例的根據(jù)主題區(qū)分算 法的構(gòu)圖確定有關(guān)的另一實(shí)際示例的圖7是例示與第二實(shí)施例相對應(yīng)的構(gòu)圖確定的基本結(jié)構(gòu)示例框
圖8是例示與第一實(shí)施例相對應(yīng)的構(gòu)圖確定的另一基本結(jié)構(gòu)示例
框圖；圖9是例示根據(jù)第二實(shí)施例的構(gòu)圖確定塊執(zhí)行的處理過程示例的 流程圖IO是例示圖9的主題區(qū)分處理的過程示例的流程圖； 圖ll是例示圖9的主題區(qū)分處理的另一過程示例的流程圖； 圖12是示意性地例示作為第二實(shí)施例的根據(jù)主題區(qū)分算法的構(gòu)
圖確定有關(guān)的實(shí)際示例的圖13是示意性地例示作為第二實(shí)施例的根據(jù)主題區(qū)分算法的構(gòu)
圖確定有關(guān)的另一實(shí)際示例的圖14是例示與第三實(shí)施例相對應(yīng)的構(gòu)圖確定的基本結(jié)構(gòu)示例框
圖15是例示與第三實(shí)施例相對應(yīng)的構(gòu)圖確定的另一基本結(jié)構(gòu)示 例框圖16是例示根據(jù)第三實(shí)施例的構(gòu)圖確定塊執(zhí)行的處理過程示例 的流程圖17是例示圖16的主題區(qū)分處理的過程示例的流程圖； 圖18是例示圖16的主題區(qū)分處理的另一過程示例的流程圖； 圖19是例示圖16的主題區(qū)分處理的又一過程示例的流程圖； 圖20A到20D是示意性地例示作為第三實(shí)施例的根據(jù)主題區(qū)分
算法的構(gòu)圖確定有關(guān)的實(shí)際示例的圖21A到21D是示意性地例示作為第三實(shí)施例的根據(jù)主題區(qū)分
算法的構(gòu)圖確定有關(guān)的實(shí)際示例的圖22是示意性地例示根據(jù)第三實(shí)施例的上閾值Kmax和下閾值
Kmin的特定值示例，圖^m尺寸與主題圖像內(nèi)尺寸之間的關(guān)系示例圖； 圖23是示意性地例示在第三實(shí)施例中執(zhí)行反映成人/兒童判定結(jié)
果的主題選擇處理的情況的圖24是例示構(gòu)成根據(jù)實(shí)施例的成像系統(tǒng)的數(shù)字靜態(tài)攝像機(jī)和平
臺的圖，根據(jù)實(shí)施例對其應(yīng)用構(gòu)圖確定塊；
圖25A和25B是示意性地例示安裝到平臺的數(shù)字靜態(tài)攝像機(jī)在
搖攝(pan)方向和傾斜(tilt)方向的運(yùn)動示例圖，作為根據(jù)實(shí)施例的成像系統(tǒng)的操作；
圖26是例示根據(jù)實(shí)施例的成像系統(tǒng)的內(nèi)部系統(tǒng)結(jié)構(gòu)示例的框圖； 圖27是例示圖24到26的成像系統(tǒng)執(zhí)行的成像記錄的處理示例 流程圖28是例示根據(jù)實(shí)施例的成像系統(tǒng)的另一內(nèi)部系統(tǒng)結(jié)構(gòu)示例的
框圖29是例示根據(jù)實(shí)施例的成像系統(tǒng)的另一內(nèi)部系統(tǒng)結(jié)構(gòu)示例的
框圖30是例示根據(jù)實(shí)施例的除成像系統(tǒng)以外的構(gòu)圖確定塊的應(yīng)用 示例的框圖31是例示根據(jù)實(shí)施例的除成像系統(tǒng)以外的構(gòu)圖確定塊的應(yīng)用 示例的框圖32是例示根據(jù)實(shí)施例的除成像系統(tǒng)以外的構(gòu)圖確定塊的應(yīng)用 示例的框圖33是例示根據(jù)實(shí)施例的除成像系統(tǒng)以外的構(gòu)圖確定塊的應(yīng)用 示例的框圖34是例示根據(jù)實(shí)施例的除成像系統(tǒng)以外的構(gòu)圖確定塊的應(yīng)用 示例的框圖35是例示根據(jù)實(shí)施例的除成像系統(tǒng)以外的構(gòu)圖確定塊的應(yīng)用 示例的框圖36是例示根據(jù)實(shí)施例的構(gòu)成成像系統(tǒng)的數(shù)字靜態(tài)攝像機(jī)的內(nèi) 部結(jié)構(gòu)示例的框圖37是例示根據(jù)實(shí)施例的構(gòu)成成像系統(tǒng)的平臺的內(nèi)部結(jié)構(gòu)示例 的框圖38A和38B是與如何檢測個別主題的具體方法一起描述如何 獲得檢測到的個別主題的重心和多個主題的總主題中心的示例的圖； 圖39是描述在成像圖像數(shù)據(jù)的圖像框內(nèi)設(shè)定的原點(diǎn)坐標(biāo)的圖； 圖40是示意性地例示在檢測的主題的數(shù)量是1的情況下，第一 構(gòu)圖控制示例的構(gòu)圖控制示例的圖；圖41A和41B是示意性地例示在檢測的主題的數(shù)量是2的情況 下，第一構(gòu)圖控制示例的構(gòu)圖控制示例的圖42是示意性地例示在檢測的主題的數(shù)量是3的情況下，第一 構(gòu)圖控制示例的構(gòu)圖控制示例的圖43是例示第 一構(gòu)圖控制示例的處理過程示例的流程圖44是示意性地例示在檢測的主題的數(shù)量是3的情況下，第二 構(gòu)圖控制示例的構(gòu)圖控制示例的圖；以及
圖45是例示第二構(gòu)圖控制示例的處理過程示例的流程圖。
具體實(shí)施例方式
現(xiàn)在將參照附圖描述本發(fā)明優(yōu)選實(shí)施例。在以下描述中，將使用 術(shù)語"構(gòu)圖(composition)"、"圖像框(image frame)"、"場角(field angle)" 以及"成像視角(imaging view angle)"。"構(gòu)圖"也稱為取景，是指 將主題放置在圖像框內(nèi)的狀態(tài)。"圖像框"是等效于一個屏面的區(qū)域 范圍，例如，圖像看起來固定于其中，并且"圖像框"通常是垂直或 水平延長的矩形。"場角"也稱為變焦角，是指成像設(shè)備的光學(xué)系統(tǒng) 中的變焦透鏡的位置確定的配合到圖像框中的范圍，用角度來表示。 通常，這是成像光學(xué)系統(tǒng)的焦距和成像面(成像傳感器或膠巻)的大小 確定的，但是在這里，能夠與聚焦距離相對應(yīng)地變化的要素稱為場角。 "成像視角"是指配合到圖像框中的圖像范圍，通過使用設(shè)定在預(yù)定 位置的成像設(shè)備進(jìn)行成像而獲得，并且除了上述"場角"以外還由搖 攝(水平)方向的搖攝角和傾斜(垂直)方向的角度(仰角和俯角)來確定。 例如，圖像的構(gòu)圖是指將主題放置在圖像視角確定的圖像框內(nèi)的狀態(tài)。
本實(shí)施例涉及配置成執(zhí)行構(gòu)圖確定的裝置或系統(tǒng)。在描述本實(shí)施 例的結(jié)構(gòu)之前，讓我們考慮對通過例如成像而獲得的主題執(zhí)行自動構(gòu) 圖調(diào)節(jié)。注意，主題是人。例如，假設(shè)從通過成像獲得的圖像中檢測 主題，即一定數(shù)量的人。此時，在構(gòu)圖確定處理中，確定一種最優(yōu)配 置，使得這些主題適當(dāng)放置在圖像框內(nèi)，所有檢測的主題配合到圖像 框中。使用上述構(gòu)圖確定處理，可以將例如面孔檢測技術(shù)應(yīng)用于人的主 題檢測。然而，僅采用面孔檢測技術(shù)會導(dǎo)致如下問題。例如，考慮如
下情況在通過成像獲得的圖像的圖像框中，其中不僅存在作為真實(shí) 的人的主題，而且附近存在面孔照片等。在此情況下，僅通過面孔檢 測來執(zhí)行主題檢測會導(dǎo)致不僅將真實(shí)的人而且將面孔照片部分檢測為 將要作為構(gòu)圖確定對象(object)的主題。
在此情況下，期望的最優(yōu)構(gòu)圖確定是考慮排除面孔照片，而僅將 作為真實(shí)的人的主題適當(dāng)?shù)嘏浜显趫D像框內(nèi)。然而，在實(shí)際中，得到 的構(gòu)圖確定結(jié)果考慮不僅將面孔照片而且將真實(shí)的人適當(dāng)?shù)嘏浜显趫D 像框內(nèi)。
而且，讓我們考慮對坐在餐館的某個桌子旁的作為主題的兩個人 執(zhí)行構(gòu)圖確定的情況。在此情況下，應(yīng)當(dāng)排除附近的無關(guān)的人員(例如， 坐在其他桌子旁的人、站在餐館中的雇員等)作為構(gòu)圖確定的對象，即 使他們是真實(shí)的人。然而，僅通過面孔檢測執(zhí)行主題檢測將導(dǎo)致將這 些附近的無關(guān)人員檢測為將要作為構(gòu)圖確定對象的主題，因此，可能 不會獲得期望的構(gòu)圖。
因此，根據(jù)下述本實(shí)施例提出一種技術(shù)方案，使得即使在對于構(gòu) 圖確定無關(guān)的主題與有關(guān)的主題共存的情況下，能夠僅使用有關(guān)的主 題作為對象執(zhí)行精確的構(gòu)圖確定。
圖l是例示與作為第一實(shí)施例的構(gòu)圖確定有關(guān)的基本結(jié)構(gòu)示例的 圖。該圖例示作為執(zhí)行構(gòu)圖確定的部分的構(gòu)圖確定塊200。構(gòu)圖確定 塊200獲取圖像數(shù)據(jù)并執(zhí)行構(gòu)圖確定，并且包括主題檢測處理單元 201、主題距離檢測單元202A以及構(gòu)圖確定處理單元203，如圖所示。
主題檢測處理單元201是利用所獲取的圖像數(shù)據(jù)并執(zhí)行主題檢測 處理的部件。在此使用的主題檢測處理是首先將作為人的主題從圖像 數(shù)據(jù)的圖像內(nèi)容中區(qū)分開的處理，使用的信息是以下獲得的檢測結(jié)果 (檢測到的個別主題信息)作為人的主題的數(shù)量、每個主題(個別主題) 在圖像框內(nèi)的位置信息(其可以通過例如圖像框內(nèi)的位置的像素矩陣 中的x坐標(biāo)和y坐標(biāo)表示)、個別主題在圖像(圖像框)中的尺寸(所占空間)，等等。
可以采用面孔檢測技術(shù)作為主題檢測處理的具體技術(shù)。盡管存在 根據(jù)現(xiàn)有技術(shù)的幾種面孔檢測方法和技術(shù)，但是本實(shí)施例并不限于使 用任何特定方法或技術(shù)，而是可以在考慮檢測精度、設(shè)計難度等的情 況下選擇合適的方法。
主題檢測處理單元201在此情況下輸出所檢測到的個別主題檢測 信息的集合組成的信息，作為檢測主題信息。而且，主題檢測處理單 元201執(zhí)行的主題檢測處理可以通過圖^f象信號處理來實(shí)現(xiàn)。在例如 DSP(數(shù)字信號處理器)執(zhí)行圖像信號處理的配置的情況下，可以通過提 供給DSP的程序和指令來實(shí)現(xiàn)主題檢測處理。
主題距離檢測單元202A是為主題檢測處理單元201檢測到的個 別主題(檢測到的個別主題)檢測主題距離、并輸出其檢測信息(主題距 離信息)的部件。
在此使用的主題距離是指輸入到主題檢測處理單元201的圖像被 成像并被成像設(shè)備獲得時，從成像光被輸入到成像設(shè)備的光學(xué)系統(tǒng)的 位置到主題的直線距離。更精確地，可以將其視為，例如，從成像設(shè) 備的光學(xué)系統(tǒng)(透鏡)的前主點(diǎn)(front principal point)起的直線距離。
在實(shí)際中，可以將釆用成像設(shè)備的自動聚焦調(diào)節(jié)控制(自動聚焦 控制)配置用于主題距離檢測單元202A。
順便指出，根據(jù)現(xiàn)有技術(shù)，存在自動聚焦控制的對比度方法和距 離測量方法。對比度方法涉及移動例如聚焦透鏡的位置，然后尋找成 像獲得的圖像中的主題部分區(qū)域的亮度水平差(對比度)達(dá)到峰值時的 聚焦透鏡位置。所找到的聚焦透鏡位置對應(yīng)于焦點(diǎn)狀態(tài)?？梢愿鶕?jù)聚 焦透鏡的位置獲得本實(shí)施例中的主題距離。
而且，根據(jù)現(xiàn)有技術(shù)，存在距離測量方法的有源方法和無源方法。
根據(jù)有源方法，將光從測量裝置端投射到主題端，并檢測由此獲 得的反射光的入射位置，并基于該檢測信息來測量到主題的距離。注 意，至于照射在主題端的光，除了可見光以外，可以采用紅外線。此 外，除了光以外，還可以采用超聲波、無線電波等。
14此外，對于無源方法，相差檢測方法例如涉及使用多個光學(xué)系統(tǒng) 在相互不同的水平位置形成主題的圖像。在形成主題圖像的每個位置 設(shè)置線傳感器，然后從這些線傳感器獲得對應(yīng)于圖像形成光的信號。 相應(yīng)地，這些線傳感器也沿著同一水平軸放置。這些線傳感器檢測例 如視野內(nèi)的某個高度的一條水平線的圖像形成光，然后輸出檢測信號。 基于從這些線傳感器獲得的信號，檢測與各光學(xué)系統(tǒng)相對應(yīng)的圖像的 相互相位差。利用從這些線傳感器獲得的信號，使相位差檢測經(jīng)受預(yù) 定計算(相關(guān)計算)。由此基于檢測結(jié)果來測量到主題的距離。
根據(jù)本實(shí)施例，可以采用上述任一方法來在實(shí)際中配置主題距離
檢測單元202A。
作為一個示例，如果基于對比度方法，主題距離檢測單元202A 將被配置成具有基于對比度方法的自動聚焦控制的機(jī)構(gòu)單元和信號處 理單元。也就是說，它將被配置成具有成像設(shè)備中的聚焦透鏡和用 于驅(qū)動聚焦透鏡的驅(qū)動機(jī)構(gòu)單元、對采用成像設(shè)備成像獲得的圖像數(shù) 據(jù)(成像圖像數(shù)據(jù))檢測對比度的信號處理功能、以及能夠根據(jù)例如檢 測結(jié)果對驅(qū)動聚焦透鏡的驅(qū)動機(jī)構(gòu)單元來執(zhí)行控制的控制功能。
于是，輸入到主題檢測處理單元201的圖像數(shù)據(jù)此時被作為利用 成像設(shè)備成像獲得的成像圖像數(shù)據(jù)，然后主題距離檢測單元202A輸 入成像圖像數(shù)據(jù)，與來自主題檢測處理單元201的檢測主題信息一起。
主題距離檢測單元202A首先識別與輸入的檢測圖像信息表示的 每個檢測個別主題的位置相對應(yīng)的部分圖像區(qū)域。執(zhí)行驅(qū)動以按合適 時序?qū)⒕劢雇哥R移動到預(yù)定范圍，同時檢測此時獲得的每個部分圖像 區(qū)域的對比度，然后對每個部分圖像區(qū)域獲得所檢測的對比度為峰值 時的聚焦透鏡位置的信息。為由此獲得的每個聚焦透鏡位置獲得了主 題距離。注意，可以從聚焦透鏡位置毫無疑義地獲得主題距離。這樣， 主題檢測處理單元201可以獲得每個檢測個別主題的主題距離信息。
在此情況下構(gòu)圖確定處理單元203獲取并輸入從主題檢測處理單 元201輸出的檢測主題信息，和從主題距離檢測單元202A輸出的每 個檢測個別主題的主題距離的信息(主題距離信息)。利用這些信息，并最終執(zhí)行構(gòu)圖確定，其中僅使用意圖與構(gòu)圖確定有關(guān)的主題(相關(guān)主 題)作為確定對象來確定最優(yōu)構(gòu)圖。
注意，構(gòu)圖確定處理單元203執(zhí)行的構(gòu)圖確定處理可以由例如執(zhí) 行程序的CPU(中央處理器)來實(shí)現(xiàn)，即通過軟件來實(shí)現(xiàn)?？梢栽诖耸?用的另一示例配置是對軟件和/或硬件(合適的話)實(shí)現(xiàn)的圖像信號處理 的級聯(lián)使用。
圖2例示作為第一實(shí)施例的構(gòu)圖確定塊200的基本結(jié)構(gòu)示例?？?以將圖中示出的結(jié)構(gòu)視為基于圖l所示的第一示例的配置，其中圖1 的構(gòu)圖確定處理單元203執(zhí)行的區(qū)分相關(guān)主題的處理被提取作為主題 區(qū)分處理單元204。
也就是說，在此情況下，如圖1況那樣，首先主題檢測處理單元 201基于輸入的圖像數(shù)據(jù)來執(zhí)行主題檢測處理，并輸出檢測主題信息， 并且主題距離檢測單元202A還對主題檢測處理單元201檢測的每個 主題(檢測到的個別主題)的主題距離執(zhí)行檢測，然后輸出主題距離檢 測4言息。
于是，在此情況下，將檢測主題信息和主題距離檢測信息輸入給 主題區(qū)分處理單元204。主題區(qū)分處理單元204利用檢測主題信息和 主題距離檢測信息，從主題檢測處理單元201檢測到的個別主題中排 除與構(gòu)圖確定無關(guān)的主題(無關(guān)主題)，然后執(zhí)行區(qū)分相關(guān)主題的處理 (區(qū)分處理)。主題區(qū)分處理單元204然后將通過主題區(qū)分處理而區(qū)分 為相關(guān)主題的個別主題屬性的檢測到的個別主題信息輸出給構(gòu)圖確定 處理單元203。
構(gòu)圖確定處理單元203基于從主題區(qū)分處理單元204輸出的與被 區(qū)分為相關(guān)主題的個別主題有關(guān)的檢測到的個別主題信息，執(zhí)行構(gòu)圖 確定處理。也就是說，結(jié)果，僅使用相關(guān)主題作為對象來執(zhí)行構(gòu)圖確 定處理。
圖3所示流程圖例示上述圖l和2所示的構(gòu)圖確定塊200執(zhí)行的 處理過程示例。應(yīng)當(dāng)指出，這些圖所示的處理過程示例僅是示例，圖 4所示的構(gòu)圖確定塊200執(zhí)行的處理過程絕不限于此。只要基于來自主題檢測處理單元201的檢測主題信息和來自主題距離檢測單元 202A(對參數(shù)區(qū)分的檢測單元)的主題檢測信息(區(qū)分參數(shù)的信息)，構(gòu) 圖確定處理單元203最終僅使用相關(guān)主題作為對象而確定最優(yōu)構(gòu)圖， 圖4所示的配置就可以實(shí)現(xiàn)其期望的功能。對于后述第二實(shí)施例和第 三實(shí)施例也是如此。
此外，圖1和2所示的塊結(jié)構(gòu)與圖3的流程圖的步驟之間的關(guān)聯(lián) 僅是直接想到的示例，也可以想到并采用其他關(guān)聯(lián)。這對于相應(yīng)框圖 與流程圖之間的后述關(guān)聯(lián)也是如此。
首先，在步驟SlOl，主題檢測處理單元201獲取(輸入)圖像數(shù)據(jù)。 步驟S102和S103是主題檢測處理單元201執(zhí)行的過程。 主題檢測處理單元201在步驟S102執(zhí)行上述主題檢測處理，然 后在步驟S103輸出作為其檢測結(jié)果的檢測主題信息。
步驟S104是如下處理主題距離檢測單元202A檢測主題檢測 處理單元201檢測到的每個個別主題(檢測個別主題)的主題距離，然 后輸出主題距離檢測信息。檢測每個個別檢測主題的主題距離的配置
示例^7上所述。
在步驟S105，執(zhí)行主題區(qū)分處理，即從檢測到的個別主題中區(qū) 分相關(guān)主題的處理。主題區(qū)分處理由具有對應(yīng)于圖l的結(jié)構(gòu)的構(gòu)圖確 定處理單元203和對應(yīng)于圖2的結(jié)構(gòu)的主題區(qū)分處理單元204執(zhí)行。
圖4例示上述步驟S105的主題區(qū)分處理的過程示例。
在步驟S201，首先，將l作為初值代入變量n，變量n表示被檢 測的個別主題被當(dāng)成區(qū)分對象的順序。
在步驟S202,確定當(dāng)前變量n是否超過個別主題的總數(shù)。現(xiàn)在， 個別主題的總數(shù)是主題檢測處理單元201檢測到的個別主題(檢測到 的個別主題)的總數(shù)，并且可以根據(jù)從主題檢測處理單元201輸入的檢 測主題信息而得知。
在步驟S202獲得否定確定結(jié)果的情況下，意味著仍然存在剩余 的尚未對其執(zhí)行區(qū)分的檢測的主題。在此情況下，本流程進(jìn)行到步驟 S203。在步驟S203，對關(guān)于第n個主題檢測的主題距離Dn、預(yù)設(shè)下限 Dmin以及上限D(zhuǎn)max，來確定條件(條件表達(dá)式)Dmin < Dn < Dmax是 否成立。
現(xiàn)在，在步驟S203獲得肯定確定結(jié)果的情況下，意味著第n個 檢測個別主題處于適合被成像為作為確定構(gòu)圖的主要實(shí)體的有效主題 的距離范圍，而不是距離成像設(shè)備成像的位置(成像位置)太近或太遠(yuǎn)。 在此，我們將處于這種合適的主題距離范圍的被檢測到的個別主題處 理為相關(guān)主題。就是說，將滿足條件Dmin<Dn<Dmax的被檢測的主 題判斷為相關(guān)主題。
在步驟S203獲得肯定確定結(jié)果的情況下，本流程進(jìn)行到步驟 S204,并將第n個檢測個別主題設(shè)定為相關(guān)主題，即將要作為構(gòu)圖確 定對象的主題。在實(shí)際中，該處理是通過輸出構(gòu)圖確定處理單元203 執(zhí)行的構(gòu)圖確定處理的，與第n個檢測個別主題有關(guān)的檢測個別主題 信息來執(zhí)行。
隨后，在步驟S205，將變量n遞增然后本流程進(jìn)行到步驟S202。
此外，在步驟S203獲得否定確定結(jié)果的情況下，這意味著第n 個檢測個別主題位于比距離成像設(shè)備一 定距離更遠(yuǎn)的距離(Dn 2 Dmax)，或者位于某個近距離內(nèi)(Dmin》Dn)。
主題位于比距離成像設(shè)備一定距離更遠(yuǎn)的距離意味著該主題距 離太遠(yuǎn)，以至于不能被處理成在構(gòu)圖中充當(dāng)主要實(shí)體的主題。
作為具體示例，在餐館等，與期望的主題作為就餐者所就坐的桌 子不同的其他桌子旁就座的就餐者，站在后面的員工等，被檢測為個 別主題，這些主題被確定為位于比距離成像位置的一定距離更遠(yuǎn)的距 離。
此外，主題位于距離成像位置的一定近距離內(nèi)意味著該主題距離 太近，以至于不能被處理成在構(gòu)圖中充當(dāng)主要實(shí)體的主題。
可以作為示例而給出的這樣的情況是例如在成像視野中位于比 期望的主題近得多的位置處的面孔照片。在此情況下，將檢測的與面 孔照片相對應(yīng)的個別主題確定為位于距離成像位置 一 定近距離內(nèi)。按此方式獲得否定確定結(jié)果的情況下，本流程跳過步驟S204然 后進(jìn)行到步驟S205。因此，此時的第n個檢測個別主題不被設(shè)定為相 關(guān)主題(對象個別主題)。也就是說，不將其檢測個別主題信息輸出給 構(gòu)圖確定處理單元203用于構(gòu)圖確定處理。在步驟S205，將變量n遞 增，然后本流程返回到步驟S202。
這樣，根據(jù)圖4所示的主題區(qū)分處理，確定每個檢測個別主題是 否具有合適范圍內(nèi)的主題距離，然后將位于合適范圍內(nèi)的那些主題設(shè) 定(區(qū)分)為相關(guān)主題，即作為對象個別主題。
當(dāng)對作為對象的所有檢測到的個別主題的區(qū)分處理結(jié)束時，在步 驟S202獲得肯定確定結(jié)果，離開該圖所示的處理，然后本流程進(jìn)行到 圖3的步驟S105。注意，存在主題檢測處理單元201的檢測結(jié)果是沒 有檢測到一個主題的情況。在此情況下，第一次就在步驟S202獲得肯 定確定結(jié)果，然后本流程進(jìn)行到圖3的步驟S105。此時，作為結(jié)果， 對象個別主題的設(shè)定數(shù)量是0。
現(xiàn)在返回到圖3進(jìn)行描述。在步驟S105執(zhí)行主題區(qū)分處理之后， 執(zhí)行步驟S106等的過程。在此可以將步驟S106和步驟S107的過程 視為構(gòu)圖確定處理單元203執(zhí)行的。
在步驟S106，基于個別區(qū)分處理輸出的檢測個別主題信息，確 定作為主題區(qū)分處理的結(jié)果而設(shè)定的對象個別主題的數(shù)量是一個還是 多個。
在這里獲得否定確定結(jié)果的情況下，意味著不存在作為構(gòu)圖確定 對象的個別主題，因此本流程返回到步驟SlOl。
另一方面，在獲得肯定確定結(jié)果的情況下，意味著存在作為構(gòu)圖 確定對象的個別主題，因此本流程進(jìn)行到步驟S107。
然后，構(gòu)圖確定處理單元203執(zhí)行步驟S107的處理。在步驟S107， 利用上述步驟S106設(shè)定的對象個別主題的檢測主題信息，采用預(yù)定算 法來執(zhí)行構(gòu)圖確定處理。稍后將描述構(gòu)圖確定算法的示例、構(gòu)圖確定 結(jié)果的使用示例等。
圖5A到6D示意性示出作為第一實(shí)施例的根據(jù)主題區(qū)分算法的構(gòu)圖確定實(shí)際示例。
首先，圖5A到5D例示如下情況主題檢測處理檢測的多個主 題(個別對象)中，在比距離成像位置的一定距離更遠(yuǎn)的距離存在主題。
這里，圖5A的虛線表示檢測框300A。檢測框300A是與從主題 檢測處理單元201輸出的圖像數(shù)據(jù)的圖像相對應(yīng)的框。假設(shè)主題檢測 處理單元201具有位于檢測框300A內(nèi)的檢測的主題(個別主題)l、 2 以及3。注意，這里這些主題是以與例如基于面孔檢測而獲得的檢測 框相對應(yīng)的矩形框來表示的。
而且，基于對比度方法檢測的主題1、 2以及3的相應(yīng)主題距離 Dl、 D2以及D3分別如圖5B到5D所示。這些圖例示對比度的變化， 通過對檢測到主題1、2以及3的每個部分圖像區(qū)域移動聚焦透鏡而檢 測，作為縱軸。橫軸表示根據(jù)聚焦透鏡的位置而確定的主題距離。
現(xiàn)在，對于圖5A到5D，假設(shè)主題l的主題距離Dl等于或大于 上限D(zhuǎn)max，并且主題2和3的主題距離D2和D3在大于下限D(zhuǎn)min 但是小于上限的合適范圍內(nèi)。
在此情況下，通過主題區(qū)分處理將主題2和3區(qū)分為對象主題(相關(guān) 主題)。
在隨后的構(gòu)圖確定處理中，僅以主題2和3作為對象而排除主題 l來執(zhí)行構(gòu)圖確定。例如，在圖5A中，通過確定的構(gòu)像框300B 與主題l、 2以及3之間的關(guān)系示出構(gòu)圖確定的結(jié)果。所確定的構(gòu) 像框300B是作為構(gòu)圖確定的結(jié)果而獲得的圖像框。
在所確定的構(gòu)像框300B中，將主題2和3設(shè)置成大約位于 中間，意味著將主題2和3處理為對象進(jìn)行了構(gòu)圖確定。另一方面， 在該圖中，例如，主題1的僅僅一部分交疊在所確定的構(gòu)像框 300B，意味著已經(jīng)將主題l排除，不作為構(gòu)圖確定對象。
然后，圖6A到6D例示主題位于距離成像位置的一定近距離內(nèi) 的情況。如圖6A所示，這里，同樣，在檢測框300A內(nèi)檢測到主題l、 2以及3。而且，基于對比度方法檢測的主題1、 2以及3的相應(yīng)主題 距離Dl、 D2以及D3分別如圖6B到6D所示。
20在此情況下，假設(shè)主題l的主題距離Dl等于或小于下限D(zhuǎn)min， 并且主題2和3的主題距離D2和D3在大于下限D(zhuǎn)min但是小于上限 的合適范圍內(nèi)。在此情況下，同樣，通過主題區(qū)分處理將主題2和3區(qū) 分為對象主題(相關(guān)主題)，因此在排除主題1并且僅以主題2和3為對象 執(zhí)行構(gòu)圖確定處理。
在圖6A，通過確定的構(gòu)像框300B與主題1、 2以及3之間 的關(guān)系示出構(gòu)圖確定的結(jié)果。在此情況下，同樣，在所確定的構(gòu) 像框300B中，將主題2和3設(shè)置成大約位于中間。另一方面，主題l 幾乎在所確定的構(gòu)像框300B外。
注意，這些圖5A到6D中的構(gòu)圖確定之后的圖像框(所確定的構(gòu) 像框300B)中的主題的布置、尺寸等只是例示使用被區(qū)分為構(gòu)圖 確定對象的主題來執(zhí)行構(gòu)圖確定。稍后將描述具體構(gòu)圖確定算法等。
而且，僅作為示例，考慮實(shí)際使用的實(shí)際值，可以想到下限D(zhuǎn)min 是約30 cm并且上限D(zhuǎn)max是約5 m的設(shè)置。
圖7例示作為第二實(shí)施例的構(gòu)圖確定的基本結(jié)構(gòu)示例。該圖中的構(gòu) 圖確定塊200由主題檢測處理單元201、主題尺寸檢測單元202B以及構(gòu) 圖確定處理單元203構(gòu)成。可以將該結(jié)構(gòu)視為例如將圖l的與第一實(shí) 施例相對應(yīng)的主題距離檢測單元202A替換成主題尺寸檢測單元202B。
在該結(jié)構(gòu)中，同樣，按與第一實(shí)施例相同的方式，主題檢測處理單 元201利用獲得的圖像數(shù)據(jù)來執(zhí)行圖像檢測處理，然后輸出檢測主題 神命、
主題尺寸檢測單元202B從主題檢測處理單元201讀取檢測主題信 息，然后檢測每個檢測個別主題的圖像的尺寸。
注意，如后所述，在主題檢測處理單元201的主題檢測處理是例 如基于面孔檢測的情況下，可以在主題檢測處理的狀態(tài)獲得每個檢測 個別主題的圖像的尺寸。在此情況下，可以考慮將主題尺寸檢測單元 202B包括在主題檢測處理單元201中。替換地，可以想到如下的結(jié)構(gòu)
息提取并獲得每個檢測個別主題的尺寸信息。當(dāng)然，在例如不能獲得檢測個別主題的圖像尺寸的主題檢測處理
算法的情況下，將進(jìn)行如下配置主題尺寸檢測單元202B輸入例如圖 像數(shù)據(jù)，然后檢測每個檢測個別主題的尺寸。此時，如果在主題尺寸檢 測單元202B進(jìn)行尺寸檢測時存在必須為每個檢測個別主題從外部獲得 關(guān)于其的信息的位置，可以使用被檢測主題信息中的每個檢測個別主題 的位置信息。
在任何情況下，主題尺寸檢測單元202B都獲得主題檢測處理單元 201檢測的每個個別主題在屏面中的尺寸信息(主題尺寸信息)，并將其 輸出給構(gòu)圖確定處理單元203。
在此情況下，構(gòu)圖確定處理單元203獲取并輸入來自主題檢測處 理單元201的檢測主題信息以及來自主題尺寸檢測單元202B的主 HA 寸信息，然后利用這些信息以便最終僅以對象個別主題(相關(guān)主題)作為確 定對象執(zhí)行構(gòu)圖確定處理。
圖8例示作為第二實(shí)施例的與構(gòu)圖確定塊200有關(guān)的另一基本結(jié)構(gòu) 示例?？梢詫⒃搱D所示的結(jié)構(gòu)視為將在以上圖7中由構(gòu)圖確定處理單 元203執(zhí)行的區(qū)分相關(guān)主題的處理提取出來，成為主題區(qū)分處理單元 204。
在此情況下的主題區(qū)分處理單元204輸入來自主題檢測處理單元 201的檢測主題信息和來自主題尺寸檢測單元202B的主題尺寸信息。 從檢測到的個別主題中區(qū)分出與相關(guān)主題相對應(yīng)的對象個別主題，然后 將與這些對象個別主題中的每一個相對應(yīng)的檢測個別主題信息輸出給構(gòu) 圖確定處理單元203。
構(gòu)圖確定處理單元203然后基于從主題區(qū)分處理單元204輸出的 每個對象個別主題的檢測個別主題信息，僅以對象個別主題(相關(guān)主題) 為對象來執(zhí)行構(gòu)圖確定處理。
圖9的流程圖例示與以上圖7或圖8所示的第二實(shí)施例相對應(yīng)的 構(gòu)圖確定塊200執(zhí)行的處理過程示例。
在步驟S301到S303，按與圖3的步驟SIOI到S103相同的方式， 主題檢測處理單元201獲取圖像數(shù)據(jù)并執(zhí)行主題檢測處理，然后輸出檢測主題信息。
如下所述，步驟S304是這樣的處理獲得每個檢測個別主題的 圖像內(nèi)的尺寸信息，然后由主M寸檢測單元202B輸出主^寸信息。
在步驟S305，執(zhí)行主題區(qū)分處理。主題區(qū)分處理也由與圖7相 對應(yīng)的構(gòu)圖確定處理單元203和與圖8相對應(yīng)的主題區(qū)分處理單元 204執(zhí)行。
圖10例示以上步驟S305的主題區(qū)分處理的過程示例。
以與前面圖4的步驟S201相同的方式，步驟S401是這樣的過程 將l代入到變量n，變量n表示檢測個別主題被當(dāng)成區(qū)分對象的順序。 在步驟S402，確定當(dāng)前變量n是否超過個別主題的總數(shù)。在這里獲得 否定確定結(jié)果的情況下，本流程進(jìn)行到步驟S403。
在步驟S403，對與第n個檢測個別主題有關(guān)的檢測尺寸Sn和下 限K1，確定條件(條件表達(dá)式)Sn〉Kl是否成立。
在此，基于太小以至于不能被判斷為相關(guān)主題的主題尺寸來確定 下限K1。因此，在條件表達(dá)式Sn > Kl成立并且獲得肯定確定結(jié)果的 情況下，意味著第n個個別主題具有可以被處理為相關(guān)主題的量級的尺 寸。因此，在此情況下，本流程圖進(jìn)行到步驟S404,然后將第n個檢測 個別主題設(shè)定為對象個別主題(相關(guān)主題)，并輸出其檢測個別主題信息以 用于構(gòu)圖確定。在步驟S404之后，在步驟S405將變量n遞增，然后本 流程返回到步驟S402。
此外，在步驟S403獲得否定確定結(jié)果的情況下，意味著第n個檢 測個別主題不具有可以被處理為相關(guān)主題的量級的尺寸。在此情況下， 本流程跳過步驟S404，然后進(jìn)行到步驟S405，然后返回到步驟S402。 當(dāng)在步驟S402獲得肯定確定結(jié)果時，退出本圖所示的處理。
根據(jù)圖10所示的主題區(qū)分處理，確定每個檢測個別主題的圖像內(nèi) 尺寸，然后確定每個檢測個別主題是否具有可以被處理為相關(guān)主題的量 級的圖像內(nèi)尺寸，并將它們設(shè)定(區(qū)分)為相關(guān)主題，即，對象主題。
現(xiàn)在將回到圖9進(jìn)行描述。在步驟S305執(zhí)行主題區(qū)分處理之后， 執(zhí)行步驟S306的過程，在某些情況下還執(zhí)行步驟S307的過程。以與圖3的步驟S106和S107相同的方式，構(gòu)圖確定處理單元203執(zhí)行步驟 S306和步驟S307的過程。
圖12示意性地例示作為上述第二實(shí)施例的根據(jù)主題區(qū)分算法的 構(gòu)圖確定的實(shí)際示例。
如圖12所示，假設(shè)通過主題檢測處理在檢測圖像框300A中檢測 到3個主題1、 2以及3。而且，對個別主題檢測的主題l、 2以及3 的圖像尺寸分別示出為Sl、 S2以及S3。在此，假設(shè)主題1的尺寸S1 等于或小于下限Kl，主題2和3的尺寸S2和S3超過下限Kl。
在此情況下，主題區(qū)分處理僅將主題2和3區(qū)分為對象主題(相 關(guān)主題)。排除主題l，僅以主題2和3作為對象執(zhí)行構(gòu)圖確定處理。
通過圖12確定的構(gòu)像框300B與主題1、 2以及3之間的關(guān) 系來示出構(gòu)圖確定的結(jié)果。在確定的構(gòu)像框300B中，主題2和3 被設(shè)置成大約位于中間，主題1位于所確定的構(gòu)像框300B外部。 也就是說，主題1、2以及3中，以主題2和3作為對象進(jìn)行構(gòu)圖確定。
現(xiàn)在，在圖10所示的主題區(qū)分處理中，將檢測個別主題的尺寸 Sn僅與下限Kl進(jìn)行比較，而不與上限進(jìn)行比較。這是因?yàn)榇蟮臋z測 個別主題尺寸不會有問題，因此應(yīng)當(dāng)被處理為相關(guān)主題。
然而，在某些情況下，可能存在如下情形在屏面(圖像框)中存 在某個尺寸或更大尺寸的主題的情況下，優(yōu)選的是將這種主題從相關(guān) 主題中排除。因此，圖ll例示被配置成將具有某個尺寸或更大尺寸的 檢測到的個別主題從相關(guān)主題中排除的處理示例，作為步驟S305的主 題區(qū)分處理。
圖11的步驟S501、 S502、 S504以及S505與圖10的步驟S401、 S402、 S404以及S405相同。
在步驟S503,對第n個檢測個別主題尺寸Sn和上限K2(K1 < K2)， 確定條件(條件表達(dá)式)Sn <K2是否成立?；谔笠灾劣诓荒鼙惶幚?判 斷)為相關(guān)主題的主題尺寸來設(shè)定上限K2。
現(xiàn)在，在以上SiKK2成立、獲得肯定確定結(jié)果的情況下，第n個 檢測個別主題尺寸Sn是在可以被判斷為相關(guān)主題的某個尺寸之內(nèi)的合
24適尺寸，因此本流程進(jìn)行到步驟S504。相反，在這里獲得否定確定結(jié)果 的情況下，對第n個檢測個別主題，跳過步驟S504，然后本流程進(jìn)行到 步驟S505。
圖13示意性例示根據(jù)以上圖11所示的主題區(qū)分算法的構(gòu)圖確定的 實(shí)際示例。在圖13中，假設(shè)通過主題檢測處理在檢測圖像框300A中已 經(jīng)檢測到兩個主題1和2。將主題1和2的圖像尺寸分別示出為Sl和S2。
在此，假設(shè)主題1的尺寸Sl等于或大于上限K2，尺寸S2小于上 限K2。在此情況下，通過主題區(qū)分處理，僅將主題2區(qū)分為對象個別主 題，并且排除主題l，僅以主題2作為對象執(zhí)行構(gòu)圖確定處理。
通過圖13確定的構(gòu)像框300B與主題1和2之間的關(guān)系來示 出構(gòu)圖確定的結(jié)果。在確定的構(gòu)像框300B中，主題2被設(shè)置成 大約位于中間。另一方面，主題1位于所確定的構(gòu)像框300B外 部。也就是說，在主題1和2中，僅以主題2作為相關(guān)主題進(jìn)行構(gòu)圖 確定。
應(yīng)當(dāng)指出，在圖13中，檢測圖像框300A與所確定的構(gòu)像框 300B的尺寸不同。這意p木著與對檢測圖4象框300A成^f象時相比，^吏場 角變窄(增大變焦倍率(zoom power))。
此外，可以作出如下配置將小于下限Kl的主題和大于上限 K2的主題都從相關(guān)主題中排除，作為基于主題尺寸的主題區(qū)分處理。 也就是說，例如圖11中的步驟S503中的括號()所示，可以安排為 對第n個檢測個別主題尺寸、下限K1以及上限K2，確定條件Kl<Sn < K2是否成立，在獲得肯定確定結(jié)果的情況下，本流程進(jìn)行到步驟S504, 在獲得否定確定結(jié)果的情況下，跳過步驟S504，然后本流程進(jìn)行到步驟 S505。根據(jù)這種區(qū)分處理，可以在區(qū)分相關(guān)主題時從檢測到的個別主題 中排除太小和太大以至于不能被判斷為主題的那些。
此外，實(shí)際成像設(shè)備通常具有改變場角(變焦倍率)的變焦透鏡。 改變場角也會改變通過成像獲得的圖像的圖像框內(nèi)的主題尺寸。因此， 可以想到如下安排根據(jù)例如圖10和11的步驟S403和S503的改變 后的場角，改變下限K1和上限K2。作為具體示例，在步驟S403和S503進(jìn)行確定處理時，相應(yīng)于基 準(zhǔn)場角(變焦倍率值(power value"l)設(shè)定下限Kl和上限K2。通過轉(zhuǎn) 換成變焦倍率值Z，獲得通過變焦控制所獲得的場角的信息，在步驟 S403確定條件表達(dá)式Sn〉Kl Z是否成立，在步驟S503確定條件表 達(dá)式Sn<K2 Z是否成立。此外，可以安排為在步驟S403中條件表 達(dá)式為Sn/Z > Kl，在步驟S503中條件表達(dá)式為Sn/Z < K2。如可從此 理解的，可以將利用變焦倍率值Z的這些條件表達(dá)式視為對根據(jù)變焦的 圖像內(nèi)尺寸Sn變化執(zhí)4亍才交正，使得與所述閾值(下限K1和上限K2)的比 較是合適的。
圖14例示作為第三實(shí)施例的構(gòu)圖確定的基本結(jié)構(gòu)示例。將該圖 所示的構(gòu)圖確定塊200配置成具有主題檢測處理單元201、主題距離 檢測單元202A、主;liA寸檢測單元202B、構(gòu)圖確定處理單元203以及 實(shí)際主題尺寸計算單元205。
在主題檢測處理單元201，執(zhí)行與上述實(shí)施例相同的主題檢測處 理，并將檢測主題信息輸出給主題距離檢測單元202A、主M寸檢測 單元202B以及構(gòu)圖確定處理單元203中的每一個。
以與上述第一和第二實(shí)施例相同的方式，主題距離檢測單元 202A檢測每個檢測個別主題的主題距離，然后輸出主題距離信息。此 外，以與上述第一和第二實(shí)施例相同的方式，主題尺寸檢測單元202B 檢測圖像內(nèi)尺寸并輸出主題尺寸信息。
實(shí)際主題尺寸計算單元205獲得從主題距離檢測單元202A和主 題尺寸檢測單元202B輸出的每個檢測個別主題的主題距離信息和主題 尺寸信息，獲得與每個檢測個別主題相對應(yīng)的"實(shí)際尺寸"，然后輸出每 個檢測個別主題的實(shí)際尺寸信息(實(shí)際主題尺寸信息)。
現(xiàn)在，如下所述，盡管實(shí)際主題尺寸計算單元205也可以獲得檢 測個別主題實(shí)際具有的實(shí)際測量尺寸的近似精確值，但是可以例如基 于檢測個別主題的主題距離和尺寸，獲得可被視為等效于實(shí)際測量值 但是可以容易處理的值。
構(gòu)圖確定處理單元203在此情況下獲取并輸入來自主題檢測處理單元201的檢測主題信息和來自實(shí)際主題尺寸計算單元205的實(shí)際主 題尺寸信息，并利用這些信息，僅以檢測到的個別主題(相關(guān)主題)為 確定對象，最終執(zhí)行構(gòu)圖確定處理。
圖15例示作為第三實(shí)施例的與構(gòu)圖確定塊200有關(guān)的另一基本結(jié) 構(gòu)示例，其具有如下結(jié)構(gòu)其中將以上圖14的構(gòu)圖確定處理單元203 執(zhí)行的區(qū)分相關(guān)主題的處理提取出來，作為主題區(qū)分處理單元204。
主題區(qū)分處理單元204在此情況下輸入來自主題檢測處理單元 201的檢測主題信息和來自實(shí)際主題尺寸計算單元205的實(shí)際主題尺 寸信息，利用這些信息從所檢測到的個別主題區(qū)分出對象主題(相關(guān)主 題)，然后將與這些檢測到的每一個主題相對應(yīng)的檢測個別主題信息輸 出給構(gòu)圖確定處理單元203。構(gòu)圖確定處理單元203基于來自主題區(qū) 分處理單元204的每個對象主題的檢測個別主題信息，僅以檢測到的 個別主題(相關(guān)主題)作為確定對象來執(zhí)行構(gòu)圖確定處理。
圖16的流程圖例示與以上圖14或圖15所示的第三實(shí)施例相對應(yīng) 的構(gòu)圖確定塊200執(zhí)行的處理過程示例。
在步驟S601到S603,按例如與圖3等的步驟S101到S103相同的 方式，主題檢測處理單元201獲取圖像數(shù)據(jù)，然后執(zhí)行主題檢測處理， 并輸出檢測主題信息。
在步驟S604，主題距離檢測單元202A檢測每個檢測個別主題的 主題距離，然后輸出主題距離信息。
在步驟S605,主題尺寸檢測單元202B獲得圖像的每個檢測個別主 題的尺寸，然后將其輸出為主題尺寸信息。
注意，盡管由于流程圖中標(biāo)注的原因，將步驟S604和S605例示為 順序處理，但是可以將這些步驟視為與圖14和15相對應(yīng)地同時且并行 執(zhí)行的處理。
步驟S606是如下處理實(shí)際主題尺寸計算單元205計算并獲得 每個檢測個別主題的實(shí)際尺寸。如上所述，可以獲得被處理成與實(shí)際 測量尺寸等效的值(簡單值)作為實(shí)際尺寸。以下是如何獲得實(shí)際尺寸 作為該簡單值的示例。實(shí)際主題尺寸計算單元205獲取在步驟S604獲得的主題距離信 息和在步驟S605獲得的主題尺寸信息。在主題距離信息中表示了每個 檢測個別主題的主題距離，在主題尺寸信息中表示了每個檢測個別主 題的圖像內(nèi)尺寸信息。而且，這里的圖像內(nèi)尺寸信息是采用檢測到所 檢測的個別主題的部分圖像區(qū)域中的垂直像素的數(shù)量來表示。也就是 說，圖像內(nèi)尺寸不是檢測到所檢測的個別主題的部分圖像區(qū)域的面積， 而是等效于沿一維方向的長度的量。注意，可以采用水平像素的數(shù)量 來代替垂直像素的數(shù)量。
現(xiàn)在，實(shí)際主題尺寸計算單元205可以通過
Srn = Dn Fyn …表達(dá)式(1) 來獲得第n個檢測個別主題的實(shí)際尺寸Srn，其中Dn是相同的第n 個檢測個別主題的主題距離，F(xiàn)yn是尺寸(垂直像素的數(shù)量)。
根據(jù)以上表達(dá)式(l)獲得的實(shí)際尺寸Srn是主題距離與作為尺寸 的垂直像素數(shù)量的乘積，從而獲得與所檢測的真實(shí)個別主題的實(shí)際測 量尺寸毫無疑義地對應(yīng)的數(shù)值Srn。也就是說，獲得了被處理為等效 于實(shí)際測量尺寸的值(簡單值)。而且，也可以將根據(jù)以上表達(dá)式(l)荻 得的實(shí)際尺寸Srn視為如下的計算，即，按照圖像內(nèi)尺寸(垂直像素數(shù) 量)以設(shè)定為基準(zhǔn)的主題距離(例如lm)，對成像時獲得的檢測到的個 別主題進(jìn)行歸一化。
注意，也可以通過 Srn = sqrt(DnA2 Sn)…表達(dá)式(2) 來獲得實(shí)際尺寸Srn，其中Dn表示對第n個檢測個別主題所檢測的 主題距離，Sn表示第n個檢測個別主題的被檢測為面積的圖像內(nèi)尺寸。 此外，sqrt表示平方纟艮，A表示冪。
同樣，如上所述，可獲得與所檢測的真實(shí)個別主題的實(shí)際測量尺 寸近似對應(yīng)的實(shí)際尺寸Srn。為此，假設(shè)場角固定以簡化描述，利用 成像圖像的垂直像素數(shù)量py，成像圖像與設(shè)定為基準(zhǔn)的主題距離(例 如1 m)相對應(yīng)的在圖像框的垂直方向的實(shí)際尺寸Sy，與主題距離 Dn(m)和尺寸(垂直像素數(shù)量)Fyn —起作為參數(shù)，可以通過例如以下計算來獲得Srn。
Srn = Sy {(Dn Fyn)/py}…表達(dá)式(3)
步驟S607是主題區(qū)分處理。主題區(qū)分處理由與圖14相對應(yīng)的構(gòu) 圖確定處理單元203執(zhí)行，并且由與圖15相對應(yīng)的主題區(qū)分處理單元 204執(zhí)行。
圖17例示以上步驟S607的主題區(qū)分處理的過程示例。在該圖中， 步驟S701、 S702、 S704以及S705與例如圖4的步驟S201、 S202、 S204 以及S205相同。
在步驟S703，針對在步驟S606獲得的第n個檢測個別主題的實(shí)際 尺寸Srn、上限Kmax以及下限Kmin，來區(qū)分條件
Kmax >Srn > Kmin 是否成立。
現(xiàn)在，考慮太大以至于作為正常主題是不切實(shí)際的實(shí)際尺寸的情 況下，設(shè)定上限Kmax，并且在考慮太小以至于作為正常主題是不切 實(shí)際的實(shí)際尺寸的情況下，設(shè)定下限Kmin。
因此，實(shí)際尺寸Srn滿足條件Kmax >Srn > Kmin的情況下，可 以說實(shí)際尺寸Srn在可以被視為正常主題的合適范圍內(nèi)。這意味著可以 將與實(shí)際尺寸Srn相對應(yīng)的檢測個別主題判斷為相關(guān)主題。
因此，根據(jù)本實(shí)施例，在步驟S703獲得肯定確定結(jié)果的情況下， 在步驟S704將第n個檢測個別主題設(shè)定為對象個別主題。
另一方面，在實(shí)際尺寸Srn不滿足條件Kmax >Srn > Kmin的情 況下，這是Srn2Kmax或Srii《Kmiii之一成立的情況。也就是說，實(shí) 際尺寸Srn具有比可被認(rèn)為是普通主題的范圍更小或更大的值。這意味 著不應(yīng)當(dāng)將與實(shí)際尺寸Srn相應(yīng)的檢測個別主題判斷為相關(guān)主題。
因此，在步驟S703獲得否定確定結(jié)果的情況下，跳過步驟S704， 然后本流程進(jìn)行到步驟S705。
這樣，根據(jù)圖17所示的主題區(qū)分處理，將具有在可被判斷為相 關(guān)主題的合適范圍內(nèi)的實(shí)際尺寸的每個檢測到的個別主題設(shè)定(區(qū)分) 為對象主題(相關(guān)主題)。在執(zhí)行步驟S607的主題區(qū)分處理之后，執(zhí)行步驟S608的過程， 并且在某些情況下執(zhí)行步驟S609的過程。按與圖3的步驟S106和S107 相同的方式，步驟S608和步驟S609的過程由構(gòu)圖確定處理單元203 執(zhí)行。
圖20A到21D示意性地例示根據(jù)以上圖16和17所示的主題區(qū) 分算法的構(gòu)圖確定的實(shí)際示例。
首先，圖20A到20D例示執(zhí)行構(gòu)圖確定的示例，其排除將實(shí)際 尺寸太小以至于不能被判斷為相關(guān)主題的主題。
在圖20A，假設(shè)在檢測圖像框300A中已經(jīng)檢測到3個主題1、 2 以及3。假設(shè)對主題l、 2以及3中的每一個檢測的圖像內(nèi)尺寸由例如 與基于面孔檢測而檢測的主題相對應(yīng)的矩形檢測框中的垂直像素數(shù)量 來表示。將主題1的根據(jù)垂直像素數(shù)量的尺寸示為Fyl，將主題2的 示為Fy2，將主題3的示為Fy3。此外，在圖20B到20D分別示出主 題l、 2以及3的基于對比度方法而檢測的相應(yīng)主題距離Dl、 D2以及 D3。
首先，我們假設(shè)對各主題1、 2以及3檢測的主題距離Dl、 D2 以及D3在可被視為大約相同值的范圍內(nèi)。
另一方面，對于尺寸，我們假i殳主題2和3的尺寸Fy2和Fy3 是與其主題距離D2和D3相比較可以被判斷為相關(guān)主題的合適尺寸， 主題1的尺寸Fyl是太小以至于與其主題距離Dl相比較不能被判斷 為相關(guān)主題的尺寸。
然后我們假設(shè)在圖17的步驟S703后，如圖20A到20D所示對 各主題l、 2以及3獲得的實(shí)際尺寸Srl、 Sr2以及Sr3的確定結(jié)果是， 對于實(shí)際尺寸Srl, Srl《Kmin成立，而Kmax > Srl > Kmin不成立， 因此獲得了否定確定結(jié)果。另一方面，對于實(shí)際尺寸Sr2， Kmax>Sr2> Kmin成立，對于實(shí)際尺寸Sr3， Kmax > Sr3 > Kmin也成立。在此情況 下，將主題2和3區(qū)分為相關(guān)主題(對象主題)，而排除主題l，作為主題 區(qū)分處理的結(jié)果。排除主題1并且僅以主題2和3作為對象執(zhí)行構(gòu)圖確 定處理。通過圖20A確定的構(gòu)像框300B與主題1、 2以及3之間的 關(guān)系示出構(gòu)圖確定的結(jié)果。主題2和3位于確定的構(gòu)像框300B 的中間附近。另一方面，主題1在確定的構(gòu)像框300B之外。
此外，圖21A到21D例示執(zhí)行構(gòu)圖確定的示例，其排除將其實(shí) 際尺寸太大以至于不能被判斷為相關(guān)主題的主題。
在圖21A,同樣，假設(shè)在檢測圖像框300A中已經(jīng)通過主題檢測 處理檢測到3個主題1、 2以及3。同樣，這里對主題l、 2以及3中 的每一個檢測的圖像內(nèi)尺寸由例如基于面孔檢測而檢測的主題的矩形 檢測框中的垂直像素數(shù)量來表示。將主題l的根據(jù)垂直像素數(shù)量的圖 像內(nèi)尺寸示為Fyl，將主題2的示為Fy2，將主題3的示為Fy3。此夕卜， 在圖21B到21D分別示出主題l、 2以及3的基于對比度方法而檢測 的相應(yīng)主題距離Dl、 D2以及D3。
這里，同樣，首先我們假設(shè)對各主題l、 2以及3檢測的主題距 離Dl、 D2以及D3在可以被視為大約相同值的范圍內(nèi)。
同樣，對于尺寸，我們假設(shè)主題2和3的尺寸Fy2和Fy3是與其 主題距離D2和D3相比較可以被判斷為相關(guān)主題的合適尺寸，主題l 的尺寸Fyl是太大以至于與其主題距離Dl相比較不能被判斷為相關(guān) 主題的尺寸。
然后我們假設(shè)在圖17的步驟S703之后，如圖21A到21D所示 對各主題l、 2以及3獲得的實(shí)際尺寸Srl、 Sr2以及Sr3的確定結(jié)果 是，對于實(shí)際尺寸Srl， Srl2Kmax成立，而Kmax > Srl > Kmin不成 立，因此獲得了否定確定結(jié)果。另 一方面，對于實(shí)際尺寸Sr2 ， Kmax > Sr2 > Kmin成立，對于實(shí)際尺寸Sr3, Kmax > Sr3 > Kmin也成立。在此情 況下，將主題2和3區(qū)分為相關(guān)主題(對象主題)，而排除主題l,作為主 題區(qū)分處理的結(jié)果。排除主題l并且僅以主題2和3作為對象執(zhí)行構(gòu)圖 確定處理。
通過圖21A確定的構(gòu)像框300B與主題1、 2以及3之間的 關(guān)系示出構(gòu)圖確定的結(jié)果。主題2和3位于確定的構(gòu)像框300B 的中間附近。另一方面，主題1在確定的構(gòu)像框300B之外。還
31應(yīng)當(dāng)指出，在圖21A,同樣，檢測圖像框300A與所確定的構(gòu)像 框300B的尺寸不同。這意味著，與圖13—樣，與對檢測圖像框300A 進(jìn)行成像時相比，使場角變窄(增大變焦倍率)。
現(xiàn)在，將給出步驟S703的處理使用的上限Kmax和下限Kmin 的具體示例。注意，將假設(shè)與場角相對應(yīng)的變焦倍率是固定的，以便于 進(jìn)行簡單且容易理解的描述。
我們假設(shè)圖22中的(a)和(b)都是通過在1 m的主題距離上對主題 1和2成像而獲得的圖像。我們假設(shè)圖像的圖像框300在垂直方向具 有240px，并且在水平方向具有320 px。對圖像框300中的主題l和 2的圖像內(nèi)尺寸(垂直像素數(shù)量)的比較表明主題1較大，具有160 px， 主題2較小，具有40 px?，F(xiàn)在，首先我們假設(shè)1 m的主題距離是基 準(zhǔn)值。因此，我們將把在1 m的基準(zhǔn)主題距離上成像的具有160px或 更大以及具有40 px或更小的主題圖像內(nèi)尺寸的主題從相關(guān)主題排除。
這些主題是當(dāng)在1 m的基準(zhǔn)主題距離上成像時垂直方向的尺寸 在圖像中占2/3(即160/240)或更大的主題，和垂直方向的尺寸在圖像 中占1/6(即40/240)或更小的主題。這些主題落在相關(guān)主題的合適實(shí)際 測量尺寸范圍之外，并且它們是照片、海報等的概率很高，因此被處 理成應(yīng)當(dāng)從相關(guān)主題排除的主題。
據(jù)此，將Kmax 二 160和Kmin = 40分別設(shè)定為上限Kmax和下 限Kmin的具體值。在此情況下，步驟S703的條件表達(dá)式Kmax > Srn > Kmin實(shí)際上是160 > Srn > 40。
如上所述，將實(shí)際尺寸Srn表示為例如主題距離Dn (m)與圖像內(nèi) 尺寸(垂直像素數(shù)量)Fyn之積，即(Dn.Fyn)。
根據(jù)以上條件表達(dá)式，主題1的實(shí)際尺寸Srl是Dl Fyl = 1 x 160 =160，因此在步驟S703，獲得否定確定結(jié)果。也就是說，將其從相關(guān)主 題排除。此外，主題2的實(shí)際尺寸Sr2是D2'Fy2-lx40二40，因此 在步驟S703,在此同樣獲得否定確定結(jié)果，因此將其從相關(guān)主題排除。
這樣，通過設(shè)定上限Kmax = 160和下限 = 40，根據(jù)"將在 1 m的基準(zhǔn)主題距離下成4象的具有160 px或更大、以及40 px或更小的圖像內(nèi)尺寸的那些主題從相關(guān)主題排除"的規(guī)則，獲得步驟S703的處理 結(jié)果。
此外，圖22((0例示在主題距離=2 111，使用與圖22(a)相同的上限 Kmax,相應(yīng)地通過對主題l進(jìn)行成像而獲得的圖像。在此情況下的主題 距離是圖22的(a)的情況的兩倍，因此在圖像框300內(nèi)主題l的圖像內(nèi)尺 寸(垂直像素數(shù)量)是80 px，其為圖22(a)的160 px的1/2。
此外，圖22(d)例示在主題距離-2m，使用與圖22(b)相同的下限 Kmin，相應(yīng)地通過對主題2進(jìn)行成像而獲得的圖像。在此情況下，在圖 像框300內(nèi)主題2的圖像內(nèi)尺寸(垂直像素數(shù)量)是20 px，其為圖22(b) 的40 px的1/2。
根據(jù)在此設(shè)定的規(guī)則，即"將在l m的基準(zhǔn)主題距離下成像的具 有160 px或更大以及40 px或更小的圖像內(nèi)尺寸的那些主題從相關(guān)主題 排除"的規(guī)則，將把在2m的基準(zhǔn)主題距離下成像的如圖22(c)所示的具 有80 px或更大的圖像內(nèi)尺寸、或如圖22(d)所示的具有20 px或更小的 圖像內(nèi)尺寸的主題從相關(guān)主題排除。
例如，在步驟S703要對圖22(c)所示主題1進(jìn)行確定的情況下， 對于實(shí)際尺寸Srl，獲得Srl-Dl 'Fyl =2 x 80 = 160。同樣，在步驟 S703要對圖22(d)所示主題2進(jìn)行確定的情況下，對于實(shí)際尺寸Sr2, 獲得Sr2 二 D2 Fy2= 2 x 20 = 40。
可以根據(jù)通過以上計算獲得的主題1和2的實(shí)際尺寸Srn理解， 在實(shí)際中通過步驟S703的處理，具有比圖22(c)所示主題1更大的尺 寸的主題和具有比圖22(d)所示主題2更小的尺寸的主題都會得到否 定確定結(jié)果，因此根據(jù)所設(shè)定的規(guī)則，這些主題將被從相關(guān)主題排除。
此外，在該第三實(shí)施例中，如第二實(shí)施例的情況那樣，在主題區(qū) 分處理時，對于檢測到的個別主題使用圖像內(nèi)尺寸的信息。因此，對 于第三實(shí)施例的主題區(qū)分處理，同樣可以想到與成像設(shè)備的場角(變焦 倍率)的變化相對應(yīng)的算法，成像設(shè)備用于成像并獲得從主題檢測處理 單元201輸入的圖像數(shù)據(jù)。
圖18的流程圖示出與成像設(shè)備的場角(變焦倍率)相對應(yīng)的主題區(qū)分處理。以與圖17相同的方式，圖示的處理也作為圖16的步驟S607 被執(zhí)行。
在圖18，步驟S801， S802, S804以及S805是與步驟S701， S702, S704 以及S705相同的處理。
在步驟S803，確定條件Kmax〉Srn/Z〉Kmin是否成立，該條件 包括根據(jù)此時在成像設(shè)備中設(shè)定的場角而荻得的變焦倍率Z的值。注意， 與lx的變焦倍率(即，Z = l)相應(yīng)地設(shè)定此情況下的上限Kmax和下限 Kmin。
根據(jù)該條件表達(dá)式，無論變焦倍率如何變化，都將實(shí)際尺寸校正 為變焦倍率Z = 1的值，并且可以將其與上限Kmax和下限Kmin適當(dāng) 比較。因此，還可以將使用該主題區(qū)分算法的構(gòu)圖確定應(yīng)用于使用具有 變焦(場角變化)功能的成像設(shè)備。
此外，注意上述條件表達(dá)式可以是Kmax Z>Srn>Kmin Z。
此外，根據(jù)目前的情況，面孔識別技術(shù)的進(jìn)展已經(jīng)使得能夠根據(jù) 諸如被檢測為面孔的部分圖像區(qū)域中的特征量之類的信息，以相當(dāng)高 的精度來確定作為主題的人是成人還是兒童(或嬰兒)。
通常，成人與兒童之間面孔尺寸是不同的。即使在同 一主題距離， 作為主題時，所檢測的圖像尺寸也將顯著不同。因此，在區(qū)分參數(shù)中 包括圖像內(nèi)尺寸要素時，如第二實(shí)施例或第三實(shí)施例那樣，通過考慮 成人/兒童的確定結(jié)果來執(zhí)行主題區(qū)分，甚至可以進(jìn)一步提高主題區(qū)分 的精度。
現(xiàn)在，將描述如下情況的結(jié)構(gòu)示例將應(yīng)用成人/兒童確認(rèn)結(jié)果 的主題區(qū)分算法應(yīng)用于第三實(shí)施例。
首先，圖14或圖15的主題檢測處理單元201被配置為在執(zhí)行主 題檢測時遵循執(zhí)行預(yù)定成人/兒童判定算法的處理，確定每個檢測個別 主題是成人還是兒童，作為其屬性(屬性信息)。然后主題檢測處理單 元201基于成人/兒童判定結(jié)果，提供每個檢測個別主題的檢測個別主 題信息，該信息帶有表示是成人還是兒童的屬性信息(成人/兒童屬性 信息)。至于圖14和15中與屬性確定相對應(yīng)的塊配置形式，可以安排， 例如，與主題檢測處理單元201分離地提供用于屬性確定的塊(屬性確 定處理單元)。在此情況下，例如，屬性確定處理單元對來自主題檢測 處理單元201的檢測主題信息所指示的每個個別主題，對輸入的圖像 數(shù)據(jù)中檢測到面孔的部分圖像區(qū)域執(zhí)行屬性確定處理，例如識別是成 人還是兒童?？梢韵氲匠鋈缦屡渲酶鶕?jù)所述識別結(jié)果，生成表示是 成人還是兒童的屬性信息，然后將該信息添加到檢測主題信息中的檢 測個別主題信息中。
于是，例如，圖14和15所示的第三實(shí)施例的構(gòu)圖確定塊200中 的構(gòu)圖確定處理單元203執(zhí)行圖19的流程圖所示的處理。在該圖中， 步驟S901， S卯2， S卯5以及S906與例如圖17的步驟S701, S702, S705 以及S706相同。
在此情況下，在步驟S902獲得否定確定結(jié)果的情況下，執(zhí)行步 驟S903的過程。
在步驟S903，查詢與第n個檢測個別主題相對應(yīng)的檢測個別主 題信息中的成人/兒童屬性信息，以識別是成人還是兒童，然后基于該 識別結(jié)果來設(shè)定屬性系數(shù)An 。
注意，屬性系數(shù)An具有根據(jù)是成人還是兒童而預(yù)先設(shè)定的不同 值。對于兒童，為屬性系數(shù)An設(shè)定與成人屬性系數(shù)An相比更大的值。
在以下步驟S904,利用圖16的步驟S606獲得的實(shí)際尺寸Srn 和在步驟S903獲得的屬性系數(shù)An來確定條件(條件表達(dá)式)
Kmax > Srn An > Kmin 是否成立，并且在成立的情況下，在步驟S905將第n個檢測個別主 題設(shè)定為相關(guān)主題(對象個別主題)，但是在獲得否定確定結(jié)果的情況 下，跳過步驟S905的過程，然后本流程進(jìn)行到步驟S906。
現(xiàn)在，作為最簡單的示例，假設(shè)與成人相對應(yīng)的屬性系數(shù)An=l， 并且與兒童相對應(yīng)的屬性系數(shù)An=1.5。這假設(shè)如下理由平均來說， 將兒童面孔的檢測框的上下(垂直)尺寸和側(cè)向(水平)尺寸各自乘以1.5 會得到與成人面孔的檢測框的尺寸相等的尺寸。
35在此情況下，條件表達(dá)式Kmax > Srn An > Kmin對于成人來說 成為Kmax > Srn > Kmin，而對于兒童來i兌成為Kmax > 1.5 Srn > Kmin。也就是說，在此情況下，通過輸入兒童面孔的實(shí)際尺寸并將其轉(zhuǎn) 換為成人面孔的實(shí)際尺寸，通過對在步驟S904使用的條件表達(dá)式的項(xiàng) Srn An規(guī)范化(normalize)，可以使用相同的上限K max和下卩艮Kmin。 因此，可以將步驟S卯4使用的條件表達(dá)式(通用表達(dá)式)寫成Kmax/An > Srn > Kmin/An。
如根據(jù)以上描述可以理解的那樣，步驟S904的條件表達(dá)式與對 應(yīng)于成人的情況下的圖17中相同，因此略去對其的描述，而描述對應(yīng) 于兒童的情況。
利用與作為兒童的第n個檢測個別主題相對應(yīng)的條件表達(dá)式 Kmax > 1.5 rn > Kmin,首先，在獲得1.5 Srn》Kmax并且獲得否定 確定結(jié)果的情況下，作為兒童的檢測個別主題的實(shí)際尺寸大于通常預(yù)期 的尺寸。這可以認(rèn)為是如下情況例如，被顯著放大的面孔照片或海報 等被檢測為個別主題。
而且，在獲得1.5 Srn《Kmin并且獲得獲得否定確定結(jié)果的情況 下，作為兒童的檢測個別主題的實(shí)際尺寸小于通常預(yù)期的尺寸。這可以 認(rèn)為是如下情況如成人情況那樣，例如，將非常小的兒童面孔照片檢 測為個別主題。
這樣，在步驟S904,即使在將不同尺寸的兒童和成人檢測為共 存的個別主題的情況下，基于與其相對應(yīng)的實(shí)際尺寸來適當(dāng)執(zhí)行主題 區(qū)分處理。
圖23例示作為第三實(shí)施例在考慮成人/兒童判定結(jié)果的情況下的 主題區(qū)分以及對應(yīng)的構(gòu)圖確定的示意性示例。注意，在本說明書中， 本描述中使用以上圖22給出的上限Kmax和下限Kmin的具體值。也 就是說，已經(jīng)設(shè)定上限Kmax-160和下限Kmin-40。此外，與上述情 況相同，對于成人，將屬性系數(shù)An設(shè)定為1，對于兒童，設(shè)定為1.5。 在該圖中，首先，在檢測圖像框300A中檢測到兩個主題1和2。在此情 況下檢測圖 <斜匡300A分別具有320 px的水平尺寸和240 px的垂直尺寸。假設(shè)根據(jù)檢測個別主題信息的成人/兒童屬性信息，表明主題1 是兒童。另一方面，根據(jù)檢測個別主題信息的成人/兒童屬性信息，表
明主題2是成人。
此外，假設(shè)對主題l和2檢測的主題距離都是lm。此外，假設(shè) 對于主題1和2檢測的圖像內(nèi)尺寸(垂直像素數(shù)量)都是120 px。
在此情況下，主題l和2都位于同一主題距離，但是分別是成人 和兒童，因此其圖像內(nèi)尺寸應(yīng)當(dāng)實(shí)際上不同，與實(shí)際尺寸不同相一致 (兩者都是真實(shí)的人)。然而，檢測的圖像內(nèi)尺寸都是120 px，并且具 有相同的圖像內(nèi)尺寸?，F(xiàn)在，例如當(dāng)在真實(shí)成人的情況下對一般真實(shí) 測量主題成像時，獲得120 px的尺寸，其為圖像框垂直尺寸240 px 的1/2。這意味著作為兒童的主題1對于真實(shí)的人來說異常地大。在此， 我們可以說這是因?yàn)橹黝}1是例如顯著放大的照片等。應(yīng)當(dāng)將這種照 片主題從相關(guān)主題排除。
這種情況下，首先，在步驟S904確定主題1時，
Srl An = Dl Fyl An = 1 x 120 x 1.5 = 180 成立。這意p未著項(xiàng)1.5 Srn具有值180，其大于上限值Kmax = 160, 因此在步驟S卯4荻得否定確定結(jié)果。也就是說，例如被判斷為兒童等的 照片的主題1不被設(shè)定為相關(guān)主題(對象個別主題)，而是將其排除。
相反，接下來，在步驟S904確定主題2時，
Sr2 An = D2 Fy2 An = 1 x 120 x 1 = 120 成立，并且Kmax > Srn An > Kmin成立，因此獲得肯定確定結(jié)果。因 此，將成人主題1設(shè)定為相關(guān)主題(對象個別主題)，并用于構(gòu)圖確定處理。
在圖23通過確定的構(gòu)像框300B與主題1和2之間的位置關(guān) 系來示出此時的構(gòu)圖確定處理結(jié)果。如圖所示，所確定的構(gòu)像框 300B中，將作為成人的主題2定位成大約位于中央，由于具有合適的 圖像內(nèi)尺寸。另一方面，作為兒童的主題1在確定的構(gòu)像框300B 以外，因?yàn)樗褟臉?gòu)圖確定排除。
在此情況下，同樣，已經(jīng)將變焦倍率設(shè)定為很高以增大主題2的 圖像內(nèi)尺寸，因此，將該圖的確定的構(gòu)像框300B示出為比檢測圖像框300A相對較小。
注意，實(shí)際檢測圖像框300A和確定的構(gòu)像框300B的尺寸 都是320 px x 240 px。此外，主題2在確定的構(gòu)像框300B中的尺寸 (垂直像素數(shù)量)是比120 px更大的根據(jù)變焦倍率的預(yù)定值。
此外，盡管略去通過流程圖等中的例示方式的描述，但是還可以
將使用屬性系數(shù)An的主題區(qū)分應(yīng)用于考慮變焦倍率的主題區(qū)分，其 示于圖18。在此情況下，可以配置為在例如圖18的步驟S803的處 理之前，根據(jù)成人/兒童判定結(jié)果來設(shè)定屬性系數(shù)An，在步驟S803中， 確定Kmax > Srn An/Z 〉Kmin(其中Z為變焦倍率)是否成立。
注意，還可以將考慮成人/兒童判定結(jié)果的主題區(qū)分處理應(yīng)用于 僅使用圖像內(nèi)尺寸作為區(qū)分參數(shù)的第二實(shí)施例。
也就是說，在此情況下，同樣，在使用主題檢測處理單元201進(jìn) 行主題檢測處理時，對每個檢測個別主題執(zhí)行成人/兒童屬性確定，然 后將成人/兒童屬性信息包括在每個檢測個別主題信息中。此外，在例 如圖10的步驟S403的處理之前，根據(jù)成人/兒童判定結(jié)果來獲得屬性 系數(shù)An。在步驟S403，對于以面積表示的尺寸Sn,確定Sn〉K1. AnA2(其中A表示冪)是否成立。注意在要使用垂直(或水平)像素數(shù)量的 Fyn、而不使用根據(jù)面積的尺寸Sn的情況下，確定Fyn > Kl An是否 成立。圖11的步驟S503的情況也是如此。
盡管以上示例中描述對成人/兒童的兩個選項(xiàng)進(jìn)行確定，以簡化 并便于本說明書的理解，但是目前可以確定其他選項(xiàng)，如成人、兒童 以及嬰兒。因此，根據(jù)本實(shí)施例，可以安排為對例如成人、兒童以 及嬰兒的三個選項(xiàng)進(jìn)行確定，然后根據(jù)確定結(jié)果來設(shè)定3個不同的屬 性系數(shù)An，以執(zhí)行主題區(qū)分處理。
此外，在以上示例中，僅將人作為對象，但是可以安排為在主 題檢測處理的狀態(tài)下對主題進(jìn)行檢測，例如不僅區(qū)分人，而且還區(qū)分 諸如狗、貓等的動物，在主題檢測處理中使用為人和動物類型等設(shè)定 的屬性系數(shù)An，對人和動物的每一個執(zhí)行相關(guān)主題的區(qū)分處理。因此 可以說，對于這些主題存在的情況，根據(jù)屬性系數(shù)An確定的主題屬性與實(shí)際測量中的尺寸差異相關(guān)聯(lián)。
利用根據(jù)至此描述的第 一示例到第三示例的構(gòu)圖確定塊200的結(jié) 構(gòu)，也就是說，利用根據(jù)本實(shí)施例的基本構(gòu)圖確定結(jié)構(gòu)，利用檢測個 別主題的主題距離、圖像內(nèi)尺寸以及實(shí)際尺寸之一來執(zhí)行相關(guān)主題區(qū) 分。注意，還將主題距離、圖像內(nèi)尺寸以及實(shí)際尺寸總稱為"區(qū)分參 數(shù)，，。
這樣，基于如上所述的作為區(qū)分參數(shù)的主題距離、圖像內(nèi)尺寸以 及實(shí)際尺寸，對主題的區(qū)分處理排除了例如主題距離過近或過遠(yuǎn)、具 有超過正常范圍的圖像內(nèi)尺寸、或者實(shí)際尺寸太大或太小的主題。因
的值是否在對相關(guān)主題適當(dāng)設(shè)定的值(范圍值)之內(nèi)。
根據(jù)上述主題區(qū)分處理，僅對合適的并且適合作為相關(guān)主題的主 題進(jìn)行精確區(qū)分，因此，可以提供例如一種構(gòu)圖確定裝置，其在能力 和使用簡易性方面優(yōu)于現(xiàn)有技術(shù)的構(gòu)圖確定裝置。
可以將至此描述的根據(jù)本實(shí)施例的構(gòu)圖確定配置應(yīng)用于很多類 型的裝置、系統(tǒng)等。因此，接下來將描述幾種裝置示例和根據(jù)本實(shí)施 例的構(gòu)圖確定配置的應(yīng)用的系統(tǒng)配置示例。
首先，將描述根據(jù)本實(shí)施例的構(gòu)圖確定在由數(shù)字靜態(tài)攝像機(jī)和該 數(shù)字靜態(tài)攝像機(jī)所安裝到的平臺構(gòu)成的成像系統(tǒng)上的應(yīng)用。與本實(shí)施 例相應(yīng)的成像系統(tǒng)使得能夠根據(jù)通過構(gòu)圖確定而確定的構(gòu)圖來執(zhí)行靜 態(tài)圖像成像和記錄。
圖24例示根據(jù)本實(shí)施例的從正面觀察的成像系統(tǒng)的外部結(jié)構(gòu)示 例。如圖所示，根據(jù)本實(shí)施例的成像系統(tǒng)由數(shù)字靜態(tài)攝像機(jī)1和平臺 IO構(gòu)成。
數(shù)字靜態(tài)攝像機(jī)1基于使用提供給主單元前端面板的透鏡單元3 成像而獲得的成像光，生成靜態(tài)圖像數(shù)據(jù)，并且可以將其存儲在內(nèi)部 安裝的存儲介質(zhì)中。也就是說，數(shù)字靜態(tài)攝像機(jī)l具有將拍攝成照片 的圖像存儲并保存在存儲介質(zhì)中作為靜態(tài)圖像數(shù)據(jù)的功能。在手動執(zhí) 行這種攝影成像的情況下，用戶按壓設(shè)置于主單元上表面的快門(釋放)按鈕。
平臺10可以安裝數(shù)字靜態(tài)攝像機(jī)l，使得數(shù)字靜態(tài)攝像機(jī)1固定 于平臺10。也就是說，數(shù)字靜態(tài)攝像機(jī)1和平臺10都具有使得能夠 相互接合的機(jī)械部分。平臺IO具有沿?fù)u攝方向(水平方向)和傾斜方向
移動所安裝的數(shù)字靜態(tài)攝像機(jī)1的搖攝/傾斜機(jī)構(gòu)。
例如圖25A和25B示出平臺10的搖攝/傾斜機(jī)構(gòu)所允許的數(shù)字靜 態(tài)攝像機(jī)1的搖攝方向和傾斜方向的運(yùn)動。圖25A和25B是安裝于平 臺10的數(shù)字靜態(tài)攝像機(jī)1的從平面和側(cè)面方向的視圖。
首先，對于搖攝方向，在數(shù)字靜態(tài)攝像機(jī)1的側(cè)向方向與圖25A 的線XI是作為基準(zhǔn)的相同方向的位置狀態(tài)，以轉(zhuǎn)動軸Ct 1為轉(zhuǎn)動中 心沿轉(zhuǎn)動方向+o4t轉(zhuǎn)，提供向右方向的搖攝運(yùn)動。此外，沿轉(zhuǎn)動方向 -a旋轉(zhuǎn)，提供向左方向的搖攝運(yùn)動。
接下來，對于傾斜方向，在數(shù)字靜態(tài)攝像機(jī)1的垂直方向與線 Yl是作為基準(zhǔn)的相同方向的位置狀態(tài)，以轉(zhuǎn)動軸Ct 2為轉(zhuǎn)動中心沿 轉(zhuǎn)動方向+P旋轉(zhuǎn)，提供向下方向的搖攝運(yùn)動。此外，沿轉(zhuǎn)動方向-P旋 轉(zhuǎn)，提供向上方向的搖攝運(yùn)動。
盡管未具體提及圖25A和25B中土a方向和土(3方向的最大轉(zhuǎn)動 角，但是可以說，如果考慮到增大捕獲主題的機(jī)會，則期望最大轉(zhuǎn)動角 盡可能地大。
圖26內(nèi)部例示根據(jù)本實(shí)施例的成像系統(tǒng)，作為與每個功能操作 相對應(yīng)的塊結(jié)構(gòu)。
在圖26,數(shù)字靜態(tài)攝像機(jī)l包括成像塊61、構(gòu)圖確定塊62、搖 攝/傾斜/變焦控制塊63、以及通信控制處理塊64。
成像塊61是輸出通過成像獲得的圖像作為圖像信號數(shù)據(jù)(成像圖 像數(shù)據(jù))的部件，并且包括用于成像的光學(xué)系統(tǒng)、成像裝置(圖像傳感 器)、用于根據(jù)從成像裝置輸出的信號生成成像圖像數(shù)據(jù)的信號處理電 路，等等。
構(gòu)圖確定塊62獲取并輸入從成像塊61輸出的成像圖像數(shù)據(jù)，然 后基于成像圖像數(shù)據(jù)執(zhí)行進(jìn)行構(gòu)圖確定的處理。對于構(gòu)圖確定塊62，可以采用前面在第一到第三實(shí)施例的圖1、 2、 7、 8、 14以及15示出 的任一構(gòu)圖確定塊200。也就是說，構(gòu)圖確定塊62可以對成像圖像數(shù) 據(jù)的圖像中存在的主題中的僅作為對象的相關(guān)主題，執(zhí)行構(gòu)圖確定。
搖攝/傾斜/變焦控制塊63執(zhí)行獲得某個成像視角的搖攝/傾斜/變 焦控制(構(gòu)圖控制)，以獲得從構(gòu)圖確定塊6 2輸入的構(gòu)圖確定結(jié)果的信 息所指示的成像圖像構(gòu)圖。
也就是說，獲得平臺10的搖攝/傾斜機(jī)構(gòu)的運(yùn)動量，數(shù)字靜態(tài)攝 像機(jī)1必須移動該運(yùn)動量，使得成像方向符合構(gòu)圖結(jié)果所表示的構(gòu)圖， 然后生成搖攝/傾斜/變焦控制信號以根據(jù)所獲得的運(yùn)動量來指示運(yùn) 動。
此外，獲得變焦位置以獲得某個場角，以獲得構(gòu)圖結(jié)果所表示的 成像圖像構(gòu)圖，然后控制成像塊61的變焦機(jī)構(gòu)以達(dá)到該變焦位置。
通信控制塊64是根據(jù)預(yù)定通信協(xié)議與設(shè)置于平臺IO側(cè)的通信控 制塊71執(zhí)行通信的部件。通過通信控制塊64執(zhí)行的通信，將搖攝/ 傾斜/變焦控制塊63生成的搖攝/傾斜控制信號發(fā)送給平臺10的通信 控制塊71。如圖所示，例如，平臺10具有通信控制塊71和搖攝/傾斜 控制處理塊72。通信控制塊71是與數(shù)字靜態(tài)攝像機(jī)1側(cè)的通信控制 塊64通信的部件，并且在接收上述搖攝/傾斜控制信號的情況下，將 搖攝/傾斜控制信號輸出給搖攝/傾斜控制處理塊72。
搖攝/傾斜控制處理塊72對應(yīng)于平臺10側(cè)的微型計算機(jī)等(未示 出)執(zhí)行的控制處理中的執(zhí)行與搖攝/傾斜控制有關(guān)的處理機(jī)構(gòu)。搖攝/ 傾斜控制處理塊72根據(jù)輸入的搖攝/傾斜控制信號來控制在此未示出 的搖攝驅(qū)動機(jī)構(gòu)單元和傾斜驅(qū)動機(jī)構(gòu)單元。相應(yīng)地，執(zhí)行根據(jù)所確定 的構(gòu)圖來獲得水平視角和垂直視角的搖攝和傾斜操作。
此外，在構(gòu)圖確定塊62未檢測到主題的情況下，搖攝/傾斜/變焦 控制塊63例如可以根據(jù)命令來執(zhí)行搜索主題的搖攝/傾斜/變焦控制。
利用具有圖26所示結(jié)構(gòu)的數(shù)字靜態(tài)攝像機(jī)1和平臺IO構(gòu)成的成 像系統(tǒng)，可以安排為將人處理成構(gòu)圖確定的主題(以下簡稱為"主 題")，對主題進(jìn)行搜索，并且在檢測到存在主題的情況下，激活平臺10的搖攝/傾斜機(jī)構(gòu)以獲得(取景)包括該主題的圖像的最優(yōu)構(gòu)圖(最優(yōu)
構(gòu)圖)。在獲得最優(yōu)構(gòu)圖時，可以將此時的成像圖像數(shù)據(jù)記錄(成像記 錄)在存儲介質(zhì)中。
圖27是例示利用以上圖26所示的成像系統(tǒng)進(jìn)行成像記錄的過程 示例流程圖。
根據(jù)該圖，首先，通信控制處理塊64在步驟S1001獲得成像圖 像數(shù)據(jù)。
在下一步驟S1002，構(gòu)圖確定塊62執(zhí)行區(qū)分參數(shù)的主題檢測處 理檢測，以及主題區(qū)分處理。根據(jù)需要，如在以上第一到第三實(shí)施例 描述的那樣，這些處理由主題檢測處理單元201、主題距離檢測單元 202A、主題尺寸檢測單元202B、實(shí)際尺寸檢測單元205、主題區(qū)分處 理單元204、構(gòu)圖確定處理單元203等來執(zhí)行。
在步驟S1003，構(gòu)圖確定塊62的構(gòu)圖確定處理單元203確定是 否存在對象個別主題(相關(guān)主題)，作為步驟S1002的主題區(qū)分處理結(jié) 果。
構(gòu)圖確定處理單元203讀取區(qū)分檢測的主題的檢測個別主題信 息，根據(jù)步驟S1002的主題區(qū)分處理進(jìn)行輸出，然后如果其結(jié)果是不 存在有效的檢測個別主題信息，則意味著沒有剩余的對象個別主題(真 實(shí)主題)。另一方面，如果存在有效的檢測個別主題信息，意味著存在 對象個別主題。
現(xiàn)在，在步驟S1003獲得否定確定結(jié)果的情況下，本流程返回 到 步驟SIOOI，因?yàn)樾枰俅螆?zhí)行主題檢測，在此情況下構(gòu)圖確定塊62 在步驟S1008指示搖攝/傾斜/變焦控制，然后返回到步驟SIOOI。也就 是說，在此情況下步驟S1001到S1003的過程基于主題搜索時獲得的 成像圖像數(shù)據(jù)來執(zhí)行主題檢測。
相反，在獲得肯定確定結(jié)果，即在步驟S1003檢測到至少一個個 別主題的情況下，本流程進(jìn)行到步驟S1004的過程。
在步驟S1004，基于構(gòu)圖確定處理單元 從主題區(qū)分處理單元 211輸入的對象個別主題的檢測個別主題信息，執(zhí)行構(gòu)圖確定處理，然后將其確定結(jié)果的信息發(fā)送給搖攝/傾斜/變焦控制塊63。
步驟S1005是搖攝/傾斜/變焦控制塊63執(zhí)行的處理。也就是說， 搖攝/傾斜/變焦控制塊63執(zhí)行控制以使成像視野符合要獲得的構(gòu)圖確 定結(jié)果，即，進(jìn)行構(gòu)圖匹配的搖攝/傾斜/變焦控制。
在啟動步驟S1005的構(gòu)圖匹配控制之后，在步驟S1006確定是否 可認(rèn)為此時實(shí)際獲得的成像圖像數(shù)據(jù)的圖像的構(gòu)圖處于與步驟S1004 確定的構(gòu)圖相同的狀態(tài)(例如，是否具有一定程度或更高的相似性)(構(gòu) 圖是否OK)。注意，例如，所述確定可以通過對構(gòu)圖確定處理單元203 輸出構(gòu)圖確定結(jié)果之后獲得的對象個別主題的檢測個別主題信息的位 置信息的變化進(jìn)行檢測來實(shí)現(xiàn)。
現(xiàn)在，盡管已經(jīng)執(zhí)行了充分的搖攝/傾斜/變焦運(yùn)動和驅(qū)動，但是 由于某種原因構(gòu)圖仍然不成功的情況下，在步驟S1006輸出否定確定 結(jié)果。在此情況下，本流程通過步驟S1008返回到步驟SlOOl，從而 恢復(fù)主題搜索。
相反，在步驟S1006獲得構(gòu)圖成功的確定結(jié)果的情況下，在步驟 S1007指示釋放操作，即，指示執(zhí)行將此時獲得的成像圖像數(shù)據(jù)記錄 成靜態(tài)圖像的操作。這里，例如也可以將釋放指示理解成由構(gòu)圖確定 處理單元203執(zhí)行。
注意，根據(jù)例如圖26所示的結(jié)構(gòu)，在用于構(gòu)圖的搖攝/傾斜/變焦 控制完成時，對成像記錄的指示(對釋放操作的指示)可以從搖攝/傾斜/ 變焦控制塊63到諸如成像塊61的合適部件來執(zhí)行。替換地，在確定 成像圖像數(shù)據(jù)的圖像中獲得的實(shí)際構(gòu)圖與所確定的最優(yōu)構(gòu)圖之間的相 似度達(dá)到某個程度或更高時，釋放指示可以利用構(gòu)圖確定塊62執(zhí)行。
按此方式，使用圖26的成像系統(tǒng)，在使用數(shù)字靜態(tài)攝像機(jī)攝影 時，首先，對搜索主題判定(確定)最優(yōu)構(gòu)圖，然后自動執(zhí)行攝影和記 錄。因此，即使用戶未確定構(gòu)圖和拍攝畫面，也可以獲得相當(dāng)高質(zhì)量 的照片圖像。此外，利用這種系統(tǒng)，無需任何人手持?jǐn)z像機(jī)并進(jìn)行拍 攝，因此場景中的所有人都可以是主題。此外，即使不必所有主題都 試圖位于攝像機(jī)的視角范圍內(nèi)的情況下，可以獲得所有主題都在畫面中的照片。也就是說，以更自然的狀態(tài)拍攝到攝影時的場景中的人的 機(jī)會更大，因此可以獲得許多迄今為止不易獲得的自然的照片。
上述系統(tǒng)執(zhí)行根據(jù)上述第 一和笫二實(shí)施例的構(gòu)圖確定，因此可以 對具有合適構(gòu)圖的圖像執(zhí)行成像記錄，僅將相關(guān)主題當(dāng)作對象，排除 位于期望被當(dāng)作主題(如面孔照片)的主題附近的不期望被當(dāng)作主題 的其他對象。
圖28例示根據(jù)圖26所示的本實(shí)施例的成像系統(tǒng)的修改例。
在該圖中，在數(shù)字靜態(tài)攝像機(jī)1，將成像塊61獲得的成像圖像數(shù) 據(jù)從通信控制處理塊64發(fā)送到平臺10側(cè)的通信處理控制塊71。
在該圖中，將平臺10示為包括通信控制塊71、搖攝/傾斜控制處 理塊72以及構(gòu)圖確定塊73。
將通信控制處理塊71接收的成像圖像數(shù)據(jù)輸出給構(gòu)圖確定塊 73。前面在圖1、圖2、圖7、圖8、圖14、圖15中所示作為第一到 第三實(shí)施例的任一構(gòu)圖確定塊200都可以作為構(gòu)圖確定塊72，以能夠 基于輸入的成像圖像數(shù)據(jù)僅對相關(guān)主題執(zhí)行構(gòu)圖確定處理。在此情況 下，基于構(gòu)圖確定結(jié)果，獲得搖攝機(jī)構(gòu)單元和傾斜機(jī)構(gòu)單元的運(yùn)動量， 使得拍攝方向與所確定的構(gòu)圖相匹配，例如圖26的搖攝/傾斜/變焦控 制塊63的情況那樣，然后生成根據(jù)所獲得的運(yùn)動量來指示運(yùn)動的搖攝 /傾斜控制信號，并將該信號輸出給搖攝/傾斜控制處理塊72。相應(yīng)地， 執(zhí)行搖攝和傾斜從而可以獲得構(gòu)圖確定塊73確定的構(gòu)圖。
這樣，將圖28所示的成像系統(tǒng)配置成將成像圖像數(shù)據(jù)從數(shù)字靜 態(tài)攝像機(jī)l發(fā)送到平臺10側(cè)，在平臺IO側(cè)使用獲得的成像圖像數(shù)據(jù) 執(zhí)行構(gòu)圖確定，然后還由平臺10執(zhí)行對應(yīng)的搖攝/傾斜控制(構(gòu)圖控 制)。此外，根據(jù)圖28所示的結(jié)構(gòu)，控制成像視角(構(gòu)圖控制)時不執(zhí) 行變焦(場角)控制，這表示根據(jù)本實(shí)施例，對于構(gòu)圖控制而言，搖攝/ 傾斜/變焦中的每一個并非不可缺少。例如，根據(jù)條件或情況，可以僅 通過搖攝控制、僅通過傾斜控制、或者僅通過變焦控制，實(shí)現(xiàn)根據(jù)確 定構(gòu)圖的構(gòu)圖控制。
圖29例示根據(jù)本實(shí)施例的成像系統(tǒng)的另一修改例的結(jié)構(gòu)示例。
44注意，以相同標(biāo)號表示該圖中與圖28的那些組件相同的組件，因此將 略去對其的描述。
系統(tǒng)具有位于平臺10側(cè)的成像塊75。按與例如圖26和28所示 的成像塊相同的方式，成像塊75由光學(xué)系統(tǒng)、用于成像的成像裝置(圖 像傳感器)(其被配置成基于成像光來獲得信號(圖像信號))、以及用于 根據(jù)成像信號生成成像圖像的信號處理單元構(gòu)成。
將成像塊75生成的成像圖像數(shù)據(jù)輸出給構(gòu)圖確定塊73 。注意， 優(yōu)選配置是使成像塊75輸入成像光的方向(成像方向)與安裝在平臺10 的數(shù)字靜態(tài)攝像機(jī)1的成像方向盡可能地匹配。
在此情況下構(gòu)圖確定塊73和搖攝/傾斜控制處理塊72執(zhí)行按與 圖28相同方式的構(gòu)圖確定，以及根據(jù)構(gòu)圖確定結(jié)果驅(qū)動控制搖攝/傾
斜機(jī)構(gòu)o
應(yīng)當(dāng)指出在此情況下構(gòu)圖確定塊73根據(jù)數(shù)字靜態(tài)攝像機(jī)1執(zhí)行 釋放動作的時序(對來自成像塊75的成像圖像數(shù)據(jù)的圖像已經(jīng)獲得確 定構(gòu)圖的時序)，將釋^L指示信號經(jīng)由通信控制處理塊71發(fā)送到數(shù)字 靜態(tài)攝像機(jī)1。數(shù)字靜態(tài)攝像機(jī)1響應(yīng)于接收的釋放指示信號而執(zhí)行 釋放操作，然后基于此時成像塊75獲得的成像圖像數(shù)據(jù)來執(zhí)行圖像數(shù) 據(jù)的成像記錄。根據(jù)其他實(shí)施例，與構(gòu)圓確定和構(gòu)圖控制有關(guān)的所有 控制和處理可以在平臺IO側(cè)執(zhí)行，除涉及釋放操作本身的操作以外。
注意根據(jù)以上描述，通過控制平臺10的搖攝/傾斜機(jī)構(gòu)的運(yùn)動， 執(zhí)行搖攝控制和傾斜控制，但是可以想到出另一配置，其中將從反射 鏡反射的成像光輸入到例如數(shù)字靜態(tài)攝像機(jī)1的光學(xué)系統(tǒng)21，而不是 平臺10,然后移動反射鏡使得為基于成像光而獲得的圖像獲得搖攝/ 傾斜結(jié)果。
此外，可以通過沿水平方向和垂直方向移動數(shù)字靜態(tài)攝像機(jī)l的 成像裝置(成像傳感器22)作為圖像獲取有效成像信號的像素區(qū)域，獲 得與執(zhí)行搖攝/傾斜等效的結(jié)果。在此情況下，不必準(zhǔn)備除了數(shù)字靜態(tài)
攝像機(jī)1以外的用于搖攝/傾斜的裝置，如平臺10或等效裝置，因此 只在數(shù)字靜態(tài)攝像機(jī)1內(nèi)就可以完成本實(shí)施例的構(gòu)圖控制。
45此外，對于場角控制(變焦控制)，同樣可以安排為通過執(zhí)行裁 剪成像圖像數(shù)據(jù)的部分圖像區(qū)域的圖像處理來實(shí)現(xiàn)場角控制，而不必 驅(qū)動變焦透鏡。
此外，數(shù)字靜態(tài)攝像機(jī)l可以配備有能夠沿水平和垂直方向改變 數(shù)字靜態(tài)攝像機(jī)l的光學(xué)系統(tǒng)的透鏡的光軸的機(jī)構(gòu)，使得可以通過控 制該機(jī)構(gòu)的運(yùn)動來執(zhí)行搖攝和傾斜。
接下來，將描述根據(jù)本實(shí)施例(第一到第三實(shí)施例)的構(gòu)圖確定配 置應(yīng)用到除上述成像系統(tǒng)以外的示例。
首先，圖30例示根據(jù)本實(shí)施例的構(gòu)圖確定在諸如數(shù)字靜態(tài)攝像 機(jī)等的獨(dú)立成像設(shè)備的應(yīng)用，其中例如根據(jù)檢測結(jié)果在某個時刻顯示 通知用戶在攝影模式下通過成像設(shè)備成像的圖像獲得了合適的構(gòu)圖。
在此示出為此目的成像設(shè)備應(yīng)當(dāng)具有的結(jié)構(gòu)，包括構(gòu)圖確定塊 81、通知控制處理塊82以及顯示單元83。對于構(gòu)圖確定塊81，可以 使用先前在圖1，2, 7，8， 14，以及15所示的根據(jù)第一到第三實(shí)施例的任 一構(gòu)圖確定塊200。
例如，假設(shè)用戶已將成像設(shè)備設(shè)定為攝影模式，將成像設(shè)備把持 在手上，并且處于可以在任何時間執(zhí)行釋方文操作(快門按鈕操作)以記 錄成像圖像的狀態(tài)。在這種狀態(tài)下，構(gòu)圖確定塊81首先獲取此時通過 成像獲得的成像圖像數(shù)據(jù)，根據(jù)本實(shí)施例執(zhí)行一 系列構(gòu)圖確定處理， 然后確定最優(yōu)構(gòu)圖。
此外，此時構(gòu)圖確定塊81獲得此時實(shí)際獲得的成像圖像數(shù)據(jù)的 圖像內(nèi)容的構(gòu)圖與所確定的最優(yōu)構(gòu)圖之間的匹配度和/或相似度。如果 例如相似度達(dá)到 一定水平或更高，確定此時實(shí)際獲得的成像圖像數(shù)據(jù) 的圖像內(nèi)容的構(gòu)圖已達(dá)到最優(yōu)構(gòu)圖。在實(shí)際實(shí)踐中，可以想到出如下 安排準(zhǔn)備算法以在達(dá)到一定程度或更高的相似度，從而可認(rèn)為成像 圖像數(shù)據(jù)的圖像內(nèi)容的構(gòu)圖與最優(yōu)構(gòu)圖已經(jīng)匹配時，確定已經(jīng)達(dá)到最 優(yōu)構(gòu)圖。可以想到出很多種確定匹配度或相似度的算法，因此這里不 對其具體示例進(jìn)行具體討論。
將關(guān)于成像圖像數(shù)據(jù)的圖像內(nèi)容的效果已經(jīng)達(dá)到最優(yōu)構(gòu)圖的確定結(jié)果的信息輸出給通知控制處理塊82。通知控制處理塊82根據(jù)輸 入的信息執(zhí)行顯示控制，以通過在顯示單元83上執(zhí)行預(yù)定形式的顯示 控制，來通知用戶當(dāng)前成像圖像是最優(yōu)結(jié)構(gòu)。注意，通知控制處理塊 82是通過成像設(shè)備包括的微型計算機(jī)(CPU)等的顯示控制功能和對顯 示單元83實(shí)現(xiàn)圖像顯示的顯示圖像處理功能等實(shí)現(xiàn)的。還可以可聽地 (如電子聲音、合成語音或任何其他種類的聲音)執(zhí)行將關(guān)于已實(shí)現(xiàn)最 優(yōu)構(gòu)圖的效果給用戶的通知。
此外，顯示單元83例如對應(yīng)于根據(jù)本實(shí)施例的數(shù)字靜態(tài)攝像機(jī)1 的顯示單元33,其常常配置成使得顯示板位于成像設(shè)備的預(yù)定位置， 此時成像圖像顯示在其上。還將處于攝影模式的這種圖像稱為"直通 圖像(through image)"。相應(yīng)地，在實(shí)際實(shí)踐中，利用成像設(shè)備，將 達(dá)到最優(yōu)構(gòu)圖效果的圖像重疊顯示在顯示單元83的直通圖像上。當(dāng)顯 示通知達(dá)到最優(yōu)構(gòu)圖時，用戶執(zhí)行釋放操作。因此，不甚了解攝影或 者攝影技巧不高的用戶也可以容易地以良好構(gòu)圖拍攝照片。
此外，與上述圖30的情況一樣，圖31示出根據(jù)本實(shí)施例的構(gòu)圖 確定在諸如數(shù)字靜態(tài)攝像機(jī)1的獨(dú)立成像設(shè)備的應(yīng)用結(jié)構(gòu)。
首先，根據(jù)該圖所示的結(jié)構(gòu)，構(gòu)圖確定塊81執(zhí)行基于輸入的成 像圖像數(shù)據(jù)來確定最優(yōu)構(gòu)圖的處理，并確定在后續(xù)時序獲得的成像圖 像數(shù)據(jù)的圖像內(nèi)容是否為最優(yōu)構(gòu)圖。
當(dāng)確定構(gòu)圖是最優(yōu)構(gòu)圖時，將該效果通知給釋放控制處理塊84。
釋放控制處理塊84是執(zhí)行記錄成像圖像數(shù)據(jù)的控制的部件，并 且通過例如成像設(shè)備的微型計算機(jī)執(zhí)行的控制來實(shí)現(xiàn)。已經(jīng)接收到上 述通知的釋放控制處理塊84執(zhí)行圖像信號處理和記錄控制處理，從而 將此時獲得的成像圖像數(shù)據(jù)記錄在例如記錄介質(zhì)中。
根據(jù)這種配置，可以提供如下成像設(shè)備其中例如根據(jù)最優(yōu)構(gòu)圖 的圖像被成像時，自動執(zhí)行其記錄。
可以將以上圖30和31所示結(jié)構(gòu)應(yīng)用于具有例如圖l所示結(jié)構(gòu)的 數(shù)字靜態(tài)攝像機(jī)，也可以應(yīng)用于落在例如靜態(tài)攝像機(jī)的范圍內(nèi)的攝像 機(jī)，包括所謂的銀鹽攝像機(jī)(其將成像圖像記錄在銀鹽膠巻)等。在此情況下，將為銀鹽攝像機(jī)提供，例如對通過光學(xué)系統(tǒng)獲得的成像光進(jìn) 行分割的圖像傳感器，和從圖像傳感器輸入并處理信號的數(shù)字g像信 號處理單元，等等。
圖32是將根據(jù)本實(shí)施例的構(gòu)圖確定結(jié)構(gòu)應(yīng)用于諸如數(shù)字靜態(tài)攝 像機(jī)的成像設(shè)備的結(jié)構(gòu)示例。圖32所示的成像設(shè)備100具有構(gòu)圖確定 塊101、元數(shù)據(jù)創(chuàng)建處理塊102以及文件創(chuàng)建處理塊103。我們假設(shè)構(gòu) 圖確定塊101具有上述第一到第三實(shí)施例在圖1、圖2、圖7、圖8、 圖14、圖15的任何一個例示的構(gòu)圖確定塊200的結(jié)構(gòu)。
利用未示出的成像塊通過成像獲得的成像圖像數(shù)據(jù)輸入給成像 設(shè)備100的構(gòu)圖確定塊101和文件創(chuàng)建處理塊103。注意，輸入給成 像設(shè)備100的成像圖像數(shù)據(jù)是由于釋放操作等而將要記錄在記錄介質(zhì) 中的成像圖像數(shù)據(jù)，并且成像圖像數(shù)據(jù)是基于未示出的成像塊通過成 像獲得的成像信號來生成的。
首先，構(gòu)圖確定塊101在排除了無關(guān)主題(靜態(tài)主題)以相關(guān)主題 為對象來執(zhí)行構(gòu)圖確定。此外，在此情況下的構(gòu)圖確定處理包括在其 上執(zhí)行如下處理基于構(gòu)圖確定結(jié)果，根據(jù)預(yù)定垂直-水平比(最優(yōu)構(gòu) 圖的圖像部分)，確定輸入的成像圖像數(shù)據(jù)的整個圖像區(qū)域中的哪個部 分是獲得了所確定的最優(yōu)構(gòu)圖的圖像部分。然后將表示最優(yōu)構(gòu)圖的所 識別出的圖像部分的信息輸出給元數(shù)據(jù)創(chuàng)建處理塊102。
在元數(shù)據(jù)創(chuàng)建處理塊102，基于輸入信息來創(chuàng)建由根據(jù)對應(yīng)的成 像圖像數(shù)據(jù)來獲得最優(yōu)構(gòu)圖的信息組成的元數(shù)據(jù)(構(gòu)圖編輯元數(shù)據(jù))， 然后將其輸出給文件創(chuàng)建處理塊103。構(gòu)圖編輯元數(shù)據(jù)的內(nèi)容例如是 位置信息，可以表示要剪裁(trim)對應(yīng)的成像圖像數(shù)據(jù)的哪個圖像區(qū) 域部分，等等。
利用該圖所示的成像設(shè)備100，將成像圖像數(shù)據(jù)記錄在記錄介質(zhì) 中以作為預(yù)定格式的靜態(tài)圖像文件來管理。相應(yīng)地，文件創(chuàng)建處理塊 103將成像圖像數(shù)據(jù)轉(zhuǎn)換成靜態(tài)圖像格式(即，根據(jù)該格式來創(chuàng)建靜態(tài) 圖像文件)。
文件創(chuàng)建處理塊103首先對輸入的成像圖像數(shù)據(jù)執(zhí)行與圖像文件
48200910136919.2
說明書第43/72頁
格式相對應(yīng)的圖像壓縮編碼，然后創(chuàng)建由成像圖像數(shù)據(jù)組成的文件主
體部分。此外，將從元數(shù)據(jù)創(chuàng)建處理塊102輸入的構(gòu)圖編輯元數(shù)據(jù)存 儲在預(yù)定存儲位置，以創(chuàng)建由頭部、添加信息塊等組成的數(shù)據(jù)部分。 將文件主體部分、頭部、添加信息塊用于創(chuàng)建靜態(tài)圖像文件，然后輸 出文件。如圖32所示，要記錄在記錄介質(zhì)中的靜態(tài)圖像文件具有包括 成像圖像數(shù)據(jù)和元數(shù)據(jù)(構(gòu)圖編輯元數(shù)據(jù))的結(jié)構(gòu)。
圖33例示對圖32所示的裝置創(chuàng)建的靜態(tài)圖像文件執(zhí)行編輯的編 輯裝置的結(jié)構(gòu)示例。圖33所示的編輯裝置110獲取靜態(tài)圖像文件的數(shù) 據(jù)，然后首先將其輸入給元數(shù)據(jù)分離處理塊111。元數(shù)據(jù)分離處理塊 111從靜態(tài)圖像文件中分離出與文件主體部分等效的成像圖像數(shù)據(jù)， 以及元數(shù)據(jù)。元數(shù)據(jù)分離處理塊111然后將通過分離獲得的元數(shù)據(jù)輸 出給元數(shù)據(jù)分析處理塊112，并且將成像圖像數(shù)據(jù)輸出給剪裁處理塊 113。
元數(shù)據(jù)分析處理塊112是執(zhí)行分析輸入元數(shù)據(jù)的處理的部件。在 此對構(gòu)圖編輯元數(shù)據(jù)執(zhí)行的分析處理至少包括從作為構(gòu)圖編輯元數(shù) 據(jù)的內(nèi)容的用于獲得最優(yōu)構(gòu)圖的信息中，識別出要在對應(yīng)的成像圖像 數(shù)據(jù)上對其執(zhí)行剪裁的圖像區(qū)域。然后將指示剪裁所識別的圖像區(qū)域 的剪裁指示信息輸出給剪裁處理塊113。
按與前面描述的圖32的剪裁處理塊91相同的方式，剪裁處理塊 113執(zhí)行圖像處理以從元數(shù)據(jù)分離處理塊111側(cè)輸入的成像圖像數(shù)據(jù) 裁剪由從元數(shù)據(jù)分析處理塊112輸入的剪裁指令信息所表示的圖像部 分，然后輸出裁剪后的圖像部分作為編輯成像圖像數(shù)據(jù)，其為獨(dú)立的 圖像數(shù)據(jù)。
利用以上圖32和33所示的成像設(shè)備和編輯裝置構(gòu)成的系統(tǒng)，可 以在不進(jìn)行圖像處理的情況下保存通過例如攝影而獲得的期望的靜態(tài) 圖像數(shù)據(jù)(成像圖像數(shù)據(jù))，然后可以利用元數(shù)據(jù)從期望的靜態(tài)圖像數(shù) 據(jù)執(zhí)行編輯以裁剪出作為最優(yōu)構(gòu)圖的圖像。此外，自動判斷要裁剪與 這種最優(yōu)構(gòu)圖相對應(yīng)的哪個圖像部分，使得對于用戶來說編輯非常容 易。注意可以想到出如下安排例如，通過安裝在個人計算機(jī)中的編 輯圖像數(shù)據(jù)的應(yīng)用、管理圖像數(shù)據(jù)的應(yīng)用中的圖像編輯功能等來實(shí)現(xiàn) 圖33所示的編輯裝置的功能。
圖34例示將根據(jù)本實(shí)施例的構(gòu)圖確定結(jié)構(gòu)應(yīng)用于諸如視頻攝像 機(jī)的能夠拍攝并記錄運(yùn)動圖像的成像設(shè)備的示例。將運(yùn)動圖像數(shù)據(jù)輸 入到圖34所示的成像設(shè)備120。基于成像設(shè)備120具有的成像單元執(zhí) 行成像而獲得的成像信號來生成運(yùn)動圖像數(shù)據(jù)。將運(yùn)動圖像數(shù)據(jù)輸入 給成像設(shè)備120所包括的構(gòu)圖確定塊122和運(yùn)動圖像記錄處理塊124。
在此情況下構(gòu)圖確定塊122基于以上圖1、圖2、圖7、圖8、圖 14、圖15的任何一個圖示的構(gòu)圖確定塊200的結(jié)構(gòu)，通過僅對其輸入 的運(yùn)動圖像數(shù)據(jù)的圖像中的相關(guān)主題來執(zhí)行構(gòu)圖確定，獲得最優(yōu)構(gòu)圖。 于是，構(gòu)圖確定塊122通過對運(yùn)動圖像數(shù)據(jù)的圖像的實(shí)際構(gòu)圖與所確 定的最優(yōu)構(gòu)圖之間的差異進(jìn)行比較來進(jìn)行檢查。在例如稍后描述的構(gòu) 圖確定的具體示例中執(zhí)行的處理中，通過構(gòu)圖確定來獲得與最優(yōu)構(gòu)圖 相對應(yīng)的參數(shù)，如對象個別主題在圖像內(nèi)占據(jù)的百分比(尺寸)、主題 之間的距離等。因此，在實(shí)際比較過程中所要做的只是將與最優(yōu)構(gòu)圖 相對應(yīng)的這些參數(shù)與運(yùn)動圖像數(shù)據(jù)的圖像當(dāng)前表明的參數(shù)進(jìn)行比較。
作為比較結(jié)果而確定這些參數(shù)具有一定程度或更高相似度的情 況下，確定構(gòu)圖是良好的，在相似度低于所述一定水平的情況下，確 定構(gòu)圖不好。
如上所述構(gòu)圖確定塊122確定對運(yùn)動圖像數(shù)據(jù)獲得了良好構(gòu)圖的 情況下，構(gòu)圖確定塊122向元數(shù)據(jù)創(chuàng)建處理塊123輸出關(guān)于以上對其 已經(jīng)確定獲得良好構(gòu)圖的圖像部分(良好構(gòu)像部分)在何處的信息 (良好構(gòu)像部分指示信息)。"良好構(gòu)像部分"例如是表示諸 如良好構(gòu)像部分在運(yùn)動圖像數(shù)據(jù)中的開始位置和結(jié)束位置等的信 命
在此情況下元數(shù)據(jù)創(chuàng)建處理塊123生成元數(shù)據(jù)，其由后述運(yùn)動圖 像記錄處理塊124使用以將運(yùn)動圖像數(shù)據(jù)作為文件記錄在記錄介質(zhì) 中。當(dāng)從構(gòu)圖確定塊122輸入良好構(gòu)像部分指示信息時，元數(shù)據(jù)
50創(chuàng)建處理單元123生成元數(shù)據(jù)，其表示輸入的良好構(gòu)像部分指示 信息所表示的圖像部分是良好構(gòu)圖，然后將其輸出給運(yùn)動圖像記錄處 理塊124。
運(yùn)動圖像記錄處理塊124執(zhí)行控制以將輸入的運(yùn)動圖像數(shù)據(jù)記錄 在記錄介質(zhì)中，以作為預(yù)定格式的運(yùn)動圖像文件來管理。在元數(shù)據(jù)創(chuàng) 建處理塊123輸出元數(shù)據(jù)的情況下，運(yùn)動圖像記錄處理塊124執(zhí)行控 制使得該元數(shù)據(jù)被包括在附加到運(yùn)動圖像文件的元數(shù)據(jù)中。
因此，記錄在記錄介質(zhì)中的運(yùn)動圖像文件具有內(nèi)容，其中表示已 獲得良好構(gòu)圖的圖像部分的元數(shù)據(jù)被附加到通過成像獲得的運(yùn)動圖像 數(shù)據(jù)。
注意，上述元數(shù)據(jù)表示的已經(jīng)獲得良好構(gòu)圖的成像部分可以是具 有一定程度的時間跨度的運(yùn)動圖像中的圖像部分，或者可以是從運(yùn)動 圖像數(shù)據(jù)提取出的靜態(tài)圖像中。可以想到出另一種安排，即生成獲得 良好構(gòu)圖的圖像部分的運(yùn)動圖像數(shù)據(jù)或靜態(tài)圖像數(shù)據(jù)，而非上述元數(shù) 據(jù)，然后將這種運(yùn)動圖像數(shù)據(jù)或靜態(tài)圖像數(shù)據(jù)記錄成二次圖像數(shù)據(jù)， 其附加到運(yùn)動圖像文件(或者與運(yùn)動圖像文件獨(dú)立的文件)。
此外，利用成像設(shè)備120具有如圖34所示的構(gòu)圖確定塊122的 結(jié)構(gòu)，可以想到出如下配置僅將運(yùn)動圖像的由構(gòu)圖確定塊122確定 為良好構(gòu)像部分的部分記錄為運(yùn)動圖像文件。此外，可以想到出 如下安排將與構(gòu)圖確定塊122確定為良好構(gòu)圖的圖像部分相對應(yīng)的 圖像文件通過數(shù)據(jù)接口等向外輸出到外部裝置。
此外，除了圖33所示的編輯裝置以外，還可以將圖35所示打印 裝置130想到成與圖32所示成像設(shè)備100相對應(yīng)的裝置的示例。在此 情況下，將打印裝置130配置成獲取靜態(tài)圖像文件作為要打印的圖像。 靜態(tài)圖像文件包括例如成像設(shè)備100生成的靜態(tài)圖像文件，并且具有 的結(jié)構(gòu)包括作為靜態(tài)文件的實(shí)際圖像數(shù)據(jù)和如圖所示的元數(shù)據(jù)。因此， 元數(shù)據(jù)包括圖32和33所示的靜態(tài)圖像文件的等效內(nèi)容的構(gòu)圖編輯元 數(shù)據(jù)。
將如此輸入獲得的文件輸入給元數(shù)據(jù)分離處理塊131。按與圖33的元數(shù)據(jù)分離處理塊111相同的方式，元數(shù)據(jù)分離處理塊131從靜態(tài) 圖像文件數(shù)據(jù)中將與文件主體部分等效的圖像數(shù)據(jù)與附到圖像數(shù)據(jù)的 元數(shù)據(jù)分離。將分離后獲得的元數(shù)據(jù)輸出給元數(shù)據(jù)分析處理塊132， 然后將圖像數(shù)據(jù)輸出給剪裁處理塊133。
元數(shù)據(jù)分析處理塊132按與圖33的元數(shù)據(jù)分離處理塊lll相同 的方式對輸入的元數(shù)據(jù)執(zhí)行分析處理，然后將剪裁指示信息輸出給剪 裁處理塊133。
按與圖33的剪裁處理塊相同的方式，剪裁處理塊133執(zhí)行圖像 處理，從自元數(shù)據(jù)分離處理塊131輸入的圖像數(shù)據(jù)中裁剪出元數(shù)據(jù)分 析處理塊132輸入的剪裁指示信息所表示的圖像部分。然后將根據(jù)剪 裁圖像部分生成的具有某種打印格式的圖像數(shù)據(jù)輸出給打印控制處理 塊134，作為打印圖像數(shù)據(jù)。打印控制處理塊134利用輸入的打印圖 像數(shù)據(jù)來執(zhí)行控制使未示出的打印機(jī)構(gòu)進(jìn)行操作。
由于這種操作，利用打印裝置130，將獲得最優(yōu)構(gòu)圖的圖像部分 自動從輸入的圖像數(shù)據(jù)的圖像內(nèi)容中裁剪出來，然后打印成單個圖像。
然后，將描述應(yīng)用根據(jù)本實(shí)施例的構(gòu)圖確定的裝置和系統(tǒng)的更具 體結(jié)構(gòu)示例。在此將給出關(guān)于數(shù)字靜態(tài)攝像機(jī)1和平臺10構(gòu)成的具有 通過先前圖24到26所例示和描述的系統(tǒng)結(jié)構(gòu)的成像系統(tǒng)的示例。
首先，在圖36示出與數(shù)字靜態(tài)攝像機(jī)1有關(guān)的實(shí)際內(nèi)部結(jié)構(gòu)示 例框圖。在圖36，光學(xué)系統(tǒng)21由例如包括多個成像透鏡(如變焦透鏡、 聚焦透鏡等)的成像透鏡組和光圏等組成，并且將入射光作為成像光成 像在圖像傳感器22的光接收面。
光學(xué)系統(tǒng)21還具有驅(qū)動變焦透鏡、聚焦透鏡、光圏等的驅(qū)動機(jī) 構(gòu)。驅(qū)動機(jī)構(gòu)的操作是通過例如控制單元27執(zhí)行的所謂攝像機(jī)控制來 控制的，如變焦(場角)改變控制、自動聚焦調(diào)節(jié)控制、自動曝光控制 等。
圖像傳感器22執(zhí)行所謂的光電轉(zhuǎn)換，其中將在光學(xué)系統(tǒng)21獲得 的成像光轉(zhuǎn)換成電信號。因此，將圖像傳感器22配置成在光電轉(zhuǎn)換裝 置的光接收面接收來自光學(xué)系統(tǒng)21的成像光，然后按預(yù)定時序順序輸出根據(jù)所接收的光強(qiáng)度而累積的信號電荷。這會輸出與成像光相對應(yīng)
的電信號(成像信號)。注意，在目前狀態(tài)，用作圖像傳感器22的光電 轉(zhuǎn)換裝置(成像裝置)的示例可以包括CMOS傳感器或CCD(電荷耦合 器件)等，但是并不受具體限制。此外，在使用CMOS傳感器的情況下， 可以將與后述A/D轉(zhuǎn)換器23等效的A/D轉(zhuǎn)換器包括在該結(jié)構(gòu)中，作為 與圖像傳感器22等效的裝置(部件)。
從圖像傳感器22輸出的成像信號輸入到A/D轉(zhuǎn)換器23，由此將 其轉(zhuǎn)換成數(shù)字信號并輸入給信號處理單元24。信號處理單元24例如以等 效于單個靜態(tài)圖像(幀圖像)的單位輸入從A/D轉(zhuǎn)換器23輸出的成像信 號，然后使以靜態(tài)圖像為單位的輸入圖像信號受到預(yù)定信號處理，從而 生成成像圖像數(shù)據(jù)(成像靜態(tài)圖像數(shù)據(jù))，其是與單個靜態(tài)圖像等效的圖像 信號數(shù)據(jù)。
在信號處理單元24生成的成像圖像數(shù)據(jù)作為圖像信息記錄在作 為記錄介質(zhì)(記錄介質(zhì)裝置)的存儲器卡40中的情況下，將與例如單個 靜態(tài)圖像相對應(yīng)的成像圖像數(shù)據(jù)從信號處理單元24輸出給編碼/解碼 單元25。
編碼/解碼單元25使從信號處理單元24輸出的以靜態(tài)圖像為單 位的成像圖像數(shù)據(jù)經(jīng)受根據(jù)預(yù)定靜態(tài)圖像壓縮編碼方法的壓縮編碼處 理，根據(jù)例如控制單元27的控制來添加頭部，然后轉(zhuǎn)換成根據(jù)預(yù)定格 式壓縮的成像圖像數(shù)據(jù)格式。按此方式生成的成像圖像數(shù)據(jù)傳送給介 質(zhì)控制器26。介質(zhì)控制器26按照控制單元27的控制將傳送給它的成 像圖像數(shù)據(jù)寫入并記錄在存儲器卡40。在此情況下存儲器卡40是具 有卡外形的根據(jù)例如預(yù)定標(biāo)準(zhǔn)的存儲介質(zhì)，并且其中具有諸如閃速存 儲器的非易失性半導(dǎo)體存儲裝置。注意用于存儲圖像數(shù)據(jù)的存儲介質(zhì) 并不限于以上存儲卡，而是可以具有其他類型、格式等。
此外，根據(jù)本實(shí)施例的信號處理單元24可以利用上述獲得的成 像圖像數(shù)據(jù)來執(zhí)行主題檢測的圖像處理。稍后將描述根據(jù)本實(shí)施例的 主題檢測處理是什么。
此外，數(shù)字靜態(tài)攝像機(jī)1可以利用信號處理單元24獲得的成像圖像數(shù)據(jù)并在顯示單元33顯示圖像，以顯示所謂的"直通圖像"，其 為當(dāng)前正在被成像的圖像。例如，信號處理單元24獲得從A/D轉(zhuǎn)換 器23輸出的成像信號，然后如上所述生成等效于一個靜態(tài)圖像的成像 圖像數(shù)據(jù)，持續(xù)地執(zhí)行該處理，從而順序地生成與運(yùn)動圖像的幀圖像 等效的成像圖像數(shù)據(jù)。在控制單元27的控制下，將由此順序地生成的 成像圖像數(shù)據(jù)傳送給顯示驅(qū)動器32。這樣顯示了直通圖像。
在顯示驅(qū)動器32,基于如上所述從信號處理單元24輸入的成像 圖像數(shù)據(jù)來生成驅(qū)動顯示單元33的驅(qū)動信號，然后將其輸出給顯示單 元33。因此，在顯示單元33順序地顯示基于以靜態(tài)圖像為單位的成 像圖像數(shù)據(jù)的圖像。用戶由此可以在顯示單元33動態(tài)查看此時正在成 像的圖像，即顯示了直通圖像。
此外，數(shù)字靜態(tài)攝像機(jī)1可以播放記錄在存儲器卡40中的成像 圖像數(shù)據(jù)，并將圖像顯示在顯示單元33。例如，控制單元27指定成 像圖像數(shù)據(jù)，并命令介質(zhì)控制器26從存儲器卡40讀出數(shù)據(jù)。響應(yīng)于 命令，介質(zhì)控制器26訪問存儲器卡40的記錄有指定成像圖像數(shù)據(jù)的 地址，然后讀出該數(shù)據(jù)，然后將已讀出的數(shù)據(jù)傳送給編碼/解碼單元25。
編碼/解碼單元25在例如控制單元27的控制下從介質(zhì)控制器26 傳送的成像圖像數(shù)據(jù)中提取出作為壓縮靜態(tài)圖像數(shù)據(jù)的實(shí)際數(shù)據(jù)，對 與壓縮靜態(tài)圖像數(shù)據(jù)有關(guān)的壓縮編碼數(shù)據(jù)執(zhí)行解碼處理，然后獲得與 單個靜態(tài)圖像相對應(yīng)的成像圖像數(shù)據(jù)。然后將成像圖像數(shù)據(jù)傳送給顯 示驅(qū)動器22。因此，通過在顯示單元33進(jìn)行顯示來播放記錄在存儲 器卡40中的成像圖像數(shù)據(jù)的圖像。
此外，還可以在顯示器單元33與成像圖像數(shù)據(jù)的上述監(jiān)視器圖 像或播放圖像一起顯示用戶界面圖像。在此情況下，控制單元27根據(jù) 例如此時的操作狀態(tài)生成作為用戶界面圖像的顯示圖像數(shù)據(jù)，然后將 其輸出給顯示驅(qū)動器32。相應(yīng)地，在顯示單元33顯示用戶界面圖像。 注意，可以將用戶界面圖像與成像圖像數(shù)據(jù)的監(jiān)視器圖像或播放圖像 分開顯示在顯示單元33的顯示屏面，例如特定菜單屏面的情況那樣， 或者顯示成與成像圖像數(shù)據(jù)的一部分監(jiān)視器圖像或播放圖像部分重疊或合成。
在實(shí)際實(shí)踐中，控制單元27包括例如CPU(中央處理器)以及 ROM 28， RAM 29等，構(gòu)成微型計算機(jī)。ROM 28例如作為控制單元27 存儲CPU的程序以執(zhí)行，以及與數(shù)字靜態(tài)攝像機(jī)1的操作有關(guān)的各種 類型的設(shè)置信息等。RAM29是CPU的主存儲裝置。
此外，在此情況下將閃速存儲器30配置成用于存儲各種類型的 設(shè)置信息等的非易失性存儲區(qū)，這些設(shè)置信息將根據(jù)例如用戶操作、 操作例示等被更新(改寫)。注意，使用諸如閃速存儲器等的非易失性 存儲器作為ROM 28的情況下，可以使用ROM 28的部分存儲區(qū)來代替 閃速存儲器30。
操作單元31包括提供給數(shù)字靜態(tài)攝像機(jī)1的各種類型的操作元 件，以及操作信息信號輸出部件，所述操作信息信號輸出部件用于根 據(jù)在操作元件執(zhí)行的操作來生成操作信息信號，然后將其輸出給 CPU。控制單元27根據(jù)從操作單元31輸入的操作信息信號來執(zhí)行預(yù) 定處理。由此，數(shù)字靜態(tài)攝像機(jī)l根據(jù)用戶操作來執(zhí)行操作。
平臺兼容通信單元34是按照預(yù)定通信格式在平臺10側(cè)與數(shù)字靜 態(tài)攝像機(jī)1側(cè)之間執(zhí)行通信的部件，并且由以下結(jié)構(gòu)構(gòu)成:物理層結(jié) 構(gòu)，其使得在將數(shù)字靜態(tài)攝像機(jī)1安裝到平臺10的情況下在數(shù)字靜態(tài) 攝像機(jī)1與平臺10的通信單元之間交換有線或無線通信信號；和上層 結(jié)構(gòu)，用于實(shí)現(xiàn)與其相對應(yīng)的通信處理。
圖37是例示平臺10的結(jié)構(gòu)示例的框圖。如上所述，平臺10具 有搖攝/傾斜機(jī)構(gòu)，搖攝機(jī)構(gòu)單元53、搖攝電機(jī)54、傾斜機(jī)構(gòu)單元56 以及傾斜電才幾57與搖纟聶/傾斜4幾構(gòu)相對應(yīng)。
搖攝機(jī)構(gòu)單元53的結(jié)構(gòu)具有為安裝到平臺IO的數(shù)字靜態(tài)攝像機(jī) 1提供圖25A所示的沿?fù)u攝(水平)方向運(yùn)動的機(jī)構(gòu)，并且該運(yùn)動是通 過沿正反方向轉(zhuǎn)動搖攝電機(jī)54而獲得的。按相同的方式，傾斜機(jī)構(gòu)單 元56的結(jié)構(gòu)具有為安裝到平臺10的數(shù)字靜態(tài)攝像機(jī)1提供圖25B所 示的沿傾斜(垂直)方向運(yùn)動的才幾構(gòu)，并且該運(yùn)動是通過沿正反方向轉(zhuǎn) 動傾斜電機(jī)57而獲得的?？刂茊卧?1配置成具有例如CPU, ROM, RAM等的組合形成的 微型計算機(jī)，并且控制搖攝機(jī)構(gòu)單元53和傾斜機(jī)構(gòu)單元56的運(yùn)動。 在控制單元51控制搖攝機(jī)構(gòu)單元53的運(yùn)動時，將與搖攝機(jī)構(gòu)單元53 的運(yùn)動量和運(yùn)動方向相對應(yīng)的控制信號輸出給搖攝驅(qū)動單元55。搖攝 驅(qū)動單元55生成與輸入的控制信號相對應(yīng)的電機(jī)驅(qū)動信號，然后將生 成的電機(jī)驅(qū)動信號輸出給搖攝電機(jī)54。電機(jī)驅(qū)動信號使得搖攝電機(jī)54 按預(yù)定轉(zhuǎn)動角度沿預(yù)定轉(zhuǎn)動方向轉(zhuǎn)動，因此，也驅(qū)動搖攝機(jī)構(gòu)單元53 以沿對應(yīng)的運(yùn)動方向移動對應(yīng)的運(yùn)動量。
按相同的方式，在控制單元51控制傾斜機(jī)構(gòu)單元56的運(yùn)動時， 將與傾斜機(jī)構(gòu)單元56的運(yùn)動量和運(yùn)動方向相對應(yīng)的控制信號輸出給 傾斜驅(qū)動單元58。傾斜驅(qū)動單元58生成與輸入的控制信號相對應(yīng)的 電機(jī)驅(qū)動信號，然后將生成的電機(jī)驅(qū)動信號輸出給傾斜電機(jī)57。電機(jī) 驅(qū)動信號使得傾斜電機(jī)57按預(yù)定轉(zhuǎn)動角度沿預(yù)定轉(zhuǎn)動方向轉(zhuǎn)動，因 此，也驅(qū)動傾斜才幾構(gòu)單元56以沿對應(yīng)的運(yùn)動方向移動對應(yīng)的運(yùn)動量。
通信單元52是根據(jù)預(yù)定通信格式與設(shè)置在安裝到平臺10的數(shù)字 靜態(tài)攝像機(jī)1內(nèi)的平臺兼容通信單元34執(zhí)行通信的部件，并且以與平 臺兼容通信單元34相同的方式，由以下結(jié)構(gòu)組成物理層結(jié)構(gòu)，其使 得能夠與另一側(cè)的通信單元交換有線或無線通信信號；和上層結(jié)構(gòu)， 用于實(shí)現(xiàn)與其相對應(yīng)的通信處理。
現(xiàn)在，圖26所示的成像系統(tǒng)的結(jié)構(gòu)與圖36和37所示的數(shù)字靜 態(tài)攝像機(jī)l和平臺10的結(jié)構(gòu)之間的關(guān)聯(lián)例如如下。注意，應(yīng)當(dāng)將下述 關(guān)聯(lián)理解成僅僅是一個筒單構(gòu)思的示例，還可以構(gòu)思并使用其他關(guān)聯(lián)。
圖26的數(shù)字靜態(tài)攝像機(jī)1的成像塊61對應(yīng)于例如圖36中的光 學(xué)系統(tǒng)21、圖像傳感器22、 A/D轉(zhuǎn)換器23以及信號處理單元24部分， 直到獲得成像圖像數(shù)據(jù)的階段。
圖26的數(shù)字靜態(tài)攝像機(jī)1的構(gòu)圖確定塊62對應(yīng)于與預(yù)定處理相 對應(yīng)的圖像信號處理功能，預(yù)定處理例如是主題檢測(也包括屬性確定 處理，諸如本文的成人/兒童判定)、靜態(tài)檢測、主題區(qū)分、掩蓋等， 以及例如圖36的信號處理單元24，以及與其控制單元(CPU)27執(zhí)行
56的構(gòu)圖確定有關(guān)的處理功能。
如前所述，光學(xué)系統(tǒng)27具有變焦透鏡和驅(qū)動它的驅(qū)動機(jī)構(gòu)單元。 將控制單元27配置成從光學(xué)系統(tǒng)21獲得表示變焦透鏡的當(dāng)前位置的 變焦位置信息以用于變焦控制。在將變焦倍率值Z提供給以上第二和 第三實(shí)施例中的主題區(qū)分處理中的條件表達(dá)式的情況下，可以從控制 單元27如上所述地獲得的變焦位置信息來獲得變焦倍率值Z。
圖26的數(shù)字靜態(tài)攝像機(jī)1的搖攝/傾斜/變焦控制塊63對應(yīng)于圖 36的控制單元27為了搖攝/傾斜/變焦控制而執(zhí)行的處理功能。
圖26的通信控制處理塊64對應(yīng)于例如圖36的平臺兼容通信單 元34，并且對應(yīng)于圖36的控制單元27為了通信而使用平臺兼容通信 單元34執(zhí)行的處理功能。
圖26的平臺10的通信控制塊71對應(yīng)于例如圖37的通信單元52， 并且對應(yīng)于控制單元51為了通信而使用通信單元52執(zhí)行的處理。
圖26的搖攝/傾斜控制處理塊72對應(yīng)于與例如圖37的控制單元 51執(zhí)行的搖攝/傾斜控制有關(guān)的處理的執(zhí)行功能，并且向搖攝驅(qū)動單元 55和傾斜驅(qū)動單元58輸出信號，用于根據(jù)輸入的控制信號來控制搖 攝機(jī)構(gòu)單元53和傾斜機(jī)構(gòu)單元56的運(yùn)動。
接下來，將描述根據(jù)到此為止的實(shí)施例的成像系統(tǒng)(數(shù)字靜態(tài)攝 像機(jī)1和平臺IO)執(zhí)行的構(gòu)圖確定處理和構(gòu)圖匹配(構(gòu)圖控制)的更具體 示例。應(yīng)當(dāng)指出在此給出的示例僅是示例。這是因?yàn)榭梢韵氲胶芏喾N 實(shí)際構(gòu)圖確定算法和控制。
首先，將參照圖38A和38B來描述主題檢測處理單元201執(zhí)行 的主題檢測處理的具體示例。注意在此將基于面孔檢測執(zhí)行主題檢測。
現(xiàn)在，假設(shè)主題檢測處理單元201已經(jīng)輸入具有圖38A所示的圖 像內(nèi)容的成像圖像數(shù)據(jù)。這里的成像圖像數(shù)據(jù)的圖像內(nèi)容是位于已經(jīng) 成像的圖像中的單個人主題。注意，圖38A和38B被示出為被分割成 矩陣形式的圖像，示意性地例示作為成像圖像數(shù)據(jù)的圖像是預(yù)定數(shù)量 的水平和垂直像素構(gòu)成的。
通過使圖38A所示的成像圖像數(shù)據(jù)的圖像內(nèi)容受到主題檢測(面孔檢測)，檢測到該圖所示的一個個別主題SBJ的面孔。也就是說，通 過面孔檢測處理檢測的一張面孔意味著已經(jīng)檢測到一個個別主題。此 外，獲得個別主題的數(shù)量、取向、位置以及圖像內(nèi)尺寸的信息作為檢 測個別主題的結(jié)果。
可以根據(jù)通過例如面孔檢測而檢測的面孔數(shù)量來獲得個別主題 的數(shù)量。對于圖38A的情況，檢測的面孔的數(shù)量是l個，從而獲得個 別主題的數(shù)量也是1個的結(jié)果。
此外，每個個別主題的位置信息是如上所述的成像圖像內(nèi)位置信 息或絕對位置信息，位置信息具體表示個別主題SBJ的重心。
例如，如前所述，將成像圖像的圖像框中的個別主題SBJ的重心 G表示為(X，Y)。注意成像圖像數(shù)據(jù)的屏面的X、 Y坐標(biāo)系的原點(diǎn)坐標(biāo)(O， O)(其在此情況下充當(dāng)重心G(X，Y)的基準(zhǔn))是例如與屏面尺寸相對應(yīng)的X 軸方向(水平方向)的寬度(水平圖像尺寸)Cx和與屏面尺寸相對應(yīng)的Y軸 方向(垂直方向)的高度(垂直圖像尺寸)Cy的中點(diǎn)的交點(diǎn)，如圖39所示。
此外，對于重心G，可以將根據(jù)現(xiàn)有技術(shù)的主題重心檢測方法應(yīng) 用于個別主題的圖像內(nèi)的位置定義。
此外，可以將每個個別主題的尺寸取為例如通過面孔檢測處理被 識別并且檢測為面孔位置的部分區(qū)域中沿水平方向或垂直方向的像素 數(shù)量。
替換地，可獲得等于對應(yīng)于水平像素數(shù)量x垂直像素數(shù)量的面積的 值。注意，根據(jù)本實(shí)施例，該尺寸將由主題尺寸檢測單元202B的功能獲 得。
此外，如前所述，例如基于面孔檢測處理，將每個個別主題的面 孔取向檢測為面向左或右之一。
此外，還可以例如使用面孔識別技術(shù)，通過獲得檢測的面孔的特 征來執(zhí)行成人/兒童判定，獲得成人/兒童屬性信息。
此外，在輸入圖38B所示的成像圖像數(shù)據(jù)并且主題檢測處理單元 201執(zhí)行主題檢測處理時，首先，面孔檢測處理識別出存在兩張面孔， 得到存在兩個個別主題的結(jié)果。在此，在這兩個個別主題中，將左側(cè)的主題識別為個別主題SBJ0，將右側(cè)的主題識別為個別主題SBJ1， 以4吏其可識別。此外，對個別主題SBJ0和SBJ1確定的重心坐標(biāo)是 G0(XO，Y0)和G1(X1，Y1)。
此外，在按此方式檢測到多個個別主題的情況下，獲得總的主題 重心Gt(Xg，Yg),其為多個個別主題的組(總主題)的重心。
盡管可以想到如何設(shè)定總主題重心Gt的各種設(shè)置，但是這里例 示其最簡單的示例，其中在最左側(cè)的主題的重心與最右側(cè)的主題的重
心之間繪制一條線，并將該線的中點(diǎn)取為多個檢測個別主題的總主題 重心Gt?？傊黝}重心Gt是可以在例如上述構(gòu)圖控制中使用的信息， 并且是可以通過計算獲得的信息，只要為每個個別主題獲得重心信息。 因此，盡管可以由主題檢測處理單元201獲得總主題重心Gt，并作為 檢測信息而輸出，但是可以安排為構(gòu)圖確定塊62利用作為檢測信息 獲得的與最左側(cè)和最右側(cè)的主題重心有關(guān)的具有表示個別主題的重心 位置的信息，獲得總主題重心Gt。
可以想到的另一設(shè)置方法示例是為多個個別主題的每一個提供 根據(jù)其尺寸的加權(quán)系數(shù)，并利用這些加權(quán)系數(shù)來獲得總主題重心Gt， 使得總主題重心Gt例如更靠近尺寸大的個別主題。
此外，可以將個別主題的尺寸取為個別主題SBJO和SBJ1的每 一個的根據(jù)各自面孔占據(jù)的面積的像素數(shù)量。
根據(jù)本實(shí)施例，可以對上述檢測到的個別主題(檢測個別主題)在 相關(guān)主題與無關(guān)主題(靜態(tài)主題)之間執(zhí)行區(qū)分，將被區(qū)分為相關(guān)主題 的那些主題設(shè)定為作為構(gòu)圖確定對象的對象個別主題。
接下來，將參照圖40到42描述通過本實(shí)施例的第一示例的構(gòu)圖 控制獲得的構(gòu)圖。
注意在此使用的"構(gòu)圖控制，，是表示如下控制處理的術(shù)語，即， 其中執(zhí)行構(gòu)圖確定處理和實(shí)現(xiàn)構(gòu)圖確定處理所確定的最優(yōu)構(gòu)圖的構(gòu)圖 匹酉己。
圖40例示如下情況作為主題檢測處理和主題區(qū)分處理的結(jié)果， 在成像圖像數(shù)據(jù)的圖像框內(nèi)檢測到單個對象個別主題SBJsO。注意，圖40所示的圖像框內(nèi)可以實(shí)際存在被檢測為無關(guān)主題的 其他主題，但是已經(jīng)從該圖略去這些無關(guān)主題以方便對該圖的理解。
此外，根據(jù)本實(shí)施例，在按正常狀態(tài)將數(shù)字靜態(tài)攝像機(jī)1安裝到 平臺10的布置中，將數(shù)字靜態(tài)攝像機(jī)1的取向設(shè)定為使得對風(fēng)景畫面 進(jìn)行成像。相應(yīng)地，根據(jù)構(gòu)圖控制的該笫一示例和后述第二示例，我 們將假設(shè)通過成像獲得風(fēng)景畫面。
如圖40所示檢測到單個對象個別主題的情況下，首先，改變對 象個別主題的尺寸，使得對象個別主題SBJsO在成像圖像數(shù)據(jù)的圖像 中占據(jù)的百分比是被視為最優(yōu)的預(yù)定值。例如，檢測到對象個別主題時， 如果對象個別主題在圖像中占據(jù)的百分比小于上述預(yù)定值，則通過執(zhí)行 變焦控制來縮小場角，使得該對象個別主題的百分比被提高到所述預(yù)定 值，如果對象個別主題在圖像中占據(jù)的百分比大于上述預(yù)定值，則通過 執(zhí)行變焦控制來擴(kuò)大場角，使得對象個別主題的百分比被降低到所述預(yù) 定值。存在一個對象個別主題的情況下，這種變焦控制使得主題尺寸對 于構(gòu)圖來說是最優(yōu)的。也就是說，為主題確定最優(yōu)尺寸，并執(zhí)行構(gòu)圖匹 配，使得該主題具有最優(yōu)尺寸。
接下來，存在一個對象個別主題的情況下，如下所述執(zhí)行對主題 在屏面的位置(主題位置)的調(diào)節(jié)。
至于確定構(gòu)圖確定中的主題位置，使用檢測的面孔方向信息。
在圖40的情況，已經(jīng)將對象個別主題SBJsO的面孔的方向檢測為 面向左側(cè)。此時，實(shí)際查看圖40所示的圖像內(nèi)容的屏面時，查看者看到 對象個別主題SBJsO在屏面中好像它面向左側(cè)。順便指出，作為對象個 別主題SBJsO的實(shí)際人實(shí)際上面向右側(cè)，其中面對執(zhí)行成像的成像設(shè)備 的方向是其前方。
此外，設(shè)定假想的圖像區(qū)域劃分線Ld，作為進(jìn)行主題位置調(diào)節(jié) 的基準(zhǔn)。圖像區(qū)域劃分線Ld是與穿過圖像的原點(diǎn)坐標(biāo)P (0, O)的垂直 線相匹配的直線，即匹配Y軸線。
一旦在此情況下檢測到面孔方向朝左，確定如下形式的最優(yōu)構(gòu) 圖將對象個別主題SBJsO的重心G從與圖像區(qū)域劃分線Ld相對應(yīng)的位置(X-O)移動到右側(cè)位置(水平移位位置)，移動量為水平偏移量Ax。 執(zhí)行構(gòu)圖匹配使得重心G位于該位置。因此，執(zhí)行控制以驅(qū)動平臺10 的搖攝機(jī)構(gòu)，使得重心G位于該水平移位位置。
通常，將主題位于中心的構(gòu)圖視為典型的不良構(gòu)圖。相反，將主 題的位置根據(jù)某種規(guī)則從重心移開的構(gòu)圖視為良好構(gòu)圖，例如，尤其 使用三分之一規(guī)則和黃金分割規(guī)則作為這種規(guī)則。對于本實(shí)施例，根 據(jù)這種構(gòu)圖確定技術(shù)，首先將個別主題SBJ(重心G)的位置沿屏面的 水平方向相對于屏面中心移動一定量(水平偏移量Ax)。
因此，對于本實(shí)施例，如果如圖40那樣對象個別主題的面孔面 對方向是左側(cè)，則將重心G在水平方向的位置定位在通過沿Y軸線的 圖像區(qū)域劃分線Ld將屏面分割成兩個區(qū)域而獲得的圖像區(qū)域(劃分區(qū) 域)的右側(cè)圖像區(qū)域，使得面孔位于與面孔面對的"左側(cè)"方向相反的 "右"側(cè)圖像區(qū)域，從而獲得個別主題SBJ的面孔所面對的位于屏面 左側(cè)的空間。
這種構(gòu)圖使得可以獲得與如下構(gòu)圖相比更好的構(gòu)圖例如其面孔 面向左側(cè)的對象個別主題SBJs的重心G位于與屏面在水平方向的中心 相對應(yīng)(相匹配)的主題位置，或者在圖像區(qū)域劃分線Ld的左側(cè)的圖像 區(qū)域中。
使用本實(shí)施例可以想到各種確定水平偏移量Ax的實(shí)際值的算法。 在此，使用所謂的"三分之一規(guī)則"作為基礎(chǔ)。三分之一規(guī)則是最基本 的構(gòu)圖設(shè)置技術(shù)之一 ，旨在通過將主題定位在水平和垂直地把方形屏面 劃分成3個的假想線上，來獲得良好的構(gòu)圖。
例如，在圖40，將水平偏移量Ax設(shè)定為使得重心G位于屏面的 將水平圖#^匡尺寸Cx等分成3段的沿垂直方向的兩條假想線中的右側(cè)的 假想線上。因此，可以根據(jù)個別主題的面孔方向獲得對于水平方向的主 題位置來說最優(yōu)的構(gòu)圖。
此外，盡管從圖中略去，在檢測到一個對象個別主題SBJsO的面 孔的方向沿右側(cè)方向的情況下，將對象個別主題SBJs的重心G沿水平 方向的位置定位成相對于圖40所示的位置關(guān)于圖^^區(qū)域劃分線Ld線性
61對稱。也就是說，在此情況下的水平偏移量Ax設(shè)定為與圖40所示的實(shí) 際值帶有相反的符號，然后基于該水平偏移量Ax來執(zhí)行搖攝控制。
此外，如圖41A那樣檢測到兩個對象主題SBJsO和SBJsl的情 況下，構(gòu)圖控制執(zhí)行的第一件事情是要對對象主題SBJsO和SBJsl組 構(gòu)成的總主題圖像部分的尺寸(例如，還可以將其理解成這些主題圖像部 分在整個屏面中占據(jù)的百分比)執(zhí)行調(diào)節(jié)(變焦控制)，根據(jù)對象主題數(shù)量 為2來將其設(shè)定(確定)為最優(yōu)值。
可以想到定義總主題圖像部分并獲得其尺寸的幾種方法，例如， 其中一種方法是將多個檢測的對象個別主題的每一個的圖像部分的尺 寸相加。另 一方法是獲得被繪制成包圍所有所述多個檢測個別主題的 假想線內(nèi)的圖像部分的尺寸。
確定所述兩個對象個別主題SBJsO和SBJsl在水平方向的主題 位置時，使用關(guān)于所述兩個對象個別主題SBJsO和SBJsl的面孔方向 的信息。
圖41A示出將所述兩個對象個別主題SBJsO和SBJsl的面孔方 向檢測為都朝向左側(cè)的情況。也就是說，所述兩個對象個別主題的面孔 方向是相同的，向左。
在此情況下，按與圖40所示的單個對象個別主題SBJs的情況相 同的方式，將對象個別主題SBJsO和SBJsl構(gòu)成的總主題圖4象部分定 位于圖像區(qū)域劃分線Ld的右側(cè)，其與面孔方向表示的"左側(cè)，，相反， 使得屏面左側(cè)形成有空間。也就是說，在此情況下，該主題位置確定 為最優(yōu)構(gòu)圖。為此，例如設(shè)定水平偏移量Ax以向右側(cè)移位預(yù)定量，如 圖所示。于是，執(zhí)行搖攝控制使得總主題重心Gt(即，兩個對象個別主 題SBJsO和SBJsl構(gòu)成的總主題圖像部分的重心)位于從經(jīng)過原點(diǎn)坐標(biāo) P (0, O)的垂直線(Y軸線)(其為圖像區(qū)域劃分線Ld)移位水平偏移量Ax的 位置。
此外，盡管在圖中未示出，在兩個對象個別主題SBJsO和SBJsl 的面孔方向都朝右的情況下，將這兩個對象個別主題SBJsO和SBJsl 的總主題重心Gt定位成相對于圖41A所示的在此情況下被確定為最優(yōu)構(gòu)圖的位置關(guān)于圖像區(qū)域劃分線Ld線性對稱(以與水平偏移量Ax的絕 對值相對應(yīng)的量移位到充當(dāng)基準(zhǔn)的Y軸線的左側(cè)的位置)，然后執(zhí)行搖 攝控制以實(shí)現(xiàn)該狀態(tài)。
應(yīng)當(dāng)指出盡管存在多個對象個別主題，在對象個別主題是1個的 情況下獲得的水平偏移量Ax如果應(yīng)用于本情況，M于導(dǎo)致主題太靠 右(或左)。因此，在如圖41A所示的存在兩個對象個別主題的情況下， 根據(jù)預(yù)定規(guī)則，將水平偏移量Ax設(shè)定(確定)為比對象個別主題數(shù)量是1 個的圖40的情況更小的值(絕對值)。
此外，圖41B示出兩個對象個別主題SBJsO和SBJsl的面孔方 向不同(即， 一個朝右， 一個朝左)的情況。這是對象個別主題數(shù)量是兩個 并且面孔方向不相同的情況的示例。
在此情況下，對于總主題圖像部分在水平方向的位置，確定最優(yōu) 構(gòu)圖處于兩個對象個別主題SBJsO和SBJsl的總重心Gt如圖所示位 于圖像區(qū)域劃分線Ld上的狀態(tài)，然后執(zhí)行調(diào)節(jié)(搖攝控制)以達(dá)到該狀 態(tài)。
根據(jù)由此獲得的配置，兩個對象個別主題SBJsO和SBJsl構(gòu)成 的總主題圖像部分位于屏面的沿水平方向的大約中間。然而，在存在多 個主題并且這些主題不朝著同一方向的情況下，即使總主題圖像部分位 于中間，其構(gòu)圖也是合適的。
此外，圖42示出檢測到3個對象個別主題SBJsO， SBJsl，以及 SBJs2的情況。對于在此情況下的構(gòu)圖控制，同樣，第一件事情是要對 對象個別主題SBJsO， SBJsl以及SBJs2構(gòu)成的總主題圖像部分的尺寸 執(zhí)行調(diào)節(jié)(變焦控制)，以將其設(shè)定為對于對象個別主題數(shù)量為3來說最優(yōu) 的尺寸。
在此情況下，同樣，在確定總主題圖像部分在水平方向的主題位 置時使用與每個對象個別主題的面孔方向有關(guān)的信息。圖42示出3 個對象個別主題SBJsO， SBJsl以及SBJs2的面孔方向全部被檢測為朝 向左側(cè)的情況。
在此情況下，如圖41A的情況那樣，將對象個別主題SBJsO， SBJsl，以及SBJs2構(gòu)成的總主題圖像部分定位在圖像區(qū)域劃分線Ld的右側(cè)的 圖像區(qū)域中，為此設(shè)定移位到右側(cè)的圖像區(qū)域的水平偏移量Ax，然后 執(zhí)行搖攝控制，使得總主題重心Gt位于由此確定的特定位置。
此外，在3個對象個別主題SBJsO， SBJsl以及SBJs2的面孔方向 全都朝向右側(cè)的情況下，執(zhí)行搖纟聶控制從而將總主題重心Gt定位成相 對于圖42所示的位置關(guān)于圖像區(qū)域劃分線Ld在水平方向線性對稱。 此外，將水平偏移量Ax設(shè)定為比圖41A的對象主題數(shù)量是2個的絕對 值更小的絕對值。因此，水平方向的主題位置對于對象主題數(shù)量例如是 3個來說是最優(yōu)的，并且可以獲得良好構(gòu)圖。
此外，在根據(jù)本第一示例的構(gòu)圖控制中，在3個對象個別主題 SBJsO，SBJsl以及SBJs2的面孔方向不全部相同的情況下，獲得如下構(gòu) 圖根據(jù)圖41B，總主題重心Gt位于圖像區(qū)域劃分線Ld(Y軸線)的位 置。
根據(jù)至此的描述，可以理解首先將根據(jù)第一示例的構(gòu)圖控制中的 沿水平方向的位置調(diào)節(jié)與為每個對象個別主題檢測的面孔方向相關(guān) 聯(lián)。也就是說，作為最基本的控制，在對象個別主題的數(shù)量是1個的 情況下，將重心G定位成根據(jù)為對象個別主題檢測的面孔方向是朝右 還是朝左，按預(yù)定量移位到圖像區(qū)域劃分線Ld(Y軸線)的右側(cè)區(qū)域或 左側(cè)區(qū)域，即對重心G執(zhí)行水平移位，以在圖像中在主題面對的方向 形成空間。
在對于構(gòu)圖控制來說對象個別主題數(shù)量是多個(兩個或更多個)并 且所有對象個別主題的面孔方向都相同的情況下，按與上述位置調(diào)節(jié) 相同的方式執(zhí)行總主題重心Gt的水平偏移，但如果不是都相同，則 不執(zhí)行水平偏移，而是將總主題重心Gt設(shè)置為具有與圖像區(qū)域劃分 線Ld相對應(yīng)的X坐標(biāo)，使得總主題圖像區(qū)域在屏面(圖像框)的中間 附近。
因此，執(zhí)行總主題重心Gt(或者，在個別主題的數(shù)量是l個的情 況下是重心G)的水平偏移時，如參照圖42到44所描述的，根據(jù)對象 個別主題的數(shù)量來改變水平偏移量Ax。相應(yīng)地，考慮總主題圖像部分在
64屏面的水平位置，使得可以根據(jù)對象個別主題的數(shù)量來獲得最優(yōu)位置。
圖43例示構(gòu)圖確定塊62和搖攝/傾斜/變焦控制塊63根據(jù)以上參 照圖40到42所描述的第一示例的構(gòu)圖控制來執(zhí)行的過程示例。應(yīng)當(dāng) 注意，可以將圖43所示的過程應(yīng)用于圖29、 32以及34所示的結(jié)構(gòu)中 的任何一個?？梢詫D43所示處理視為通過作為DSP的信號處理單 元24和控制單元27的CPU執(zhí)行的程序而實(shí)現(xiàn)。
此外，以下流程圖中，術(shù)語"總主題重心(Gt)"和"總主題圖像 部分"不再只用于檢測個別主題的數(shù)量是兩個或更多個，還用于檢測 個別主題的數(shù)量是1個的情況。即，例如可以將圖40所示的重心G 稱為"在檢測個別主題的數(shù)量是l個的情況下的個別主題重心Gt"， 可以將圖40中僅一個個別主題SBJ構(gòu)成的圖像部分稱為"在檢測個 別主題的數(shù)量是1個的情況下的總主題圖像部分"。
首先，步驟S1101到S1106是搜索并檢測主題然后執(zhí)行主題區(qū)分 的過程，主要由主題檢測處理單元201執(zhí)行。
在步驟SllOl，輸入并獲取基于來自圖像傳感器22的成像信號 的成像圖像數(shù)據(jù)。在步驟S1102，使用在步驟S1101獲取的成像圖像 數(shù)據(jù)執(zhí)行主題檢測處理和主題區(qū)分處理。這里的主題檢測處理由如前 所述的主題檢測處理單元201執(zhí)行。此外，主題檢測處理還包括檢測 每個檢測個別主題的面孔方向，并獲得其信息，如前所述。此外，根 據(jù)前面的描述，主題區(qū)分處理由主題區(qū)分單元211執(zhí)行。
在步驟S1103，作為步驟S1102的主題檢測處理和主題區(qū)分處理 的結(jié)果，確定是否存在作為構(gòu)圖確定對象的相關(guān)主題，即是否存在(區(qū) 分出)對象個別主題。在這里獲得否定確定結(jié)果因此不存在對象個別主 題的情況下(即，區(qū)分出的對象個別主題數(shù)量是零)，本流程進(jìn)行到步 驟S1104,然后根據(jù)主題搜索處理來執(zhí)行將場角加寬到預(yù)定場角(水平 /垂直角)的變焦透鏡移動控制(拉遠(yuǎn)(zoom out)控制)。如此加寬場角使 得可以對更寬范圍成像，意味著可以容易得多地捕獲主題。此外，在 步驟S1105，執(zhí)行搖攝/傾斜控制以移動平臺10的搖攝/傾斜機(jī)構(gòu)，以 進(jìn)行主題搜索。該控制是主題檢測處理單元201使通信控制處理塊64對發(fā)送到平臺10的通信單元52的用于搖攝/傾斜控制的控制信號進(jìn)行 處理來執(zhí)行的。例如，應(yīng)當(dāng)以允許有效執(zhí)行搜索的模式來移動平臺10 的搖攝/傾斜機(jī)構(gòu)，作為主題搜索的搖攝/傾斜控制。
此外，在步驟S1106，將模式標(biāo)記f設(shè)定為0(f=0)，然后本流程 返回到步驟S1101。
這樣，重復(fù)步驟S1101到S1106的過程，直到在成像圖像數(shù)據(jù)的 圖像內(nèi)容中檢測到至少一個個別主題。此時，數(shù)字靜態(tài)攝像機(jī)l和平 臺10構(gòu)成的系統(tǒng)處于沿?fù)u攝方向和傾斜方向移動數(shù)字靜態(tài)攝像機(jī)1 以用于主題搜索的狀態(tài)。
在步驟S1103給出肯定確定結(jié)果因此存在對象個別主題的情況 下，本流程圖進(jìn)行到步驟S1107的過程并繼續(xù)。
在步驟S1107，確定當(dāng)前設(shè)定給模式標(biāo)記f的值。
在確定f = 0成立的情況下，a示應(yīng)當(dāng)執(zhí)行初始粗略主題捕獲模 式作為構(gòu)圖控制，因此如圖43所示執(zhí)行從步驟S1108開始的過程。
在步驟S1108,確定總主題重心Gt是否位于成像圖像數(shù)據(jù)的屏 面(顯示成像圖像數(shù)據(jù)的屏面內(nèi)容時獲得的屏面)中的原點(diǎn)坐標(biāo)P (0， O)(見圖39)?，F(xiàn)在，在獲得否定確定結(jié)果因此總主題重心Gt尚未位于 原點(diǎn)坐標(biāo)的情況下，在步驟S1109執(zhí)行控制以移動平臺10的搖攝/傾 斜機(jī)構(gòu)，使得總主題重心Gt位于原點(diǎn)坐標(biāo)，然后本流程返回到步驟 SllOl。這樣，在檢測到存在個別主題的狀態(tài)下，在作為初始構(gòu)圖控制 過程的捕獲模式下，對平臺10的搖攝/傾斜機(jī)構(gòu)進(jìn)行控制，使得總主 題重心Gt位于作為初始基準(zhǔn)位置的原點(diǎn)坐標(biāo)，以將示出檢測的對象 個別主題的圖像區(qū)域顯示在屏面中間。
現(xiàn)在示出在步驟S1109用于執(zhí)行搖攝/傾斜控制的算法的示例。 在模式標(biāo)記f = 0的狀態(tài)檢測到個別主題的狀態(tài)下，主題檢測處理單元 201執(zhí)行以下表達(dá)式(4)所示的計算，以獲得搖攝方向運(yùn)動量S,和傾 斜方向運(yùn)動量Stilt，它們是必須執(zhí)行的運(yùn)動的運(yùn)動量。在以下表達(dá)式(4) 中，n表示區(qū)分出的對象個別主題的數(shù)量，p(Xi，Yi)表示第O到第n-l對 象個別主題(或者更具體來說是被分配0到n-l號碼的對象個別主題)中的第i對象個別主題的重心的X-Y坐標(biāo)。注意，如圖39所示，在此情況下 的原點(diǎn)坐標(biāo)(O， O)是屏面的水平方向的中心點(diǎn)與其垂直方向的中心點(diǎn)的交 點(diǎn)。
(表達(dá)式4)
W—1
在例如步驟S1108，確定運(yùn)動量Span， Sti"的絕對值是否在預(yù)定值(更 精確地說是O，但是可以是大于O的值)之內(nèi)，從而可以確定總主題重心
Gt是否等效于位于原點(diǎn)坐標(biāo)P。在步驟S1109，執(zhí)行搖攝/傾斜控制， 使得運(yùn)動量Span， Stilt的絕對值在所述預(yù)定值內(nèi)。在搖才聶/傾斜控制時搖攝 機(jī)構(gòu)單元53和傾斜機(jī)構(gòu)單元56的速度可以是恒定速度，或者例如在 運(yùn)動量Span， S他很大的情況下可以被設(shè)置為更快。這種設(shè)置使得即使搖 攝或傾斜運(yùn)動的量很大，也可以在相對短的時間內(nèi)使總主題重心Gt 靠近原點(diǎn)坐標(biāo)。
在步驟S1108作出肯定確定結(jié)果因此總主題重心Gt位于原點(diǎn)坐 標(biāo)的情況下，在步驟SlllO，將模式標(biāo)記設(shè)定為l(f = 1)，然后本流程 返回到步驟SllOl。在步驟S1110將模式標(biāo)記f設(shè)定為1的狀態(tài)表示作為 構(gòu)圖控制的初始過程的捕獲模式已經(jīng)結(jié)束，因此應(yīng)當(dāng)執(zhí)行下一第一調(diào)節(jié) 控制(構(gòu)圖調(diào)節(jié)模式)。
在模式標(biāo)記是f = 1并且應(yīng)當(dāng)執(zhí)行第一構(gòu)圖調(diào)節(jié)模式的情況下，本 流程從步驟S1107進(jìn)行到步驟Sllll。第 一構(gòu)圖調(diào)節(jié)模式用于執(zhí)行變焦(場 角)調(diào)節(jié)和搖攝控制，以根據(jù)檢測個別主題的數(shù)量和個別主題的面孔方向 的組合來獲得最優(yōu)構(gòu)圖。注意，場角調(diào)節(jié)和搖才聶控制會導(dǎo)致個別主題在 屏面(圖#4醫(yī))中的尺寸和個別主題的位置的變化。
在步驟Sllll，確定當(dāng)前設(shè)定多少個對象個別主題，在l個的情 況下，執(zhí)行從步驟S1112開始的過程。
在步驟S1112，根據(jù)檢測對象個別主題的數(shù)量為l個來設(shè)定目標(biāo)主題尺寸。這里的目標(biāo)主題尺寸是屏面的總主題圖像部分尺寸被視為
對構(gòu)圖來說最優(yōu)的尺寸，在例如與圖40相對應(yīng)的情況下，該尺寸等效 于"所述(一個)對象個別主題SBJsO在成像圖像數(shù)據(jù)中占據(jù)的百分比 被視為最優(yōu)的預(yù)定范圍值"。
在步驟S1113，確定對象個別主題的尺寸是否合適。對象個別主
標(biāo)主題尺寸的狀態(tài)。在步驟S1113獲得否定確定結(jié)果的情況下，本流 程進(jìn)行到步驟S1114，執(zhí)行變焦透鏡驅(qū)動控制(變焦控制)，使得對象個 別主題的尺寸是目標(biāo)主題尺寸，然后本流程返回到步驟SllOl。
注意此時執(zhí)行變焦控制，使得對總主題重心Gt在水平方向(左右 方向)的位置，保持與在步驟S1109設(shè)定的X坐標(biāo)(X-0)相對應(yīng)的位置。 因此，可以保持對象個別主題位于水平方向的中間附近的狀態(tài)。此外， 在執(zhí)行主題搜索操作時，在步驟S1104執(zhí)行拉遠(yuǎn)控制，因此對步驟 S1114的變焦控制可能將執(zhí)行拉近(zoom in)控制。然而，此時檢測個 別主題的尺寸由于某種原因而大于目標(biāo)主題尺寸因此在步驟S1113獲 得否定確定結(jié)果的情況下，在步驟S1114執(zhí)行拉遠(yuǎn)以執(zhí)行控制，使得 實(shí)際對象個別主題尺寸變成目標(biāo)主題尺寸。
在步驟S1113獲得肯定確定結(jié)果的情況下，本流程進(jìn)行到步驟 S1115的過程然后繼續(xù)。
在步驟S1115，設(shè)定水平偏移量Ax。在此，在根據(jù)本實(shí)施例的第 一示例的構(gòu)圖控制中，通過以下表達(dá)式(5)來獲得水平偏移量Ax。 Ax = D x (Cx/6) / n 表達(dá)式(5)
在表達(dá)式(5)中，D表示系數(shù)，基于面孔方向或多個面孔方向組合 (關(guān)系)將該系數(shù)設(shè)定為+l，-l，或0之一。Cx表示水平圖像尺寸。項(xiàng)Cx/6 對應(yīng)于基于三分之一規(guī)則獲得的垂直方向的假想線的X坐標(biāo)。此外，n 表示已經(jīng)區(qū)分出(設(shè)定)的對象個別主題數(shù)量。
在本流程到達(dá)步驟S1115的情況下，這里11 = 1，因?yàn)樗鶛z測的對 象個別主題是l個。此外，面孔方向是向左或向右。如果面孔方向向左， 則系數(shù)D是+1，如果面孔方向向右，則系數(shù)D是-1，相應(yīng)地，已區(qū)分的一個對象個別主題的面孔方向是向左的情況
下，厶義=《乂/6成立，表示垂直線的位置從經(jīng)過原點(diǎn)坐標(biāo)P(O， O)的垂直 線(其為圖像區(qū)域劃分線Ld(Y軸線))起向右移動Cx/6的量。所述垂直線 的位置與三分之一規(guī)則的兩條假想線中的右側(cè)假想線相同。
另一方面，已區(qū)分的一個對象個別主題的面孔方向是向右的情況 下，水平偏移量Ax-Cx/6成立，表示垂直線的位置從經(jīng)過原點(diǎn)坐標(biāo)P(O， O)的垂直線(其為圖像區(qū)域劃分線Ld(Y軸線))起向左移動Cx/6的量。所 述垂直線的位置與三分之一規(guī)則的兩條假想線中的左側(cè)假想線相同。
在步驟S1116，確定總主題重心Gt(在此情況下圖40的重心G與 總主題重心Gt相同，因?yàn)橹挥幸粋€對象個別主題)是否位于與以上在 步驟S1115設(shè)定的水平偏移量Ax相對應(yīng)的X坐標(biāo)。在此得到否定確定 結(jié)果的情況下，本流程進(jìn)行到步驟S1117。
在步驟S1117，執(zhí)行搖攝控制使得總主題重心Gt位于與水平偏 移量Ax相對應(yīng)的X坐標(biāo)，然后本流程返回到步驟S1101。
在總主題重心Gt位于與水平偏移量Ax相對應(yīng)的X坐標(biāo)的情況下， 由于步驟S1117的控制，在步驟S1116獲得肯定確定結(jié)果。在步驟S1116 獲得肯定確定結(jié)果的情況下，根據(jù)其面孔方向，對象個別主題(SBJ)的重 心位于從圖像區(qū)域劃分線Ld向左或向右移動水平偏移量Ax的位置， 如圖40所示。
在步驟S1116獲得肯定確定結(jié)果的情況下，本流程進(jìn)行到步驟 S1118，將才莫式標(biāo)記f i殳定為2，然后本流程返回到步驟SllOl。如從 以下描述將顯而易見的那樣，模式標(biāo)記是f-2的狀態(tài)是如下狀態(tài)第 一構(gòu)圖調(diào)節(jié)已結(jié)束，因此應(yīng)當(dāng)執(zhí)行下一第二構(gòu)圖調(diào)節(jié)模式，然后應(yīng)當(dāng)執(zhí) 行釋放操作。
此外，在步驟Sllll確定對象個別主題的數(shù)量是兩個或更多個的 情況下，執(zhí)行從步驟S1119開始的過程。在步驟S1119，執(zhí)行設(shè)定目 標(biāo)主題尺寸的處理。在對象個別主題的數(shù)量是兩個或更多個的情況下， 例如，根據(jù)對象個別主題的數(shù)量，獲得最優(yōu)構(gòu)圖的目標(biāo)主題尺寸會不 同。因此，在步驟S1119，根據(jù)步驟S1102檢測的對象個別主題的數(shù)量設(shè)定預(yù)定目標(biāo)主題尺寸。此外，應(yīng)當(dāng)指出，在對象個別主題的數(shù)量 是兩個或更多個的情況下，目標(biāo)主題尺寸涉及所有檢測個別主題構(gòu)成 的總主題圖像部分。
在步驟S1120，確定對象個別主題的尺寸是否合適。也就是說， 此處，確定從與對象個別主題有關(guān)的檢測信息獲得的總主題圖像部分 的尺寸是否與以上步驟S1120設(shè)定的目標(biāo)主題尺寸相同。
在步驟S1120獲得否定確定結(jié)果的情況下，本流程進(jìn)行到步驟 S1121。在步驟S1121,以與步驟S1114相同的方式，執(zhí)4亍變焦透鏡驅(qū) 動控制(變焦控制)，使得此時檢測的對象個別主題的總主題圖像部分 的尺寸是步驟S1119設(shè)定的目標(biāo)主題尺寸，然后本流程返回到步驟 SllOl。
另一方面，在步驟S1120獲得肯定確定結(jié)果的情況下，本流程進(jìn) 行到步驟S1122。
在步驟S1122,確定為多個對象個別主題中的每一個檢測的面孔 方向是否全部相同。
首先，在步驟S1122獲得肯定確定結(jié)果的情況下，執(zhí)行步驟S1123 的過程然后繼續(xù)。在步驟S1123，利用上述表達(dá)式(5)設(shè)定水平偏移量
在此情況下，根據(jù)已經(jīng)檢測的相同面孔方向是朝左還是朝右，將 +1或-1代入表達(dá)式(5)的系數(shù)D。此外，根據(jù)檢測的對象個別主題的數(shù) 量，將2或更大的數(shù)字代入n。
如可以從此理解到的，利用表達(dá)式(5)，對象個別主題的數(shù)量越多， 水平偏移量Ax的絕對值就越小。也就是說，如參照圖40、 41A以及42 所描述的，隨著對象個別主題數(shù)量的增加，總主題圖像部分從圖像區(qū)域 劃分線Ld向左或向右的偏移量會變小。
另一方面，在步驟S1122獲得否定確定結(jié)果的情況下，在步驟 S1124設(shè)定水平偏移量Ax = 0。
還應(yīng)當(dāng)指出，此處還可以在步驟S1124通過執(zhí)行表達(dá)式(5)的計算 設(shè)定Ax-0。也就是說，在步驟S1122獲得否定確定結(jié)果的情況下，即，在多個面孔方向不全部相同的情況下，在步驟S1124，將算法配置成將0 代入系數(shù)D，然后執(zhí)行表達(dá)式(5)的計算。
在執(zhí)行步驟S1123或步驟S1124的過程之后，本流程進(jìn)行到步驟 S1125的過程然后繼續(xù)。
在步驟S1125，S1126和S1127，按與步驟S1116到S1118的處理相 同的方式，執(zhí)行搖攝控制，直到總主題重心Gt位于與步驟S1123或 S1124設(shè)定的水平偏移量Ax相對應(yīng)的X坐標(biāo)。作為該控制的結(jié)果，所 述多個對象個別主題的面孔方向全部相同的情況下，這意味著已經(jīng)達(dá)到 總主題圖像部分(總主題重心Gt)已經(jīng)向左或向右方向移動與對象個別主 題數(shù)量相對應(yīng)的水平偏移量Ax的狀態(tài)。達(dá)到該狀態(tài)時，在步驟S1125獲 得肯定確定結(jié)果，在步驟S1127將模式標(biāo)記f設(shè)定為2，然后本流程返回 到步驟S1101。
在將模式標(biāo)記f設(shè)定為2的狀態(tài)下，已經(jīng)完成如下過程根據(jù)對 象個別主題數(shù)量的尺寸調(diào)節(jié)，以及根據(jù)每個對象個別主題或其組合的 面孔方向的沿水平方向的位置調(diào)節(jié)，參照圖40到42描述，作為構(gòu)圖 控制。因此，在步驟S1107確定才莫式標(biāo)記f為2的情況下，在步驟S1128 的過程執(zhí)行第二構(gòu)圖調(diào)節(jié)模式然后繼續(xù)。
例如，盡管以上參照圖40到42的構(gòu)圖控制的描述中未描述如何 設(shè)定對象主題的重心沿屏面垂直方向的位置，在實(shí)際實(shí)踐中，可能存 在通過從屏面中心垂直移動(偏移)一定量來獲得更好構(gòu)圖的情況。因 此，通過根據(jù)本實(shí)施例的構(gòu)圖控制的實(shí)際應(yīng)用，還為總主題重心Gt 設(shè)定垂直方向偏移量，使得可以獲得更好的最優(yōu)構(gòu)圖。為此的過程是 接下來描述的步驟S1128和步驟S1129執(zhí)行的第二構(gòu)圖調(diào)節(jié)模式。
在步驟S1128，確定總主題重心Gt(在對象個別主題數(shù)量是1個 的情況下是對象個別主題的重心G)的位置是否從經(jīng)過屏面原點(diǎn)坐標(biāo)P 的水平線(X軸)偏移了垂直偏移量Ay(即，重心偏移是否合適)。
在步驟S1128獲得否定確定結(jié)果的情況下，在步驟S1129，執(zhí)行 傾斜控制，使得平臺10的傾斜機(jī)構(gòu)移動以將重心偏移所設(shè)定的垂直偏 移量Ay,然后本流程返回到步驟SllOl。在步驟S1128獲得肯定確定結(jié)果時，這意味著總主題圖像部分的位置在水平方向和垂直方向都符合最 優(yōu)構(gòu)圖，而且總主題圖像部分的尺寸也符合最優(yōu)構(gòu)圖。也就是說，已經(jīng) 實(shí)現(xiàn)最優(yōu)構(gòu)圖。
對于步驟S1128和S1129，可以想到幾種如何設(shè)定垂直偏移量Ay 的實(shí)際值的技術(shù)，因此，本實(shí)施例并不具體限于任一技術(shù)。最簡單的一 種設(shè)置方式是例如，基于三分之一規(guī)則，給出從垂直方向的中心位置起 與垂直圖像尺寸Cy的1/6相等的長度值。當(dāng)然，可以想到如下配置例 如，基于對象個別主題的數(shù)量、面孔方向以及其組合來設(shè)定不同的值。
在步驟S1128獲得肯定確定結(jié)果的情況下，執(zhí)行與從步驟S1130 開始的釋放動作相應(yīng)的處理過程。在此描述的釋放動作是將此時獲得 的成像圖像數(shù)據(jù)作為靜態(tài)圖像數(shù)據(jù)存儲在存儲介質(zhì)(存儲器卡40)中的 動作，如稍后描述的那樣。也就是說，這對應(yīng)于如下情況用戶正在 執(zhí)行手動快門操作，然后響應(yīng)于快門操作將此時獲得的成像圖像數(shù)據(jù) 作為靜態(tài)圖像數(shù)據(jù)存儲在記錄介質(zhì)中。
在步驟S1130，確定當(dāng)前是否滿足用于執(zhí)行釋放動作的條件。這 些條件例如可以包括是否處于聚焦?fàn)顟B(tài)(自動聚焦控制被設(shè)定為打開 的情況下)、平臺10的搖攝/傾斜機(jī)構(gòu)是否處于靜止?fàn)顟B(tài)等。
在步驟S1130獲得否定確定結(jié)果的情況下，本流程返回到步驟 SllOl，然后等待滿足執(zhí)行釋放動作的狀態(tài)條件。另一方面，在步驟 S1130獲得肯定確定結(jié)果的情況下，在步驟S1131執(zhí)行釋放動作。這 樣，根據(jù)本實(shí)施例，可以將具有最優(yōu)構(gòu)圖的成像圖像數(shù)據(jù)記錄成靜態(tài) 圖像數(shù)據(jù)。
當(dāng)釋放動作結(jié)束時，在步驟S1132對某些參數(shù)執(zhí)行初始化設(shè)置。 在該處理中，將模式標(biāo)記f的初值設(shè)定為0,還將變焦透鏡位置返回 到預(yù)先設(shè)定的初始位置。
在執(zhí)行步驟S1132之后，本處理返回到步驟S1101。將處理從步 驟S1132返回到步驟S1101意味著自動重復(fù)執(zhí)行如下動作搜索主題， 根據(jù)通過搜索檢測的對象個別主題朝向的方向和對象個別主題的數(shù)量 來獲得最優(yōu)構(gòu)圖，然后執(zhí)行成像記錄(釋放動作)。
72上述圖43的情況中的釋放動作是從成像圖像將靜態(tài)圖像記錄到 記錄介質(zhì)的操作，但是在更寬泛的意義上，根據(jù)本實(shí)施例的釋放動作 涵蓋例如從成像圖像獲得合適的靜態(tài)圖像數(shù)據(jù)，包括將靜態(tài)圖像記錄 在記錄介質(zhì)中。因此，在釋放動作中還包括如下動作例如，通過根 據(jù)本實(shí)施例的數(shù)字靜態(tài)攝像機(jī)1從成像圖像獲得靜態(tài)圖像數(shù)據(jù)，經(jīng)由 數(shù)據(jù)接口等將其傳送給另 一記錄裝置等。
根據(jù)至此描述的圖43的過程，首先，在步驟S1108和S1109， 執(zhí)行搖才t/傾斜控制以進(jìn)行捕獲，其中基于在步驟S1108和S1109利用以 上表達(dá)式(4)獲得的運(yùn)動量Span， Stilt，將一個或更多個對象個別主題的總 主題重心Gt定位在屏面的原點(diǎn)坐標(biāo)P。在下一階段，基于對象個別主 題的數(shù)量和為每個對象個別主題檢測的面孔方向的關(guān)系，獲得水平偏 移量Ax,然后執(zhí)行搖攝控制，其中以經(jīng)過原點(diǎn)坐標(biāo)P的垂直線(其為圖像 區(qū)域劃分線Ld(Y軸線))為基準(zhǔn)，將總主題重心Gt沿左或右方向移動 與水平偏移量Ax相對應(yīng)的量。進(jìn)而，執(zhí)行傾斜控制，其中以經(jīng)過原點(diǎn)坐 標(biāo)P的水平線為基準(zhǔn)，將總主題重心Gt向上或向下移動與垂直偏移量 Ay相對應(yīng)的量。
根據(jù)以上教導(dǎo)，可以說圖43的過程的搖攝/傾斜控制包括首先 通過下式來獲得運(yùn)動量Span， S他，
表 " 達(dá)
式(6)
然后對搖攝機(jī)構(gòu)執(zhí)行控制以獲得與運(yùn)動量Span相對應(yīng)的屏面內(nèi)運(yùn)動量， 并對傾斜機(jī)構(gòu)執(zhí)行控制以獲得與運(yùn)動量Stm相對應(yīng)的屏面內(nèi)運(yùn)動量。
接下來，將描述根據(jù)本實(shí)施例的第二示例的構(gòu)圖控制。圖44示 出第二示例的構(gòu)圖控制對應(yīng)的情況，例示了區(qū)分出3個對象個別主題 SBJsO，SBJsl以及SBJs2的狀態(tài)。這些對象個別主題中，為對象個別主 題SBJsO和SBJs2檢測的面孔方向是朝左，為對象個別主題SBJsl檢測到的面孔方向是朝右。在此情況下，這些對象個別主題的面孔方向并
不全部相同，因此根椐第一構(gòu)圖控制示例，如參照圖41B和其他圖所描 述的，將構(gòu)圖設(shè)置成使得總主題重心Gt被設(shè)定在經(jīng)過原點(diǎn)坐標(biāo)P的垂 直線(其為圖像區(qū)域劃分線Ld(Y軸線))。
然而，所述三個對象個別主題中的大多數(shù)，即兩個對象個別主題 SBJsO和SBJs2面對同一方向(面孔方向相同)的事實(shí)，可能讓我們想到 如果這些對象個別主題正在看什么重要東西的話，那么它在所述兩個對 象個別主題SBJsO和SBJs2面對的方向的可能性大于它在所述一個對 象個別主題SBJsl面對的方向的可能性?；谶@一思想，我們可以說在 所述兩個對象個別主題SBJsO和SBJs2面對的區(qū)域中留下空間使得獲 得良好構(gòu)圖的可能性更大。在此情況下，所述兩個對象個別主題SBJsO 和SBJs2被檢測為面對左側(cè)，因此將這3個對象個別主題SBJsO， SBJsl， 以及SBJs2構(gòu)成的總主題圖像部分的總主題重心Gt移動到屏面的圖像 區(qū)域劃分線Ld的右側(cè)圖像區(qū)域，以獲得良好構(gòu)圖。
相應(yīng)地，利用第二示例的構(gòu)圖控制，在相同面孔方向的數(shù)量以預(yù) 定百分比占對象個別主題的全部數(shù)量的大多數(shù)的情況下，對于為多個 個別主題的每一個檢測的面孔方向的區(qū)域，將該相同面孔方向作為基 準(zhǔn)面孔方向。也可以說該基準(zhǔn)面孔方向表示在屏面中全部的多個對象 個別主題組整體面對的方向?；谠摶鶞?zhǔn)面孔方向來獲得并設(shè)定水平 偏移量Ax。在圖44所示的情況，由于這種構(gòu)圖控制獲得如下構(gòu)圖將 總主題重心Gt設(shè)定到經(jīng)過原點(diǎn)坐標(biāo)P的垂直線的右側(cè)。
此外，盡管在此未示出，在未獲得足夠的相同面孔方向以按預(yù)定 百分比占大多數(shù)的情況下，即，在基準(zhǔn)面孔方向不確定的情況下，本 實(shí)施例的思想是優(yōu)選地設(shè)定如下構(gòu)圖總主題圖像部分定位在沿水平 方向的中間附近。因此，在此情況下，將水平偏移量Ax設(shè)定為0。
圖45例示根據(jù)上述第二示例的由圖5A到5D所示的主題檢測處 理單元201、構(gòu)圖確定塊62以及通信控制處理塊64執(zhí)行的過程示例。
在圖45所示的過程中，除了步驟S1221-l和S1222-2以外，從 步驟S1201到S1232的過程均與圖43的從步驟S1101到S1132的過程相同。
插入步驟S1221-l和隨后的步驟S1222-2，作為在步驟S1222獲得 否定確定結(jié)果的情況下執(zhí)行的過程。也就是說，在對象個別主題數(shù)量是 多個，并且在已經(jīng)完成總主題圖像部分的尺寸調(diào)節(jié)的階段，為每個對象
步驟S1221-1和S1222-2。
在步驟S1222-1，執(zhí)行處理以確定基準(zhǔn)面孔方向。為此，如上所述， 例如，對多個對象個別主題和面孔方向的關(guān)系，確定具有相同面孔方向 的 一組對象個別主題是否是由足夠大數(shù)量的對象個別主題組成，該數(shù)量 足以按某個百分比或更高的百分比占已檢測的對象個別主題的總數(shù)量的 大多數(shù)。在存在這種對象個別主題組的情況下，確定該對象個別主題組 的面孔方向是有效的基準(zhǔn)面孔方向。另一方面，在不存在這種對象個別 主題組的情況下，確定不存在基準(zhǔn)面孔方向。
對于以上預(yù)定百分比，在實(shí)際實(shí)踐中，應(yīng)當(dāng)在考慮對象個別主題 的數(shù)量和對象個別主題的面孔方向的關(guān)系的情況下，適當(dāng)確定要實(shí)際 設(shè)定什么類型的值。盡管可以基本設(shè)定一個固定值，但是可以作出如 下安排例如，根據(jù)確定的對象個別主題數(shù)量來設(shè)定不同的預(yù)定值。
此外，除了以上算法以外，還可以想到其他用于基準(zhǔn)面孔方向檢 測處理的算法。例如，可以作出如下安排例如，將具有相同面孔方 向的最大組的對象個別主題的面孔方向直接當(dāng)成值基準(zhǔn)面孔方向，而 不考慮其相對于對象個別主題總數(shù)的百分比。在此情況下，如果具有 不同面孔方向的每個組的對象個別主題的數(shù)量相同，則確定不存在基 準(zhǔn)面孔方向。
在步驟S1222-2，確定是否作為步驟S1222-1的面孔方向確定處理 結(jié)果已確定了有效的基準(zhǔn)面孔方向。
現(xiàn)在，在獲得肯定確定結(jié)果的情況下，本流程進(jìn)行到步驟S1223。 在此情況下，在步驟S1223，基于步驟S1222-1中確定的基準(zhǔn)面孔方向來 確定系數(shù)D，然后確定并設(shè)定水平偏移量Ax。
另一方面，在步驟S1222-2獲得否定確定結(jié)果的情況下，這意味著在前一步驟S1222-1未確定有效的基準(zhǔn)面孔方向，無論是向右還是向左。 在此情況下，本流程進(jìn)行到步驟S1224，由此將水平偏移量Ax設(shè)定為0。 這樣，插入步驟S1222-l和S1222-2實(shí)現(xiàn)根據(jù)第二示例的如參照圖44 所述的構(gòu)圖控制。
注意，圖43和45所示的過程以混合方式包括可以視為構(gòu)圖確定 處理的過程，和用于根據(jù)確定結(jié)果來控制構(gòu)圖匹配的過程(構(gòu)圖控制)， 而一些步驟同時執(zhí)行構(gòu)圖確定和構(gòu)圖匹配。這是因?yàn)閳D43和45所示 過程是根據(jù)實(shí)際實(shí)踐而具體例示的。應(yīng)當(dāng)將本實(shí)施例的基本構(gòu)思視為 對例示為至此描述的構(gòu)圖確定塊200、構(gòu)圖確定塊62等的構(gòu)圖確定的 配置的應(yīng)用。也就是說，可以將根據(jù)本實(shí)施例的成像系統(tǒng)視為，根據(jù) 對象個別主題數(shù)量，確定并判定被視為最優(yōu)的構(gòu)圖，然后適當(dāng)執(zhí)行變 焦控制和搖攝/傾斜控制，使得實(shí)際獲得(反映)所確定構(gòu)圖的成像圖像 數(shù)據(jù)。
此外，根據(jù)從圖38A和38B起的圖描述的構(gòu)圖確定和構(gòu)圖控制 的具體示例，已經(jīng)描述面孔方向檢測是左或右兩級，但是在實(shí)際中， 可以作出如下配置除了左和右以外，面孔方向檢測處理還包括面對 正前方。在此情況下，同樣，可以有效地應(yīng)用本發(fā)明實(shí)施例的構(gòu)圖控 制。
例如，在如圖40那樣檢測到單個對象個別主題，并且面孔被檢 測為面對正前方的情況下，可以想到如下安排將主題位置沿水分方 向定位在屏面中間附近，使得重心G大致在圖像區(qū)域劃分線Ld(Y軸) 上。然而，這種構(gòu)圖通常被當(dāng)作典型的不良構(gòu)圖示例。因此，可以想 到如下安排在檢測的單個主題的數(shù)量是l個并且面孔方向朝正前方 的情況下，設(shè)定水平偏移量Ax^f吏得獲得圖40的構(gòu)圖，或者相對于圖40 的構(gòu)圖關(guān)于圖像區(qū)域劃分線Ld線性對稱的構(gòu)圖。這使得可以根據(jù)三分 之一規(guī)則來獲得良好構(gòu)圖。
此外，在檢測到兩個或更多的對象個別主題，并且所有對象個別 主題的面孔方向朝正前方或者基準(zhǔn)面孔方向朝正前方的情況下，可以 想到如下安排在將表達(dá)式(4)的系數(shù)D設(shè)定為O之后設(shè)定水平偏移量
76Ax，以獲得該構(gòu)圖。
此外，在可以檢測到垂直面孔方向的情況下，可以根據(jù)垂直方向 的面孔方向檢測結(jié)果來執(zhí)行本發(fā)明實(shí)施例的構(gòu)圖控制。在此情況下， 以水平方向的圖像區(qū)域劃分線Ld(例如經(jīng)過原點(diǎn)坐標(biāo)的水平線(X軸) 就可以)作為基準(zhǔn)在垂直方向移動總主題重心Gt。
此外，在可以檢測到對角面孔方向的情況下，可以根據(jù)對角方向 (其為水平方向與垂直方向的合成)的面孔方向檢測結(jié)果來執(zhí)行本發(fā)明 實(shí)施例的構(gòu)圖控制。在此情況下，將跨過屏面的與所檢測的對角面孔 方向正交的線(例如經(jīng)過原點(diǎn)坐標(biāo)的水平線)設(shè)定為圖像區(qū)域劃分線 Ld，然后將總主題重心Gt移動到該圖像區(qū)域劃分線Ld分割出的圖像 區(qū)域之一。
此外，在僻如面孔檢測方向在水平方向或垂直方向具有2級或3 級或更多級的情況下，可以想到使用如下算法的安排水平偏移量 Ax(或垂直偏移量Ay)可以根據(jù)由此檢測的方向級數(shù)而變化。
此外，如圖39所示，在此情況下，將基準(zhǔn)線經(jīng)過的基準(zhǔn)點(diǎn)描述 成屏面的原點(diǎn)坐標(biāo)，但是例如可以將基準(zhǔn)點(diǎn)的位置設(shè)定到除原點(diǎn)坐標(biāo) 以外的其他位置，以獲得更好構(gòu)圖。
此外，應(yīng)當(dāng)指出，先前參照圖24到35描述的示例是部分示例， 可以想到應(yīng)用根據(jù)本發(fā)明的構(gòu)圖確定的其他裝置、系統(tǒng)、應(yīng)用軟件等。
此外，至此為止的實(shí)施例的描述中，將主題(對象個別主題)描述 為人，但是本發(fā)明也可以應(yīng)用于除人以外的主題的情況，如動物。
此外，根據(jù)本發(fā)明實(shí)施例確定的構(gòu)圖(最優(yōu)構(gòu)圖)并不一定限制于 通過將諸如三分之一規(guī)則的構(gòu)圖設(shè)置技術(shù)應(yīng)用于多個對象個別主題中 的要素而確定的構(gòu)圖。甚至通常被認(rèn)為很差的構(gòu)圖也可能被用戶覺得 很有趣或者甚至更好，這取決于如何對構(gòu)圖進(jìn)行設(shè)定。相應(yīng)地，根據(jù) 本發(fā)明實(shí)施例確定的構(gòu)圖(最優(yōu)構(gòu)圖)在實(shí)際使用中并不受到具體限 制，而是可以在考慮可用性、娛樂要素等的情況下來可選地設(shè)定。
此外，根據(jù)上述第一到第三實(shí)施例，將例如作為面孔照片的主題 或不在正常主題距離范圍或尺寸(圖像內(nèi)尺寸或?qū)嶋H尺寸)范圍內(nèi)的主題視為無關(guān)主題并排除掉，而將在正常主題距離范圍或尺寸范圍內(nèi)的 主題纟見為相關(guān)主題。
然而，根據(jù)至此的描述，不言自明，可以作出如下配置將在先 前描述的第一到第三實(shí)施例中被處理為無關(guān)主題的主題區(qū)分為構(gòu)圖確 定的對象，視為相關(guān)主題。這是因?yàn)樵诘谝坏降谌龑?shí)施例中對相關(guān)主 題的區(qū)分處理意味著，可以視為已對在第 一到第三實(shí)施例中被處理為 無關(guān)主題的主題進(jìn)行了區(qū)分。這種配置也可以應(yīng)用到基于本發(fā)明實(shí)施 例的構(gòu)圖確定配置，并且根據(jù)其應(yīng)用是有用的。
此外，與此相關(guān)聯(lián)，可以將基于本發(fā)明實(shí)施例的構(gòu)圖確定配置成 例如使得可以根據(jù)用戶操作、或基于預(yù)定裝置操作狀況等的判定，被 當(dāng)作構(gòu)圖確定對象的主題在相關(guān)主題與無關(guān)主題之間切換。
此外，如上所述，可通過執(zhí)行程序的CPU或DSP來實(shí)現(xiàn)本發(fā)明 實(shí)施例的至少一部分配置。
可以將這種程序在制造時寫入并存儲在例如ROM中，或者可以 存儲在可移動存儲介質(zhì)中并從存儲介質(zhì)安裝(包括更新)，以存儲在與 DSP或閃速存儲器30相對應(yīng)的非易失性存儲區(qū)等中。此外，可以想 到如下安排可以通過從另一主機(jī)裝置控制經(jīng)由諸如USB或IEEE 1394等的數(shù)據(jù)接口來安裝該程序。此外，可以想到如下配置將程序存 儲在網(wǎng)絡(luò)上諸如服務(wù)器的存儲裝置中，然后配備有網(wǎng)絡(luò)連接功能的數(shù)字 靜態(tài)纟聶像機(jī)1可以通過下載從服務(wù)器獲得該程序。
本發(fā)明包含與2008年4月25日在日本專利局提交的日本在先專 利申請JP 2008-115298公開主題有關(guān)的主題，通過引用將其全部內(nèi)容并 入于此。
本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解，根據(jù)設(shè)計要求和其他因素，可以想到 各種修改、組合、子組合以及變更，只要它們落在所附權(quán)利要求書及 其等同物的范圍內(nèi)。
權(quán)利要求
1、一種構(gòu)圖確定裝置，包括主題檢測裝置，被配置成基于獲得的圖像數(shù)據(jù)來檢測圖像中的主題；實(shí)際主題尺寸檢測裝置，被配置成針對所述主題檢測裝置檢測的每個主題檢測能夠視為與實(shí)際測量等效的實(shí)際尺寸；主題區(qū)分裝置，被配置成基于對所述實(shí)際主題尺寸檢測裝置檢測的實(shí)際尺寸是否是對應(yīng)于相關(guān)主題的合適值的確定，從所述主題檢測裝置檢測的主題中區(qū)分出相關(guān)主題；以及構(gòu)圖確定裝置，被配置成僅以所述主題區(qū)分裝置區(qū)分出的相關(guān)主題為對象來確定構(gòu)圖。
2、 根據(jù)權(quán)利要求1所述的構(gòu)圖確定裝置，還包括 主題距離檢測裝置，被配置成針對所述主題檢測裝置檢測的每個主題檢測主題距離；和主題尺寸檢測裝置，被配置成針對所述主題檢測裝置檢測的每個 主題檢測圖像內(nèi)尺寸，所述圖像內(nèi)尺寸是主題在所述圖像內(nèi)的尺寸；其中所述實(shí)際主題尺寸檢測裝置通過至少利用所述主題距離和 所述圖像內(nèi)尺寸獲得所述實(shí)際尺寸，來檢測所述主題檢測裝置檢測的 每個主題的實(shí)際尺寸。
3、 根據(jù)權(quán)利要求2所述的構(gòu)圖確定裝置，其中所述主題區(qū)分裝 置被配置成執(zhí)行如下確定至少利用所述主題距離和所述圖像內(nèi)尺寸 獲得的所述實(shí)際尺寸是否是與相關(guān)主題相對應(yīng)的利用成像設(shè)備中設(shè)定 的變焦倍率值進(jìn)行校正之后的合適值，所述成像設(shè)備被配置成通過成 像獲得所述圖像數(shù)據(jù)。
4、 根據(jù)權(quán)利要求2或3所述的構(gòu)圖確定裝置，其中所述主題檢 測裝置被配置成，在實(shí)際測量中，確定與每個檢測主題的尺寸差異有 關(guān)的預(yù)定屬性；并且其中所述主題區(qū)分裝置被配置成，確定至少利用所述主題距離和所述圖像內(nèi)尺寸獲得的所述實(shí)際尺寸是否是與相關(guān)主題相對應(yīng)的 利用對應(yīng)于所確定屬性的系數(shù)進(jìn)行校正之后的合適值。
5、 一種構(gòu)圖確定方法，包括基于獲得的圖像數(shù)據(jù)檢測圖像中的主題的第 一檢測步驟； 對所述第 一檢測步驟中檢測的每個主題，檢測能夠視為與實(shí)際測量等效的實(shí)際尺寸的第二檢測步驟；基于對所述第二檢測步驟中檢測的實(shí)際尺寸是否是對應(yīng)于相關(guān)主題的合適值的確定，從所述第 一檢測步驟中檢測的主題中區(qū)分出相關(guān)主題；以及僅以所述第 一檢測步驟中區(qū)分出的相關(guān)主題為對象來確定構(gòu)圖。
6、 一種使構(gòu)圖確定裝置執(zhí)行以下動作的程序基于獲得的圖像數(shù)據(jù)檢測圖像中的主題的第 一檢測步驟； 對所述第 一檢測步驟中檢測的每個主題，檢測能夠視為與實(shí)際測量等效的實(shí)際尺寸的第二檢測步驟；基于對所述第二檢測步驟中檢測的實(shí)際尺寸是否是對應(yīng)于相關(guān)主題的合適值的確定，從所述第一檢測步驟中檢測的主題中區(qū)分出相關(guān)主題；以及僅以所述第 一檢測步驟中區(qū)分出的相關(guān)主題為對象來確定構(gòu)圖。
7、 一種構(gòu)圖確定裝置，包括主題檢測裝置，被配置成基于獲得的圖像數(shù)據(jù)來檢測圖像中的主題；主題尺寸檢測裝置，被配置成針對所述主題檢測裝置檢測的每個 主題檢測圖像內(nèi)尺寸；主題區(qū)分裝置，被配置成基于對所述主題尺寸檢測裝置檢測的所 述圖像內(nèi)尺寸是否是對應(yīng)于相關(guān)主題的合適值的確定，從所述主題檢 測裝置檢測的主題中區(qū)分出相關(guān)主題；以及構(gòu)圖確定裝置，被配置成僅以所述主題區(qū)分裝置區(qū)分出的相關(guān)主 題為對象來確定構(gòu)圖。
8、 根據(jù)權(quán)利要求7所述的構(gòu)圖確定裝置，其中所述主題區(qū)分裝置被配置成執(zhí)行如下確定所述圖像內(nèi)尺寸是否是與相關(guān)主題相對應(yīng) 的利用成像設(shè)備中設(shè)定的變焦倍率值進(jìn)行校正之后的合適值，所述成 像設(shè)備被配置成通過成像獲得所述圖像數(shù)據(jù)。
9、 根據(jù)權(quán)利要求7或8所述的構(gòu)圖確定裝置，其中所述主題檢 測裝置被配置成，在實(shí)際測量中，確定與每個檢測主題的尺寸差異有 關(guān)的預(yù)定屬性；并且其中所述主題區(qū)分裝置被配置成，確定所述圖像內(nèi)尺寸是否 是與相關(guān)主題相對應(yīng)的利用對應(yīng)于所確定屬性的系數(shù)進(jìn)行校正之后的 合適值。
10、 一種構(gòu)圖確定方法，包括基于獲得的圖像數(shù)據(jù)檢測圖像中的主題的第 一檢測步驟； 對所述第 一檢測步驟中檢測的每個主題，檢測圖像內(nèi)尺寸的第二 檢測步驟；基于對所述第二檢測步驟中檢測的所述圖像內(nèi)尺寸是否是對應(yīng) 于相關(guān)主題的合適值的確定，從所述第一檢測步驟中檢測的主題中區(qū) 分出相關(guān)主題；以及僅以所述第一檢測步驟中區(qū)分出的相關(guān)主題為對象來確定構(gòu)圖。
11、 一種使構(gòu)圖確定裝置執(zhí)行以下動作的程序 基于獲得的圖像數(shù)據(jù)檢測圖像中的主題的第 一檢測步驟； 對所述第 一檢測步驟中檢測的每個主題檢測圖像內(nèi)尺寸的第二檢測步驟；基于對所述第二檢測步驟中檢測的所述圖像內(nèi)尺寸是否是對應(yīng) 于相關(guān)主題的合適值的確定，從所述第 一檢測步驟中檢測的主題中區(qū) 分出相關(guān)主題；以及僅以所述第 一檢測步驟中區(qū)分出的相關(guān)主題為對象來確定構(gòu)圖。
12、 一種構(gòu)圖確定裝置，包括主題檢測裝置，被配置成基于獲得的圖像數(shù)據(jù)來檢測圖像中的主題；主題距離檢測裝置，被配置成針對所述主題檢測裝置檢測的每個主題檢測主題距離；主題區(qū)分裝置，被配置成基于對所述主題距離檢測裝置檢測的主 題距離是否是對應(yīng)于相關(guān)主題的合適值的確定，從所述主題檢測裝置 檢測的主題中區(qū)分出相關(guān)主題；以及構(gòu)圖確定裝置，被配置成僅以所述主題區(qū)分裝置區(qū)分出的相關(guān)主 題為對象來確定構(gòu)圖。
13、 一種構(gòu)圖確定方法，包括基于獲得的圖像數(shù)據(jù)檢測圖像中的主題的第 一檢測步驟； 對所述第 一檢測步驟中檢測的每個主題檢測主題距離的第二檢 測步驟；基于對所述第二檢測步驟中檢測的主題距離是否是對應(yīng)于相關(guān) 主題的合適值的確定，從所述第一檢測步驟中檢測的主題中區(qū)分出相 關(guān)主題；以及僅以所述第 一檢測步驟中區(qū)分出的相關(guān)主題為對象來確定構(gòu)圖。
14、 一種使構(gòu)圖確定裝置執(zhí)行以下動作的程序 基于獲得的圖像數(shù)據(jù)檢測圖像中的主題的第 一檢測步驟；對所述第 一檢測步驟中檢測的每個主題檢測主題距離的第二檢 測步驟；基于對所述第二檢測步驟中檢測的主題距離是否是對應(yīng)于相關(guān) 主題的合適值的確定，從所述第一檢測步驟中檢測的主題中區(qū)分出相 關(guān)主題；以及僅以所述第 一檢測步驟中區(qū)分出的相關(guān)主題為對象來確定構(gòu)圖。
15、 一種構(gòu)圖確定裝置，包括主題檢測單元，被配置成基于獲得的圖像數(shù)據(jù)來檢測圖像中的主題；實(shí)際主題尺寸檢測單元，被配置成為所述主題檢測單元檢測的每 個主題檢測實(shí)際尺寸，所述實(shí)際尺寸能夠視為與實(shí)際測量等效；主題區(qū)分單元，被配置成基于對所述實(shí)際主題尺寸檢測單元檢測 的實(shí)際尺寸是否是對應(yīng)于相關(guān)主題的合適值的確定，從所述主題檢測單元檢測的主題中區(qū)分出相關(guān)主題；以及構(gòu)圖確定單元，被配置成僅以所述主題區(qū)分單元區(qū)分出的相關(guān)主 題為對象來確定構(gòu)圖。
16、 一種構(gòu)圖確定裝置，包括主題檢測單元，被配置成基于獲得的圖像數(shù)據(jù)來檢測圖像中的主題；主題尺寸檢測單元，被配置成為所述主題檢測單元檢測的每個主 題檢測圖像內(nèi)尺寸；主題區(qū)分單元，被配置成基于對所述主題尺寸檢測單元檢測的所 述圖像內(nèi)尺寸是否是對應(yīng)于相關(guān)主題的合適值的確定，從所述主題檢 測單元檢測的主題中區(qū)分出相關(guān)主題；以及構(gòu)圖確定單元，被配置成僅以所述主題區(qū)分單元區(qū)分出的相關(guān)主 題為對象來確定構(gòu)圖。
17、 一種構(gòu)圖確定裝置，包括主題檢測單元，被配置成基于獲得的圖像數(shù)據(jù)來檢測圖像中的主題；主題距離檢測單元，被配置成為所述主題檢測單元檢測的每個主題檢測主題距離；主題區(qū)分單元，被配置成基于對所述主題距離檢測單元檢測的主 題距離是否是對應(yīng)于相關(guān)主題的合適值的確定，從所述主題檢測單元 檢測的主題中區(qū)分出相關(guān)主題；以及構(gòu)圖確定單元，被配置成僅以所述主題區(qū)分單元區(qū)分出的相關(guān)主 題為對象來確定構(gòu)圖。
全文摘要
本發(fā)明涉及構(gòu)圖確定裝置、構(gòu)圖確定方法以及程序。構(gòu)圖確定裝置，包括主題檢測單元，被配置成基于獲得的圖像數(shù)據(jù)來檢測圖像中的主題；實(shí)際主題尺寸檢測單元，被配置成為所述主題檢測單元檢測的每個主題檢測能夠視為與實(shí)際測量等效的實(shí)際尺寸；主題區(qū)分單元，被配置成基于對所述實(shí)際主題尺寸檢測單元檢測的實(shí)際尺寸是否是對應(yīng)于相關(guān)主題的合適值的確定，從所述主題檢測單元檢測的主題中區(qū)分出相關(guān)主題；以及構(gòu)圖確定單元，被配置成僅以所述主題區(qū)分單元區(qū)分出的相關(guān)主題為對象來確定構(gòu)圖。
文檔編號H04N5/232GK101567973SQ200910136919
公開日2009年10月28日 申請日期2009年4月24日 優(yōu)先權(quán)日2008年4月25日
發(fā)明者善積真吾 申請人:索尼株式會社