專利名稱：對(duì)象決定裝置和攝像裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及可有效應(yīng)用于攝像靜態(tài)圖像和動(dòng)態(tài)圖像等的裝置(數(shù)字相機(jī)(digital still camera)和數(shù)字?jǐn)z像機(jī)(digital video camera)等)的技術(shù)。
背景技術(shù)：
在攝像裝置中配備有對(duì)特定的被攝物體進(jìn)行對(duì)焦的自動(dòng)聚焦、和根據(jù)特定的被攝物體執(zhí)行曝光控制的自動(dòng)曝光控制等技術(shù)。以往，對(duì)在幀內(nèi)預(yù)先規(guī)定的特定位置(例如幀內(nèi)的中央點(diǎn))存在的被攝物體實(shí)施自動(dòng)聚焦或自動(dòng)曝光控制。然而，根據(jù)用戶的成幀(framing)喜好，用戶想關(guān)注的被攝物體，即想作為自動(dòng)聚焦或自動(dòng)曝光控制的對(duì)象的被攝物體并不限于位于幀的中央。在這種情況下，用戶操作攝像裝置以使想關(guān)注的被攝物體移動(dòng)到幀內(nèi)的特定位置，在該條件下進(jìn)行了自動(dòng)聚焦或自動(dòng)曝光控制后，必須實(shí)施與喜好對(duì)應(yīng)的成幀，進(jìn)行這種處理是極其麻煩的作業(yè)。
作為解決該問(wèn)題的技術(shù)，有為了確定要進(jìn)行對(duì)焦的對(duì)象或曝光控制對(duì)象而預(yù)先實(shí)施攝像(以下把這種攝像稱為“預(yù)備攝像”)的技術(shù)。在進(jìn)行預(yù)備攝像的技術(shù)中，使用在預(yù)備攝像中所攝像的圖像來(lái)確定對(duì)焦或曝光控制的對(duì)象。
作為進(jìn)行預(yù)備攝像的技術(shù)的具體例，有與視場(chǎng)(圖像內(nèi))的人物的位置/范圍無(wú)關(guān)地對(duì)圖像內(nèi)的人物的臉進(jìn)行對(duì)焦的技術(shù)(參照專利文獻(xiàn)1)。同樣，有與圖像內(nèi)的人物的位置/范圍無(wú)關(guān)地對(duì)圖像內(nèi)的人物進(jìn)行合適曝光的技術(shù)(參照專利文獻(xiàn)2)。
在上述現(xiàn)有技術(shù)中，當(dāng)在畫面內(nèi)檢測(cè)出多個(gè)臉時(shí)，把距中央部近的臉的至少一部分作為測(cè)距區(qū)域來(lái)進(jìn)行自動(dòng)對(duì)焦控制。并且，作為同樣在畫面內(nèi)檢測(cè)出多個(gè)臉的情況下的技術(shù)，也具有自動(dòng)地使畫面內(nèi)的全體人員進(jìn)入景深的技術(shù)(參照專利文獻(xiàn)3)。
專利文獻(xiàn)1特開(kāi)2003-107335號(hào)公報(bào)專利文獻(xiàn)2特開(kāi)2003-107555號(hào)公報(bào)專利文獻(xiàn)3特開(kāi)2003-092699號(hào)公報(bào)發(fā)明內(nèi)容然而，在現(xiàn)有技術(shù)(例如專利文獻(xiàn)1～3所述的技術(shù))中存在以下問(wèn)題。即，存在的問(wèn)題是，如果在通過(guò)預(yù)備攝像獲得的圖像中最初焦點(diǎn)相對(duì)于主要被攝物體大幅偏離，則存在不能檢測(cè)主要被攝物體即臉的可能性。
作為解決該問(wèn)題的方法，有通過(guò)在預(yù)備攝像階段進(jìn)行焦點(diǎn)控制，來(lái)攝像可檢測(cè)到主要被攝物體的圖像的方法。具體地說(shuō)，例如有從通過(guò)預(yù)備攝像獲得的多個(gè)圖像中檢測(cè)主要被攝物體的方法。在該方法中，在預(yù)備攝像時(shí)攝像多個(gè)已進(jìn)行了對(duì)焦的圖像。然后，根據(jù)該多個(gè)圖像實(shí)施主要被攝物體的臉檢測(cè)。因此，即使在某圖像中由于主要被攝物體的臉模糊而不能檢測(cè)的情況下，也能在其它圖像中檢測(cè)出主要被攝物體的臉。
然而，在這種方法，必須對(duì)多個(gè)圖像執(zhí)行臉檢測(cè)。并且，為了在攝像裝置中攝像多個(gè)已對(duì)焦了的圖像，有必要進(jìn)行焦點(diǎn)調(diào)節(jié)。因此，與現(xiàn)有的方法相比，存在對(duì)焦處理需要時(shí)間的問(wèn)題。
在本發(fā)明中，第一目的是解決該問(wèn)題，在攝像裝置中在預(yù)備攝像階段不進(jìn)行焦點(diǎn)控制，快速檢測(cè)成為對(duì)焦或曝光控制的對(duì)象的主要被攝物體。
另外，在通過(guò)進(jìn)行上述預(yù)備攝像來(lái)決定對(duì)焦或曝光控制的對(duì)象的情況下，存在以下問(wèn)題。在預(yù)備攝像的圖像內(nèi)所檢測(cè)出的人臉的數(shù)目不一定是一個(gè)。在所檢測(cè)出的人臉的數(shù)目是一個(gè)的情況下，只要無(wú)條件地對(duì)該臉進(jìn)行對(duì)焦或曝光控制即可。然而，在預(yù)備攝像的圖像內(nèi)檢測(cè)出多個(gè)人物的臉的情況下，應(yīng)對(duì)哪個(gè)臉進(jìn)行對(duì)焦或曝光控制，迄今為止尚未作過(guò)充分考慮。例如，具有根據(jù)在幀中央所拍攝的人臉是用戶期望作為被攝物體的臉的方針，對(duì)距幀中央最近的人臉進(jìn)行對(duì)焦或曝光控制的技術(shù)。然而，這種技術(shù)是以用戶最期望作為被攝物體的臉在幀內(nèi)為一個(gè)這樣的前提為基礎(chǔ)的，如果在幀內(nèi)存在多個(gè)被同等期望作為被攝物體的臉，則不能可靠地應(yīng)對(duì)。
在本發(fā)明中，第二目的是解決該問(wèn)題，提供在預(yù)備攝像中檢測(cè)出多個(gè)人物的臉的情況下，判斷應(yīng)對(duì)哪個(gè)臉進(jìn)行對(duì)焦或曝光控制的裝置。
〔第一方式〕在以下說(shuō)明中，膚色意味著所有人的膚色，不限于特定人種的膚色。
為了達(dá)到上述第一目的，本發(fā)明采用以下的結(jié)構(gòu)。本發(fā)明的第一方式是一種對(duì)象決定裝置，包括臉檢測(cè)單元和決定單元。
臉檢測(cè)單元把根據(jù)任意的焦點(diǎn)信息所攝像的圖像作為處理對(duì)象的圖像，從前述處理對(duì)象的圖像中檢測(cè)人臉。任意的焦點(diǎn)信息可以是規(guī)定的焦點(diǎn)信息。這里，規(guī)定的焦點(diǎn)信息是預(yù)先定為一個(gè)的焦點(diǎn)信息，而不是動(dòng)態(tài)變化的焦點(diǎn)信息。因此，在根據(jù)規(guī)定的焦點(diǎn)信息來(lái)攝像圖像的裝置，即攝像被輸入到臉檢測(cè)單元中的圖像的攝像裝置中，期望的是預(yù)先實(shí)施基于該規(guī)定的焦點(diǎn)信息的焦點(diǎn)控制。例如，期望的是，根據(jù)該焦點(diǎn)信息預(yù)先實(shí)施聚焦鏡頭等的控制。
通過(guò)這樣預(yù)先控制攝像裝置，就沒(méi)有必要在攝像被輸入到臉檢測(cè)單元中的圖像時(shí)重新實(shí)施焦點(diǎn)控制。因此，攝像被輸入到臉檢測(cè)單元中的圖像所需要的時(shí)間縮短。
然而，在這樣根據(jù)規(guī)定的焦點(diǎn)信息所攝像的圖像中，存在焦點(diǎn)沒(méi)有對(duì)準(zhǔn)圖像中的被攝物體的可能性。因此，在被輸入到臉檢測(cè)單元中的圖像中，存在本來(lái)應(yīng)被檢測(cè)的臉的圖像模糊，被不清晰地?cái)z像的可能性。
因此，本發(fā)明的第一方式包含的臉檢測(cè)單元構(gòu)成為也檢測(cè)被不清晰地?cái)z像的臉的圖像。具體地說(shuō)，臉檢測(cè)單元根據(jù)因人臉的凹凸或器官而產(chǎn)生的多個(gè)特征區(qū)域的統(tǒng)計(jì)量的相對(duì)值檢測(cè)人臉。即，本發(fā)明的第一方式包含的臉檢測(cè)單元不是根據(jù)由圖像中的邊緣等構(gòu)成的形狀，而是根據(jù)特征區(qū)域的統(tǒng)計(jì)量的相對(duì)值來(lái)進(jìn)行臉的檢測(cè)。特征區(qū)域的統(tǒng)計(jì)量是特征區(qū)域內(nèi)的像素值的合計(jì)、平均、分布等的值。相對(duì)值是例如比、差分、統(tǒng)計(jì)距離、互熵等的值。并且，也可以根據(jù)特征區(qū)域的濃淡值的相對(duì)值來(lái)執(zhí)行臉檢測(cè)。
在被不清晰地?cái)z像的圖像中，難以識(shí)別由邊緣等構(gòu)成的形狀。然而，關(guān)于某特征區(qū)域的統(tǒng)計(jì)量，即使是例如被不清晰地?cái)z像的圖像也能取得。因此，本發(fā)明的第一方式包含的臉檢測(cè)單元可以從根據(jù)規(guī)定的焦點(diǎn)信息所攝像的圖像(處理對(duì)象的圖像)中檢測(cè)人臉。
決定單元根據(jù)由臉檢測(cè)單元所檢測(cè)出的臉，決定在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和成為進(jìn)行曝光控制的對(duì)象的被攝物體可以是由臉檢測(cè)單元所檢測(cè)出的臉本身，也可以是構(gòu)成所檢測(cè)出的臉的各部位(眼、鼻、口、耳、額等)。
在這樣構(gòu)成的本發(fā)明的第一方式中的對(duì)象決定裝置中，從根據(jù)任意的焦點(diǎn)信息(規(guī)定的焦點(diǎn)信息)所攝像的圖像中檢測(cè)人臉，根據(jù)所檢測(cè)出的臉決定成為對(duì)焦對(duì)象的被攝物體或成為進(jìn)行曝光控制的對(duì)象的被攝物體。如上所述，通過(guò)預(yù)先按照規(guī)定的焦點(diǎn)信息對(duì)攝像裝置進(jìn)行焦點(diǎn)控制，可快速地?cái)z像根據(jù)規(guī)定的焦點(diǎn)信息來(lái)攝像的圖像。并且，從該圖像中檢測(cè)人臉，決定成為對(duì)焦對(duì)象的被攝物體或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
因此，根據(jù)本發(fā)明的第一方式中的對(duì)象決定裝置，在攝像裝置中在預(yù)備攝像階段不進(jìn)行焦點(diǎn)控制，可快速地檢測(cè)和決定成為進(jìn)行對(duì)焦或曝光控制的對(duì)象的主要被攝物體(臉或臉的部位等)。
并且，根據(jù)本發(fā)明的第一方式中的對(duì)象決定裝置，即使在構(gòu)成為在攝像裝置中取得多張預(yù)備攝像的圖像的情況下，也可以從更少的預(yù)備攝像圖像中檢測(cè)臉。因此，可削減預(yù)備攝像所需要的時(shí)間和臉檢測(cè)所需要的時(shí)間。
本發(fā)明的第一方式中的臉檢測(cè)單元可以構(gòu)成為按以下所述來(lái)檢測(cè)人臉。即，首先在所攝像的圖像中決定關(guān)注區(qū)域。關(guān)注區(qū)域是與所攝像的圖像大小相同的區(qū)域或者更小的區(qū)域。
然后，臉檢測(cè)單元求出該關(guān)注區(qū)域內(nèi)的特征區(qū)域即第一區(qū)域和第二區(qū)域的統(tǒng)計(jì)量的相對(duì)值。第一區(qū)域和第二區(qū)域分別是關(guān)注區(qū)域內(nèi)的不同區(qū)域。
然后，臉檢測(cè)單元根據(jù)所求出的統(tǒng)計(jì)量的相對(duì)值，判斷在關(guān)注區(qū)域內(nèi)是否包含有人臉。臉檢測(cè)單元可以構(gòu)成為通過(guò)例如對(duì)某閾值和統(tǒng)計(jì)量的相對(duì)值進(jìn)行比較來(lái)進(jìn)行該判斷。并且，臉檢測(cè)單元也可以構(gòu)成為通過(guò)參照將統(tǒng)計(jì)量的相對(duì)值、和在算出某統(tǒng)計(jì)量的相對(duì)值的情況下表示在關(guān)注區(qū)域內(nèi)是否包含有人臉的值對(duì)應(yīng)起來(lái)進(jìn)行存儲(chǔ)的表，來(lái)進(jìn)行該判斷。而且，臉檢測(cè)單元根據(jù)該判斷來(lái)檢測(cè)人臉。
本發(fā)明的第一方式中的決定單元也可以構(gòu)成為在臉檢測(cè)單元檢測(cè)出多個(gè)臉的情況下，按以下所述來(lái)決定進(jìn)行對(duì)焦的被攝物體或成為進(jìn)行曝光控制的對(duì)象的被攝物體。即，決定單元首先根據(jù)由臉檢測(cè)單元所檢測(cè)出的多個(gè)臉各自的圖像信息決定一個(gè)臉。臉的圖像信息表示從臉的圖像中所獲得的信息，例如是臉的朝向、臉的圖像的大小、圖像內(nèi)的臉的位置、周圍的臉的密度等。
周圍的臉的密度由例如在所檢測(cè)出的臉的一定周圍(一定的周圍區(qū)域)存在的臉的數(shù)目來(lái)表示。如果該值大，則在周圍存在許多臉，例如表示所檢測(cè)出的臉的人被包含在集體內(nèi)。另一方面，如果該值小，則在周圍存在的臉少，例如表示在所檢測(cè)出的臉的人與集體分離的場(chǎng)所，存在單獨(dú)的或幾個(gè)人。
而且，決定單元根據(jù)所決定的臉，決定進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
在這樣構(gòu)成的本發(fā)明的第一方式中，根據(jù)多個(gè)臉的圖像信息，判斷根據(jù)哪個(gè)臉來(lái)決定進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。因此，即使在由臉檢測(cè)單元檢測(cè)出多個(gè)臉的情況下，用戶也不用實(shí)施選擇，而由決定單元從多個(gè)臉中選擇一個(gè)臉。
本發(fā)明的第一方式中的決定單元可以構(gòu)成為對(duì)多個(gè)臉各自的圖像大小進(jìn)行比較，根據(jù)其大小為最大的臉來(lái)決定進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
多個(gè)臉中的最大圖像的臉一般在距攝像裝置最近的位置處。因此，根據(jù)這樣構(gòu)成的本發(fā)明的第一方式，用戶不用實(shí)施臉的選擇，而是位于距攝像裝置最近的位置處的臉被確定，根據(jù)該臉來(lái)決定進(jìn)行對(duì)焦的被攝物體或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
由于對(duì)攝像裝置而言越是位于跟前的物體，圖像就越模糊，因而一般來(lái)說(shuō)必須針對(duì)對(duì)攝像裝置而言位于跟前的物體進(jìn)行對(duì)焦。并且，對(duì)攝像裝置而言位于跟前的臉與位于后面的臉相比，包含對(duì)進(jìn)行攝像的用戶而言的主要被攝物體或者就是主要被攝物體本身的可能性(以下表現(xiàn)為“臉的重要性”)高。在這點(diǎn)上，根據(jù)位于距攝像裝置最近的位置的臉來(lái)決定進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體是有效的。
本發(fā)明的第一方式中的決定單元也可以構(gòu)成為針對(duì)各臉，根據(jù)臉的朝向、臉的大小、在圖像內(nèi)的位置、或者周圍的臉的密度中的任意一項(xiàng)或多項(xiàng)而算出得分。此時(shí)，決定單元把該算出的得分用作圖像信息。
在這樣構(gòu)成的本發(fā)明的第一方式中的對(duì)象決定裝置中，根據(jù)臉的朝向、臉的大小、在圖像內(nèi)的位置、或者周圍的臉的密度等來(lái)評(píng)價(jià)各臉。例如，臉的朝向是面向正面的臉被評(píng)價(jià)為其臉的重要性比面向側(cè)面的臉高。并且，例如，臉的大小較大的臉被評(píng)價(jià)為臉的重要性比小的臉高。并且，例如，在圖像內(nèi)的位置是接近中央的臉被評(píng)價(jià)為臉的重要性比位于遠(yuǎn)離中央的區(qū)域內(nèi)的臉高。并且，周圍的臉的密度高的臉被評(píng)價(jià)為臉的重要性比周圍的臉的密度低的臉高。然而，該評(píng)價(jià)的高低可以由設(shè)計(jì)者或用戶來(lái)任意設(shè)定。
根據(jù)這樣構(gòu)成的本發(fā)明的第一方式，根據(jù)這種評(píng)價(jià)的高低設(shè)定，選擇得分高即重要性高的臉。
本發(fā)明的第一方式中的決定單元也可以構(gòu)成為在臉檢測(cè)單元檢測(cè)出多個(gè)人臉的情況下，按以下所述來(lái)決定進(jìn)行對(duì)焦的被攝物體和/或成為曝光控制的對(duì)象的被攝物體。即，決定單元按照對(duì)由臉檢測(cè)單元所檢測(cè)出的多個(gè)臉的實(shí)物分別進(jìn)行測(cè)距所得的結(jié)果，決定進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。該測(cè)距可以由例如攝像裝置中所具備的測(cè)距單元或測(cè)距裝置來(lái)實(shí)施，也可以由對(duì)象決定裝置中所具備的測(cè)距單元來(lái)實(shí)施。然而，該測(cè)距由于必須測(cè)量攝像裝置和臉的實(shí)物的距離，因而如果攝像裝置和對(duì)象決定裝置相分離，則不能進(jìn)行由對(duì)象決定裝置中所具備的測(cè)距單元所實(shí)施的測(cè)距。
測(cè)距通過(guò)例如對(duì)臉的實(shí)物射出紅外線來(lái)實(shí)現(xiàn)(有源方式)。并且，測(cè)距也可以應(yīng)用這種有源方式以外的方式(例如無(wú)源方式)。而且，決定單元根據(jù)其距離為最小的臉來(lái)決定進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。這樣，根據(jù)攝像裝置和臉的實(shí)物的距離為最小的臉來(lái)決定進(jìn)行對(duì)焦的被攝物體或成為進(jìn)行曝光控制的對(duì)象的被攝物體的效果如上所述。
〔第二方式〕本發(fā)明的第二方式是一種攝像裝置，包括攝像單元、臉檢測(cè)單元、決定單元、信息取得單元以及圖像存儲(chǔ)單元。
攝像單元攝像基于規(guī)定的焦點(diǎn)信息或者由信息取得單元所取得的焦點(diǎn)信息和/或曝光控制信息的圖像。規(guī)定的焦點(diǎn)信息是預(yù)先決定為一個(gè)的焦點(diǎn)信息，而不是動(dòng)態(tài)變化的焦點(diǎn)信息。另一方面，由信息取得單元所取得的焦點(diǎn)信息不是預(yù)先決定的焦點(diǎn)信息，而是動(dòng)態(tài)變化的焦點(diǎn)信息。更具體地說(shuō)，是通過(guò)臉檢測(cè)單元、決定單元以及信息取得單元所決定的焦點(diǎn)信息。即，是用于根據(jù)所檢測(cè)出的臉來(lái)決定進(jìn)行對(duì)焦的被攝物體，對(duì)該所決定的被攝物體對(duì)焦的焦點(diǎn)信息，在沒(méi)有通過(guò)信息取得單元輸出的焦點(diǎn)信息的情況下，攝像單元被控制成可取得基于規(guī)定的焦點(diǎn)信息的圖像的狀態(tài)。而且，當(dāng)有攝像指示時(shí)，取得基于規(guī)定的焦點(diǎn)信息的圖像。另一方面，在通過(guò)信息取得單元輸出有焦點(diǎn)信息或曝光控制信息的情況下，攝像單元被控制成可取得基于這些信息的圖像的狀態(tài)。而且，當(dāng)有攝像指示時(shí)，攝像單元取得基于該焦點(diǎn)信息或曝光控制信息的圖像。
臉檢測(cè)單元從基于規(guī)定的焦點(diǎn)信息的處理對(duì)象的圖像中，根據(jù)因人臉的凹凸或器官而產(chǎn)生的多個(gè)特征區(qū)域的統(tǒng)計(jì)量的相對(duì)值來(lái)檢測(cè)人臉。決定單元根據(jù)由臉檢測(cè)單元所檢測(cè)出的臉，決定在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。本發(fā)明的第二方式的臉檢測(cè)單元和決定單元基本上具有與本發(fā)明的第一方式中的臉檢測(cè)單元和決定單元相同的結(jié)構(gòu)和作用。
信息取得單元取得用于對(duì)由決定單元所決定的被攝物體對(duì)焦的焦點(diǎn)信息和/或用于把由決定單元所決定的被攝物體作為對(duì)象進(jìn)行曝光控制的曝光控制信息。
圖像存儲(chǔ)單元存儲(chǔ)由攝像單元根據(jù)由信息取得單元所取得的焦點(diǎn)信息和/或曝光控制信息而攝像的圖像。即，當(dāng)由信息取得單元取得了焦點(diǎn)信息或曝光控制信息時(shí)，攝像單元根據(jù)該焦點(diǎn)信息或曝光控制信息實(shí)施焦點(diǎn)控制或曝光控制。通過(guò)該焦點(diǎn)控制，對(duì)由決定單元所決定的被攝物體進(jìn)行對(duì)焦。并且，通過(guò)該曝光控制，實(shí)施與由決定單元所決定的被攝物體對(duì)應(yīng)的曝光控制。然后，攝像單元執(zhí)行攝像，圖像存儲(chǔ)單元存儲(chǔ)所攝像的圖像的數(shù)據(jù)。
并且，本發(fā)明的第二方式可以構(gòu)成為還具有測(cè)距單元，其對(duì)從攝像裝置到任意被攝物體的距離進(jìn)行測(cè)距。然而，在信息取得單元構(gòu)成為通過(guò)對(duì)被攝物體的實(shí)物和攝像裝置的距離進(jìn)行測(cè)距來(lái)取得焦點(diǎn)信息的情況下，可以具備信息取得單元作為測(cè)距單元的替代單元。即，在該情況下，信息取得單元作為測(cè)距單元進(jìn)行動(dòng)作。
在這樣構(gòu)成本發(fā)明的第二方式的情況下，決定單元構(gòu)成為在臉檢測(cè)單元檢測(cè)出多個(gè)人臉的情況下，按照測(cè)距單元對(duì)多個(gè)臉的實(shí)物分別進(jìn)行測(cè)距所得的結(jié)果，根據(jù)其距離為最小的臉來(lái)決定進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
在本發(fā)明的第二方式中，在攝像裝置中配備作為本發(fā)明的第一方式的對(duì)象決定裝置。因此，作為攝像裝置，可獲得與本發(fā)明的第一方式相同的效果。
〔第三方式〕本發(fā)明的第三方式是一種對(duì)象決定方法，是包含以下各步驟的方法。首先，信息處理裝置從根據(jù)任意焦點(diǎn)信息所攝像的圖像中，根據(jù)因人臉的凹凸或器官而產(chǎn)生的多個(gè)特征區(qū)域的統(tǒng)計(jì)量的相對(duì)值來(lái)檢測(cè)人臉。然后，信息處理裝置根據(jù)所檢測(cè)出的臉，決定在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。這樣構(gòu)成的本發(fā)明的第三方式獲得與本發(fā)明的第一方式相同的效果。
〔第四方式〕本發(fā)明的第四方式是一種攝像方法，是包含以下各步驟的方法。以下，列舉該各步驟。信息處理裝置指示攝像裝置對(duì)基于規(guī)定的焦點(diǎn)信息或者由信息取得單元所取得的焦點(diǎn)信息的圖像進(jìn)行攝像的步驟。信息處理裝置從由攝像裝置根據(jù)規(guī)定的焦點(diǎn)信息所攝像的圖像中，根據(jù)因人臉的凹凸或器官而產(chǎn)生的多個(gè)特征區(qū)域的統(tǒng)計(jì)量的相對(duì)值來(lái)檢測(cè)人臉的檢測(cè)步驟。信息處理裝置根據(jù)所檢測(cè)出的臉，決定在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體的決定步驟。信息處理裝置取得用于對(duì)所決定的被攝物體進(jìn)行對(duì)焦的焦點(diǎn)信息和/或用于把所決定的被攝物體作為對(duì)象來(lái)進(jìn)行曝光控制的曝光控制信息的步驟。信息處理裝置指示存儲(chǔ)裝置存儲(chǔ)由攝像裝置根據(jù)所取得的焦點(diǎn)信息和/或曝光控制信息所攝像的圖像的步驟。
并且，本發(fā)明的第四方式可以構(gòu)成為還包含信息處理裝置指示測(cè)距裝置對(duì)從攝像裝置到任意被攝物體的距離進(jìn)行測(cè)距的步驟。在該情況下，如果在檢測(cè)步驟中檢測(cè)出多個(gè)人臉，則信息處理裝置在決定步驟中，按照測(cè)距裝置對(duì)多個(gè)臉的實(shí)物分別進(jìn)行測(cè)距所得的結(jié)果，根據(jù)其距離為最小的臉來(lái)決定進(jìn)行前述對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
在這樣構(gòu)成的本發(fā)明的第四方式中，把本發(fā)明的第三方式中的對(duì)象決定方法作為包含在攝像方法中的步驟來(lái)執(zhí)行。因此，在本發(fā)明的第四方式中，可取得與本發(fā)明的第三方式相同的效果。
〔第五方式〕本發(fā)明的第五方式是一種對(duì)象決定裝置，包括檢測(cè)單元和決定單元。檢測(cè)單元從根據(jù)任意的焦點(diǎn)信息所攝像的圖像中檢測(cè)具有人的膚色的被攝物體。作為具有人的膚色的被攝物體的例子，有人的臉、手、身體等。通過(guò)這樣構(gòu)成檢測(cè)單元，盡管不能準(zhǔn)確地檢測(cè)人物的臉，然而可削減檢測(cè)處理所需要的時(shí)間。并且，也能削減檢測(cè)單元的安裝所需要的時(shí)間和成本。
決定單元根據(jù)由檢測(cè)單元所檢測(cè)出的被攝物體，決定在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
在第五方式中，檢測(cè)單元檢測(cè)具有人的膚色的被攝物體。即，本發(fā)明的第五方式所包括的檢測(cè)單元與本發(fā)明的第一方式一樣，不進(jìn)行基于由圖像中的邊緣等構(gòu)成的形狀的檢測(cè)。
在被不清晰地?cái)z像的圖像中，難以識(shí)別由邊緣等構(gòu)成的形狀。然而，即使從例如被不清晰地?cái)z像的圖像中也能檢測(cè)出具有某特定顏色的被攝物體。因此，本發(fā)明的第五方式所包括的檢測(cè)單元能夠從根據(jù)規(guī)定的焦點(diǎn)信息所攝像的圖像中檢測(cè)存在是人臉的可能性的被攝物體，即具有人的膚色的被攝物體。
〔第一方式的變形〕本發(fā)明的第一方式可以構(gòu)成為還包括幀取得單元，該幀取得單元從根據(jù)任意的焦點(diǎn)信息所攝像的包含多個(gè)幀的時(shí)序圖像中取得規(guī)定的幀的圖像作為處理對(duì)象的圖像。在這樣構(gòu)成的情況下，第一方式中的臉檢測(cè)單元把由幀取得單元所取得的規(guī)定的幀的圖像作為處理對(duì)象。
在這樣構(gòu)成的本發(fā)明的第一方式中，對(duì)于包含多個(gè)幀的時(shí)序圖像，可取得與本發(fā)明的第一方式相同的作用/效果。
并且，本發(fā)明的第一方式中的決定單元可以構(gòu)成為在由臉檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，根據(jù)該多個(gè)人臉的位置，從該多個(gè)人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。通過(guò)這樣構(gòu)成，可取得與后述的本發(fā)明的第六方式相同的作用/效果。
并且，本發(fā)明的第一方式中的決定單元可以構(gòu)成為在由臉檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，以所檢測(cè)出的臉的數(shù)目為基準(zhǔn)把位于其正中的人臉決定為在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。通過(guò)這樣構(gòu)成，可取得與后述的本發(fā)明的第七方式相同的作用/效果。
并且，本發(fā)明的第一方式中的決定單元可以構(gòu)成為包括分類單元，在由臉檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其把所檢測(cè)出的多個(gè)人臉?lè)诸悶槎鄠€(gè)集合；暫定決定單元，其針對(duì)多個(gè)集合中的各個(gè)集合，從該集合內(nèi)所包含的人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉；以及最終決定單元，其從由暫定決定單元所決定的臉中最終決定成為對(duì)象的臉。通過(guò)這樣構(gòu)成，可取得與后述的本發(fā)明的第八方式相同的作用/效果。
并且，本發(fā)明的第一方式可以構(gòu)成為還包含區(qū)決定單元，其根據(jù)臉檢測(cè)單元的檢測(cè)結(jié)果來(lái)決定選擇區(qū)，該選擇區(qū)用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。在這樣構(gòu)成的情況下，決定單元構(gòu)成為從選擇區(qū)內(nèi)所包含的臉中決定成為對(duì)象的臉。通過(guò)這樣構(gòu)成，可取得與后述的本發(fā)明的第九方式相同的作用/效果。
并且，本發(fā)明的第一方式可以構(gòu)成為還包含判斷單元，在由臉檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其判斷所檢測(cè)出的人臉中的最大的臉；以及選擇單元，其從所檢測(cè)出的臉中選擇最大的臉和具有以該最大的臉的大小為基準(zhǔn)的規(guī)定范圍內(nèi)的大小的臉。在這樣構(gòu)成的情況下，決定單元構(gòu)成為從所選擇的臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。通過(guò)這樣構(gòu)成，可取得與后述的本發(fā)明的第十方式相同的作用/效果。
并且，本發(fā)明的第一方式可以構(gòu)成為還包括分類單元，在由前述臉檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，將所檢測(cè)出的多個(gè)人臉根據(jù)各自的位置分類為多個(gè)集合；以及集合決定單元，其從多個(gè)集合中決定選擇集合，該選擇集合用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。在這樣構(gòu)成的情況下，決定單元構(gòu)成為從由集合決定單元所決定的選擇集合內(nèi)所包含的臉中決定成為對(duì)象的臉。
〔第二方式的變形〕本發(fā)明的第二方式可以構(gòu)成為攝像單元攝像包含多個(gè)幀的時(shí)序圖像。本發(fā)明的第二方式在這樣構(gòu)成的情況下，構(gòu)成為還包括幀取得單元，其從由攝像單元所攝像的包含多個(gè)幀的時(shí)序圖像中取得規(guī)定的幀的圖像。并且，臉檢測(cè)單元構(gòu)成為從由幀取得單元所取得的圖像中檢測(cè)人臉。并且，圖像存儲(chǔ)單元構(gòu)成為存儲(chǔ)由攝像單元所攝像的時(shí)序圖像。
在這樣構(gòu)成的本發(fā)明的第二方式中，對(duì)于包含多個(gè)幀的時(shí)序圖像，可取得與本發(fā)明的第二方式相同的作用/效果。
并且，本發(fā)明的第二方式可以構(gòu)成為還包括顯示單元，其把由決定單元所決定的人臉與其它臉區(qū)別開(kāi)來(lái)顯示。顯示單元例如把框顯示在所決定的人臉的周圍，從而與其它臉區(qū)別開(kāi)來(lái)顯示。另外，顯示單元例如在所決定的人臉的周圍顯示與在其它臉的周圍所顯示的框有不同的顏色、粗細(xì)或形狀的框，從而與其它臉區(qū)別開(kāi)來(lái)顯示。另外，顯示單元例如對(duì)所決定的人臉實(shí)施與其它臉不同的圖像處理并顯示，從而與其它臉區(qū)別開(kāi)來(lái)顯示。顯示單元通過(guò)進(jìn)行這種顯示，使用戶可以容易地判斷是根據(jù)哪個(gè)臉來(lái)決定成為對(duì)焦對(duì)象的被攝物體等的。
〔第六方式〕為了達(dá)到上述第二目的，本發(fā)明采用以下結(jié)構(gòu)。本發(fā)明的第六方式是一種對(duì)象決定裝置，包括檢測(cè)單元和決定單元。本發(fā)明的第六方式根據(jù)所檢測(cè)的臉的位置，決定成為應(yīng)進(jìn)行對(duì)焦和曝光控制的對(duì)象的臉。另外，由本發(fā)明的第六方式所決定的臉可以作為任何處理的對(duì)象，而不限于對(duì)焦和曝光控制。例如，可以作為進(jìn)行顏色校正(白平衡校正)、輪廓強(qiáng)調(diào)等處理的對(duì)象。
具體地說(shuō)，檢測(cè)單元從所輸入的圖像中檢測(cè)人臉。檢測(cè)單元只要是能從圖像中檢測(cè)多個(gè)人臉的技術(shù)，可以應(yīng)用現(xiàn)有的任何臉檢測(cè)技術(shù)。例如，可以檢測(cè)具有膚色的區(qū)域作為臉區(qū)域。作為其它例子，有使用臉或臉的部位的模板的檢測(cè)技術(shù)、以及根據(jù)濃淡差來(lái)檢測(cè)臉區(qū)域的技術(shù)等。
在檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，決定單元根據(jù)該多個(gè)人臉的位置，從該多個(gè)人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。決定單元不是通過(guò)獨(dú)立考慮各個(gè)臉的位置來(lái)進(jìn)行決定，而是根據(jù)多個(gè)臉的位置來(lái)進(jìn)行決定。即，決定單元至少根據(jù)多個(gè)臉的相對(duì)位置關(guān)系來(lái)進(jìn)行決定。決定單元可以把臉的位置看作臉部所包含的點(diǎn)的位置，也可以看作臉區(qū)域的位置。
另外，可以構(gòu)成為對(duì)由決定單元所決定的臉的一部分(例如眼、鼻、額、口、耳)進(jìn)行對(duì)焦或曝光控制。
根據(jù)本發(fā)明的第六方式，根據(jù)所檢測(cè)出的多個(gè)臉的位置，決定成為對(duì)焦或曝光控制的對(duì)象的臉。因此，即使在從進(jìn)行了預(yù)備攝像得到的圖像中檢測(cè)出比應(yīng)成為對(duì)焦或曝光控制的對(duì)象的臉的數(shù)目多的臉的情況下，也能決定規(guī)定數(shù)目的臉。
并且，不是針對(duì)所檢測(cè)出的各個(gè)臉的位置獨(dú)立考慮，而是根據(jù)多個(gè)臉的相對(duì)位置決定成為對(duì)焦或曝光控制的對(duì)象的臉。因此，根據(jù)所檢測(cè)出的多個(gè)臉的狀況(例如臉的密集程度、臉密集的位置)來(lái)決定成為對(duì)焦或曝光控制的對(duì)象的臉。因此，能夠進(jìn)行與所檢測(cè)出的多個(gè)臉的狀況對(duì)應(yīng)的對(duì)焦處理或曝光控制。
下面，對(duì)本發(fā)明的第六方式中的決定單元的更具體結(jié)構(gòu)進(jìn)行說(shuō)明。本發(fā)明的第六方式中的決定單元可以構(gòu)成為包括中心決定單元和臉決定單元。
中心決定單元根據(jù)在檢測(cè)單元中檢測(cè)出的多個(gè)人臉的位置，決定這些多個(gè)人臉的位置的中心。這里所說(shuō)的中心表示概念中心。例如，在針對(duì)某3點(diǎn)稱為中心的情況下，表示外心、內(nèi)心、垂心、重心等多個(gè)概念中心。這樣，這里所說(shuō)的中心表示根據(jù)某概念所求出的正中。
具體地說(shuō)，中心決定單元可以構(gòu)成為求出與多個(gè)人臉的位置外接的多邊形的中心。此時(shí)，多邊形可以是具有預(yù)先決定的數(shù)目的頂點(diǎn)的多邊形。在該情況下，所生成的多邊形沒(méi)有必要一定具有所有的人臉作為頂點(diǎn)。
例如，在外接的多邊形是三角形的情況下，中心決定單元取得所求出的三角形的外心、內(nèi)心、垂心、重心中的任意一個(gè)作為中心。
并且，例如，在外接的多邊形是四邊形的情況下，中心決定單元取得所求出的四邊形的對(duì)角線的交點(diǎn)作為中心。并且，例如，在外接的多邊形是四邊形的情況下，中心決定單元可以構(gòu)成為把該四邊形分割成二個(gè)三角形，分別針對(duì)各三角形取得外心、內(nèi)心、垂心、重心中的任意一個(gè)，根據(jù)所取得的2點(diǎn)取得中心。
并且，例如，在外接的多邊形的頂點(diǎn)數(shù)是大于等于5點(diǎn)的情況下，中心決定單元可以構(gòu)成為把外接的多邊形分割成多個(gè)三角形，針對(duì)各三角形取得外心、內(nèi)心、垂心、重心中的任意一個(gè)，使用所取得的點(diǎn)構(gòu)成新的多邊形，通過(guò)針對(duì)該多邊形重復(fù)上述處理來(lái)取得中心。
并且，中心決定單元可以構(gòu)成為把多個(gè)人臉的位置的重心決定為中心。
下面，對(duì)臉決定單元的結(jié)構(gòu)進(jìn)行說(shuō)明。臉決定單元根據(jù)由中心決定單元所求出的中心的位置，決定成為對(duì)象的臉。臉決定單元根據(jù)在實(shí)施攝像時(shí)成為對(duì)焦對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉的數(shù)目，決定成為對(duì)象的臉。
具體地說(shuō)，臉決定單元可以構(gòu)成為把位于距中心最近的人臉決定為成為對(duì)象的臉。
并且，臉決定單元可以構(gòu)成為從位于距中心規(guī)定距離內(nèi)的臉中，按照規(guī)定的基準(zhǔn)決定成為對(duì)象的臉。規(guī)定的基準(zhǔn)例如可以是基于臉的大小的基準(zhǔn)(例如決定最大的臉的基準(zhǔn)，決定中間大小的臉的基準(zhǔn)，決定最小的臉的基準(zhǔn))，可以是基于圖像中的臉的位置的基準(zhǔn)(例如距圖像中央最近的臉的基準(zhǔn))，可以是基于臉的朝向的基準(zhǔn)(例如面向正面的臉的基準(zhǔn))，可以是基于類似于臉的基準(zhǔn)(例如決定表示類似于臉的程度的量為最大的臉的基準(zhǔn))，可以是基于根據(jù)臉?biāo)茰y(cè)的性別的基準(zhǔn)(例如決定被推測(cè)為男性的臉的基準(zhǔn)，決定被推測(cè)為女性的臉的基準(zhǔn))，可以是基于根據(jù)臉?biāo)茰y(cè)的年代的基準(zhǔn)(決定被推測(cè)為最年輕的年代的臉的基準(zhǔn)，決定被推測(cè)為中間年代的臉的基準(zhǔn))，也可以是其它任何基準(zhǔn)。并且，規(guī)定的基準(zhǔn)也可以是將上述基準(zhǔn)適當(dāng)進(jìn)行多個(gè)組合后的基準(zhǔn)。
在這樣構(gòu)成的本發(fā)明的第六方式中，作為多個(gè)臉的相對(duì)位置的基準(zhǔn)，根據(jù)多個(gè)臉的位置的中心，來(lái)決定成為對(duì)焦或曝光控制的對(duì)象的臉。例如，位于多個(gè)臉的大致中心處的臉被決定為應(yīng)成為對(duì)焦或曝光控制的對(duì)象的臉。在對(duì)集體進(jìn)行攝影的狀況(多個(gè)臉密集的狀況)下，多數(shù)情況用戶都是對(duì)該集體的中央附近的臉(無(wú)意識(shí)地)進(jìn)行對(duì)焦或曝光控制。因此，通過(guò)自動(dòng)實(shí)現(xiàn)這種用戶的手動(dòng)操作，可節(jié)省用戶的工夫。因此，在自動(dòng)聚焦或自動(dòng)曝光控制中，一般期望的是對(duì)位于集體中的多個(gè)臉的中央附近的臉進(jìn)行對(duì)焦或曝光控制。而且，根據(jù)上述構(gòu)成的本發(fā)明的第六方式，可自動(dòng)進(jìn)行上述的期望的控制，可節(jié)省用戶的工夫。
并且，本發(fā)明的第六方式中的決定單元可以構(gòu)成為把多個(gè)人臉中的位于最下方的臉決定為成為前述對(duì)象的臉。另外，最下方的臉沒(méi)有必要是嚴(yán)格地位于最下方的臉，可以是例如位于從下開(kāi)始第2的臉，也可以是位于從下開(kāi)始第3的臉。在人臉縱向排列的狀態(tài)下進(jìn)行集合拍照的情況下，一般越是位于下方的臉是距攝像裝置的距離越近的臉。例如，在前排人蹲下、后排人站立進(jìn)行拍照的情況下，就成為上述狀態(tài)。并且，例如，在使用高臺(tái)進(jìn)行集合拍照的情況下，就成為上述狀態(tài)。因此，通過(guò)把位于最下方的臉視為對(duì)焦或曝光控制的對(duì)象的臉，對(duì)距攝像裝置最近的臉執(zhí)行對(duì)焦或曝光控制的可能性變大。
本發(fā)明的第六方式可以構(gòu)成為還包括分類單元和集合決定單元。分類單元在由檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，將所檢測(cè)出的多個(gè)人臉根據(jù)各自的位置分類為多個(gè)集合。更具體地說(shuō)，分類單元通過(guò)使用一般的分類方法，把所檢測(cè)出的多個(gè)臉?lè)诸悶槎鄠€(gè)集合，以使得圖像中的位置相近的臉被包含在同一集合內(nèi)。
集合決定單元從由分類單元所分類的多個(gè)集合中決定(選擇)用于決定成為對(duì)焦或曝光控制的對(duì)象的臉的集合(即，包含成為對(duì)焦或曝光控制的對(duì)象的臉的集合稱為“選擇集合”)。即，從由集合決定單元所決定的選擇集合內(nèi)所包含的臉中最終決定成為對(duì)焦或曝光控制的對(duì)象的臉。
集合決定單元根據(jù)哪種基準(zhǔn)來(lái)決定選擇集合均可。例如，集合決定單元可以根據(jù)各集合內(nèi)所包含的臉的數(shù)目決定選擇集合，可以根據(jù)各集合內(nèi)所包含的多個(gè)臉的位置的中心決定選擇集合，可以根據(jù)基于各集合內(nèi)所包含的臉?biāo)〉玫奶卣髁?例如，基于臉的大小、臉的朝向、臉的數(shù)目等所取得的量，表示根據(jù)臉?biāo)茰y(cè)的特定性別的頻率、根據(jù)臉?biāo)茰y(cè)的特定年代的頻率或者類似于臉的程度的量)決定選擇集合。
在本發(fā)明的第六方式構(gòu)成為包括上述分類單元和集合決定單元的情況下，決定單元構(gòu)成為根據(jù)選擇集合內(nèi)所包含的人臉，從選擇集合內(nèi)所包含的人臉中決定成為對(duì)象的臉。
根據(jù)這樣構(gòu)成的本發(fā)明的第六方式，圖像中的多個(gè)臉被分為多個(gè)集合，從多個(gè)集合中決定用于決定成為處理對(duì)象的臉的選擇集合。然后，決定單元從所決定的選擇集合內(nèi)所包含的臉中最終決定成為處理對(duì)象的臉。
因此，在圖像中存在多個(gè)臉的集合的情況下，不是根據(jù)多個(gè)集合內(nèi)所包含的所有臉來(lái)決定成為處理對(duì)象的臉，而是僅根據(jù)其中任意一個(gè)集合內(nèi)所包含的臉來(lái)決定成為處理對(duì)象的臉。因此，可進(jìn)行僅與由集合決定單元所決定的選擇集合內(nèi)所包含的臉對(duì)應(yīng)的控制。例如，在圖像中有多個(gè)人的集體相分離而存在的情況下，可對(duì)任意一個(gè)集體進(jìn)行特定的對(duì)焦和/或曝光控制，而不是對(duì)這些集體進(jìn)行平均的處理。并且，例如在圖像中存在集體和孤立的人的情況下，可進(jìn)行不包含該孤立的人而僅特別針對(duì)集體，或者僅特別針對(duì)孤立的人的對(duì)焦和/或曝光控制。
本發(fā)明的第六方式可以構(gòu)成為還包括顯示單元，該顯示單元把由決定單元所決定的人臉與其它臉區(qū)別開(kāi)來(lái)顯示。顯示單元通過(guò)例如在所決定的人臉的周圍顯示框，與其它臉區(qū)別開(kāi)來(lái)顯示。另外，顯示單元通過(guò)例如在所決定的人臉的周圍顯示與在其它臉的周圍所顯示的框具有不同的顏色、粗細(xì)或形狀的框，與其它臉區(qū)別開(kāi)來(lái)顯示。另外，顯示單元例如通過(guò)對(duì)所決定的人臉實(shí)施與其它臉不同的圖像處理并顯示，與其它臉區(qū)別開(kāi)來(lái)顯示。
〔第七方式〕本發(fā)明的第七方式是一種對(duì)象決定裝置，包括檢測(cè)單元和決定單元。其中，檢測(cè)單元采用與本發(fā)明的第六方式相同的結(jié)構(gòu)。
本發(fā)明的第七方式中的決定單元在由檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，以所檢測(cè)的臉的數(shù)目為基準(zhǔn)把位于其正中的人臉決定為成為對(duì)焦或曝光控制的對(duì)象的臉。該決定單元對(duì)所檢測(cè)出的臉的數(shù)目進(jìn)行計(jì)數(shù)，根據(jù)所計(jì)數(shù)的數(shù)的中間值來(lái)決定臉。例如，該決定單元將各臉根據(jù)其x坐標(biāo)進(jìn)行排序，把上述與中間值的順序相當(dāng)?shù)哪槢Q定為成為對(duì)象的臉。該決定單元也可以根據(jù)y坐標(biāo)而不是x坐標(biāo)來(lái)決定成為對(duì)象的臉。并且，該決定單元可以構(gòu)成為根據(jù)x坐標(biāo)和y坐標(biāo)分別選擇臉，在選擇了同一個(gè)臉的情況下，把該臉決定為成為對(duì)象的臉，在選擇了不同的臉的情況下，根據(jù)規(guī)定的基準(zhǔn)把其中任意一個(gè)臉決定為成為對(duì)象的臉。
根據(jù)本發(fā)明的第七方式，可類似地取得與構(gòu)成為根據(jù)多個(gè)臉的位置的中心來(lái)決定成為對(duì)象的臉的本發(fā)明的第六方式相同的效果。并且，根據(jù)本發(fā)明的第七方式，沒(méi)有必要取得多個(gè)臉的位置的中心。即，只要執(zhí)行臉的計(jì)數(shù)和數(shù)據(jù)排序就夠了，沒(méi)有必要執(zhí)行幾何計(jì)算。因此，在使用通用的信息處理裝置的情況下，與本發(fā)明的第六方式相比可快速地執(zhí)行處理。
并且，本發(fā)明的第七方式可以與本發(fā)明的第六方式一樣，構(gòu)成為還包括分類單元和集合決定單元。在該情況下，本發(fā)明的第七方式中的決定單元根據(jù)選擇集合內(nèi)所包含的人臉，決定成為對(duì)象的臉。
〔第八方式〕本發(fā)明的第八方式是一種對(duì)象決定裝置，包括檢測(cè)單元、分類單元、暫定決定單元以及最終決定單元。其中，檢測(cè)單元和分類單元采用與本發(fā)明的第六方式相同的結(jié)構(gòu)。
本發(fā)明的第八方式中的暫定決定單元在由分類單元所生成的多個(gè)集合中的各個(gè)集合中，暫定決定成為對(duì)焦或曝光控制的對(duì)象的臉。換句話說(shuō)，暫定決定單元針對(duì)多個(gè)集合中的各個(gè)集合，從該集合內(nèi)所包含的人臉中，決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。此時(shí)，暫定決定單元根據(jù)哪種基準(zhǔn)來(lái)決定成為對(duì)象的臉均可。例如，暫定決定單元可以通過(guò)與本發(fā)明的第六方式或第七方式所示的決定單元相同的處理，來(lái)決定成為對(duì)象的臉。另外，例如，暫定決定單元可以根據(jù)本發(fā)明的第六方式的臉決定單元的規(guī)定基準(zhǔn)，來(lái)決定成為對(duì)象的臉。
本發(fā)明的第八方式中的最終決定單元從由暫定決定單元所決定的臉中最終決定成為對(duì)焦或曝光控制的對(duì)象的臉。例如，最終決定單元可以通過(guò)與本發(fā)明的第六方式或第七方式所示的決定單元相同的處理，從各集合中由暫定決定單元所決定的臉中最終決定成為對(duì)象的臉。另外，例如，最終決定單元可以根據(jù)本發(fā)明的第六方式的臉決定單元的規(guī)定基準(zhǔn)，從各集合中由暫定決定單元所決定的臉中，最終決定成為對(duì)象的臉。
根據(jù)本發(fā)明的第八方式，可獲得與構(gòu)成為還包括分類單元和集合決定單元的本發(fā)明的第六方式或第七方式相同的效果。并且，根據(jù)本發(fā)明的第八方式，在維持因包括分類單元和集合決定單元而獲得的效果的狀態(tài)下，可以在決定成為對(duì)象的臉時(shí)根據(jù)各種基準(zhǔn)來(lái)決定該臉。
〔第九方式〕本發(fā)明的第九方式是一種對(duì)象決定裝置，包括檢測(cè)單元、區(qū)決定單元以及決定單元。
本發(fā)明的第九方式中的檢測(cè)單元在將所輸入的圖像進(jìn)行分割而得到的多個(gè)區(qū)的各區(qū)中檢測(cè)人臉。可以預(yù)先決定將所輸入的圖像分成什么樣的區(qū)，也可以動(dòng)態(tài)決定。
區(qū)決定單元根據(jù)檢測(cè)單元的檢測(cè)結(jié)果，決定用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉的區(qū)(即包含成為對(duì)焦或曝光控制的對(duì)象的臉的區(qū)稱為“選擇區(qū)”)。例如，可以根據(jù)與本發(fā)明的第六方式中的集合決定單元相同的基準(zhǔn)來(lái)決定區(qū)。
本發(fā)明的第九方式中的決定單元從選擇區(qū)內(nèi)所包含的臉中決定成為對(duì)象的臉。此時(shí)，該決定單元可以根據(jù)哪種基準(zhǔn)來(lái)決定成為對(duì)象的臉均可。例如，該決定單元可以通過(guò)與本發(fā)明的第六方式或第七方式所示的決定單元相同的處理，來(lái)決定成為對(duì)象的臉。另外，例如，該決定單元可以根據(jù)本發(fā)明的第六方式的臉決定單元的規(guī)定基準(zhǔn)，決定成為對(duì)象的臉。
〔第十方式〕本發(fā)明的第十方式是一種對(duì)象決定裝置，包括檢測(cè)單元、判斷單元、選擇單元以及決定單元。其中，檢測(cè)單元采用與本發(fā)明的第六方式相同的結(jié)構(gòu)。
判斷單元在檢測(cè)單元檢測(cè)出多個(gè)臉時(shí)，判斷所檢測(cè)出的人臉中的最大的臉。判斷單元可以根據(jù)例如所檢測(cè)出的人臉中的膚色的像素?cái)?shù)來(lái)判斷大小。另外，判斷單元可以根據(jù)例如在被檢測(cè)為人臉時(shí)所使用的臉矩形的大小來(lái)判斷臉的大小。判斷單元構(gòu)成為根據(jù)其它哪種基準(zhǔn)來(lái)判斷臉的大小均可。另外，最大的臉沒(méi)有必要是嚴(yán)格意義上的最大，可以是例如第2大的臉，也可以是第3大的臉。
選擇單元選擇所檢測(cè)出的臉中的最大的臉、以及具有基于該臉的大小的規(guī)定范圍內(nèi)的大小的其它臉。
本發(fā)明的第十方式中的決定單元從由選擇單元所選擇的臉中，決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。這樣，本發(fā)明的第十方式中的決定單元不是根據(jù)由檢測(cè)單元所檢測(cè)出的多個(gè)臉全部的位置來(lái)決定成為對(duì)象的臉，而是從所檢測(cè)出的臉中的最大的臉和具有基于該臉的大小的規(guī)定范圍內(nèi)的大小的其它臉中，決定成為對(duì)象的臉。該決定單元根據(jù)哪種基準(zhǔn)決定成為對(duì)象的臉均可。例如，該決定單元可以通過(guò)與本發(fā)明的第六方式或第七方式所示的決定單元相同的處理，來(lái)決定成為對(duì)象的臉。另外，例如，該決定單元可以根據(jù)本發(fā)明的第六方式的臉決定單元的規(guī)定基準(zhǔn)，決定成為對(duì)象的臉。
根據(jù)本發(fā)明的第十方式，僅根據(jù)在對(duì)焦用圖像內(nèi)具有相對(duì)某種程度的大小的臉，選擇成為對(duì)焦對(duì)象的臉。因此，可防止把被拍攝為背景的人，即用戶沒(méi)有有意作為被攝物體的人臉作為處理對(duì)象而包含進(jìn)去。因此，例如在該決定單元進(jìn)行與本發(fā)明的第六方式中的決定單元相同的處理的情況下，提高了選擇包含成為對(duì)焦對(duì)象的臉的集合的處理、取得基于集合內(nèi)所包含的臉的中心的處理、以及選擇成為對(duì)焦對(duì)象的臉的處理的精度。
〔第十一方式〕本發(fā)明的第十一方式是一種對(duì)象決定裝置，包括檢測(cè)單元、分類單元、集合決定單元以及決定單元。其中，檢測(cè)單元、分類單元以及集合決定單元采用與第六方式相同的結(jié)構(gòu)。
本發(fā)明的第十一方式中的決定單元從由集合決定單元所決定的集合內(nèi)所包含的臉中決定成為對(duì)象的臉。此時(shí)，該決定單元根據(jù)哪種基準(zhǔn)決定成為對(duì)象的臉均可。例如，該決定單元可以通過(guò)與本發(fā)明的第六方式或第七方式所示的決定單元相同的處理，決定成為對(duì)象的臉。另外，例如，該決定單元可以根據(jù)本發(fā)明的第六方式的臉決定單元的規(guī)定基準(zhǔn)，決定成為對(duì)象的臉。
根據(jù)本發(fā)明的第十一方式，可取得與本發(fā)明的第八方式相同的效果。
〔第十二方式〕本發(fā)明的第十二方式是一種對(duì)象決定裝置，包括檢測(cè)單元、特征量取得單元以及決定單元。其中，檢測(cè)單元采用與本發(fā)明的第六方式相同的結(jié)構(gòu)。
特征量取得單元針對(duì)在檢測(cè)單元中所檢測(cè)出的多個(gè)人臉的各個(gè)，取得表示人臉程度的特征量。“人臉程度”可以根據(jù)例如距用于劃分某圖像是否是人臉的識(shí)別邊界線的距離來(lái)給出。人臉程度可以使用在檢測(cè)單元中的臉檢測(cè)處理時(shí)所取得的值來(lái)表示。
決定單元根據(jù)特征量，決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。
〔第六方式～第十二方式的變形〕本發(fā)明的第六～十二方式可以構(gòu)成為還包括幀取得單元，其從所輸入的包含多個(gè)幀的時(shí)序圖像中取得規(guī)定的幀的圖像作為處理對(duì)象的圖像。在這樣構(gòu)成的情況下，檢測(cè)單元從由幀取得單元所取得的規(guī)定的幀的圖像中檢測(cè)人臉。
在這樣構(gòu)成的本發(fā)明的第六～十二方式中，對(duì)于包含多個(gè)幀的時(shí)序圖像，可獲得與本發(fā)明的第六～十二方式相同的作用/效果。
〔其它〕本發(fā)明的第一方式～第十二方式可以通過(guò)使用信息處理裝置執(zhí)行程序來(lái)實(shí)現(xiàn)。即，本發(fā)明可把上述第一方式～第十二方式中的各單元所執(zhí)行的處理確定為用于使信息處理裝置執(zhí)行的程序、或者記錄有該程序的記錄介質(zhì)。
根據(jù)本發(fā)明，當(dāng)檢測(cè)被攝物體時(shí)，作為預(yù)備攝像沒(méi)有必要攝像一定對(duì)該被攝物體進(jìn)行了對(duì)焦的圖像。因此，在預(yù)備攝像中不進(jìn)行用于取得多個(gè)進(jìn)行了對(duì)焦的圖像等的焦點(diǎn)控制，僅使用根據(jù)規(guī)定的焦點(diǎn)信息所取得的圖像就能快速地檢測(cè)主要被攝物體。
并且，根據(jù)本發(fā)明，在預(yù)備攝像中檢測(cè)出多個(gè)人物的臉的情況下，根據(jù)所檢測(cè)出的多個(gè)臉的位置和大小等，自動(dòng)判斷應(yīng)對(duì)哪個(gè)臉進(jìn)行對(duì)焦或曝光控制。


圖1是表示攝像裝置的功能塊的圖。
圖2是表示使用臉判定矩形的臉的檢測(cè)例的圖。
圖3是表示臉判定矩形的圖形例的圖。
圖4是表示使用臉判定矩形的臉的檢測(cè)例的圖。
圖5是表示攝像裝置的動(dòng)作例的流程圖。
圖6是表示對(duì)焦對(duì)象決定部的動(dòng)作例的流程圖。
圖7是表示攝像裝置的處理例的圖。
圖8是表示第一實(shí)施方式的功能塊的圖。
圖9是用于對(duì)外接多邊形法進(jìn)行說(shuō)明的圖。
圖10是用于對(duì)重心法進(jìn)行說(shuō)明的圖。
圖11是用于對(duì)臉決定部的處理進(jìn)行說(shuō)明的圖。
圖12是表示第二實(shí)施方式的動(dòng)作例的流程圖。
圖13是表示第二實(shí)施方式的動(dòng)作例的一部分的流程圖。
圖14是表示第二實(shí)施方式的動(dòng)作例的一部分的流程圖。
圖15是表示第三實(shí)施方式的功能塊的圖。
圖16是表示分類部的處理例的圖。
圖17是表示第三實(shí)施方式中的決定部的處理例的圖。
圖18是表示第三實(shí)施方式的動(dòng)作例的一部分的流程圖。
圖19是用于表示第三實(shí)施方式中的效果的圖。
圖20是表示第四實(shí)施方式的功能塊的圖。
圖21是表示第四實(shí)施方式的動(dòng)作例的一部分的流程圖。
圖22是表示第五實(shí)施方式的功能塊的圖。
圖23是表示被分為多個(gè)區(qū)的對(duì)焦用圖像示例的圖。
圖24是表示第五實(shí)施方式中的決定部的處理例的圖。
圖25是表示第五實(shí)施方式的動(dòng)作例的一部分的流程圖。
圖26是表示第六實(shí)施方式的功能塊的圖。
圖27是表示最大臉選擇部的處理例的圖。
圖28是表示候選選擇部的處理例的圖。
圖29是表示第六實(shí)施方式的動(dòng)作例的一部分的流程圖。
符號(hào)說(shuō)明1攝像裝置；2攝像部；3圖像存儲(chǔ)部；4對(duì)焦對(duì)象決定部；5臉檢測(cè)部；6決定部；7測(cè)距部；8臉判定矩形；9第一矩形；10第二矩形；11輸入部；12a、12b、12c、12d、12e攝像裝置；13輸入部；14攝像部；15圖像存儲(chǔ)部；16a、16b、16c、16d、16e對(duì)焦對(duì)象決定部；17a、17d臉檢測(cè)部；18a、18b、18c、18d、18e決定部；19a、19b、19d、19e中心決定部；20a、20b、20d、20e臉決定部；21測(cè)距部；22分類部；23集合決定部；24區(qū)決定部；25最大臉選擇部；26候選選擇部。
具體實(shí)施例方式下面，使用圖對(duì)第一實(shí)施方式的攝像裝置1進(jìn)行說(shuō)明。另外，針對(duì)攝像裝置1的以下說(shuō)明僅是例示而已，其結(jié)構(gòu)不限于以下的說(shuō)明。
〔系統(tǒng)結(jié)構(gòu)〕攝像裝置1是數(shù)字相機(jī)、數(shù)字?jǐn)z像機(jī)、或者具有數(shù)字相機(jī)和數(shù)字?jǐn)z像機(jī)那樣的攝像功能的信息處理裝置。攝像裝置1在硬件上具有通過(guò)總線連接的CPU(中央運(yùn)算處理裝置)、主存儲(chǔ)裝置(RAM(Read Only Memory，只讀存儲(chǔ)器))、輔助存儲(chǔ)裝置以及用于作為數(shù)字相機(jī)或數(shù)字?jǐn)z像機(jī)而動(dòng)作的各裝置(攝像鏡頭、機(jī)械機(jī)構(gòu)、CCD(Charge-Coupled Device，電荷耦合裝置)、操作部、馬達(dá)等)等。輔助存儲(chǔ)裝置使用非易失性存儲(chǔ)裝置而構(gòu)成。這里所說(shuō)的非易失性存儲(chǔ)裝置是指所謂的ROM(Read-OnlyMemory，只讀存儲(chǔ)器包含EPROM(Erasable Programmable Read-OnlyMemory，可擦除可編程只讀存儲(chǔ)器)、EEPROM(Electrically ErasableProgrammable Read-Only Memory，電可擦除可編程只讀存儲(chǔ)器)、掩模型ROM等)、FRAM(Ferroelectric RAM，鐵電RAM)、硬盤等。
圖1是表示攝像裝置1的功能塊的圖。攝像裝置1通過(guò)把存儲(chǔ)在輔助存儲(chǔ)裝置內(nèi)的各種程序(OS、應(yīng)用程序等)加載到主存儲(chǔ)裝置內(nèi)并通過(guò)CPU來(lái)執(zhí)行，從而作為包括攝像部2、圖像存儲(chǔ)部3、對(duì)焦對(duì)象決定部4、測(cè)距部7以及輸入部11等的裝置來(lái)發(fā)揮功能。對(duì)焦對(duì)象決定部4是通過(guò)使用CPU來(lái)執(zhí)行對(duì)焦對(duì)象決定程序而實(shí)現(xiàn)的。另外，對(duì)焦對(duì)象決定部4也可以作為專用硬件來(lái)實(shí)現(xiàn)。
以下，使用圖1對(duì)攝像裝置1所包括的各功能部進(jìn)行說(shuō)明。
〔〔攝像部〕〕攝像部2使用攝像鏡頭、機(jī)械機(jī)構(gòu)、CCD、馬達(dá)等構(gòu)成為具有自動(dòng)聚焦功能的裝置。攝像鏡頭包括例如用于實(shí)現(xiàn)變焦功能的變焦鏡頭、用于對(duì)任意被攝物體進(jìn)行對(duì)焦的聚焦鏡頭等。機(jī)械機(jī)構(gòu)包括機(jī)械快門、光圈、濾光器等。馬達(dá)包括變焦鏡頭馬達(dá)、聚焦馬達(dá)、快門馬達(dá)等。
攝像部2具有未作圖示的存儲(chǔ)部，把規(guī)定的焦點(diǎn)信息存儲(chǔ)在該存儲(chǔ)部?jī)?nèi)。規(guī)定的焦點(diǎn)信息是預(yù)先決定的一個(gè)焦點(diǎn)信息。在攝像裝置1的電源接通的情況下，如果從測(cè)距部7沒(méi)有焦點(diǎn)信息的輸入，則攝像部2的聚焦鏡頭被控制成成為基于該規(guī)定的焦點(diǎn)信息的狀態(tài)。另一方面，如果從測(cè)距部7有焦點(diǎn)信息的輸入，則攝像部2的聚焦鏡頭被控制成成為基于所輸入的焦點(diǎn)信息的狀態(tài)。
攝像部2使用CCD把通過(guò)包括像上述那樣被控制的聚焦鏡頭的攝像鏡頭而成像的被攝物體的圖像轉(zhuǎn)換成電信號(hào)，從而進(jìn)行攝像。
攝像部2可以構(gòu)成為每當(dāng)用戶通過(guò)輸入部11進(jìn)行了輸入時(shí)，就攝像1張或多張靜態(tài)圖像。并且，攝像部2也可以構(gòu)成為根據(jù)用戶通過(guò)輸入部11進(jìn)行的輸入，攝像由多個(gè)幀構(gòu)成的動(dòng)態(tài)圖像(時(shí)序圖像)。并且，攝像部2在構(gòu)成為攝像動(dòng)態(tài)圖像的情況下，可以構(gòu)成為從多個(gè)幀中取得一個(gè)幀的圖像，把該幀的圖像作為處理對(duì)象的圖像傳遞給對(duì)焦對(duì)象決定部4。
〔〔圖像存儲(chǔ)部〕〕圖像存儲(chǔ)部3使用所謂的RAM等可讀寫記錄介質(zhì)等來(lái)構(gòu)成。圖像存儲(chǔ)部3也可以使用相對(duì)于攝像裝置1可拆裝的記錄介質(zhì)來(lái)構(gòu)成。圖像存儲(chǔ)部3存儲(chǔ)由攝像部2所攝像的圖像的數(shù)據(jù)。
〔〔對(duì)焦對(duì)象決定部〕〕對(duì)焦對(duì)象決定部4從由攝像部2所攝像的被攝物體中決定進(jìn)行對(duì)焦的被攝物體，即成為對(duì)焦的對(duì)象的被攝物體。此時(shí)，對(duì)焦對(duì)象決定部4使用根據(jù)規(guī)定的焦點(diǎn)信息由攝像部2為了對(duì)焦用而攝像的圖像來(lái)進(jìn)行處理。該為了對(duì)焦用而攝像的圖像由攝像部2輸入到對(duì)焦對(duì)象決定部4中。
對(duì)焦對(duì)象決定部4包括臉檢測(cè)部5，其從所輸入的圖像中檢測(cè)成為被攝物體的人物的臉；以及決定部6，其根據(jù)由臉檢測(cè)部5所檢測(cè)出的臉決定進(jìn)行對(duì)焦的被攝物體。以下，對(duì)構(gòu)成對(duì)焦對(duì)象決定部4的各功能部進(jìn)行說(shuō)明。
<臉檢測(cè)部>
臉檢測(cè)部5根據(jù)多個(gè)部分區(qū)域的統(tǒng)計(jì)量(具體地說(shuō)是濃淡值)，從所輸入的圖像中檢測(cè)成為被攝物體的人物的臉。以下，對(duì)由臉檢測(cè)部5所執(zhí)行的、檢測(cè)人物的臉時(shí)的處理進(jìn)行詳細(xì)說(shuō)明。
圖2是表示基于濃淡值的人物的臉的檢測(cè)方法的圖。在該檢測(cè)方法中，使特定矩形(以下稱為“臉判定矩形”)8在成為處理對(duì)象的圖像內(nèi)移動(dòng)，判斷在各移動(dòng)目的地的臉判定矩形8內(nèi)(以下稱為“關(guān)注區(qū)域”)是否包含有人物的臉。此時(shí)，通過(guò)改變臉判定矩形8的大小和成為處理對(duì)象的圖像的大小的比率、臉判定矩形8和成為處理對(duì)象的圖像的角度，可檢測(cè)各種大小或角度的臉。
在臉判定矩形8的矩形內(nèi)包含多個(gè)其它矩形(以下稱為“第一矩形”、“第二矩形”)9、10。第一矩形9和第二矩形10分別被配置在臉判定矩形8內(nèi)的固定位置。在一個(gè)臉判定矩形8內(nèi)分別配置1個(gè)以上第一矩形9和第二矩形10。
在臉的檢測(cè)處理中，算出在各關(guān)注區(qū)域中，被第一矩形9和第二矩形10所包圍的各個(gè)區(qū)域(以下分別稱為“第一特征區(qū)域”、“第二特征區(qū)域”)的濃淡值。第一特征區(qū)域和第二特征區(qū)域的濃淡差例如由各區(qū)域內(nèi)的像素值的平均值或合計(jì)值來(lái)表示。
然后，算出第一特征區(qū)域的濃淡值La和第二特征區(qū)域的濃淡值Lb的差量。然后，根據(jù)該差量值是否大于預(yù)先設(shè)定的閾值α，來(lái)判定在關(guān)注區(qū)域內(nèi)是否包含有人物的臉。
圖3是表示臉判定矩形8的圖形例的圖。圖4是表示使用多個(gè)圖形的臉判定矩形8的臉判定處理的圖。在實(shí)際處理中，如圖3所示，為臉判定矩形8準(zhǔn)備有多個(gè)圖形。在各圖形中，第一矩形9和第二矩形10的數(shù)量和位置各不相同。
然后，針對(duì)各圖形的臉判定矩形8通過(guò)計(jì)算濃淡差來(lái)執(zhí)行判定。并且，根據(jù)各判定結(jié)果，針對(duì)每個(gè)關(guān)注區(qū)域算出得分，根據(jù)所算出的得分，對(duì)該關(guān)注區(qū)域內(nèi)是否包含有人物的臉進(jìn)行最終的判定。所算出的得分與關(guān)注區(qū)域內(nèi)是否包含有人物的臉的對(duì)應(yīng)是通過(guò)例如使用數(shù)量較多的樣本圖像(包含人物的臉的圖像和不包含人物的臉的圖像)的學(xué)習(xí)處理而預(yù)先獲得的。
臉檢測(cè)部5在檢測(cè)出臉的情況下，即進(jìn)行了在某關(guān)注區(qū)域內(nèi)包含有人物的臉的最終判定的情況下，把與該臉有關(guān)的圖像信息輸出到?jīng)Q定部6。具體地說(shuō)，臉檢測(cè)部5輸出包含有檢測(cè)出的臉的關(guān)注區(qū)域的位置和大小。例如，臉檢測(cè)部5輸出該關(guān)注區(qū)域的中心坐標(biāo)和面積(區(qū)域內(nèi)的像素?cái)?shù))。
并且，臉檢測(cè)部5可以構(gòu)成為根據(jù)需要對(duì)所檢測(cè)出的臉的朝向進(jìn)行判定并輸出。另外，臉檢測(cè)部5在判定臉的朝向的情況下，通過(guò)使用例如非專利文獻(xiàn)1、2所記載的技術(shù)來(lái)進(jìn)行判定。具體地說(shuō)，臉檢測(cè)部5還使用例如左朝向用的圖形的臉判定矩形8和右朝向用的圖形的臉判定矩形8來(lái)執(zhí)行臉檢測(cè)。并且，臉檢測(cè)部5在使用例如左朝向用的圖形的臉判定矩形8檢測(cè)出臉的情況下，判定為所檢測(cè)出的臉是左朝向。同樣，臉檢測(cè)部5在使用右朝向用的圖形的臉判定矩形8檢測(cè)出臉的情況下，判定為所檢測(cè)出的臉是右朝向。對(duì)于正面也一樣。臉的朝向判定可以應(yīng)用任何技術(shù)來(lái)實(shí)施而不限于上述技術(shù)。
<決定部>
決定部6根據(jù)從臉檢測(cè)部5輸入的與臉有關(guān)的圖像信息，決定進(jìn)行對(duì)焦的被攝物體。此時(shí)，大致來(lái)分，決定部6進(jìn)行二個(gè)處理。第一處理是從由臉檢測(cè)部5所檢測(cè)出的多個(gè)臉中選擇一個(gè)臉的處理。第二處理是根據(jù)由第一處理所選擇的臉，決定進(jìn)行對(duì)焦的被攝物體的處理。另外，在臉檢測(cè)部5中僅檢測(cè)出一個(gè)臉的情況下，省略第一處理。并且，在臉檢測(cè)部5中未檢測(cè)出臉的情況下，省略第一處理和第二處理。
<<第一處理>>
首先，對(duì)第一處理進(jìn)行說(shuō)明。在第一處理中，決定部6選擇在第二處理中決定進(jìn)行對(duì)焦的被攝物體時(shí)要使用哪個(gè)臉的圖像信息。在第一處理中，有被稱為面積比較法、得分比較法、測(cè)距法的三種實(shí)現(xiàn)方法。在決定部6中可以采用其中的任意一種方法。以下，對(duì)各實(shí)現(xiàn)方法進(jìn)行說(shuō)明。
<<<面積比較法>>>
在面積比較法中，決定部6對(duì)在臉檢測(cè)部5中所檢測(cè)出的多個(gè)臉的面積進(jìn)行比較，選擇作為圖像的面積為最大的臉。在面積比較法中，決定部6為了檢測(cè)距攝像裝置1最近的臉，選擇作為圖像的面積為最大的臉。即，在面積比較法中，決定部6通過(guò)對(duì)臉圖像的大小進(jìn)行比較來(lái)實(shí)施到被攝物體的距離的比較。
<<<得分比較法>>>
在得分比較法中，決定部6針對(duì)在臉檢測(cè)部5中所檢測(cè)出的多個(gè)臉?lè)謩e求出得分。決定部6根據(jù)臉的朝向、臉的大小(面積)、臉在圖像內(nèi)的位置、臉的周圍的臉密度等獲取得分。決定部6可以針對(duì)上述所有四項(xiàng)獲得得分，也可以針對(duì)一部分項(xiàng)獲取得分。
然后，決定部6選擇獲得了最高得分的臉。關(guān)于臉的朝向，例如臉的朝向越是面向正面，則得分被設(shè)定得越高。關(guān)于臉的大小，例如臉的大小越大，則得分被設(shè)定得越高。關(guān)于臉在圖像內(nèi)的位置，例如距圖像中央越近，則得分被設(shè)定得越高。關(guān)于臉密度，例如臉密度越高，則得分被設(shè)定得越高。然而，在各項(xiàng)(朝向、大小、位置、臉密度)中把哪種狀態(tài)設(shè)定為高得分，可以由用戶可變更地來(lái)設(shè)計(jì)，也可以由設(shè)計(jì)者任意設(shè)計(jì)。
<<<測(cè)距法>>>意設(shè)計(jì)。
<<<測(cè)距法>>>
在測(cè)距法中，決定部6取得針對(duì)由臉檢測(cè)部5所檢測(cè)出的各臉的實(shí)物的測(cè)距結(jié)果。并且，決定部6選擇距攝像裝置1的距離最小的臉。
決定部6可以構(gòu)成為獲得任意測(cè)距裝置的測(cè)距結(jié)果。例如，可以構(gòu)成為在攝像裝置1或?qū)箤?duì)象決定部4中配備未作圖示的測(cè)距裝置，由決定部6獲得該測(cè)距裝置的測(cè)距結(jié)果。并且，例如，在測(cè)距部7采用對(duì)到被攝物體的距離進(jìn)行測(cè)距的結(jié)構(gòu)的情況下，可以把測(cè)距部7用作測(cè)距裝置的替代裝置。在該情況下，決定部6獲得測(cè)距部7的測(cè)距結(jié)果(參照?qǐng)D1的虛線箭頭)。在任一種情況下，決定部6把從臉檢測(cè)部5輸入的圖像信息中的關(guān)注區(qū)域的坐標(biāo)提供給測(cè)距裝置。并且，測(cè)距裝置根據(jù)該關(guān)注區(qū)域的坐標(biāo)，對(duì)到所檢測(cè)出的臉的距離進(jìn)行測(cè)距。
<<第二處理>>
在第二處理中，決定部6根據(jù)所選擇的臉，決定進(jìn)行對(duì)焦的被攝物體。作為這種被攝物體的例子，有所選擇的臉的部位(例如眼、鼻、口、耳、額等)。此時(shí)，所選擇的臉的部位的位置可以由臉檢測(cè)部5重新檢測(cè)，也可以根據(jù)所選擇的臉的圖像信息求出其位置。例如，決定部6把在規(guī)定方向上從所選擇的臉的中心坐標(biāo)相對(duì)地相隔了規(guī)定距離的位置識(shí)別為所選擇的臉的部位的位置。然后，決定部6把進(jìn)行對(duì)焦的被攝物體的圖像的坐標(biāo)(即二維坐標(biāo))輸出給測(cè)距部7。
并且，所選擇的臉本身可以是進(jìn)行對(duì)焦的被攝物體。在該情況下，決定部6把在第一處理中所選擇的臉的圖像信息內(nèi)所包含的臉的位置(即二維坐標(biāo))輸出給測(cè)距部7。
〔〔測(cè)距部〕〕測(cè)距部7取得用于對(duì)由對(duì)焦對(duì)象決定部4的決定部6所決定的被攝物體對(duì)焦的焦點(diǎn)信息。此時(shí)，測(cè)距部7根據(jù)從決定部6輸入的二維坐標(biāo)，確定用于進(jìn)行對(duì)焦的被攝物體。
例如，測(cè)距部7構(gòu)成為通過(guò)向被攝物體射出紅外線等來(lái)對(duì)到被攝物體的距離進(jìn)行測(cè)距，從而取得焦點(diǎn)信息。在該情況下，測(cè)距部7根據(jù)從
〔〔輸入部〕〕輸入部11使用快門釋放按鈕等來(lái)構(gòu)成。當(dāng)輸入部11檢測(cè)到用戶的命令的輸入時(shí)，根據(jù)所輸入的命令，對(duì)攝像裝置1的各部進(jìn)行命令通知。例如，當(dāng)輸入部11檢測(cè)到用戶的自動(dòng)聚焦的命令的輸入時(shí)，向攝像部2通知自動(dòng)聚焦的命令。并且，例如，當(dāng)輸入部11檢測(cè)到用戶的攝像命令的輸入時(shí)，向攝像部2通知攝像的命令。
在輸入部11使用快門釋放按鈕來(lái)構(gòu)成的情況下，自動(dòng)聚焦命令通過(guò)例如將該快門釋放按鈕半按下，由輸入部11來(lái)進(jìn)行檢測(cè)。并且，攝像命令通過(guò)例如將該快門釋放按鈕完全按下，由輸入部11來(lái)進(jìn)行檢測(cè)。
〔動(dòng)作例〕圖5是表示攝像裝置1的動(dòng)作例的流程圖。以下，使用圖5對(duì)攝像裝置1的動(dòng)作例進(jìn)行說(shuō)明。
當(dāng)攝像裝置1接通電源時(shí)，攝像部2把聚焦鏡頭控制成成為基于規(guī)定的焦點(diǎn)信息的狀態(tài)。
當(dāng)輸入部11檢測(cè)到快門釋放按鈕被用戶半按下時(shí)(S01)，把輸入了自動(dòng)聚焦命令的情況通知給攝像部2。
攝像部2判斷是否從測(cè)距部7輸入了焦點(diǎn)信息。在未輸入焦點(diǎn)信息的情況下(S02-否)，攝像部2在聚焦鏡頭被控制成基于規(guī)定的焦點(diǎn)信息的狀態(tài)下進(jìn)行攝像(S03)。攝像部2把所攝像的圖像數(shù)據(jù)輸出給對(duì)焦對(duì)象決定部4。
對(duì)焦對(duì)象決定部4根據(jù)所輸入的圖像數(shù)據(jù)，決定進(jìn)行對(duì)焦的被攝物體(S04)。圖6是表示對(duì)焦對(duì)象決定部4的動(dòng)作例的流程圖。使用圖6對(duì)S04的處理進(jìn)行說(shuō)明。
首先，臉檢測(cè)部5從所輸入的圖像中檢測(cè)人物的臉(S10)。臉檢測(cè)部5把所檢測(cè)出的臉的圖像信息輸出給決定部6。
決定部6調(diào)查由臉檢測(cè)部5所檢測(cè)出的臉的數(shù)目。當(dāng)臉的數(shù)目小于1的情況下(S11＜1)，即為0的情況下，決定部6把畫面中央的二維坐標(biāo)輸出給測(cè)距部7。在臉的數(shù)目大于1的情況下(S11＞1)，即在檢測(cè)出多個(gè)臉的情況下，決定部6執(zhí)行第一處理，從所檢測(cè)出的多個(gè)臉中選擇一個(gè)臉(S13)。
在所檢測(cè)出的臉是一個(gè)的情況下(S11＝1)，或者在S13的處理后，決定部6根據(jù)一個(gè)臉來(lái)決定進(jìn)行對(duì)焦的被攝物體(S14)。這里所說(shuō)的一個(gè)臉在所檢測(cè)出的臉的數(shù)目是一個(gè)的情況下是該唯一被檢測(cè)出的臉，在S13處理后的情況下是被選擇的臉。并且，決定部6取得所決定的被攝物體的二維坐標(biāo)，把該二維坐標(biāo)輸出給測(cè)距部7(S15)。
回到使用圖5的說(shuō)明。在S04的處理后，測(cè)距部7根據(jù)從對(duì)焦對(duì)象決定部4的決定部6中輸出的二維坐標(biāo)，取得針對(duì)所決定的被攝物體的焦點(diǎn)信息(S05)。測(cè)距部7把所取得的焦點(diǎn)信息輸出給攝像部2。在該處理后，再次執(zhí)行S02及之后的處理。
在S02中，在從測(cè)距部7到攝像部2有焦點(diǎn)信息的輸入的情況下(S02-是)，攝像部2根據(jù)所輸入的焦點(diǎn)信息來(lái)控制聚焦鏡頭(S06)。即，攝像部2控制聚焦鏡頭，以便對(duì)由對(duì)焦對(duì)象決定部4所決定的被攝物體對(duì)焦。
在聚焦鏡頭的控制后，攝像部2進(jìn)行攝像(S07)。通過(guò)該攝像，攝像對(duì)由對(duì)焦對(duì)象決定部4所決定的被攝物體進(jìn)行了對(duì)焦的圖像。并且，圖像存儲(chǔ)部3存儲(chǔ)由攝像部2所攝像的圖像的數(shù)據(jù)(S08)。
〔作用/效果〕圖7是表示由攝像裝置1所攝像的圖像的示例的圖。在攝像裝置1中，檢測(cè)出作為主要被攝物體的臉(由粗線條矩形圍起來(lái)的臉)，而不是作為背景而被攝像的人物的臉，以對(duì)該主要被攝物體對(duì)焦的方式來(lái)實(shí)施攝像。
在攝像裝置1中，對(duì)焦對(duì)象決定部4的臉檢測(cè)部5檢測(cè)人物的臉作為成為對(duì)焦對(duì)象的被攝物體。此時(shí)，臉檢測(cè)部5根據(jù)關(guān)注區(qū)域內(nèi)的第一特征區(qū)域和第二特征區(qū)域的濃淡差進(jìn)行臉檢測(cè)。在獲取某區(qū)域內(nèi)的濃淡值時(shí)，即使在沒(méi)有對(duì)該區(qū)域內(nèi)所攝像的被攝物體對(duì)焦的情況下，也能獲得接近于進(jìn)行了對(duì)焦的情況下的值。因此，在攝像裝置1中，即使在攝像了焦點(diǎn)沒(méi)有對(duì)準(zhǔn)人物的臉的圖像的情況下，也能檢測(cè)該臉。因此，在攝像裝置1中，在攝像檢測(cè)人物的臉時(shí)所使用的圖像時(shí)，沒(méi)有必要進(jìn)行對(duì)被攝物體的焦點(diǎn)控制。因此，在該攝像處理時(shí)，在攝像裝置1中，沒(méi)有必要針對(duì)被控制為規(guī)定焦點(diǎn)的攝像部2的聚焦鏡頭重新進(jìn)行焦點(diǎn)控制，可快速地執(zhí)行攝像。
并且，對(duì)焦對(duì)象決定部4僅針對(duì)一個(gè)圖像，即被控制為規(guī)定焦點(diǎn)而攝像的圖像進(jìn)行臉檢測(cè)。因此，在攝像裝置1中，沒(méi)有必要對(duì)多個(gè)圖像進(jìn)行臉檢測(cè)，可快速地檢測(cè)臉。
并且，在攝像裝置1中，在檢測(cè)出多個(gè)臉的情況下，對(duì)焦對(duì)象決定部4選擇任意一個(gè)臉，根據(jù)該臉決定成為對(duì)焦對(duì)象的被攝物體。因此，根據(jù)攝像裝置1，用戶沒(méi)有必要特意從被收納在幀內(nèi)的多個(gè)臉中選擇一個(gè)臉。
〔變形例〕對(duì)焦對(duì)象決定部4可以獨(dú)立構(gòu)成為攝像裝置1的外部裝置，而不包括在攝像裝置1內(nèi)。并且，這樣構(gòu)成為外部裝置的對(duì)焦對(duì)象決定部4可以構(gòu)成為在自身的裝置內(nèi)配備具有與測(cè)距部7相同功能的未作圖示的測(cè)距部。
另外，攝像裝置1通過(guò)使用測(cè)距部7對(duì)到被攝物體的距離進(jìn)行測(cè)距來(lái)取得焦點(diǎn)信息，然而也可以構(gòu)成為使用測(cè)距以外的方法來(lái)取得焦點(diǎn)信息。
另外，攝像裝置1也可以構(gòu)成為根據(jù)所檢測(cè)出的臉決定在實(shí)施攝像時(shí)成為進(jìn)行曝光控制的對(duì)象的被攝物體，由此來(lái)進(jìn)行曝光控制。在該情況下，決定部6決定成為進(jìn)行曝光控制的對(duì)象的被攝物體。并且，在該情況下，攝像裝置1還具有測(cè)光部，該測(cè)光部根據(jù)由決定部6所決定的被攝物體取得曝光控制信息。測(cè)光部通過(guò)把由決定部6所決定的被攝物體作為曝光區(qū)域進(jìn)行測(cè)光來(lái)算出曝光量(曝光控制信息)。然后，測(cè)光部把所算出的曝光控制信息傳遞到攝像部2。然后，攝像部2通過(guò)調(diào)節(jié)光圈等來(lái)實(shí)施基于該曝光控制信息的曝光控制，進(jìn)行攝像。
另外，臉檢測(cè)部5也可以構(gòu)成為把具有膚色的被攝物體檢測(cè)為臉。通過(guò)這樣構(gòu)成，盡管不能準(zhǔn)確地檢測(cè)人物的臉，然而可削減檢測(cè)處理所需要的時(shí)間，也能削減臉檢測(cè)部5的安裝所需要的時(shí)間和成本。
另外，攝像部2也可以作為手動(dòng)聚焦裝置來(lái)實(shí)現(xiàn)，而不是自動(dòng)聚焦功能。在該情況下，可以構(gòu)成為例如當(dāng)由用戶操作了聚焦鏡頭，成為適合于從測(cè)距部7輸入的焦點(diǎn)信息的狀態(tài)時(shí)，把已進(jìn)行了對(duì)焦的情況報(bào)知給用戶。
另外，攝像裝置1也可以構(gòu)成為攝像到膠卷上的銀鉛照相機(jī)，而不是使用具有CCD的攝像部2來(lái)最終實(shí)施攝像。在該情況下，攝像裝置1具有具備CCD的攝像部2以及作為銀鉛照相機(jī)的攝像部。并且，在該情況下，圖像存儲(chǔ)部3對(duì)攝像裝置1而言并不是必要的。攝像部2為了把預(yù)備攝像的圖像輸入到對(duì)焦對(duì)象決定部4中而實(shí)施攝像。并且，在作為銀鉛照相機(jī)的攝像部中實(shí)施測(cè)距部7的基于焦點(diǎn)信息的聚焦鏡頭的調(diào)節(jié)。然而，攝像部2和作為銀鉛照相機(jī)的攝像部可以構(gòu)成為共用例如聚焦鏡頭等其結(jié)構(gòu)的一部分。
以下，使用圖對(duì)具有對(duì)焦對(duì)象決定部16(16a、16b、16c、16d、16e)的攝像裝置12(12a、12b、12c、12d、12e)進(jìn)行說(shuō)明。在該說(shuō)明中，人物圖像是至少包含人物的臉的一部分或全部的圖像的圖像。因此，人物圖像可以包含人物整體的圖像，也可以包含僅人物的臉或僅上半身的圖像。并且，可以包含針對(duì)多個(gè)人物的圖像。而且，背景可以包含人物以外的風(fēng)景(背景也包含作為被攝物體而被關(guān)注的物體)和圖案等任何圖形。
另外，針對(duì)對(duì)焦對(duì)象決定部16和攝像裝置12的以下說(shuō)明僅是例示，其結(jié)構(gòu)不限于以下說(shuō)明。
〔系統(tǒng)結(jié)構(gòu)〕首先，對(duì)具有對(duì)焦對(duì)象決定部16a的攝像裝置12a進(jìn)行說(shuō)明。攝像裝置12a在硬件上具有通過(guò)總線連接的CPU(中央運(yùn)算處理裝置)、主存儲(chǔ)裝置(RAM)、輔助存儲(chǔ)裝置以及用于作為數(shù)字相機(jī)和數(shù)字?jǐn)z像機(jī)進(jìn)行動(dòng)作的各裝置(攝像鏡頭、機(jī)械機(jī)構(gòu)、CCD、操作部、馬達(dá)等)等。輔助存儲(chǔ)裝置使用非易失性存儲(chǔ)裝置來(lái)構(gòu)成。這里所說(shuō)的非易失性存儲(chǔ)裝置是指所謂的ROM、FRAM、硬盤等。
圖8是表示攝像裝置12a的功能塊的圖。攝像裝置12a通過(guò)把存儲(chǔ)在輔助存儲(chǔ)裝置內(nèi)的各種程序(OS、應(yīng)用程序等)加載到主存儲(chǔ)裝置內(nèi)并使用CPU來(lái)執(zhí)行，從而作為包括輸入部13、攝像部14、圖像存儲(chǔ)部15、對(duì)焦對(duì)象決定部16a以及測(cè)距部21等的裝置來(lái)發(fā)揮功能。對(duì)焦對(duì)象決定部16a是通過(guò)使用CPU來(lái)執(zhí)行對(duì)焦對(duì)象決定程序而實(shí)現(xiàn)的。另外，對(duì)焦對(duì)象決定部16a也可以作為專用硬件來(lái)實(shí)現(xiàn)。
以下，使用圖8對(duì)攝像裝置12a內(nèi)所包含的各功能部進(jìn)行說(shuō)明。
<輸入部>
輸入部13使用快門釋放按鈕等來(lái)構(gòu)成。當(dāng)輸入部13檢測(cè)到用戶的命令的輸入時(shí)，根據(jù)所輸入的命令，對(duì)攝像裝置12a的各部進(jìn)行命令通知。例如，當(dāng)輸入部13檢測(cè)到用戶的自動(dòng)聚焦命令的輸入時(shí)，向攝像部14通知自動(dòng)聚焦命令。并且，例如，當(dāng)輸入部13檢測(cè)到用戶的攝像命令的輸入時(shí)，向攝像部14通知攝像命令。
在輸入部13使用快門釋放按鈕來(lái)構(gòu)成的情況下，自動(dòng)聚焦命令是通過(guò)例如將該快門釋放按鈕半按下，由輸入部13來(lái)進(jìn)行檢測(cè)。并且，攝像命令是通過(guò)例如將該快門釋放按鈕完全按下，由輸入部13來(lái)進(jìn)行檢測(cè)。
<攝像部>
攝像部14使用攝像鏡頭、機(jī)械機(jī)構(gòu)、CCD、馬達(dá)等，構(gòu)成為具有自動(dòng)聚焦功能的裝置。攝像鏡頭包括例如用于實(shí)現(xiàn)變焦功能的變焦鏡頭、用于對(duì)任意被攝物體進(jìn)行對(duì)焦的聚焦鏡頭等。機(jī)械機(jī)構(gòu)包括機(jī)械快門、光圈、濾光器等。馬達(dá)包括變焦鏡頭馬達(dá)、聚焦馬達(dá)、快門馬達(dá)等。
攝像部14具有未作圖示的存儲(chǔ)部，把規(guī)定的焦點(diǎn)信息存儲(chǔ)在該存儲(chǔ)部?jī)?nèi)。規(guī)定的焦點(diǎn)信息是預(yù)先決定的一個(gè)焦點(diǎn)信息。在攝像裝置12a的電源接通的情況下，如果從測(cè)距部21沒(méi)有焦點(diǎn)信息的輸入，則攝像部14的聚焦鏡頭被控制成成為基于該規(guī)定的焦點(diǎn)信息的狀態(tài)。另一方面，如果從測(cè)距部21有焦點(diǎn)信息的輸入，則攝像部14的聚焦鏡頭被控制成成為基于所輸入的焦點(diǎn)信息的狀態(tài)。
攝像部14通過(guò)使用CCD把經(jīng)由包含有像上述那樣被控制的聚焦鏡頭的攝像鏡頭而成像的被攝物體的圖像轉(zhuǎn)換成電信號(hào)，來(lái)進(jìn)行攝像。
攝像部14可以構(gòu)成為每當(dāng)用戶通過(guò)輸入部13進(jìn)行了輸入時(shí)，就攝像1張或多張靜態(tài)圖像。另外，攝像部14也可以構(gòu)成為根據(jù)通過(guò)輸入部13的用戶輸入，攝像由多個(gè)幀構(gòu)成的動(dòng)態(tài)圖像(時(shí)序圖像)。另外，攝像部14在構(gòu)成為攝像動(dòng)態(tài)圖像的情況下，可以構(gòu)成為從多個(gè)幀中取得一個(gè)幀的圖像，把該幀的圖像作為處理對(duì)象的圖像傳遞給對(duì)焦對(duì)象決定部16a。
<圖像存儲(chǔ)部>
圖像存儲(chǔ)部15使用所謂的RAM等可讀寫記錄介質(zhì)等來(lái)構(gòu)成。圖像存儲(chǔ)部15也可以使用相對(duì)于攝像裝置12a可拆裝的記錄介質(zhì)來(lái)構(gòu)成。圖像存儲(chǔ)部15存儲(chǔ)由攝像部14所攝像的圖像的數(shù)據(jù)。
<對(duì)焦對(duì)象決定部>
對(duì)焦對(duì)象決定部16a從由攝像部14所攝像的被攝物體中決定進(jìn)行對(duì)焦的被攝物體，即成為對(duì)焦對(duì)象的臉。此時(shí)，對(duì)焦對(duì)象決定部16a使用由攝像部14為了對(duì)焦用而攝像的圖像來(lái)進(jìn)行處理。該為了對(duì)焦用而攝像的圖像由攝像部14輸入給對(duì)焦對(duì)象決定部16a。
對(duì)焦對(duì)象決定部16a包括臉檢測(cè)部17a和決定部18a。以下，對(duì)構(gòu)成對(duì)焦對(duì)象決定部16a的各功能部進(jìn)行說(shuō)明。
<臉檢測(cè)部>
臉檢測(cè)部17a從對(duì)焦用圖像中獲得包含人物的臉的區(qū)域(以下稱為“臉區(qū)域”)的坐標(biāo)。根據(jù)該臉矩形的坐標(biāo)，確定對(duì)焦用圖像中的人的臉區(qū)域的位置和大小。
臉區(qū)域的檢測(cè)可以通過(guò)應(yīng)用現(xiàn)有的任何技術(shù)來(lái)實(shí)現(xiàn)。例如，可以通過(guò)使用與臉整體的輪廓對(duì)應(yīng)的基準(zhǔn)模板的模板匹配來(lái)獲得臉矩形的坐標(biāo)。另外，也可以通過(guò)基于臉的構(gòu)成要素(眼、鼻、耳等)的模板匹配來(lái)獲得臉矩形的坐標(biāo)。另外，也可以通過(guò)色度鍵處理來(lái)檢測(cè)頭發(fā)的頂點(diǎn)，根據(jù)該頂點(diǎn)獲得臉矩形的坐標(biāo)。另外，也可以根據(jù)膚色區(qū)域的檢測(cè)獲得臉矩形的坐標(biāo)。
<決定部>
決定部18a從由臉檢測(cè)部17a所檢測(cè)出的臉中決定成為對(duì)焦對(duì)象的臉。決定部18a把與所決定的臉有關(guān)的臉矩形的坐標(biāo)(例如表示臉矩形的中央的坐標(biāo))傳遞給測(cè)距部21。決定部18a包括中心決定部19a和臉決定部20a。以下，對(duì)構(gòu)成決定部18a的各功能部進(jìn)行說(shuō)明。
<中心決定部>
中心決定部19a在由臉檢測(cè)部17a所檢測(cè)出的臉是多個(gè)的情況下，求出所檢測(cè)出的多個(gè)臉的位置的中心。這里，假定臉矩形的中央點(diǎn)(以下稱為“臉點(diǎn)”)表示臉的位置。在所檢測(cè)出的臉是二個(gè)的情況下，中心決定部19a求出二個(gè)臉點(diǎn)的中點(diǎn)。并且，在所檢測(cè)出的臉是三個(gè)以上的情況下，中心決定部19a使用以下任一種方法求出中心。
<<外接多邊形法>>
在外接多邊形法中，中心決定部19a求出與多個(gè)臉點(diǎn)外接的多邊形的中心作為多個(gè)臉的位置的中心。所用的多邊形的頂點(diǎn)數(shù)無(wú)論是多少個(gè)均可以，也可以預(yù)先決定。這里，對(duì)頂點(diǎn)數(shù)是4點(diǎn)的情況進(jìn)行說(shuō)明。
圖9是用于對(duì)中心決定部19a根據(jù)外接多邊形法取得中心的處理進(jìn)行說(shuō)明的圖。中心決定部19a分別針對(duì)多個(gè)臉點(diǎn)的x坐標(biāo)和y坐標(biāo)，判斷最大值和最小值。中心決定部19a生成由與y軸平行的直線和與x軸平行的直線所生成的矩形(在正交坐標(biāo)系中，由與x軸和y軸平行且分別通過(guò)臉點(diǎn)坐標(biāo)的各坐標(biāo)成分的最大值和最小值的各條線的交點(diǎn)構(gòu)成頂點(diǎn)的矩形)，該與y軸平行的直線包含取x坐標(biāo)的最大值和最小值的臉點(diǎn)，該與x軸平行的直線包含取y坐標(biāo)的最大值和最小值的臉點(diǎn)。并且，中心決定部19a取得所生成的矩形的對(duì)角線的交點(diǎn)的坐標(biāo)作為中心坐標(biāo)。
<<重心法>>
圖10是用于對(duì)中心決定部19a根據(jù)重心法取得中心的處理進(jìn)行說(shuō)明的圖。在重心法中，中心決定部19a取得多個(gè)臉點(diǎn)的重心。具體地說(shuō)，中心決定部19a通過(guò)將各臉點(diǎn)的位置矢量的和除以臉點(diǎn)的數(shù)目來(lái)取得重心的位置矢量，根據(jù)該位置矢量取得重心坐標(biāo)。然后，中心決定部19a把所取得的重心坐標(biāo)取作中心坐標(biāo)。圖10示出了針對(duì)6個(gè)臉點(diǎn)，分別求出距某基準(zhǔn)點(diǎn)(例如利用各臉點(diǎn)的坐標(biāo)分量各自的最小值來(lái)表示的點(diǎn))的位置矢量，求出重心坐標(biāo)(Xg、Yg)的狀況。
<臉決定部>
臉決定部20a根據(jù)由中心決定部19a所取得的中心坐標(biāo)，決定可以根據(jù)哪個(gè)臉進(jìn)行對(duì)焦。圖11是用于對(duì)臉決定部20a的處理進(jìn)行說(shuō)明的圖。臉決定部20a根據(jù)規(guī)定基準(zhǔn)從位于距中心規(guī)定距離內(nèi)的臉中選擇臉。此時(shí)，臉決定部20a根據(jù)臉的大小、臉的位置、臉的朝向等中的哪一個(gè)基準(zhǔn)來(lái)決定臉均可。例如，臉決定部20a在位于距由中心決定部19a所取得的中心規(guī)定距離內(nèi)的臉中選擇距圖像(幀)的中央點(diǎn)(圖11中由符號(hào)“×”圖示)最近的臉(由粗線條圓圈圍起來(lái)的臉點(diǎn))。
在圖11所示的例中，針對(duì)在以距臉點(diǎn)的中心F0規(guī)定距離R為半徑的圓C1內(nèi)存在的二個(gè)臉點(diǎn)F1和F2，測(cè)定與圖像(幀)的中心點(diǎn)○的距離L1和L2。然后，由于L1＜L2，因而把臉點(diǎn)F1決定為對(duì)焦對(duì)象的臉點(diǎn)(即對(duì)焦對(duì)象的臉)。
臉決定部20a把所選擇的臉點(diǎn)的坐標(biāo)傳遞給測(cè)距部21。
<測(cè)距部>
測(cè)距部21取得用于對(duì)由對(duì)焦對(duì)象決定部16a的臉決定部20a所決定的臉對(duì)焦的焦點(diǎn)信息。此時(shí)，測(cè)距部21根據(jù)從臉決定部20a輸入的二維坐標(biāo)(臉點(diǎn)坐標(biāo))，確定用于進(jìn)行對(duì)焦的被攝物體。由測(cè)距部21所實(shí)施的測(cè)距可以應(yīng)用例如通過(guò)向臉的實(shí)物射出紅外線來(lái)實(shí)施的方式(有源方式)，也可以應(yīng)用這種有源方式以外的方式(例如無(wú)源方式)。
例如，測(cè)距部21構(gòu)成為通過(guò)向被攝物體射出紅外線等對(duì)到被攝物體的距離進(jìn)行測(cè)距，從而取得焦點(diǎn)信息。在該情況下，測(cè)距部21根據(jù)從臉決定部20a輸入的二維坐標(biāo)，決定射出紅外線等的方向。
當(dāng)測(cè)距部21取得焦點(diǎn)信息時(shí)，把所取得的焦點(diǎn)信息傳遞給攝像部14。
〔動(dòng)作例〕圖12是表示攝像裝置12a的動(dòng)作例的流程圖。以下，使用圖12對(duì)攝像裝置12a的動(dòng)作例進(jìn)行說(shuō)明。
當(dāng)攝像裝置12a接通電源時(shí)，攝像部14把聚焦鏡頭控制成成為基于規(guī)定的焦點(diǎn)信息的狀態(tài)。
當(dāng)輸入部13檢測(cè)到快門釋放按鈕被用戶半按下時(shí)(S16)，把輸入了自動(dòng)聚焦命令的情況通知給攝像部14。
攝像部14判斷從測(cè)距部21是否輸入了焦點(diǎn)信息。在未輸入焦點(diǎn)信息的情況下(S17-否)，攝像部14攝像對(duì)焦用圖像(S18)。攝像部14把所攝像的對(duì)焦用圖像傳遞給對(duì)焦對(duì)象決定部16a。
對(duì)焦對(duì)象決定部16a根據(jù)所輸入的對(duì)焦用圖像，決定成為進(jìn)行對(duì)焦的對(duì)象的臉(S19)。圖13是表示對(duì)焦對(duì)象決定部16a的動(dòng)作例(進(jìn)行對(duì)焦的臉的決定處理(S19)的例子)的流程圖。使用圖13對(duì)S19的處理進(jìn)行說(shuō)明。
首先，臉檢測(cè)部17a從所輸入的圖像中檢測(cè)人物的臉(S24)。臉檢測(cè)部17a把所檢測(cè)出的臉的圖像信息傳遞給決定部18a的中心決定部19a。
中心決定部19a調(diào)查由臉檢測(cè)部17a所檢測(cè)出的臉的數(shù)目。當(dāng)臉的數(shù)目小于1的情況下(S25＜1)，即為0的情況下，中心決定部19a把沒(méi)有臉的情況通知給臉決定部20。并且，臉決定部20a把圖像中央的二維坐標(biāo)傳遞給測(cè)距部21(S26)。
在臉的數(shù)目多于1的情況下(S25＞1)，即在檢測(cè)出多個(gè)臉的情況下，決定部18a執(zhí)行從多個(gè)臉中選擇一個(gè)臉的處理(S27)。圖14是示出從多個(gè)臉中選擇一個(gè)臉的處理(S27)的例子的流程圖。使用圖14對(duì)S27的處理進(jìn)行說(shuō)明。
中心決定部19a取得所檢測(cè)出的臉的臉點(diǎn)的中心坐標(biāo)(S29)。中心決定部19a把所取得的中心坐標(biāo)傳遞給臉決定部20a。然后，臉決定部20a根據(jù)所輸入的中心坐標(biāo)，采用例如使用圖11所說(shuō)明的方法選擇一個(gè)臉(S30)。
回到使用圖13的說(shuō)明。在從圖像中所檢測(cè)出的臉是一個(gè)的情況下(S25＝1)，或者在S27的處理后，臉決定部20a把一個(gè)臉的臉點(diǎn)的二維坐標(biāo)傳遞給測(cè)距部21(S28)。這里所說(shuō)的一個(gè)臉，在所檢測(cè)出的臉的數(shù)目是一個(gè)的情況下是該唯一被檢測(cè)出的臉，在S27的處理后的情況下是被選擇的臉。
回到使用圖12的說(shuō)明。在S19的處理后，測(cè)距部21根據(jù)從對(duì)焦對(duì)象決定部16a的臉決定部20a所傳遞的二維坐標(biāo)取得焦點(diǎn)信息(S20)。測(cè)距部21把所取得的焦點(diǎn)信息傳遞給攝像部14。在該處理后，再次執(zhí)行S17及之后的處理。
在S17中，在從測(cè)距部21到攝像部14有焦點(diǎn)信息的輸入的情況下(S17-是)，攝像部14根據(jù)所輸入的焦點(diǎn)信息控制聚焦鏡頭(S21)。即，攝像部14控制聚焦鏡頭，以便對(duì)由對(duì)焦對(duì)象決定部16a所決定的臉對(duì)焦。
在聚焦鏡頭的控制后，攝像部14進(jìn)行攝像(S22)。通過(guò)該攝像，攝像了對(duì)由對(duì)焦對(duì)象決定部16a所決定的臉進(jìn)行了對(duì)焦的圖像。然后，圖像存儲(chǔ)部15存儲(chǔ)由攝像部14所攝像的圖像的數(shù)據(jù)(S23)。
〔作用/效果〕根據(jù)作為本發(fā)明的第二實(shí)施方式的攝像裝置12a，檢測(cè)圖像中存在的人臉，自動(dòng)把所檢測(cè)出的臉中的任意一個(gè)決定為對(duì)焦對(duì)象。因此，用戶沒(méi)有必要使要成為對(duì)焦對(duì)象的臉位于圖像(幀)的中心。換句話說(shuō)，用戶沒(méi)有必要把要對(duì)焦的臉?lè)胖迷趲闹行摹?br> 并且，根據(jù)作為本發(fā)明的第二實(shí)施方式的攝像裝置12a，在圖像中存在多個(gè)臉的情況下，根據(jù)圖像中存在的多個(gè)臉的位置的中心，決定成為對(duì)焦對(duì)象的臉。因此，即使在圖像中存在多個(gè)臉的情況下，也能決定應(yīng)成為對(duì)焦對(duì)象的一個(gè)臉。并且，可以對(duì)位于集合中的多個(gè)臉的中央附近的臉進(jìn)行對(duì)焦。
〔變形例〕臉決定部20a可以構(gòu)成為根據(jù)規(guī)定基準(zhǔn)，從位于距中心規(guī)定距離內(nèi)的且朝向正面的臉中選擇臉。此時(shí)，臉決定部20a使用例如以下公知文獻(xiàn)所描述的技術(shù)來(lái)判斷臉是否朝向正面。
H.Schneiderman，T.Kanade.“A Statistical Method for 3DObject Detection Applied to Faces and Cars.”IEEE Conference onComputer Vision and Pattern Recognition，2000.
并且，在上述描述中對(duì)中心決定部19a把臉的位置作為點(diǎn)來(lái)獲取的Computer Vision and Pattern Recognition，2000.
并且，在上述描述中對(duì)中心決定部19a把臉的位置作為點(diǎn)來(lái)獲取的結(jié)構(gòu)進(jìn)行了說(shuō)明，然而中心決定部19a也可以構(gòu)成為把臉的位置作為區(qū)域來(lái)獲取。
并且，也可以構(gòu)成為由臉決定部20a所決定的臉通過(guò)未作圖示的顯示部，在該臉的周圍顯示框。通過(guò)這樣構(gòu)成，用戶可知道哪個(gè)臉被決定為對(duì)焦對(duì)象。并且，可以設(shè)計(jì)成在用戶不滿意對(duì)這樣被顯示的臉進(jìn)行對(duì)焦的情況下，通過(guò)使用輸入部13輸入命令，可以通過(guò)手動(dòng)操作以便對(duì)其它臉對(duì)焦。
并且，臉決定部20a可以構(gòu)成為根據(jù)規(guī)定基準(zhǔn)，從位于距中心規(guī)定距離內(nèi)、且其中的規(guī)定大小以上的臉中選擇臉。
并且，攝像裝置12a也可以構(gòu)成為根據(jù)由決定部18a所決定的臉，執(zhí)行曝光控制。這點(diǎn)在后述的第二至第六實(shí)施方式中也相同。
并且，決定部18a也可以將由臉檢測(cè)部17a所檢測(cè)出的各臉根據(jù)其x坐標(biāo)或y坐標(biāo)進(jìn)行排序，把與所檢測(cè)出的臉的數(shù)目的中間值的順序相當(dāng)?shù)哪槢Q定為成為對(duì)象的臉。
并且，決定部18a也可以構(gòu)成為根據(jù)規(guī)定基準(zhǔn)從由臉檢測(cè)部17a所檢測(cè)出的臉中決定臉。規(guī)定基準(zhǔn)例如可以是基于臉的大小的基準(zhǔn)(例如決定最大的臉的基準(zhǔn)，決定中間大小的臉的基準(zhǔn)，決定最小的臉的基準(zhǔn))，可以是基于圖像中的臉的位置的基準(zhǔn)(例如距圖像中央最近的臉的基準(zhǔn))，可以是基于臉的朝向的基準(zhǔn)(例如朝向正面的臉的基準(zhǔn))，可以是基于類似于臉的基準(zhǔn)(例如決定表示類似于臉的程度的量為最大的臉的基準(zhǔn))，可以是基于根據(jù)臉而推測(cè)的性別的基準(zhǔn)(例如決定被推測(cè)為男性的臉的基準(zhǔn)，決定被推測(cè)為女性的臉的基準(zhǔn))，可以是基于根據(jù)臉而推測(cè)的年代的基準(zhǔn)(決定被推測(cè)為最年輕的年代的臉的基準(zhǔn)，決定被推測(cè)為中間年代的臉的基準(zhǔn))，是其它哪種基準(zhǔn)均可。并且，規(guī)定基準(zhǔn)也可以是將上述基準(zhǔn)適當(dāng)?shù)剡M(jìn)行多個(gè)組合的基準(zhǔn)。
并且，在上述說(shuō)明中，前提是攝像部14構(gòu)成為對(duì)一個(gè)被攝物體進(jìn)行對(duì)焦。因此，對(duì)焦對(duì)象決定部16a把一個(gè)臉的坐標(biāo)傳遞給測(cè)距部21。然為這種攝像部14的例子，有特開(kāi)平11-295826所描述的裝置。在該情況下，決定部5a的臉決定部20a根據(jù)規(guī)定基準(zhǔn)對(duì)臉賦予優(yōu)先順序，根據(jù)該優(yōu)先順序選擇規(guī)定數(shù)目的臉。例如，臉決定部20a可以構(gòu)成為按照距由中心決定部19a所決定的中心從近到遠(yuǎn)的順序選擇規(guī)定數(shù)目的臉。在所選擇的臉的數(shù)目未達(dá)到規(guī)定數(shù)的情況下，使用其它哪種方法來(lái)取得傳遞給測(cè)距部21的坐標(biāo)均可。
下面，對(duì)具有對(duì)焦對(duì)象決定部16b的攝像裝置12b進(jìn)行說(shuō)明。以下，針對(duì)攝像裝置12b和對(duì)焦對(duì)象決定部16b，說(shuō)明與第二實(shí)施方式中的攝像裝置12a和對(duì)焦對(duì)象決定部16a的不同點(diǎn)。
〔系統(tǒng)結(jié)構(gòu)〕圖15是示出攝像裝置12b的功能塊的圖。取代對(duì)焦對(duì)象決定部16a，攝像裝置12b具有對(duì)焦對(duì)象決定部16b，這點(diǎn)與第二實(shí)施方式中的攝像裝置12a不同。因此，以下，省略對(duì)攝像裝置12b的輸入部13、攝像部14、圖像存儲(chǔ)部15以及測(cè)距部21的說(shuō)明。
<對(duì)焦對(duì)象決定部>
對(duì)焦對(duì)象決定部16b包括臉檢測(cè)部17a、分類部22、集合決定部23以及決定部18b。以下，對(duì)構(gòu)成對(duì)焦對(duì)象決定部16b的各功能部進(jìn)行說(shuō)明。然而，由于對(duì)焦對(duì)象決定部16b所包括的臉檢測(cè)部17a具有與第二實(shí)施方式中的對(duì)焦對(duì)象決定部16a所包括的臉檢測(cè)部17a相同的結(jié)構(gòu)，因而省略其說(shuō)明。
<分類部>
分類部22把在臉檢測(cè)部17a中所檢測(cè)出的臉的臉點(diǎn)分類為多個(gè)集合。該分類可以使用最鄰近法等任何方法。分類部22根據(jù)各臉點(diǎn)的位置執(zhí)行分類。分類部22的分類結(jié)果是將各臉點(diǎn)分類成使得圖像中的位置相近的臉點(diǎn)被包含在同一集合內(nèi)。
圖16是示出分類部22的處理例的圖。如圖16所示，在存在多個(gè)臉點(diǎn)的集體的情況下，把每一個(gè)集體分類為一個(gè)集合。
<集合決定部>
集合決定部23決定在分類部22中分類的多個(gè)集合中的用于決定成為對(duì)焦對(duì)象的臉的集合(即包含成為對(duì)焦對(duì)象的臉的集合以下稱為“選擇集合”)。即，傳遞給測(cè)距部21的臉點(diǎn)坐標(biāo)是由集合決定部23所決定的選擇集合內(nèi)所包含的臉的臉點(diǎn)坐標(biāo)。
集合決定部23根據(jù)各集合內(nèi)所包含的臉的數(shù)目、與各集合內(nèi)所包含的臉有關(guān)的特征量等哪種基準(zhǔn)來(lái)決定選擇集合均可。例如，集合決定部23把各集合中包含最多的臉的集合決定為選擇集合。并且，例如，集合決定部23把與各集合內(nèi)所包含的臉有關(guān)的特征量的和最大的集合決定為選擇集合。與臉有關(guān)的特征量可以根據(jù)例如臉的大小、臉的朝向、臉的數(shù)目等來(lái)取得。并且，與臉有關(guān)的特征量可以是表示人臉程度的值。人臉程度例如可以根據(jù)距用于劃分某圖像是否是人臉的識(shí)別邊界線的距離來(lái)給出。人臉程度也可以使用在臉檢測(cè)部17a的臉檢測(cè)處理時(shí)所取得的值來(lái)表示。
使用圖16對(duì)集合決定部23的處理例進(jìn)行說(shuō)明。根據(jù)規(guī)定基準(zhǔn)(這里是集合內(nèi)所包含的臉點(diǎn)數(shù)多的基準(zhǔn))，通過(guò)集合決定部23從通過(guò)分類部22的處理所生成的多個(gè)集合(圖16中為三個(gè)集合)中選擇左上的集合作為選擇集合。
<決定部>
決定部18b不是根據(jù)由攝像部14所攝像的圖像整體內(nèi)所包含的臉，而是根據(jù)由集合決定部23所決定的選擇集合內(nèi)所包含的臉進(jìn)行處理(把選擇集合作為臉的決定的母集合)，這點(diǎn)與決定部18a不同。決定部18b除了上述點(diǎn)以外，進(jìn)行與決定部18a相同的處理。
圖17是示出決定部18b的處理例的圖。通過(guò)集合決定部23決定的選擇集合中，通過(guò)決定部18b的中心決定部19b取得臉點(diǎn)的中心。然后，根據(jù)所取得的中心，通過(guò)臉決定部20b，根據(jù)規(guī)定基準(zhǔn)(這里是距圖像(幀)的中央點(diǎn)近的基準(zhǔn))選擇一個(gè)臉點(diǎn)(由粗線條圓圈圍起來(lái)的臉點(diǎn))。
〔動(dòng)作例〕下面，對(duì)第三實(shí)施方式中的攝像裝置12b的動(dòng)作例進(jìn)行說(shuō)明。攝像裝置12b的動(dòng)作除了S27的處理內(nèi)容以外，與第二實(shí)施方式中的攝像裝置12a的動(dòng)作相同。因此，關(guān)于攝像裝置12b的動(dòng)作例，僅對(duì)S27的處理內(nèi)容進(jìn)行說(shuō)明。
圖18是示出第三實(shí)施方式中的對(duì)焦對(duì)象決定部16b的處理的一部分，即圖13中的S27的處理內(nèi)容的流程圖。在第三實(shí)施方式中，在S27中，執(zhí)行該圖18所示的處理來(lái)取代在第二實(shí)施方式中所說(shuō)明的圖14的處理。
當(dāng)開(kāi)始S27的處理時(shí)，分類部22把由臉檢測(cè)部17a所檢測(cè)出的多個(gè)臉點(diǎn)分類為多個(gè)集合(S31)。然后，集合決定部23從由分類部22所生成的多個(gè)集合中選擇一個(gè)選擇集合(S32)。
中心決定部19b根據(jù)在S32中所選擇的選擇集合內(nèi)所包含的臉，取得該選擇集合內(nèi)所包含的多個(gè)臉點(diǎn)的中心(S33)。然后，臉決定部20b根據(jù)在S33中所取得的中心，選擇一個(gè)臉作為成為對(duì)焦對(duì)象的臉(S34)。
〔作用/效果〕根據(jù)第三實(shí)施方式中的攝像裝置12b，在圖像中存在多個(gè)集體的情況下，可以僅根據(jù)其中一個(gè)集體內(nèi)所包含的人，決定成為對(duì)焦對(duì)象的臉。在用戶攝像某集體的情況下，多數(shù)情況是該集體的人集中在一個(gè)場(chǎng)所。此時(shí)，即使不屬于該集體的人(單獨(dú)人、單獨(dú)人的零散分布、其它人的集體)存在于幀內(nèi)，也期望從屬于用戶想要攝像的集體的人中選擇成為對(duì)焦對(duì)象的被攝物體。根據(jù)第三實(shí)施方式中的攝像裝置12b，可以實(shí)現(xiàn)用戶的這種期望。即，在第三實(shí)施方式中，匯集在幀內(nèi)的數(shù)量最多的人的集體(集合)被選擇為攝像對(duì)象的集體(選擇集合)，實(shí)現(xiàn)以屬于該集體的任何人為基準(zhǔn)的對(duì)焦。另外，如后面的變形例欄所述，可以構(gòu)成為在由集合決定部23所選擇的選擇集合不是用戶期望的集合的情況下，可由用戶手動(dòng)選擇任意集合作為選擇集合。
圖19是用于表示由攝像裝置12b所取得的效果的圖。如圖19所示，即使在存在多個(gè)集體的情況下，也僅根據(jù)例如位于圖像左下方的集體所包含的臉的位置，選擇距該集體的中心近的臉(由粗線條矩形圍起來(lái)的臉)。
〔變形例〕
集合決定部23也可以構(gòu)成為根據(jù)各集合內(nèi)所包含的臉的臉點(diǎn)的中心來(lái)決定選擇集合。在該情況下，中心決定部19b針對(duì)由分類部22所生成的各集合內(nèi)所包含的臉點(diǎn)取得中心。集合決定部23根據(jù)由中心決定部19b所取得的各集合的中心，決定選擇集合。例如，集合決定部23把集合內(nèi)所包含的臉點(diǎn)的中心坐標(biāo)距圖像的中央點(diǎn)最近的集合決定為選擇集合。并且，臉決定部20b根據(jù)選擇集合的中心，決定成為對(duì)焦對(duì)象的臉。
并且，集合決定部23也可以構(gòu)成為根據(jù)在各集合中被暫定決定為成為對(duì)焦對(duì)象的臉的臉的臉點(diǎn)，決定選擇集合。在該情況下，決定部18b針對(duì)由分類部22所生成的各集合，僅根據(jù)該集合內(nèi)所包含的臉，暫定決定成為對(duì)焦對(duì)象的臉。并且，集合決定部23根據(jù)由決定部18b所取得的各集合中的臉點(diǎn)，決定選擇集合。例如，集合決定部23把集合內(nèi)所包含的被暫定決定的臉點(diǎn)的坐標(biāo)距圖像的中央點(diǎn)最近的集合決定為選擇集合。即，實(shí)質(zhì)上集合決定部23最終決定成為對(duì)焦對(duì)象的臉。在該情況下，集合決定部23也可以構(gòu)成為把所決定的臉的臉點(diǎn)坐標(biāo)傳遞給測(cè)距部21。
并且，在這樣構(gòu)成的情況下，也可以構(gòu)成為在由集合決定部23所選擇的集合不是用戶期望的集合的情況下(集合的選擇結(jié)果通過(guò)未作圖示的顯示部被提示給用戶)，由用戶使用輸入部13選擇其它集合作為選擇集合。在該情況下，可以構(gòu)成為每當(dāng)輸入部13被操作時(shí)，由用戶選擇的集合就根據(jù)優(yōu)先順序而移位。該優(yōu)先順序是基于由集合決定部23所判斷的規(guī)定基準(zhǔn)的順序。
如上所述，針對(duì)每個(gè)集合暫定決定對(duì)焦對(duì)象的臉(有時(shí)也稱為“對(duì)象臉”)，從暫定的對(duì)象臉中決定最終對(duì)象臉，把該對(duì)象臉提示給用戶，在與用戶的意圖不一致的情況下，可以把對(duì)象臉變更為被暫定決定的其它對(duì)象臉中的任意一個(gè)。
取代上述構(gòu)成，可以構(gòu)成為在決定部18b從暫定對(duì)象臉中決定最終對(duì)象臉之前，把暫定對(duì)象臉提示給用戶，由用戶從其中選擇最終對(duì)象臉。暫定對(duì)象臉通過(guò)未作圖示的顯示部，在該臉的周圍顯示框來(lái)提示給用戶。
或者，可以在決定對(duì)象臉之前，把分類部22的集合分類結(jié)果通過(guò)未作圖示的顯示部提示給用戶，由用戶決定選擇集合，決定部18b從由用戶所決定的選擇集合中選擇對(duì)象臉。在該情況下，集合決定部23不進(jìn)行選擇集合的決定處理，而僅進(jìn)行把用戶的選擇集合的決定結(jié)果傳遞給決定部18b的動(dòng)作。這樣，可以通過(guò)選項(xiàng)操作來(lái)打開(kāi)/關(guān)閉集合決定部23的決定動(dòng)作。
下面，對(duì)具有對(duì)焦對(duì)象決定部16c的攝像裝置12c進(jìn)行說(shuō)明。以下，針對(duì)攝像裝置12c和對(duì)焦對(duì)象決定部16c，說(shuō)明與第三實(shí)施方式中的攝像裝置12b和對(duì)焦對(duì)象決定部16b的不同點(diǎn)。
〔系統(tǒng)結(jié)構(gòu)〕圖20是表示攝像裝置12c的功能塊的圖。攝像裝置12c具有對(duì)焦對(duì)象決定部16c來(lái)取代對(duì)焦對(duì)象決定部16b，這點(diǎn)與第三實(shí)施方式中的攝像裝置12b不同。因此，以下，省略對(duì)攝像裝置12c的輸入部13、攝像部14、圖像存儲(chǔ)部15以及測(cè)距部21的說(shuō)明。
<對(duì)焦對(duì)象決定部>
對(duì)焦對(duì)象決定部16c包括決定部18c來(lái)取代決定部18b，這點(diǎn)與第三實(shí)施方式中的對(duì)焦對(duì)象決定部16b不同。因此，省略對(duì)臉檢測(cè)部17a、分類部22以及集合決定部23的說(shuō)明。
<決定部>
決定部18c根據(jù)由集合決定部23所決定的集合(選擇集合)內(nèi)所包含的臉進(jìn)行處理。決定部18c根據(jù)該臉的大小，決定成為對(duì)焦對(duì)象的臉。決定部18c把例如選擇集合內(nèi)所包含的臉中的最大的臉決定為成為對(duì)焦對(duì)象的臉?；蛘撸瑳Q定部18c也可以把例如由集合決定部23所決定的選擇集合內(nèi)所包含的臉中的具有中間大小的臉決定為成為對(duì)焦對(duì)象的臉。在以下說(shuō)明中，設(shè)決定部18c把最大的臉決定為成為對(duì)焦對(duì)象的臉來(lái)進(jìn)行說(shuō)明。
〔動(dòng)作例〕下面，對(duì)第四實(shí)施方式中的攝像裝置12c的動(dòng)作例進(jìn)行說(shuō)明。攝像裝置12c的動(dòng)作除了S27的處理內(nèi)容以外，與第三實(shí)施方式中的攝像裝置12b的動(dòng)作相同。因此，關(guān)于攝像裝置12c的動(dòng)作例，僅對(duì)S27的處理內(nèi)容進(jìn)行說(shuō)明。
圖21是示出第四實(shí)施方式中的對(duì)焦對(duì)象決定部16c的處理的一部分，即圖13中的S27的處理內(nèi)容的流程圖。
當(dāng)開(kāi)始S27的處理時(shí)，分類部22把由臉檢測(cè)部17a所檢測(cè)出的多個(gè)臉點(diǎn)分類為多個(gè)集合(S31)。然后，集合決定部23從由分類部22所生成的多個(gè)集合中選擇一個(gè)選擇集合(S32)。并且，決定部18c根據(jù)各臉的大小，從在S32的處理中所選擇的選擇集合內(nèi)所包含的臉中選擇一個(gè)臉作為成為對(duì)焦對(duì)象的臉(S35)。
〔作用/效果〕根據(jù)第四實(shí)施方式中的攝像裝置12c，與第三實(shí)施方式中的攝像裝置12b一樣，在圖像中存在多個(gè)集體的情況下，可以僅根據(jù)其中一個(gè)集合內(nèi)所包含的人，決定成為對(duì)焦對(duì)象的臉。
并且，根據(jù)第四實(shí)施方式中的攝像裝置12c，從所選擇的一個(gè)集合內(nèi)所包含的臉中，根據(jù)該臉的大小，選擇成為對(duì)焦對(duì)象的臉。有時(shí)，對(duì)于用戶而言最想關(guān)注的臉是距攝像裝置最近的臉。并且，距攝像裝置最近的臉在攝像時(shí)是最大的臉的可能性高。因此，根據(jù)攝像裝置12c，從所選擇的一個(gè)集合內(nèi)所包含的臉中，根據(jù)臉的大小選擇被設(shè)想為對(duì)用戶而言最想關(guān)注的臉。因此，在該情況下，用戶沒(méi)有必要手動(dòng)地對(duì)想要關(guān)注的臉對(duì)焦。至少，沒(méi)有必要像以往技術(shù)那樣，把最想關(guān)注的臉?lè)胖迷趲闹行幕蚱涓浇?br> 〔變形例〕決定部18c也可以構(gòu)成為根據(jù)與由集合決定部23所決定的集合內(nèi)所包含的各臉有關(guān)的特征量來(lái)進(jìn)行處理。決定部18c取得與各臉有關(guān)的特征量。決定部18c構(gòu)成為例如根據(jù)臉的大小、臉的朝向等，取得與各臉有關(guān)的特征量。另外，決定部18c構(gòu)成為例如針對(duì)各臉，取得表示類似于臉的程度的量作為特征量?！氨硎绢愃朴谀樀某潭鹊牧俊笔褂美缭谀槞z測(cè)部17a的臉檢測(cè)處理時(shí)所取得的值來(lái)表示。具體地說(shuō)，當(dāng)臉檢測(cè)部17a構(gòu)成為在判斷某區(qū)域內(nèi)是否包含有臉時(shí)算出與該區(qū)域內(nèi)的圖像的類似于臉有關(guān)的值的情況下，把與該類似于臉有關(guān)的值用作特征量。
下面，對(duì)具有對(duì)焦對(duì)象決定部16d的攝像裝置12d進(jìn)行說(shuō)明。以下，針對(duì)攝像裝置12d和對(duì)焦對(duì)象決定部16d，說(shuō)明與第二實(shí)施方式中的攝像裝置12a和對(duì)焦對(duì)象決定部16a的不同點(diǎn)。
〔系統(tǒng)結(jié)構(gòu)〕圖22是表示攝像裝置12d的功能塊的圖。攝像裝置12d具有對(duì)焦對(duì)象決定部16d來(lái)取代對(duì)焦對(duì)象決定部16a，這點(diǎn)與第二實(shí)施方式中的攝像裝置12a不同。因此，以下，省略對(duì)攝像裝置12d的輸入部13、攝像部14、圖像存儲(chǔ)部15以及測(cè)距部21的說(shuō)明。
<對(duì)焦對(duì)象決定部>
對(duì)焦對(duì)象決定部16d包括臉檢測(cè)部17d、區(qū)決定部24以及決定部18d。以下，對(duì)構(gòu)成對(duì)焦對(duì)象決定部16d的各功能部進(jìn)行說(shuō)明。
<臉檢測(cè)部>
臉檢測(cè)部17d在從對(duì)焦用圖像中檢測(cè)臉區(qū)域時(shí)，針對(duì)預(yù)先決定的多個(gè)區(qū)的每一個(gè)檢測(cè)臉區(qū)域，這點(diǎn)與第二實(shí)施方式中的臉檢測(cè)部17a不同。圖23是表示被分為多個(gè)區(qū)的對(duì)焦用圖像的例子的圖。如圖23所示，對(duì)焦用圖像被分為多個(gè)區(qū)(在圖23中，矩形圖像(幀)被與其縱或橫軸平行且通過(guò)圖像的中央點(diǎn)的二條線段分為4個(gè)區(qū)，然而分成多少個(gè)區(qū)均可)。例如由臉檢測(cè)部17d存儲(chǔ)將對(duì)焦用圖像分為什么樣的區(qū)。
臉檢測(cè)部17d針對(duì)多個(gè)區(qū)的每個(gè)區(qū)檢測(cè)臉。然后，臉檢測(cè)部17d針對(duì)每一區(qū)把檢測(cè)結(jié)果傳遞給區(qū)決定部24。
<區(qū)決定部>
區(qū)決定部24選擇預(yù)先決定的多個(gè)區(qū)中的用于決定成為對(duì)焦對(duì)象的臉的區(qū)(即，包含成為對(duì)焦對(duì)象的臉的區(qū)以下稱為“選擇區(qū)”)。即，被傳遞給測(cè)距部21的坐標(biāo)是在由區(qū)決定部24所決定的選擇區(qū)中檢測(cè)出的臉的臉點(diǎn)坐標(biāo)。
區(qū)決定部24根據(jù)在各區(qū)中所檢測(cè)出的臉的數(shù)目、與在區(qū)中所檢測(cè)出的臉有關(guān)的特征量等哪個(gè)基準(zhǔn)來(lái)決定選擇區(qū)均可。例如，區(qū)決定部24把在各區(qū)中檢測(cè)出最多的臉的區(qū)決定為選擇區(qū)。在這樣構(gòu)成區(qū)決定部24的情況下，在圖23所示的狀況下，左上部的區(qū)被區(qū)決定部24決定為選擇區(qū)。
并且，例如，區(qū)決定部24也可以把與各區(qū)內(nèi)所包含的臉有關(guān)的特征量的和為最大的區(qū)決定為選擇區(qū)。作為與臉有關(guān)的特征量的計(jì)算方法，可以應(yīng)用與在上述實(shí)施方式中所說(shuō)明的方法相同的方法。
<決定部>
決定部18d不是根據(jù)由攝像部14所攝像的圖像整體內(nèi)所包含的臉，而是根據(jù)由區(qū)決定部24所決定的選擇區(qū)內(nèi)所包含的臉來(lái)進(jìn)行處理，這點(diǎn)與決定部18a不同。決定部18d除了上述點(diǎn)以外，進(jìn)行與決定部18a相同的處理。
圖24是表示決定部18d的處理例的圖。在由區(qū)決定部24所選擇的左上部的區(qū)(選擇區(qū))中，取得臉點(diǎn)的中心。然后，根據(jù)所取得的中心，按照規(guī)定基準(zhǔn)(這里是距圖像(幀)的中央點(diǎn)近的基準(zhǔn))，選擇一個(gè)臉點(diǎn)(由粗線條圓圈圍起來(lái)的臉點(diǎn))。
〔動(dòng)作例〕下面，對(duì)第五實(shí)施方式中的攝像裝置12d的動(dòng)作例進(jìn)行說(shuō)明。攝像裝置12d的動(dòng)作除了S19的處理內(nèi)容以外，與第二實(shí)施方式中的攝像裝置12a的動(dòng)作相同。因此，關(guān)于攝像裝置12d的動(dòng)作例，僅對(duì)S19的處理內(nèi)容進(jìn)行說(shuō)明。
圖25是示出第五實(shí)施方式中的對(duì)焦對(duì)象決定部16d的處理的一部分，即圖12中的S19的處理內(nèi)容的流程圖。這樣，在第五實(shí)施方式中，在S19中，取代在第二實(shí)施方式中所應(yīng)用的圖13所示的處理，而執(zhí)行圖25所示的處理。
當(dāng)開(kāi)始S19的處理時(shí)，臉檢測(cè)部17d針對(duì)每個(gè)區(qū)檢測(cè)臉(S36)。然后，區(qū)決定部24調(diào)查檢測(cè)出臉的區(qū)的數(shù)目。在檢測(cè)出臉的區(qū)的數(shù)目少于1的情況下(S37＜1)，即是0的情況下，區(qū)決定部24把沒(méi)有臉的情況通知給決定部18d。然后，決定部18d把圖像(幀)中央的二維坐標(biāo)傳遞給測(cè)距部21(S38)。
在檢測(cè)出臉的區(qū)的數(shù)目多于1的情況下(S37＞1)，區(qū)決定部24從檢測(cè)出臉的多個(gè)區(qū)中選擇一個(gè)選擇區(qū)(S39)。在檢測(cè)出臉的區(qū)是一個(gè)的情況下(S37＝1)，或者在S39的處理后，決定部18d調(diào)查由區(qū)決定部24所選擇的選擇區(qū)內(nèi)所包含的臉的數(shù)目。在臉的數(shù)目多于1的情況下(S40＞1)，即在該選擇區(qū)內(nèi)檢測(cè)出多個(gè)臉的情況下，決定部18d從該多個(gè)臉中選擇一個(gè)臉(S41)。S41的處理是與圖14所示的流程相同的處理。然而，處理對(duì)象不是圖像整體而是選擇區(qū)，這點(diǎn)與第二實(shí)施方式不同。
回到使用圖25的說(shuō)明。在所檢測(cè)出的臉是一個(gè)的情況下(S40＝1)，或者在S41的處理后，決定部18d把一個(gè)臉的臉點(diǎn)的二維坐標(biāo)傳遞給測(cè)距部21(S42)。這里所說(shuō)的一個(gè)臉，在所檢測(cè)出的臉的數(shù)目是一個(gè)的情況下是該唯一被檢測(cè)出的臉，在S41的處理后的情況下是被選擇的臉。在該處理后，實(shí)施圖12中的S20及之后的處理。
〔作用/效果〕根據(jù)第五實(shí)施方式中的攝像裝置12d，把對(duì)焦用圖像分割成多個(gè)區(qū)，從多個(gè)區(qū)中選擇包含成為對(duì)焦對(duì)象的臉的一個(gè)選擇區(qū)。并且，從該一個(gè)選擇區(qū)中選擇成為對(duì)焦對(duì)象的臉。因此，在第五實(shí)施方式中的攝像裝置12d中，可類似地取得與第三實(shí)施方式相同的效果。具體地說(shuō)，在圖像中存在多個(gè)集體的情況下，可使用區(qū)粗略劃分這些集體。并且，根據(jù)按照規(guī)定基準(zhǔn)所選擇的一個(gè)選擇區(qū)內(nèi)所包含的集體或集體的一部分的臉，選擇成為對(duì)焦對(duì)象的臉。
并且，在第五實(shí)施方式中的攝像裝置12d中，與第三實(shí)施方式中的攝像裝置12b不同，不執(zhí)行分類處理。因此，在第五實(shí)施方式中的攝像裝置12d中，與第三實(shí)施方式中的攝像裝置12b相比可進(jìn)行快速處理。
〔變形例〕決定部18d也可以與第三實(shí)施方式中的決定部18b相同。在該情況下，決定部18d構(gòu)成為不是根據(jù)由集合決定部23所決定的選擇集合內(nèi)所包含的臉，而是根據(jù)由區(qū)決定部24所決定的選擇區(qū)內(nèi)所包含的臉進(jìn)行處理，這點(diǎn)與決定部18b不同。即，構(gòu)成為進(jìn)行不是以圖像整體而是以選擇區(qū)為對(duì)象的集合的分類和選擇集合的決定等。在該情況下，決定部18d構(gòu)成為除了上述點(diǎn)以外，進(jìn)行與決定部18b相同的處理。
通過(guò)這樣構(gòu)成，沒(méi)有必要進(jìn)行以畫面內(nèi)所包含的所有臉為對(duì)象的分類。即，只要僅對(duì)所選擇的區(qū)內(nèi)所包含的臉執(zhí)行分類即可。因此，在畫面內(nèi)包含有較多個(gè)集體的情況下，與第三實(shí)施方式中的攝像裝置12b相比可進(jìn)行快速處理。并且，與通常的第五實(shí)施方式中的攝像裝置12d相比，可更準(zhǔn)確地選擇包含成為對(duì)焦對(duì)象的臉的集合和成為對(duì)焦對(duì)象的臉。
下面，對(duì)具有對(duì)焦對(duì)象決定部16e的攝像裝置12e進(jìn)行說(shuō)明。以下，針對(duì)攝像裝置12e和對(duì)焦對(duì)象決定部16e，說(shuō)明與第二實(shí)施方式中的攝像裝置12a和對(duì)焦對(duì)象決定部16a的不同點(diǎn)。
〔系統(tǒng)結(jié)構(gòu)〕圖26是表示攝像裝置12e的功能區(qū)的圖。攝像裝置12e具有對(duì)焦對(duì)象決定部16e來(lái)取代對(duì)焦對(duì)象決定部16a，這點(diǎn)與第二實(shí)施方式中的攝像裝置12a不同。因此，以下，省略對(duì)攝像裝置12e的輸入部13、攝像部14、圖像存儲(chǔ)部15以及測(cè)距部21的說(shuō)明。
<對(duì)焦對(duì)象決定部>
對(duì)焦對(duì)象決定部16e包括臉檢測(cè)部17a、最大臉選擇部25、候選選擇部26以及決定部18e。以下，對(duì)構(gòu)成對(duì)焦對(duì)象決定部16e的各功能部進(jìn)行說(shuō)明。其中，對(duì)焦對(duì)象決定部16e所包括的臉檢測(cè)部17a與第二實(shí)施方式中的對(duì)焦對(duì)象決定部16a所包括的臉檢測(cè)部17a結(jié)構(gòu)相同，因而省略其說(shuō)明。
<最大臉選擇部>
最大臉選擇部25從由臉檢測(cè)部17a所檢測(cè)出的多個(gè)臉中選擇最大的臉(最大臉)。在臉檢測(cè)部17a中使用臉矩形的情況下，最大臉選擇部25根據(jù)該臉矩形的大小進(jìn)行選擇。并且，在臉檢測(cè)部17a中執(zhí)行圖形匹配的情況下，最大臉選擇部25根據(jù)該圖形的大小進(jìn)行選擇。最大臉選擇部25構(gòu)成為使用其它哪種方法來(lái)選擇最大臉均可。最大臉選擇部25把關(guān)于所選擇的最大臉的信息(例如臉點(diǎn)的坐標(biāo)、臉的大小)傳遞給候選選擇部26。
圖27是示出最大臉選擇部25的處理例的圖。在圖27中，各臉點(diǎn)的大小表示與各臉點(diǎn)對(duì)應(yīng)的臉的大小。通過(guò)最大臉選擇部25的處理，把由粗框圍起來(lái)的臉點(diǎn)選擇為最大臉。
<候選選擇部>
候選選擇部26根據(jù)由最大臉選擇部25所選擇的最大臉的大小，選擇成為對(duì)焦對(duì)象的臉的候選。換句話說(shuō)，候選選擇部26決定成為決定部18e的處理對(duì)象的臉。
候選選擇部26把由最大臉選擇部25所選擇的最大臉、和具有基于該最大臉的大小的規(guī)定范圍內(nèi)的大小的其它臉選擇為對(duì)象臉的候選。規(guī)定范圍內(nèi)的大小表示比最大臉小例如幾個(gè)百分比～幾十百分比的大小。另外，規(guī)定范圍內(nèi)的大小也表示例如為最大臉的一半以上的大小或2/3以上的大小。
圖28是示出候選選擇部26的處理例的圖。在圖28中，小的空心圓表示沒(méi)有被候選選擇部26選擇的臉點(diǎn)。涂黑的圓表示由候選選擇部26所選擇的其它的臉的臉點(diǎn)。另外，由粗框包圍的臉點(diǎn)表示由決定部18e所選擇的最大臉的臉點(diǎn)。
<決定部>
決定部18e不是根據(jù)由攝像部14所攝像的圖像整體內(nèi)所包含的臉，而是根據(jù)由候選選擇部26所選擇的候選內(nèi)所包含的臉進(jìn)行處理，這點(diǎn)與決定部18a不同。決定部18e除了上述點(diǎn)以外，進(jìn)行與決定部18a相同的處理。
使用圖28對(duì)決定部18e的處理進(jìn)行說(shuō)明。決定部18e根據(jù)由候選選擇部26所選擇的三個(gè)臉點(diǎn)，選擇成為對(duì)焦對(duì)象的臉。此時(shí)，決定部18e的中心決定部19e取得該三個(gè)臉點(diǎn)的中心(斜線的圓)。并且，決定部18e的臉決定部20e根據(jù)該中心，按照規(guī)定基準(zhǔn)(這里是距圖像(幀)的中心(中央點(diǎn))最近的基準(zhǔn))選擇一個(gè)臉點(diǎn)(這里是由粗框圍起來(lái)的臉點(diǎn)(最大臉))。
〔動(dòng)作例〕下面，對(duì)第六實(shí)施方式中的攝像裝置12e的動(dòng)作例進(jìn)行說(shuō)明。攝像裝置12e的動(dòng)作除了S27的處理內(nèi)容以外，與第二實(shí)施方式中的攝像裝置12a的動(dòng)作相同。因此，關(guān)于攝像裝置12e的動(dòng)作例，僅對(duì)S27的處理內(nèi)容進(jìn)行說(shuō)明。
圖29是示出第六實(shí)施方式中的對(duì)焦對(duì)象決定部16e的處理的一部分，即圖13中的S27的處理內(nèi)容的流程圖。這樣，第六實(shí)施方式在S27中執(zhí)行圖29所示的處理來(lái)取代圖14所示的處理，這點(diǎn)與第二實(shí)施方式不同。
當(dāng)開(kāi)始S27的處理時(shí)，最大臉選擇部25選擇由臉檢測(cè)部17a所檢測(cè)出的多個(gè)臉中的最大臉(S43)。然后，候選選擇部26根據(jù)由最大臉選擇部25所選擇的臉(最大臉)的大小，選擇成為候選的臉(S44)。
然后，決定部18e的中心決定部19e根據(jù)成為由候選選擇部26所選擇的候選的臉(最大臉、以及具有屬于以該最大臉為基準(zhǔn)的規(guī)定范圍內(nèi)的大小的至少一個(gè)其它臉)，取得臉點(diǎn)的中心(S45)。然后，決定部18e的臉決定部20e根據(jù)所取得的中心，選擇一個(gè)臉，即成為對(duì)焦對(duì)象的臉(S46)。另外，根據(jù)上述處理，在未檢測(cè)出與其它臉相當(dāng)?shù)哪樀那闆r下，把最大臉決定為對(duì)象臉。
〔作用/效果〕根據(jù)第六實(shí)施方式中的攝像裝置12e，僅根據(jù)具有某種程度的大小的臉，選擇成為對(duì)焦對(duì)象的臉。某種程度的大小是根據(jù)最大臉的大小來(lái)判斷的。
因此，可防止作為背景而被拍攝的人，即用戶沒(méi)有有意作為被攝物體的人臉被包含進(jìn)來(lái)作為處理對(duì)象。因此，提高了選擇包含成為對(duì)焦對(duì)象的臉的集合的處理、取得基于集合內(nèi)所包含的臉的中心的處理、選擇成為對(duì)焦對(duì)象的臉的處理的精度。
〔變形例〕最大臉選擇部25也可以構(gòu)成為根據(jù)所檢測(cè)出的臉的膚色的區(qū)域的大小來(lái)進(jìn)行選擇。
并且，第二～第六實(shí)施方式也可以構(gòu)成為具有第一實(shí)施方式中的臉檢測(cè)部5來(lái)取代臉檢測(cè)部17a～17e。
對(duì)象決定裝置可被裝配在進(jìn)行基于最適于被攝物體的焦距或曝光等的攝影的攝像機(jī)和相機(jī)上。
權(quán)利要求
1.一種對(duì)象決定裝置，其特征在于，包括臉檢測(cè)單元，其把根據(jù)任意焦點(diǎn)信息所攝像的圖像作為處理對(duì)象圖像，從所述處理對(duì)象圖像中，根據(jù)因人臉的凹凸或器官而產(chǎn)生的多個(gè)特征區(qū)域的統(tǒng)計(jì)量的相對(duì)值來(lái)檢測(cè)人臉；以及決定單元，其根據(jù)由所述臉檢測(cè)單元所檢測(cè)出的臉，決定在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
2.一種對(duì)象決定裝置，其特征在于，包括幀取得單元，其從根據(jù)任意焦點(diǎn)信息所攝像的包含多個(gè)幀的時(shí)序圖像中，取得規(guī)定的幀的圖像作為處理對(duì)象圖像；臉檢測(cè)單元，其從所述處理對(duì)象圖像中，根據(jù)因人臉的凹凸或器官而產(chǎn)生的多個(gè)特征區(qū)域的統(tǒng)計(jì)量的相對(duì)值來(lái)檢測(cè)人臉；以及決定單元，其根據(jù)由所述臉檢測(cè)單元所檢測(cè)出的臉，決定在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
3.根據(jù)權(quán)利要求1或2所述的對(duì)象決定裝置，其中，所述臉檢測(cè)單元求出在所述處理對(duì)象圖像中作為關(guān)注區(qū)域內(nèi)的特征區(qū)域的第一區(qū)域和第二區(qū)域的統(tǒng)計(jì)量的相對(duì)值，根據(jù)所述統(tǒng)計(jì)量的相對(duì)值判斷在所述關(guān)注區(qū)域內(nèi)是否包含有人臉，進(jìn)而來(lái)檢測(cè)人臉。
4.根據(jù)權(quán)利要求1～3中的任意一項(xiàng)所述的對(duì)象決定裝置，其中，所述決定單元在所述臉檢測(cè)單元檢測(cè)出多個(gè)臉的情況下，根據(jù)所述多個(gè)臉各自的圖像信息決定一個(gè)臉，根據(jù)該臉決定所述進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
5.根據(jù)權(quán)利要求4所述的對(duì)象決定裝置，其中，所述決定單元對(duì)所述多個(gè)臉各自的圖像大小進(jìn)行比較，根據(jù)其大小為最大的臉來(lái)決定所述進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
6.根據(jù)權(quán)利要求4所述的對(duì)象決定裝置，其中，所述決定單元針對(duì)所述各臉，根據(jù)臉的朝向、臉的大小、在圖像內(nèi)的位置、或者周圍的臉的密度中的任意一項(xiàng)或多項(xiàng)計(jì)算得分，把所述算出的得分作為所述圖像信息來(lái)使用。
7.根據(jù)權(quán)利要求1～3中的任意一項(xiàng)所述的對(duì)象決定裝置，其中，所述決定單元在所述臉檢測(cè)單元檢測(cè)出多個(gè)人臉的情況下，依照對(duì)所述多個(gè)臉的實(shí)物分別進(jìn)行測(cè)距所得的結(jié)果，根據(jù)其距離為最小的臉來(lái)決定所述進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
8.一種攝像裝置，其特征在于，包括攝像單元，其攝像基于規(guī)定的焦點(diǎn)信息或者由信息取得單元所取得的焦點(diǎn)信息和/或曝光控制信息的圖像；臉檢測(cè)單元，其從根據(jù)所述規(guī)定的焦點(diǎn)信息由所述攝像單元所攝像的圖像中，根據(jù)因人臉的凹凸或器官而產(chǎn)生的多個(gè)特征區(qū)域的統(tǒng)計(jì)量的相對(duì)值來(lái)檢測(cè)人臉；決定單元，其根據(jù)由所述臉檢測(cè)單元所檢測(cè)出的臉，決定在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體；信息取得單元，其取得用于對(duì)由所述決定單元所決定的被攝物體進(jìn)行對(duì)焦的焦點(diǎn)信息和/或用于把由所述決定單元所決定的被攝物體作為對(duì)象進(jìn)行曝光控制的曝光控制信息；以及圖像存儲(chǔ)單元，其存儲(chǔ)通過(guò)所述攝像單元根據(jù)由所述信息取得單元所取得的焦點(diǎn)信息和/或曝光控制信息而攝像的圖像。
9.一種攝像裝置，其特征在于，包括攝像單元，其根據(jù)規(guī)定的焦點(diǎn)信息或者由信息取得單元所取得的焦點(diǎn)信息和/或曝光控制信息，攝像包含多個(gè)幀的時(shí)序圖像；幀取得單元，其從由所述攝像單元所攝像的包含多個(gè)幀的時(shí)序圖像中取得規(guī)定的幀的圖像；臉檢測(cè)單元，其從由所述幀取得單元所取得的圖像中，根據(jù)因人臉的凹凸或器官而產(chǎn)生的多個(gè)特征區(qū)域的統(tǒng)計(jì)量的相對(duì)值來(lái)檢測(cè)人臉；決定單元，其根據(jù)由所述臉檢測(cè)單元所檢測(cè)出的臉，決定在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體；信息取得單元，其取得用于對(duì)由所述決定單元所決定的被攝物體進(jìn)行對(duì)焦的焦點(diǎn)信息和/或用于把由所述決定單元所決定的被攝物體作為對(duì)象進(jìn)行曝光控制的曝光控制信息；以及圖像存儲(chǔ)單元，其存儲(chǔ)時(shí)序圖像，該時(shí)序圖像是通過(guò)所述攝像單元根據(jù)由所述信息取得單元所取得的焦點(diǎn)信息和/或曝光控制信息而攝像的。
10.根據(jù)權(quán)利要求8或9所述的攝像裝置，還包括測(cè)距單元，其測(cè)量從攝像裝置到任意被攝物體的距離，所述決定單元在所述臉檢測(cè)單元檢測(cè)出多個(gè)人臉的情況下，依照所述測(cè)距單元對(duì)所述多個(gè)臉的實(shí)物分別進(jìn)行測(cè)距所得的結(jié)果，根據(jù)其距離為最小的臉來(lái)決定所述進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體。
11.根據(jù)權(quán)利要求8或9所述的攝像裝置，還包括顯示單元，其把由所述決定單元所決定的人臉與其他臉區(qū)別開(kāi)來(lái)顯示。
12.一種用于使信息處理裝置執(zhí)行以下步驟的程序把根據(jù)任意焦點(diǎn)信息所攝像的圖像作為處理對(duì)象圖像，從所述處理對(duì)象圖像中，根據(jù)因人臉的凹凸或器官而產(chǎn)生的多個(gè)特征區(qū)域的統(tǒng)計(jì)量的相對(duì)值來(lái)檢測(cè)人臉的步驟；以及根據(jù)所檢測(cè)出的臉，決定在實(shí)施攝像時(shí)進(jìn)行對(duì)焦的被攝物體和/或成為進(jìn)行曝光控制的對(duì)象的被攝物體的步驟。
13.一種對(duì)象決定裝置，其特征在于，包括檢測(cè)單元，其從所輸入的圖像中檢測(cè)人臉；以及決定單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其根據(jù)該多個(gè)人臉的位置，從該多個(gè)人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。
14.一種對(duì)象決定裝置，其特征在于，包括幀取得單元，其從所輸入的包含多個(gè)幀的時(shí)序圖像中取得規(guī)定的幀的圖像作為處理對(duì)象圖像；檢測(cè)單元，其從所述處理對(duì)象圖像中檢測(cè)人臉；以及決定單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其根據(jù)該多個(gè)人臉的位置，從該多個(gè)人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。
15.根據(jù)權(quán)利要求13或14所述的對(duì)象決定裝置，所述決定單元包括中心決定單元，其根據(jù)所述多個(gè)人臉的位置，決定所述多個(gè)人臉的位置的中心；以及臉決定單元，其根據(jù)所述中心位置決定成為所述對(duì)象的臉。
16.根據(jù)權(quán)利要求15所述的對(duì)象決定裝置，其中，所述中心決定單元把與所述多個(gè)人臉的位置外接的多邊形的中心決定為所述中心。
17.根據(jù)權(quán)利要求15所述的對(duì)象決定裝置，其中，所述中心決定單元把所述多個(gè)人臉的位置的重心決定為所述中心。
18.根據(jù)權(quán)利要求15所述的對(duì)象決定裝置，其中，所述臉決定單元把距所述中心最近的人臉決定為成為所述對(duì)象的臉。
19.根據(jù)權(quán)利要求15所述的對(duì)象決定裝置，其中，所述臉決定單元按照規(guī)定基準(zhǔn)，從位于距所述中心規(guī)定距離內(nèi)的臉中決定成為所述對(duì)象的臉。
20.根據(jù)權(quán)利要求13或14所述的對(duì)象決定裝置，其中，所述決定單元把所述多個(gè)人臉中位于最下方的臉決定為成為所述對(duì)象的臉。
21.一種對(duì)象決定裝置，其特征在于，包括檢測(cè)單元，其從所輸入的圖像中檢測(cè)人臉；以及決定單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其以所檢測(cè)出的臉的數(shù)目為基準(zhǔn)，把位于其正中的人臉決定為在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。
22.一種對(duì)象決定裝置，其特征在于，包括幀取得單元，其從所輸入的包含多個(gè)幀的時(shí)序圖像中取得規(guī)定的幀的圖像作為處理對(duì)象圖像；檢測(cè)單元，其從所述處理對(duì)象圖像中檢測(cè)人臉；以及決定單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其以所檢測(cè)出的臉的數(shù)目為基準(zhǔn)，把位于其正中的人臉決定為在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。
23.根據(jù)權(quán)利要求13、14、21、22中的任意一項(xiàng)所述的對(duì)象決定裝置，還包括分類單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其將所檢測(cè)出的多個(gè)人臉根據(jù)各自的位置分類為多個(gè)集合；以及集合決定單元，其從所述多個(gè)集合中，決定選擇集合，該選擇集合用于決定成為所述對(duì)象的臉，所述決定單元根據(jù)所述選擇集合內(nèi)所包含的人臉，決定成為所述對(duì)象的臉。
24.根據(jù)權(quán)利要求13、14、21、22中的任意一項(xiàng)所述的對(duì)象決定裝置，其特征在于，還包括顯示單元，其把由所述決定單元所決定的人臉與其他臉區(qū)別開(kāi)來(lái)顯示。
25.一種對(duì)象決定裝置，其特征在于，包括檢測(cè)單元，其從所輸入的圖像中檢測(cè)人臉；分類單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其把所檢測(cè)出的多個(gè)人臉?lè)诸悶槎鄠€(gè)集合；暫定決定單元，其針對(duì)所述多個(gè)集合中的各個(gè)集合，從該集合內(nèi)所包含的人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉；以及最終決定單元，其從由所述暫定決定單元所決定的臉中最終決定成為所述對(duì)象的臉。
26.一種對(duì)象決定裝置，其特征在于，包括幀取得單元，其從所輸入的包含多個(gè)幀的時(shí)序圖像中取得規(guī)定的幀的圖像作為處理對(duì)象圖像；檢測(cè)單元，其從所述處理對(duì)象圖像中檢測(cè)人臉；分類單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其把所檢測(cè)出的多個(gè)人臉?lè)诸悶槎鄠€(gè)集合；暫定決定單元，其針對(duì)所述多個(gè)集合中的各個(gè)集合，從該集合內(nèi)所包含的人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉；以及最終決定單元，其從由所述暫定決定單元所決定的臉中最終決定成為所述對(duì)象的臉。
27.一種對(duì)象決定裝置，其特征在于，包括檢測(cè)單元，其在將所輸入的圖像進(jìn)行了分割而得到的多個(gè)區(qū)的各區(qū)中檢測(cè)人臉；區(qū)決定單元，其根據(jù)所述檢測(cè)單元的檢測(cè)結(jié)果，決定選擇區(qū)，該選擇區(qū)用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉；以及決定單元，其從所述選擇區(qū)內(nèi)所包含的臉中決定成為所述對(duì)象的臉。
28.一種對(duì)象決定裝置，其特征在于，包括幀取得單元，其從所輸入的包含多個(gè)幀的時(shí)序圖像中取得規(guī)定的幀的圖像作為處理對(duì)象圖像；檢測(cè)單元，其在將所述處理對(duì)象圖像進(jìn)行了分割而得到的多個(gè)區(qū)的各區(qū)中檢測(cè)人臉；區(qū)決定單元，其根據(jù)所述檢測(cè)單元的檢測(cè)結(jié)果，決定選擇區(qū)，該選擇區(qū)用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉；以及決定單元，其從所述選擇區(qū)內(nèi)所包含的臉中決定成為所述對(duì)象的臉。
29.一種對(duì)象決定裝置，其特征在于，包括檢測(cè)單元，其從所輸入的圖像中檢測(cè)人臉；判斷單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其判斷被檢測(cè)出的人臉中的最大的臉；選擇單元，其從所述檢測(cè)出的臉中選擇所述最大的臉和具有以該最大的臉的大小為基準(zhǔn)的規(guī)定范圍內(nèi)的大小的臉；以及決定單元，其從所述被選擇的臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。
30.一種對(duì)象決定裝置，其特征在于，包括幀取得單元，其從所輸入的包含多個(gè)幀的時(shí)序圖像中取得規(guī)定的幀的圖像作為處理對(duì)象圖像；檢測(cè)單元，其從所述處理對(duì)象圖像中檢測(cè)人臉；判斷單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其判斷所檢測(cè)出的人臉中的最大的臉；選擇單元，其從所述所檢測(cè)出的臉中選擇所述最大的臉和具有以該最大的臉的大小為基準(zhǔn)的規(guī)定范圍內(nèi)的大小的臉；以及決定單元，其從所述所選擇的臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。
31.一種對(duì)象決定裝置，其特征在于，包括檢測(cè)單元，其從所輸入的圖像中檢測(cè)人臉；分類單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其將所檢測(cè)出的多個(gè)人臉根據(jù)各自的位置分類為多個(gè)集合；集合決定單元，其從所述多個(gè)集合中決定選擇集合，該選擇集合用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉；以及決定單元，其從由所述集合決定單元所決定的選擇集合內(nèi)所包含的臉中決定成為所述對(duì)象的臉。
32.一種對(duì)象決定裝置，其特征在于，包括幀取得單元，其從所輸入的包含多個(gè)幀的時(shí)序圖像中取得規(guī)定的幀的圖像作為處理對(duì)象圖像；檢測(cè)單元，其從所述處理對(duì)象圖像中檢測(cè)人臉；分類單元，當(dāng)由所述檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其將所檢測(cè)出的多個(gè)人臉根據(jù)各自的位置分類為多個(gè)集合；集合決定單元，其從所述多個(gè)集合中決定選擇集合，該選擇集合用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉；以及決定單元，其從由所述集合決定單元所決定的選擇集合內(nèi)所包含的臉中決定成為所述對(duì)象的臉。
33.一種用于使信息處理裝置執(zhí)行以下步驟的程序從所輸入的圖像中檢測(cè)人臉的步驟；以及當(dāng)檢測(cè)出多個(gè)人臉時(shí)，根據(jù)該多個(gè)人臉的位置，從該多個(gè)人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉的步驟。
34.一種用于使信息處理裝置執(zhí)行以下步驟的程序從所輸入的圖像中檢測(cè)人臉的步驟；以及當(dāng)檢測(cè)出多個(gè)人臉時(shí)，以所檢測(cè)出的臉的數(shù)目為基準(zhǔn)，把位于其正中的人臉決定為在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉的步驟。
35.一種用于使信息處理裝置執(zhí)行以下步驟的程序從所輸入的圖像中檢測(cè)人臉的步驟；當(dāng)檢測(cè)出多個(gè)人臉時(shí)，將所檢測(cè)出的多個(gè)人臉根據(jù)各自的位置分類為多個(gè)集合的步驟；針對(duì)所述多個(gè)集合中的各個(gè)集合，從該集合內(nèi)所包含的人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉的步驟；以及從所述各集合中所決定的臉中最終決定成為所述對(duì)象的臉的步驟。
36.一種用于使信息處理裝置執(zhí)行以下步驟的程序在將所輸入的圖像進(jìn)行了分割而得到的多個(gè)區(qū)的各區(qū)中檢測(cè)人臉的步驟；根據(jù)所述各區(qū)的檢測(cè)結(jié)果，決定選擇區(qū)的步驟，該選擇區(qū)用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉；以及從所述選擇區(qū)內(nèi)所包含的臉中決定成為所述對(duì)象的臉的步驟。
37.一種用于使信息處理裝置執(zhí)行以下步驟的程序從所輸入的圖像中檢測(cè)人臉的步驟；當(dāng)檢測(cè)出多個(gè)人臉時(shí)，判斷被檢測(cè)出的多個(gè)人臉中的最大的臉的步驟；從所述被檢測(cè)出的臉中選擇所述最大的臉和具有以該最大的臉的大小為基準(zhǔn)的規(guī)定范圍內(nèi)的大小的臉的步驟；以及從所述被選擇的臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉的步驟。
38.一種用于使信息處理裝置執(zhí)行以下步驟的程序從所輸入的圖像中檢測(cè)人臉的步驟；當(dāng)檢測(cè)出多個(gè)人臉時(shí)，將所檢測(cè)出的多個(gè)人臉根據(jù)各自的位置分類為多個(gè)集合的步驟；從所述多個(gè)集合中決定選擇集合的步驟，該選擇集合用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉；以及從所決定的所述選擇集合內(nèi)所包含的臉中決定成為所述對(duì)象的臉的步驟。
39.根據(jù)權(quán)利要求1或2所述的對(duì)象決定裝置，其特征在于，當(dāng)由所述臉檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，所述決定單元根據(jù)該多個(gè)人臉的位置，從該多個(gè)人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。
40.根據(jù)權(quán)利要求1或2所述的對(duì)象決定裝置，其特征在于，當(dāng)由所述臉檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，所述決定單元以所檢測(cè)出的臉的數(shù)目為基準(zhǔn)，把位于其正中的人臉決定為在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。
41.根據(jù)權(quán)利要求1或2所述的對(duì)象決定裝置，其特征在于，所述決定單元包括分類單元，當(dāng)由所述臉檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其把所檢測(cè)出的多個(gè)人臉?lè)诸悶槎鄠€(gè)集合；暫定決定單元，其針對(duì)所述多個(gè)集合中的各個(gè)集合，從該集合內(nèi)所包含的人臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉；以及最終決定單元，其從由所述暫定決定單元所決定的臉中最終決定成為所述對(duì)象的臉。
42.根據(jù)權(quán)利要求1或2所述的對(duì)象決定裝置，其特征在于，還包括區(qū)決定單元，其根據(jù)所述臉檢測(cè)單元的檢測(cè)結(jié)果決定選擇區(qū)，該選擇區(qū)用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉，所述決定單元從所述選擇區(qū)內(nèi)所包含的臉中決定成為所述對(duì)象的臉。
43.根據(jù)權(quán)利要求1或2所述的對(duì)象決定裝置，其特征在于，還包括判斷單元，當(dāng)由所述臉檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其判斷被檢測(cè)出的人臉中的最大的臉；以及選擇單元，其從所述被檢測(cè)出的臉中選擇所述最大的臉和具有以該最大的臉的大小為基準(zhǔn)的規(guī)定范圍內(nèi)的大小的臉，所述決定單元從所述被選擇的臉中決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉。
44.根據(jù)權(quán)利要求1或2所述的對(duì)象決定裝置，其特征在于，還包括分類單元，當(dāng)由所述臉檢測(cè)單元檢測(cè)出多個(gè)人臉時(shí)，其將所檢測(cè)出的多個(gè)人臉根據(jù)各自的位置分類為多個(gè)集合；以及集合決定單元，其從所述多個(gè)集合中決定選擇集合，該選擇集合用于決定在實(shí)施攝像時(shí)成為進(jìn)行對(duì)焦的對(duì)象的臉和/或成為進(jìn)行曝光控制的對(duì)象的臉，所述決定單元從由所述集合決定單元所決定的選擇集合內(nèi)所包含的臉中決定成為所述對(duì)象的臉。
全文摘要
僅對(duì)根據(jù)預(yù)定的任意(規(guī)定)焦點(diǎn)信息所攝像的圖像執(zhí)行臉檢測(cè)。在該臉檢測(cè)時(shí)，根據(jù)因人臉的凹凸或器官而產(chǎn)生的多個(gè)特征區(qū)域內(nèi)的統(tǒng)計(jì)量的相對(duì)值來(lái)檢測(cè)人臉。因此，即使在供臉檢測(cè)用的圖像中臉被拍得模糊，也能取得某區(qū)域內(nèi)的統(tǒng)計(jì)量，因而可檢測(cè)該臉。因此，在攝像裝置中在預(yù)備攝像階段不進(jìn)行焦點(diǎn)控制，可快速地檢測(cè)出成為對(duì)焦對(duì)象的主要被攝物體。
文檔編號(hào)G02B7/28GK1823298SQ20048002030
公開(kāi)日2006年8月23日 申請(qǐng)日期2004年7月14日 優(yōu)先權(quán)日2003年7月15日
發(fā)明者井尻善久, 露口卓也, 今江文一, 山元昌史 申請(qǐng)人:歐姆龍株式會(huì)社