專利名稱：照相機(jī)系統(tǒng)、信息處理裝置及方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種照相機(jī)系統(tǒng)、信息處理裝置及方法。詳細(xì)地說(shuō)，涉及對(duì)由多個(gè)照相機(jī)以共同定時(shí)拍攝的多個(gè)攝像圖像進(jìn)行處理的照相機(jī)系統(tǒng)、信息處理裝置及方法、以及計(jì)算機(jī)程序。
背景技術(shù)：
當(dāng)由照相機(jī)拍攝被攝體時(shí)，使用多個(gè)照相機(jī)以共同定時(shí)拍攝相同被攝體。多個(gè)照相機(jī)配置在相互不同的角度、不同的距離，從各個(gè)位置拍攝相同被攝體。其結(jié)果，對(duì)于相同被攝體，能夠得到被攝體的角度、攝影圖像中的被攝體大小等相互不同的多個(gè)攝像圖像。
可以想到有各種各樣由多個(gè)照相機(jī)以共同定時(shí)拍攝相同被攝體的圖像使用方法。例如，在專利文獻(xiàn)1所述的廣域攝影方法中，將多臺(tái)照相機(jī)拍攝的相同被攝體影像，除去重復(fù)部分進(jìn)行連接來(lái)制作廣域圖像。
專利文獻(xiàn)1日本特開(kāi)2004-186922號(hào)公報(bào)發(fā)明內(nèi)容當(dāng)由多個(gè)照相機(jī)以共同定時(shí)拍攝相同被攝體時(shí)，在由各照相機(jī)拍攝的攝像圖像之間，根據(jù)各照相機(jī)的位置、拍攝狀態(tài)而在被攝體的拍攝效果上產(chǎn)生差異。當(dāng)?shù)玫搅擞筛髡障鄼C(jī)拍攝的多個(gè)攝像圖像的用戶選擇了拍攝效果良好的攝像圖像時(shí)，目前必須是用戶手動(dòng)比較各攝像圖像，選擇拍攝效果良好的攝像圖像。為此，當(dāng)有多個(gè)攝像圖像時(shí)，用戶手動(dòng)比較各攝像圖像來(lái)選擇攝像圖像很費(fèi)勁。
因此，本發(fā)明是鑒于這種問(wèn)題而作出的，其目的在于提供一種照相機(jī)系統(tǒng)、信息處理裝置及方法、以及計(jì)算機(jī)程序，能夠從由多個(gè)照相機(jī)以共同定時(shí)拍攝相同被攝體的多個(gè)攝像圖像中，自動(dòng)選擇被攝體拍攝效果良好的攝像圖像并提示給用戶。
為了解決上述問(wèn)題，根據(jù)本發(fā)明的觀點(diǎn)，提供一種照相機(jī)系統(tǒng)，通過(guò)通信網(wǎng)將多個(gè)照相機(jī)和從多個(gè)照相機(jī)獲取攝像圖像的信息處理裝置連接，多個(gè)照相機(jī)具備拍攝被攝體的攝像部；使攝像定時(shí)相互同步的攝像同步部，信息處理裝置具備同步攝像圖像獲取部，從多個(gè)照相機(jī)獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像；圖像評(píng)價(jià)部，對(duì)同步攝像圖像獲取部獲取的、以共同定時(shí)拍攝的多個(gè)攝像圖像的每一個(gè)，根據(jù)規(guī)定的評(píng)價(jià)基準(zhǔn)評(píng)價(jià)攝像圖像中的被攝體的狀態(tài)，對(duì)各攝像圖像賦予評(píng)價(jià)值；優(yōu)先級(jí)賦予部，根據(jù)由圖像評(píng)價(jià)部賦予各攝像圖像的評(píng)價(jià)值，對(duì)多個(gè)攝像圖像的每一個(gè)賦予優(yōu)先級(jí)；顯示控制部，按照優(yōu)先級(jí)賦予部賦予各攝像圖像的優(yōu)先級(jí)，在顯示裝置上顯示各攝像圖像。
為了解決上述問(wèn)題，根據(jù)本發(fā)明的其他觀點(diǎn)，提供一種信息處理裝置，通過(guò)通信網(wǎng)與使拍攝定時(shí)同步來(lái)拍攝被攝體的多個(gè)照相機(jī)連接并從照相機(jī)獲取攝像圖像，具備同步攝像圖像獲取部，從多個(gè)照相機(jī)獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像；圖像評(píng)價(jià)部，對(duì)同步攝像圖像獲取部獲取的、以共同定時(shí)拍攝的多個(gè)攝像圖像的每一個(gè)，根據(jù)規(guī)定的評(píng)價(jià)基準(zhǔn)評(píng)價(jià)攝像圖像中的被攝體的狀態(tài)，對(duì)各攝像圖像賦予評(píng)價(jià)值；優(yōu)先級(jí)賦予部，根據(jù)圖像評(píng)價(jià)部賦予各攝像圖像的評(píng)價(jià)值，對(duì)多個(gè)攝像圖像的每一個(gè)賦予優(yōu)先級(jí)；顯示控制部，按照優(yōu)先級(jí)賦予部賦予各攝像圖像的優(yōu)先級(jí)，在顯示裝置上顯示各攝像圖像。上述攝像圖像的被攝體的狀態(tài)，例如包含相對(duì)攝像圖像整體的被攝體大小、被攝體的角度、攝像圖像中的被攝體的位置、被攝體模糊程度、以攝像時(shí)的照相機(jī)晃動(dòng)為原因的被攝體的移動(dòng)情況、以攝像時(shí)的周圍明亮度等為原因的被攝體的明亮度等、與攝像圖像中的被攝體拍攝效果相關(guān)的各種狀態(tài)。
上述圖像評(píng)價(jià)部，也可以從各攝像圖像中檢測(cè)出人物的臉圖像，根據(jù)檢測(cè)出的臉圖像的狀態(tài)，決定各攝像圖像的評(píng)價(jià)值。
上述圖像評(píng)價(jià)部，也可以根據(jù)檢測(cè)出的臉圖像的臉角度決定評(píng)價(jià)值，這種情況下，上述優(yōu)先級(jí)賦予部，也可以根據(jù)評(píng)價(jià)值，對(duì)包含人物的正面臉的圖像的攝像圖像、賦予比包含人物正面臉以外的角度的臉的攝像圖像高的優(yōu)先級(jí)。正面臉表示從正面拍攝人物臉時(shí)的攝像圖像中的人物臉。正面臉中也可以包含人物的正面臉和在規(guī)定角度以內(nèi)面向上下左右的臉。
上述圖像評(píng)價(jià)部，也可以根據(jù)檢測(cè)出的臉圖像的尺寸，決定評(píng)價(jià)值，這種情況下，上述優(yōu)先級(jí)賦予部，也可以根據(jù)評(píng)價(jià)值，對(duì)臉圖像的尺寸超過(guò)規(guī)定值的攝像圖像、賦予比臉圖像的尺寸小于規(guī)定值的攝像圖像高的優(yōu)先級(jí)。
上述圖像評(píng)價(jià)部，也可以根據(jù)攝像圖像中檢測(cè)出的臉圖像的位置信息，決定評(píng)價(jià)值，這種情況下，上述優(yōu)先級(jí)賦予部，也可以根據(jù)評(píng)價(jià)值，對(duì)臉圖像距攝像圖像中心比規(guī)定距離近的攝像圖像、賦予比臉圖像距攝像圖像中心比規(guī)定距離遠(yuǎn)的攝像圖像高的優(yōu)先級(jí)。
上述圖像評(píng)價(jià)部，也可以根據(jù)從各攝像圖像中檢測(cè)出的臉圖像數(shù)目，決定評(píng)價(jià)值，這種情況下，上述優(yōu)先級(jí)賦予部，根據(jù)評(píng)價(jià)值，按檢測(cè)出的臉圖像的數(shù)目多的順序賦予高的優(yōu)先級(jí)。
上述圖像評(píng)價(jià)部，也可以根據(jù)從各攝像圖像中檢測(cè)出的臉圖像的數(shù)目、和檢測(cè)出的臉圖像的臉的角度，決定評(píng)價(jià)值，這種情況下，上述優(yōu)先級(jí)賦予部，根據(jù)評(píng)價(jià)值，按檢測(cè)出的正面臉的圖像數(shù)目多的順序賦予高的優(yōu)先級(jí)。
還可以具備臉識(shí)別部，根據(jù)上述檢測(cè)出的臉圖像，確定與該臉圖像對(duì)應(yīng)的人物，這種情況下，上述圖像評(píng)價(jià)部，也可以根據(jù)臉識(shí)別部確定的人物的臉圖像的狀態(tài)，決定各攝像圖像的評(píng)價(jià)值。根據(jù)這樣的結(jié)構(gòu)，可以基于攝像圖像中的確定人物的臉圖像狀態(tài)，賦予各攝像圖像的優(yōu)先級(jí)。
上述信息處理裝置，還可以具備根據(jù)檢測(cè)出的臉圖像，確定與該圖像對(duì)應(yīng)的人物的臉識(shí)別部；出場(chǎng)人物存儲(chǔ)部，從同步攝像圖像獲取部獲取的多個(gè)攝像圖像的至少一個(gè)，將臉識(shí)別部確定的人物信息與多個(gè)攝像圖像的全部相關(guān)聯(lián)進(jìn)行存儲(chǔ)。
上述信息處理裝置，還可以具備位置信息獲取部，該位置信息獲取部從各照相機(jī)獲取表示拍攝被攝體時(shí)的各照相機(jī)的位置的攝像位置信息。
上述信息處理裝置，還可以具備攝像方位獲取部，該攝像方位獲取部從各照相機(jī)獲取表示拍攝被攝體時(shí)的各照相機(jī)的攝像方位的攝像方位信息。
上述信息處理裝置，還可以具備攝像角度獲取部，該攝像角度獲取部從照相機(jī)獲取表示拍攝被攝體時(shí)的照相機(jī)傾斜角的攝像角度信息。
上述顯示控制部，將各攝像圖像以各攝像圖像的優(yōu)先級(jí)的順序依次顯示在顯示裝置上。
上述顯示控制部，將各攝像圖像按各攝像圖像的優(yōu)先級(jí)的順序改變圖像大小進(jìn)行顯示。
為了解決上述問(wèn)題，根據(jù)本發(fā)明其他觀點(diǎn)，向計(jì)算機(jī)提供一種作為上述信息處理裝置而發(fā)揮功能的計(jì)算機(jī)程序。該計(jì)算機(jī)程序，存儲(chǔ)在計(jì)算機(jī)具備的存儲(chǔ)部中，通過(guò)讀入到計(jì)算機(jī)具備的CPU中而被執(zhí)行，使該計(jì)算機(jī)作為上述信息處理裝置而發(fā)揮功能。另外，還提供記錄了計(jì)算機(jī)程序的計(jì)算機(jī)可讀取的記錄介質(zhì)。記錄介質(zhì)例如是磁盤(pán)、光盤(pán)等。
為了解決上述問(wèn)題，根據(jù)本發(fā)明的其他觀點(diǎn)，提供一種信息處理方法，被通過(guò)通信網(wǎng)與使拍攝定時(shí)同步來(lái)拍攝被攝體的多個(gè)照相機(jī)連接并從照相機(jī)獲取攝像圖像的信息處理裝置執(zhí)行，包含同步攝像圖像獲取步驟，從多個(gè)照相機(jī)獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像；圖像評(píng)價(jià)步驟，對(duì)在同步攝像圖像獲取步驟獲取的、以共同定時(shí)拍攝的多個(gè)攝像圖像的每一個(gè)，根據(jù)規(guī)定的評(píng)價(jià)基準(zhǔn)評(píng)價(jià)攝像圖像中的被攝體的狀態(tài)，對(duì)各攝像圖像賦予評(píng)價(jià)值；優(yōu)先級(jí)賦予步驟，根據(jù)由圖像評(píng)價(jià)步驟賦予各攝像圖像的評(píng)價(jià)值，對(duì)多個(gè)攝像圖像的每一個(gè)賦予優(yōu)先級(jí)；顯示控制步驟，按照在優(yōu)先級(jí)賦予步驟賦予各攝像圖像的優(yōu)先級(jí)，在顯示裝置上顯示各攝像圖像。
為了解決上述問(wèn)題，根據(jù)本發(fā)明的其他觀點(diǎn)，提供一種照相機(jī)，通過(guò)通信網(wǎng)與將圖像顯示在顯示裝置上的信息處理裝置連接并將攝像圖像發(fā)送給信息處理裝置，具備拍攝被攝體的攝像部；使攝像時(shí)刻與其他照相機(jī)同步的攝像同步部；圖像評(píng)價(jià)部，對(duì)攝像部拍攝的攝像圖像，根據(jù)規(guī)定的評(píng)價(jià)基準(zhǔn)評(píng)價(jià)攝像圖像中的被攝體的狀態(tài)，對(duì)各攝像圖像賦予評(píng)價(jià)值；攝像圖像發(fā)送部，將攝像圖像和評(píng)價(jià)值相關(guān)聯(lián)，發(fā)送給信息處理裝置。
上述照相機(jī)的上述圖像評(píng)價(jià)部，也可以從攝像圖像中檢測(cè)出人物的臉圖像，根據(jù)檢測(cè)出的臉圖像的狀態(tài)，決定攝像圖像的評(píng)價(jià)值。
另外，為了解決上述問(wèn)題，根據(jù)本發(fā)明的其他觀點(diǎn)，提供一種信息處理裝置，通過(guò)通信網(wǎng)與使拍攝定時(shí)同步來(lái)拍攝被攝體的多個(gè)照相機(jī)連接并從照相機(jī)獲取攝像圖像，具備同步攝像圖像獲取部，從多個(gè)照相機(jī)獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像；攝像位置信息獲取部，從多個(gè)照相機(jī)獲取表示被攝體攝像時(shí)的各照相機(jī)的位置的攝像位置信息；顯示控制部，根據(jù)攝像位置信息，以與各照相機(jī)間的位置關(guān)系相對(duì)應(yīng)的位置關(guān)系在顯示裝置上顯示各攝像圖像。
另外，為了解決上述問(wèn)題，根據(jù)本發(fā)明的其他觀點(diǎn)，提供一種信息處理裝置，通過(guò)通信網(wǎng)與使拍攝定時(shí)同步來(lái)拍攝被攝體的多個(gè)照相機(jī)連接并從照相機(jī)獲取攝像圖像，具備同步攝像圖像獲取部，從多個(gè)照相機(jī)獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像；臉檢測(cè)部，從各攝像圖像中檢測(cè)出人物的臉圖像；臉識(shí)別部，根據(jù)檢測(cè)出的臉圖像，確定與該臉圖像對(duì)應(yīng)的人物；出場(chǎng)人物存儲(chǔ)部，從同步攝像圖像獲取部獲取的多個(gè)攝像圖像的至少一個(gè)，將臉識(shí)別部確定的人物信息與多個(gè)攝像圖像的全部相關(guān)聯(lián)進(jìn)行存儲(chǔ)。
如上所述，根據(jù)本發(fā)明，能夠從由多個(gè)照相機(jī)以共同定時(shí)拍攝相同被攝體的多個(gè)攝像圖像中，自動(dòng)選擇被攝體的拍攝效果良好的攝像圖像，并呈現(xiàn)給用戶。
圖1是表示本發(fā)明第一實(shí)施方式的說(shuō)明圖。
圖2是表示該實(shí)施方式中的照相機(jī)系統(tǒng)的整體結(jié)構(gòu)的說(shuō)明圖。
圖3是表示該實(shí)施方式中的信息處理裝置的硬件結(jié)構(gòu)的框圖。
圖4是表示該實(shí)施方式中的信息處理裝置的功能結(jié)構(gòu)的框圖。
圖5是說(shuō)明該實(shí)施方式中的信息處理裝置進(jìn)行的臉檢測(cè)處理的圖。
圖6是說(shuō)明該實(shí)施方式中的信息處理裝置進(jìn)行的臉檢測(cè)處理的說(shuō)明圖。
圖7是說(shuō)明該實(shí)施方式中的信息處理裝置進(jìn)行的臉檢測(cè)處理的說(shuō)明圖。
圖8是表示該實(shí)施方式中的信息處理流程的流程圖。
圖9是表示該實(shí)施方式中的信息處理流程的流程圖。
圖10是表示該實(shí)施方式中的評(píng)價(jià)值的說(shuō)明圖。
圖11A是表示該實(shí)施方式中的攝像圖像顯示例的說(shuō)明圖。
圖11B是表示該實(shí)施方式中的攝像圖像顯示例的說(shuō)明圖。
圖12是表示該實(shí)施方式中的信息處理流程的流程圖。
圖13是表示該實(shí)施方式中的評(píng)價(jià)值的說(shuō)明圖。
圖14是表示與本發(fā)明第二實(shí)施方式有關(guān)的信息處理流程的流程圖。
圖15是表示該實(shí)施方式中的拍攝時(shí)的照相機(jī)配置的說(shuō)明圖。
圖16是表示該實(shí)施方式中的拍攝圖像顯示例的說(shuō)明圖。
圖17是表示與本發(fā)明第三實(shí)施方式有關(guān)的信息處理流程的流程圖。
附圖標(biāo)記說(shuō)明100照相機(jī)系統(tǒng)；102信息處理裝置；104a、104b、104c照相機(jī)；106顯示裝置；108通信網(wǎng)；202同步攝像圖像獲取部；204位置信息獲取部；206攝像方位獲取部；208攝像角度獲取部；210圖像評(píng)價(jià)部；212出場(chǎng)人物存儲(chǔ)部；214臉識(shí)別部；216被攝體相同性判斷部；218優(yōu)先級(jí)賦予部；220顯示控制部。
具體實(shí)施例方式
下面參照附圖詳細(xì)說(shuō)明本發(fā)明的最佳實(shí)施方式。此外，在本說(shuō)明書(shū)以及附圖中，對(duì)于實(shí)質(zhì)上具有相同功能結(jié)構(gòu)的構(gòu)成要素，通過(guò)標(biāo)記相同符號(hào)來(lái)省略重復(fù)說(shuō)明。
第一實(shí)施方式下面，作為第一實(shí)施方式，說(shuō)明將與本發(fā)明有關(guān)的照相機(jī)系統(tǒng)應(yīng)用在照相機(jī)系統(tǒng)100中，該照相機(jī)系統(tǒng)100由多個(gè)照相機(jī)以共同定時(shí)拍攝相同被攝體，根據(jù)被攝體的拍攝效果，在顯示裝置上顯示由各照相機(jī)拍攝的多個(gè)攝像圖像。首先，根據(jù)圖1說(shuō)明本實(shí)施方式的概要。
實(shí)施方式的概要如圖1所示，在與本實(shí)施方式有關(guān)的照相機(jī)系統(tǒng)100中，由多個(gè)照相機(jī)104a、104b、104c拍攝被攝體130。照相機(jī)104a、104b、104c配置在相互不同的位置。例如，如圖所示當(dāng)照相機(jī)104a、104b、104c從各自不同的角度拍攝被攝體130時(shí)，在由照相機(jī)104a、104b、104c各自拍攝的攝像圖像中，被攝體130以各自不同的角度被拍攝。另外，當(dāng)照相機(jī)104a、104b、104c從各自不同的距離拍攝被攝體130時(shí)，在由照相機(jī)104a、104b、104c各自拍攝的攝像圖像中，以被攝體130相對(duì)攝像圖像整體的大小各自不同的狀態(tài)被拍攝。
另外，在與本實(shí)施方式有關(guān)的照相機(jī)系統(tǒng)100中，多個(gè)照相機(jī)104a、104b、104c以共同定時(shí)拍攝被攝體130。拍攝定時(shí)能夠通過(guò)在各照相機(jī)間進(jìn)行無(wú)線通信來(lái)通知而設(shè)為共同的定時(shí)。在照相機(jī)系統(tǒng)100中，以共同定時(shí)由多個(gè)照相機(jī)104a、104b、104c拍攝相同被攝體130，在顯示裝置106上顯示由各照相機(jī)拍攝的攝像圖像。
當(dāng)在顯示裝置106上顯示攝像圖像時(shí)，在照相機(jī)系統(tǒng)100中，根據(jù)各攝像圖像中的被攝體的拍攝效果，優(yōu)先顯示拍攝效果良好的攝像圖像。例如當(dāng)被攝體130是人物時(shí)，可以設(shè)為攝像圖像中的人物的臉的角度、大小、位置等作為拍攝效果良好的判斷基準(zhǔn)。具體地說(shuō)，例如當(dāng)以臉的角度為判斷基準(zhǔn)時(shí)，可以判斷為攝像圖像中人物的臉面向正面時(shí)的拍攝效果比面向斜向、面向側(cè)向的拍攝效果好。另外，當(dāng)以臉的大小為判斷基準(zhǔn)時(shí)，可以判斷為攝像圖像中人物的臉的大小更大的一方拍攝效果好。另外，當(dāng)以臉的位置為判斷基準(zhǔn)時(shí)，可以判斷為攝像圖像中人物的臉的位置更靠近攝像圖像中心的一方拍攝效果好。
在圖1的例子中，作為被攝體130的人物的臉面向正面的攝像圖像134a、面向斜向的攝像圖像134b、面向側(cè)面的攝像圖像134c分別由照相機(jī)104a、104b、104c拍攝。而且，以不同大小在顯示裝置106上顯示攝像圖像134a、攝像圖像134b、攝像圖像134c。顯示的圖像大小如圖所示，按攝像圖像134a、攝像圖像134b、攝像圖像134c的順序減小。即，作為被攝體130的人物的臉面向正面的攝像圖像134a比其他攝像圖像優(yōu)先地被顯示，并且面向斜向的攝像圖像134b比面向側(cè)向的攝像圖像134c優(yōu)先地被顯示。如上所述，根據(jù)被攝體的拍攝效果按優(yōu)先級(jí)在顯示裝置106上顯示多個(gè)攝像圖像，從而，用戶不必比較多個(gè)攝像圖像并手動(dòng)選擇拍攝效果良好的攝像圖像，也能夠迅速且簡(jiǎn)便地看到拍攝效果良好的攝像圖像。
以上說(shuō)明了本實(shí)施方式的概要。下面說(shuō)明上述的用于可按照被攝體拍攝效果顯示攝像圖像的照相機(jī)系統(tǒng)100的結(jié)構(gòu)。
照相機(jī)系統(tǒng)的整體結(jié)構(gòu)首先，根據(jù)圖2說(shuō)明與本實(shí)施方式有關(guān)的照相機(jī)系統(tǒng)100的整體結(jié)構(gòu)。如圖2所示，照相機(jī)系統(tǒng)100主要具備信息處理裝置102、顯示裝置106、通信網(wǎng)108、照相機(jī)104a、104b、104c。
信息處理裝置102具有如下功能從照相機(jī)104a、104b、104c獲取攝像圖像，對(duì)各攝像圖像賦予優(yōu)先級(jí)并顯示在顯示裝置106上。詳細(xì)地說(shuō)，信息處理裝置102從照相機(jī)104a、104b、104c獲取的攝像圖像中檢測(cè)出臉圖像，根據(jù)檢測(cè)出的臉圖像狀態(tài)，對(duì)各攝像圖像賦予優(yōu)先級(jí)。而且，按照賦予的優(yōu)先級(jí)，在顯示裝置106上顯示攝像圖像。
顯示裝置106與信息處理裝置102連接，具有在畫(huà)面上顯示攝像圖像的功能。作為顯示裝置106，可以舉例示出液晶顯示器、CRT、等離子體顯示器等。此外，顯示裝置106也可以和信息處理裝置102一體構(gòu)成。
照相機(jī)104a、104b、104c(以后，也簡(jiǎn)單地稱為照相機(jī)104。)具有拍攝靜止圖像的功能。另外，照相機(jī)104具有在與其他照相機(jī)104之間使拍攝定時(shí)同步的功能。具體地說(shuō)，照相機(jī)104，作為拍攝同步部的一例，具備無(wú)線通信功能，在與其他照相機(jī)104之間發(fā)送接收信息。更詳細(xì)地說(shuō)，例如，照相機(jī)104a、104b、104c各自具有用于攝像指示的按鈕，當(dāng)按下照相機(jī)104a、104b、104c的任意按鈕時(shí)，按下按鈕的照相機(jī)104，通過(guò)無(wú)線通信將按下按鈕的情況通知給其他照相機(jī)104。而且，在通知后，立即或者經(jīng)過(guò)規(guī)定時(shí)間后，各照相機(jī)104按下快門(mén)拍攝被攝體。由此，照相機(jī)104a、104b、104c能夠以共同定時(shí)進(jìn)行拍攝。此外，各照相機(jī)104的攝像定時(shí)也可以完全相同，只要在規(guī)定范圍內(nèi)，即使有偏差也沒(méi)關(guān)系。照相機(jī)104通過(guò)通信網(wǎng)108將拍攝的攝像圖像發(fā)送給信息處理裝置102。此外，在本實(shí)施方式中，照相機(jī)104拍攝的攝像圖像是靜止圖像，但是本發(fā)明不限于這樣的例子，攝像圖像也可以是動(dòng)態(tài)圖像。
另外，照相機(jī)104具備通過(guò)GPS(global positioning system全球定位系統(tǒng))或者信標(biāo)(beacon)檢測(cè)自身位置的位置信息檢測(cè)功能，能夠向信息處理裝置102發(fā)送位置信息。另外，照相機(jī)104具備電子羅盤(pán)，能夠?qū)⑴臄z時(shí)的攝像方位信息發(fā)送給信息處理裝置102。另外，照相機(jī)104具備檢測(cè)傾斜角(tilt angle)的功能，能夠?qū)⑴臄z時(shí)的傾斜角信息發(fā)送給信息處理裝置102。
通信網(wǎng)108，例如由因特網(wǎng)、電話線路網(wǎng)、衛(wèi)星通信網(wǎng)等公共線路網(wǎng)、WAN、LAN、IP-VPN等專用線路網(wǎng)等構(gòu)成，有線/無(wú)線均可。
在上述結(jié)構(gòu)的照相機(jī)系統(tǒng)100中，由照相機(jī)104a、104b、104c以共同定時(shí)拍攝的攝像圖像被收集在信息處理裝置102中。信息處理裝置102根據(jù)規(guī)定的基準(zhǔn)評(píng)價(jià)多個(gè)攝像圖像，從被攝體拍攝效果良好的攝像圖像開(kāi)始優(yōu)先顯示在顯示裝置106上。以上說(shuō)明了照相機(jī)系統(tǒng)100的整體結(jié)構(gòu)。此外，在圖示的例子中照相機(jī)是三臺(tái)，但是也可以是兩臺(tái)，還可以是大于或等于四臺(tái)。
信息處理裝置的硬件結(jié)構(gòu)其次，根據(jù)圖3說(shuō)明信息處理裝置102的硬件結(jié)構(gòu)。如圖3所示，信息處理裝置102例如具備CPU(Central Processing Unit中央處理單元)111、ROM(Read Only Memory只讀存儲(chǔ)器)112、RAM(Random Access Memory隨機(jī)存取存儲(chǔ)器)113、主機(jī)總線114、橋接器115、外部總線116、接口117、輸入裝置118、輸出裝置120、存儲(chǔ)裝置(HDD)121、驅(qū)動(dòng)器122、連接端口124、通信裝置125等。
CPU 111作為運(yùn)算處理裝置以及控制裝置而起作用，按照保存在ROM 112或者HDD 121中的各種程序進(jìn)行動(dòng)作，控制信息處理裝置102內(nèi)的各部分。作為具體的處理，例如執(zhí)行從攝像圖像中檢測(cè)臉圖像的處理、對(duì)攝像圖像賦予優(yōu)先級(jí)的處理等。
ROM 112存儲(chǔ)CPU 111使用的程序、運(yùn)算參數(shù)等。RAM 113暫時(shí)存儲(chǔ)由CPU 111執(zhí)行處理中使用的程序、在該執(zhí)行中適當(dāng)變化的參數(shù)等。另外，RAM 113也可以用于暫時(shí)保存輸入到信息處理裝置102的攝像圖像等。它們通過(guò)由CPU總線等構(gòu)成的主機(jī)總線114相互連接。
主機(jī)總線114通過(guò)橋接器115與PCI(Peripheral ComponentInterconnect/interface外部設(shè)備互連接口)總線等外部總線116連接。
輸入裝置118例如由鼠標(biāo)、鍵盤(pán)、觸摸屏、按鈕、開(kāi)關(guān)、控制桿等操作單元、和生成輸入信號(hào)并輸出到CPU 111的輸入控制電路等構(gòu)成。信息處理裝置102的用戶能夠通過(guò)操作該輸入裝置118，對(duì)信息處理裝置102輸入各種數(shù)據(jù)或指示處理動(dòng)作。
輸出裝置120例如由CRT(Cathode Ray Tube陰極射線管)顯示器裝置、液晶顯示器(LCD)裝置、指示燈等顯示裝置、揚(yáng)聲器等聲音輸出裝置等構(gòu)成。該輸出裝置120例如輸出攝像圖像。此外，輸出裝置120也可以控制作為外部設(shè)備的輸出裝置的控制部而發(fā)揮功能，該外部設(shè)備設(shè)置在信息處理裝置102的外部。
HDD 121是作為與本實(shí)施方式有關(guān)的信息處理裝置102的存儲(chǔ)單元的一例而構(gòu)成的數(shù)據(jù)保存用裝置。該HDD 121保存CPU111執(zhí)行的程序或各種數(shù)據(jù)。另外，該HDD 121中例如也可以保存攝像圖像等的各種數(shù)據(jù)。
驅(qū)動(dòng)器122是存儲(chǔ)介質(zhì)用讀寫(xiě)器，內(nèi)置或者外置于信息處理裝置102。該驅(qū)動(dòng)器122，對(duì)裝入信息處理裝置102的磁盤(pán)(HD等)、光盤(pán)(CD、DVD等)、磁光盤(pán)(MO等)、或者半導(dǎo)體存儲(chǔ)器等可移動(dòng)存儲(chǔ)介質(zhì)，記錄/再現(xiàn)內(nèi)容等的各種數(shù)據(jù)。
具體地說(shuō)，驅(qū)動(dòng)器122讀出存儲(chǔ)在可移動(dòng)存儲(chǔ)介質(zhì)中的數(shù)據(jù)，提供給通過(guò)接口117、外部總線116、橋接器115、以及主機(jī)總線114連接的RAM 113。CPU 111按照需要將這些數(shù)據(jù)保存在HDD 121中等。另一方面，驅(qū)動(dòng)器122從CPU 111接受保存在ROM 112或者HDD 121等的數(shù)據(jù)、新生成的數(shù)據(jù)、從外部裝置獲取的數(shù)據(jù)，寫(xiě)入可移動(dòng)存儲(chǔ)介質(zhì)。
連接端口124例如是連接信息處理裝置102和顯示裝置106等外部設(shè)備的端口，具有USB、IEEE 1394等連接端子。連接端口124通過(guò)接口117、以及外部總線116、橋接器115、主機(jī)總線114等與CPU 111等連接。
通信裝置125例如是由用于與通信網(wǎng)108連接的通信設(shè)備等構(gòu)成的通信接口。該通信裝置125在與外部設(shè)備之間，通過(guò)通信網(wǎng)108發(fā)送接收各種數(shù)據(jù)。以上簡(jiǎn)單地說(shuō)明了信息處理裝置102的硬件結(jié)構(gòu)。
信息處理裝置的功能結(jié)構(gòu)其次，根據(jù)圖4說(shuō)明信息處理裝置102的功能結(jié)構(gòu)。信息處理裝置102主要具備同步攝像圖像獲取部202、位置信息獲取部204、攝像方位獲取部206、攝像角度獲取部208、圖像評(píng)價(jià)部210、出場(chǎng)人物存儲(chǔ)部212、臉識(shí)別部214、被攝體相同性判斷部216、優(yōu)先級(jí)賦予部218、顯示控制部220等。
同步攝像圖像獲取部202從多個(gè)照相機(jī)104a、104b、104c獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像。各照相機(jī)104對(duì)攝像圖像賦予攝像定時(shí)，只要將賦予了攝像定時(shí)的攝像圖像發(fā)送給信息處理裝置102，信息處理裝置102就能識(shí)別以共同定時(shí)拍攝的攝像圖像。
圖像評(píng)價(jià)部210對(duì)同步攝像圖像獲取部202獲取的以共同定時(shí)拍攝的多個(gè)攝像圖像的每一個(gè)，根據(jù)規(guī)定的評(píng)價(jià)基準(zhǔn)評(píng)價(jià)攝像圖像中的被攝體的狀態(tài)，對(duì)各攝像圖像賦予評(píng)價(jià)值。在本實(shí)施方式中，圖像評(píng)價(jià)部210從各攝像圖像中檢測(cè)出人物的臉圖像，根據(jù)檢測(cè)出的臉圖像的狀態(tài)決定各攝像圖像的評(píng)價(jià)值。更具體地說(shuō)，根據(jù)檢測(cè)出的臉圖像的臉的角度、臉圖像的尺寸、攝像圖像中的臉圖像的位置決定評(píng)價(jià)值。另外，當(dāng)從攝像圖像中檢測(cè)出多個(gè)臉圖像時(shí)，檢測(cè)出的臉圖像的數(shù)目也反映在評(píng)價(jià)值上。
從攝像圖像中檢測(cè)出臉圖像例如能夠根據(jù)“ピクセル差分特徵を用いた実時(shí)間任意姿勢(shì)顔検出器の學(xué)習(xí)”(差部 浩太郎、日臺(tái) 健一 著)所述的方法進(jìn)行。下面敘述概要。
利用可高速運(yùn)算的像素差分特征，進(jìn)行每個(gè)姿勢(shì)的臉圖案檢測(cè)器的學(xué)習(xí)，構(gòu)成任意姿勢(shì)的臉檢測(cè)器，以便使用AdaBoost(アダブ一スト)將弱假設(shè)配置為樹(shù)結(jié)構(gòu)。此時(shí)，將可高速運(yùn)算的像素差分特征用于集成學(xué)習(xí)(ensemble learning)。另外，在識(shí)別時(shí)運(yùn)算弱假設(shè)權(quán)重多數(shù)決定時(shí)得到足夠結(jié)果的時(shí)刻導(dǎo)入中止功能。而且，有效利用像素差分特征的單性，將它們用于高速并行計(jì)算的方法中。并且，構(gòu)成根據(jù)識(shí)別全部姿勢(shì)的臉圖案的弱假設(shè)而依次識(shí)別各姿勢(shì)的臉圖案地、進(jìn)行分支并細(xì)分的樹(shù)結(jié)構(gòu)識(shí)別器，使用該識(shí)別器檢測(cè)臉圖像。
像素差分取臉圖像檢測(cè)對(duì)象的窗口內(nèi)任意兩個(gè)像素值。對(duì)訓(xùn)練樣本生成該差分值的輸出直方圖，求出識(shí)別誤差最少的閾值。對(duì)全部像素的組合進(jìn)行該運(yùn)算，作為弱假設(shè)采用識(shí)別誤差最少的閾值。弱假設(shè)的決定方法如下。
1.M次重復(fù)a)隨機(jī)求出兩個(gè)像素I1、I2。
b)算出誤差最小的閾值。求出使下述式1為最小emin的閾值Tmin。
et=Σ1:ft(xi)≠yiDt,i]]>...(式1)c)算出誤差最大的閾值。求出使上述式1為最大emax的閾值Tmax，以根據(jù)下述式2的方法進(jìn)行翻轉(zhuǎn)。
e′max＝1-emaxI1′＝I2I2′＝I1T′max＝-Tmax...(式2)d)如果emin＜e’max，則將I1、I2、Tmin定為弱假設(shè)，如果不是，則將I’1、I’2、Tmax定為弱假設(shè)。
2.在上述重復(fù)過(guò)程中，采用誤差e最小的值識(shí)別時(shí)可以通過(guò)進(jìn)行由下述式3表示的運(yùn)算，計(jì)算弱假設(shè)。
y＝ft(x)＝sign(x(k1)-x(k2)-θt)...(式3)上述式中，x是輸入窗口圖像的亮度值，k1、k2是像素位置，q是閾值。
在AdaBoost中，每加一個(gè)弱假設(shè)，訓(xùn)練誤差的上限減小，越接近性能良好的識(shí)別器。換言之，既便僅利用到中途為止的弱假設(shè)也形成相應(yīng)的識(shí)別器，通過(guò)輸入進(jìn)行充分地識(shí)別。如果利用它，到中途為止的多數(shù)決定結(jié)果是足夠小的值時(shí)，就能夠中止計(jì)算作出判斷。
下述的式4是權(quán)重多數(shù)決定的式。
(x)=Σtαtft(x)]]>...(式4)在圖5表示繪制了增加t(弱假設(shè)的個(gè)數(shù))時(shí)的權(quán)重多數(shù)決定的變化的例子。在臉檢測(cè)器中輸入臉圖像時(shí)的典型反應(yīng)，如圖中的窗口1～4那樣，隨著增加弱假設(shè)，逐漸向正方向增加。與此相對(duì)，當(dāng)輸入提供非臉圖像時(shí)，逐漸向負(fù)方向減少(窗口5)。此時(shí)通過(guò)設(shè)定某中止閾值，能夠在中途結(jié)束向負(fù)方向減少的權(quán)重多數(shù)決定的計(jì)算。
該中止閾值，取學(xué)習(xí)樣本數(shù)據(jù)的對(duì)象物體能夠全部通過(guò)的最大值。在圖5的情況下，當(dāng)窗口1～4是全部對(duì)象物體的數(shù)據(jù)時(shí)，這些全部最小值成為中止閾值。與追加第t個(gè)弱假設(shè)時(shí)的權(quán)重多數(shù)決定Ft(x)對(duì)應(yīng)的中止閾值Rt，規(guī)定成如下所述的式5。
Rt＝min[Ft(x1)，F(xiàn)t(x2)，…，F(xiàn)t(xN)] ...(式5)下面說(shuō)明任意姿勢(shì)的臉檢測(cè)器。臉的圖案在每個(gè)姿勢(shì)中都大為不同，所以難以由一個(gè)識(shí)別器構(gòu)成性能良好的臉檢測(cè)器。因此，一邊從全部姿勢(shì)的臉-非臉圖像的識(shí)別器繼承該結(jié)果，一邊學(xué)習(xí)向每個(gè)姿勢(shì)的臉-非臉圖像的識(shí)別器分支的識(shí)別器。特別是，將下層姿勢(shì)分類定為將上層姿勢(shì)分類進(jìn)一部分割那樣的樹(shù)結(jié)構(gòu)，繼承在上層運(yùn)算的結(jié)果進(jìn)行下層的運(yùn)算。
首先，進(jìn)行姿勢(shì)的分類。使用將視線設(shè)為水平時(shí)的俯仰角和側(cè)轉(zhuǎn)角將臉的姿勢(shì)進(jìn)行分類。關(guān)于俯仰角，分為-90度～-25度、-25度～+25度、+25度～+90度三級(jí)，關(guān)于側(cè)轉(zhuǎn)角，分為-90度～-65度、-65度～-25度、-25度～+25度、+25度～+65度、+65度～+90度五級(jí)，將臉的姿勢(shì)分為共計(jì)15個(gè)離散組。圖6是平均了各姿勢(shì)組的學(xué)習(xí)數(shù)據(jù)的圖。
其次，構(gòu)成樹(shù)結(jié)構(gòu)的識(shí)別器。圖7是實(shí)際按姿勢(shì)進(jìn)行分類的臉檢測(cè)識(shí)別器的樹(shù)結(jié)構(gòu)的結(jié)構(gòu)，每個(gè)圓表示一系列弱假設(shè)組(節(jié)點(diǎn))，內(nèi)部表示的15個(gè)框指的是圖6所代表的15個(gè)姿勢(shì)組。被涂抹的姿勢(shì)組是在該弱假設(shè)組的學(xué)習(xí)中使用的樣本姿勢(shì)組。另外，朝向左下方的箭頭表示以弱假設(shè)組的評(píng)價(jià)產(chǎn)生中止的情況，在沒(méi)有中止地通過(guò)的情況下，表示向右通過(guò)進(jìn)入下一弱假設(shè)組。當(dāng)?shù)竭_(dá)右端時(shí)，評(píng)價(jià)結(jié)束。根的弱假設(shè)組使用全部的姿勢(shì)樣本進(jìn)行學(xué)習(xí)。例如，在選擇了100個(gè)弱假設(shè)的定時(shí)引起分支。在此，分為正面和右半面、左半面三個(gè)姿勢(shì)組。正面進(jìn)一步分為上、正中、下三個(gè)，正中進(jìn)一步分為正中、略靠右、略靠左，右半面和左半面之后都分為上、正中、下，進(jìn)行最終判斷。
接著，表示學(xué)習(xí)的過(guò)程。通過(guò)將上述像素特征用于弱假設(shè)的AdaBoost的學(xué)習(xí)求出各節(jié)點(diǎn)。在此，控制從提供的學(xué)習(xí)樣本和上位(親)節(jié)點(diǎn)向下位(子)節(jié)點(diǎn)的結(jié)果繼承。各節(jié)點(diǎn)的學(xué)習(xí)所使用的樣本如下地進(jìn)行選擇。關(guān)于正樣本(臉圖像)，根據(jù)樹(shù)結(jié)構(gòu)的定義使用屬于對(duì)應(yīng)的姿勢(shì)組的全部樣本。關(guān)于負(fù)樣本(非臉圖像)，在根節(jié)點(diǎn)上投入全部樣本，之后，父節(jié)點(diǎn)的學(xué)習(xí)結(jié)果將不低于中止閾值的樣本用于子節(jié)點(diǎn)的學(xué)習(xí)。結(jié)果的繼承如下進(jìn)行。當(dāng)結(jié)束在各節(jié)點(diǎn)的學(xué)習(xí)時(shí)，得到對(duì)各樣本的權(quán)重D和各樣本的權(quán)重多數(shù)決定F(x)的結(jié)果。通過(guò)上述的樣本選擇方法，在子節(jié)點(diǎn)使用的樣本成為父節(jié)點(diǎn)的子集，因此只將權(quán)重和多數(shù)決定結(jié)果之中在子節(jié)點(diǎn)利用的部分傳遞給子節(jié)點(diǎn)。關(guān)于權(quán)重，總和不會(huì)成為1，因此，重新進(jìn)行歸一化使得正樣本和負(fù)樣本的總和分別成為0.5。權(quán)重多數(shù)決定在計(jì)算中止閾值時(shí)需要，但是在子節(jié)點(diǎn)中新加入的弱假設(shè)加到從父節(jié)點(diǎn)繼承的權(quán)重多數(shù)決定上。由此，進(jìn)行反映了在父節(jié)點(diǎn)中選擇的特征的判斷。
識(shí)別時(shí)，也與學(xué)習(xí)時(shí)相同，從根節(jié)點(diǎn)進(jìn)行評(píng)價(jià)。當(dāng)在根節(jié)點(diǎn)產(chǎn)生中止，則評(píng)價(jià)結(jié)束，輸出-1(非臉)。通過(guò)了父節(jié)點(diǎn)的圖像權(quán)重多數(shù)決定F被分配給各子節(jié)點(diǎn)。分支的子節(jié)點(diǎn)依次進(jìn)行評(píng)價(jià)。當(dāng)在分支前端產(chǎn)生中止時(shí)，返回到原來(lái)的根部，評(píng)價(jià)剩余的子節(jié)點(diǎn)。當(dāng)在某個(gè)分支沒(méi)有中止地到達(dá)末端位置時(shí)，判斷為臉，并將與末端節(jié)點(diǎn)對(duì)應(yīng)的姿勢(shì)組作為輸入圖像的臉的朝向進(jìn)行輸出。當(dāng)哪個(gè)分支前端都沒(méi)有到達(dá)末端時(shí)，判斷為非臉圖像。
在本實(shí)施方式中，圖像評(píng)價(jià)部210通過(guò)上述方法進(jìn)行臉圖像的檢測(cè)，作為檢測(cè)出的臉角度，例如輸出圖7所示的各識(shí)別器的編號(hào)(L4、L5等)。另外，圖像評(píng)價(jià)部210還輸出檢測(cè)出的臉圖像的數(shù)目、大小、以及攝像圖像中的位置信息。圖像評(píng)價(jià)部210，為了輸出檢測(cè)出的臉圖像的數(shù)目、大小、以及攝像圖像中的位置信息，可以使用公知的臉檢測(cè)方法。
返回圖4，繼續(xù)對(duì)信息處理裝置102的功能結(jié)構(gòu)進(jìn)行說(shuō)明。臉識(shí)別部214，根據(jù)圖像評(píng)價(jià)部210從攝像圖像中檢測(cè)出的臉圖像，確定與該臉圖像對(duì)應(yīng)的人物。臉識(shí)別部214，將預(yù)先登記的臉圖像的數(shù)據(jù)與根據(jù)該臉圖像的數(shù)據(jù)確定的人物名字、ID等關(guān)聯(lián)進(jìn)行保存。而且，通過(guò)比較檢測(cè)出的臉圖像、和預(yù)先登記的臉圖像數(shù)據(jù)，確定與檢測(cè)出的臉圖像對(duì)應(yīng)的人物。臉識(shí)別部214，對(duì)從同步攝像圖像獲取部202獲取的以共同定時(shí)拍攝的多個(gè)攝像圖像之中、一個(gè)以上攝像圖像中的臉圖像確定的人物，將該人物的名字與以共同定時(shí)拍攝的多個(gè)攝像圖像全部相關(guān)聯(lián)存儲(chǔ)在出場(chǎng)人物存儲(chǔ)部212。
出場(chǎng)人物存儲(chǔ)部212，將臉識(shí)別部214根據(jù)從同步攝像圖像獲取部202獲取的多個(gè)攝像圖像的至少一個(gè)所確定的人物的信息，與多個(gè)攝像圖像的全部相關(guān)聯(lián)進(jìn)行存儲(chǔ)。在以共同定時(shí)拍攝的多個(gè)攝像圖像中，作為被攝體拍攝相同人物的可能性高，但是，根據(jù)人物的臉的朝向等，即使拍攝在攝像圖像中，也存在由圖像評(píng)價(jià)部210無(wú)法作為臉圖像而檢測(cè)的情況、臉識(shí)別部214無(wú)法進(jìn)行臉識(shí)別的情況。因此，既使是根據(jù)多個(gè)攝像圖像中的一個(gè)確定的人物，也假設(shè)為拍攝在以共同定時(shí)拍攝的其他攝像圖像中，其人物的信息(名字、ID等)與全部攝像圖像相關(guān)聯(lián)登記在出場(chǎng)人物存儲(chǔ)部212。由此，例如用戶希望閱覽或下載拍攝有自己的攝像圖像時(shí)，信息處理裝置102獲取用戶的ID、名字，通過(guò)將與存儲(chǔ)在出場(chǎng)人物存儲(chǔ)部212對(duì)應(yīng)的ID或者名字相關(guān)聯(lián)的攝像圖像呈現(xiàn)給用戶，能夠提供全部拍攝有用戶的攝像圖像。
位置信息獲取部204，分別從照相機(jī)104a、104b、104c獲取攝像時(shí)的各照相機(jī)的位置信息，將獲取的位置信息提供給被攝體相同性判斷部216。
攝像方位獲取部206，分別從照相機(jī)104a、104b、104c獲取攝像時(shí)的攝像方位信息，將獲取的攝像方位信息提供給被攝體相同性判斷部216。
攝像角度獲取部208，分別從各自的照相機(jī)104a、104b、104c獲取攝像時(shí)的傾斜角信息，將獲取的傾斜角信息提供給被攝體相同性判斷部216。
被攝體相同性判斷部216，獲取照相機(jī)104a、104b、104c的各自攝像時(shí)的位置信息、攝像方位信息、以及傾斜角信息，判斷由各照相機(jī)104拍攝的被攝體是否相同。被攝體相同性判斷部216，例如根據(jù)位置信息，在某照相機(jī)104a與其他照相機(jī)104b、104c大于或等于規(guī)定距離的情況下，判斷為照相機(jī)104a的被攝體與照相機(jī)104b、104c的被攝體不相同，并將該情況通知給優(yōu)先級(jí)賦予部218。另外，被攝體相同性判斷部216，在照相機(jī)104a、104b、104c相互位于比規(guī)定距離更近的位置的情況下，也能夠根據(jù)攝像方位或者各傾斜角，識(shí)別各照相機(jī)104的被攝體不相同，并將該情況通知給優(yōu)先級(jí)賦予部218。
優(yōu)先級(jí)賦予部218，根據(jù)由圖像評(píng)價(jià)部210對(duì)各攝像圖像賦予的評(píng)價(jià)值，對(duì)多個(gè)攝像圖像的每一個(gè)賦予優(yōu)先級(jí)。詳細(xì)地說(shuō)，優(yōu)先級(jí)賦予部218，根據(jù)由圖像評(píng)價(jià)部210基于臉圖像的臉角度而賦予的評(píng)價(jià)值，對(duì)包含人物正面臉圖像的攝像圖像、賦予比包含人物正面臉以外的角度的臉攝像圖像高的優(yōu)先級(jí)。另外，優(yōu)先級(jí)賦予部218，根據(jù)圖像評(píng)價(jià)部210基于臉圖像的尺寸而賦予的評(píng)價(jià)值，對(duì)臉圖像的尺寸大于或等于規(guī)定值的攝像圖像、賦予比臉圖像的尺寸小于規(guī)定值的攝像圖像高的優(yōu)先級(jí)。另外，優(yōu)先級(jí)賦予部218，根據(jù)圖像評(píng)價(jià)部210基于攝像圖像中的臉圖像的位置而賦予的評(píng)價(jià)值，對(duì)臉圖像距攝像圖像中心比規(guī)定距離近的攝像圖像、賦予比臉圖像距攝像圖像中心比規(guī)定距離遠(yuǎn)的攝像圖像高的優(yōu)先級(jí)。另外，優(yōu)先級(jí)賦予部210，也可以按圖像評(píng)價(jià)部檢測(cè)的臉圖像的數(shù)目多的順序賦予高的優(yōu)先級(jí)。
在本實(shí)施方式中，優(yōu)先級(jí)賦予部210考慮檢測(cè)的臉圖像的數(shù)目、臉的角度、臉圖像的尺寸、臉圖像位置的全部，對(duì)各攝像圖像賦予優(yōu)先級(jí)。詳細(xì)情況參照?qǐng)D10進(jìn)行敘述。另外，優(yōu)先級(jí)賦予部218，可以著眼于攝像圖像中的特定人物，對(duì)各攝像圖像賦予優(yōu)先級(jí)。詳細(xì)情況參照?qǐng)D13進(jìn)行敘述。優(yōu)先級(jí)賦予部218，對(duì)各攝像圖像賦予了優(yōu)先級(jí)后，將攝像圖像與順序相對(duì)應(yīng)，提供給顯示控制部220。
顯示控制部220，根據(jù)與各攝像圖像相對(duì)應(yīng)的優(yōu)先級(jí)，對(duì)從優(yōu)先級(jí)賦予部218獲取的攝像圖像，在顯示裝置106上優(yōu)先顯示優(yōu)先級(jí)高的攝像圖像。詳細(xì)地說(shuō)，顯示控制部220，按優(yōu)先級(jí)的順序從優(yōu)先級(jí)高的攝像圖像開(kāi)始依次顯示在顯示裝置106上。另外，顯示控制部220也可以將各攝像圖像按優(yōu)先級(jí)的順序從優(yōu)先級(jí)高的攝像圖像開(kāi)始改變圖像大小進(jìn)行顯示。以上說(shuō)明了信息處理裝置102的功能結(jié)構(gòu)。
信息處理流程其次，根據(jù)圖8～圖13說(shuō)明信息處理裝置102進(jìn)行的信息處理的流程。首先，參照?qǐng)D8～圖11，說(shuō)明如下情況的信息處理的流程從多個(gè)攝像圖像中檢測(cè)出更多的臉圖像，對(duì)檢測(cè)出的臉圖像的臉面向正面的比例高、檢測(cè)出的臉圖像的尺寸是大尺寸的比例高、并且檢測(cè)出的臉圖像在距攝像圖像中心近的位置的比例高的圖像賦予高的優(yōu)先級(jí)。其次，參照?qǐng)D12～圖13，說(shuō)明如下情況的信息處理的流程對(duì)從攝像圖像中檢測(cè)出臉圖像并通過(guò)臉識(shí)別處理確定的人物，對(duì)該人物臉的朝向更接近正面、該人物臉圖像更大、并且其位置在距攝像圖像中心近的攝像圖像賦予高的優(yōu)先級(jí)。
首先，如圖8所示，信息處理裝置102從多個(gè)照相機(jī)104獲取各照相機(jī)104以共同定時(shí)拍攝的攝像圖像(S100)。當(dāng)獲取攝像圖像時(shí)，信息處理裝置102以攝像圖像為對(duì)象進(jìn)行臉圖像的檢測(cè)(S102)。而且，信息處理裝置102根據(jù)檢測(cè)出的臉圖像的狀態(tài)決定評(píng)價(jià)值(S104)。當(dāng)對(duì)全部攝像圖像進(jìn)行臉圖像的檢測(cè)和評(píng)價(jià)值的決定時(shí)(S106)，信息處理裝置102根據(jù)各攝像圖像的評(píng)價(jià)值決定優(yōu)先級(jí)(S108)。而且，信息處理裝置102，根據(jù)在S108決定的各攝像圖像的優(yōu)先級(jí)，按優(yōu)先級(jí)的順序在顯示裝置106上顯示攝像圖像(S110)。
根據(jù)上述處理，信息處理裝置102可以按優(yōu)先級(jí)的順序顯示以共同定時(shí)拍攝的多個(gè)攝像圖像。在圖10表示了通過(guò)信息處理裝置102對(duì)攝像圖像賦予評(píng)價(jià)值、和基于評(píng)價(jià)值賦予的優(yōu)先級(jí)的例子。
信息處理裝置102如圖10的(a)所示，對(duì)各攝像圖像通過(guò)在檢測(cè)臉數(shù)310、臉角度312、臉尺寸314、臉位置316的各項(xiàng)目中輸入值來(lái)進(jìn)行各攝像圖像的評(píng)價(jià)。檢測(cè)臉數(shù)310是從各攝像圖像中檢測(cè)出的臉圖像的數(shù)目。在圖示的例子中，從攝像圖像A302中檢測(cè)出5個(gè)，從攝像圖像B304中檢測(cè)出7個(gè)，從攝像圖像C306中檢測(cè)出2個(gè)臉圖像。
臉角度312表示檢測(cè)出的臉圖像之中作為正面臉的臉圖像的數(shù)目和作為側(cè)向臉的臉圖像的數(shù)目。正面臉和側(cè)向臉，例如也可以將圖7所示的各識(shí)別器編號(hào)(L4、L5等)預(yù)先分別與正面臉或者側(cè)向臉相對(duì)應(yīng)，根據(jù)輸出的識(shí)別器編號(hào)決定臉圖像是正面臉還是側(cè)向臉。即，例如當(dāng)檢測(cè)出的臉圖像的臉朝向是與L4、L7、L8的識(shí)別器對(duì)應(yīng)的朝向時(shí)，作為正面臉進(jìn)行計(jì)數(shù)。另一方面，當(dāng)檢測(cè)出的臉圖像的臉朝向是與L4、L5、L6以外的識(shí)別器對(duì)應(yīng)的朝向時(shí)，作為側(cè)向臉進(jìn)行計(jì)數(shù)。在圖示的例子中，從攝像圖像A302中檢測(cè)出的五個(gè)臉圖像中，三個(gè)是正面臉，兩個(gè)是側(cè)向臉。另外，從攝像圖像B304中檢測(cè)出的七個(gè)臉圖像中，四個(gè)是正面臉，三個(gè)是側(cè)向臉。另外，從攝像圖像C306中檢測(cè)出的兩個(gè)臉圖像中兩個(gè)都是側(cè)向臉。
臉尺寸314表示將檢測(cè)出的臉圖像尺寸分為大、中、小三類時(shí)的從攝像圖像中檢測(cè)出的臉圖像的各尺寸數(shù)。設(shè)臉圖像的尺寸大于或等于第一規(guī)定值為大，小于第一規(guī)定值且大于或等于第二規(guī)定值為中，小于第二規(guī)定值為小。在圖示的例子中，從攝像圖像A302中檢測(cè)出的五個(gè)臉圖像中，兩個(gè)臉圖像尺寸屬于大，兩個(gè)臉圖像尺寸屬于中，一個(gè)臉圖像尺寸屬于小。另外，從攝像圖像B304中檢測(cè)出的七個(gè)臉圖像中，五個(gè)臉圖像尺寸屬于大，兩個(gè)臉圖像尺寸屬于中。另外，從攝像圖像C306中檢測(cè)出的兩個(gè)臉圖像的尺寸都屬于中。
臉位置316表示檢測(cè)出的臉圖像在攝像圖像整體中的位置。設(shè)臉圖像的位置距攝像圖像中心在規(guī)定距離以內(nèi)的情況為中央，除此之外各自為上、下、左、右。在圖示的例子中，從攝像圖像A302檢測(cè)出的五個(gè)臉圖像中，兩個(gè)位于攝像圖像中央，一個(gè)位于上面，兩個(gè)位于下面。另外，從攝像圖像B304檢測(cè)的七個(gè)臉圖像中，四個(gè)位于攝像圖像的中央，兩個(gè)位于左側(cè)，一個(gè)位于右側(cè)。另外，從攝像圖像C306檢測(cè)出的兩個(gè)臉圖像都位于左側(cè)。
分值308，表示優(yōu)先級(jí)賦予部218為了賦予各攝像圖像的順序而對(duì)攝像圖像賦予的分值。優(yōu)先級(jí)賦予部218，按檢測(cè)出的臉的數(shù)目、臉角度、臉尺寸、臉位置，將保存在分值308欄中的分值賦予各攝像圖像進(jìn)行加法運(yùn)算，從加法運(yùn)算結(jié)果的分值高的攝像圖像開(kāi)始按順序賦予高順序。具體地說(shuō)，在圖示的例子中，優(yōu)先級(jí)賦予部218，對(duì)檢測(cè)出的臉圖像的數(shù)目各賦予1分值，對(duì)臉圖像是正面臉圖像賦予5分值，對(duì)臉角度是側(cè)向臉圖像賦予3分值。另外，優(yōu)先級(jí)賦予部218，對(duì)臉尺寸是大的臉圖像賦予5分值，對(duì)中等的臉圖像賦予3分值，對(duì)小的臉圖像賦予1分值，對(duì)臉圖像位置是攝像圖像中央的臉圖像賦予5分值，對(duì)中央以外位置的臉圖像賦予2分值。
在圖10的(b)表示了優(yōu)先級(jí)賦予部218對(duì)圖10的(a)所示的攝像圖像A302、攝像圖像B304、攝像圖像C306計(jì)算分值的例子。符號(hào)318是優(yōu)先級(jí)賦予部218對(duì)攝像圖像A302計(jì)算分值的例子。關(guān)于檢測(cè)臉數(shù)，由于從攝像圖像A302中檢測(cè)出的檢測(cè)臉數(shù)是5，因此，對(duì)臉的數(shù)目各賦予1分值，成為5分值。關(guān)于臉角度，從攝像圖像A302檢測(cè)出的臉圖像的臉角度，正面是3，側(cè)向是2，因此對(duì)正面臉各賦予5分值，對(duì)側(cè)向臉各賦予3分值，(3×5)+(2×3)＝21。關(guān)于臉的尺寸，從攝像圖像A302檢測(cè)的臉圖像的尺寸，大的是2，中等是2，小的是1，因此對(duì)尺寸大的各賦予5分值，對(duì)尺寸中等的各賦予3分值，對(duì)尺寸小的各賦予1分值，(2×5)+(2×3)+(1×1)＝17。關(guān)于臉的位置，從攝像圖像A302檢測(cè)出的臉圖像的在攝像圖像中的位置，在中央是2，除中央以外是3，因此，對(duì)中央各賦予5分值，對(duì)中央以外各賦予2分值，(2×5)+(3×2)＝16。而且，分值的總計(jì)如圖所示成為59分值。
優(yōu)先級(jí)賦予部218，與上述同樣，還計(jì)算攝像圖像B304和攝像圖像C306，計(jì)算結(jié)果如圖所示，攝像圖像B304為129分值，攝像圖像C306為18分值。優(yōu)先級(jí)賦予部218，當(dāng)完成對(duì)全部攝像圖像的分值計(jì)算時(shí)，按分值高的優(yōu)先級(jí)賦予順序。在圖示的例子中，優(yōu)先級(jí)賦予部218，賦予攝像圖像B304以1位，賦予攝像圖像A302以2位，賦予攝像圖像C306以3位。在各攝像圖像上賦予優(yōu)先級(jí)后，按優(yōu)先級(jí)在顯示裝置106上順序顯示各攝像圖像。顯示的例子表示在圖11。
圖11A是在顯示裝置106上按各攝像圖像的優(yōu)先級(jí)的順序顯示各攝像圖像的例子。如圖11A所示，最先在顯示裝置106上顯示賦予了圖10的(b)的分值計(jì)算結(jié)果為1位的攝像圖像B304。其次，在顯示裝置106上顯示為2位的攝像圖像A302，最后在顯示裝置106上顯示為3位的攝像圖像C306。各攝像圖像顯示在顯示裝置106上的期間，可以相同，也可以使優(yōu)先級(jí)越高的攝像圖像顯示越長(zhǎng)的期間。
圖11B是在顯示裝置106上按各攝像圖像的優(yōu)先級(jí)的順序變化各攝像圖像的例子。如圖11B所示，賦予了圖10的(b)的分值計(jì)算結(jié)果為1位的攝像圖像B304、以比其他攝像圖像大的尺寸顯示在顯示裝置106上。為2位的攝像圖像A302以攝像圖像的其次的大尺寸顯示在顯示裝置106上，為3位的攝像圖像C306以最小的大小顯示在顯示裝置106上。
信息處理裝置102，如上所述，以共同定時(shí)拍攝的多個(gè)攝像圖像按優(yōu)先級(jí)的順序顯示在顯示裝置106上。另外，信息處理裝置102還可以進(jìn)行判斷以共同定時(shí)拍攝的多個(gè)攝像圖像的被攝體是否相同的處理。圖9中表示了信息處理裝置102進(jìn)行的被攝體相同性判斷處理的流程。
如圖9所示，信息處理裝置102首先獲取以共同定時(shí)拍攝的多個(gè)攝像圖像(S200)。此后，信息處理裝置102從拍攝了各攝像圖像的各照相機(jī)中獲取攝像時(shí)的照相機(jī)的位置信息、攝像方位信息、以及攝像角度信息(S202)。而且，判斷各照相機(jī)的被攝體是否相同(S204)，當(dāng)判斷為被攝體相同時(shí)，進(jìn)入臉圖像的檢測(cè)(S206)。另一個(gè)面，在S204中，被攝體判斷為與其他攝像圖像不相同的攝像圖像，從臉圖像的檢測(cè)對(duì)象中排除(S208)。
上面，說(shuō)明了如下的信息處理的流程從多個(gè)攝像圖像檢測(cè)出更多的臉圖像，檢測(cè)出的臉圖像的臉面向正面的比例高、檢測(cè)出的臉圖像的尺寸是大尺寸的比例高、并且對(duì)檢測(cè)出的臉圖像距攝像圖像中心近的位置的比例高的圖像賦予以更高的優(yōu)先級(jí)。下面參照?qǐng)D12～圖13說(shuō)明對(duì)從攝像圖像中檢測(cè)出的臉圖像通過(guò)臉識(shí)別特定的人物，在該人物的臉朝向更接近正面、該人物的臉圖像更大、并且對(duì)其位置距攝像圖像中心近的攝像圖像賦予高的優(yōu)先級(jí)時(shí)的信息處理的流程。
信息處理裝置102，首先獲取以共同定時(shí)拍攝的多個(gè)攝像圖像(S300)。此后，信息處理裝置102從獲取的攝像圖像中檢測(cè)出臉圖像(S302)。接著，信息處理裝置102對(duì)檢測(cè)出的臉圖像進(jìn)行臉識(shí)別的處理(S304)。而且，信息處理裝置102根據(jù)由臉識(shí)別處理確定的人物的臉圖像的檢測(cè)結(jié)果來(lái)決定評(píng)價(jià)值(S306)。而且，對(duì)獲取的全部攝像圖像，進(jìn)行根據(jù)臉檢測(cè)、臉識(shí)別、所確定人物的臉圖像的檢測(cè)結(jié)果來(lái)決定評(píng)價(jià)值的處理(S308)，之后，信息處理裝置102根據(jù)與所確定的人物有關(guān)的各攝像圖像的評(píng)價(jià)值，決定優(yōu)先級(jí)(S310)。而且，信息處理裝置102按優(yōu)先級(jí)的順序在顯示裝置106上顯示各攝像圖像(S312)。
通過(guò)上述處理，信息處理裝置102能夠按對(duì)特定人物的優(yōu)先級(jí)的順序顯示以共同定時(shí)拍攝的多個(gè)攝像圖像。在圖13上表示了由信息處理裝置102賦予攝像圖像的評(píng)價(jià)值、和根據(jù)評(píng)價(jià)值賦予優(yōu)先級(jí)的例子。
圖13的(a)表示了舉出攝像圖像A402和攝像圖像B406作為以共同定時(shí)拍攝的兩個(gè)攝像圖像的例子，對(duì)從各攝像圖像中進(jìn)行了臉識(shí)別的登記用戶X和登記用戶Y，根據(jù)臉圖像的狀態(tài)而分別決定評(píng)價(jià)值。
臉角度408表示臉圖像的臉角度，在本例中，直接將圖7的識(shí)別器編號(hào)用作臉的角度。臉尺寸410是臉圖像的大小，與圖10的臉尺寸314同樣地分為大、中、小。臉位置412是在攝像圖像整體中的臉圖像位置，與圖10的臉位置316同樣地分為中央、左、右、上、下。
在圖示的例子中，從攝像圖像A402和攝像圖像B406兩者中檢測(cè)出登記用戶X和登記用戶Y的臉圖像。可知登記用戶X的臉圖像，在攝像圖像A402中臉角度是姿勢(shì)L4、尺寸是中、位置是攝像圖像的中央。另一方面，攝像圖像B406中登記用戶X的臉圖像、臉角度是姿勢(shì)L14、尺寸是中、位置是攝像圖像的右端。另外，可知登記用戶Y的臉圖像，在攝像圖像A402中臉角度是姿勢(shì)L11、尺寸是大、位置是攝像圖像的左端。另一方面，在攝像圖像B406中的登記用戶Y的臉圖像、臉角度是姿勢(shì)L15、尺寸是大、位置是攝像圖像的中央。
將優(yōu)先級(jí)賦予部218用于順序賦予的分值表示在圖13的(b)、(c)、(d)中。圖13的(b)是與臉角度408有關(guān)的分值，與姿勢(shì)414和分值416相關(guān)聯(lián)。圖13的(c)是與臉尺寸410有關(guān)的分值，與臉尺寸418和分值416相關(guān)聯(lián)。圖13的(d)是與臉位置412有關(guān)的分值，與臉位置420和分值416相關(guān)聯(lián)。優(yōu)先級(jí)賦予部218對(duì)由圖像評(píng)價(jià)部210決定的評(píng)價(jià)值賦予規(guī)定的分值進(jìn)行總計(jì)，按總計(jì)分值高的順序賦予高的優(yōu)先級(jí)。
在圖13的(e)中表示優(yōu)先級(jí)賦予部218，根據(jù)圖13的(a)計(jì)算登記用戶X、登記用戶Y各自的各攝像圖像的分值的例子。由符號(hào)421表示與登記用戶X有關(guān)的攝像圖像A的分值的計(jì)算例。由于攝像圖像A402中的登記用戶X的臉角度是L4，因此，參照?qǐng)D13的(b)賦予7分值。另外，攝像圖像A402中的登記用戶X的臉尺寸是中，因此，參照?qǐng)D13的(c)賦予3分值。另外，由于攝像圖像A402中的登記用戶X的臉位置是中央，因此，參照?qǐng)D13的(d)賦予5分值。其結(jié)果，與登記用戶X有關(guān)的攝像圖像A402的總計(jì)分值為15分值。同樣地，當(dāng)求取與登記用戶X有關(guān)的攝像圖像B406的總計(jì)分值時(shí)，為7分值。因此，優(yōu)先級(jí)賦予部218，對(duì)于登記用戶X，對(duì)攝像圖像A402賦予以1位，對(duì)攝像圖像B406賦予以2位。
另外，優(yōu)先級(jí)賦予部218，對(duì)于登記用戶Y也同樣地求取攝像圖像A402和攝像圖像B406的分值，根據(jù)分值賦予優(yōu)先級(jí)。其結(jié)果，對(duì)于登記用戶Y，攝像圖像A402為8分值，攝像圖像B406為11分值，對(duì)攝像圖像B406賦予以1位，對(duì)攝像圖像A402賦予以2位。
如上所述，通過(guò)優(yōu)先級(jí)賦予部218，在對(duì)各人物在各攝像圖像中賦予了優(yōu)先級(jí)后，針對(duì)各人物按優(yōu)先級(jí)的順序在顯示裝置106顯示攝像圖像。
以上，作為本發(fā)明的第一實(shí)施方式，說(shuō)明了將與本發(fā)明有關(guān)的照相機(jī)系統(tǒng)應(yīng)用在如下的照相機(jī)系統(tǒng)100該照相機(jī)系統(tǒng)100由多個(gè)照相機(jī)以共同定時(shí)拍攝相同被攝體，根據(jù)被攝體的拍攝效果，在顯示裝置上顯示由各照相機(jī)拍攝的多個(gè)攝像圖像。根據(jù)與本實(shí)施方式有關(guān)的照相機(jī)系統(tǒng)100，在以共同定時(shí)拍攝的多個(gè)攝像圖像中，根據(jù)檢測(cè)出的臉圖像的數(shù)目、臉圖像的臉角度、臉圖像的尺寸、以及在攝像圖像中的臉圖像位置等基準(zhǔn)賦予優(yōu)先級(jí)。而且，按賦予的優(yōu)先級(jí)順序在顯示裝置上顯示各攝像圖像。為此，照相機(jī)系統(tǒng)100，能夠從多個(gè)照相機(jī)以共同定時(shí)拍攝相同被攝體的多個(gè)攝像圖像中，自動(dòng)選擇被攝體拍攝效果良好的攝像圖像，并呈現(xiàn)給用戶。另外，照相機(jī)系統(tǒng)100，能夠通過(guò)使用各照相機(jī)的攝像時(shí)的位置信息、攝像方位信息、以及傾斜角信息，判斷攝像對(duì)象的相同性。
第二實(shí)施方式下面，作為本發(fā)明第二實(shí)施方式，說(shuō)明與本發(fā)明有關(guān)的照相機(jī)系統(tǒng)應(yīng)用在如下的照相機(jī)系統(tǒng)該照相機(jī)系統(tǒng)由多個(gè)照相機(jī)以共同定時(shí)拍攝相同被攝體，根據(jù)拍攝的照相機(jī)的位置，在顯示裝置上顯示由各照相機(jī)拍攝的多個(gè)攝像圖像。
與第二實(shí)施方式有關(guān)的照相機(jī)系統(tǒng)整體結(jié)構(gòu)、信息處理裝置的硬件結(jié)構(gòu)，由于與第一實(shí)施方式相同，因此省略說(shuō)明。信息處理裝置的功能結(jié)構(gòu)，只要具備與第一實(shí)施方式有關(guān)的信息處理裝置102的功能結(jié)構(gòu)中的同步攝像圖像獲取部202、位置信息獲取部204、顯示控制部220即可。即，根據(jù)由位置信息獲取部204獲取的各照相機(jī)位置信息，對(duì)同步攝像圖像獲取部202從各照相機(jī)獲取的攝像圖像，顯示控制部220按與各照相機(jī)間的位置關(guān)系對(duì)應(yīng)的位置關(guān)系在顯示裝置106上顯示各攝像圖像。
與本實(shí)施方式有關(guān)的信息處理裝置執(zhí)行的信息處理流程表示在圖14。如圖14所示，信息處理裝置首先獲取以共同定時(shí)拍攝的多個(gè)攝像圖像、各照相機(jī)的位置信息(S400)。而且，信息處理裝置按與各照相機(jī)位置關(guān)系對(duì)應(yīng)的位置關(guān)系在顯示裝置上顯示各攝像圖像(S402)。
圖15以及圖16表示了由與本實(shí)施方式有關(guān)的照相機(jī)系統(tǒng)拍攝的攝像圖像顯示在顯示裝置上的例子。如圖15所示，被攝體130由多個(gè)照相機(jī)104a、104b、104c以共同定時(shí)被拍攝。由各照相機(jī)拍攝的攝像圖像如圖16所示顯示在顯示裝置106上。在圖16中，攝像圖像504c是由照相機(jī)104c拍攝的攝像圖像，攝像圖像504b是由照相機(jī)104b拍攝的攝像圖像，攝像圖像504a是由照相機(jī)104a拍攝的攝像圖像。如圖15所示，夾著照相機(jī)104b配置有照相機(jī)104a和照相機(jī)104c。為了與這種照相機(jī)間的位置關(guān)系對(duì)應(yīng)，在顯示裝置106上由照相機(jī)104b拍攝的攝像圖像504b配置在中央，夾著該攝像圖像504b在兩邊配置攝像圖像504c和攝像圖像504a進(jìn)行顯示。
如上所述，在與本實(shí)施方式有關(guān)的照相機(jī)系統(tǒng)中，能夠以與各照相機(jī)位置關(guān)系對(duì)應(yīng)的位置關(guān)系顯示攝像圖像。通過(guò)以與各照相機(jī)位置關(guān)系對(duì)應(yīng)的位置關(guān)系顯示攝像圖像，用戶看一眼就能掌握在拍攝多個(gè)攝像圖像時(shí)照相機(jī)的位置關(guān)系。
第三實(shí)施方式下面，作為本發(fā)明第三實(shí)施方式，說(shuō)明將與本發(fā)明有關(guān)的照相機(jī)系統(tǒng)應(yīng)用在如下的照相機(jī)系統(tǒng)該照相機(jī)系統(tǒng)由多個(gè)照相機(jī)以共同定時(shí)拍攝相同被攝體，將通過(guò)從各照相機(jī)拍攝的多個(gè)攝像圖像中至少一個(gè)檢測(cè)出的臉圖像確定的人物，與以共同定時(shí)拍攝的全部攝像圖像相關(guān)聯(lián)。
與第三實(shí)施方式有關(guān)的照相機(jī)系統(tǒng)整體結(jié)構(gòu)、信息處理裝置的硬件結(jié)構(gòu)，由于與第一實(shí)施方式相同，因此省略說(shuō)明。信息處理裝置的功能結(jié)構(gòu)，只要具備與第一實(shí)施方式有關(guān)的信息處理裝置102的功能結(jié)構(gòu)中的同步攝像圖像獲取部202、圖像評(píng)價(jià)部210、臉識(shí)別部214、出場(chǎng)人物存儲(chǔ)部212、位置信息獲取部204、攝像方位獲取部206、攝像角度獲取部208、顯示控制部220即可。
即，從同步攝像圖像獲取部202從各照相機(jī)獲取的攝像圖像中，由圖像評(píng)價(jià)部210檢測(cè)出臉圖像，對(duì)檢測(cè)出的臉圖像在臉識(shí)別部214進(jìn)行識(shí)別來(lái)確定人物。而且，將所確定的人物標(biāo)識(shí)符(名字等)與同步攝像圖像獲取部202獲取的多個(gè)攝像圖像相關(guān)聯(lián)而保存在出場(chǎng)人物存儲(chǔ)部212中。另外，也可以根據(jù)由位置信息獲取部204、攝像方位獲取部206、攝像角度獲取部208獲取的各信息，被攝體相同性判斷部216判斷被攝體的相同性，將被攝體被判斷為與其他攝像圖像不同的攝像圖像，從出場(chǎng)人物存儲(chǔ)部212刪除。而且，顯示控制部220在顯示裝置106上顯示存儲(chǔ)在出場(chǎng)人物存儲(chǔ)部212中的攝像圖像。
圖17表示了與本實(shí)施方式有關(guān)的信息處理裝置執(zhí)行的信息處理的流程。如圖17所示，信息處理裝置首先獲取以共同定時(shí)拍攝的多個(gè)攝像圖像(S500)。其次，信息處理裝置以獲取的攝像圖像為對(duì)象檢測(cè)臉圖像(S502)，以檢測(cè)出的臉圖像為對(duì)象進(jìn)行臉識(shí)別(S504)。而且，信息處理裝置將由S504的臉識(shí)別確定的人物標(biāo)識(shí)符與在S500獲取的全部攝像圖像相關(guān)聯(lián)(S506)。之后，信息處理裝置在顯示裝置106上顯示在S506中與所確定的人物相關(guān)聯(lián)的全部攝像圖像。另外，信息處理裝置也可以根據(jù)來(lái)自用戶的要求，下載在S506中與所確定的人物相關(guān)聯(lián)的全部攝像圖像。
如上所述，在與本實(shí)施方式有關(guān)的照相機(jī)系統(tǒng)中可以顯示與所確定的人物相關(guān)聯(lián)的多個(gè)攝像圖像。為此，用戶可以顯示、下載拍攝有自己的全部圖像。
以上參照
了本發(fā)明的最佳實(shí)施方式，但是本發(fā)明并不限于有關(guān)例子。只要是本領(lǐng)域技術(shù)人員，顯而易見(jiàn)在權(quán)利要求范圍所述的范疇內(nèi)，能夠想到各種變更例或者修改例，這些當(dāng)然也屬于在本發(fā)明的技術(shù)范圍之內(nèi)。
例如，在上述實(shí)施方式中，通過(guò)多個(gè)照相機(jī)進(jìn)行無(wú)線通信以共同定時(shí)進(jìn)行了攝像，但是本發(fā)明不限定該例子。例如，也可以通過(guò)使按下各照相機(jī)按鈕的人使定時(shí)同步地按下按鈕，從而各照相機(jī)以共同定時(shí)進(jìn)行拍攝。
另外，在上述實(shí)施方式中，圖像評(píng)價(jià)部210根據(jù)包含在攝像圖像中的臉圖像的狀態(tài)決定評(píng)價(jià)值，但是本發(fā)明并不限于這樣的例子。例如，也可以根據(jù)以攝像時(shí)的照相機(jī)晃動(dòng)為原因的攝像圖像的狀態(tài)、攝像圖像的明亮程度等決定評(píng)價(jià)值。
另外，在上述實(shí)施方式中，圖像評(píng)價(jià)部210設(shè)置在信息處理裝置102中，但是本發(fā)明并不限于這樣的例子。例如，圖像評(píng)價(jià)部210也可以設(shè)置在照相機(jī)側(cè)。
權(quán)利要求
1.一種照相機(jī)系統(tǒng)，通過(guò)通信網(wǎng)將多個(gè)照相機(jī)與從前述多個(gè)照相機(jī)獲取攝像圖像的信息處理裝置連接，其特征在于，前述多個(gè)照相機(jī)具備攝像部，該攝像部拍攝被攝體；攝像同步部，該攝像同步部使攝像定時(shí)相互同步，前述信息處理裝置具備同步攝像圖像獲取部，從前述多個(gè)照相機(jī)獲取由前述各照相機(jī)以共同定時(shí)拍攝的攝像圖像；圖像評(píng)價(jià)部，對(duì)前述同步攝像圖像獲取部獲取的、以前述共同定時(shí)拍攝的多個(gè)攝像圖像的每一個(gè)，根據(jù)規(guī)定的評(píng)價(jià)基準(zhǔn)評(píng)價(jià)前述攝像圖像中的被攝體的狀態(tài)，對(duì)前述各攝像圖像賦予評(píng)價(jià)值；優(yōu)先級(jí)賦予部，根據(jù)前述圖像評(píng)價(jià)部賦予各攝像圖像的前述評(píng)價(jià)值，對(duì)前述多個(gè)攝像圖像的每一個(gè)賦予優(yōu)先級(jí)；顯示控制部，按照前述優(yōu)先級(jí)賦予部賦予各攝像圖像的優(yōu)先級(jí)，在顯示裝置上顯示前述各攝像圖像。
2.一種信息處理裝置，通過(guò)通信網(wǎng)與使拍攝定時(shí)同步來(lái)拍攝被攝體的多個(gè)照相機(jī)連接并從前述照相機(jī)獲取攝像圖像，其特征在于，具備同步攝像圖像獲取部，從前述多個(gè)照相機(jī)獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像；圖像評(píng)價(jià)部，對(duì)前述同步攝像圖像獲取部獲取的、以前述共同定時(shí)拍攝的多個(gè)前述攝像圖像的每一個(gè)，根據(jù)規(guī)定的評(píng)價(jià)基準(zhǔn)評(píng)價(jià)前述攝像圖像中的被攝體的狀態(tài)，對(duì)前述各攝像圖像賦予評(píng)價(jià)值；優(yōu)先級(jí)賦予部，根據(jù)前述圖像評(píng)價(jià)部賦予前述各攝像圖像的前述評(píng)價(jià)值，對(duì)多個(gè)前述攝像圖像的每一個(gè)賦予優(yōu)先級(jí)；顯示控制部，按照前述優(yōu)先級(jí)賦予部賦予前述各攝像圖像的前述優(yōu)先級(jí)，在顯示裝置上顯示前述各攝像圖像。
3.根據(jù)權(quán)利要求2所述的信息處理裝置，其特征在于，前述圖像評(píng)價(jià)部，從前述各攝像圖像中檢測(cè)出人物的臉圖像，根據(jù)檢測(cè)出的前述臉圖像的狀態(tài)，決定前述各攝像圖像的前述評(píng)價(jià)值。
4.根據(jù)權(quán)利要求3所述的信息處理裝置，其特征在于，前述圖像評(píng)價(jià)部，根據(jù)前述檢測(cè)出的臉圖像的臉的角度，決定前述評(píng)價(jià)值，前述優(yōu)先級(jí)賦予部，根據(jù)前述評(píng)價(jià)值，對(duì)包含前述人物的正面臉圖像的前述攝像圖像、賦予比包含前述人物正面臉以外的角度的臉的前述攝像圖像高的優(yōu)先級(jí)。
5.根據(jù)權(quán)利要求3所述的信息處理裝置，其特征在于，前述圖像評(píng)價(jià)部，根據(jù)前述檢測(cè)出的臉圖像的尺寸，決定前述評(píng)價(jià)值，前述優(yōu)先級(jí)賦予部，根據(jù)前述評(píng)價(jià)值，對(duì)前述臉圖像的尺寸大于或等于規(guī)定值的前述攝像圖像、賦予比前述臉圖像的尺寸小于前述規(guī)定值的前述攝像圖像高的優(yōu)先級(jí)。
6.根據(jù)權(quán)利要求3所述的信息處理裝置，其特征在于，前述圖像評(píng)價(jià)部，根據(jù)前述攝像圖像中的前述檢測(cè)出的臉圖像的位置信息，決定前述評(píng)價(jià)值，前述優(yōu)先級(jí)賦予部，根據(jù)前述評(píng)價(jià)值，對(duì)前述臉圖像距前述攝像圖像的中心比規(guī)定距離近的前述攝像圖像、賦予比前述臉圖像距前述攝像圖像的中心比規(guī)定距離遠(yuǎn)的前述攝像圖像高的優(yōu)先級(jí)。
7.根據(jù)權(quán)利要求3所述的信息處理裝置，其特征在于，前述圖像評(píng)價(jià)部，根據(jù)從前述各攝像圖像中檢測(cè)出的臉圖像的數(shù)目，決定前述評(píng)價(jià)值，前述優(yōu)先級(jí)賦予部，根據(jù)前述評(píng)價(jià)值，按前述檢測(cè)出的臉圖像數(shù)目多的順序賦予高的優(yōu)先級(jí)。
8.根據(jù)權(quán)利要求3所述的信息處理裝置，其特征在于，前述圖像評(píng)價(jià)部，根據(jù)從前述各攝像圖像中檢測(cè)出的臉圖像的數(shù)目、和前述檢測(cè)出的臉圖像的臉的角度，決定前述評(píng)價(jià)值，前述優(yōu)先級(jí)賦予部，根據(jù)前述評(píng)價(jià)值，按前述檢測(cè)出的正面臉的圖像數(shù)目多的順序賦予高的優(yōu)先級(jí)。
9.根據(jù)權(quán)利要求3所述的信息處理裝置，其特征在于，還具備臉識(shí)別部，該臉識(shí)別部根據(jù)前述檢測(cè)出的臉圖像，確定與該臉圖像對(duì)應(yīng)的人物，前述圖像評(píng)價(jià)部，根據(jù)前述臉識(shí)別部確定的前述人物的臉圖像的狀態(tài)，決定前述各攝像圖像的前述評(píng)價(jià)值。
10.根據(jù)權(quán)利要求3所述的信息處理裝置，其特征在于，還具備臉識(shí)別部，該臉識(shí)別部根據(jù)前述檢測(cè)出的臉圖像，確定與該圖像對(duì)應(yīng)的人物；出場(chǎng)人物存儲(chǔ)部，從前述同步攝像圖像獲取部獲取的多個(gè)攝像圖像中的至少一個(gè)，將前述臉識(shí)別部確定的人物信息與前述多個(gè)攝像圖像的全部相關(guān)聯(lián)進(jìn)行存儲(chǔ)。
11.根據(jù)權(quán)利要求2所述的信息處理裝置，其特征在于，具備位置信息獲取部，該位置信息獲取部從前述各照相機(jī)獲取表示拍攝被攝體時(shí)的前述各照相機(jī)的位置的攝像位置信息。
12.根據(jù)權(quán)利要求11所述的信息處理裝置，其特征在于，具備攝像方位獲取部，該攝像方位獲取部從前述各照相機(jī)獲取表示拍攝被攝體時(shí)的前述各照相機(jī)的攝像方位的攝像方位信息。
13.根據(jù)權(quán)利要求11所述的信息處理裝置，其特征在于，具備攝像角度獲取部，該攝像角度獲取部從前述照相機(jī)獲取表示拍攝被攝體時(shí)的前述照相機(jī)的傾斜角的攝像角度信息。
14.根據(jù)權(quán)利要求2所述的信息處理裝置，其特征在于，前述顯示控制部，將前述各攝像圖像以前述各攝像圖像的優(yōu)先級(jí)的順序依次顯示在前述顯示裝置上。
15.根據(jù)權(quán)利要求2所述的信息處理裝置，其特征在于，前述顯示控制部，將前述各攝像圖像按前述各攝像圖像的優(yōu)先級(jí)的順序改變圖像的尺寸進(jìn)行顯示。
16.一種信息處理方法，被通過(guò)通信網(wǎng)與使拍攝定時(shí)同步來(lái)拍攝被攝體的多個(gè)照相機(jī)連接并從前述照相機(jī)獲取攝像圖像的信息處理裝置執(zhí)行，其特征在于，包含同步攝像圖像獲取步驟，從前述多個(gè)照相機(jī)獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像；圖像評(píng)價(jià)步驟，對(duì)在前述同步攝像圖像獲取步驟獲取的、以前述共同定時(shí)拍攝的多個(gè)前述攝像圖像的每一個(gè)，根據(jù)規(guī)定的評(píng)價(jià)基準(zhǔn)評(píng)價(jià)前述攝像圖像中的被攝體的狀態(tài)，對(duì)前述各攝像圖像賦予評(píng)價(jià)值；優(yōu)先級(jí)賦予步驟，根據(jù)前述圖像評(píng)價(jià)步驟賦予前述各攝像圖像的前述評(píng)價(jià)值，對(duì)多個(gè)前述攝像圖像的每一個(gè)賦予優(yōu)先級(jí)；顯示控制步驟，按照在前述優(yōu)先級(jí)賦予步驟賦予前述各攝像圖像的前述優(yōu)先級(jí)，在顯示裝置上顯示前述各攝像圖像。
17.一種照相機(jī)，通過(guò)通信網(wǎng)與將圖像顯示在顯示裝置上的信息處理裝置連接并將攝像圖像發(fā)送給前述信息處理裝置，其特征在于，具備攝像部，該攝像部拍攝被攝體；攝像同步部，該攝像同步部使攝像定時(shí)與其他照相機(jī)同步；圖像評(píng)價(jià)部，對(duì)前述攝像部拍攝的攝像圖像，根據(jù)規(guī)定的評(píng)價(jià)基準(zhǔn)評(píng)價(jià)前述攝像圖像中的被攝體的狀態(tài)，對(duì)各攝像圖像賦予評(píng)價(jià)值；攝像圖像發(fā)送部，將前述攝像圖像和前述評(píng)價(jià)值相關(guān)聯(lián)，發(fā)送給前述信息處理裝置。
18.根據(jù)權(quán)利要求17所述的照相機(jī)，其特征在于，前述圖像評(píng)價(jià)部，從前述攝像圖像中檢測(cè)出人物的臉圖像，根據(jù)檢測(cè)出的前述臉圖像的狀態(tài)，決定前述攝像圖像的前述評(píng)價(jià)值。
19.一種信息處理裝置，通過(guò)通信網(wǎng)與使拍攝定時(shí)同步來(lái)拍攝被攝體的多個(gè)照相機(jī)連接并從前述照相機(jī)獲取攝像圖像，其特征在于，具備同步攝像圖像獲取部，從前述多個(gè)照相機(jī)獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像；攝像位置信息獲取部，從前述多個(gè)照相機(jī)獲取表示拍攝被攝體時(shí)的前述各照相機(jī)的位置的攝像位置信息；顯示控制部，根據(jù)前述攝像位置信息，以與前述各照相機(jī)間的位置關(guān)系相對(duì)應(yīng)的位置關(guān)系在顯示裝置上顯示前述各攝像圖像。
20.一種信息處理裝置，通過(guò)通信網(wǎng)與使拍攝定時(shí)同步來(lái)拍攝被攝體的多個(gè)照相機(jī)連接并從前述照相機(jī)獲取攝像圖像，其特征在于，具備同步攝像圖像獲取部，從前述多個(gè)照相機(jī)獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像；臉檢測(cè)部，從前述各攝像圖像中檢測(cè)出人物的臉圖像；臉識(shí)別部，根據(jù)前述檢測(cè)出的臉圖像，確定與該臉圖像對(duì)應(yīng)的人物；出場(chǎng)人物存儲(chǔ)部，從前述同步攝像圖像獲取部獲取的多個(gè)攝像圖像中的至少一個(gè)，將由前述臉識(shí)別部確定的人物的信息與前述多個(gè)攝像圖像的全部相關(guān)聯(lián)進(jìn)行存儲(chǔ)。
全文摘要
一種照相機(jī)系統(tǒng)、信息處理裝置及方法。在與使攝像定時(shí)同步而拍攝被攝體的多個(gè)照相機(jī)連接的信息處理裝置中設(shè)置了同步攝像圖像獲取部，從多個(gè)照相機(jī)獲取由各照相機(jī)以共同定時(shí)拍攝的攝像圖像；圖像評(píng)價(jià)部，對(duì)以同步攝像圖像獲取部獲取的共同定時(shí)拍攝的多個(gè)攝像圖像的每一個(gè)，由規(guī)定的評(píng)價(jià)基準(zhǔn)評(píng)價(jià)攝像圖像中的被攝體狀態(tài)，對(duì)各攝像圖像賦予評(píng)價(jià)值；優(yōu)先級(jí)賦予部，根據(jù)由圖像評(píng)價(jià)部賦予各攝像圖像的評(píng)價(jià)值，對(duì)多個(gè)攝像圖像的每一個(gè)賦予優(yōu)先級(jí)；以及顯示控制部，按照優(yōu)先級(jí)賦予部賦予各攝像圖像的優(yōu)先級(jí)，在顯示裝置上顯示各攝像圖像。
文檔編號(hào)H04N5/225GK1901672SQ20061010354
公開(kāi)日2007年1月24日 申請(qǐng)日期2006年7月21日 優(yōu)先權(quán)日2005年7月21日
發(fā)明者末吉隆彥, 河野通宗, 綾塚祐二, 歷本純一 申請(qǐng)人:索尼株式會(huì)社