專利名稱：圖像處理裝置、圖像處理方法和程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像處理裝置、圖像處理方法和程序。更具體地說，本發(fā)明 涉及用于在確定被表示為圖像內(nèi)容的運動物體(object)的運動之后執(zhí)行合適 操作的技術(shù)。
背景技術(shù)：
關(guān)于圖像抓取裝置(例如，數(shù)字照相機(digital still camera)),用于斗僉測 對象(subject)的運動或變化并抓取運動或變化的靜止圖像的技術(shù)是可用的。
關(guān)于在視頻抓取期間執(zhí)行的靜止圖像的抓取，日本待審查專利申請公開 No. 2006-246361公開了用于當對象的運動很大時、當引起較少的運動模糊時 或當識別面部時自動抓取圖像的方法。
另夕卜，日本待審查專利申請公開No. 2006-121761公開了用于當通過圖像 識別檢測到由用戶指定的部分中亮度或色調(diào)的變化或者圖像中的變化時，自 動抓取靜止圖像的方法。

發(fā)明內(nèi)容
然而，在現(xiàn)有技術(shù)中，通過簡單方法不能精確地檢測到用戶想要的對象 的運動從而抓取運動并將運動存儲為例如靜止圖像。
例如，當使用運動檢測來抓取靜止圖像時，所檢測到的運動通常與用戶 想要的運動不匹配。結(jié)果，很有可能出現(xiàn)抓取了許多用戶不期望的靜止圖像
的情況。
例如，假設(shè)當相對于給定風景抓取被設(shè)置為對象的物體或生物(living thing)的圖像時，使用運動檢測來執(zhí)行自動圖像抓取。在這種情況下，當運動物體的想要的運動沒有出現(xiàn)時，但是當風吹走了背景中的樹葉時抓取靜止圖像。
也就是說，使用運動檢測的自動圖像抓取(在下文中，稱為運動檢測自 動圖像抓取)可能不能實現(xiàn)根據(jù)用戶的使用目的的合適的圖像抓取。
熟練的圖像抓取技術(shù)通常用于抓取特定運動物體的圖像。因此，對于不 熟練的人來說，難以在不使用運動檢測自動圖像抓取功能的情況下抓取運動 物體的圖像。
本發(fā)明提出了在圖像抓取期間，在確定目標(target)運動物體的運動之 后，用于實現(xiàn)靜止圖像抓取的技術(shù)。
根據(jù)本發(fā)明的實施例，圖像處理裝置包括確定部件，用于確定處理目 標圖像數(shù)據(jù)是否具有匹配之前設(shè)置的運動模式的圖像內(nèi)容；以及有效部件， 用于使確定部件確定為匹配所述運動模式的圖像數(shù)據(jù)有效。
確定部件可以執(zhí)行運動物體檢測處理，用于從一幀圖像數(shù)據(jù)中檢測運 動物體的圖像，并使用所檢測到的運動物體的圖像來確定所述一幀圖像數(shù)據(jù) 是否為組成所述運動模式的候選者；臨時存儲處理，用于臨時存儲在運動物 體檢測處理中被確定為組成所述運動模式的候選者的圖像數(shù)據(jù)；以及模式匹 配確定處理，用于確定在臨時存儲處理中臨時存儲的圖像數(shù)據(jù)是否為匹配運 動模式的圖像。
在這種情況下，在運動物體檢測處理中，確定部件使用從所述一幀圖像 數(shù)據(jù)中檢測到的運動物體的圖像以及指定屏幕上的范圍作為運動模式的設(shè)置 信息的運動檢測窗，來確定所述一幀的圖像數(shù)據(jù)是否為組成所述運動模式的 候選者。
在運動物體檢測處理中，作為用于確定圖像數(shù)據(jù)是否為組成所述運動模 式的候選者的一種處理，確定部件可以檢查是否運動物體的圖像的至少一部 分被包括在運動檢測窗的范圍中。
在運動物體檢測處理中，作為用于確定圖像數(shù)據(jù)是否為組成所述運動模 式的候選者的一種處理，確定部件可以檢查運動物體的圖像的運動方向或運 動量是否與為運動檢測窗設(shè)置的運動方向或運動量匹配。
在臨時存儲處理中，確定部件可以臨時存儲包括在運動物體^r測處理中 被確定為組成所述運動模式的候選者的圖像數(shù)據(jù)的多個幀的圖像數(shù)據(jù)。
當指定屏幕上的范圍的多個運動檢測窗被設(shè)置為所述運動模式的設(shè)置信息時，在模式匹配確定處理中，確定部件可以檢查所述多個幀中每一個的圖 像數(shù)據(jù)中包括的運動物體的圖像是否以多個幀表示的運動進入多個運動檢測 窗的各自的范圍，以便確定臨時存儲的多個幀的圖像數(shù)據(jù)是否為匹配所述運 動模式的圖像。
當指定屏幕上的范圍的多個運動檢測窗被設(shè)置為所述運動模式的設(shè)置信 息時，在模式匹配確定處理中，確定部件可以檢查所述多個幀中每一個的圖
像數(shù)據(jù)中包括的運動物體的圖像以多個幀表示的運動進入多個運動檢測窗的 各自的范圍的順序，以便確定臨時存儲的多個幀的圖像數(shù)據(jù)是否為匹配所述 運動模式的圖像。
可以將指定屏幕上的范圍的運動檢測窗設(shè)置為所述運動模式的設(shè)置信 息。確定部件可以使用通過檢查每一個圖像數(shù)據(jù)中包括的運動物體的圖像是 否進入運動檢測窗的范圍而獲得的結(jié)果，來確定包括運動物體的圖像的圖像 數(shù)據(jù)是否具有匹配所述運動模式的圖像內(nèi)容。
可以將指定屏幕上的范圍的多個運動檢測窗設(shè)置為所述運動模式的設(shè)置 信息。確定部件可以使用通過檢查每一個圖像數(shù)據(jù)中包括的運動物體的圖像 是否進入多個運動檢測窗的各自的范圍而獲得的結(jié)果，來確定包括運動物體 的圖像的圖像數(shù)據(jù)是否具有匹配所述運動模式的圖像內(nèi)容。
可以將指定屏幕上的范圍的運動檢測窗設(shè)置為所述運動模式的設(shè)置信 息。確定部件使用通過檢查每一個圖像數(shù)據(jù)中包括的運動物體的圖像是否在 具有為運動檢測窗設(shè)置的方向或運動量的同時進入運動檢測窗的范圍而獲得 的結(jié)果，來確定包括運動物體的圖像的圖像數(shù)據(jù)是否具有匹配所述運動模式 的圖像內(nèi)容。
可以將指定屏幕上的范圍的多個運動檢測窗設(shè)置為所述運動模式的設(shè)置 信息。確定部件使用通過檢查每一個圖像數(shù)據(jù)中包括的運動物體的圖像進入 多個運動檢測窗的各自的范圍的順序而獲得的結(jié)果，來確定包括運動物體的 圖像的圖像數(shù)據(jù)是否具有匹配所述運動模式的圖像內(nèi)容。
作為有效處理，有效部件可以在記錄介質(zhì)上記錄被確定為匹配所述運動
模式的圖像數(shù)據(jù)。
作為有效處理，有效部件可以創(chuàng)建其中能夠?qū)⒈淮_定為匹配所述運動模 式的圖像數(shù)據(jù)作為有效圖像數(shù)據(jù)提取的狀態(tài)。
有效部件可以拋棄被確定為不匹配所述運動模式的圖像數(shù)據(jù)。根據(jù)本發(fā)明的另一個實施例，圖像處理方法包括以下步驟確定處理目 標圖像數(shù)據(jù)是否具有匹配之前設(shè)置的運動模式的圖像內(nèi)容；以及將被確定為 匹配所述運動模式的圖像數(shù)據(jù)作為有效圖像數(shù)據(jù)進行處理。
根據(jù)本發(fā)明的再一個實施例， 一種程序允許信息處理裝置執(zhí)行上述圖像 處理方法的每一個步驟。
根據(jù)本發(fā)明的實施例，將被表示為處理目標圖像數(shù)據(jù)(如，在圖像抓取 操作中抓取的按時間順序連續(xù)的幀的圖像數(shù)據(jù)，或從視頻內(nèi)容再現(xiàn)的按時間 順序連續(xù)的幀的圖像數(shù)據(jù))的圖像內(nèi)容的運動物體的運動與預先設(shè)置的運動 模式進行比較。根據(jù)運動物體的運動是否匹配運動模式，使圖像數(shù)據(jù)有效(如， 存儲為靜止圖像)。
特別地，通過將屏幕上的范圍設(shè)置為運動檢測窗、為運動檢測窗設(shè)置運 動方向和運動量、或為多個運動檢測窗設(shè)置順序，由運動檢測窗設(shè)置的運動 模式用作確定目標圖像(對象)的合適標準。
因此，當在圖像抓取期間自動地抓取到具有特定運動的對象的靜止圖像 時，或者當從再現(xiàn)的視頻內(nèi)容抓取具有特定運動的圖像時可以實現(xiàn)合適的操 作，并將其存儲為靜止圖像。
根據(jù)本發(fā)明的實施例，當在處理目標圖像數(shù)據(jù)的圖像內(nèi)容中檢測到與之 前設(shè)置的特定運動模式匹配的運動時，可以合適地使所述圖像數(shù)據(jù)有效。例 如，可以將所述圖像數(shù)據(jù)存儲為表示匹配運動模式的運動的一個或多個靜止 圖像。特別地，通過使用運動檢測窗來精確地確定運動，可以精確地確定目 標圖像并使其有效。
通過該配置，例如，當將由圖像拾取單元抓取的按時間順序連續(xù)的幀圖 像設(shè)置為處理目標時，即使用戶不具有熟練的圖像抓取技術(shù)，作為圖像抓取 結(jié)果，也可以精確地獲得具有想要的運動的對象的圖像。
另外，當由再現(xiàn)單元從記錄介質(zhì)讀出的按時間順序連續(xù)的幀圖像被設(shè)置 為處理目標時，在不執(zhí)行麻煩的操作的情況下，用戶可以精確地提取具有想 要的運動的圖像。


圖1A-圖1C是關(guān)于根據(jù)本發(fā)明的實施例的運動檢測窗的說明圖； 圖2A-圖2D是關(guān)于根據(jù)實施例的運動檢測操作的說明圖；圖3A-圖3C是關(guān)于實施例中待存儲的示例圖像的說明圖； 圖4A-圖4D是關(guān)于根據(jù)實施例的運動檢測操作的多種示例的說明圖； 圖5是示出根據(jù)實施例的圖像抓取裝置的框圖； 圖6是關(guān)于根據(jù)實施例的運動物體檢測處理的說明圖； 圖7A-圖7C是關(guān)于根據(jù)實施例的運動檢測自動圖像抓取模式的轉(zhuǎn)換的 說明圖8是根據(jù)實施例的運動檢測自動圖像抓取待機模式和運動檢測自動圖 像抓取執(zhí)行模式之間的轉(zhuǎn)換的說明圖9是示出在根據(jù)實施例的運動檢測自動圖像抓取執(zhí)行模式中執(zhí)行的處 理的流程圖10是示出根據(jù)實施例的運動物體檢測處理的流程圖11是示出根據(jù)實施例的通過數(shù)目和通過窗計數(shù)的處理的流程圖12A-圖12C是示出在根據(jù)實施例的處理中使用的參數(shù)的說明圖表；
的說明圖表；
圖14是示出根據(jù)實施例的、用于確定運動物體圖像是否觸到運動檢測窗 的處理的說明圖15A和圖15B是示出根據(jù)實施例的、用于確定運動物體圖像的矢量是 否與運動檢測窗的矢量匹配的處理的說明圖16A和圖16B是示出根據(jù)實施例的臨時存儲處理的流程圖； 圖17是示出才艮據(jù)實施例的運動才莫式完成斗企查(motion pattern completion check)處理的流程圖18是示出根據(jù)實施例的、用于檢查運動檢測窗的通過順序的處理的流
程圖19是根據(jù)實施例的、用于檢查運動檢測窗的通過順序的處理的說明
圖20是示出根據(jù)實施例的、在運動檢測自動圖像抓取的執(zhí)行期間顯示的 屏幕的示例的說明圖21A-圖21C是示出根據(jù)實施例的、在運動檢測自動圖像抓取的執(zhí)行期 間的參數(shù)變化的說明圖表；
圖22A-圖22D是示出根據(jù)實施例的運動模式的創(chuàng)建的說明圖；圖23是示出根據(jù)實施例的運動檢測區(qū)域設(shè)置屏幕的說明圖24是示出根據(jù)實施例的運動矢量設(shè)置的說明圖25是示出根據(jù)實施例的運動矢量的方向的指定的說明圖26是示出根據(jù)實施例的自動運動矢量設(shè)置的說明圖27A和圖27B是示出根據(jù)實施例的運動矢量的量的設(shè)置的說明圖28A和圖28B是示出根據(jù)實施例的運動矢量的量的設(shè)置的說明圖29是示出根據(jù)實施例的運動模式檢測完成條件設(shè)置屏幕的說明圖30A-圖30C是示出根據(jù)實施例的運動檢測窗設(shè)置的示例的說明圖31A-圖31C是示出根據(jù)實施例的運動檢測窗的形狀的示例的說明圖32是示出在根據(jù)另一個實施例的運動檢測自動圖像抓取執(zhí)行模式中
執(zhí)行的處理的流程圖33是示出在根據(jù)又一個實施例的運動檢測自動圖像抓取執(zhí)行模式中
執(zhí)行的處理的流程圖34是示出根據(jù)實施例的個人計算機的框圖；以及
圖35是示出根據(jù)另一個實施例的視頻再現(xiàn)期間執(zhí)行的處理的流程圖。
具體實施模式
在下文中將以如下順序描述本發(fā)明的實施例。 [l.第一實施例(圖像抓取裝置)] <1-1:相克i侖〉
<1-2:圖像抓取裝置的配置> <1-3:運動檢測自動圖像抓取操作> <1-4:運動模式設(shè)置>
<1-5:圖像抓取裝置的實施例的應(yīng)用的優(yōu)點> [2.第二實施例(圖像抓取裝置)] [3.第三實施例(圖像抓取裝置)] [4.第四實施例(圖像處理裝置)] <1-1:概論>
其中將本發(fā)明應(yīng)用于圖像抓取裝置，比如數(shù)字照相機的示例被作為第一實施例描述。
該示例適用于用戶想要以合適的定時、通過圖像抓取裝置來抓取特定運 動物體的一個或多個靜止圖像(如，作為所謂的連續(xù)圖像抓取)的情況。
圖像抓取裝置檢測對象圖像的特定運動模式，并將包含與運動模式匹配 的對象的圖像數(shù)據(jù)作為靜止圖像數(shù)據(jù)存儲。
在抓取圖像之前，用戶指定預定的運動模式。如之后所述，可以預設(shè)多 種運動模式，或者可以由用戶設(shè)置多種運動模式作為預定運動模式。
使用運動檢測窗來設(shè)置運動模式。圖1A、 1B和1C示出了在屏幕上設(shè)置 的運動檢測窗的示例。這里，屏幕與作為所抓取的對象的圖像數(shù)據(jù)而獲得的 圖像的范圍相對應(yīng)。
圖1A示出了在屏幕的特定區(qū)域處設(shè)置運動檢測窗Wl、 W2和W3的示例。
在這種情況下，附到每一個運動一全測窗Wl、 W2和W3的、從左至右指 向的箭頭表示為相應(yīng)的運動檢測窗Wl、 W2和W3設(shè)置的方向。
另外，在每一個運動檢測窗W1、 W2和W3中所附的數(shù)字表示為各個運 動檢測窗Wl 、 W2和W3設(shè)置的順序。
運動檢測窗W1、 W2和W3指定一運動模式，其中，例如作為對象的運 動物體在圖像抓取裝置的前面從左側(cè)運動到右側(cè)。更具體地說，該情況與其 中作為對象的運動物體首先從左側(cè)進入運動檢測窗Wl的區(qū)域，然后進入運 動檢測窗W2的區(qū)域，并進一步進入運動檢測窗W3的區(qū)域的情況相對應(yīng)。
例如，圖像抓取裝置通過其圖像抓取操作將對象的圖像作為多個按時間 順序的連續(xù)幀的圖像數(shù)據(jù)進行抓取。
一般而言，數(shù)字照相機執(zhí)行被稱為實況瀏覽(live view)或預覽(由圖 像拾取元件進行的圖像的抓取)的視頻抓取，并在用戶正在等待最佳時機抓 取好的圖像時，在顯示屏幕上將連續(xù)幀圖像顯示為視頻。響應(yīng)于用戶按下快 門按鈕，圖像抓取裝置將在那個時刻獲得的幀圖像作為 一個靜止圖像的數(shù)據(jù) 存儲在記錄介質(zhì)上。
因此，通過關(guān)于在實況瀏覽時抓取的每一個幀圖像的數(shù)據(jù)執(zhí)行幀比較處 理，可以檢測到對象的運動。
假設(shè)在對象圖像中檢測到運動物體的圖像(在下文中稱為運動物體圖 像)。在這種情況下，當在按時間順序排列的幀的第一幀中的運動物體圖像被包括在運動檢測窗Wl的區(qū)域中時，下一幀中的運動物體圖像已經(jīng)到達運動
檢測窗W2的區(qū)域，并且之后幀中的運動物體圖像已經(jīng)進入運動檢測窗W3
的區(qū)域，可以如上所述地檢測到其中"作為對象的運動物體已經(jīng)在圖像抓取 裝置的前面從左側(cè)運動到右側(cè)"的運動模式。
在這種情況下，使一 系列幀的圖像數(shù)據(jù)作為匹配運動模式的圖像而有效。 例如，將圖像數(shù)據(jù)作為例如連續(xù)抓取的靜止圖像數(shù)據(jù)進行存儲。通過這樣的 操作，可以精確地自動抓取到包含具有用戶想要的運動的對象的靜止圖像。
將參照圖2A到圖3C描述示例。
假設(shè)當在使用圖1所示的運動檢測窗Wl、 W2和W3設(shè)置特定的運動模 式之后將圖像抓取裝置指向所期望的對象時，用戶指示圖像抓取裝置開始自 動圖像抓取(運動檢測自動圖像抓取執(zhí)行模式，將在后面描述)。
圖2A示出在自動圖像抓取開始之后在實況瀏覽時獲得的給定幀F(xiàn)#0的 圖像。此后，作為給定幀F(xiàn)#l獲得圖2B中所示的圖像，并且檢測到運動物 體圖像(鳥的圖像)如方向條件指定的那樣、從左側(cè)進入運動檢測窗Wl。
此外，作為之后的幀F(xiàn)&獲得圖2C中所示的圖像，并且檢測到運動物 體圖像(鳥的圖像)如方向條件指定的那樣、從左側(cè)進入運動檢測窗W2。
此外，作為之后的幀F(xiàn)#3獲得圖2D中所示的圖像，并且檢測到運動物 體圖像(鳥的圖像)如方向條件指定的那樣、從左側(cè)進入運動檢測窗W3。
可以確定，由 一 系列幀F(xiàn)# 1 、 F#2和F#3的圖像數(shù)據(jù)表示的運動物體圖 像的運動滿足為三個運動;險測窗Wl、 W2和W3中的每一個而設(shè)置的區(qū)域和 方向以及為三個運動檢測窗Wl、 W2和W3中的每一個而設(shè)置的順序。
在這種情況下，幀F(xiàn)弁1、 F弁2和F弁3的圖像數(shù)據(jù)是有效的。例如，將圖 像數(shù)據(jù)作為圖3A、 3B和3C所示的三個靜止圖像存儲在記錄介質(zhì)上。
因此，通過簡單地使圖像抓取裝置在運動檢測自動圖像抓取模式中工作， 用戶可以連續(xù)地獲得所決定的時刻的抓取結(jié)果。
由于通過運動檢測窗Wl、 W2和W3可以詳細地設(shè)置期望作為對象的運 動，因此可以高概率地獲得具有所期望的運動的對象。例如，即使在圖2八-圖2D所示的示例中風將花劇烈搖動，花的運動也不滿足關(guān)于由運動檢測窗 Wl、 W2和W3設(shè)置的運動模式的條件。因此，不將在那個時刻獲得的幀的 圖像數(shù)據(jù)作為靜止圖像進行存儲。也就是說，不會無條件地存儲用戶不期望 的許多圖像。使用運動檢測窗的多種運動模式設(shè)置都是可用的。
圖IB示出了將運動檢測窗Wl、 W2、 W3和W4設(shè)置在相應(yīng)區(qū)域處并且 為每一個運動檢測窗Wl、 W2、 W3和W4設(shè)置從左上方到右下方的方向的 情況。在這種情況下，沒有設(shè)置運動檢測窗W1、 W2、 W3和W4的順序(在 下文中稱為"窗順序")。
圖1C示出了將運動檢測窗Wl、 W2和W3設(shè)置在相應(yīng)區(qū)域處并且為每 一個運動檢測窗W1、 W2和W3設(shè)置窗順序的情況。然而，沒有為每一個運 動檢測窗Wl 、 W2和W3設(shè)置方向。
通過添加或省略關(guān)于區(qū)域的設(shè)置(運動檢測窗的窗順序、方向和運動量 (速度))，可以精確地檢測用戶想要抓取并執(zhí)行自動圖像抓取的運動。
圖4A-圖4B示出了多種應(yīng)用示例。
圖4A示出了其中設(shè)置例如如圖1B所示的運動檢測窗Wl、 W2、 W3和 W4的示例。
作為為了在例如運動會、其他田徑運動會或游泳運動會上對角地從高處 自動抓取終點線場景而使用的運動檢測模式，這是適用的。
例如，用戶在運動的相應(yīng)過程的終點線處設(shè)置每個運動^:測窗Wl、 W2、 W3和W4。這里，沒有為運動4企測窗W1、 W2、 W3和W4設(shè)置窗順序。
在這種情況下，例如，當四個運動員從屏幕的左上方通過相應(yīng)的運動檢 測窗W1、 W2、 W3和W4時，不論運動員的站立位置如何，都存儲四個靜 止圖像的數(shù)據(jù)。可替代地，對于一個運動檢測窗，可以存儲包括這四個圖像 的許多靜止圖像的圖像數(shù)據(jù)，或者可以存儲給定時間處高速連續(xù)抓取的多個 靜止圖像的圖像數(shù)據(jù)。
圖4B示出了適用于例如自動抓取高爾夫揮桿的情況的運動檢測模式。 為運動檢測窗W1、 W2、 W3和W4設(shè)置與揮桿的路徑對應(yīng)的窗順序以及與 高爾夫球桿的運動方向?qū)?yīng)的方向。在這種情況下，當檢測到以為每一個運 動才企測窗Wl、 W2、 W3和W4設(shè)置的順序和矢量方向運動的運動物體時， 存儲一系列靜止圖像的數(shù)據(jù)。結(jié)果，可以獲得一系列靜止圖像(如高爾夫揮 桿形式的逐幀畫面)。另夕卜，^L設(shè)置而定，可以在與各個運動4全測窗Wl、 W2、 W3和W4對應(yīng)的時間點處存儲高速連續(xù)抓取的圖像，或者可以存儲在對應(yīng)于 運動檢測窗W1的時間點(或者比該點略早的時間點)與對應(yīng)于運動檢測窗 W4的時間點(或者比該點略晚的時間點)之間抓取的多個連續(xù)靜止圖像的數(shù)據(jù)。
圖4C示出了適用于從基本上水平且對角地自上方自動抓取例如賽馬的 終點線場景的圖像的情況的運動檢測模式。
為運動檢測窗Wl指定方向。例如，在這種情況下，當領(lǐng)頭的馬達到運 動檢測窗Wl時存儲一個靜止圖像的數(shù)據(jù)。視設(shè)置而定，可以存儲該圖像之 后的多個靜止圖像作為連續(xù)抓取的圖像。
圖4D示出了適于從水平方向自動抓取行駛的火車的圖像的情況的運動 檢測模式。為運動檢測窗W1、 W2和W3設(shè)置窗順序和方向。在這種情況下， 當來自左側(cè)的火車通過運動4企測窗Wl、 W2和W3中的每一個時，存儲一個 靜止圖像的數(shù)據(jù)。視設(shè)置而定，可以存儲與各個運動檢測窗Wl、 W2和W3 對應(yīng)的時間點處高速連續(xù)抓取的圖像，或者可以存儲在對應(yīng)于運動檢測窗Wl 的時間點(或者比該點略早的時間點)與對應(yīng)于運動^r測窗W3的時間點(或 者比該點略晚的時間點)之間抓取的多個連續(xù)靜止圖像的數(shù)據(jù)。
在這種情況下，當火車在屏幕上從左至右通過窗時，存儲靜止圖像。然 而，當火車從右至左通過窗時，由于確定火車的運動不匹配目標運動模式， 因此不存儲靜止圖像。
如果用戶將多個窗順序設(shè)置為OR條件，并消除了方向設(shè)置，則可以在 每次火車來來往往地通過時實現(xiàn)靜止圖像數(shù)據(jù)的獲取。例如，用戶只需簡單 地將窗順序"W1—W2—W3"和"W3—W2—Wr設(shè)置為OR條件。
<1-2:圖像抓取裝置的配置〉
將參照圖5，描述用于實現(xiàn)例如上述自動圖像抓取的、根據(jù)實施例的圖 像抓取裝置的配置的示例。
圖5所示的圖像抓取裝置1具有電池4、電池電壓檢測單元5、可變光學 系統(tǒng)3、光學組件7、圖像拾取元件8、模擬信號處理單元12、模數(shù)(A/D) 轉(zhuǎn)換單元13、時序控制單元14、圖像處理單元15、操作單元16、控制單元 17、圖像存儲器18、壓縮/解壓縮單元19、顯示圖像生成單元20、顯示單元 21、觸摸板22、運動檢測單元24、存儲卡接口 (1/F)單元26、外部I/F單元 28和非易失性存儲器29。
A/D轉(zhuǎn)換單元13、圖像處理單元15、控制單元17、圖像存儲器18、壓 縮/解壓縮單元19、顯示圖像生成單元20、存儲卡I/F單元26、外部I/F單元28和運動檢測單元24通過總線25彼此連接。
電池4向圖像抓取裝置1的每一個單元提供用于其操作的電力(輸出電 壓Vcc)。根據(jù)圖像抓取裝置1的操作狀態(tài)來執(zhí)行或停止從電池4向每一個單 元的電力提供?？刂茊卧?7控制該電力提供狀態(tài)。電池電壓檢測單元5檢測 電池4的輸出電壓Vcc (電池電壓)。將該電池電壓檢測結(jié)果從電池電壓檢測 單元5提供到控制單元17。
可變光學系統(tǒng)3包括圖像抓取鏡頭，所述鏡頭由多個光學透鏡、光圈和 快門組成。光學組件7包括光學濾波器和防護玻璃罩(cover glass )。來自對 象的光通量通過可變光學系統(tǒng)3和光學組件7,由此在圖像拾取元件8上形 成對象的圖像。
圖像拾取元件8拾取由可變光學系統(tǒng)3形成的對象的圖像，并輸出與對 象的拾取圖像對應(yīng)的圖像信號(所抓取的圖像信號)。
圖像拾取元件8具有包括多個像素的矩形圖像拾取區(qū)域，并對于每一個 像素順序地將與存儲在各個像素中的電荷對應(yīng)的模擬圖像信號輸出到模擬信 號處理單元12。例如，電荷耦合裝置(CCD)傳感器陣列或互補金屬氧化物 半導體(CMOS)傳感器陣列可以用作圖像拾取元件8。該圖像拾取元件8可 以是例如單片彩色CCD ( single-chip color CCD )。
模擬信號處理單元12在其中包括相關(guān)二重釆樣(CDS )電路和自動增益 控制(AGC)電路。模擬信號處理單元12關(guān)于輸入圖像信號執(zhí)行預定的模擬 處理。
A/D轉(zhuǎn)換單元13將由模擬信號處理單元12處理的模擬信號轉(zhuǎn)換為數(shù)字信號。
時序控制單元14由控制單元17控制。時序控制單元14控制圖像拾取元 件8、模擬信號處理單元12、 A/D轉(zhuǎn)換單元13和圖像處理單元15的工作時序。
將由A/D轉(zhuǎn)換單元13數(shù)字化的圖像數(shù)據(jù)臨時地存儲在圖像存儲器18中。 運動檢測單元24從存儲在圖像存儲器18中的多個幀的圖像數(shù)據(jù)中檢測 運動物體，并計算運動物體的運動路徑或軌跡。將在后面描述關(guān)于該處理的細節(jié)。
圖像處理單元15從圖像存儲器18中讀出圖像數(shù)據(jù)，并轉(zhuǎn)換圖像的大小。 例如，圖像處理單元15將通過圖像拾取元件8拾取的數(shù)百萬或更多的像素的圖像數(shù)據(jù)轉(zhuǎn)換為用于視頻的大小，如，標準清晰度(SD， 720x480)和高清 晰度(HD, 1920x1080)。在靜止圖像抓取處理中，在不轉(zhuǎn)換圖像大小的情況 下處理可以進行到下一處理步驟。
圖像處理單元15還執(zhí)行所謂的圖像修正，例如所述圖像修正包括伽瑪校 正、白平衡控制和邊緣增強。再次將經(jīng)大小轉(zhuǎn)換和修正的圖像存儲在圖像存 儲器18中。
將存儲在圖像存儲器18中的圖像數(shù)據(jù)用作要在顯示設(shè)備上顯示的數(shù)據(jù) 以及靜止圖像或視頻的所抓取的圖像數(shù)據(jù)。
為了在顯示設(shè)備上顯示圖像數(shù)據(jù)(所謂的實況瀏覽的顯示和視頻/靜止圖 像的顯示)，將圖像數(shù)據(jù)提供給顯示圖像生成單元20。在將其他圖像(如多 種圖標和時間信息)疊置在圖像數(shù)據(jù)上之后由顯示單元21顯示與圖像數(shù)據(jù)對 應(yīng)的圖像，并且轉(zhuǎn)換圖像數(shù)據(jù)的大小。
顯示單元21可以是液晶面板或有機電致發(fā)光(EL)面板。
從圖像存儲器18讀出要作為所抓取的圖像(所記錄的圖像)使用的圖像 數(shù)據(jù)，并將其提供到壓縮/解壓縮單元19。 一般而言，圖像數(shù)據(jù)經(jīng)歷根據(jù)聯(lián)合 圖像專家組(JPEG)和運動圖像專家組(MPEG)的壓縮處理。
存儲卡I/F單元26從設(shè)置在圖像抓取裝置1中的存儲卡90(卡型可拆卸 存儲器)讀出數(shù)據(jù)，或向存儲卡90寫入數(shù)據(jù)。存儲卡I/F單元26將由壓縮/ 解壓縮單元19壓縮的圖像數(shù)據(jù)寫入存儲卡90。
在視頻抓取或靜止圖像的連續(xù)抓取的情況下，連續(xù)地執(zhí)行這種數(shù)據(jù)流。
盡管這里將便攜存儲卡90用作記錄介質(zhì)的示例，但是可以采用其他類型 的記錄介質(zhì)用于存儲要作為圖像抓取結(jié)果留下的靜止圖像或視頻的圖像數(shù) 據(jù)。例如，可以使用便攜盤介質(zhì)(如光盤)，或者圖像抓取裝置1可以配備有 硬盤驅(qū)動器(HDD)并將圖像數(shù)據(jù)存儲在HDD中。此外，可以使用內(nèi)部閃存。
外部I/F單元28通過根據(jù)諸如例如通用串行總線(USB )之類的信號標 準的預定纜線向外部裝置發(fā)送多種數(shù)據(jù)，或者從外部裝置接收多種數(shù)據(jù)。
操作單元16具有多種操作按鈕和開關(guān)。操作單元16包括釋放按鈕、用 于切換照相模式的選擇轉(zhuǎn)盤(dial)(模式轉(zhuǎn)盤)以及用于在顯示單元21上顯 示回放圖像的按鈕(回放按鈕)。將操作單元16的輸出提供到控制單元17。
觸摸板22和顯示單元21組成觸摸屏23。顯示單元21基于從顯示圖像生產(chǎn)單元20提供的顯示數(shù)據(jù)、根據(jù)圖像抓 取裝置1的操作狀態(tài)來顯示多種操作屏幕，并且還顯示通過圖像拾取元件8 拾取的對象的圖像以及基于存儲在存儲卡90中的圖像數(shù)據(jù)的回放圖像。
如果通過手指的觸摸(touch)而按下了觸摸板22的給定位置，即如 果用戶執(zhí)行預定的輸入操作，則觸摸板22檢測到所按下的位置的坐標，并將 與坐標對應(yīng)的信號發(fā)送到控制單元17。控制單元17獲得與坐標對應(yīng)的預定 信息，并根據(jù)該信息執(zhí)行預定處理。
將圖像抓取裝置1的控制軟件、照相機的設(shè)置數(shù)據(jù)、上述運動檢測模式 的設(shè)置數(shù)據(jù)(運動檢測窗的設(shè)置信息)記錄在非易失性存儲器29 (如閃存) 上。另外，在之后描述的運動檢測自動圖像抓取操作中，在響應(yīng)于運動檢測 而執(zhí)行的臨時存儲處理期間，將圖像數(shù)據(jù)臨時地存儲在非易失性存儲器29 中。
控制單元17由微處理器組成，所述微處理器包括例如中央處理單元 (CPU)、只讀存儲器(ROM)、隨機存取存儲器(RAM)、非易失性存儲單 元和接口單元，并且控制單元17控制整個圖像抓取裝置1。
根據(jù)存儲在內(nèi)部ROM中的程序和用戶操作，控制單元17執(zhí)行多種算術(shù) 處理，并與每一個單元交換控制信號等，以使得各個單元執(zhí)行預定操作。
如上所述，運動檢測單元24從存儲在圖像存儲器18中的多個幀圖像中 檢測運動物體，并計算運動物體的運動的路徑或軌跡。
下面將描述用于檢測圖像信息中包括的對象的運動的方法。首先，將塊 匹配作為用在運動檢測中的方法的示例進行描述。
圖6是示出用在運動檢測中的塊匹配方法的概念圖。
如圖6所示，關(guān)于位于所關(guān)注的幀圖像(在下文中，簡便地稱為"當前 幀圖像")Fn和緊接的當前幀圖像之前的時刻處的幀圖像(在下文中，簡便 地稱為"先前幀圖像")Fm的特定位置處的塊(區(qū)域)Bn和Bm來執(zhí)行模式 匹配。
在模式匹配方法中，例如，根據(jù)公式(1)來確定塊Bn中包括的像素X (n)與塊Bm中包括的、從像素X (n)位移了 i個像素的像素X ( n-i)之 差的絕對值的和S,并且搜索使該絕對值的和S (即估計值)最小的位移量i 以才全測運動量。
S = S|X(n) - X(n-i)l 公式(1 )這里，關(guān)于屬于塊Bn的所有像素X (n)計算公式(1)的和S。
在塊匹配方法中，將當前幀圖像Fn劃分為塊，使用模式匹配對于每一個 塊搜索與先前幀圖像Fm的區(qū)域類似的當前幀F(xiàn)n的區(qū)域，并檢測幀圖像中包 括的對象的運動速度和方向。
除了上述塊匹配方法之外，可以采用基于幀圖像中包括的對象區(qū)域的特 征分量的改變來計算運動矢量的方法作為用在運動檢測中的方法。
在該方法中，關(guān)于幀圖像中包括的亮度分量執(zhí)行拉普拉斯處理。檢測所 處理的圖像的過零點作為區(qū)域邊界。提取由連續(xù)邊界包圍的部分作為獨立區(qū) 域(對象區(qū)域)。可替代地，分析幀圖像中包括的彩色分量，并將具有較少色 調(diào)變換的連續(xù)部分替換為代表性的顏色，并將其作為 一個區(qū)域提取。
檢測所提取區(qū)域的特征分量(如所述區(qū)域的重心)，并計算幀圖像之間的 變化量，由此確定表示整個區(qū)域的平移量(translation amount)的運動矢量。 因此，通過輸出作為所述區(qū)域的運動參數(shù)的所計算的變化量，通過關(guān)于對象 區(qū)域中給定像素位置的計算，可以確定運動矢量(運動的量和方向)的值。
另外，作為再一運動檢測方法，可以采用檢測幀圖像中包括的多個輪廓 分量、將多個檢測到的輪廓分量分類為組、并通過神經(jīng)網(wǎng)絡(luò)處理檢測整個圖 j象的運動的方法。
<1-3:運動檢測自動圖像抓取操作>
將給出對于其中用戶使上述圖像抓取裝置1執(zhí)行運動檢測自動圖像抓取 模式的操作的情況的描述。
在以下給出的描述中，將描述與確定、有效和獲取功能對應(yīng)的操作。確 定操作主要通過運動檢測單元24和控制單元17的算術(shù)和控制處理以及基于 所述控制的圖像存儲器18和非易失性存儲器29的操作來實現(xiàn)。有效操作主 要通過對控制單元17的處理以及非易失性存儲器29和存儲卡I/F單元26的 操作進行控制來實現(xiàn)。將處理目標圖像數(shù)據(jù)的獲取實現(xiàn)為圖像抓取部分的操 作，所述圖像抓取部分由可變光學系統(tǒng)3、光學組件7、圖像拾取元件8、模 擬信號處理單元12、 A/D轉(zhuǎn)換單元13、時序控制單元14、圖像處理單元15 和圖像存儲器18組成。也就是說，將處理目標圖像數(shù)據(jù)的獲取實現(xiàn)為通過抓 取對象的圖像，而在圖像存儲器18中存儲按時間順序的連續(xù)幀圖像的數(shù)據(jù)的 操作。首先，將參照圖7A-圖7C描述在圖像抓取裝置1開始運動檢測自動圖像
抓取模式之前執(zhí)行的過程。
圖7A示出了在顯示單元21上顯示的設(shè)置菜單屏幕的示例。如上所述， 由于將觸摸板22放置在顯示單元21之上，因此通過所顯示內(nèi)容的觸摸的檢 測來實現(xiàn)圖形用戶界面(GUI)。通過操作單元16上的用戶操作可以明顯地 執(zhí)行在下面描述的菜單上執(zhí)行的操作。
例如，當用戶觸摸屏幕上顯示的菜單按鈕100時，控制單元17在顯示單 元21上顯示主要菜單項101。例如，顯示用于照相機的操作的各項，如機 身設(shè)置、場景選擇和電子閃光選擇。將關(guān)于運動檢測自動圖像抓取模式的項 顯示為所述多項之一。
響應(yīng)于從主菜單項的運動檢測自動圖像抓取模式的用戶選擇，控制單元 17在顯示單元21上顯示子菜單102。在該子菜單102中，以可選擇的模式顯 示多個登記的運動模式。
如上所述，使用一個或多個運動檢測窗(Wl、 W2等)在每一個運動模 式中設(shè)置特定運動。將標準預設(shè)模式和由用戶新登記的定制模式登記為運動 模式。
如果用戶觸摸子菜單102上的給定運動模式項，則選擇所觸摸的運動模 式。響應(yīng)于運動模式的選擇，控制單元17將操作模式切換到運動檢測自動圖 像抓取待機模式，并在顯示單元21上顯示例如圖7B所示的圖像。
在這種情況下，在屏幕上顯示指示運動檢測自動圖像抓取模式的圖標 110。另外，使用運動檢測窗W1、 W2和W3顯示由用戶選擇的運動模式。 例如，關(guān)于在所圖解的示例中示出的運動模式，為三個運動檢測窗W1、 W2 和W3設(shè)置方向和窗順序。通過查看所顯示的運動模式，用戶可以理解設(shè)置 的運動模式。
實際上，此時，在顯示單元21上顯示圖7B所示的運動片企測窗Wl、 W2 和W3和實況瀏覽圖像。
更具體地說，控制單元17使相應(yīng)單元執(zhí)行圖像抓取操作和實況瀏覽顯示 操作，由此圖像抓取裝置1當前被導向的場景也被顯示在顯示單元21上。
當觀看在實際場景上疊置的運動檢測窗Wl、 W2和W3時，用戶調(diào)節(jié)照 相機角度和焦距。此時，用戶可以確定所選擇的運動模式是否適用于經(jīng)歷圖 像抓取的場景。如果用戶確定所選擇的運動模式不適用，則用戶可以操作菜單按鈕100以返回圖7A所示的設(shè)置菜單屏幕，并選擇另一運動模式。
在運動檢測自動圖像抓取待機模式中確定角度等之后，用戶執(zhí)行開始操
作。例如，用戶按下操作單元16的快門按鈕。控制單元17將快門按鈕上的 操作識別為開始操作，并將操作模式切換到運動檢測自動圖像抓取執(zhí)行模式。 在這種情況下，控制單元17指示各個單元開始運動檢測自動圖像抓取操作， 并在顯示單元21上與運動檢測窗Wl、 W2和W3以及實況瀏覽圖像一起顯 示指示"自動圖像抓取的執(zhí)行"的圖標lll，如圖7C所示。
當通過運動檢測自動圖像抓取執(zhí)行模式中的操作檢測到具有所選擇的和 所設(shè)置的運動模式的運動物體時，自動抓取靜止圖像。
當用戶想要終止這樣的自動圖像抓取時，用戶執(zhí)行終止操作。例如，當 用戶在運動檢測自動圖像抓取執(zhí)行模式中再次按下快門按鈕時，控制單元17 可以將快門按鈕上的操作識別為終止操作。當檢測到終止操作時，控制單元 17終止自動圖像抓取操作，并將操作模式返回到運動檢測自動圖像抓取待機 模式。
以這種模式，響應(yīng)于用戶操作來執(zhí)行運動檢測自動圖像抓取。下面將描 述在運動檢測自動圖像抓取執(zhí)行模式中執(zhí)行的操作。
圖8示出了在運動檢測自動圖像抓取待機模式與運動檢測自動圖像抓取 執(zhí)行模式之間的模式轉(zhuǎn)換。在運動檢測自動圖像抓取執(zhí)行模式中，對于如圖 中所示的在實況瀏覽時抓取的每一幀重復地執(zhí)行^r測運動物體的處理(在下 文中，稱為運動物體檢測處理)、臨時存儲處理、和檢查運動模式的完成的處 理(在下文中，稱為運動模式完成檢查處理)。
圖9示出了在運動檢測自動圖像抓取執(zhí)行模式中由控制單元17執(zhí)行的處理。
在開始運動檢測自動圖像抓取執(zhí)行模式之后，控制單元17控制在步驟 F2、 F3和F4執(zhí)行的處理，同時監(jiān)視步驟Fl處用戶的終止操作。
在步驟F2執(zhí)行的運動物體檢測處理中，控制單元17將作為實況瀏覽圖 像抓取的、且存儲在圖像存儲器18中的一幀的圖像數(shù)據(jù)作為處理目標傳送到 運動檢測單元24。運動4企測單元24檢測運動物體，并^r查運動物體的運動 與運動檢測窗之間的關(guān)系。
在步驟F3執(zhí)行的臨時存儲處理中，控制單元17根據(jù)運動物體檢測處理 的結(jié)果來控制臨時存儲。更具體地說，作為在步驟F2關(guān)于處理目標幀執(zhí)行的運動物體檢測處理的結(jié)果，確定該幀的圖像數(shù)據(jù)是否為組成當前設(shè)置的運動 模式的候選者。如果確定圖像數(shù)據(jù)為候選者，則將該幀的圖像數(shù)據(jù)臨時地存 儲在非易失性存儲器29中。
在步驟F4執(zhí)行的運動模式完成檢查處理中，控制單元17確定在非易失 性存儲器29中臨時存儲的圖像數(shù)據(jù)是否匹配當前選擇并設(shè)置的運動模式，或 者確定是否要等待接下來的臨時存儲。
如果在重復步驟F2、 F3和F4的處理并執(zhí)行臨時存儲例如三次之后，響 應(yīng)于三個候選者的圖像數(shù)據(jù)的臨時存儲，控制單元17確定三段圖像數(shù)據(jù)匹配 當前設(shè)置的運動模式，那么控制單元17執(zhí)行控制操作以便將三段圖像數(shù)據(jù)存 儲在存儲卡90中作為由自動圖像抓取產(chǎn)生的靜止圖像的數(shù)據(jù)。
如果控制單元17確定以這樣的模式作為候選者臨時存儲的一段或多段 圖像數(shù)據(jù)與當前設(shè)置的運動模式不匹配，那么控制單元17執(zhí)行控制操作以便 從非易失性存儲器29中刪除這些段圖像數(shù)據(jù)。
通過重復步驟F2、 F3和F4的處理直到用戶執(zhí)行終止操作為止，每當檢 測到具有匹配運動模式的運動的場景時，將這樣的場景作為所抓取的靜止圖 像的數(shù)據(jù)存儲在存儲卡90中。因此，自動執(zhí)行用戶所期望的圖像抓取。
將詳細描述分別在步驟F2、 F3和F4執(zhí)行運動物體檢測處理、臨時存儲 處理和運動模式完成檢查處理。
圖IO示出了控制單元17指示運動檢測單元24執(zhí)行的作為步驟F2處的 運動物體檢測處理的處理。
如上所述，通過圖像抓取操作順序地將用作實況瀏覽圖像的每一幀的圖 像數(shù)據(jù)存儲在圖像存儲器18中，并且在顯示單元21上顯示實況瀏覽。與該 操作并行地，每一幀圖像被順序地傳送到運動檢測單元24,并且經(jīng)歷圖IO 所示的運動物體^r測處理。
盡管將給出其中關(guān)于每一幀順序地執(zhí)行圖10所示的處理的情況，但是運 動物體檢測處理并不需要關(guān)于組成實況瀏覽視頻的所有幀執(zhí)行運動物體檢測 處理。其中斷斷續(xù)續(xù)的幀圖像(如每隔一些幀)被傳送到運動檢測單元24并 且經(jīng)歷運動物體檢測處理的情況也是可能的。
在步驟FIOI，運動檢測單元24從圖像存儲器18傳送的幀之一中檢測運 動物體的圖像以及該運動物體圖像的位置和運動矢量。例如，如圖6中所述， 當將該時刻傳送的幀圖像數(shù)據(jù)和緊接的該幀圖像數(shù)據(jù)之前處理的幀圖像數(shù)據(jù)分別設(shè)置為當前幀圖像Fn和先前幀圖像Fm時，運動檢測單元24使用塊匹 配方法檢測用作當前幀圖像Fn中包括的運動物體的對象，以及表示運動的量 和方向的運動矢量。
在步驟F101 ，獲得關(guān)于當前幀檢測到 一個或多個運動物體圖像或者不包 括運動物體圖像的檢測結(jié)果。
如果在步驟F102由運動;險測單元24執(zhí)行的處理中確定當前幀中不包括 運動物體圖像，則運動檢測單元24終止圖IO中所示的處理?？刂茊卧?7將 處理前進到步驟F3處執(zhí)行的臨時存儲處理。盡管將在后面參照圖16A描述 關(guān)于臨時存儲處理的細節(jié)，但是由于在這種情況下圖像抓取標志不是ON (盡 管這將在后面描述，但是在圖10中所示的步驟F112將圖像抓取標志設(shè)置為 ON),因此在步驟F201終止臨時存儲處理而不執(zhí)行臨時存儲。然后處理進行 到在步驟F4處執(zhí)行的運動模式完成檢查處理。盡管將在后面參照圖17描述 關(guān)于運動模式完成檢查處理的細節(jié)，但是在這種情況下也在步驟F300 (以及 步驟F311和F312)處終止處理。
然后處理通過步驟F1返回到圖9中所示的步驟F2。關(guān)于下一幀執(zhí)行運 動物體^r測處理。
也就是說，如果在圖10中所示的步驟FIOI處確定當前幀中不包括運動 物體，則在執(zhí)行圖9中所示的處理之后在步驟FIOI關(guān)于新一幀再次執(zhí)行該處理。
如果在步驟FIOI在當前幀中檢測到一個或多個運動物體圖像，則如圖 12A所示，運動檢測單元24設(shè)置用于運動物體檢查的參數(shù)(在下文中，稱為 運動物體檢查參數(shù))，并使用這些參數(shù)執(zhí)行圖10中所示的接下來的步驟的處理。
基于在當前幀中檢測到的運動物體圖像的數(shù)目，以及在運動檢測自動圖 像抓取執(zhí)行模式中選擇的運動模式中的運動檢測窗的設(shè)置信息(在下文中， 稱為運動檢測窗設(shè)置信息)來設(shè)置圖12A中所示的運動物體檢查參數(shù)。
圖12C示出了運動檢測窗設(shè)置信息。例如，當該時刻選擇的運動模式具 有三個運動檢測窗W1、 W2和W3時，運動模式的設(shè)置信息的內(nèi)容包括關(guān)于 運動檢測窗Wl 、 W2和W3的窗位置(Pwl 、 Pw2和Pw3 )、運動矢量(Vwl 、 Vw2和Vw3)以及窗順序(Nwl、 Nw2和Nw3)的i殳置信息。
窗位置(Pwl、 Pw2和Pw3 )是分別指示屏幕上運動一全測窗Wl、 W2和W3的區(qū)域的信息(如，坐標信息)。
運動矢量(Vwl、 Vw2和Vw3 )是指示每一個運動檢測窗Wl、 W2和 W3的運動方向和運動量(速度)的信息，或者是指示缺少這樣的設(shè)置的信息。
窗順序(Nwl、 Nw2和Nw3)是指示每一個窗的窗順序的信息，或者是 指示缺少窗順序設(shè)置的信息。
假設(shè)如該示例中那樣，將三個運動檢測窗Wl 、 W2和W3設(shè)置為由用戶 在該時刻選擇的運動模式，并且在步驟F101檢測到三個運動物體圖像。在這 種情況下，運動沖全測單元24設(shè)置用于才企查三個運動物體圖像Ml 、 M2和M3 與三個運動4企測窗W1、 W2和W3之間的關(guān)系的參凄t,如圖12A所示。
參數(shù)rc指示每一個運動物體圖像是否正在接觸到(touch )各個運動檢測窗。
參數(shù)Wfin指示已經(jīng)完成運動檢測窗與運動物體圖像之間的關(guān)系的檢查。 參數(shù)Mfin指示已經(jīng)完成所檢測到的運動物體圖像的檢查。 執(zhí)行圖10中所示的處理，同時更新這些參數(shù)。
在步驟F101，如圖12A中所示的那樣設(shè)置的所有參數(shù)rc、 Wfin和Mfm 是無效的。
圖12B示出了例如當執(zhí)行圖9中所示的一系列處理時，作為用于運動模
式檢查的參數(shù)的由控制單元17使用的參數(shù)。
參數(shù)"通過數(shù)目"用于確定運動檢測窗W1、 W2和W3的順序。 參數(shù)"圖像抓取標志"用于確定是否執(zhí)行步驟F3處的臨時存儲處理。 當運動模式完成檢查處理的結(jié)果指示臨時存儲的圖像數(shù)據(jù)不匹配運動模
式時，使用參數(shù)"無效標志"。
當運動物體圖像通過運動^r測窗Wl、 W2和W3的區(qū)域時遞增參數(shù)"通
過窗計數(shù)"，并且在運動模式完成檢查處理中使用該參數(shù)"通過窗計數(shù)"作為
指示已經(jīng)通過運動物體的運動檢測窗的數(shù)目的值。
每當在后面描述的處理中使用參數(shù)時，將涉及這些參數(shù)中的每一個。 如果在圖10中所示的步驟F101,在當前幀中檢測到一個或多個運動物
體，并且設(shè)置例如如圖12A所示的運動物體檢查參數(shù)，則運動檢測單元24
將處理從步驟F102前進到步驟F103。
在步驟F103，例如，運動檢測單元24將運動物體圖像之一 (如，圖12A
中所示的運動物體M1 )設(shè)置為檢查目標，并檢查該運動物體圖像是否接觸至'.一個或多個運動檢測窗Wl、 W2和W3。更具體地說，運動4企測單元24檢查 運動物體圖像是否被包括在屏幕上的每一個運動檢測窗Wl、 W2和W3中。
例如，通過使用圖14中所示的方法，可以確定給定的運動物體圖像M 是否接觸到給定的運動檢測窗W。
首先，使用公式(2)和(3 )分別確定運動物體圖像M的重心的坐標(Pxl， Py 1 )與運動檢測窗W的中心的坐標(Px2, Py2 )之間在x軸和y軸方向上 的距離dx和dy。
dx = |Pxl -Px2| 公式(2)
dy叫Pyl -Py2| 公式(3)
假設(shè)運動物體圖像M的寬度和高度以及運動檢測窗W的寬度和高度分 別由Mw、 Mh、 Ww和Wh來表示。如果滿足"dx S (Mw + Ww)/2"或"dy S (Mh +Wh)/2",則可以確定運動物體圖像M接觸到運動^r測窗W。
在步驟F101處執(zhí)行的圖像的分析中檢測到關(guān)于運動物體圖像M的位置、 寬度和高度的信息。另外，可以從圖12C中所示的設(shè)置信息的窗位置信息中 提取關(guān)于運動檢測窗W的位置、寬度和高度的信息。
例如，當如圖12A所示，4全測到三個運動物體圖1象Ml 、 M2和M3并且 設(shè)置三個運動檢測窗W1、 W2和W3時，在步驟F103,運動檢測單元24首 先使用上述計算來確定"運動物體圖像M1是否接觸到每一個運動檢測窗W1、 W2和W3"。然后運動;險測單元24將^r測結(jié)果反映在圖12A中所示的運動物 體檢查參數(shù)中。
如果確定運動物體圖像M1接觸到運動檢測窗Wl但沒有接觸到運動檢 測窗W2和W3，則在運動物體檢查參數(shù)中設(shè)置圖13A中所示的值。更具體 地說，在參數(shù)rc中設(shè)置指示運動物體圖像Ml接觸到運動檢測窗Wl的值(在 圖中表示為"O")。還設(shè)置指示運動物體圖像M1沒有接觸到運動檢測窗W2 和W3的值(在圖中表示為"-")。由于關(guān)于沒有接觸到的運動物體圖像和運 動檢測窗省略下面的檢查處理，因此將指示省略檢查的值(在圖中表示為"-") 寫入關(guān)于運動物體圖像Ml與運動檢測窗W2和W3之間的關(guān)系的參數(shù)Wfin。
在步驟F104，運動檢測單元24根據(jù)在步驟F103獲得的檢查結(jié)果是否指 示運動目標圖像M1與 一個或多個運動檢測窗接觸而分配不同種類的處理。 更具體地說，可以檢查圖13A中的運動物體檢查參數(shù)。
如果運動物體圖像M1沒有接觸到運動檢測窗Wl、 W2和W3的任意一個，那么在步驟F106在用于運動物體圖像M1的參數(shù)Mfin中設(shè)置指示"檢 查完成(已檢查)"的值之后，處理返回到步驟F102。
另一方面，例如在圖13A中所示的情況與其中檢查結(jié)果指示運動物體圖 像M1與運動^r測窗Wl接觸的情況相對應(yīng)。由于運動物體圖1象M1與至少 一個運動檢測窗接觸，因此處理進行到步驟F105。在步驟F105，運動檢測單 元24提取與運動物體圖像M1接觸的運動4金測窗。在這種情況下，運動4全測 單元24將運動檢測窗Wl作為檢查目標進行提取。如果運動物體圖像Ml與 多個運動檢測窗接觸，則運動檢測單元24將這些窗作為檢查目標提取。
在步驟F107,運動^r測單元24在作為^r查目標提取的一個或多個運動 檢測窗之中確定是否存在未檢查的運動檢測窗。如果存在未檢查的運動檢測 窗，則運動一全測單元24以從步驟F108開始的處理一企查未檢查的運動4企測窗 之一。
例如，在圖13A所示的情況中，由于在該點上，基于與運動物體圖像 Ml的關(guān)系的、作為檢查目標提取的運動檢測窗Wl的參數(shù)Wfm不是"已檢 查"，因此運動檢測單元24確定存在未檢查的運動檢測窗。處理進行到步驟 F108,并且檢查運動4全測窗Wl。
在步驟F108，運動檢測單元24確認經(jīng)歷檢查的運動檢測窗的設(shè)置信息。 在這種情況下，運動檢測單元24基于圖12C中所示的設(shè)置信息確認關(guān)于運動 檢測窗Wl的運動矢量的信息。
如上所述，可以為運動檢測窗設(shè)置運動矢量(其方向和量)以及區(qū)域， 并且可以將運動矢量添加到組成特定運動模式的條件中。當給定的運動物體 圖像與給定的運動檢測窗接觸，并且運動物體圖像的運動與為運動檢測窗設(shè) 置的運動矢量匹配時，幀圖像滿足作為組成一系列運動模式的候選者之一的 臨時存儲條件。
當不存在關(guān)于運動矢量的設(shè)置時，接觸到運動檢測窗的運動物體圖像滿 足臨時存儲條件。
如果運動檢測窗Wl的設(shè)置信息的確認結(jié)果指示不存在運動矢量設(shè)置， 則運動檢測單元24確定滿足臨時存儲條件。處理從步驟F109進行到步驟 F112,并且將圖像抓取標志設(shè)置為ON。如圖12B所示，圖像抓取標志是由 例如控制單元17管理的參數(shù)。因此，在步驟F112,運動檢測單元24請求控 制單元17將圖像抓取標志設(shè)置為ON。響應(yīng)于該請求，控制單元17將圖像抓取標志設(shè)置為ON。
另一方面，如果為運動檢測窗Wl設(shè)置運動矢量，則處理進行到步驟
FllO。運動檢測單元24將設(shè)置的運動矢量與運動物體圖像M1的運動矢量相 比較，以確定運動矢量是否匹配。
在圖15中示出用于比較運動矢量的方法。
假設(shè)預先為運動;險測窗Wl設(shè)置的運動矢量和通過運動一企測而^r測到的 運動物體圖像M的運動矢量分別由V0和VI表示。可以基于在設(shè)置運動檢 測窗W時的坐標來確定運動矢量V0?？梢栽诓襟EF101處執(zhí)行的分析時確定 運動矢量VI。
確定這兩個運動矢量vo和vi之間的角度e。
當將運動矢量表示為V0 = (x0,y0)和VI 二(xl,yl)時，可以使用公式(4)
確定角度e。
e = arcos(xOxxl + y0xyl)/sqr((x02 + y02)x(xl2 + y12)) 公式(4 )
這里，arcos (n)指示用于確定反余弦的函數(shù)，而sqr(n)指示用于確
定平方根的函數(shù)。
在用于確定運動物體圖像M的運動矢量V1是否與為運動檢測窗W設(shè)置 的運動矢量V0匹配的方法中，如果角度e例如不大于30度，則確定矢量V0 和VI表示同一方向。
另外，提供了用于確定矢量的量(運動的量)的方法。在該方法中，如 圖27A和圖27B所示，在圖像抓取裝置1中設(shè)置三個運動檢測級別"高，，、"中" 和"低"，并且用戶預先在圖像抓取裝置1中選擇運動探測靈敏度。根據(jù)由于 在設(shè)計時進行的調(diào)整而產(chǎn)生的圖像抓取裝置1的產(chǎn)品規(guī)格，可以采用運動矢 量的三個量級別的多種范圍。
在步驟F110,例如，在這樣的處理中，運動檢測單元24將為運動檢測 窗Wl設(shè)置的運動矢量與運動物體圖像M1的運動矢量相比較。
如果運動矢量匹配，則運動檢測單元24確定滿足臨時存儲條件。然后處 理進行到步驟F112。在步驟F112,運動檢測單元24請求控制單元17將圖像 抓取標志設(shè)置為ON。響應(yīng)于該請求，控制單元17將圖像抓取標志設(shè)置為ON。
如果沒有為當前檢查的運動檢測窗W設(shè)置運動矢量或者如果在確定矢 量匹配之后在步驟F112將圖像抓取標志設(shè)置為ON,則在步驟F113，控制單 元17根據(jù)來自運動檢測單元24的通知來更新運動檢測窗Wl的通過數(shù)目和通過窗計數(shù)的參數(shù)。如圖12B所示，將組成當前運動模式的每一個運動檢測
窗Wl、 W2和W3的通過數(shù)目以及運動物體圖像已經(jīng)接觸的窗的數(shù)目的參數(shù) 用作運動模式檢查參數(shù)。例如，控制單元17執(zhí)行圖11中所示的處理，由此 更新這些參數(shù)。
在步驟F150，控制單元17確定是否已經(jīng)關(guān)于當前正被檢查的運動檢測 窗(在這種情況下，運動檢測窗W1)記錄了通過數(shù)目。
如果已經(jīng)記錄了通過數(shù)目，則控制單元17終止圖11中所示的處理而不
更新參數(shù)。
如果還沒有記錄通過數(shù)目，則處理進行到步驟F151。在步驟F151，控 制單元17遞增通過窗計數(shù)的值。將通過窗計數(shù)初始設(shè)置為"0"。如果當前通 過窗計數(shù)等于O，則將通過窗計數(shù)遞增到1。在步驟F152,控制單元17確定 該處理是否為關(guān)于當前幀執(zhí)行的處理(即，從步驟F101開始的圖IO中所示 的當前處理)中記錄通過數(shù)目的第一次機會。
如果該處理是關(guān)于當前幀的第一次記錄機會，則處理進行到步驟F153。 在步驟F153，將通過將1加到已經(jīng)記錄的最大通過數(shù)目值而獲得的值設(shè)置為 當前被檢查的運動檢測窗(運動檢測窗W1)的通過數(shù)目。
在當前所述的運動檢測窗的情況下，由于運動檢測窗W1、 W2和W3的 通過數(shù)目等于"0"，因此將運動檢測窗Wl的通過數(shù)目設(shè)置為等于1。
如果在關(guān)于當前幀執(zhí)行的圖10中所示的處理期間，其后在另一運動檢測 窗(例如，運動檢測窗W3)的檢查中處理進行到圖11中所示的步驟F152， 那么由于該處理不是關(guān)于當前幀的第 一次記錄機會，因此處理進行到步驟 F154。在這種情況下，將已經(jīng)記錄的最大通過數(shù)目值設(shè)置為當前被檢查的運 動檢測窗(如運動4全測窗W3 )的通過數(shù)目。更具體地說，將運動檢測窗Wl 和W3 二者的通過數(shù)目都設(shè)置為等于1 。這是因為基于與運動物體圖像的關(guān)系 并且為了對于運動檢測窗Wl和W2設(shè)置相同的窗順序，關(guān)于相同的幀中的 運動檢測窗Wl和W3 二者檢測到臨時存儲條件的滿足。
在例如關(guān)于運動檢測窗Wl執(zhí)行的檢查期間，在步驟F113處執(zhí)行圖11 中所示的處理之后，.處理進行到圖10中所示的步驟F114。
另外，如果作為步驟Flll處的矢量比較的結(jié)果，確定運動物體圖像M1 的運動矢量與為運動檢測窗Wl設(shè)置的運動矢量不匹配，則不滿足臨時存儲 條件。因此，跳過步驟F112和F113的處理，并且處理進行到步驟F114。在步驟F114的階段，由于已經(jīng)完成了關(guān)于在當前檢查的運動檢測窗Wl
和運動物體圖像M1之間關(guān)系的檢查，因此將運動物體檢查參數(shù)的參數(shù)Wfm 更新到如圖13B所示的、指示檢查的完成(在圖中表示為"已檢查")的值。 然后處理返回到步驟F107。
在這點上，由于基于與運動物體圖像M1的關(guān)系的、在步驟F105預先提 取的所有運動檢測窗(即，其參數(shù)rc被表示為"〇"的所有運動檢測窗(在 這種情況下，僅為運動檢測窗Wl))已經(jīng)被檢查，因此處理從步驟F107進 行到步驟F106。已經(jīng)完成了關(guān)于運動物體圖像M1的檢查。更具體地說，如 圖13B所示，將運動物體圖像M1的參數(shù)Mfm更新到表示檢查的完成(在圖 中表示為"已完成")的值。
然后處理返回到步驟F102。在步驟F102,控制單元17確定是否仍然存 在未檢查的運動物體圖像。圖13B中所示的運動物體檢查參數(shù)指示運動物體 圖像M2和M3還沒有被檢查。因此，控制單元17在步驟F103開始關(guān)于運 動物體圖像M2的檢查處理。
由于在每一個步驟處關(guān)于運動物體圖像M2執(zhí)行的處理都與已經(jīng)在上面 描述的關(guān)于運動物體圖像M1執(zhí)行的處理相同，因此在下文中簡要地描述所 述處理流程。
假設(shè)在步驟F103處關(guān)于運動物體圖像M2執(zhí)行的檢查的結(jié)果指示運動物 體圖像M2與運動檢測窗Wl和W3接觸。
在這種情況下，如圖13C所示，將關(guān)于運動物體圖像M2與運動檢測窗 Wl和W3之間關(guān)系的參數(shù)rc設(shè)置為"O",并且在步驟F105將運動檢測窗 Wl和W3作為檢查目標進行提取。在從步驟F108開始的處理中首先檢查運 動檢測窗Wl與運動物體圖像M2之間的關(guān)系。
在這種情況下，如果基于檢查結(jié)果滿足臨時存儲條件，則在步驟F112 和F113處執(zhí)行關(guān)于圖像抓取標志、通過數(shù)目和通過窗計數(shù)的處理。
這里，假設(shè)在之前關(guān)于運動物體圖像M1與運動檢測窗Wl之間的關(guān)系 執(zhí)行的檢查中已經(jīng)執(zhí)行了步驟F112和F113的處理。在這種情況下，即使關(guān) 于運動檢測窗Wl和運動物體圖像M2滿足臨時存儲條件，在步驟F112和 F113也不執(zhí)行實質(zhì)的參數(shù)更新處理。由于圖像抓取標志已經(jīng)被設(shè)置為ON, 并且在步驟F113處在圖11中所示的處理中已經(jīng)對于當前被檢查的運動檢測 窗記錄了通過數(shù)目，因此退出處理而不更新任何參數(shù)。在完成關(guān)于運動檢測窗W1與運動物體圖像M2之間的關(guān)系的檢查之后，
在圖13D所示的步驟F114將運動物體圖像M2的運動檢測窗Wl的參數(shù)Wfm 設(shè)置為"已檢查"。
然后處理返回到步驟F107。在這種情況下，由于沒有檢查運動檢測窗 W3,因此以從步驟F108開始的處理檢查運動檢測窗W3與運動物體圖像M2 之間的關(guān)系。
如果運動檢測窗W3與運動物體圖像M2之間的關(guān)系滿足臨時存儲條件， 則在這種情況下也執(zhí)行步驟F112的處理。這里，保持設(shè)置圖像抓取標志。當 在步驟F113執(zhí)行圖11中所示的處理時，處理從步驟F152進行到步驟F154， 并且將通過數(shù)目設(shè)置為等于l，以便將運動檢測窗W3的順序設(shè)置為等于如上 所述的運動檢測窗Wl的順序。
在步驟F114,將用于運動物體圖像M2的運動檢測窗W3的參數(shù)Wfm 設(shè)置為"已檢查"。由于未檢查的運動檢測窗不再存在，因此處理從步驟F107 進行到步驟F106。在步驟F106,將運動物體圖像M2的參數(shù)Mfm設(shè)置為"已 檢查"。
然后以從步驟F103開始的處理檢查運動物體圖像M3。這里，當運動物 體圖像M3沒有接觸到運動檢測窗Wl、 W2和W3的任意一個時，處理從步 驟F104進行到步驟F106。在步驟F106，將運動物體圖像M3的參數(shù)Mfin設(shè) 置為"已檢查"。此時，由于在步驟F102確定未檢查的運動物體圖像不再存 在，因此控制單元17終止關(guān)于當前幀執(zhí)行的圖10中所示的處理。然后處理 進行到圖9中所示的步驟F3處的臨時存儲處理。
控制單元17執(zhí)行圖16A中所示的處理作為步驟F3處的臨時存儲處理。
在步驟F201,控制單元17首先檢查圖像抓取標志。如果圖像抓取標志 是OFF，則控制單元17終止處理而不執(zhí)行臨時存儲。
圖像抓取標志是ON的情況與在圖10所示的上述處理中關(guān)于給定運動物 體圖像與給定運動檢測窗之間的關(guān)系至少滿足臨時存儲條件一次的情況相對 應(yīng)。
因此，處理進行到步驟F202，并且控制單元17控制當前幀的臨時存儲。 更具體地說，控制單元17使壓縮/解壓縮單元19壓縮由運動檢測單元24處 理的當前幀的圖像數(shù)據(jù)，并且將經(jīng)壓縮的圖像數(shù)據(jù)傳送到非易失性存儲器29 以便在其中臨時地存儲圖像數(shù)據(jù)。圖16B中所示的處理也可以用作臨時存儲處理。將該處理作為第二實施 例進行描述。
在圖16A中所示的臨時存儲處理之后，控制單元17執(zhí)行圖9所示的步 驟F4處的運動模式完成檢查處理。運動模式完成檢查處理是用于確定臨時存 儲的圖像數(shù)據(jù)是否與由用戶作為圖像抓取目標選擇的運動模式(即，由運動 檢測窗限定的模式)相匹配。
例如，控制單元17在步驟F4執(zhí)行圖17中所示的處理。 在圖17中所示的步驟F300，控制單元17確定圖像抓取標志是否為ON。 在這點上，圖像抓取標志為OFF的情況與在圖16A所示的處理中當前處 理目標幀沒有被確定為組成運動模式的候選者且沒有被臨時存儲的情況相對 應(yīng)。
如果圖像抓取標志是OFF，則處理進行到步驟F311,并且控制單元17 確定是否存在在那點上臨時存儲的圖像數(shù)據(jù)。
如果存在臨時存儲的一段或多段圖像數(shù)據(jù)，則控制單元17確定，在臨時 存儲的一段或多段圖像數(shù)據(jù)之中，最后臨時存儲的圖像數(shù)據(jù)之后的至少預定 數(shù)目的連續(xù)幀(X個幀)的圖像抓取標志是否為OFF (即，是否存在不滿足 臨時存儲條件的、臨時存儲的一個幀之后的至少X個幀)。
如果不存在臨時存儲的圖像數(shù)據(jù)，或者如果存在臨時存儲的圖像數(shù)據(jù)但 沒有被臨時存儲的之后幀的數(shù)目小于X，則控制單元17終止運動模式完成檢 查處理而不執(zhí)行任何種類的處理。在這種情況下，處理通過圖9中所示的步 驟Fl進行到步驟F2,并且控制單元17使運動檢測單元24關(guān)于之后的幀執(zhí) 行圖10中所示的運動物體檢測處理。
在步驟F311確定不存在臨時存儲的圖像數(shù)據(jù)的情況與其中還沒有獲得 可能用作運動模式的候選者的圖像數(shù)據(jù)的情況相對應(yīng)。因此，控制單元17執(zhí) 行關(guān)于之后的幀的處理。
確定存在臨時存儲的圖像數(shù)據(jù)但在臨時存儲之后的至少X個連續(xù)幀的圖 像抓取標志是OFF(即，至少X個連續(xù)幀沒有被臨時存儲)的情況與其中臨 時存儲了可能用作當前運動模式的候選者的圖像數(shù)據(jù)但在預定幀時間段期間 沒有獲得組成對象的目標運動的對象圖像的情況相對應(yīng)。確定臨時存儲的圖 像數(shù)據(jù)不是組成目標運動的對象圖像是合適的。
因此，處理從步驟F312進行到步驟F309,并且控制單元17檢測臨時存儲在非易失性存儲器29中的抓取圖像。
在步驟F308,控制單元17復位在直到該點執(zhí)行的確定中已經(jīng)使用的、 圖12B中所示的每一個運動模式檢查參數(shù)。然后處理通過步驟F310進行到 圖9中所示的步驟F1和F2。更具體地說，控制單元17以初始狀態(tài)關(guān)于之后 的幀開始運動模式檢測處理。
如果在步驟F312確定連續(xù)幀的數(shù)目還沒有達到值X,則控制單元17確 定太早以至于不能確定臨時存儲的圖像數(shù)據(jù)是否為有效圖像，并且開始之后 幀的處理。
在步驟F300確定圖像抓取標志是ON的情況與其中在緊接在該處理之前 執(zhí)行的臨時存儲處理中，當前處理的目標幀的圖像數(shù)據(jù)已經(jīng)被臨時地存儲在 非易失性存儲器29中的情況相對應(yīng)。
在這種情況下，控制單元17確定在那點上臨時存儲的一個或多個幀的圖 像數(shù)據(jù)是否組成目標運動模式。
在步驟F301,控制單元17首先確定是否將窗順序設(shè)置為當前選擇的運 動模式的設(shè)置。
如果沒有設(shè)置窗順序，則處理從步驟F301進行到步驟F302，并且控制 單元17確定通過窗計數(shù)的值(見圖12B)是否達到運動檢測窗的數(shù)目。
如果通過窗計數(shù)的值沒有達到運動檢測窗的數(shù)目，則控制單元17確定在 那點上臨時存儲的一個或多個幀的圖像數(shù)據(jù)還沒有完成目標運動模式，并且 在該點上關(guān)于臨時存儲的圖像數(shù)據(jù)是否有效的確定是不合適的。控制單元17 在步驟F310將圖像抓取標志復位為OFF,并且處理返回到圖9中所示的步驟 Fl。在步驟F2，控制單元17使運動檢測單元24關(guān)于之后的幀執(zhí)行圖10中 所示的運動物體^f全測處理。
如果對于當前運動模式設(shè)置了窗順序，則處理從步驟F301進行到步驟 F303,并且控制單元17確定通過窗計數(shù)的值(見圖12B )是否達到運動檢測 窗的數(shù)目。
如果通過窗計數(shù)的值沒有達到運動檢測窗的數(shù)目，則控制單元17確定在 那點上臨時存儲的一個或多個幀的圖像數(shù)據(jù)還沒有完成目標運動模式，并且 在該點上關(guān)于臨時存儲的圖像數(shù)據(jù)是否有效的確定是不合適的?？刂茊卧?7 在步驟F310將圖像抓取標志復位為OFF,并且處理返回到圖9中所示的步驟 Fl。在步驟F2，控制單元17使運動檢測單元24關(guān)于之后的幀執(zhí)行圖10中所示的運動物體4企測處理。
例如，假設(shè)由三個運動檢測窗Wl、 W2和W3來限定運動模式。在這種
情況下，如果首先臨時存儲的幀的運動物體圖像M僅接觸到運動檢測窗Wl,
則將通過窗計數(shù)的值設(shè)置為等于1。在這樣的情況下，除非檢查之后的幀， 否則不能獲得關(guān)于多個幀是否組成目標運動模式的合適的確定結(jié)果。
因此，控制單元17通過跳過所述確定直到通過窗計數(shù)的值達到運動;^測
窗的數(shù)目(即，檢測到在一個或多個幀中，運動物體圖像已經(jīng)接觸到所有的
運動;險測窗W1、 W2和W3)為止，來關(guān)于之后的幀4丸4于處理。
視對象的運動而定，在通過關(guān)于每一個之后的幀重復地執(zhí)行圖9中所示 的步驟F2、 F3和F4的處理而進行的多個幀的臨時存儲之后，通過窗計數(shù)的 值變?yōu)榈扔谶\動檢測窗的數(shù)目。
不必說，可能存在其后沒有檢測到可能是候選者的每一個幀圖像并連續(xù) 地跳過臨時存儲的情況。在這樣的情況下，如上所述，處理順序地進行到步 驟F312、 F309和F308，并且以初始狀態(tài)重新開始運動才莫式才企測。
另外，根據(jù)運動物體的大小或運動的速度以及圖像抓取操作的幀速之間 的關(guān)系，可能存在在一幀的圖像中運動物體圖像接觸到所有多個運動檢測窗 (或以矢量匹配狀態(tài)接觸到)的情況。更具體地說，可能存在這樣的情況 其中在一幀的圖像數(shù)據(jù)的臨時存儲之后，在步驟F302或F303通過窗計數(shù)的 值變?yōu)榈扔谶\動檢測窗的數(shù)目，并且在之后的處理中確定運動模式的匹配。 將描述沒有對于當前選擇的運動模式設(shè)置窗順序的情況。 在這種情況下，當在步驟F302通過窗計數(shù)的值變?yōu)榈扔谶\動檢測窗的數(shù) 目時，確定檢測到目標運動模式。在例如圖1B或圖4A中所示的示例中(其 中將四個運動員設(shè)置為對象)，在運動矢量彼此匹配的情況下，當運動員的圖 像接觸到各個運動檢測窗Wl、 W2、 W3和W4時獲得的圖像數(shù)據(jù)被臨時地 存儲。由于運動員可能同時達到，因此響應(yīng)于對象的運動而臨時地存儲1-4 段圖像數(shù)據(jù)。
在這種情況下，當通過窗計數(shù)的值變?yōu)榈扔谶\動檢測窗的數(shù)目時，臨時 存儲的l、 2、 3或4段圖像數(shù)據(jù)可以包括包含每一個運動員通過終點線的圖像。
因此，當通過窗計數(shù)的值變?yōu)榈扔谶\動檢測窗的數(shù)目時，控制單元17 將臨時存儲的 一段或多段圖像數(shù)據(jù)作為組成目標運動模式的有效圖像數(shù)據(jù)進行處理。
更具體地說，處理進行到步驟F306，并且控制單元17將臨時存儲在非 易失性存儲器29中的一段或多段圖像數(shù)據(jù)記錄在存儲卡90中?？刂茊卧?7 將臨時存儲的圖像數(shù)據(jù)作為該時刻抓取的有效圖像數(shù)據(jù)記錄在存儲卡90中。
同時，在這種情況下，除了在存儲卡90中記錄臨時存儲的圖像數(shù)據(jù)(或 者不在存儲卡卯中記錄臨時存儲的圖像數(shù)據(jù))之外，還可以在非易失性存儲 器29中將臨時存儲的圖像數(shù)據(jù)作為有效圖像數(shù)據(jù)進行管理。
通過在步驟F306將圖像數(shù)據(jù)記錄在存儲卡卯中，在合適的時序自動地 執(zhí)行一個圖像抓取操作( 一個圖像的抓取或連續(xù)的拍攝操作)。
在步驟F307,控制單元17將運動檢測模式已經(jīng)完成的次數(shù)遞增。該值 指示在根據(jù)該實施例的運動檢測自動圖像抓取執(zhí)行模式期間實際執(zhí)行的圖像 抓取(一個圖像的抓取或連續(xù)的拍攝操作)的次數(shù)。
例如，如圖20所示，如果在運動檢測自動圖像抓取執(zhí)行模式期間將運動 檢測模式完成的次數(shù)的值作為完成圖標112顯示在顯示單元21上，則用戶可 以知道已經(jīng)抓取目標運動的圖像(一個圖像或連續(xù)抓取的圖像)的次數(shù)。
在運動檢測自動圖像抓取執(zhí)行模式中，將運動檢測窗等疊置在對象的圖 像上，并且將其顯示在顯示單元21上，如圖20所示。例如，通過改變所顯 示的運動檢測窗的顏色(在圖10中所示的運動物體檢測處理中關(guān)于所述運動 檢測窗滿足臨時存儲條件)，可以提供容易由用戶理解的顯示圖像。
然后在步驟F308,控制單元17復位所有運動模式檢查參數(shù)，并且處理 返回到圖9中所示的步驟F1。
因此，以初始化參數(shù)的狀態(tài)再次繼續(xù)自動圖像抓取操作。
現(xiàn)在將描述為運動檢測窗設(shè)置窗順序的情況。
在這種情況下，圖17中所示的處理從步驟F301進行到步驟F303。如果 在那個時刻通過窗計數(shù)的值等于運動檢測窗的數(shù)目，則在步驟F304,控制單 元17;險查每一個運動;險測窗的通過順序。更具體地說，控制單元17確定對 象圖像是否以所設(shè)置的順序接觸到各個運動檢測窗。
控制單元17以例如圖18中所示的模式執(zhí)行步驟F304的處理。
在步驟F350,控制單元17將變量n設(shè)置為'T'。
在步驟F351,控制單元17將比較源指針(comparison source pointer)設(shè) 置到運動檢測窗W (n)。假設(shè)將三個運動檢測窗Wl、 W2和W3設(shè)置為當前運動沖莫式，并且將
Wl、 W2和W3的順序設(shè)置為窗順序。在這種情況下，如圖19所示，將比較 源指針設(shè)置到作為窗順序中第一個的運動檢測窗Wl。
在步驟F352,控制單元17確定當前運動檢測窗W(n)是否為最后一個 運動檢測窗(運動檢測窗W3)。這意味著當將比較源指針設(shè)置到最后的運動 檢測窗W3時，終止圖18中所示的處理。
在將比較源指針設(shè)置到第一個運動檢測窗Wl之后，處理進行到步驟 F353,并且控制單元17將變量m設(shè)置為等于n+l。
在步驟F354,控制單元17將比較目的地指針(comparsion destination pointer)設(shè)置到運動檢測窗W (m)。更具體地說，如圖19所示，將比較目 的地指針設(shè)置到運動檢測窗W2。
在步驟F355,控制單元17將由比較源指針指示的運動檢測窗W(n)的 通過數(shù)目(見圖12B)與由比較目的地指針指示的運動檢測窗W (m)的通 過數(shù)目進行比較。
如果滿足(運動檢測窗W ( n)的通過數(shù)目的值)S (運動檢測窗W ( m) 的通過數(shù)目的值)，則這兩個運動檢測窗的窗順序之間的關(guān)系是合適的。
更具體地說，在運動檢測窗W2之前(或在同時)由運動物體圖像接觸 到運動檢測窗Wl。
如果滿足(運動檢測窗W ( n )的通過數(shù)目的值)〉(運動檢測窗W ( m ) 的通過數(shù)目的值)，則運動物體圖像在運動檢測窗Wl之前接觸到運動檢測窗 W2。因此，確定窗順序是不合適的。在這種情況下，在步驟F356,控制單 元17設(shè)置無效標志為ON,并終止圖18中所示的處理。
如果運動^r測窗W ( n )和運動;險測窗W ( m )的窗順序之間的關(guān)系是 合適的，則在步驟F357，控制單元17然后確定運動檢測窗W (m)是否為 最后的運動檢測窗。
當變量m=2時，運動檢測窗W2不是最后的運動檢測窗(在這種情況下 是運動^r測窗W3)。因此，處理進行到步驟F358,并且控制單元17遞增變 量m。然后處理返回到步驟F354,控制單元17將比較目的地指針設(shè)置到運 動檢測窗W(m)。因此，現(xiàn)在將比較目的地指針設(shè)置到運動檢測窗W3。在 步驟F355處執(zhí)行的比較處理中確定是否滿足(運動檢測窗Wl的通過數(shù)目的 值)S (運動檢測窗W3的通過數(shù)目的值)。如果滿足該條件，則在運動檢測窗W3之前(或者在同時)由運動物體圖像接觸到運動檢測窗Wl。因此，該 窗順序之間的關(guān)系是合適的。
另一方面，如果不滿足該條件，則由于運動物體圖像在運動檢測窗Wl 之前接觸到運動檢測窗W3,因此控制單元17確定窗順序是不合適的，并且 在步驟F356設(shè)置無效標記為ON,并終止圖18中所示的處理。
如果窗順序之間的關(guān)系是合適的，則控制單元17確定由比較目的地指針 指示的運動檢測窗W (m)是否為最后的運動檢測窗W3。如果運動檢測窗 W (m)是最后的運動檢測窗W3，則處理從步驟F357進行到步驟F359,并 且控制單元17遞增變量n。在步驟F351,控制單元17這次將比較源指針設(shè) 置到運動檢測窗W ( n )(即，運動一企測窗W2 )。
由于以與步驟F352、 F353和F354處類似的模式執(zhí)行處理，因此在步驟 F355，控制單元17確定是否滿足(運動檢測窗W2的通過數(shù)目的值)S (運 動才全測窗W3的通過數(shù)目的值)。如果滿足該條件，則在運動檢測窗W3之前 (或者在同時)由運動物體圖像接觸到運動檢測窗W2。因此，該窗順序之間 的關(guān)系是合適的。另一方面，如果不滿足該條件，則由于運動物體圖像在運 動檢測窗W2之前接觸到運動檢測窗W3，因此控制單元17確定窗順序是不 合適的，并且在步驟F356設(shè)置無效標記為ON,并終止圖18中所示的處理。
如果在步驟F355確定窗順序之間的關(guān)系是合適的，則由于由比較目的地 指針指示的運動檢測窗W (m)是最后的運動檢測窗W3，因此處理從步驟 F357進行到步驟F359，并且控制單元17遞增變量n。在步驟F351,控制單 元17這次將比較源指針設(shè)置到運動檢測窗W (n)(即，運動檢測窗W3 )。 然而，在步驟F352確定運動檢測窗W (n)是最后的運動檢測窗W3,終止 處理。
在圖18所示的處理中，關(guān)于多個運動檢測窗的組合的每一個檢查窗順序 之間的關(guān)系。除非組合之一指示相反的順序，否不將無效標記設(shè)置為ON。
如上所述，在圖10中所示的步驟F113處執(zhí)行的圖11中所示的處理中替 換通過數(shù)目的值。每一個運動檢測窗的通過數(shù)目指示運動物體圖像M第一次 接觸到窗的順序。
例如，當采用三個運動4全測窗Wl 、 W2和W3時，當處理進行到圖17 中所示的步驟F304時，在那時臨時存儲的圖像數(shù)據(jù)的段數(shù)是1、 2或3。在 這種情況下，在圖19中將通過數(shù)目值的可能組合示為(1 ) - ( 11 )。這里，圖19中所示的組合(1 )指示作為一般情況的、其中臨時存儲例
如圖2B、 2C和2D的圖像數(shù)據(jù)的情況。
參照圖2和圖21，將描述在這樣的情況下執(zhí)行的處理過程。 由于在圖2A中所示的幀F(xiàn)#0的處理期間，沒有^r測到運動物體圖像， 因此在圖9中所示的步驟F2、 F3和F4處不執(zhí)行處理。在處理目標移動到圖 2B中所示的幀F(xiàn)#l之后，在步驟F2處執(zhí)行的運動物體檢測處理中檢測到鳥 的圖像作為運動物體圖像M1，并且執(zhí)行圖IO和圖11中所示的處理。在圖 10中所示的處理完成之后，如圖21A所示的那樣設(shè)置每一個參數(shù)。更具體地 說，由于鳥的圖像與運動檢測窗Wl之間的關(guān)系滿足臨時存儲條件，因此將 運動檢測窗Wl的通過數(shù)目設(shè)置為等于'T，。另外，將通過窗計數(shù)的值設(shè)置 為等于"1"。
由于將圖像抓取標記設(shè)置為ON，因此在步驟F3處執(zhí)行的臨時存儲處理 (圖16A)中臨時地存儲幀F(xiàn)#l的圖像數(shù)據(jù)。
盡管在步驟F4處執(zhí)行圖17中所示的處理，但是由于通過窗計數(shù)的值等 于1而沒有達到運動^f全測窗的數(shù)目，因此退出所述處理。然后處理進行到關(guān) 于圖2C中所示的幀F(xiàn)#2的處理。
在步驟F2處執(zhí)行的該運動物體檢測處理中也檢測到鳥的圖像作為運動 物體圖像Ml,并且執(zhí)行圖IO和圖11中所示的處理。在圖IO中所示的處理 完成之后，如圖21B所示的那樣設(shè)置每一個參數(shù)。更具體地說，鳥的圖像與 運動檢測窗Wl和W2之間的關(guān)系滿足臨時存儲條件。由于已經(jīng)記錄了運動 檢測窗W1的通過數(shù)目，因此不更新通過數(shù)目。將運動檢測窗W2的通過數(shù) 目設(shè)置為等于"2"。另外，將通過窗計數(shù)的值設(shè)置為等于"2"。
由于將圖像抓取標記設(shè)置為ON，因此在步驟F3處執(zhí)行的臨時存儲處理 (圖16A)中臨時地存儲幀F(xiàn)弁2的圖像數(shù)據(jù)。
盡管在步驟F4處執(zhí)行圖17中所示的處理，但是由于通過窗計數(shù)的值等 于2而沒有達到運動檢測窗的數(shù)目，因此退出該處理。然后處理進行到關(guān)于 圖2D中所示的幀F(xiàn)#3的處理。
在步驟F2處執(zhí)行的該運動物體檢測處理中也檢測到鳥的圖像作為運動 物體圖像Ml,并且執(zhí)行圖IO和圖11中所示的處理。在圖IO中所示的處理 完成之后，如圖21C所示的那樣設(shè)置每一個參數(shù)。更具體地說，烏的圖像與 運動檢測窗Wl 、 W2和W3之間的關(guān)系滿足臨時存儲條件。由于已經(jīng)記錄了運動4企測窗Wl和W2的通過數(shù)目，因此不更新通過lt目。將運動4全測窗W3
的通過數(shù)目設(shè)置為等于"3"。另外，將通過窗計數(shù)的值設(shè)置為等于"3"。
由于將圖像抓取標記設(shè)置為ON，因此在步驟F3處執(zhí)行的臨時存儲處理 (圖16A)中臨時地存儲幀F(xiàn)#3的圖像數(shù)據(jù)。
在步驟F4處執(zhí)行圖17中所示的處理。在該點上，通過窗計數(shù)的值等于
3，達到了運動檢測窗的數(shù)目。因此，在步驟F304處執(zhí)行的處理中檢查窗順序。
此時，如圖19的情況(1)中所示的那樣設(shè)置運動檢測窗Wl、 W2和 W3的通過數(shù)目。
在這種情況下，在圖18中所示的處理中沒有將無效標記設(shè)置為ON。更 具體地說，確定臨時存儲的幀F(xiàn)#l、 F弁2和F弁3的圖像數(shù)據(jù)滿足關(guān)于窗順序的 條件。
在圖18所示的處理中確定在圖19的情況(1)-(4)中所示的窗順序是 合適的。關(guān)于情況(5)-(11)，在圖18所示的處理中將無效標記設(shè)置為ON。
在圖17所示的步驟F304處以上述模式檢查窗順序之后，根據(jù)檢查結(jié)果， 在步驟F305分配不同種類的處理。更具體地說，如果無效標記是OFF，則由 于滿足所設(shè)置的窗順序，因此處理進行到步驟F306。
在步驟F306，控制單元17將臨時存儲的一段或多段圖像數(shù)據(jù)作為組成 目標運動模式的有效圖像數(shù)據(jù)進行處理。更具體地說，控制單元17將臨時存 儲在非易失性存儲器29中的一段或多段圖像數(shù)據(jù)記錄在存儲卡90中。
通過在步驟F306將圖像數(shù)據(jù)記錄在存儲卡90中，在合適的時序自動執(zhí) 行一個圖像抓取操作(一個圖像的抓取或連續(xù)的拍攝操作)。例如，"抓取" 了圖2B、 2C和2D中所示的連續(xù)拍攝的圖像。
在步驟F307,控制單元17將運動檢測模式完成的次數(shù)遞增。
在步驟F308，控制單元17復位所有的運動模式檢查參數(shù)，并且處理返 回到圖9中所示的步驟F1。
更具體地說，以初始化參數(shù)的狀態(tài)再次繼續(xù)自動圖像抓取操作。
另一方面，如果在圖17所示的步驟F304處執(zhí)行的處理(即，圖18中所 示的處理)中將無效標記設(shè)置為ON,則執(zhí)行下面的操作。
當例如如在圖19中所示的情況(5 ) - ( 11 )所示的那樣設(shè)置通過數(shù)目時， 由于不滿足窗順序設(shè)置，因此將無效標志設(shè)置為ON。在這種情況下，圖17中所示的處理從步驟F305進行到步驟F309,并且控制單元17執(zhí)行控制操作 以刪除臨時存儲在非易失性存儲器29中的無效圖像數(shù)據(jù)。
更具體地說，確定直到該點的已經(jīng)臨時存儲的圖像數(shù)據(jù)不是組成目標運 動的對象圖像，并將其刪除。
在步驟F308,控制單元17將已經(jīng)在直到該點執(zhí)行的確定中使用的、圖 12B中所示的每一個運動模式檢查參數(shù)的值復位。然后處理通過步驟F310返 回到圖9中所示的步驟F1和F2。更具體地il，控制單元17以初始狀態(tài)開始 關(guān)于之后幀的運動模式檢測操作。
在根據(jù)該實施例的運動檢測自動圖像抓取執(zhí)行模式中，在圖9中所示的 步驟F1檢測用戶的終止操作。連續(xù)地執(zhí)行上述處理，直到將模式切換到運動 檢測自動圖像抓取待機模式為止。
結(jié)果，作為用戶想要的圖像抓取的結(jié)果，將匹配運動模式的圖像數(shù)據(jù)存 儲在存儲卡90中。
臨時地存儲候選圖像數(shù)據(jù)，直到確定圖像數(shù)據(jù)匹配運動模式為止。如果 確定候選圖像數(shù)據(jù)不匹配運動模式，則控制單元17將臨時存儲的圖像數(shù)據(jù)看 作是不想要的圖像數(shù)據(jù)，并刪除所述圖像數(shù)據(jù)。
因此，可以自動地抓取具有想要的運動的對象的圖像，并高概率地將其 存儲在存儲卡90中，并且可以盡可能地減少不想要的圖像的存儲。
響應(yīng)于關(guān)于圖像抓取裝置l執(zhí)行的用戶的設(shè)置變化，可以修改由這樣的 圖像抓取裝置l執(zhí)行的處理?？梢詫⑴R時存儲的圖像數(shù)據(jù)存儲在例如非易失 性存儲器29中而不是將其刪除，并且可以允許用戶選擇是使圖像有效還是在 后面確認圖像之后刪除無效的圖像。
當不刪除曾經(jīng)確定為無效的圖像數(shù)據(jù)而是將其存儲在非易失性存儲器 29等中時，關(guān)于存儲區(qū)域的容量產(chǎn)生了限制。其中如果圖像數(shù)據(jù)的大小超過 了容量則其中順序地重寫較舊的圖像數(shù)據(jù)的配置也是可采用的。
有效等同于存儲卡90中作為抓取的圖像的圖像數(shù)據(jù)的存儲。如上所述， 可以在內(nèi)部存儲器(如非易失性存儲器29)中存儲有效的抓取圖像(作為通 常由用戶看作是抓取結(jié)果的圖像數(shù)據(jù))，或者當圖像抓取裝置1通過外部I/F 單元28連接到另 一設(shè)備時，可以將圖像數(shù)據(jù)作為抓取的結(jié)果傳送到另 一設(shè) 備。
盡管根據(jù)圖17中所示的處理確定臨時存儲的圖像數(shù)據(jù)的有效/無效，但是可以采用確定圖像數(shù)據(jù)有效的多種條件。
在上述示例中，當沒有設(shè)置窗順序時，如果運動物體接觸到所有窗，則 使臨時存儲的圖像數(shù)據(jù)有效。當設(shè)置窗順序時，如果運動物體以窗順序接觸 到所有窗，則使臨時存儲的圖像數(shù)據(jù)有效。
條件不限于這些特定的條件?？梢圆捎孟旅娴臈l件，或者用戶可以選擇 下面的條件。
如果運動物體圖像接觸到一個或多個運動檢測窗中的至少一個，則使 圖像數(shù)據(jù)有效。
如果運動物體圖像接觸到多個運動檢測窗中預定數(shù)目的運動檢測窗，
則使圖像數(shù)據(jù)有效。
如果運動物體圖像接觸到多個運動檢測窗的至少大多數(shù)，則使圖像數(shù)
據(jù)有效。
如果運動物體圖像接觸到一個或多個運動^f企測窗中的至少一個，其中 圖像數(shù)據(jù)的運動矢量與設(shè)置的運動矢量匹配，則使圖像數(shù)據(jù)有效。
如果運動物體圖像接觸到多個運動檢測窗的至少大多數(shù)，其中圖像數(shù) 據(jù)的運動矢量與設(shè)置的運動矢量匹配，則使圖像數(shù)據(jù)有效。
在其中為多個運動檢測窗設(shè)置窗順序和運動矢量的情況下，當窗順序 和運動矢量二者均與運動物體的匹配時，當運動矢量不匹配而窗順序 正確時，或者當運動矢量匹配而窗順序不正確時，使圖像數(shù)據(jù)有效。
在圖19中所示的組合(1 ) - ( 11 )之中，關(guān)于窗順序自由地選擇被確 定為有效的通過數(shù)目的組合。
上述條件僅是示例性的，并且除了這些條件之外的多種有效性確定條件 都是可用的。例如，通過使用多種有效性確定條件，或者通過允許用戶選擇 有效性確定條件，可以精確地執(zhí)行與用戶的意愿匹配的自動圖像抓取。
<1-4:運動模式設(shè)置>
將給出當用戶以上述模式新創(chuàng)建在根據(jù)該實施例的圖像抓取裝置1中使 用的運動模式時采用的方法的描述。更具體地說，將描述用于設(shè)置運動檢測 窗的方法。
圖22A示出了在圖像抓取裝置1的觸摸屏23上顯示的設(shè)置菜單120。用 戶在該設(shè)置菜單中選擇"運動模式登記'，項?？刂茊卧?7響應(yīng)于這樣的用戶操作，在顯示單元21 (觸摸屏23)上顯示圖22B中所示的運動模式選擇屏幕 121。
通過觸摸觸摸屏23,用戶可以在該運動模式選擇屏幕121中選擇之前登 記的運動模式(模式A、 B、 C)或者選擇新創(chuàng)建一模式。
響應(yīng)于用戶的已登記模式的選擇或新模式的創(chuàng)建，控制單元17在顯示單 元21上顯示圖22C中所示的運動檢測區(qū)域設(shè)置屏幕122。
用戶使用該運動檢測區(qū)域設(shè)置屏幕122來編輯已登記的運動模式的運動 檢測窗，或者新創(chuàng)建運動檢測窗。例如，用戶指定其中將對象檢測為矩形窗 的運動檢測窗的區(qū)域，由此能夠設(shè)置其大小和位置。另外，用戶可以對于每 一個運動檢測窗設(shè)置條件，即，指示運動的方向和運動量的運動矢量以及窗 順序。
如果用戶完成了創(chuàng)建/編輯運動檢測窗的工作，并操作"設(shè)置"按鈕，則 控制單元17在顯示單元21上顯示圖22D中所示的運動模式檢測完成條件設(shè) 置屏幕123。
通過該運動模式檢測完成條件設(shè)置屏幕123,用戶可以設(shè)置用作完成運 動檢測的條件(如，圖17所示的處理中使用的有效確定條件)的通過窗的數(shù) 目或設(shè)置是否檢查窗順序。
如果用戶操作"返回，，按鈕，則控制單元17將所顯示的屏幕切換回圖 22C中所示的運動檢測區(qū)域設(shè)置屏幕122。以這種模式，用戶可以再次執(zhí)行設(shè) 置運動檢測窗的區(qū)域的操作。
如果在運動模式檢測完成條件設(shè)置屏幕123上設(shè)置了條件之后，用戶操 作"設(shè)置，，按鈕，則控制單元17將屏幕切換到圖22B中所示的運動模式選擇 屏幕121。此時，控制單元17將此時創(chuàng)建的運動模式登記為新的運動模式， 以便用戶可以在其后選擇該模式。
將參照圖23描述圖22C中所示的運動檢測區(qū)域設(shè)置屏幕122的細節(jié)。
這里，將給出設(shè)置表示范圍和位置的矩形窗(其中檢測到運動物體圖像) 的方法的示例。響應(yīng)于用戶操作，在由控制單元17執(zhí)行的顯示控制處理中執(zhí) 行將要在下面描述的顯示操作。
在觸摸板23的屏幕上顯示的運動檢測區(qū)域設(shè)置屏幕122中顯示限定其中 可以設(shè)置檢測窗的范圍的虛線133。還顯示"添加，，按鈕B1、"刪除"按鈕 B2和"設(shè)置"按鈕B3。另外，顯示矢量設(shè)置按鈕B4和矢量自動設(shè)置按鈕B5。
響應(yīng)于添加按鈕B1上的用戶觸摸，在屏幕上的空白區(qū)新顯示運動檢測 窗(如，運動檢測窗W1)。該圖示出了其中響應(yīng)于關(guān)于添加按鈕B1執(zhí)行的 兩次操作，顯示兩個運動檢測窗Wl和W2的狀態(tài)。
新添加的運動檢測窗以預定大小出現(xiàn)在屏幕上。如果屏幕上的空白區(qū)太 小以至于不能顯示新的運動檢測窗，則控制單元17不添加運動檢測窗，而是 顯示錯誤信息以向用戶通知所述錯誤。
另外，自動地選擇新添加的運動檢測窗。當在屏幕上顯示多個運動檢測 窗時，用戶只需要簡單地觸摸用戶想要選擇的運動檢測窗即可。
將指示運動檢測窗的順序的數(shù)字(順序圖標136)顯示在屏幕上顯示的 運動檢測窗(W1和W2)的左上部分。根據(jù)運動檢測窗的創(chuàng)建順序使用作順 序圖標136的數(shù)字遞增，并且將其作為伴隨運動檢測窗的順序數(shù)據(jù)進行管理。 更具體地說，該數(shù)字用作上述窗順序設(shè)置，并且用在運動模式的確定中。當 設(shè)置要在后面描述的運動檢測模式的完成條件時，用戶可以選擇使該數(shù)字有 效還是無效。更具體地說，該選擇是關(guān)于是否執(zhí)行窗順序設(shè)置的。
盡管在此根據(jù)運動檢測窗的創(chuàng)建順序來設(shè)置運動檢測窗的順序，但是在 創(chuàng)建給定數(shù)目的運動檢測窗之后，用戶可以自由地設(shè)置或改變窗順序。
在所選擇的運動檢測窗的四個角處顯示按鈕134。圖23示出了其中選擇 運動檢測窗W2的示例。在非選擇的運動檢測窗(在這種情況下是運動檢測 窗Wl )的四個角不顯示按鈕134。
通過拖拽按鈕134,用戶可以放大/縮小運動檢測窗的范圍?？梢韵薅ǚ?大/縮小的可變范圍。例如，可以將縮小的最小大小設(shè)置為新添加運動檢測窗 時顯示的運動一全測窗的大小，并且可以配置運動檢測窗不會縮小到比該縮小 的最小大小更小的大小。
在所選擇的運動檢測窗(W2)的中心顯示十字135。通過拖拽該十字135， 用戶可以移動整個運動檢測窗(W2)的位置。然而，運動檢測窗不會移動到 虛線133之外。也就是說，運動檢測窗的范圍必須在虛線133之內(nèi)?？刂茊?元17執(zhí)行控制操作，以便即使用戶將運動檢測窗拖拽到由虛線133包圍的區(qū) 域之外，運動;險測窗也不移動。
如果用戶關(guān)于所選擇的給定運動檢測窗觸摸刪除按鈕B2，則控制單元 17刪除所選擇的運動檢測窗。此時，優(yōu)選地在實際刪除運動檢測窗之前顯示對話框，以便用戶可以選擇"確認"或"取消"。
如果屏幕上存在多個運動檢測窗，則 一個運動檢測窗和另 一個運動檢測 窗可以部分重疊。然而，可以配置在完全相同的位置處不存在相同大小的運 動檢測窗，或者在另一個運動檢測窗之內(nèi)不存在給定大小的運動檢測窗。當 用戶通過拖拽運動檢測窗來試圖將給定的運動檢測窗移動到這樣的位置時， 控制單元17可以向用戶通知錯誤消息，而不是移動運動4企測窗。不必說，可 以提供禁止運動檢測窗的部分重疊的限制。
可以對于運動;險測窗設(shè)置運動矢量。
用戶首先選擇給定的運動檢測窗，并按下矢量設(shè)置按鈕B4。如果按下矢 量設(shè)置按鈕B4—次，則將顯示改變到指示按下狀態(tài)的圖標。這里，假設(shè)該圖 標指示該屏幕向用戶表面為運動矢量設(shè)置模式。如果用戶在該狀態(tài)中再次觸 摸矢量設(shè)置按鈕B4，則模式再次返回到上述窗大小/位置設(shè)置模式。
在運動矢量設(shè)置模式中，關(guān)于如圖24中所示的所選擇的運動檢測窗 (W2),點P1出現(xiàn)在屏幕上的給定位置處。另外，從點P1到所選擇的運動 檢測窗(W2)的中心P0繪制箭頭V0。該箭頭VO指示為運動檢測窗(W2) 設(shè)置的適量的方向。
優(yōu)選地，以指示該箭頭正被編輯的顏色(如，紅色)來繪制該箭頭VO。
此時，如果用戶在所選擇的運動檢測窗(W2)之外的給定位置處觸摸， 則在屏幕上，點P1移動到給定位置。點P1可以移動到虛線133之外。也就 是說，點P1可以在觸摸屏23的屏幕范圍內(nèi)移動。如果移動點P1，則從點P1 已經(jīng)移動到的位置重新繪制箭頭V0。
如果用戶觸摸所選擇的運動檢測窗(W2)之內(nèi)的給定位置，則點P1和 箭頭VO的顯示消失。例如，該狀態(tài)指示沒有為所選擇的運動檢測窗設(shè)置運 動矢量。
當用戶想要完成設(shè)置運動檢測窗的運動矢量時，通過再次按下矢量設(shè)置 按鈕不B4，模式返回到上述窗大小/位置設(shè)置模式。以指示矢量被確定的顏色 (如，黑色)來繪制所設(shè)置的運動矢量。
此外，如果用戶想要為另一運動檢測窗設(shè)置運動矢量，則用戶簡單地觸 摸運動檢測窗以選擇窗，按下矢量設(shè)置按鈕B4以將模式切換到運動矢量設(shè)置 模式，并執(zhí)行類似的操作。
圖25示出了改變?yōu)檫\動檢測窗設(shè)置的矢量的方向的示例。該情況與這樣的情況相對應(yīng)其中用戶想要設(shè)置從運動檢測窗(W2)的 中心P0到位于窗之外的點P1的相反的矢量方向，而不是從位于所選擇的運 動檢測窗(W2 )之外的點P1到運動檢測窗的中心P0的矢量方向。
在說明書的方法中，在上述運動矢量設(shè)置模式中確定點P1的位置之后， 用戶再次觸摸與點P1的坐標相同的坐標?？刂茊卧?7將該操作識別為切換 方向的指令，并將矢量的方向設(shè)置為相反的方向。在這種情況下，通過反復 地觸摸點Pl,可以在P1—P0與P0—Pl之間切換矢量方向。響應(yīng)于矢量方向
的變化也繪制箭頭vo。
還準備了自動設(shè)置運動矢量的模式(在下文中，稱為運動矢量自動設(shè)置
模式)。
在該模式中，用戶觸摸在屏幕上顯示的矢量自動設(shè)置按鈕B5，由此根據(jù) 運動檢測窗的窗順序來自動地確定要為每一個運動檢測窗設(shè)置的運動矢量。
圖26示出了其中創(chuàng)建三個運動檢測窗Wl、 W2和W3的狀態(tài)。如果用 戶在該狀態(tài)中按下矢量自動設(shè)置按鈕B5，則控制單元17基于每一個運動檢 測窗W1、 W2和W3的中心P0自動地設(shè)置運動矢量，如圖所示。
更具體地說，將從運動檢測窗Wl的中心延伸到運動檢測窗W2的中心 的矢量設(shè)置為箭頭V0,而將從運動檢測窗W2的中心延伸到運動檢測窗W3 的中心的矢量設(shè)置為箭頭VI。
在該模式中，不允許用戶單獨地為每一個運動檢測窗設(shè)置運動矢量。
現(xiàn)在參照圖27A和圖27B描述關(guān)于運動矢量的量的設(shè)置。
最為優(yōu)選地，可以將運動矢量的量(運動的量)設(shè)置為圖像抓取裝置1 檢測運動的靈敏度。
在這種情況下，在圖27A所示的設(shè)置菜單GUI中，用戶可以從三個級別 "高"、"中"和"低"中選擇運動矢量探測靈敏度。
將三個級別定義如下 "高" 一 當運動矢量的量很小時檢測到運動；
"中，， 一當運動矢量的量中等時檢測到運動；以及 "低" 一當運動矢量的量很大時檢測到運動。 允許用戶通過復選框142選擇"高"、"中"和"低"中之一，并通過確 認按鈕141創(chuàng)建所述選擇。
作為確定運動矢量的級別(如大、中和小)的示例方法，通過將一幀中運動物體圖像的運動矢量的量與如圖27B中所示的觸摸屏的分辨率進行比較 來確定運動矢量的級別。例如，如圖27B所示，當指示窗可設(shè)置區(qū)域的虛線 窗103的高度由h表示時，將閾值定義如下
"大"一當一幀中的運動物體圖像的運動大于高度h的1/2時；
"中"一當一幀中的運動物體圖像的運動在高度h的1/4與1/2之間時；
以及
"小" 一當一幀中的運動物體圖像的運動小于高度h的1/4時。
優(yōu)選地，將確定級別"大"、"中，，和"小，，的閾值設(shè)計為作為在圖像抓 取裝置1的使用期間的調(diào)整參數(shù)易于改變。另外，可以提供GUI菜單，以便 用戶可以將參數(shù)設(shè)置為圖像抓取裝置1的設(shè)置值。
圖28A和圖28B示出了設(shè)置運動矢量的量的另一個示例。
圖28A示出了其中在圖24中所示的運動矢量設(shè)置屏幕上執(zhí)行上述運動 矢量方向設(shè)置操作期間，當用戶在位于所選擇的運動檢測窗之外的給定位置 處指定點P1時，點P1與中心PO之間的距離被用作運動矢量的量的情況。
參照圖28B，準備運動矢量的三個量(大、中和小)，并且在GUI中以 不同的顏色顯示具有每一個量的箭頭。例如，將顏色設(shè)置如下
紅線一大運動；
黃線一中運動；以及
藍線一小運動。
在指定給定顏色之后，用戶指定運動矢量的方向。圖27B中所示的上述 方法可以用作確定由圖像抓取裝置l執(zhí)行的大、中或小運動的方法。
根據(jù)參照圖28A和圖28B描述的兩種方法，由于可以為每一個運動檢測 窗指定不同的矢量量，因此有利地是，可以實現(xiàn)更精確的運動模式設(shè)置。
圖像抓取裝置1可以采用圖27A、圖27B、圖28A和圖28B中所示的運 動矢量量設(shè)置方法中的一個，或者可以采用所有方法，并允許用戶選擇給定 的一個方法。
已經(jīng)給出了在圖22C中所示的運動檢測區(qū)域設(shè)置屏幕122上，用戶執(zhí)行 運動檢測窗區(qū)域設(shè)置、窗順序設(shè)置和運動矢量方向/量設(shè)置的情況的描述。在 完成這些工作之后，用戶操作設(shè)置按鈕B3。
響應(yīng)于用戶按下設(shè)置按鈕B3，控制單元17識別出已經(jīng)完成運動檢測窗 區(qū)域設(shè)置，并將屏幕切換到圖22D中所示的運動模式檢測完成條件設(shè)置屏幕123。
現(xiàn)在將參照圖29描述通過圖22D中所示的運動模式檢測完成條件設(shè)置 屏幕123的用戶操作。
運動模式檢測完成條件設(shè)置等同于在例如為了確定運動物體的運動是否 匹配運動模式(即，運動物體的圖像數(shù)據(jù)是否有效)的、圖17所示的運動模 式完成檢查處理中使用的條件的設(shè)置。如上所述，在圖17所示的示例中，當 沒有設(shè)置窗順序時，如果運動物體接觸到所有的窗，則確定臨時存儲的圖像 數(shù)據(jù)有效。另外，當設(shè)置了窗順序時，如果運動物體以設(shè)置的窗順序接觸到 所有窗，則確定臨時存儲的圖像數(shù)據(jù)有效。
此外，如上所述，如果運動物體圖像接觸到多個運動檢測窗中預定數(shù)目 的運動檢測窗，則可以考慮多種條件(如，確定圖像數(shù)據(jù)是否有效的條件)。
這里，將允許關(guān)于在條件中是否包括運動檢測窗的窗順序的設(shè)置和關(guān)于 由運動物體圖像接觸到的窗的數(shù)目的設(shè)置的示例作為一個示例進行討論。
在圖29所示的運動模式檢測完成條件設(shè)置屏幕123中，顯示包括先前在 運動檢測區(qū)域設(shè)置屏幕122上設(shè)置的運動檢測窗的運動模式設(shè)置屏幕151。
還顯示用于設(shè)置通過窗的數(shù)目的部分(在下文中，稱為通過窗數(shù)目設(shè)置 部分)152和數(shù)目調(diào)整按鈕B11。
另外，顯示順序復選框153和復選框B14。
此外，顯示返回按鈕B13和設(shè)置按鈕B12。
將當前正在創(chuàng)建的運動模式顯示為運動模式設(shè)置屏幕151。如果用戶想 要修改該運動模式，則用戶只需簡單地按下返回按鈕B13即可。在這種情況 下，控制單元17執(zhí)行控制操作以將屏幕123再次切換到圖22C中所示的運動 檢測區(qū)域設(shè)置屏幕122。
用戶可以設(shè)置是否將窗順序用作運動模式設(shè)置屏幕151中所示的運動模 式的確定條件。
更具體地說，通過觸摸順序復選框153的復選框B14,用戶可以選擇順 序檢查的存在或不存在。這里，順序檢查的存在或不存在等同于是否將參照 圖17所述的窗順序的確定包括到所述條件。根據(jù)該設(shè)置，在圖17中所示的 步驟F301處執(zhí)行不同種類的處理。
用戶還可以將通過窗的數(shù)目設(shè)置為在運動模式設(shè)置屏幕151中顯示的運 動模式的確定條件。更具體地說，通過以通過窗數(shù)目設(shè)置部分152的數(shù)目調(diào)整按鈕B11改變值，用戶可以設(shè)置給定數(shù)目。例如，當如圖中所示的那樣創(chuàng)
建三個運動;險測窗時，用戶可以選4奪'T，、 "2"或"3"作為通過窗的數(shù)目。
通過窗的數(shù)目與在圖17中所示的步驟F302和F303處描述的"運動檢 測窗的數(shù)目"相對應(yīng)。已經(jīng)對于其中"運動檢測窗的數(shù)目"等于"運動檢測 窗的總數(shù)，，(其是固定值)的情況給出了關(guān)于圖17的描述。因此，采用條件 "運動物體圖像已經(jīng)接觸到所有運動檢測窗"作為確定條件之一。根據(jù)通過 窗的數(shù)目的該設(shè)置，當運動模式包括了例如三個運動檢測窗時，可以釆用條 件"運動物體圖像已經(jīng)接觸到一個運動檢測窗"或"運動物體圖像已經(jīng)接觸 到兩個運動檢測窗"作為所述條件。
關(guān)于通過窗的數(shù)目的設(shè)置和順序檢查的設(shè)置，例如，可以分別將通過窗 的數(shù)目和順序檢查初始地設(shè)置到所創(chuàng)建的運動檢測窗的總數(shù)和"無效"。
不必說，當運動檢測窗的數(shù)目是一時，可以省略這些設(shè)置。在這樣的情 況下，使在通過窗數(shù)目設(shè)置部分152和順序復選框153上執(zhí)行的觸摸操作無 效，或者以灰色顯示通過窗數(shù)目設(shè)置部分152和順序復選框153是合適的。
盡管已經(jīng)描述了設(shè)置通過窗的數(shù)目以及順序檢查的存在/不存在的示例， 但是可以進行多種設(shè)置。
在運動模式檢測完成條件設(shè)置單元123上選擇條件之后，用戶觸摸設(shè)置 按鈕B12。然后控制單元17將該操作看作是條件設(shè)置的完成，并將屏幕123 切換到圖22B中所示的運動模式選擇屏幕121。
當終止該運動模式檢測完成條件設(shè)置屏幕124時，控制單元17可以向用 戶顯示該設(shè)置信息，以允許用戶確認該信息，并選擇"確認"或"取消"。
用戶可以例如以上述模式自由地創(chuàng)建和登記運動模式，以便將所述運動 模式用在圖像抓取裝置1中。
控制單元17將關(guān)于所創(chuàng)建的運動模式的信息存儲在控制單元17中包括 的非易失性存儲器中或者非易失性存儲器29的預定區(qū)域中，并允許在其后執(zhí) 行運動檢測自動圖像抓取時，用戶通過圖7A中所示的設(shè)置菜單來選擇所創(chuàng) 建的運動模式。
<1-5:圖像抓取裝置的實施例的應(yīng)用的優(yōu)點>
已經(jīng)對于在圖像抓取裝置1中執(zhí)行的運動檢測自動圖像抓取操作和運動 模式設(shè)置給出了描述。根據(jù)所述實施例的這樣的圖像抓取裝置1可以提供以下優(yōu)點。
一般而言，由于熟練的圖像抓取技術(shù)用于抓取運動物體的圖像，因此對 于不熟練的人來說難以抓取運動物體的圖像。使用根據(jù)該實施例的圖像抓取 裝置l，通過簡單的操作，用戶就可以以想要的組成來拍攝運動物體。
例如，如果用戶在足球比賽中將取景器(finder)指向目標周圍處，則用 戶可以抓取決定性的時刻，而不會錯過拍攝好照片的最佳時刻。
另外，由于可以關(guān)于可以某種程度地預測的運動設(shè)置運動模式，因此， 拍攝者不需要在手持照相機的同時等待最佳時刻。
例如，如圖2A-圖4D中所述，當用戶想要拍攝快速運動的生物或火車的 圖片時，或者用戶最初必須在固定圖像抓取位置、角度和取景器的同時長時 間等待對象時，用戶在此時間段期間不需要在照相機前面待命，而是可以在 做其他事情的同時以想要的組成來抓取圖像。
例如，當用戶在運動會上抓取賽跑的圖像時，通過將取景器固定在終點 線周圍，用戶可以有效地抓取運動員的終點線場景的圖像。另外，由于高速 圖像抓取設(shè)置也是可用的，因此通過拍照來進行的諸如確定賽馬冠軍的決定 之類的使用也是可用的。
另外，使用運動檢測窗的排列和數(shù)目以及運動檢測窗的矢量的簡單組合 來設(shè)置運動模式。因此，通過簡單地僅設(shè)置一個運動檢測窗以及使用多個運 動檢測窗來提供運動矢量設(shè)置和窗順序，可以處理多種運動或復雜的運動。
以這種模式，根據(jù)要抓取的多種場景的特性，用戶可以選擇運動檢測模 式，并且可以通過使用更接近于用戶的意愿的運動模式來抓取圖像。因此， 可以靈活地處理要抓取的對象的多種運動。
關(guān)于使用運動檢測窗的運動模式的設(shè)置可以考慮多種設(shè)置示例。例如， 圖30A示出了設(shè)置運動檢測窗中的一些的窗順序的示例。在運動檢測窗Wl、 W2、 W3和W4之中，分別將運動檢測窗Wl和W2的窗順序設(shè)置為第一和 第二。然而，關(guān)于運動檢測窗W3和W4不指定窗順序。在這種情況下，當 運動物體圖像以"wi—W2—W3—W4"的順序通過窗時，并且當運動物體 圖像以"W1—W2—W4—W3"的順序通過窗時，確定窗順序是合適的。
圖30B示出了設(shè)置運動檢測窗的一些的運動矢量的示例。僅對于運動檢 測窗W1設(shè)置運動矢量。如果運動物體圖像從左側(cè)進入窗Wl，則運動物體圖 像的運動與運動矢量匹配。可以檢測到在其他運動檢測窗W2和W3中以任何方向的運動物體圖像。
圖30C示出了設(shè)置運動檢測窗中的一些的窗順序和運動矢量的示例。將 運動檢測窗Wl的窗順序設(shè)置為第一，而沒有為其他運動檢測窗指定窗順序。
為運動;險測窗W2和W4設(shè)置運動矢量。
使用上述多種設(shè)置組合，可以更精確地檢測作為目標的對象的運動模式。 由于根據(jù)要抓取的場景或運動模式的選擇，也執(zhí)行高速圖像抓取或連續(xù)
圖像抓取，因此用戶可以在不錯過抓取圖像的最佳時刻的情況下抓取運動物
體的決定性時刻。
在這樣的情況下，由于僅在對象執(zhí)行想要的運動時才拍攝圖片(存儲為 有效圖像)，因此不會抓取許多不想要的圖像。
另外，在現(xiàn)有^L術(shù)中，連續(xù)抓取以高速在所期望的場景之前或之后運動 的對象的圖像之后，在編輯工作中，用戶必須從許多抓取圖像中選擇包含所 期望的組成或運動的圖像。然而，根據(jù)該實施例，減少了抓取失望圖像的情 況。
另外，由于提供了創(chuàng)建運動檢測模式的功能，因此用戶可以創(chuàng)建給定的 運動檢測模式。
由于可以將由用戶創(chuàng)建的給定數(shù)目的運動檢測模式存儲在圖像抓取裝置 l中，并且用戶可以在自動圖像抓取時設(shè)置給定的模式，因此在多種情況下 用戶可以快速地設(shè)置要抓取的組成和運動檢測模式，這是非常方便的。
在運動檢測自動圖像抓取的執(zhí)行期間，如圖20中所示的那樣顯示圖標 111、運動檢測窗和完成次數(shù)112,以便用戶可以知道自動圖像抓取的執(zhí)行。 另外，以不同的顏色顯示關(guān)于其檢測運動物體圖像的通過的運動檢測窗。通 過該配置，用戶可以實時地確認對象已經(jīng)通過的運動一企測窗，以及通過該運 動檢測模式抓取圖像的次數(shù)。因此，用戶可以精確地確定是終止還是繼續(xù)自 動圖像抓取。
在運動檢測自動圖像抓取的執(zhí)行之前，通過執(zhí)行與所檢測到的運動物體 圖像對應(yīng)的曝光調(diào)節(jié)和聚焦調(diào)節(jié)，可以記錄清晰抓取的對象的圖像，這是更 優(yōu)選的。
更具體地說，控制單元17可以確定關(guān)于運動檢測單元24所檢測到的運 動物體圖像的曝光控制值和聚焦控制值，并可以使用所確定的值來執(zhí)行鏡頭 和可變光學系統(tǒng)3的光圈的調(diào)整、通過向時序控制單元14發(fā)布指令的電子快門調(diào)整以及模擬信號處理單元12中的增益調(diào)整。
根據(jù)該實施例的圖像捕獲裝置1可以合適地用作安全照相機。另外，例 如，當用戶試圖使用不昂貴的照相機來有效地執(zhí)行連續(xù)圖像抓取時，即使照 相機不具有高速連續(xù)圖像抓取功能，通過使用根據(jù)該實施例的圖像抓取裝置 1 ,也能夠在用戶期望的合適的時序來執(zhí)行連續(xù)的圖像抓取。
盡管在上述實施例中已經(jīng)對于運動檢測窗的形狀是矩形的情況給出了描 述，但是窗的形狀不限于該特定的形狀。
例如，當用戶如圖23中所示的那樣設(shè)置運動檢測窗以創(chuàng)建運動模式時、 或者如在圖像抓取裝置1中預存的運動模式中的運動檢測窗那樣時，圖31A-圖31C中所示的多種窗形狀都是可釆用的。
圖31A示出了以幾何圖形的給定形狀的運動檢測窗的示例。圖31B示出 了作為通過鏈接給定位置而形成的多邊形的運動檢測窗的示例。圖31C示出 了表示由手寫曲線包圍的路徑的運動檢測窗的示例形狀。
也就是說，只要指定了檢測運動物體圖像的位置和區(qū)域，運動檢測窗可 以是以任意形狀的。
可以準備多種運動檢測窗的形狀，并且根據(jù)圖像抓取裝置1的執(zhí)行，可 以允許用戶在編輯菜單中選擇形狀，或者在運動模式設(shè)置的時候選擇形狀。
P.第二實施例(圖像抓取裝置)]
現(xiàn)在將描述本發(fā)明的第二實施例。將第二實施例實現(xiàn)為具有如圖5中所 示的配置的圖像抓取裝置1。然而，第二實施例特別討論了在臨時存儲處理 中采用圖16B中所示的處理的示例情況。
圖32示出了當通過用戶操作使圖像抓取裝置1開始運動檢測自動圖像抓 取執(zhí)行模式時，控制單元17執(zhí)行的處理。
步驟Fll指示用于監(jiān)視如在圖9中所示的步驟F1的情況中的用戶終止 操作的處理。
在步驟F12,控制單元17使從圖像抓取產(chǎn)生的當前幀從圖像存儲器18 傳送到運動檢測單元24，并且使運動檢測單元24執(zhí)行運動物體^r測處理。 在步驟F12，運動檢測單元24 (和控制單元17)在步驟F12執(zhí)行圖10中所 示的上述處理。
在完成圖10中所示的處理之后，在圖32中所示的步驟F13,控制單元17執(zhí)行臨時存儲處理。
在這種情況下，控制單元17執(zhí)行圖16B中所示的處理。
首先，在步驟F210,控制單元17根據(jù)圖像抓取標記是否為ON來分配 不同種類的處理。如果圖像抓取標記是OFF，則控制單元17不執(zhí)行任何處理， 并且處理進行到圖32中所示的步驟F14。
如參照圖IO所述的那樣，當運動物體圖像接觸到給定運動檢測窗同時滿 足條件時，將所述幀確定為臨時存儲目標，并且將圖像抓取標記設(shè)置為0N。
如果圖像抓取標記是ON，則圖16B中所示的處理從步驟F210進行到步 驟F211。
在步驟F211,控制單元17開始對連續(xù)拍攝時間段進行計數(shù)。在步驟 F212,控制單元17在非易失性存儲器29中臨時地存儲幀圖像數(shù)據(jù)。在臨時 存儲的時候可以由壓縮/解壓縮單元19壓縮圖像數(shù)據(jù)，或者在臨時存儲的時 候可以省略壓縮。圖像數(shù)據(jù)不是必須臨時地存儲在非易失性存儲器29中。可 以將多個相應(yīng)的幀作為圖像存儲器18中的臨時存儲的數(shù)據(jù)來進行管理。
重復該處理，直到在步驟F213檢測到連續(xù)拍攝時間段的超時(timeout) 為止。
更具體地說，在這種情況下，如果作為關(guān)于給定幀圖像數(shù)據(jù)執(zhí)行的運動 物體檢測處理的結(jié)果將圖像抓取標記設(shè)置為ON，則在臨時存儲處理中的預定 連續(xù)拍攝時間段期間，將多個幀的圖像數(shù)據(jù)臨時存儲在非易失性存儲器29中。
臨時存儲的幀是從經(jīng)歷運動物體檢測處理的幀開始、在連續(xù)拍攝時間段 期間抓取并傳送到圖像存儲器18的多個幀。
在執(zhí)行圖32中所示的步驟F13處的這樣的臨時存儲處理之后，在步驟 F14,控制單元17根據(jù)是否已經(jīng)執(zhí)行臨時存儲處理而分配不同種類的處理。
在這種情況下，如果圖像抓取標記是OFF,并且在步驟F13處沒有執(zhí)行 臨時存儲，則處理返回到步驟Fll。如果在步驟Fll沒有檢測到終止操作， 則控制單元17執(zhí)行步驟F12處的類似處理。
另一方面，如果在步驟F13臨時存儲了多個幀，則處理進行到步驟F15。 控制單元17首先從多個臨時存儲的幀的圖像數(shù)據(jù)中提取緊接在經(jīng)歷了步驟 F12處的運動物體檢測處理的幀之后的 一 幀。
控制單元17將提取的幀圖像數(shù)據(jù)傳送到運動檢測單元24,并使運動檢測單元24在步驟F16執(zhí)行圖10中所示的運動物體^r測處理。
在步驟F16處執(zhí)行的運動物體檢測處理之后，控制單元17在步驟F17 執(zhí)行圖17中所示的運動模式完成4企查操作。
在這種情況下，將用作臨時存儲的觸發(fā)器的第一幀和之后的幀經(jīng)歷步驟 F12和F16處的運動物體檢測處理。使用反映處理結(jié)果的運動模式檢查參數(shù) (見圖12B),通過圖17中所示的處理，控制單元17可以確定圖像數(shù)據(jù)是否 匹配運動模式(或是否檢查之后的幀)。
如果由于在圖17所示的處理中不滿足條件因此不執(zhí)行步驟F306和F309 的處理(如果未設(shè)置處理)，則處理從步驟F18進行到步驟F19。在步驟F19, 控制單元17確定是否已經(jīng)關(guān)于所有段臨時存儲的圖像數(shù)據(jù)執(zhí)行了運動物體 檢測處理。如果仍然存在未處理的之后幀的圖像數(shù)據(jù)，則處理返回到步驟F15。 控制單元17將之后幀的圖像數(shù)據(jù)傳送到運動檢測單元24。在步驟F16，控制 單元17使運動檢測單元24執(zhí)行圖10中所示的上述運動物體檢測處理。在運 動物體檢測處理之后，控制單元17在步驟F17執(zhí)行圖17中所示的運動模式 完成檢查處理。
如果在這樣的處理的過程中，在步驟F17處執(zhí)行的運動檢測模式完成檢 查處理中滿足匹配運動模式的條件，則在圖17所示的步驟F306處使多段臨 時存儲的圖像數(shù)據(jù)有效。
更具體地說，控制單元17將在步驟F13臨時存儲的多個幀的圖像數(shù)據(jù)存 儲在存儲卡90中，作為所謂的連續(xù)拍攝的靜止圖像。如果在臨時存儲的時候 不壓縮圖像數(shù)據(jù)，則在該點由壓縮/解壓縮單元19壓縮臨時存儲的圖像數(shù)據(jù)， 將其傳送到存儲卡i/f單元26,并寫入存儲卡90中。
在這種情況下，在步驟F18確定要設(shè)置處理，處理返回到步驟Fll,并 且控制單元17以初始狀態(tài)再次開始自動圖像抓取操作。
另 一方面，如果在步驟F17處執(zhí)行的運動檢測模式完成檢查處理中不滿 足匹配運動模式的條件，例如，將無效標記設(shè)置為ON，則在步驟F309執(zhí)行 無效處理。在這種情況下，控制單元17刪除臨時存儲的多個幀的圖像數(shù)據(jù)。
在這種情況下，在步驟F18也確定要設(shè)置處理，處理返回到步驟Fll， 并且控制單元17再次以初始狀態(tài)繼續(xù)自動圖像抓取操作。
如果在步驟F17處的運動檢測模式完成檢查處理中連續(xù)地確定不設(shè)置處 理，并且已經(jīng)對于所有臨時存儲的幀完成了運動物體檢測處理，則處理從步驟F19進行到步驟F20。在這種情況下，控制單元17確定臨時存儲的多個幀 的圖像數(shù)據(jù)與運動模式不匹配，并且刪除臨時存儲的多個幀的圖像數(shù)據(jù)。然 后處理返回到步驟F11,并且控制單元17以初始狀態(tài)再次執(zhí)行自動圖像抓取操作。
在圖32所示的處理中， 一旦關(guān)于給定幀的圖像數(shù)據(jù)將圖像抓取標記設(shè)置 為0N，則臨時地存儲在設(shè)置為連續(xù)拍攝時間段的時間段期間抓取的該幀之后 的幀。在臨時存儲之后，控制單元17執(zhí)行運動物體^r測處理，并且關(guān)于每一 幀執(zhí)行運動檢測模式完成檢查處理，以確定臨時存儲的幀是否為匹配運動模 式的一系列圖像，并且執(zhí)行有效/無效處理。
使用該處理示例可以獲得與上述第一實施例類似的優(yōu)點。圖32中所示的 處理特別適用于其中由于運動物體檢測處理和運動檢測模式完成檢查處理所 花費的時間與幀速之間的關(guān)系而使得在一 幀時間段之內(nèi)沒有完成運動物體檢 測處理和運動;險測模式完成一全查處理的情況。
可以臨時地存儲在連續(xù)拍攝時間段期間抓取的、從按時間順序地位于經(jīng) 歷了步-驟F12處的運動物體一企測處理的幀之前的幀開始的多個幀。例如，如 果在預定時間期間在圖像存儲器18中留下了每一個抓取的幀，則可以臨時地 存儲從按時間順序地位于經(jīng)歷了運動物體檢測處理的幀之前的幀開始的、包 括經(jīng)歷了運動物體檢測處理的幀的多個幀。
在這種情況下，要臨時存儲的幀可以是連續(xù)的幀或者是間斷的幀(如每 隔一幀或每隔一些幀)，可以提取和臨時存儲該要臨時存儲的幀。
盡管臨時地存儲在連續(xù)拍攝時間段期間抓取的多個幀，但是可以臨時地 存儲預定數(shù)目的之后的幀的圖像數(shù)據(jù)而不計時。
不必說，連續(xù)拍攝時間段和在臨時存儲中采用的幀數(shù)可以由用戶設(shè)置。
此外，根據(jù)上述第一實施例在圖9所示的處理的步驟F3處采用圖16B 所示的臨時存儲處理的示例也是可能的。
將參照圖33描述用作也可以實現(xiàn)為圖像抓取裝置1的處理示例的第三實 施例。該處理示例用于在圖像抓取裝置1正在抓取視頻時提取匹配特定的所 選擇的運動模式的圖像。
圖33示出了由控制單元17執(zhí)行的處理。在步驟F30,控制單元17響應(yīng)于例如用戶操作，而開始抓取視頻。更具
體地說，通過圖像拾取元件8、模擬信號處理單元12、 A/D轉(zhuǎn)換單元13和圖 像處理單元15的處理，控制單元17執(zhí)行用于使壓縮/解壓縮單元19壓縮傳 送到圖像存儲器18的視頻的每一幀的圖像數(shù)據(jù)的處理，并將壓縮的圖像數(shù)據(jù) 傳送到存儲卡I/F單元26,以便將圖像數(shù)據(jù)作為視頻數(shù)據(jù)存儲在存儲卡90中。
在這樣的視頻抓取處理的過程中，控制單元17使運動4企測單元24執(zhí)行 步驟F32處的運動物體檢測處理。更具體地說，在組成視頻的幀的圖像數(shù)據(jù) 之中，控制單元17使得將當前幀的數(shù)據(jù)從圖像存儲器18傳送到運動檢測單 元24，并且使運動檢測單元24執(zhí)行圖10中所示的處理。
在步驟F33，控制單元17執(zhí)行圖16A中所示的臨時存儲處理。在步驟 F34,控制單元17執(zhí)行圖17中所示的運動檢測模式完成檢查處理。
更具體地說，與視頻抓取操作并行地、關(guān)于每一幀的圖像數(shù)據(jù)執(zhí)行步驟 F32、 F33和F34的處理。
在這種情況下，在組成視頻的幀之中，將可能是所選擇的運動模式的候 選者的圖像數(shù)據(jù)臨時存儲在非易失性存儲器29中。如果臨時存儲的圖像數(shù)據(jù) 滿足匹配運動模式的條件，則將臨時存儲的圖像數(shù)據(jù)作為有效的靜止圖像存 儲在存儲卡90等中。
在這種情況下，在執(zhí)行視頻抓取的同時，在抓取的視頻數(shù)據(jù)之中，將匹 配運動模式的一段或多段圖像數(shù)據(jù)作為靜止圖像存儲在存儲卡90中。當抓取 視頻時，每次當對象以匹配特定運動模式的模式運動時，用戶可以獲得靜止 圖像。
靜止圖像數(shù)據(jù)不是必須與視頻數(shù)據(jù)獨立地存儲。例如，在圖n所示的步
驟F306處執(zhí)行的有效處理中，相應(yīng)幀的圖像數(shù)據(jù)可以作為靜止圖像數(shù)據(jù)(其 與視頻數(shù)據(jù)相獨立)存儲。另外，也可以采用標記用作靜止圖像的視頻數(shù)據(jù) 的幀的方法。
例如，可以將指示該幀與運動模式匹配的信息附到視頻數(shù)據(jù)作為元數(shù)據(jù)。 可替代地，可以創(chuàng)建用于管理相應(yīng)的幀號的有效幀管理信息。更具體地
說，記錄確定為匹配運動模式的有效的幀的幀號和時間碼。
根據(jù)這些方法，使用元數(shù)據(jù)或幀號，可以從其后的視頻數(shù)據(jù)提取匹配幀。
也就是說，可以以將圖像數(shù)據(jù)記錄為靜止圖像的類似的模式將圖像呈現(xiàn)給用戶。作為關(guān)于被確定為匹配運動模式的一個或多個幀的圖像數(shù)據(jù)執(zhí)行的有效 處理，通過元數(shù)據(jù)的附加、幀號的管理或其他方法，可以使圖像數(shù)據(jù)進入可 提取狀態(tài)。
如第三實施例中那樣，在視頻的抓取期間，通過允許當圖像數(shù)據(jù)與運動 模式匹配時執(zhí)行自動圖像抓取，可以以多種多樣的圖像抓取形式利用本發(fā)明。
盡管在視頻的抓取期間獲得匹配特定運動模式的靜止圖像，但是可以將 運動檢測自動圖像抓取應(yīng)用于一般的視頻抓取。
更具體地說，很明顯，通過將所有段的圖像數(shù)據(jù)作為臨時存儲的圖像數(shù) 據(jù)對待，并最終僅存儲匹配運動模式的圖像作為抓取的圖像數(shù)據(jù)，可以執(zhí)行 視頻抓取操作。
將討論將本發(fā)明的第四實施例應(yīng)用于信息處理裝置的示例。采用個人計 算機作為信息處理裝置的示例。
圖34示出了個人計算機(在下文中，簡稱為"PC" ) 200的配置的示例。
如圖中所示，PC 200包括中央處理單元(CPU) 211、存儲器單元212、 網(wǎng)絡(luò)I/F單元213、顯示控制器214、輸入設(shè)備I/F單元215、HDD I/F單元216、 鍵盤2H、鼠標218、 HDD 219、顯示設(shè)備220、總線221、外部I/F單元222 和存儲卡1/F單元223。
作為PC 200的主控制器的CPU 211根據(jù)存儲在存儲器單元212中的程 序執(zhí)行各種控制處理。CPU 211通過總線221連接到其他單元。
將唯一的存儲器地址或I/O地址授予位于總線221上的每一臺設(shè)備。使 用這些地址，CPU211可以訪問所述設(shè)備。例如，總線221可以是外圍組件 互連(PCI)總線。
存儲器單元212包括易失性存儲器和非易失性存儲器二者。例如，存儲 器單元212包括非易失性存儲器，如用于存儲程序的只讀存儲器(ROM)、 用作處理工作區(qū)域和各種臨時存儲區(qū)域的隨機存取存儲器和電可擦除可編程 只讀存儲器(EEPROM)。
該存儲器單元212存儲由CPU 211執(zhí)行的程序代碼、對PC 200唯一的 標識信息以及其他信息，并用作通信數(shù)據(jù)的緩沖區(qū)域和工作數(shù)據(jù)的工作區(qū)域。
根據(jù)預定的通信協(xié)議(如以太網(wǎng)⑧)，網(wǎng)絡(luò)I/F單元213將PC 200連接到網(wǎng)絡(luò)，如因特網(wǎng)和局域網(wǎng)(LAN)。通過網(wǎng)絡(luò)I/F單元213， CPU211可以與 經(jīng)由網(wǎng)絡(luò)連接的每一 臺設(shè)備通信。
顯示控制器214支持用于例如高級視頻圖形陣列(super video graphic array, SVGA)或擴展圖形陣列(extended graphic array, XGA )的位圖繪制功能。 將顯示控制器214處理的繪制數(shù)據(jù)臨時地存儲在例如幀緩沖器(未示出)中， 然后將其在顯示設(shè)備220上輸出。顯示設(shè)備220可以是例如有機電致發(fā)光 (EL)顯示器、陰極射線管(CRT)顯示器或液晶顯示器。
輸入設(shè)備I/F單元215是用于將用戶輸入設(shè)備(如鍵盤217和鼠標218 ) 連接到用作PC 200的計算機系統(tǒng)的設(shè)備。
更具體地說，用戶使用鍵盤217和鼠標218在PC200中執(zhí)行輸入操作， 并且通過輸入設(shè)備I/F單元215將輸入操作信息提供到CPU 211。
的接口處理。
HDD 219是包括以固定模式用作存儲器載體(memory carrier)的磁盤的 外部存儲設(shè)備，并且在存儲容量和數(shù)據(jù)傳輸速度方面具有超過其他外部存儲 設(shè)備的優(yōu)點。以可執(zhí)行模式在HDD219中存儲軟件程序被稱為程序到系統(tǒng)的 "安裝"。 一般而言，HDD219以非易失性模式存儲操作系統(tǒng)的程序代碼、應(yīng) 用程序和要由CPU 211執(zhí)行的設(shè)備驅(qū)動程序。
在PC200的啟動或與用戶層對應(yīng)的應(yīng)用程序的激活時，將HDD219中 存儲的各種程序加載到存儲器單元212。 CPU 211基于加載到存儲器單元212 的程序執(zhí)行處理。
外部I/F單元222是與通過例如通用串行總線(USB)連接的外部設(shè)備 的接口。
在該實施例中，例如，可以采用數(shù)字照相機、攝像機或視頻播放器作為 外部設(shè)備。
在通過該外部I/F單元222執(zhí)行的通信中，PC 200可以從數(shù)字照相機等 加載圖像數(shù)據(jù)。
除了 USB之外，外部I/F單元222可以遵從其他接口標準，例如IEEE (電氣和電子工程師協(xié)會)1394。
存儲卡I/F單元223將數(shù)據(jù)寫入存儲卡90，或者從存儲卡90讀出數(shù)據(jù)。通過插入用在數(shù)字照相機(如上述圖像抓取裝置1)和攝像機中的存儲
卡卯，存儲卡I/F單元223可以從存儲卡90加載圖像數(shù)據(jù)。
在這樣的PC200中，CPU211基于軟件結(jié)構(gòu)(即，諸如應(yīng)用程序、OS
和設(shè)備驅(qū)動程序之類的軟件)執(zhí)行算術(shù)處理/控制操作，由此執(zhí)行各種操作。 在該實施例中，執(zhí)行要在下面描述的圖35中所示的處理。將用于允許
CPU 211執(zhí)行該處理的程序安裝在例如HDD 219中，并且在啟動的時候?qū)⑵?br> 加載到存儲器單元212。CPU211基于加載到存儲器單元212的程序執(zhí)行算術(shù)
處理和控制處理。
可以將該實施例中運行的、允許CPU211執(zhí)行圖35中所示的處理的程 序預先地存儲在作為設(shè)備(如PC 200 )中包括的記錄介質(zhì)的HDD、以及包括 CPU的微計算機中包括的ROM或閃存中。
可替代地，可以在可拆卸介質(zhì)(如軟盤、緊致盤只讀存儲器(CD-ROM )、 磁光(MO)盤、數(shù)字多功能盤(DVD)、藍光盤、磁盤、半導體存儲器和存 儲卡)上臨時或永久地存儲(記錄)程序。也可以作為所謂的封裝軟件(package software)來提供這樣的可拆卸記錄介質(zhì)。
除了程序從可拆卸介質(zhì)到PC的安裝之外，可以經(jīng)由網(wǎng)絡(luò)(如LAN和因 特網(wǎng))從站點下載程序。
可以在例如這樣的PC 200的HDD 219中存儲各種圖像內(nèi)容。例如，用 戶加載通過數(shù)字照相機或攝像機抓取的圖像內(nèi)容，并將圖像內(nèi)容存儲在HDD 219中，由此能夠通過使用該PC200來播放并欣賞所抓取的圖像。
除了由用戶抓取的圖像內(nèi)容之外，用戶可以在HDD 219中存儲例如由外 部視頻播放器播放、并從外部I/F單元222加載的圖像內(nèi)容以及由網(wǎng)絡(luò)I/F單 元213經(jīng)由網(wǎng)絡(luò)從外部服務(wù)器上下載的圖像內(nèi)容，并且播放圖像內(nèi)容。
當將視頻內(nèi)容作為這樣的圖像內(nèi)容存儲在HDD219中時，或者當在存儲 卡90中存儲視頻內(nèi)容時，作為根據(jù)該實施例的操作，可以關(guān)于視頻內(nèi)容執(zhí)行 圖35中所示的處理。
圖35示出了根據(jù)程序由CPU211執(zhí)行的處理。
用戶指定給定的視頻內(nèi)容，并執(zhí)行回放操作，由此開始圖35中所示的處理。
步驟F50指示用于監(jiān)視回放的終止的處理。響應(yīng)于用戶的回放終止操作 或者視頻內(nèi)容的回放的結(jié)束，在步驟F50， CPU211終止處理。在回放期間，CPU 211重復步驟F51到F55的處理。
在步驟F51， CPU 211控制從例如HDD219讀取經(jīng)歷回放的視頻內(nèi)容的 視頻流數(shù)據(jù)?；贑PU 211的控制，在HDD 219和HDD I/F單元216中連續(xù) 地執(zhí)行讀出視頻流數(shù)據(jù)的處理。
在步驟F52,基于CPU211的控制，解碼視頻流數(shù)據(jù)，顯示經(jīng)解碼的幀 圖像數(shù)據(jù)，并且將幀圖像數(shù)據(jù)加載到存儲器。
更具體地說，由HDD I/F單元216和CPU 211解碼從HDD 219等中順 序讀出的視頻流數(shù)據(jù)，由顯示控制器214處理，并將其顯示在顯示設(shè)備220 上。也就是說，執(zhí)行一系列的視頻回放處理。
此時，在步驟F53、 F54和F55 (之后描述)的處理中使用每一幀的經(jīng)解 碼的圖像數(shù)據(jù)，同時將其臨時地存儲在存儲器單元212中。
在步驟F53, CPU211關(guān)于當前幀執(zhí)行運動物體檢測處理。也就是說， CPU211執(zhí)行圖10中所示的處理。
在步驟F54， CPU211執(zhí)行圖16A中所示的處理，作為臨時存儲處理。 在這種情況下，當圖16A中的圖像抓取標記是ON時，作為臨時存儲處理， 可以在存儲器單元212的預定區(qū)域中臨時地存儲該幀的圖像數(shù)據(jù)。
在步驟F55, CPU211執(zhí)行圖17中所示的處理，作為運動檢測模式完成 檢查處理。
更具體地說，在該實施例中，在視頻回放期間，關(guān)于每一幀的圖像數(shù)據(jù) 執(zhí)行步驟F53、 F54和F55的處理。通過該操作，臨時地存儲匹配運動模式的 候選幀的圖像數(shù)據(jù)。當確定圖像數(shù)據(jù)匹配運動模式時，使臨時存儲的一個或 多個幀的圖像數(shù)據(jù)有效。
例如，可以在存儲器單元212、 HDD219或存儲卡90的預定區(qū)域中存儲 圖像數(shù)據(jù)，作為從視頻內(nèi)容提取的靜止圖像數(shù)據(jù)。
通過在這樣的PC200中執(zhí)行與圖10、 16A和17類似的處理，將用戶期 望的場景的圖像(即，與用戶選擇的運動模式匹配的場景的圖像)作為一個 或多個靜止圖像來進行提取，并在視頻回放期間進行存儲。不必說，可以作 為視頻來代替靜止圖像而提取并存儲該圖像。
通過該配置，用戶可以容易地提取用戶特別想要從視頻內(nèi)容中提取的場 景，將所述場景轉(zhuǎn)換為例如文件，并播放和欣賞所述文件。
例如，通過關(guān)于例如由用戶通過攝像機抓取的視頻內(nèi)容執(zhí)行圖35中所示的處理，用戶可以自動地提取想要的場景的靜止圖像或視頻，這是非常方便的。
在這種情況下，作為有效處理，通過內(nèi)容中元數(shù)據(jù)的附加、幀號的管理 或地址管理可以使圖像數(shù)據(jù)進入可提取狀態(tài)，而不是獨立地存儲場景的圖像。 此外，可以將場景的圖像傳送到另一設(shè)備，并將其存儲在另一設(shè)備中。
盡管假設(shè)在顯示設(shè)備220上播放并顯示視頻的同時，執(zhí)行圖35中所示的 處理，但是視頻不是必須同時播放和顯示的。
更具體地說，響應(yīng)于視頻內(nèi)容的用戶指定來執(zhí)行圖35中所示的處理，而 不顯示視頻內(nèi)容。結(jié)果，提取了匹配運動模式的場景的靜止圖像或視頻。這 樣的處理也是可接受的。在這樣的情況下，通過高速回放視頻內(nèi)容，可以以 更短的時間段來提取匹配期望的運動模式的場景，這是更加有用的。
盡管在上述實施例中關(guān)于存儲在例如HDD 219或存儲卡90中的視頻內(nèi) 容執(zhí)行場景提取，但是多種視頻內(nèi)容都可以經(jīng)歷提取處理。
盡管沒有在圖34中示出，但是通過將PC 200連接到DVD驅(qū)動器或藍 光盤驅(qū)動器，可以播放例如，記錄在光盤(如DVD或藍光盤)上的圖像內(nèi)容。 在這種情況下，通過關(guān)于記錄在光盤上的視頻內(nèi)容執(zhí)行圖35中所示的處理， 可以提取匹配所期望的運動模式的場景。此外，當PC 200包括或者連接到電 視廣播調(diào)諧器時，可以關(guān)于所廣播的內(nèi)容執(zhí)行匹配所期望的運動模式的場景 的提取。
盡管在該實施例中采用PC作為信息處理裝置的示例，但是本發(fā)明可以 應(yīng)用于例如移動電話、個人數(shù)字助理(PDA)、 一見頻游戲機、視頻編緝設(shè)備以 及使用圖像數(shù)據(jù)的各種信息處理裝置。另外，由第一實施例中采用的圖像抓 取裝置1 (如數(shù)字照相機和攝像機)可以實現(xiàn)圖35中所示的處理。
本領(lǐng)域的技術(shù)人員應(yīng)該理解，根據(jù)設(shè)計要求和其他因素，可能出現(xiàn)多種 修改、組合、子組合和變更，只要它們落在所附權(quán)利要求書或其等價物的范 圍內(nèi)即可。
權(quán)利要求
1、一種圖像處理裝置，包括確定部件，用于確定處理目標圖像數(shù)據(jù)是否具有匹配之前設(shè)置的運動模式的圖像內(nèi)容；以及有效部件，用于使由確定部件確定為匹配所述運動模式的圖像數(shù)據(jù)有效。
2、 根據(jù)權(quán)利要求1所述的裝置，其中，確定部件執(zhí)行 運動物體檢測處理，用于從一幀圖像數(shù)據(jù)中檢測運動物體的圖像，并使用所檢測到的運動物體的圖像來確定所述一幀圖像數(shù)據(jù)是否為組成所述運動 模式的候選者；臨時存儲處理，用于臨時存儲在運動物體檢測處理中被確定為組成所述運動模式的候選者的圖像數(shù)據(jù)；以及模式匹配確定處理，用于確定在臨時存儲處理中臨時存儲的圖像數(shù)據(jù)是 否為匹配運動模式的圖像。
3、 根據(jù)權(quán)利要求2所述的裝置，其中，在運動物體沖企測處理中，確定部 件使用從所述一幀圖像數(shù)據(jù)中檢測到的運動物體的圖像以及作為運動模式的 設(shè)置信息的、指定屏幕上的范圍的運動檢測窗，來確定所述一幀圖像數(shù)據(jù)是 否為組成所述運動模式的候選者。
4、 根據(jù)權(quán)利要求3所述的裝置，其中，在運動物體檢測處理中，作為用 于確定圖像數(shù)據(jù)是否為組成所述運動模式的候選者的一種處理，確定部件檢 查是否運動物體的圖像的至少一部分被包括在運動檢測窗的范圍中。
5、 根據(jù)權(quán)利要求3所述的裝置，其中，在運動物體檢測處理中，作為用 于確定圖像數(shù)據(jù)是否為組成所述運動模式的候選者的一種處理，確定部件檢 查運動物體的圖像的運動方向或運動量是否與為運動檢測窗設(shè)置的運動方向 或運動量匹配。
6、 根據(jù)權(quán)利要求2所述的裝置，在臨時存儲處理中，確定部件臨時存儲 包括在運動物體檢測處理中被確定為組成所述運動模式的候選者的圖像數(shù)據(jù) 的多個幀的圖像數(shù)據(jù)。
7、 根據(jù)權(quán)利要求2所述的裝置，其中，當指定屏幕上的范圍的多個運動 檢測窗被設(shè)置為所述運動模式的設(shè)置信息時，在模式匹配確定處理中，確定部件檢查所述多個幀的每一個的圖像數(shù)據(jù)中包括的運動物體的圖像是否以由多個幀表示的運動進入多個運動檢測窗的 各自的范圍，以便確定臨時存儲的多個幀的圖像數(shù)據(jù)是否為匹配所述運動模 式的圖像。
8、 根據(jù)權(quán)利要求2所述的裝置，其中，當指定屏幕上的范圍的多個運動 檢測窗被設(shè)置為所述運動模式的設(shè)置信息時，在模式匹配確定處理中，確定部件檢查所述多個幀的每一個的圖像數(shù)據(jù) 中包括的運動物體的圖像以由多個幀表示的運動進入多個運動檢測窗的各自 的范圍的順序，以便確定臨時存儲的多個幀的圖像數(shù)據(jù)是否為匹配所述運動 模式的圖像。
9、 根據(jù)權(quán)利要求1所述的裝置，其中，指定屏幕上的范圍的運動檢測窗 被設(shè)置為所述運動模式的設(shè)置信息，以及其中確定部件使用通過檢查每一個圖像數(shù)據(jù)中包括的運動物體的圖像是 否進入運動檢測窗的范圍而獲得的結(jié)果，來確定包括運動物體的圖像的圖像 數(shù)據(jù)是否具有匹配所述運動模式的圖像內(nèi)容。
10、 根據(jù)權(quán)利要求1所述的裝置，其中，指定屏幕上的范圍的多個運動 檢測窗被設(shè)置為所述運動模式的設(shè)置信息，以及其中確定部件使用通過檢查每一個圖像數(shù)據(jù)中包括的運動物體的圖像是 否進入多個運動檢測窗的各自的范圍而獲得的結(jié)果，來確定包括運動物體的 圖像的圖像數(shù)據(jù)是否具有匹配所述運動模式的圖像內(nèi)容。
11、 根據(jù)權(quán)利要求1所述的裝置，其中，指定屏幕上的范圍的運動檢測 窗被設(shè)置為所述運動模式的設(shè)置信息，以及其中確定部件使用通過檢查每一個圖像數(shù)據(jù)中包括的運動物體的圖像是 否在具有為運動檢測窗設(shè)置的方向或運動量的同時進入運動檢測窗的范圍而 獲得的結(jié)果，來確定包括運動物體的圖像的圖像數(shù)據(jù)是否具有匹配所述運動 模式的圖像內(nèi)容。
12、 根據(jù)權(quán)利要求1所述的裝置，其中，指定屏幕上的范圍的多個運動 檢測窗被設(shè)置為所述運動模式的設(shè)置信息，以及其中確定部件使用通過檢查每一個圖像數(shù)據(jù)中包括的運動物體的圖像進 入多個運動4企測窗的各自的范圍的順序而獲得的結(jié)果，來確定包括運動物體 的圖像的圖像數(shù)據(jù)是否具有匹配所述運動模式的圖像內(nèi)容。
13、 根據(jù)權(quán)利要求1所述的裝置，其中，作為有效處理，有效部件在記錄介質(zhì)上記錄被確定為匹配所述運動模式的圖像數(shù)據(jù)。
14、 根據(jù)權(quán)利要求1所述的裝置，其中，作為有效處理，有效部件創(chuàng)建 其中能夠?qū)⒈淮_定為匹配所述運動模式的圖像數(shù)據(jù)作為有效圖像數(shù)據(jù)進行提 取的狀態(tài)。
15、 根據(jù)權(quán)利要求1所述的裝置，其中，所述有效部件拋棄被確定為不 匹配所述運動模式的圖像數(shù)據(jù)。
16、 一種圖像處理方法，包括以下步驟確定處理目標圖像數(shù)據(jù)是否具有匹配之前設(shè)置的運動沖莫式的圖像內(nèi)容；以及將被確定為匹配所述運動模式的圖像數(shù)據(jù)作為有效圖像數(shù)據(jù)進行處理。
17、 一種允許計算機執(zhí)行圖像處理方法的程序，所述圖像處理方法包括 如下步驟確定處理目標圖像數(shù)據(jù)是否具有匹配之前設(shè)置的運動模式的圖像內(nèi)容；以及將被確定為匹配所述運動模式的圖像數(shù)據(jù)作為有效圖像數(shù)據(jù)進行處理。
18、 一種圖像處理裝置，包括確定單元，被配置為確定處理目標圖像數(shù)據(jù)是否具有匹配之前設(shè)置的運 動模式的圖像內(nèi)容；以及有效單元，被配置為使由確定單元確定為匹配所述運動模式的圖像數(shù)據(jù) 有效。
全文摘要
公開了圖像處理裝置、圖像處理方法和程序。所述圖像處理裝置包括確定單元，被配置為確定處理目標圖像數(shù)據(jù)是否具有匹配之前設(shè)置的運動模式的圖像內(nèi)容；以及有效單元，被配置為使由確定單元確定為匹配所述運動模式的圖像數(shù)據(jù)有效。
文檔編號H04N101/00GK101515998SQ200910004968
公開日2009年8月26日 申請日期2009年2月20日 優(yōu)先權(quán)日2008年2月20日
發(fā)明者黃顏上 申請人:索尼株式會社