專利名稱：選擇性地取消數(shù)字圖像資格的方法和設(shè)備的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及數(shù)據(jù)圖像采集，并且尤其涉及由于在該圖像中 存在一個或者多個不符合要求特征而取消景物作為被處理的永 久圖像的候選者的資格。
背景技術(shù)：
照相機(jī)正在成為強(qiáng)大的計(jì)算工具。特別是，作為本專利申 請受讓人的FotoNation公司開發(fā)了許多便利的人臉檢測工具。 第10/608， 776號、第10/608， 810號、第10/764， 339號、第 10/919， 226號、第11/182， 718號以及第11/027， OOl號美國專利 申請描述了這些面部檢測工具中的一些面部檢測工具，在此引 用這些專利申請供參考。這與利用快門觸發(fā)器拍照不同。這也與等待可能發(fā)生或者
可能不發(fā)生的事件(例如，微笑)不同。第6，301，440號美國專 利披露了根據(jù)對臨時圖像所做的分析調(diào)整捕像參數(shù)以及等到臨 時圖像中的每個人都微笑時拍照。該照相機(jī)必須等待可能發(fā)生 或者可能從不發(fā)生的特定事件。在拍照之前，讓人們等待照相 機(jī)判定景物是最佳的，往往不可接受，而且第6， 301，440號美國 專利沒有描述如何緩解該難題。第6， 301，440號美國專利也沒有 提供關(guān)于如何檢測或者確定景物中特定特征的任何指導(dǎo)。
還有當(dāng)目標(biāo)進(jìn)入照相機(jī)的視野時進(jìn)行拍照的監(jiān)視照相機(jī)。 這些照相機(jī)一般用于檢測通常是在靜止景物內(nèi)的運(yùn)動或者突然 變化。

發(fā)明內(nèi)容
提供了一種作為照相機(jī)的圖像采集控制、取消不符合要求 景物不合格的方法。分析捕獲圖像的內(nèi)容，確定是應(yīng)該采集該 圖像還是應(yīng)該廢棄該圖像。 一個例子包括人臉。根據(jù)在眨眼過 程中該眼睛是閉合的、部分閉合還是向下閉合或者向上運(yùn)動， 可以確定圖像是否令人滿意。作為一種選擇，可以檢測其他不 希望的或者不符合要求的表情或者動作，例如，皺眉、手遮擋 某人的臉部或者人臉特征的其他遮光或者陰影或者景物的其他 關(guān)鍵特征，或者頭轉(zhuǎn)動到偏離照相機(jī)等。
捕獲包括人臉圖區(qū)的該景物的當(dāng)前圖像。識別一組或者多 組對應(yīng)于感興趣圖區(qū)的像素，諸如眼睛圖區(qū)、或者該人臉圖區(qū) 內(nèi)的嘴。
對于眨眼檢測，確定該眼睛圖區(qū)是否處于眨眼過程。如果 處于眨眼過程，則在眼睛結(jié)束眨眼時，取消該景物作為被處理
16的永久圖像的候選者的資格。
該當(dāng)前圖像可以包括預(yù)覽圖像，并且該取消不合格可以包 括延遲高清晰度捕獲該景物圖像。該延遲可以包括在預(yù)定等待 時間之后結(jié)束該取消資格。
可以使用預(yù)覽圖像。這樣可以提供眼睛可能在捕獲圖像中
的感興趣圖區(qū)(ROI)的指示。這樣可以根據(jù)通過分析預(yù)覽圖像 提供的空間信息在最終圖像中快速搜索嘴或者眼睛。
該延遲可以包括預(yù)測眨眼何時結(jié)束以及在接近預(yù)測眨眼 結(jié)束時間時結(jié)束該取消資格。該預(yù)測可以包括確定該景物處于 結(jié)束眨眼過程的時點(diǎn)，并且計(jì)算結(jié)束眨眼的剩余時間。該計(jì)算 可以包括將結(jié)束眨眼過程剩余時間的完成度(fraction)乘以 預(yù)定結(jié)束眨眼過程時長?？梢愿鶕?jù)平均眨眼過程時長，預(yù)設(shè)該 預(yù)定結(jié)束眨眼過程時長和/或者根據(jù)估計(jì)的從眨眼開始到當(dāng)前 的時間，并且根據(jù)表示該景物處于結(jié)束眨眼過程的時點(diǎn)的完成 度，可以確定該預(yù)定結(jié)束眨眼過程時長。該估計(jì)可以基于相對 于當(dāng)前預(yù)覽圖像的時域捕像參數(shù)對一個或者多個先前預(yù)覽圖像 的時域捕像參數(shù)所做的分析。根據(jù)當(dāng)前預(yù)覽圖像中在眨眼的眼 睛是睜開的還是閉著的，以及該眼睛睜開或者閉合的程度，確 定該完成度。
該方法可以包括確定該眼睛是否在眨眼，這包括確定該眼 睛睜開或者閉合的程度。基于對當(dāng)前預(yù)覽圖像與在短于結(jié)束眨 眼過程時長的時間內(nèi)相對采集的一個或者多個其他預(yù)覽圖像的 相對分析，可以確定該眼睛睜開或者閉合的程度。確定該眼睛 是否眨眼可以包括確定一個或者兩個眼皮的模糊程度。可以確 定瞳孔、虹膜、 一個或者兩個眼皮或者眼白的哪部分正在顯示， 或者它們的組合。可以對該眼睛進(jìn)行色彩分析，并且將對應(yīng)于眼皮色調(diào)的像素與對應(yīng)于虹膜色調(diào)或者瞳孔色調(diào)或者眼白色調(diào) 或者它們的組合的像素區(qū)別開?？梢詫υ撗劬M(jìn)行形狀分析， 并且通過對比對應(yīng)于眼皮形狀的像素和對應(yīng)于虹膜形狀或者瞳 孔形狀或者眼白形狀或者它們的組合的像素，區(qū)別各像素。
該當(dāng)前圖像可以包括高清晰度捕獲圖像。該取消資格可以 包括放棄進(jìn)一步處理該當(dāng)前圖像。可以確定該眼睛是否在眨眼， 這包括確定該眼睛睜開或者閉合的程度。這可以包括相對分析 當(dāng)前預(yù)覽圖像和在短于結(jié)束眨眼過程時長的時間內(nèi)相對采集的 一個或者多個其他預(yù)覽圖像?？梢曰诖_定一個或者兩個眼皮 的模糊程度，確定該眼睛是否在眨眼。
該方法可以包括確定正顯示的部分瞳孔、虹膜、 一個或者 兩個眼皮或者眼白，或者它們的組合?？梢詫υ撗劬M(jìn)行色彩 分析，并且通過對比對應(yīng)于眼皮色調(diào)的像素和對應(yīng)于虹膜色調(diào) 或者瞳孔色調(diào)或者眼白色調(diào)或者它們的組合的像素，區(qū)別各像 素?？梢詫υ撗劬M(jìn)行形狀分析，并且通過對比對應(yīng)于眼皮形 狀的像素和對應(yīng)于虹膜形狀或者瞳孔形狀或者眼白形狀或者它 們的組合的像素，區(qū)別各像素。
該當(dāng)前圖像可以包括高清晰度捕獲圖像。該方法可以包括 拼裝包括該當(dāng)前圖像中像素和不同圖像中對應(yīng)于眨眼的眼睛的 睜開眼睛像素的合成圖像。該不同圖像可以包括預(yù)覽圖像或者 后覽圖像或者另一個高清晰度圖像。該不同圖像可以包括比該 當(dāng)前圖像低的清晰度，并且該拼裝可以包括增抽樣該不同圖像 或者降抽樣該當(dāng)前圖像或者它們的組合。該方法可以包括使該
當(dāng)前圖像與該不同圖像對齊，這包括使睜眼眼睛像素圖區(qū)與該 當(dāng)前圖像中的眨眼眼睛圖區(qū)匹配。
還可以實(shí)施本發(fā)明，使作為諸如視頻流的流部分的一組圖像中的圖像不合格。
基于識別人臉圖區(qū)以及為了確定其中的嘴或者眼睛圖區(qū) 而分析該人臉圖區(qū)，可以識別眼睛圖區(qū)。
由于該取消資格，可以捕獲用于代替該當(dāng)前圖像的新圖像。
可以捕獲并分析一對圖像，以確定該對圖像至少之一不包 括眨眼。
可以計(jì)算長于單次眨眼時間的多次捕像之間的間隔。 可以提供關(guān)于該眨眼的報(bào)警信號，以使攝影者可以意識到 她可能需要拍攝另一張圖片。
本發(fā)明的各種變型可以用于單個圖像中的單個或者多個
人面，例如， 一組拍攝鏡頭(group shot)?？梢宰R別該景物內(nèi) 的另一個人臉的第二眼睛圖區(qū)。還可以在該景物內(nèi)識別附加眼 睛圖區(qū)。可以確定該第二眼睛圖區(qū)是否處于眨眼過程。如果處 于眨眼過程，則該方法可以包括在該第二眼睛結(jié)束眨眼時取消 該景物作為被處理的永久圖像的候選者的資格。在該景物的每 個人臉圖區(qū)的眼睛圖區(qū)不包括眨眼眼睛之前，可以取消捕獲或 者進(jìn)一步處理高清晰度圖像的資格。
提供了又一種自動取消不符合要求景物的資格并作為照 相機(jī)的圖像采集控制的方法。該方法包括采集多個預(yù)覽圖像。 從該多個預(yù)覽圖像中提取信息。在該多個臨時圖像的各圖像之 間，分析該景物中的一個或者多個變化。根據(jù)該分析，確定該 景物中是否存在一個或者多個不符合要求特征。在該一個或者 多個不符合要求特征繼續(xù)存在時，取消該景物作為被處理的永 久圖像的候選者的資格。
該分析可以包括識別一組或者多組對應(yīng)于具有不符合要求形態(tài)的面部特征的像素。該一組或者多組像素可以包括眼睛 組，并且該不符合要求形態(tài)可以包括眨眼形態(tài)。該一組或者多 組像素可以包括嘴形態(tài)，并且該不符合要求形態(tài)可以包括鈹眉 形態(tài)?？梢源_定在其間不會采集已處理的永久圖像的取消資格 的間隔。
該分析可以包括識別一組或者多組對應(yīng)于具有不符合要 求形態(tài)的面部特征的像素。該一組或者多組像素可以包括任意 遮光，例如，手遮擋人臉，或者人臉轉(zhuǎn)動偏離照相機(jī)。
還提供了處理器可讀代碼嵌入其上的一種或者多種處理 器可讀存儲器件。該處理器可讀代碼用于對一個或者多個處理 器編程，以執(zhí)行上面和下面所描述的作為照相機(jī)的圖像采集控 制方式取消不符合要求景物資格的方法?？梢郧度朐撎幚砥?， 作為照相機(jī)的一部分，該處理器或者在采集器件的外部。該采 集器件可以是手持式照相機(jī)、固定式照相機(jī)、攝像機(jī)、裝備了 采集器件的移動電話、裝備了采集器件的手持式裝置、諸如用 于肖像攝影的攝影棚(kiosk b00th)、諸如用于監(jiān)控或者用于 識別或者通用的專用豎式照相機(jī)、任意捕像器件。


圖l示出根據(jù)優(yōu)選實(shí)施例取消包括眨眼的景物資格的方法。
圖2示出根據(jù)優(yōu)選實(shí)施例預(yù)測眨眼完成時間間隔的方法。 圖3示出根據(jù)優(yōu)選實(shí)施例確定睜眼或者閉眼程度的方法。 圖4a示出根據(jù)優(yōu)選實(shí)施例確定是否放棄對圖像進(jìn)行進(jìn)一 步處理的方法。
圖4b示出根據(jù)優(yōu)選實(shí)施例拼裝合成圖像的方法。
20圖5示出根據(jù)探測圖像中的眼睛校正圖像的工作流程的優(yōu) 選實(shí)施例。
圖6a示出根據(jù)優(yōu)選實(shí)施例利用圖像中的眼睛信息使圖像 采集延遲的通用工作流程。
圖6b示出根據(jù)優(yōu)選實(shí)施例利用一個或者多個圖像中的人 臉信息調(diào)整圖像再現(xiàn)參數(shù)、然后輸出該圖像的通用工作流程。
圖7a至7d示出根據(jù)一個或者多個優(yōu)選實(shí)施例的人臉檢測、 眼睛檢測或者嘴部檢測或者它們的組合。
圖8a示出根據(jù)一個或者多個優(yōu)選實(shí)施例的眨眼檢測和校
正方法。
圖8b描述了根據(jù)優(yōu)選實(shí)施例確定作為采集過程的一部分 在照相機(jī)中眼睛是否正在眨眼，以及是捕獲該圖像、廢棄該圖 像還是存儲該圖像，或者是否用睜開的眼睛代替眨眼圖區(qū)的說 明性系統(tǒng)。
圖9示出根據(jù)一個或者多個優(yōu)選實(shí)施例的作為釆集過程的 一部分在照相機(jī)中根據(jù)檢測眼睛的自動聚焦能力。
具體實(shí)施例方式
描述了根據(jù)優(yōu)選實(shí)施例和變換實(shí)施例的系統(tǒng)和方法。這些 技術(shù)不僅避免丟失鏡頭，而且提供了增強(qiáng)型功能和改進(jìn)的使用 性能。利用這些技術(shù)，數(shù)字照相機(jī)能夠判定何時目標(biāo)的面部表 情是不恰當(dāng)、令人不符合要求或者是不希望的。 一個例子是眨 眼，并且其它例子包括皺眉頭和陰影。捕像器件可以既不拍攝 該幅圖片、延遲適當(dāng)時間采集、立即拍攝另一幅圖片、向照相 機(jī)用戶報(bào)警，也不采取各種措施隨后增強(qiáng)不符合要求的圖像， 或者這些或其它措施的組合。照相機(jī)可以延遲諸如約300毫秒的特定時間長度、或者延遲平均眨眼間隔、或者延遲直到確定該 眨眼已經(jīng)結(jié)束拍攝另一幅圖片?？梢栽诳炫膱D片之前，或者在 拍攝目標(biāo)的眼睛閉著或者半閉著的圖片之后，向用戶報(bào)警。
提供了一種預(yù)測系統(tǒng)，如果眼睛閉著或者部分閉著，則該 預(yù)測系統(tǒng)取消該圖像資格。該系統(tǒng)預(yù)測何時不能拍攝圖片，艮口， 當(dāng)檢測到的眨眼過程在其結(jié)束之前正在進(jìn)行的時間中。已取消 資格圖像可能已經(jīng)捕獲，并且僅在照相機(jī)內(nèi)或者在外部設(shè)備上 執(zhí)行的捕像后的濾波操作中取消它資格。為了不因?yàn)榘ㄒ粋€ 或者多個眨眼而提高取消一幅或者多幅圖像資格的概率，該系 統(tǒng)可以拍攝多幅圖像。對于一個目標(biāo)處于眨眼過程的概率隨著 目標(biāo)數(shù)量的增加而增大的一組拍攝鏡頭，這種系統(tǒng)有用。該系 統(tǒng)可以根據(jù)圖像中人臉的數(shù)量自動確定要順序拍攝的圖像數(shù) 量，以保證這些圖像中至少一幅圖像沒有眨眼的概率高于閾值
數(shù)，例如，50%, 60%、 67%、 70%、 75%、 80%、 90%或者 95%。
可以通過合成當(dāng)前圖像以及預(yù)覽圖像、后覽圖像或者其它 高清晰度圖像，生成圖像。例如，該合成圖像可以包括人臉圖 區(qū)和一些背景影像(backgroimd imagery),其中利用預(yù)覽圖像、 后覽圖像或者其它高清晰度圖像中的一個或者兩個睜開的眼睛 代替當(dāng)前圖像中不符合要求地閉著或者部分閉著的一個或者兩 個眼睛圖區(qū)。該特征可以與在和本專利申請為同一受讓人的第 10/608， 776號美國專利申請中描述的特征組合，在此引用該專 利申請供參考。在第10/608，776號美國專利申請中，描述了采 用人臉檢測的數(shù)字圖像處理方法。識別對應(yīng)于數(shù)字圖像內(nèi)人臉 的一組像素。識別對應(yīng)于該數(shù)字圖像中的另一個特征的第二組 像素。確定包括該人臉和該另一個特征至少之一的一組新像素的復(fù)合圖像(re-compositioned image)。
這里的實(shí)施例通常涉及數(shù)字圖像或者景物中的單個人臉 (例如，在圖像捕獲之前，或者已經(jīng)利用數(shù)字方法捕獲之后)， 而且通常涉及眼睛。然而，這些描述可以擴(kuò)展到單個人臉上的 兩個眼睛，以及可以擴(kuò)展到一個以上的人臉(成組拍攝鏡頭)， 并且，如果確定一個或者兩個、三個、四個或者更多個的特定 數(shù)量的眼睛在眨眼，則該照相機(jī)可以取消該景物的資格。該照 相機(jī)能夠執(zhí)行取消資格操作和/或者其它操作，正如在此所述， 直到高百分比數(shù)量的目標(biāo)或者全部目標(biāo)均有一個或者兩個眼睜 開，或者反之。
在一個實(shí)施例中，該照相機(jī)可以在該目標(biāo)剛好完成眨眼過 程后拍攝圖片?？梢岳帽鞠到y(tǒng)取消其目標(biāo)的眼睛閉著的圖像 的資格，而且可以拍攝多個圖像，以防止圖像均有眨眼。對于 每個目標(biāo)人，圖像中的一幅可能具有睜開的眼睛，并且這些圖 片可以具有與沒有眨眼的單個圖像合成的混合像素。該照相機(jī) 根據(jù)該圖像中目標(biāo)的數(shù)量判定要拍攝的圖像數(shù)量。人越多，一 個人眨眼的可能性越高，因此，應(yīng)該采集更多的圖像。如果為 了效率，可以接受在一大組拍攝鏡頭中特定百分比的人數(shù)可以 眨眼，例如，低于特定數(shù)量，例如5%，則可以減少圖像的數(shù)量。 可以由照相機(jī)產(chǎn)品的制造商、程序開發(fā)者或者數(shù)字圖像采集裝 置的用戶選擇這些閾值數(shù)和百分比容差?？梢愿鶕?jù)對預(yù)覽圖像 的分析，產(chǎn)生該信息。該預(yù)覽圖像還可以支持確定該眼睛的位 置，以便更快地對該預(yù)覽分析確定的感興趣圖區(qū)進(jìn)行后處理分 析。
本系統(tǒng)設(shè)置根據(jù)其不拍攝圖片或者根據(jù)其不使用該圖片、 或者在已經(jīng)拍攝圖片后根據(jù)其進(jìn)一步處理該圖片，和/或者根據(jù)其拍攝一個附加圖像或若干附加圖像以代替不符合要求圖像的 條件。因此，根據(jù)優(yōu)選實(shí)施例的系統(tǒng)的另一個有利特征是，利 用預(yù)覽圖像或者后覽圖像或者另一個高清晰度圖像中的用戶的 眼睛信息，該系統(tǒng)可以校正所采集的眨眼圖區(qū)。本系統(tǒng)優(yōu)選使 用通常具有較低分辨率并可以被更快速處理的預(yù)覽圖像。本系 統(tǒng)還可以尋求對圖像之間的人臉特征(例如，眼睛或者嘴)的 變化進(jìn)行比較，作為取消圖像捕獲的景物資格的潛在觸發(fā)方式。 在這種情況下，該系統(tǒng)可以將該攝影中稍持久的或者較長期的 斜眼與更多是臨時狀態(tài)的眨眼區(qū)分開。該系統(tǒng)還可以通過多個 圖像的比較，確定由于上眼皮的位置或者贅皮褶皺而自然變窄 的眼睛之間的不同，該系統(tǒng)還可以根據(jù)由目標(biāo)人確定了的民族， 例如，將亞洲人的眼睛與白種人的眼睛區(qū)別開。
在此所做的描述通常涉及處理其中的對象人正在眨眼睛 的景物。然而，本發(fā)明可以應(yīng)用于其它特征，例如，當(dāng)人皺眉 時，或者當(dāng)人出現(xiàn)不令人滿意的姿勢、交談、吃東西、頭發(fā)不
好，或反之令人有好感時，或者當(dāng)另一個人給某人戴兔耳(bimny ear)時，或者當(dāng)動物或其他人出乎意料地穿過照相機(jī)與被拍攝 的人之間時，或者當(dāng)光突然發(fā)生變化時，或者在刮風(fēng)時，或者 其它情況時。 一種或者更多種或者所有這些取消資格環(huán)境可以 被手動設(shè)置和/或者取代。
圖l示出根據(jù)優(yōu)選實(shí)施例取消包括貶眼的景物資格的方 法。在IIO，采集包括人臉圖區(qū)的景物的當(dāng)前圖像。任選地，在 120,識別該人臉圖區(qū)，然后，分析該人臉圖區(qū)以確定其上的一 個或者兩個眼睛圖區(qū)。在130，識別對應(yīng)于該人臉圖區(qū)內(nèi)的眼睛 圖區(qū)的一組或者多組像素。在140，確定眼睛圖區(qū)是否處于眨眼 過程。如果在140確定該眼睛正處于眨眼過程，則在150取消該
24景物作為被處理的永久圖像的候選者資格。此處，可以僅停止 該過程，或者再次從開頭開始該過程，或者由于所述取消資格，
而在160捕獲新圖像，以代替當(dāng)前圖像。在170，可以提供關(guān)于 該眨眼的報(bào)警信號。在180，可以延遲景物的高清晰度捕像。如 圖4A和4B所示，可以停止對當(dāng)前圖像的進(jìn)一步處理，或者作為 增強(qiáng)取消資格圖像的一種方式，可以拼裝合成圖像。
圖2示出根據(jù)優(yōu)選實(shí)施例的預(yù)測眨眼完成時間間隔的方 法。在210，預(yù)測眨眼過程何時結(jié)束，并且該取消資格間隔在預(yù) 知的眨眼完成時間結(jié)束。在220，以預(yù)定等待時間設(shè)置該間隔。 這可以根據(jù)所知的四分之一秒或者250毫秒的平均眨眼進(jìn)行設(shè) 置，或者這可以設(shè)置在約200至400毫秒范圍內(nèi)，或者設(shè)置為O. 6、 0. 8或者1.0秒，可是，將等待時間設(shè)置得太長不能保證眨眼結(jié) 束，不利于允許第二次眨眼開始、或者只是使拍攝圖片涉及的 每個人必須等待太長時間，以致該取消資格周期不能結(jié)束。更 精確地確定眨眼過程的結(jié)束是要求的。
在圖2中的230，可以確定景物所處的結(jié)束眨眼過程的點(diǎn)， 然后，計(jì)算結(jié)束眨眼的剩余時間。例如，可以確定所看到的眨 眼過程是半途結(jié)束的。在該例中，確定的完成度(fraction) 是一半或者0.5。在240，可以有利地將該完成度倍乘預(yù)定的整 個眨眼過程時長，例如，0. 25秒，以獲得剩余O. 125秒的完成時 間。采用這樣更精確的確定，就不需要為結(jié)束該取消資格周期 設(shè)置過長的等待時間，而仍能確保眨眼在快拍該圖片之前結(jié)束。 作為一種選擇，如果拍攝了多個圖片，而且在后捕像處理中發(fā) 現(xiàn)眨眼，則根據(jù)已知的捕像時間，可以更精確確定哪個圖像將 被取消資格。
圖2和圖3提供了該過程涉及的各種選項(xiàng)。在250，將基于平均眨眼過程時長的整個眨眼過程時長預(yù)設(shè)在照相機(jī)中或者其 它預(yù)捕像或者后捕像處理裝置中。在240，根據(jù)對從開始眨眼到 當(dāng)前估計(jì)的時間以及確定的完成度，確定整個眨眼過程時長。 例如，如果確定的完成度是三分之一，而且從開始眨眼到當(dāng)前
的時間被確定為0. 09秒，則所估計(jì)的整個眨眼時間為0. 27秒， 還剩余O. 18秒。在280，該估計(jì)可以基于對與當(dāng)前圖像的時域捕 像參數(shù)相關(guān)的更先前預(yù)覽圖像之一的時域捕像參數(shù)進(jìn)行的分 析。例如，如果先前預(yù)覽圖像顯示該眨眼過程開始，而且照相 機(jī)知道在O. 08秒以前捕獲了該先前預(yù)覽圖像，并且該完成度為 三分之一，則可以預(yù)測該眨眼過程再經(jīng)歷O. 16秒之后結(jié)束。在 270，確定該完成度，包括確定該眨眼是正睜開還是正閉上，而 且進(jìn)一步確定眼睛睜開或者閉上的程度。
在圖3中的310，又給出了確定眼睛的睜開或者閉著程度。 為此，在320,相對于在短于整個眨眼過程時長的期間內(nèi)采集的 一個或者多個其它預(yù)覽圖像，優(yōu)選分析當(dāng)前圖像。在330選擇確 定一個或者兩個眼皮的模糊程度有助于確定眨眼速度。在340, 可以確定瞳孔、虹膜、 一個或者兩個眼皮或者正顯現(xiàn)出的眼白 中的一部分，從而有助于確定眨眼眼睛是如何睜開或者閉合的。 還可以執(zhí)行色彩分析350和形狀分析360，以將對應(yīng)于睜眼特征， 例如，瞳孔、虹膜和/或者眼白，的像素與對應(yīng)于閉眼特征、或 者出現(xiàn)在當(dāng)前景物的眼睛圖區(qū)內(nèi)的眼皮的像素區(qū)別開。
圖4a示出根據(jù)優(yōu)選實(shí)施例確定是否放棄對圖像進(jìn)行進(jìn)一 步處理410的方法。在這種情況下，為了與計(jì)算眨眼過程結(jié)束時 間不同的目的，在420，確定眼睛睜開或者閉合的程度。在該實(shí) 施例中，可以預(yù)設(shè)眼睛的閾值閉合度，例如，諸如當(dāng)根據(jù)與圖3 所示的310至360的任意一個或者它們的組合類似的420、 430、440、 450、 460或者470、或者它們的組合對圖像進(jìn)行分析時， 如果眼睛閉合至少達(dá)到閾值程度或者更嚴(yán)重，則取消該景物資 格，因?yàn)檠劬﹂]合得太嚴(yán)重了。這可以對應(yīng)于沒有眨眼的情況， 或者眼睛處于眨眼過程的最開始階段或者最末尾階段的情況， 如此情況下為了保留該圖像，眼睛要睜開到足夠程度。
圖4b示出根據(jù)優(yōu)選實(shí)施例拼裝合成圖像的方法。在480， 拼裝包括當(dāng)前圖像中的像素和對應(yīng)于該當(dāng)前圖像中正眨眼的眼 睛的不同圖像中的睜眼像素的合成圖像。在490，該不同圖像可 以是預(yù)覽圖像或者后覽圖像。在這種情況下，特別是如果預(yù)覽 圖像或者后覽圖像具有比當(dāng)前圖像更低的分辨率，則在500，可 以對預(yù)覽圖像進(jìn)行增抽樣，或者對后覽圖像進(jìn)行降抽樣，或者 它們的組合。在510，優(yōu)選調(diào)準(zhǔn)該當(dāng)前圖像和該不同圖像，以使 該預(yù)覽圖像或者后覽圖像中的睜眼像素圖區(qū)與該當(dāng)前圖像中的 眨眼圖區(qū)匹配。
圖5示出又一個實(shí)施例。如果確定圖像中的一個或者多個 眼睛在眨眼，則根據(jù)如下描述優(yōu)選取消該圖像被進(jìn)一步處理的 資格。作為一種選擇，可以在某處以諸如圖5的例子所示的方式 執(zhí)行眨眼確定140?？梢岳梅娇?102中的應(yīng)用程序打開圖像。 然后，如方框1106所描述的，該軟件確定眼睛或者人臉或者它 們二者是否在該圖片中。在lllO，如果沒有檢測到眼睛或者人 臉，該軟件就停止對該圖像工作，然后退出。在下面所做的描 述中，為了提高效率，通常僅涉及眼睛，但是人臉或者眼睛或 者它們二者，或者甚至人臉的另一特征或者其它非人臉預(yù)定景 物特征也可以作為特定操作的目標(biāo)(請參考圖1中的110、 120 和130以及第10/608， 776號美國專利申請，在此引用該專利申請 供參考)。該軟件還可以提供手動模式，在此模式下，在方框1116， 用戶可以將眼睛存在的信息通知該軟件，然后，在1U8，手動 標(biāo)記它們。在1116，如果沒有發(fā)現(xiàn)眼睛，則可以自動激活手動 選擇，或者甚至可以在自動步驟之后選擇性地激活它，使得用 戶通過某個用戶界面或者在1112對自動選擇附加更多眼睛，或 者甚至在1114消除由自動處理1118在1110錯誤地識別為眼睛的 圖區(qū)。此外，用戶還可以手動選擇選項(xiàng)，以調(diào)用在1106定義的 處理。對于用戶可以根據(jù)檢測到的該眼睛而手動決定增強(qiáng)或者 校正該圖像的情況，該選項(xiàng)有用的。標(biāo)記眼睛的各種方式，無 論是自動的還是手動的，無論是在照相機(jī)內(nèi)還是利用應(yīng)用程序， 以及無論是手動執(zhí)行還是自動執(zhí)行尋找屈像中的眼睛的命令， 全部被包括于在此的優(yōu)選實(shí)施例中。在優(yōu)選實(shí)施例中，首先檢 測人臉，然后，檢測人臉上的眼睛。
在變換實(shí)施例中，作為采集過程的一部分，可以激活照相 機(jī)內(nèi)的眼睛檢測軟件，如方框1104所描述的。在這種情況下， 可以采用不同方法實(shí)現(xiàn)眼睛檢測部分1106，以支持實(shí)時操作或 者近實(shí)時操作。這種實(shí)現(xiàn)可以包括子抽樣圖像和加權(quán)抽樣，以 減少對其進(jìn)行計(jì)算的像素?cái)?shù)。參考圖6a，將進(jìn)一步描述該實(shí)施 例。
在變換實(shí)施例中，該眼睛檢測還可以接著利用預(yù)覽圖像提 供的信息確定預(yù)覽中眼睛的位置，這樣可以加速在該最終圖像 的較小圖區(qū)內(nèi)進(jìn)行的分析。
在變換實(shí)施例中，作為輸出過程的一部分，可以激活再現(xiàn) 裝置內(nèi)的眼睛檢測軟件，如方框1103所描述的。在這種情況下， 或者在再現(xiàn)裝置內(nèi)利用捕獲的圖像或者利用一個或者多個預(yù)覽 圖像，或者在這種裝置的外部驅(qū)動器內(nèi)，執(zhí)行眼睛檢測部分1106。參考圖6b，將進(jìn)一步描述該實(shí)施例。
在標(biāo)志或者標(biāo)記了該眼睛和/或者人臉或者其他特征后， 無論是1118中描述的手動方式還是1106描述的自動方式，該軟 件都準(zhǔn)備好根據(jù)眼睛檢測、人臉檢測或者其他特征檢測步驟產(chǎn) 生的信息對該圖像進(jìn)行操作。該手段可以作為采集的一部分、 作為后處理的一部分、或者作為它們二者執(zhí)行。如上所述，在 140，此時執(zhí)行眨眼確定(請參考圖l至4b以及上述內(nèi)容)。如果 發(fā)現(xiàn)眨眼，則在1119，可以取消該圖像資格，以便有效放棄數(shù) 字照相技術(shù)領(lǐng)域內(nèi)的技術(shù)人員公知的進(jìn)一步處理。
參考圖6a，該圖描述了利用人臉檢測改善照相機(jī)采集參數(shù) 的過程，如上面圖5中的方框1106所述。在這種情況下，在IOOO， 例如，通過半按下快門、開啟照相機(jī)等，激活照相機(jī)。然后， 照相機(jī)經(jīng)過正常預(yù)采集步驟，在1004確定正確的采集參數(shù)，諸 如光圈、快門速度、閃光燈功率、增益、色平衡、白點(diǎn)或者焦 點(diǎn)。此外，在1002，加載特別是與該圖像中的可能人臉相關(guān)的 圖像屬性的默認(rèn)設(shè)置。這些屬性可以是總色平衡、曝光量、對 比度、取向等。作為一種選擇，在1003，可以對一批預(yù)覽圖像 進(jìn)行分析，以在1006，確定該圖片中可能存在的人臉。在1008， 還可以預(yù)測當(dāng)捕獲高清晰度圖像時眼睛可能在其中的圖區(qū)。這 種可替換的技術(shù)可以包括轉(zhuǎn)移到方框1010和/或者1002。
在IOIO，在傳感器上利用數(shù)字方法捕獲圖像。這種動作可 以連續(xù)更新，而且可以包括也可以不包括將這樣捕獲的圖像保 存到永久存儲器中。
在1020 ，對捕獲的圖像應(yīng)用圖像分類(image classification)并且特別是人臉檢測技術(shù)領(lǐng)域內(nèi)的技術(shù)人員 公知的圖像檢測過程、優(yōu)選是人臉檢測過程，以在該圖像中尋找眼睛或者人臉或者其他特征。這些人臉檢測技術(shù)包括但并不
局限于基于知識的；特征不變(feature-invariant);模板 匹配(template-matching);基于外貌；彩色提示或者活動提 示；基于adaboost的人臉檢測器一Viola-Jones;等等。
如果沒有發(fā)現(xiàn)人臉，則在1032中止該過程。作為一種選擇， 或者除了在1030進(jìn)行自動檢測，用戶通過利用例如照相機(jī)顯示 器，使用某種交互式用戶界面機(jī)制，可以手動選擇在1034檢測 到的眼睛或者人臉。作為一種選擇，通過改變檢測過程的靈敏 度或者閾值，在沒有可視用戶界面的情況下，也可以實(shí)現(xiàn)該過 程。作為一種選擇，可以從預(yù)捕像過程1003獲取該數(shù)據(jù)。
當(dāng)在1040檢測到眼睛或者人臉時，可以標(biāo)記它們或者標(biāo)志 它們。在1040定義的檢測，不僅是選擇或者檢測眼睛或者檢測 人臉的二元過程，它還可以用作，基于這些眼睛或人臉的尺寸、 在該幀中的位置、在此描述的限定這些眼睛或者人臉相對于檢 測的其他眼睛或者人臉的重要性的其它參數(shù)，對這些眼睛或者 人臉分別賦予各自權(quán)重的部分過程。
作為一種選擇，或者此外，用戶可以手動取消選擇被錯誤 地誤檢測為眼睛或者人臉的圖區(qū)1044。由于眼睛或者人臉被誤 檢測，或者在攝影者希望將注意力集中在作為主要對象的這些 眼睛或者人臉之一，而不希望將注意力集中在其他眼睛或者人 臉時，進(jìn)行這種選擇。作為一種選擇，在1046，用戶可以重新 選擇或者強(qiáng)調(diào)一個或者多個眼睛或者人臉，以指出在計(jì)算過程 中，這些眼睛或者人臉相對于其他眼睛或者人臉具有更高的重 要性。在1046中限定的此過程進(jìn)一步限定了作為連續(xù)值過程的 優(yōu)選識別過程，它與二元過程相反。利用可視用戶界面，或者 通過調(diào)節(jié)檢測過程的靈敏度，實(shí)現(xiàn)該過程。在1040，正確隔離眼睛或者人臉或者其它特征后，在1050， 將它們的屬性與在1002預(yù)定的默認(rèn)值進(jìn)行比較。這種比較將確 定兩個圖像之間的可能變換，以達(dá)到相同的值。然后，在1070, 該變換被轉(zhuǎn)化為照相機(jī)捕像參數(shù)，在1090，采集圖像。
實(shí)際的例子是如果捕獲的人臉太暗，則可以改變采集參 數(shù)，以允許較長時間的曝光，或者開大光圈。請注意，圖像屬 性不必僅與人臉圖區(qū)相關(guān)，還可以與總體曝光量相關(guān)。作為例 子，如果總體曝光量是正確的，而人臉曝光不足，則該照相機(jī) 可以轉(zhuǎn)至輔助閃光模式。
在1060，延遲捕像，直到檢測到的圖像屬性與默認(rèn)圖像屬 性匹配。根據(jù)優(yōu)選實(shí)施例的例子是延遲捕像，直到眨眼并導(dǎo)致 延遲的眼睛不再眨眼。在1070,可以鍵入手動超控指令(manual override instruction),以便即使在該圖像中檢測到眨眼時， 無論如何也拍攝圖片，或者保存圖片，或者繼續(xù)處理圖片。在 1090，拍攝圖片，或者根據(jù)另一個實(shí)施例，以高清晰度存儲該 圖片。
參考圖6b，在方框1103，描述了利用眼睛、人臉或者其它 特征檢測來改善輸出參數(shù)或者再現(xiàn)參數(shù)，如上在圖5中所述。在 這種情況下，在2100，激活諸如打印機(jī)或者顯示器這樣的再現(xiàn) 裝置，下面稱為"裝置"。例如，在打印機(jī)內(nèi)，或者可選擇在連 接到打印機(jī)的裝置內(nèi)，例如個人電腦或者照相機(jī)內(nèi)，可以執(zhí)行 這種激活。然后，該裝置通過正常預(yù)再現(xiàn)步驟，以在2104確定 正確的再現(xiàn)參數(shù)，諸如色調(diào)再現(xiàn)、彩色變換輪廓、增益、色平 衡、白點(diǎn)和分辨率。此外，在2102，加載特別是與圖像中的可 能眼睛或者人臉相關(guān)的一組默認(rèn)圖像屬性。這些屬性可以是總 色平衡、曝光量、對比度或者取向或者它們的組合。
31然后，在2110，利用數(shù)字方法將圖像下載到裝置上。在
2120，對該下載圖像應(yīng)用圖像檢測過程，優(yōu)選應(yīng)用眼睛或者人 臉檢測過程，以在該圖像中尋找眼睛或者人臉。如果沒有發(fā)現(xiàn) 圖像，則在2132終止該過程，然后，該裝置重新開始其正常的 再現(xiàn)過程。作為一種選擇，或者除了在2130進(jìn)行自動檢測，在 2134，采用例如該裝置上的顯示器，利用某種交互式用戶界面 機(jī)制，用戶可以手動選擇檢測的眼睛或者人臉或者其他特征。 作為一種選擇，通過改變該檢測過程的靈敏度或者閾值，在沒 有可視用戶界面的情況下，也可以實(shí)施該過程。
當(dāng)在2130，檢測到眼睛或者人臉時，在2140標(biāo)記它們。2130 中的檢測不僅僅是選擇是否檢測眼睛或者人臉的二元過程。它 還可以用作，根據(jù)該人臉的尺寸、在幀內(nèi)的位置、在此描述的 用于限定該眼睛或者人臉相對于檢測的其他眼睛或者人臉的重 要性的其它參數(shù)等等，對這些眼睛或者人臉分別賦予各自權(quán)重 的部分過程。
作為一種選擇，或者此外，在2144，用戶可以手動取消選 擇被錯誤地偽檢測為眼睛或者人臉的圖區(qū)。由于偽檢測到眼睛 或者人臉，或者在攝影者希望將注意力集中在作為主要對象的 一個或者兩個眼睛或者一個人臉，而不希望將注意力集中在其 他眼睛或者人臉時，可以進(jìn)行這種選擇。作為一種選擇，在2146， 用戶可以重新選擇或者強(qiáng)調(diào)一個或者多個眼睛或者人臉，以表 示在計(jì)算過程中這些眼睛或者人臉相對于其他眼睛或者人臉更 重要。1146限定的該過程進(jìn)一步限定作為連續(xù)值過程的優(yōu)選識
別過程，它與二元過程相反。利用可視用戶界面或者通過調(diào)節(jié) 選擇過程的靈敏度，可以實(shí)現(xiàn)該過程。
當(dāng)在2140，正確隔離了該眼睛或者人臉或者其它景物或者圖像特征后，在2150，將其屬性與在2102預(yù)定的默認(rèn)值進(jìn)行比 較。該過程尋找的至少一個優(yōu)選屬性是眨眼的眼睛。這種比較 將確定兩個圖像之間的可能變換，以達(dá)到相同的值。如果確定 一個或者多個眼睛在眨眼，則在2160，取消該圖像資格。在2170，
可以手動超控該取消資格，或者根據(jù)不同圖像替換睜眼像素。 該變換可以轉(zhuǎn)化為裝置再現(xiàn)參數(shù)，然后，在2190，可以對該圖 像進(jìn)行再現(xiàn)。該過程可以包括多個圖像。在這種情況下，在2180， 在進(jìn)行再現(xiàn)過程之前，可以對每個圖像重復(fù)該過程。實(shí)際例子 是在單個顯示實(shí)例上創(chuàng)建一組低分辨率圖像的略圖或者聯(lián)系表 (contact sheet)。
實(shí)際例子是，如果在非常暗情況下捕獲眼睛或者人臉，則 再現(xiàn)參數(shù)可以改變色調(diào)再現(xiàn)曲線，從而使眼睛或者人臉增亮。 請注意，該圖像屬性不必僅與眼睛圖區(qū)或者人臉圖區(qū)相關(guān)，還 可以與整個色調(diào)再現(xiàn)相關(guān)。
參考圖7a至7d，如圖5中方框1130加亮處，它們描述了根 據(jù)眼睛、人臉、其它人臉特征或者其它非人臉特征的位置和取 向，使圖像自動旋轉(zhuǎn)。圖7a中提供了兩個人臉的圖像。請注意， 這兩個人臉的取向不同，并且這兩個人臉是膠著在一起。在此 處，每個人臉上分別示出兩個眼睛，但是可以僅示出一個眼睛。
包括圖5中方框1108和1118功能的眼睛或者人臉檢測階段
中的軟件，將標(biāo)記母親和兒子的兩張人臉或者四個眼睛，例如， 可以將這兩個人臉分別標(biāo)記為估計(jì)的橢圓形2100和2200。利用 公知的數(shù)學(xué)工具，例如，橢圓的協(xié)方差距陣，該軟件將分別確 定兩個人臉2120和2220的主軸以及副軸2140和2240。在照相機(jī) 處于水平方向的風(fēng)景畫模式的情況下，或者在處于垂直方向或 者+ 90度，即順時針，或者處于一90度，即逆時針，的肖像模式的情況下，即使在該步驟，僅通過比較各軸的尺寸，該軟件 就可以認(rèn)為該圖像的取向?yàn)?0度。作為一種選擇，該應(yīng)用程序 還可以應(yīng)用于任意旋轉(zhuǎn)量。然而，該信息不足以判定該圖像是 順時針旋轉(zhuǎn)還是逆時針旋轉(zhuǎn)。
圖7c描述了提取通常非常容易被發(fā)覺的人臉的相關(guān)特征 的步驟。這種物體可以包括眼睛2140、 2160和2240、 2260以及 嘴唇2180和2280，或者鼻子、眼眉、眼皮，以及眼睛、頭發(fā)、 前額、下巴、耳朵等的特征。兩個眼睛和嘴唇中心的組合形成 三角形2300，檢測三角形2300不僅可以確定人臉的取向，而且 可以確定該人臉相對于人臉照片(facial shot)的旋轉(zhuǎn)。請注 意，該圖像存在其它非常容易被檢測到的部分，例如，鼻孔、 眼眉、發(fā)際線、鼻梁以及作為人臉的實(shí)際延伸的脖子，等等， 可以標(biāo)記它們，并將它們用于取向檢測。在該圖中，將眼睛和 嘴唇作為這種人臉特征的例子。根據(jù)該眼睛，如果找到眼睛， 和嘴的位置，應(yīng)該使該圖像以逆時針方向旋轉(zhuǎn)。
請注意，僅定位不同的人臉特征可能還不夠，可以將這些 特征互相比較。例如，可以比較眼睛的顏色，以確保這對眼睛 是同一個人的。作為一種選擇，可以將人臉特征與預(yù)覽圖像進(jìn) 行比較。這樣處理可以防止發(fā)生將上部雙眼皮錯誤地拍攝為半 閉眼睛的情況。另一個例子是圖7c和7d所示的例子，如果該軟 件將嘴2180與眼睛2260、 2240組合在一起，則該取向被確定為 順時針。在這種情況下，通過比較嘴和眼睛的相對尺寸，該軟 件檢測正確取向。上述方法描述了根據(jù)不同人臉對象的相對位 置，確定圖像的取向的典型說明性技術(shù)。例如，可以預(yù)期這兩 個眼睛位于水平位置，鼻梁垂直于該眼睛，嘴在在鼻子下面等。 作為一種選擇，根據(jù)人臉器官本身的幾何結(jié)構(gòu)，確定取向。例
34如，可以預(yù)期眼睛在水平方向是細(xì)長的，這意味著，當(dāng)將諸如
黑圈(bloc) 2140和2160所示的橢圓形布置在該眼睛上時，可 以預(yù)期該主軸應(yīng)該是水平的。與適合橢圓形的嘴唇類似，該主 軸應(yīng)該是水平的。作為一種選擇，還可以研究該人臉周圍的圖 區(qū)。特別是，作為具有唯一接近的皮膚色調(diào)、連接到頭部的脖 子和肩膀，可以作為人臉取向和檢測人臉的指標(biāo)。
在優(yōu)選實(shí)施例中，確定圖像取向的過程可以作為數(shù)字顯示 裝置的部分予以實(shí)現(xiàn)。作為一種選擇，該過程可以作為數(shù)字打 印裝置部分，或者在數(shù)字采集裝置內(nèi)，予以實(shí)現(xiàn)。
該過程作為在同一頁上或者屏幕上顯示多個圖像的部分， 諸如，在顯示圖像的聯(lián)系表或者略圖的過程中，可以予以實(shí)現(xiàn)。 在這種情況下，用戶可以分別或者可以通過同時選擇多個圖像 來接受或者拒絕建議的圖像取向。對于一組有序的圖像，可以 根據(jù)用戶對前面圖像接受的信息，確定圖像的取向。
作為一種選擇，如圖8a的流程圖所描述的，在預(yù)采集步驟 可以采用類似的方法，以確定具有睜開眼睛的圖像的數(shù)字模擬 或者復(fù)合是否有利，例如當(dāng)確定眼睛在眨眼時。在此引用授予 Steinberg等人的第6， 151， 073號美國專利供參考。在圖5所示的 方框110S，照相機(jī)搜索該圖像中存在的眼睛或者人臉。在1460， 確定該圖像是否由一個或者多個眼睛構(gòu)成。如果不是，則在1462 退出。如果是，則在1464標(biāo)記該眼睛。在1470，分析該眼睛圖 區(qū)。如果在1474確定該眼睛充分睜開，則在1478，原樣保留該 圖像。但是，如果未確定眼睛是充分睜開，或者眼睛閉合超過 閾值量，則該過程繼續(xù)進(jìn)行，以在1480、 1490和/或者1494進(jìn)行 校正。在1480，提供用于數(shù)字模擬睜開的眼睛的子例程。 一個 掩膜或者多個掩膜限定選擇的圖區(qū)，即，在該例中的眼睛圖區(qū)。在1484,可以增加曝光，也可以跳過此步驟。在1486，對選擇 的眼睛圖區(qū)進(jìn)行形狀處理和/或者色彩處理。例如，如果在原始 圖像中存在閉合的眼皮，則在睜開的眼皮之間設(shè)置瞳孔、虹膜 和眼白的形狀和顏色，以代替閉合的眼皮。在1488，提供色調(diào) 再現(xiàn)。
在1490，可以對用戶提供一個或者多個結(jié)果。在1492，用 戶可以選擇優(yōu)選結(jié)果，然后，在1498，進(jìn)行校正。作為一種選 擇，在1494，可以利用要修改的參數(shù)，諸如虹膜顏色還是瞳孔 形狀，對用戶顯示該圖像。然后，在1496，用戶調(diào)整修改范圍， 在1498，校正該圖像。
圖8b提供了另一個與圖5中一樣在ll04啟動圖片拍攝模式 的工作流程。在4820，分析該圖像。在1106，確定該圖像中是 否存在眼睛。如果不存在，則在lllO，退出。如果存在，則在 1108，標(biāo)記該眼睛。在4840，分析眼睛圖區(qū)，然后，如果在4960， 該眼睛睜開，則在4880，或者拍攝圖片、存儲圖片(例如，如 果事先拍攝了該圖片)或者拍攝并存儲該圖片。在4860，如果 確定該眼睛是閉著的，例如由于正在眨眼，則在49S0，丟棄該 圖像，或者延遲捕獲圖像，或者作為一種選擇，在4900拍攝該 圖片。在后者實(shí)施例中，在4920，用睜眼圖區(qū)代替眨眼眼睛的 像素，然后，在4940，存儲該合成圖片。
圖9示出涉及眼皮運(yùn)動的技術(shù)。在1170，啟動聚焦機(jī)構(gòu)。 在1750，照相機(jī)搜索眼睛。如果在1760，沒有檢測到眼睛，則 在1762，可以執(zhí)行基于空間的自動聚焦技術(shù)。如果檢測到眼睛， 則在1770，標(biāo)記該圖區(qū)。在1772，顯示該圖區(qū)。在1790，用戶 可以拍攝該圖片。然而，在17S0，用戶可以轉(zhuǎn)換到焦點(diǎn)跟蹤模 式。當(dāng)眼皮運(yùn)動時，例如在眨眼過程1782中，在1784，跟蹤眼皮運(yùn)動。在1786，當(dāng)眼皮在眨眼過程中運(yùn)動時，施加延遲或者 取消景物資格。在1790，在該取消資格期間結(jié)束時，用戶可以 拍攝該圖片，或者對該照相機(jī)編程以自動拍攝該鏡頭。
下面是參考文獻(xiàn)引用清單，正如公開可替換的實(shí)施例一 樣，除了背景技術(shù)、發(fā)明內(nèi)容、摘要
、以及附圖和 上面引用的其它參考文獻(xiàn)，在此將下面的參考文獻(xiàn)引入優(yōu)選實(shí)
施例的詳細(xì)說明中供參考
第6，965，684號、第6，301，440號、第RE33682號、第 RE31370號、第4，047，187號、第4，317，991號、第4，367，027號、 第4， 638， 364號、第5， 291， 234號、第5， 488， 429號、第5， 638， 136 號、第5，710，833號、第5，724，456號、第5，781，650號、第 5，812，193號、第5，818，975號、第5，835，616號、第5，870，138 號、第5，978，519號、第5，991，456號、第6，097，470號、第 6，101，271號、第6，128，397號、第6，148，092號、第6，151，075 號、第6，188，777號、第6,192，149號、第6，249，315號、第 6，263，113號、第6，268，939號、第6，282，317號、第6， 301， 370 號、第6，332，033號、第6,393，148號、第6，404，900號、第 6，407，777號、第6，421，468號、第6，438，264號、第6， 456， 732 號、第6，459，436號、第6，473,199號、第6，501，857號、第 6， 504， 942號、第6， 504， 951號、第6， 516， 154號以及第6， 526， 161 號美國專利；
第2003/0071908號、第2003/0052991號、第 2003/0025812號、第2002/0172419號、第2002/0114535號、第 2002/0105662號以及第2001/0031142號美國專利申請公開； 標(biāo)題為"Human Eye Detector"的第60/776， 338號美國臨時專 利申請；第JP5260360A2號日本專利申請； 第GB0031423. 7號英國專利申請；
Yang等人,IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 24， no. 1， pp 34-58 (Jan. 2002); 以及
Baluja 禾口 Rowley , " Neural Network-based Face Detection, ，， IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 20， No. 1， p 23-28， January 1998。
盡管描述并示出了本發(fā)明的典型示意圖和特定實(shí)施例，但 是應(yīng)該明白，本發(fā)明的范圍并不局限于所討論的特定實(shí)施例。 因此，應(yīng)該將該實(shí)施例看作是說明性的，而非限制性的，還應(yīng) 該明白，在不脫離下面的權(quán)利要求書及其等效結(jié)構(gòu)和等效功能 限定的本發(fā)明范圍的情況下，本技術(shù)領(lǐng)域內(nèi)的技術(shù)人員可以對 這些實(shí)施例進(jìn)行變更。
此外，在根據(jù)下面的權(quán)利要求書和/或者在此的優(yōu)選實(shí)施 例可以執(zhí)行的方法中，以選擇的排印順序描述各操作。然而， 選擇該順序，并且為了排印方便而如此排序，而且該順序無意 暗示執(zhí)行該操作的任意特定順序，除非明確提出該特定順序， 或者本技術(shù)領(lǐng)域內(nèi)的技術(shù)人員必然這樣理解該特定順序。
權(quán)利要求
1. 一種基于面部表情不符合永久保存要求而取消已采集圖像資格的方法，包括(a)采集包括人面圖區(qū)的景物的當(dāng)前圖像；(b)識別對應(yīng)于該人面圖區(qū)中的一個或者多個人面部分圖區(qū)的一組或者多組像素；(c)確定所述人面部分的一個或者多個表情是否不符合要求；并且如果不符合要求，則(d)拒絕存儲該當(dāng)前圖像。
2. 根據(jù)權(quán)利要求l所述的方法，進(jìn)一步包括自動啟動捕獲同一個景物的后續(xù)圖像。
3. 根據(jù)權(quán)利要求2所述的方法，其中所述捕獲后續(xù)圖像的 時間對應(yīng)于所述表情發(fā)生變化的估計(jì)時間。
4. 根據(jù)權(quán)利要求l所述的方法，進(jìn)一步包括提供所述當(dāng)前 圖像是不符合要求的通知。
5. 根據(jù)權(quán)利要求4所述的方法，其中所述通知是可視的、 可聽的或者它們的組合。
6. 根據(jù)權(quán)利要求l所述的方法，進(jìn)一步包括(i) 采集一個或者多個預(yù)覽圖像；以及(ii) 確定所述一個或者多個預(yù)覽圖像中是否存在一個或 者多個眼睛，以及所述一個或者多個眼睛在所述一個或者多個 預(yù)覽圖像中的位置；以及(iii) 其中識別該當(dāng)前圖像中的眼睛圖區(qū)像素是至少部分 地基于所述確定所述預(yù)覽圖像中所述是否存在眼睛以及眼睛在 所述預(yù)覽圖像中的所述位置。
7. 根據(jù)權(quán)利要求l所述的方法，其中該識別包括識別一組或者多組對應(yīng)于該人面圖區(qū)中的眼睛圖區(qū)的像素；而該確定包 括確定該眼睛圖區(qū)是否處于眨眼過程；并且如果處于眨眼過程， 則該拒絕包括，在該眼睛正在結(jié)束眨眼時取消該景物作為被處 理的永久圖像的候選者的資格。
8. 根據(jù)權(quán)利要求7所述的方法，其中該當(dāng)前圖像包括預(yù)覽 圖像，并且該取消資格包括延遲高清晰度捕獲該景物的圖像。
9. 根據(jù)權(quán)利要求8所述的方法，其中該延遲包括預(yù)測該眨 眼何時結(jié)束，并且在接近預(yù)測的眨眼結(jié)束時間時，結(jié)束該取消 資格。
10. 根據(jù)權(quán)利要求7所述的方法，其中確定該眼睛是否在 眨眼包括確定該眼睛睜開或者閉合的程度。
11. 根據(jù)權(quán)利要求7所述的方法，其中該當(dāng)前圖像包括高 清晰度捕獲圖像，并且該取消資格包括放棄進(jìn)一步處理該當(dāng)前 圖像。
12. 根據(jù)權(quán)利要求7所述的方法，其中該當(dāng)前圖像包括高 清晰度捕獲圖像，并且該方法進(jìn)一步包括拼裝包括該當(dāng)前圖像 中的像素和不同圖像中對應(yīng)于在眨眼的眼睛的睜開眼睛像素的 合成圖像。
13. 根據(jù)權(quán)利要求7所述的方法，其中識別該眼睛圖區(qū)包 括識別該人面圖區(qū)；以及分析該人面圖區(qū)，以確定其內(nèi)的眼 睛圖區(qū)。
14. 根據(jù)權(quán)利要求7所述的方法，進(jìn)一步包括因?yàn)樵撊∠?資格而捕獲新圖像，以代替該當(dāng)前圖像。
15. 根據(jù)權(quán)利要求7所述的方法，進(jìn)一步包括提供關(guān)于該 眨眼的報(bào)警信號。
16. 根據(jù)權(quán)利要求7所述的方法，進(jìn)一步包括識別該景物中的第二人臉的第二眼睛圖區(qū)；確定該第二眼睛圖區(qū)是否處于眨眼過程；并且如果處于眨眼過程，則在該第二眼睛正在結(jié)束眨眼時，取消該景物作為被處理的永久圖像的候選者資格。
17. 根據(jù)權(quán)利要求7所述的方法，進(jìn)一步包括(i) 采集一個或者多個預(yù)覽圖像；(ii) 確定所述一個或者多個預(yù)覽圖像中是 者多個眼睛，以及所述一個或者多個眼睛在所述 預(yù)覽圖像中的位置；以及(iii) 其中識別該當(dāng)前圖像中的眼睛圖區(qū)像 地基于所述確定所述預(yù)覽圖像中所述是否存在眼 所述預(yù)覽圖像中的所述位置。
18. —種防止在采集的數(shù)字圖像中出現(xiàn)處于眨眼過程的 眼睛的方法，包括(i) 采集景物的一個或者多個預(yù)覽圖像；(ii) 確定所述景物中是否存在人臉以及所述景物中的人 臉數(shù)；以及(iii) 根據(jù)在該景物中確定的所述人臉數(shù)，確定要采集的 多個圖像的數(shù)量；以及(iv) 其中根據(jù)多個圖像之一或者之多個不存在一個或者 多個眨眼眼睛的概率，確定該數(shù)量。
19. 一種自動取消不符合要求景物的資格并作為照相機(jī) 的圖像采集控制的方法，包括(a) 采集多個預(yù)覽圖像；(b) 從所述多個預(yù)覽圖像中提取信息；(C)在所述多個臨時圖像的各圖像之間，分析該景物中的 一個或者多個變化；否存在一個或 一個或者多個素是至少部分 睛以及眼睛在(d) 根據(jù)該分析，確定該景物中是否存在一個或者多個不 符合要求特征；(e) 在所述一個或者多個不符合要求特征繼續(xù)存在時，取 消該景物作為已處理的永久圖像的候選者的資格。
20. 根據(jù)權(quán)利要求19所述的方法，其中該分析包括識別一組或者多組對應(yīng)于具有不符合要求形態(tài)的面部特征的像素。
21. 根據(jù)權(quán)利要求20所述的方法，其中該一組或者多組像 素包括眼睛組，并且該不符合要求形態(tài)包括眨眼形態(tài)。
22. 根據(jù)權(quán)利要求19所述的方法，進(jìn)一步包括確定在其間 不會采集已處理的永久圖像的取消資格的間隔。
23. —種作為照相機(jī)的圖像采集控制方式自動取消不符 合要求景物資格的方法，包括(a) 采集預(yù)覽圖像；(b) 從所述預(yù)覽圖像中提取信息；(c) 確定該景物中是存在一個或者多個關(guān)鍵特征還是將存在一個或者多個關(guān)鍵特征；(d) 分析該預(yù)覽圖像中對應(yīng)于該景物中的一個或者多個關(guān)鍵特征的一個或者多個像素圖區(qū)；(e) 根據(jù)對該預(yù)覽圖像中的一個或者多個像素圖區(qū)所做的 分析，確定該景物中是否存在該一個或者多個關(guān)鍵特征的一個 或者多個不符合要求表情、陰影、遮光或者它們的組合；(f) 在所述一個或者多個關(guān)鍵特征的一個或者多個不符合 要求表情、陰影、遮光或者它們的組合中的許多繼續(xù)存在時， 取消該景物作為被處理的永久圖像的候選者的資格。
24. 根據(jù)權(quán)利要求23所述的方法，其中該分析包括識別一 組或者多組對應(yīng)于具有不符合要求形態(tài)的面部特征的像素。
25. 根據(jù)權(quán)利要求24所述的方法，其中該一組或者多組像 素包括眼睛組，并且該不符合要求形態(tài)包括眨眼形態(tài)。
26. 根據(jù)權(quán)利要求24所述的方法，進(jìn)一步包括確定將在其 間不會采集已處理的永久圖像的取消資格的間隔。
27. —種包括成像光學(xué)系統(tǒng)和數(shù)字圖像檢測器以及存儲 介質(zhì)并且其內(nèi)存儲了程序指令的圖像采集裝置，該程序指令用 于對一個或者多個處理器編程，以執(zhí)行因?yàn)榛诿娌勘砬椴环?合永久存儲要求而取消已采集圖像資格的方法，該方法包括(a) 采集包括人面圖區(qū)的景物的當(dāng)前圖像；(b) 識別對應(yīng)于該人面圖區(qū)中的一個或者多個人面部分圖 區(qū)的一組或者多組像素；(c) 確定所述人面部分的一個或者多個表情是否不符合要 求；并且如果不符合要求，則(d) 拒絕存儲該當(dāng)前圖像。
28. 根據(jù)權(quán)利要求27所述的設(shè)備，其中該方法進(jìn)一步包括 自動啟動捕獲同一個景物的后續(xù)圖像。
29. 根據(jù)權(quán)利要求28所述的設(shè)備，其中所述捕獲后續(xù)圖像 的時間對應(yīng)于所述表情發(fā)生變化的估計(jì)時間。
30. 根據(jù)權(quán)利要求27所述的設(shè)備，其中該方法進(jìn)一步包括 提供所述當(dāng)前圖像是不符合要求的通知。
31. 根據(jù)權(quán)利要求30所述的設(shè)備，其中所述通知是可視 的、可聽的或者它們的組合。
32. 根據(jù)權(quán)利要求27所述的設(shè)備，其中該方法進(jìn)一步包括:(i) 采集一個或者多個預(yù)覽圖像；以及(ii) 確定所述一個或者多個預(yù)覽圖像中是否存在一個或者多個眼睛，以及所述一個或者多個眼睛在所述一個或者多個預(yù)覽圖像中的位置；以及(iii)其中識別該當(dāng)前圖像中的眼睛圖區(qū)像素是至少部分 地基于所述確定所述預(yù)覽圖像中所述是否存在眼睛以及眼睛在 所述預(yù)覽圖像中的所述位置。
33. 根據(jù)權(quán)利要求27所述的設(shè)備，其中該識別包括識別一 組或者多組對應(yīng)于該人面圖區(qū)中的眼睛圖區(qū)的像素；而該確定 包括確定該眼睛圖區(qū)是否處于眨眼過程；并且如果處于眨眼過 程，則該拒絕包括在該眼睛正結(jié)束眨眼時取消該景物作為被處 理的永久圖像的候選者的資格。
34. 根據(jù)權(quán)利要求33所述的方法，其中該當(dāng)前圖像包括預(yù) 覽圖像，并且該取消資格包括延遲高清晰度捕獲該景物的圖像。
35. —種包括成像光學(xué)系統(tǒng)和數(shù)字圖像檢測器以及存儲 介質(zhì)并且其內(nèi)存儲了程序指令的圖像采集裝置，該程序指令用 于對一個或者多個處理器編程，以執(zhí)行自動取消不符合要求景 物的資格并作為照相機(jī)的圖像采集控制的方法，該方法包括-(a) 采集預(yù)覽圖像；(b) 從所述預(yù)覽圖像中提取信息；(c) 確定該景物中是存在一個或者多個關(guān)鍵特征還是將存 在一個或者多個關(guān)鍵特征；(d) 分析該預(yù)覽圖像中對應(yīng)于該景物中的一個或者多個關(guān)鍵特征的一個或者多個像素圖區(qū)；(e) 根據(jù)對該預(yù)覽圖像中的一個或者多個像素圖區(qū)所做的分析，確定該景物中是否存在該一個或者多個關(guān)鍵特征的一個 或者多個不符合要求形態(tài)、陰影或者遮光或者它們的組合；(f) 在所述一個或者多個關(guān)鍵特征的一個或者多個不符合要求形態(tài)、陰影、遮光或者它們的組合中的許多繼續(xù)存在時， 取消該景物作為已處理的永久圖像的候選者的資格。
36. 根據(jù)權(quán)利要求35所述的設(shè)備，其中該分析包括識別一 組或者多組對應(yīng)于具有不符合要求形態(tài)的面部特征的像素。
37. 根據(jù)權(quán)利要求36所述的設(shè)備，其中該一組或者多組像 素包括眼睛組，并且該不符合要求形態(tài)包括眨眼形態(tài)。
38. 根據(jù)權(quán)利要求36所述的設(shè)備，進(jìn)一步包括確定將在其 間不會采集已處理的永久圖像的取消資格的間隔。
39. 根據(jù)權(quán)利要求35所述的設(shè)備，其中該設(shè)備包括數(shù)字照 相機(jī)；裝備了捕像模塊的移動電話；手持式計(jì)算機(jī)；或者數(shù)字 攝像機(jī)；或者它們的組合。
40. —種或者多種處理器可讀存儲器件，處理器可讀代碼 嵌入在所述一種或者多種處理器可讀存儲器件上，所述處理器 可讀代碼用于對一個或者多個處理器編程，以執(zhí)行因?yàn)榛诿?部表情不符合永久存儲要求而取消已采集圖像資格的方法，該 方法包括(a) 釆集包括人面圖區(qū)的景物的當(dāng)前圖像；(b) 識別對應(yīng)于該人面圖區(qū)中的一個或者多個人面部分圖 區(qū)的一組或者多組像素；(C)確定所述人面部分的一個或者多個表情是否不符合要 求；并且如果不符合要求，則(d)拒絕存儲該當(dāng)前圖像。
41. 根據(jù)權(quán)利要求40所述的一種或者多種存儲器件，該方 法進(jìn)一步包括自動啟動捕獲同一個景物的后續(xù)圖像。
42. 根據(jù)權(quán)利要求41所述的一種或者多種存儲器件，其中 所述捕獲后續(xù)圖像的時間對應(yīng)于所述表情發(fā)生變化的估計(jì)時間。
43. 根據(jù)權(quán)利要求40所述的一種或者多種存儲器件，該方 法進(jìn)一步包括提供所述當(dāng)前圖像是不符合要求的通知。
44. 根據(jù)權(quán)利要求43所述的一種或者多種存儲器件，其中 所述通知是可視的、可聽的或者它們的組合。
45. 根據(jù)權(quán)利要求40所述的一種或者多種存儲器件，該方 法進(jìn)一步包括(i) 采集一個或者多個預(yù)覽圖像；(ii) 確定所述一個或者多個預(yù)覽圖像中是否存在一個或 者多個眼睛，以及所述一個或者多個眼睛在所述一個或者多個 預(yù)覽圖像中的位置；以及(iii) 其中識別該當(dāng)前圖像中的眼睛圖區(qū)像素是至少部分 地基于所述確定所述預(yù)覽圖像中所述是否存在眼睛以及眼睛在 所述預(yù)覽圖像中的所述位置。
46. 根據(jù)權(quán)利要求40所述的一種或者多種存儲器件，其中 該識別包括識別一組或者多組對應(yīng)于該人面圖區(qū)中的眼睛圖區(qū) 的像素；而該確定包括確定該眼睛圖區(qū)是否處于眨眼過程；并 且如果處于眨眼過程，則該拒絕包括在該眼睛結(jié)束眨眼時取消 該景物作為被處理的永久圖像的候選者的資格。
47. 根據(jù)權(quán)利要求46所述的一種或者多種存儲器件，其中該當(dāng)前圖像包括預(yù)覽圖像，并且該取消資格包括延遲高清晰度 捕獲該景物的圖像。
48. 根據(jù)權(quán)利要求47所述的一種或者多種存儲器件，其中 該延遲包括預(yù)測該眨眼何時結(jié)束，并且在接近預(yù)測的眨眼結(jié)束 時間時，結(jié)束該取消資格。
49. 根據(jù)權(quán)利要求48所述的一種或者多種存儲器件，其中該預(yù)測包括確定該景物處于結(jié)束眨眼過程的時點(diǎn)，并且計(jì)算結(jié) 束眨眼的剩余時間。
50. 根據(jù)權(quán)利要求49所述的一種或者多種存儲器件，其中 該計(jì)算包括將結(jié)束眨眼過程剩余時間的完成度乘以預(yù)定結(jié)束眨 眼過程時長。
51. 根據(jù)權(quán)利要求50所述的一種或者多種存儲器件，其中根據(jù)平均眨眼過程時長，預(yù)設(shè)該預(yù)定結(jié)束眨眼過程時長。
52. 根據(jù)權(quán)利要求50所述的一種或者多種存儲器件，其中 基于估計(jì)的從眨眼開始到當(dāng)前的時間并且根據(jù)表示該景物處于 結(jié)束眨眼過程的時點(diǎn)的完成度，確定該預(yù)定結(jié)束眨眼過程時長。
53. 根據(jù)權(quán)利要求52所述的一種或者多種存儲器件，其中 該估計(jì)基于相對于當(dāng)前預(yù)覽圖像的時域捕像參數(shù)對一個或者多 個先前預(yù)覽圖像的時域捕像參數(shù)所做的分析。
54. 根據(jù)權(quán)利要求50所述的一種或者多種存儲器件，進(jìn)一步包括確定所述完成度，確定所述完成度包括確定該當(dāng)前預(yù)覽 圖像中在眨眼的眼睛是睜開的還是閉著的，以及該眼睛睜開或 者閉合的程度。
55. 根據(jù)權(quán)利要求47所述的一種或者多種存儲器件，其中該延遲包括在預(yù)定等待時間之后結(jié)束該取消資格。
56. 根據(jù)權(quán)利要求46所述的一種或者多種存儲器件，其中 確定該眼睛是否眨眼包括確定該眼睛睜開或者閉合的程度。
57. 根據(jù)權(quán)利要求56所述的一種或者多種存儲器件，其中 確定該眼睛睜開或者閉合的程度包括相對分析在短于結(jié)束眨眼 過程時長的時間內(nèi)相對采集的當(dāng)前預(yù)覽圖像和一個或者多個其 他預(yù)覽圖像。
58. 根據(jù)權(quán)利要求56所述的一種或者多種存儲器件，其中確定該眼睛是否在眨眼進(jìn)一步包括確定一個或者兩個眼皮的模 糊程度。
59. 根據(jù)權(quán)利要求56所述的一種或者多種存儲器件，該方法進(jìn)一步包括確定正顯示的部分瞳孔、虹膜、 一個或者兩個眼 皮或者眼白，或者它們的組合。
60. 根據(jù)權(quán)利要求59所述的一種或者多種存儲器件，該方 法進(jìn)一步包括對該眼睛進(jìn)行色彩分析，并且將對應(yīng)于眼皮色調(diào) 的像素與對應(yīng)于虹膜色調(diào)或者瞳孔色調(diào)或者眼白色調(diào)或者它們 的組合的像素區(qū)別開。
61. 根據(jù)權(quán)利要求59所述的一種或者多種存儲器件，該方 法進(jìn)一步包括對眼晴進(jìn)行形狀分析，并且將對應(yīng)于眼皮形狀的 像素與對應(yīng)于虹膜形狀或者瞳孔形狀或者眼白形狀或者它們的 組合的像素區(qū)別開。
62. 根據(jù)權(quán)利要求46所述的一種或者多種存儲器件，其中 該當(dāng)前圖像包括高清晰度捕獲圖像，并且該取消資格包括放棄 進(jìn)一步處理該當(dāng)前圖像。
63. 根據(jù)權(quán)利要求62所述的一種或者多種存儲器件，其中 確定該眼睛是否在眨眼包括確定該眼睛睜開或者閉合的程度。
64. 根據(jù)權(quán)利要求63所述的一種或者多種存儲器件，其中 確定該眼睛睜開或者閉合的程度包括相對分析在短于結(jié)束眨眼 過程時長的時間內(nèi)相對采集的當(dāng)前預(yù)覽圖像和一個或者多個其 他預(yù)覽圖像。
65. 根據(jù)權(quán)利要求63所述的一種或者多種存儲器件，其中 確定該眼睛是否在眨眼進(jìn)一步包括確定一個或者兩個眼皮的模 糊程度。
66. 根據(jù)權(quán)利要求63所述的一種或者多種存儲器件，該方法進(jìn)一步包括確定正顯示的部分瞳孔、虹膜、 一個或者兩個眼 皮或者眼白，或者它們的組合。
67. 根據(jù)權(quán)利要求66所述的一種或者多種存儲器件，該方 法進(jìn)一步包括對該眼睛進(jìn)行色彩分析，并且將對應(yīng)于眼皮色調(diào) 的像素與對應(yīng)于虹膜色調(diào)或者瞳孔色調(diào)或者眼白色調(diào)或者它們 的組合的像素區(qū)別開。
68. 根據(jù)權(quán)利要求66所述的一種或者多種存儲器件，該方 法進(jìn)一步包括對該眼睛進(jìn)行形狀分析，并且將對應(yīng)于眼皮形狀 的像素與對應(yīng)于虹膜形狀或者瞳孔形狀或者眼白形狀或者它們 的組合的像素區(qū)別開。
69. 根據(jù)權(quán)利要求46所述的一種或者多種存儲器件，其中該當(dāng)前圖像包括高清晰度捕獲圖像，并且該方法進(jìn)一步包括拼 裝包括該當(dāng)前圖像中的像素以及對應(yīng)于不同圖像中在眨眼的眼 睛的睜眼眼睛像素的合成圖像。
70. 根據(jù)權(quán)利要求69所述的一種或者多種存儲器件，其中該不同圖像包括預(yù)覽圖像或者后覽圖像。
71. 根據(jù)權(quán)利要求70所述的一種或者多種存儲器件，其中 該不同圖像包括比該當(dāng)前圖像低的清晰度，并且該拼裝包括增 抽樣該不同圖像或者降抽樣該當(dāng)前圖像或者它們的組合。
72. 根據(jù)權(quán)利要求71所述的一種或者多種存儲器件，該方 法進(jìn)一步包括使該當(dāng)前圖像與該不同圖像對齊，這包括使睜眼 眼睛像素圖區(qū)與該當(dāng)前圖像中的眨眼眼睛圖區(qū)匹配。
73. 根據(jù)權(quán)利要求69所述的一種或者多種存儲器件，該方法進(jìn)一步包括使該當(dāng)前圖像與該不同圖像對齊，這包括使睜眼 眼睛像素圖區(qū)與該當(dāng)前圖像中的眨眼眼睛圖區(qū)匹配。
74. 根據(jù)權(quán)利要求46所述的一種或者多種存儲器件，其中識別該眼睛圖區(qū)包括識別人面圖區(qū)以及分析該人面圖區(qū)，以確 定其上的眼睛圖區(qū)。
75. 根據(jù)權(quán)利要求46所述的一種或者多種存儲器件，該方 法進(jìn)一步包括因?yàn)樵撊∠Y格而捕獲新圖像，以代替該當(dāng)前圖 像。
76. 根據(jù)權(quán)利要求46所述的一種或者多種存儲器件，該方法進(jìn)一步包括提供關(guān)于該眨眼的報(bào)警信號。
77. 根據(jù)權(quán)利要求46所述的一種或者多種存儲器件，該方 法進(jìn)一步包括識別該景物中的第二人面的第二眼睛圖區(qū)；確定 該第二眼睛圖區(qū)是否處于眨眼過程；并且如果處于眨眼過程， 則在該第二眼睛正結(jié)束眨眼時，取消該景物作為被處理的永久 圖像的候選者的資格。
78. 根據(jù)權(quán)利要求77所述的一種或者多種存儲器件，該方 法進(jìn)一步包括延遲捕獲高清晰度圖像，直到該景物中的每個人 面圖區(qū)的眼睛圖區(qū)均不包括眨眼眼睛。
79. 根據(jù)權(quán)利要求46所述的一種或者多種存儲器件，該方 法進(jìn)一步包括(i) 采集一個或者多個預(yù)覽圖像；(ii) 確定所述一個或者多個預(yù)覽圖像中是否存在一個或 者多個眼睛，以及所述一個或者多個眼睛在所述一個或者多個 預(yù)覽圖像中的位置；以及(iii) 其中識別該當(dāng)前圖像中的眼睛圖區(qū)像素至少部分地 基于所述確定所述預(yù)覽圖像中所述是否存在眼睛以及眼睛在所 述預(yù)覽圖像中的所述位置。
80. —種或者多種處理器可讀存儲器件，處理器可讀代碼 嵌入在所述一種或者多種處理器可讀存儲器件上，所述處理器可讀代碼用于對一個或者多個處理器編程，以執(zhí)行自動取消不 符合要求景物的資格并作為照相機(jī)的圖像采集控制的方法，該 方法包括(a) 采集預(yù)覽圖像；(b) 從所述預(yù)覽圖像中提取信息；(C)確定該景物中是存在一個或者多個關(guān)鍵特征還是將存在一個或者多個關(guān)鍵特征；(d) 分析該預(yù)覽圖像中對應(yīng)于該景物中的一個或者多個關(guān)鍵特征的一個或者多個像素圖區(qū)；(e) 根據(jù)對該預(yù)覽圖像中的一個或者多個像素圖區(qū)所做的 分析，確定該景物中是否存在該一個或者多個關(guān)鍵特征的一個 或者多個不符合要求形態(tài)、陰影、遮光或者它們的組合；(f) 在所述一個或者多個關(guān)鍵特征的一個或者多個不符合 要求形態(tài)、陰影、遮光或者它們的組合中的許多繼續(xù)存在時， 取消該景物作為被處理的永久圖像的候選者資格。
81. 根據(jù)權(quán)利要求80所述的一種或者多種存儲器件，其中 該分析包括識別一組或者多組對應(yīng)于具有不符合要求形態(tài)的面 部特征的像素。
82. 根據(jù)權(quán)利要求81所述的一種或者多種存儲器件，其中 該一組或者多組像素包括眼睛組，并且該不符合要求形態(tài)包括 眨眼形態(tài)。
83. 根據(jù)權(quán)利要求81所述的一種或者多種存儲器件，該方 法進(jìn)一步包括確定將在其間不會采集已處理的永久圖像的取消 資格的間隔。
全文摘要
作為照相機(jī)的圖像采集控制，取消不符合要求景物的資格。采集圖像。確定一個或者多個眼睛圖區(qū)。分析該眼睛圖區(qū)，以確定它們是否在眨眼，并且如果是在眨眼，在該眼睛正結(jié)束眨眼時，該景物被取消作為被處理的永久圖像的候選者的資格。
文檔編號G06K9/78GK101427266SQ200680054358
公開日2009年5月6日 申請日期2006年8月3日 優(yōu)先權(quán)日2006年2月24日
發(fā)明者埃蘭·斯坦伯格, 彼得·科科倫, 彼得羅內(nèi)爾·比焦伊 申請人:快圖影像有限公司