專利名稱：圖像處理設(shè)備、方法和程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像處理設(shè)備、方法和程序，具體來講涉及一種能容易地檢測(cè)匹配那些鄰近像素的像素的運(yùn)動(dòng)向量的圖像處理設(shè)備、方法和程序。
背景技術(shù)：
陰極射線管(CRT)是典型的已知運(yùn)動(dòng)圖像顯示設(shè)備。目前，除CRT之外使用了越來越多的液晶顯示器(LCD)設(shè)備，如日本未審專利申請(qǐng)公報(bào)2002-219811中所述的。
當(dāng)CRT接收顯示構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的其中一幀的命令時(shí)，它利用內(nèi)嵌的電子槍順序掃描構(gòu)成CRT屏幕的多條水平線(掃描線)以便在屏幕上形成指定幀(在下文中，充當(dāng)顯示命令的目標(biāo)的幀稱為目標(biāo)顯示幀)。
在這種情況下，像時(shí)間方向上的脈沖一樣顯示構(gòu)成目標(biāo)顯示幀的每一個(gè)像素。換句話說，每個(gè)像素僅僅在其被掃描電子槍擊中之時(shí)被激活。在下文中，總起來說把與CRT采用相同顯示方法的顯示設(shè)備稱為脈沖顯示設(shè)備。
相反，當(dāng)LCD設(shè)備將要在屏幕上顯示構(gòu)成運(yùn)動(dòng)圖像的幀的其中一幀(目標(biāo)顯示幀)時(shí)，從發(fā)出顯示目標(biāo)幀的命令時(shí)起直到發(fā)出顯示后續(xù)幀的命令為止，它都維持構(gòu)成屏幕的所有液晶區(qū)域的照明。
假定每個(gè)像素都對(duì)應(yīng)于一個(gè)液晶區(qū)域。在這種情況下，幀顯示命令使構(gòu)成目標(biāo)顯示幀的每個(gè)像素的像素值將被傳送給LCD設(shè)備。所述LCD設(shè)備向構(gòu)成屏幕的相應(yīng)的液晶區(qū)域(像素)施加代表指定像素值的電平的電壓。其結(jié)果是，每個(gè)液晶區(qū)域都根據(jù)所施加的電壓來輸出光。簡而言之，輸出自液晶區(qū)域的光的能級(jí)(level)對(duì)應(yīng)于施加到液晶區(qū)域上的電壓的電平。
此后，至少直到發(fā)出顯示后續(xù)幀的命令為止，連續(xù)地將指定電壓電平施加于液晶區(qū)域，從而不斷地輸出光的相應(yīng)能級(jí)。換句話說，液晶區(qū)域繼續(xù)以指定的像素值來顯示像素。
當(dāng)由于發(fā)出顯示后續(xù)幀的命令而需要改變一些像素的像素值時(shí)，將與改變后的像素值相對(duì)應(yīng)的電平的電壓施加到與相關(guān)像素相對(duì)應(yīng)的液晶區(qū)域上(即，改變施加于相關(guān)液晶區(qū)域的電壓電平)，由此液晶區(qū)域的輸出電平(光的能級(jí))也改變。
如上所述，LCD設(shè)備采用了不同于諸如CRT之類的脈沖顯示設(shè)備所采用的顯示方法，并且與脈沖顯示設(shè)備相比具備幾個(gè)優(yōu)點(diǎn)，比如小安裝空間、低功耗和對(duì)于失真而言的高電阻。
然而，LCD設(shè)備有第一個(gè)問題，當(dāng)顯示運(yùn)動(dòng)圖像時(shí)，它們要比脈沖顯示設(shè)備更頻繁地發(fā)生運(yùn)動(dòng)混亂(motion blurring)。
人們已經(jīng)相信這第一個(gè)問題的發(fā)生，即在LCD設(shè)備中運(yùn)動(dòng)混亂的發(fā)生是由于液晶的低響應(yīng)速度造成的。更具體而言，人們已經(jīng)相信因?yàn)槊總€(gè)液晶區(qū)域的輸出電平都需要很長時(shí)間到達(dá)指定的目標(biāo)電平(例如，如果每個(gè)液晶區(qū)域都對(duì)應(yīng)于一個(gè)像素的話，則它是與指定像素值相對(duì)應(yīng)的電平)，因此LCD設(shè)備經(jīng)受運(yùn)動(dòng)混亂。
為了克服這第一個(gè)問題，即為了防止在LCD設(shè)備中發(fā)生運(yùn)動(dòng)混亂，日本未審專利申請(qǐng)公報(bào)2002-219811描述了下列方法。根據(jù)日本未審專利申請(qǐng)公報(bào)2002-219811中所述的方法，將比目標(biāo)電平更高的電平的電壓施加到每個(gè)液晶區(qū)域(像素)上。在下文中，這個(gè)方法稱為過激勵(lì)法(overdrive method)。換句話說，過激勵(lì)法采用了比常規(guī)方法所采用的目標(biāo)電平更高的電平。在這種意義上講，過激勵(lì)法是一種用來校正目標(biāo)電平的方法。
令人遺憾的是，這種過激勵(lì)法無法阻止運(yùn)動(dòng)混亂的發(fā)生。因此，由于沒有一種有效的方法可用來防止LCD設(shè)備中的運(yùn)動(dòng)混亂的發(fā)生，所以這第一個(gè)問題仍未解決。
鑒于這些情況，本發(fā)明的申請(qǐng)人已經(jīng)研究了已知的過激勵(lì)法不能克服第一個(gè)問題的原因，也就是無法防止LCD設(shè)備中的運(yùn)動(dòng)混亂發(fā)生的原因。根據(jù)這一研究的結(jié)果，本發(fā)明的申請(qǐng)人已經(jīng)成功地發(fā)明出了一種能解決第一個(gè)問題的圖像處理設(shè)備。本發(fā)明的申請(qǐng)人已提交了本發(fā)明(日本專利申請(qǐng)2003-270965)。
如上所述，其中一個(gè)導(dǎo)致LCD設(shè)備中的運(yùn)動(dòng)混亂的原因就是液晶(像素)的低響應(yīng)速度，并且該過激勵(lì)法將這種低響應(yīng)速度考慮在內(nèi)。
然而，LCD設(shè)備中運(yùn)動(dòng)混亂的發(fā)生不僅是由于液晶的低響應(yīng)速度造成的，而且還是由于與人類視覺(LCD設(shè)備的觀察者)相關(guān)聯(lián)的特征造成的，這種特征稱為″隨動(dòng)觀看″。本發(fā)明的申請(qǐng)人已經(jīng)發(fā)現(xiàn)已知的過激勵(lì)法無法防止運(yùn)動(dòng)混亂，因?yàn)樗鼪]有考慮這種隨動(dòng)觀看。術(shù)語″隨動(dòng)觀看(follow-up seeing)″表明一種生體反應(yīng)，其特征在于人類會(huì)無意地用他們的眼睛跟隨運(yùn)動(dòng)物體。它也稱為″視網(wǎng)膜上的余象″。
換言之，本發(fā)明的申請(qǐng)人已經(jīng)得出這樣的結(jié)論其中校正用來顯示運(yùn)動(dòng)物體的所有像素(所有液晶區(qū)域的電壓電平)的像素值的已知過激勵(lì)法，也就是僅僅提高液晶區(qū)域輸出電平的時(shí)間響應(yīng)，無法消除因與人類視覺相關(guān)的隨動(dòng)觀看這一特征而造成的運(yùn)動(dòng)混亂。
鑒于這個(gè)問題，如上所述，本發(fā)明的申請(qǐng)人已經(jīng)發(fā)明出了一種用于執(zhí)行圖像處理的圖像處理設(shè)備，所述圖像處理不僅考慮了液晶的低響應(yīng)而且也考慮了隨動(dòng)觀看的特征。
更具體而言，如果在運(yùn)動(dòng)物體的邊沿存在感興趣像素，則由本發(fā)明的申請(qǐng)人發(fā)明的一種圖像處理設(shè)備就根據(jù)感興趣像素的運(yùn)動(dòng)向量(方向和數(shù)值)、從構(gòu)成目標(biāo)顯示幀的像素(在下文中，稱為感興趣像素)之中，通過校正待處理的像素的像素值，來防止因隨動(dòng)觀看而造成的運(yùn)動(dòng)混亂的發(fā)生。
然而，在這種情況下，就出現(xiàn)了第二個(gè)問題如果感興趣像素的運(yùn)動(dòng)向量不匹配鄰近感興趣像素的像素的運(yùn)動(dòng)向量(即，如果匹配周圍的運(yùn)動(dòng)向量未被使用)，那么所得到的校正圖像(目標(biāo)顯示幀)上的感興趣像素的像素值(校正值)就不匹配其鄰近像素的像素值(校正值)。換言之，可以將第二個(gè)問題重新陳述為所得到的校正圖像上的感興趣像素與其鄰近像素失配，這導(dǎo)致圖像質(zhì)量降低。
盡管已將第一個(gè)和第二問題描繪成與LCD設(shè)備有關(guān)，但是它們一般而言牽涉到任何具有下列特征的顯示設(shè)備以及LCD設(shè)備。更詳細(xì)來講，出現(xiàn)第一個(gè)和第二個(gè)問題的顯示設(shè)備的特征在于它們具有多個(gè)這樣的顯示元素從指定目標(biāo)電平時(shí)起到輸出電平到達(dá)目標(biāo)電平需要一段預(yù)定的時(shí)間，而且每個(gè)顯示元素都與構(gòu)成幀或場的至少一些像素相關(guān)聯(lián)。
具有這類特征的許多顯示設(shè)備都采用這樣一種顯示方法，在所述方法中在指定了預(yù)定幀或場的顯示之后將構(gòu)成屏幕的至少一些顯示元素的照明維持預(yù)定的一段時(shí)間(例如，維持一段時(shí)間直到指定了后續(xù)幀或場的顯示)。在下文中，采用這種顯示方法的顯示設(shè)備，比如LCD設(shè)備，統(tǒng)稱為持續(xù)型顯示設(shè)備。此外，具有構(gòu)成持續(xù)型顯示設(shè)備的屏幕的顯示元素(LCD設(shè)備的液晶)的顯示器稱為持續(xù)顯示器。因此，可以把第一個(gè)問題和第二個(gè)問題視作為與持續(xù)型顯示設(shè)備相關(guān)的問題。

發(fā)明內(nèi)容
本發(fā)明是考慮到上述情況而提出的，并且意在用來容易地檢測(cè)匹配那些鄰近像素的像素的運(yùn)動(dòng)向量。
根據(jù)本發(fā)明的第一種圖像處理設(shè)備，包括候選者生成裝置，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素，并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定裝置，用于從感興趣像素上的候選運(yùn)動(dòng)向量和候選者生成裝置所生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中，將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；亮度改變計(jì)算裝置，用于計(jì)算在感興趣像素周圍的亮度變化的程度；和校正裝置，用于根據(jù)亮度改變計(jì)算裝置和候選者生成裝置進(jìn)行處理的結(jié)果來估計(jì)運(yùn)動(dòng)向量確定裝置所確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定置信級(jí)低則校正該運(yùn)動(dòng)向量。
如果亮度改變計(jì)算裝置所計(jì)算出的亮度變化的程度低于閾值，則校正裝置就判定運(yùn)動(dòng)向量的置信級(jí)低，并且校正該運(yùn)動(dòng)向量。
所述候選者生成裝置檢測(cè)出第一訪問單元上的第一個(gè)像素以作為第二訪問單元上的第二個(gè)像素的對(duì)應(yīng)像素，所述第二個(gè)像素被設(shè)置在與感興趣像素的位置相對(duì)應(yīng)的位置上，并且生成從感興趣像素開始并在第一個(gè)像素上終止的向量作為感興趣像素上的候選運(yùn)動(dòng)向量。
如果判定第一訪問單元包括對(duì)于對(duì)應(yīng)像素來講的多個(gè)候選者或者作為對(duì)應(yīng)像素的第一個(gè)像素的置信級(jí)低，則候選者生成裝置就給校正裝置提供表示校正該運(yùn)動(dòng)向量的命令的第一信息。此外，如果校正裝置從候選者生成裝置那里接收第一信息，則校正裝置就判定運(yùn)動(dòng)向量的置信級(jí)低并且校正該運(yùn)動(dòng)向量。
如果感興趣像素被包含在用于對(duì)應(yīng)像素的多個(gè)候選者中，則候選者生成裝置給校正裝置提供表示感興趣像素被包含在對(duì)于對(duì)應(yīng)像素來講的多個(gè)候選者中的第二信息；并且如果校正裝置從候選者生成裝置那里接收第二信息，則校正裝置就可以判定運(yùn)動(dòng)向量的置信級(jí)低并且將該運(yùn)動(dòng)向量校正為0向量。
根據(jù)本發(fā)明的第一種圖像處理方法，包括候選者生成步驟，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素，并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；亮度改變計(jì)算步驟，用于計(jì)算在感興趣像素周圍的亮度變化的程度；以及校正步驟，用于根據(jù)在亮度改變計(jì)算步驟和候選者生成步驟中進(jìn)行處理的結(jié)果來估計(jì)運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定置信級(jí)低則校正該運(yùn)動(dòng)向量。
根據(jù)本發(fā)明的第一種計(jì)算機(jī)可執(zhí)行程序從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素并且將圖像處理施加到該感興趣像素。所述程序包括候選者生成步驟，用于將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中，將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；亮度改變計(jì)算步驟，用于計(jì)算在感興趣像素周圍的亮度變化的程度；校正步驟，用于根據(jù)在亮度改變計(jì)算步驟和候選者生成步驟中進(jìn)行處理的結(jié)果來估計(jì)在運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定置信級(jí)低則校正該運(yùn)動(dòng)向量。
根據(jù)第一種圖像處理設(shè)備、第一種圖像處理方法和第一種計(jì)算機(jī)可執(zhí)行程序，從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素，并且將圖像處理施加到感興趣像素。更具體而言，將第一訪問單元與第一訪問單元前的第二訪問單元相比較，以生成感興趣像素上的候選運(yùn)動(dòng)向量。除感興趣像素上的候選運(yùn)動(dòng)向量之外，還生成鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量。將這些候選運(yùn)動(dòng)向量之中具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量。根據(jù)在感興趣像素周圍的亮度變化的程度和生成運(yùn)動(dòng)向量的處理結(jié)果來估計(jì)所確定的運(yùn)動(dòng)向量的置信級(jí)。如果判定置信級(jí)為低的話，則校正該運(yùn)動(dòng)向量。
根據(jù)本發(fā)明的第二種圖像處理設(shè)備，包括候選者生成裝置，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素，并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定裝置，用于從感興趣像素上的候選運(yùn)動(dòng)向量和候選者生成裝置所生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；校正裝置，用于校正運(yùn)動(dòng)向量確定裝置所確定的運(yùn)動(dòng)向量；和處理執(zhí)行裝置，用于利用校正裝置所校正的運(yùn)動(dòng)向量來執(zhí)行預(yù)定處理。所述校正裝置根據(jù)處理執(zhí)行裝置進(jìn)行的預(yù)定處理的特征來按第一種方法校正該運(yùn)動(dòng)向量。
所述圖像處理設(shè)備可以進(jìn)一步包括亮度改變計(jì)算裝置，用于計(jì)算在感興趣像素周圍的亮度變化的程度。所述校正裝置根據(jù)亮度改變計(jì)算裝置和候選者生成裝置進(jìn)行處理的結(jié)果來估計(jì)運(yùn)動(dòng)向量確定裝置所確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定運(yùn)動(dòng)向量的置信級(jí)低，則校正裝置進(jìn)一步按第二種方法來校正按第一種方法所校正的運(yùn)動(dòng)向量。
根據(jù)本發(fā)明的第二種圖像處理方法是由信息處理設(shè)備來執(zhí)行的。所述方法包括候選者生成步驟，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素，并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中，將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；校正步驟，用于校正在運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量；以及處理控制步驟，用于控制信息處理設(shè)備利用在校正步驟中校正的運(yùn)動(dòng)向量來執(zhí)行預(yù)定處理。在校正步驟中，根據(jù)在處理控制步驟中由圖像處理設(shè)備進(jìn)行的預(yù)定處理的特征來按第一校正方法校正該運(yùn)動(dòng)向量。
根據(jù)本發(fā)明的第二種計(jì)算機(jī)可執(zhí)行程序控制處理執(zhí)行設(shè)備，該處理執(zhí)行設(shè)備用于將預(yù)定處理施加到構(gòu)成運(yùn)動(dòng)圖像的多個(gè)訪問單元的其中預(yù)定的一個(gè)，其中所述預(yù)定處理使用預(yù)定訪問單元上的每一個(gè)像素處的運(yùn)動(dòng)向量。所述程序包括候選者生成步驟，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素，并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中，將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；校正步驟，用于校正在運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量；以及處理控制步驟，用于控制處理執(zhí)行設(shè)備利用在校正步驟中校正的運(yùn)動(dòng)向量來執(zhí)行預(yù)定處理。在校正步驟中，根據(jù)在處理控制步驟中由處理執(zhí)行設(shè)備進(jìn)行的預(yù)定處理的特征來按第一校正方法校正該運(yùn)動(dòng)向量。
根據(jù)第二種圖像處理設(shè)備、第二種圖像處理方法和第二種計(jì)算機(jī)可執(zhí)行程序，將構(gòu)成第一訪問單元的像素之中的預(yù)定像素設(shè)置為感興趣像素，并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以生成感興趣像素上的候選運(yùn)動(dòng)向量。將在感興趣像素上的候選運(yùn)動(dòng)向量和鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量。校正所確定的運(yùn)動(dòng)向量，并且利用校正后的運(yùn)動(dòng)向量來執(zhí)行預(yù)定處理。在那時(shí)，根據(jù)預(yù)定處理的特征按照第一種方法來校正該運(yùn)動(dòng)向量。
如上所述，根據(jù)本發(fā)明，能夠檢測(cè)出感興趣像素的運(yùn)動(dòng)向量以供進(jìn)行防止在諸如LCD設(shè)備之類的持續(xù)型顯示設(shè)備中發(fā)生運(yùn)動(dòng)混亂(具體來講，因人類視覺的隨動(dòng)觀看而造成的運(yùn)動(dòng)混亂)的圖像處理。具體來講，可以容易地檢測(cè)出匹配那些鄰近像素的運(yùn)動(dòng)向量的像素的運(yùn)動(dòng)向量。


圖1是描繪根據(jù)一個(gè)實(shí)施例的圖像處理設(shè)備的示例性結(jié)構(gòu)的框圖；圖2是描繪圖1中所示的圖像處理設(shè)備的運(yùn)動(dòng)檢測(cè)部分的詳細(xì)示例性結(jié)構(gòu)的框圖；圖3是舉例說明將由圖2中的亮度梯度檢測(cè)部分處理的像素的示例的圖；圖4是示出圖2中的運(yùn)動(dòng)檢測(cè)部分的模板匹配部分的詳細(xì)示例性結(jié)構(gòu)的框圖；圖5是舉例說明將由圖4中的模板匹配部分處理的像素的示例的圖；圖6是示出目標(biāo)顯示幀上的鄰居感興趣像素的每一個(gè)像素的像素值和先前幀上的每個(gè)對(duì)應(yīng)像素的像素值的示例的圖；圖7是描繪圖4中的SAD計(jì)算部分的計(jì)算結(jié)果的示例的圖；圖8是舉例說明由圖4中的模板匹配部分用來進(jìn)行處理的值的圖；圖9是示出目標(biāo)顯示幀上的鄰近感興趣像素的每一個(gè)像素的像素值和先前幀上的每個(gè)對(duì)應(yīng)像素的像素值的另一個(gè)示例(不同于圖6中的示例)的圖；圖10是描繪圖4中的SAD計(jì)算部分的計(jì)算結(jié)果的另一個(gè)示例(不同于圖7中的示例)的圖；圖11是示出將由圖2中的直方圖部分處理的像素的圖；圖12是描繪直方圖的示例的圖；
圖13是示出圖2中的運(yùn)動(dòng)檢測(cè)部分的運(yùn)動(dòng)向量校正部分的詳細(xì)示例性結(jié)構(gòu)的框圖；圖14是描繪將由圖13中的運(yùn)動(dòng)檢測(cè)部分的下游處理校正部分考慮的、用于校正處理的下游處理的示例的圖；圖15是描繪圖13中的運(yùn)動(dòng)檢測(cè)部分的下游處理校正部分的、用于執(zhí)行適合于圖14中的下游處理的特征的校正的校正方法的示例的圖；圖16是描繪圖13中的運(yùn)動(dòng)檢測(cè)部分的下游處理校正部分的校正方法的另一個(gè)示例的圖；圖17是描繪用于舉例說明圖4中的模板匹配部分的另一個(gè)實(shí)施例的SAD的結(jié)果的圖；圖18是示出圖2中的運(yùn)動(dòng)檢測(cè)部分的運(yùn)動(dòng)向量校正部分的詳細(xì)結(jié)構(gòu)的另一個(gè)示例的框圖；圖19是示出圖2中的運(yùn)動(dòng)檢測(cè)部分的運(yùn)動(dòng)向量校正部分的詳細(xì)結(jié)構(gòu)的又一個(gè)示例的框圖；圖20是舉例說明由圖1中的圖像處理設(shè)備進(jìn)行的圖像處理的流程圖；圖21是舉例說明圖20中的運(yùn)動(dòng)向量計(jì)算處理的流程圖；圖22是描繪根據(jù)另一個(gè)實(shí)施例的圖像處理設(shè)備的示例性結(jié)構(gòu)(不同于圖1中的示例)的框圖；和圖23是描繪根據(jù)又一個(gè)實(shí)施例的圖像處理設(shè)備的示例性結(jié)構(gòu)(不同于圖1和22中的那些示例性結(jié)構(gòu))的框圖。
具體實(shí)施例方式
在描述根據(jù)本發(fā)明的實(shí)施例之前，將給出權(quán)利要求中所描述的主題的元件與下面以實(shí)施例形式描述的組件之間的關(guān)系。以實(shí)施例的形式描述的一些示例可以隱含地對(duì)應(yīng)于權(quán)利要求中所述的元件。換言之，如下所述的一些示例可以不必具有權(quán)利要求中所述的明確的對(duì)應(yīng)元件。相反，明確與權(quán)利要求中的元件相對(duì)應(yīng)的如下所述的一些示例可以對(duì)應(yīng)于除那些明確對(duì)應(yīng)的元件以外的其它元件。
并非如下所述的所有示例都能作為發(fā)明在權(quán)利要求中反映出來。換言之，如下所述的一些示例可以建議不包含在權(quán)利要求中的發(fā)明，例如以分案申請(qǐng)的形式提交的發(fā)明或通過修改所增加的發(fā)明。
根據(jù)本發(fā)明，提供了一種第一圖像處理設(shè)備。所述第一種圖像處理設(shè)備(例如，圖1中的圖像處理設(shè)備1的運(yùn)動(dòng)檢測(cè)部分14，圖2中所示的運(yùn)動(dòng)檢測(cè)部分14的詳細(xì)示例性結(jié)構(gòu))包括候選者生成裝置(例如，圖2中的模板匹配部分34)，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定裝置(例如，圖2中的直方圖部分35)，用于從感興趣像素上的候選運(yùn)動(dòng)向量和由候選者生成裝置生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量(例如，圖11中區(qū)域95中的像素的值)之中將具有最高頻率(例如，在圖12中所示的直方圖中具有最高頻率的″+4″)的候選運(yùn)動(dòng)向量判定為感興趣像素上的運(yùn)動(dòng)向量；亮度改變計(jì)算裝置(例如，圖2中的亮度梯度檢測(cè)部分33)，用于計(jì)算在感興趣像素周圍的亮度變化的程度(例如，稍后描述的亮度梯度，更具體而言就是稍后描述的等式(2)中的″slope″)；和校正裝置(例如，圖2中的運(yùn)動(dòng)向量校正部分36圖13中的運(yùn)動(dòng)向量校正部分36A或圖19中的運(yùn)動(dòng)向量校正部分36C)，用于根據(jù)亮度改變計(jì)算裝置和候選者生成裝置處理的結(jié)果來估計(jì)運(yùn)動(dòng)向量確定裝置所判定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定置信級(jí)低(例如，如果下列兩種條件的其中之一被滿足，即要求建立下面示出的不等式(9)的第三個(gè)條件和要求圖2中的模板匹配部分34所提供的控制信號(hào)″flag為″1″的第四個(gè)條件)，則校正該運(yùn)動(dòng)向量。
如果亮度改變計(jì)算裝置所計(jì)算出的亮度改變的程度低于閾值(例如，滿足要求建立下面示出的不等式(9)的第三個(gè)條件)，所述校正裝置可以判定運(yùn)動(dòng)向量的置信級(jí)低并且校正該運(yùn)動(dòng)向量。
候選者生成裝置可以檢測(cè)出第一訪問單元上的第一個(gè)像素(例如，圖5中的搜索范圍i-6到i+6內(nèi)的任何像素)以作為第二訪問單元上的第二個(gè)像素的對(duì)應(yīng)像素(例如，圖5中的像素71)，所述第二個(gè)像素被設(shè)置在與感興趣像素(例如，圖5中的感興趣像素51)的位置相對(duì)應(yīng)的位置(例如，圖5中的位置i)上，并且生成從感興趣像素開始并在第一個(gè)像素上終止的向量(例如″+6″，如果圖5中的比較區(qū)域73-(+6)中的中心像素，即位置i+6上的像素被檢測(cè)為第一個(gè)像素)以作為感興趣像素上的候選運(yùn)動(dòng)向量。
如果判定第一訪問單元包括用于對(duì)應(yīng)像素的多個(gè)候選者(例如，如果搜索位置i+5上的像素和搜索位置i-1上的像素都是如圖9所示的候選對(duì)應(yīng)像素，更具體而言，如果滿足要求建立下面示出的從不等式(5)到不等式(7)所有不等式的第一條件；參照?qǐng)D10，對(duì)照不等式(5)到不等式(7)的參數(shù))或者作為對(duì)應(yīng)像素的第一個(gè)像素的置信級(jí)低(例如，如果滿足要求建立下面示出的不等式(8)的第二個(gè)條件；參照?qǐng)D10，對(duì)照不等式(8)的min1)，那么所述候選者生成裝置可以給校正裝置提供表示用于校正該運(yùn)動(dòng)向量的命令的第一信息(如稍后描述的那樣，控制信號(hào)″flag″等于″1″)。此外，如果校正裝置從候選者生成裝置中接收第一信息(如果滿足要求圖2中的模板匹配部分34所提供的控制信號(hào)″flag″為″1″的第四個(gè)條件)，所述校正裝置可以判定運(yùn)動(dòng)向量的置信級(jí)低并且校正該運(yùn)動(dòng)向量。
如果感興趣像素被包含在對(duì)應(yīng)像素的多個(gè)候選者中(例如，如圖17所示，如果與第二最小的SAD(即最小值min2)相對(duì)應(yīng)的搜索位置pos2是感興趣像素的位置i)，候選者生成裝置可以給校正裝置提供表示感興趣像素被包含在對(duì)應(yīng)像素的多個(gè)候選者中的第二信息，并且如果校正裝置從候選者生成裝置中接收第二信息(如果滿足稍后所述的第五個(gè)條件)，那么所述校正裝置可以判定運(yùn)動(dòng)向量的置信級(jí)低并且將該運(yùn)動(dòng)向量校正為0向量。
根據(jù)本發(fā)明，提供了一種第一圖像處理方法。所述第一圖像處理方法(例如，圖2中的運(yùn)動(dòng)檢測(cè)部分14所進(jìn)行的圖像處理方法)包括候選者生成步驟(例如，圖21中的步驟S22中的處理)，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素，并且將第一訪問單元和第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟(例如，圖21中的步驟S24中的處理)，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的中鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；亮度改變計(jì)算步驟(例如，圖21中的步驟S21中的處理)，用于計(jì)算在感興趣像素周圍的亮度變化的程度；以及校正步驟(例如，圖21中的步驟26-28中的處理)，用于根據(jù)亮度改變計(jì)算步驟和候選者生成步驟中的處理結(jié)果(例如，圖21中的步驟21和23中的處理結(jié)果)來估計(jì)在運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定置信級(jí)低則校正該運(yùn)動(dòng)向量。
根據(jù)本發(fā)明，提供了第一計(jì)算機(jī)可執(zhí)行程序。所述第一程序從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素并且令計(jì)算機(jī)(例如，圖23中的CPU 201)向感興趣像素施加圖像處理。所述程序包括候選者生成步驟(例如，圖21中的步驟S22中的處理)，用于將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟(例如，圖21中的步驟S24中的處理)，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；亮度改變計(jì)算步驟(例如，圖21中的步驟S21中的處理)，用于計(jì)算在感興趣像素周圍的亮度變化的程度；以及校正步驟(例如，圖21中的步驟26-28中的處理)，用于根據(jù)亮度改變計(jì)算步驟和候選者生成步驟中的處理結(jié)果(例如，圖21中的步驟21和23中的處理結(jié)果)來估計(jì)在運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定置信級(jí)低則校正該運(yùn)動(dòng)向量。
根據(jù)本發(fā)明，提供了一種第二圖像處理設(shè)備。所述第二圖像處理設(shè)備(例如，圖1中的圖像處理設(shè)備1的運(yùn)動(dòng)檢測(cè)部分14和圖像處理部分12，圖2中所示的運(yùn)動(dòng)檢測(cè)部分14的詳細(xì)示例性結(jié)構(gòu))包括候選者生成裝置(例如，圖2中的模板匹配部分34)，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素，并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定裝置(例如，圖2中的直方圖部分35)，用于從感興趣像素上的候選運(yùn)動(dòng)向量和選者生成裝置所生成的鄰近候感興趣像素的像素上的候選運(yùn)動(dòng)向量之中，將具有最高頻率候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；校正裝置(例如，圖2中的運(yùn)動(dòng)向量校正部分36圖13中的運(yùn)動(dòng)向量校正部分36A或圖18中的運(yùn)動(dòng)向量校正部分36B)，用于校正運(yùn)動(dòng)向量確定裝置所確定的運(yùn)動(dòng)向量；和處理執(zhí)行裝置(例如，圖1中的圖像處理部分12的校正部分22)，用于利用校正裝置所校正的運(yùn)動(dòng)向量來執(zhí)行預(yù)定處理。所述校正裝置根據(jù)處理執(zhí)行裝置所進(jìn)行的預(yù)定處理的特征、按第一種方法(例如，圖15或16中所示的方法)校正該運(yùn)動(dòng)向量(例如，利用圖13或18中的下游處理校正部分101)。
所述圖像處理設(shè)備可以進(jìn)一步包括亮度改變計(jì)算裝置(例如，圖2中的亮度梯度檢測(cè)部分33)，用于計(jì)算在感興趣像素周圍的亮度變化的程度。所述校正裝置可以根據(jù)亮度改變計(jì)算裝置和候選者生成裝置的處理結(jié)果來估計(jì)運(yùn)動(dòng)向量確定裝置(例如，利用圖13中的置信級(jí)估計(jì)部分103)所確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定運(yùn)動(dòng)向量的置信級(jí)低的話，那么所述校正裝置就可以按第二種方法(例如，在下面示出的等式(10)中定義的方法)來進(jìn)一步校正(例如，利用圖13中的置信級(jí)校正部分104)按第一種方法所校正的運(yùn)動(dòng)向量。
根據(jù)本發(fā)明，提供了一種第二圖像處理方法。所述第二圖像處理方法是通過信息處理設(shè)備(例如，圖1中的圖像處理設(shè)備1)來執(zhí)行的。所述方法包括候選者生成步驟(例如，圖21中的步驟S22中的處理)，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素，并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟(例如，圖21中的步驟S24中的處理)，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中，將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；校正步驟(例如，圖21中的步驟25至28中的處理)，用于校正在運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量；以及處理控制步驟(例如，在圖20中的步驟S3的運(yùn)動(dòng)向量計(jì)算之后的在步驟S7中的處理)，用于控制信息處理設(shè)備利用在校正步驟中校正的運(yùn)動(dòng)向量來執(zhí)行預(yù)定處理。在校正步驟中，根據(jù)在處理控制步驟中由圖像處理設(shè)備進(jìn)行的預(yù)定處理的特征、按校正方法來校正該運(yùn)動(dòng)向量(例如，圖21中的處理步驟S25)。
根據(jù)本發(fā)明，提供了第二計(jì)算機(jī)可執(zhí)行程序。所述第二程序是通過用于控制處理執(zhí)行設(shè)備(例如，圖1中的圖像處理設(shè)備1)的計(jì)算機(jī)(例如，圖23中CPU 201)執(zhí)行的，所述處理執(zhí)行設(shè)備用于將預(yù)定處理施加于構(gòu)成運(yùn)動(dòng)圖像的多個(gè)訪問單元的其中預(yù)定的一個(gè)，其中所述預(yù)定處理在預(yù)定訪問單元上使用每一個(gè)像素上的運(yùn)動(dòng)向量。所述程序包括候選者生成步驟(例如，圖21中的步驟S22中的處理)，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素，并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較，以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟(例如，圖21中的步驟S24中的處理)，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中，將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；校正步驟(例如，圖21中的步驟25至28中的處理)，用于校正在運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量；以及處理控制步驟(例如，在圖20中的步驟S3中的運(yùn)動(dòng)向量計(jì)算之后的在步驟S7中的處理)，用于控制處理執(zhí)行設(shè)備利用在校正步驟中所校正的運(yùn)動(dòng)向量來執(zhí)行預(yù)定的處理。在校正步驟中，根據(jù)在處理控制步驟中由處理執(zhí)行設(shè)備進(jìn)行的預(yù)定處理的特征、按校正方法來校正該運(yùn)動(dòng)向量(例如，圖21中的處理步驟S25)。
現(xiàn)在，將參照附圖來描述應(yīng)用本發(fā)明的圖像處理設(shè)備。
圖1描繪了應(yīng)用本發(fā)明的圖像處理設(shè)備1的示例性結(jié)構(gòu)。
參照?qǐng)D1，所述圖像處理設(shè)備1控制持續(xù)型顯示設(shè)備2上的運(yùn)動(dòng)圖像的顯示，所述持續(xù)型顯示設(shè)備例如可以是LCD設(shè)備。更具體而言，所述圖像處理設(shè)備1發(fā)出依次顯示構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的每一幀的命令。其結(jié)果是，如上所述，持續(xù)型顯示設(shè)備2令每一個(gè)顯示元素(在圖中未示出)在顯示已經(jīng)指定的第一幀后的預(yù)定時(shí)間內(nèi)顯示構(gòu)成第一幀的多個(gè)像素的對(duì)應(yīng)像素并且保持(持續(xù))至少一些顯示元素的顯示。簡而言之，至少一些顯示元素被持續(xù)顯示了預(yù)定的一段時(shí)間。
盡管為了簡化說明，根據(jù)如上所述的這個(gè)實(shí)施例圖像處理設(shè)備1以幀為單位處理(顯示)運(yùn)動(dòng)圖像，但是也可以以場為單位來處理或顯示運(yùn)動(dòng)圖像。換言之，所述圖像處理設(shè)備1能夠在訪問單元中執(zhí)行圖像處理，其中將所述訪問單元定義為用于圖像處理的單元，在目前的技術(shù)規(guī)范中，比如是幀和場。在下面的說明中，將圖像處理設(shè)備1所采用的訪問單元擬定為幀。
此外，還假定持續(xù)型顯示設(shè)備2令每一個(gè)顯示元素都在從指定第一幀的顯示起到指定后續(xù)的第二幀的顯示止的預(yù)定時(shí)間內(nèi)顯示構(gòu)成第一幀的多個(gè)像素的對(duì)應(yīng)像素，并且保持(持續(xù))至少一些顯示元素的顯示(持續(xù)顯示所述顯示元素)。
更詳細(xì)地說，所述圖像處理設(shè)備1依次地接收構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀的圖像數(shù)據(jù)。換言之，所述圖像處理設(shè)備1接收目標(biāo)顯示幀的圖像數(shù)據(jù)(例如，構(gòu)成目標(biāo)顯示幀的所有像素的像素值)。更具體而言，將目標(biāo)顯示幀的圖像數(shù)據(jù)輸入到圖像處理部分11、圖像處理部分12、參考圖像存儲(chǔ)部分13和運(yùn)動(dòng)檢測(cè)部分14。
所述圖像處理部分11將預(yù)定的圖像處理施加到目標(biāo)顯示幀的圖像數(shù)據(jù)，每次一個(gè)像素，并將已處理的圖像數(shù)據(jù)輸出到切換部分15。更具體而言，所述圖像處理部分11將預(yù)定的圖像處理施加到構(gòu)成目標(biāo)顯示幀的多個(gè)像素的每一個(gè)以便校正這些像素的像素值并且以預(yù)定順序?qū)⑿Ｕ蟮南袼刂狄来屋敵龅角袚Q部分15。
圖像處理部分11所執(zhí)行的圖像處理不限于特定的處理。在圖1的示例中，所述圖像處理部分11接收兩個(gè)信息項(xiàng)從稍后將描述的參考圖像存儲(chǔ)部分13中輸出的參考圖像的圖像數(shù)據(jù)(目標(biāo)顯示幀前的幀，在下文中剛好也稱為先前幀)，以及稍后也將描述的運(yùn)動(dòng)檢測(cè)部分14所提供的檢測(cè)結(jié)果(構(gòu)成目標(biāo)顯示幀的每個(gè)像素的運(yùn)動(dòng)向量)。然后，所述圖像處理部分11可以執(zhí)行任何下列圖像處理其中使用兩個(gè)信息項(xiàng)的圖像處理、其中使用兩個(gè)信息項(xiàng)中之一的圖像處理、和其中不使用兩個(gè)信息項(xiàng)中任何一個(gè)的圖像處理。更具體而言，例如所述圖像處理部分11能夠根據(jù)基于預(yù)定規(guī)則的表(在圖中未示出)來校正構(gòu)成目標(biāo)顯示幀的象素的像素值。
此外，所述圖像處理部分11對(duì)圖像處理設(shè)備1而言不是必不可少的組件，故而能夠省略它。如果是這種情況的話，那么就將目標(biāo)顯示幀的圖像數(shù)據(jù)輸入到圖像處理部分12、參考圖像存儲(chǔ)部分13、運(yùn)動(dòng)檢測(cè)部分14和切換部分15的輸入端(切換部分15的兩個(gè)輸入端中連接于圖像處理設(shè)備11的那個(gè)輸入端)。
從構(gòu)成目標(biāo)顯示幀的圖像數(shù)據(jù)(像素的像素值)之中，所述圖像處理部分12能夠執(zhí)行與運(yùn)動(dòng)物體相對(duì)應(yīng)的像素(例如，這樣的像素，所述像素被運(yùn)動(dòng)檢測(cè)部分14檢測(cè)出的運(yùn)動(dòng)向量具有等于或大于閾值的數(shù)值)的像素值的校正(包括0校正)，并且將校正后的像素值輸出到切換部分15。
所述圖像處理部分12能夠校正目標(biāo)顯示幀上與在任何空間方向上運(yùn)動(dòng)的物體相對(duì)應(yīng)的像素的像素值。在下文中，為了簡化說明起見，將位于目標(biāo)顯示幀左上角的像素定義為參考像素。根據(jù)這一定義，本發(fā)明假定由圖像處理部分12來處理在水平方向上向參考像素右側(cè)(在下文中，稱為空間方向X)運(yùn)動(dòng)的物體或在與空間方向X相反的方向上運(yùn)動(dòng)的物體。因此，盡管根據(jù)本發(fā)明的運(yùn)動(dòng)檢測(cè)部分14所檢測(cè)出的感興趣像素的運(yùn)動(dòng)向量的方向不限于目標(biāo)幀上的特定空間方向，但是下文假定運(yùn)動(dòng)檢測(cè)部分14檢測(cè)那些它們的運(yùn)動(dòng)向量方向與空間方向X相同或與之方向相反的感興趣像素，以使說明書更易理解。
所述圖像處理部分12包括階躍邊沿檢測(cè)部分21和校正部分22。
所述階躍邊沿檢測(cè)部分21根據(jù)運(yùn)動(dòng)檢測(cè)部分14所提供的檢測(cè)結(jié)果(運(yùn)動(dòng)向量)，從目標(biāo)顯示幀的圖像數(shù)據(jù)之中檢測(cè)出與運(yùn)動(dòng)物體的邊沿部分相對(duì)應(yīng)的像素，并向校正部分22提供檢測(cè)出的像素。
更具體而言，所述階躍邊沿檢測(cè)部分21(比方說，將階躍邊沿作為目標(biāo)而捕獲)將目標(biāo)顯示幀的圖像數(shù)據(jù)分解成在空間方向X上排列的階躍邊沿的圖像數(shù)據(jù)項(xiàng)，檢測(cè)出與每個(gè)階躍邊沿中的邊沿部分相對(duì)應(yīng)的像素，并向校正部分22提供檢測(cè)出的像素。
在此，階躍邊沿是成一排連續(xù)排列的不同的兩組像素的集合一組像素具有第一像素值并且在預(yù)定方向(在這個(gè)示例中，空間方向X)上被排列，而另一組像素具有不同于第一像素值的第二像素值并且在相同的方向上被排列。
所述階躍邊沿檢測(cè)部分21計(jì)算感興趣像素的像素值與在預(yù)定方向(在這個(gè)示例中，空間方向X或反方向)上鄰近感興趣像素的像素的像素值之間的差。然后，如果計(jì)算結(jié)果(差值)例如不是0的話，那么階躍邊沿檢測(cè)部分21就將所述感興趣像素確定為與階躍邊沿的邊沿部分相對(duì)應(yīng)的像素。
由于在此主要目的是要抑制運(yùn)動(dòng)混亂，因而它僅僅足以檢測(cè)運(yùn)動(dòng)著的階躍邊沿的邊沿部分。
為此，如果運(yùn)動(dòng)檢測(cè)部分14所提供的感興趣像素的運(yùn)動(dòng)向量的數(shù)值例如等于閾值或更大的話，那么階躍邊沿檢測(cè)部分21就判定包括作為一個(gè)組成部分的感興趣像素的階躍邊沿正在移動(dòng)并且執(zhí)行處理。更具體而言，所述階躍邊沿檢測(cè)部分21計(jì)算感興趣像素的像素值與其鄰近像素的像素值之間的差值(在下文中，剛好稱為差值)，并將該差值和感興趣像素的像素值作為檢測(cè)結(jié)果提供給校正部分22。
相反，如果運(yùn)動(dòng)檢測(cè)部分14所提供的感興趣像素的運(yùn)動(dòng)向量的數(shù)值例如小于閾值，那么階躍邊沿檢測(cè)部分21就判定包括作為一個(gè)組成部分的感興趣像素的階躍邊沿沒有正在移動(dòng)并且取消處理。
如果運(yùn)動(dòng)檢測(cè)部分14所提供的感興趣像素的運(yùn)動(dòng)向量的數(shù)值例如等于閾值或更大(即，包括作為一個(gè)組成部分的感興趣像素的階躍邊沿正在空間方向X上或在相反方向上移動(dòng))，那么校正部分22就執(zhí)行階躍邊沿檢測(cè)部分21所提供的感興趣像素的像素值的校正(包括0校正)。在此時(shí)，所述校正部分22根據(jù)運(yùn)動(dòng)檢測(cè)部分14所提供的感興趣像素的運(yùn)動(dòng)向量(移動(dòng)方向和階躍邊沿的運(yùn)動(dòng)量)和階躍邊沿檢測(cè)部分21所提供的差值(階躍邊沿的高度)來校正感興趣像素的像素值。
更具體地說，例如，如果所提供的差值不是0并且所提供的運(yùn)動(dòng)向量的數(shù)值等于閾值或更大，那么校正部分22就判定感興趣像素是與移動(dòng)著的階躍邊沿的邊沿部分相對(duì)應(yīng)的像素，并且根據(jù)所提供的差值和運(yùn)動(dòng)向量來校正感興趣像素的像素值。
相反，例如，如果所提供的差值是0并且所提供的運(yùn)動(dòng)向量的數(shù)值等于閾值或更大，那么校正部分22就判定感興趣像素是移動(dòng)著的階躍邊沿的其中一個(gè)組成部分，但不是與邊沿部分相對(duì)應(yīng)的像素(即，感興趣像素是除與邊沿部分相對(duì)應(yīng)的像素以外的像素)，并且執(zhí)行感興趣像素的0校正，也就是說不校正感興趣像素。
此外，例如，如果所提供的運(yùn)動(dòng)向量的數(shù)值小于閾值，那么正如在階躍邊沿檢測(cè)部分21中那樣，校正部分22判定包括作為一個(gè)組成部分的感興趣像素的階躍邊沿沒有正在移動(dòng)，并且由此取消處理(取消包括0校正在內(nèi)的校正處理)。
所述校正部分22能夠采用任何像素值的校正方法，只要根據(jù)運(yùn)動(dòng)檢測(cè)部分14所檢測(cè)出的感興趣像素的運(yùn)動(dòng)向量來校正與移動(dòng)著的階躍邊沿的邊沿部分相對(duì)應(yīng)的感興趣像素的像素值即可。更具體而言，所述校正部分22例如能夠采用下列校正方法。
所述校正部分22計(jì)算如下所示的等式(1)的右手側(cè)以獲得左手側(cè)的校正值R，并且通過將計(jì)算出的校正值R加到感興趣像素的像素值上來校正感興趣像素的像素值。
R=Er×e-TV×τ1-e-TV×τ...(1)]]>在等式(1)中，Er表示階躍邊沿檢測(cè)部分21所提供的差值，而V表示運(yùn)動(dòng)檢測(cè)部分14所提供的運(yùn)動(dòng)向量的數(shù)值。等式(1)假定持續(xù)型顯示設(shè)備2的所有顯示元素的時(shí)間響應(yīng)(例如，如果持續(xù)型顯示設(shè)備2是LCD設(shè)備的話，則是指所有液晶區(qū)域)是具有確定的時(shí)間常數(shù)的一階滯后元素，這在等式(1)中用τ來表示。此外，等式(1)中的T表示顯示目標(biāo)顯示幀的時(shí)間(從指定目標(biāo)顯示幀的顯示起到指定后續(xù)幀的顯示止的時(shí)間周期)。在下文中，時(shí)間T稱為幀時(shí)間T。在LCD設(shè)備中，幀時(shí)間T典型情況下為16.6毫秒。
所述參考圖像存儲(chǔ)部分13存儲(chǔ)目標(biāo)顯示幀的圖像數(shù)據(jù)作為后續(xù)幀的參考圖像的圖像數(shù)據(jù)。
更具體而言，如果將新幀的圖像數(shù)據(jù)作為目標(biāo)顯示幀的圖像數(shù)據(jù)加以輸入，那么運(yùn)動(dòng)檢測(cè)部分14(和上述圖像處理部分11)就獲取存儲(chǔ)在參考圖像存儲(chǔ)部分13中的先前幀(作為恰好處于當(dāng)前處理之前的目標(biāo)顯示幀的幀)的圖像數(shù)據(jù)，以供用作對(duì)于當(dāng)前目標(biāo)顯示幀來講的參考圖像的圖像數(shù)據(jù)。然后，所述運(yùn)動(dòng)檢測(cè)部分14將目標(biāo)顯示幀的圖像數(shù)據(jù)與參考圖像的圖像數(shù)據(jù)進(jìn)行比較，以檢測(cè)目標(biāo)顯示幀上的感興趣像素的運(yùn)動(dòng)向量，并且將它提供給圖像處理部分11、圖像處理部分12(階躍邊沿檢測(cè)部分21和校正部分22)和切換部分15。
實(shí)際上，所述運(yùn)動(dòng)檢測(cè)部分14能夠檢測(cè)平行于空間方向X和空間方向Y的二維平面上任何方向的運(yùn)動(dòng)向量。簡而言之，運(yùn)動(dòng)向量的方向可以是這個(gè)二維平面上的任何方向。然而，在這個(gè)示例中，如上所述，假定僅僅檢測(cè)在空間方向X上或在相反方向上移動(dòng)的階躍邊沿，由此運(yùn)動(dòng)檢測(cè)部分14僅僅檢測(cè)那些其運(yùn)動(dòng)向量具有與空間方向X相同的方向或與之相反方向的感興趣像素，以使說明書更易理解。
更具體而言，例如如果從一幀到后續(xù)幀階躍邊沿在空間方向X上移動(dòng)N(N是任何正整數(shù))個(gè)像素，那么運(yùn)動(dòng)檢測(cè)部分14就將″+N″檢測(cè)為階躍邊沿的運(yùn)動(dòng)向量(感興趣像素上的運(yùn)動(dòng)向量，所述感興趣像素是階躍邊沿的一個(gè)組成部分)。在另一方面，如果從一幀到后續(xù)幀階躍邊沿在與空間方向X相反的方向上移動(dòng)N個(gè)像素，那么運(yùn)動(dòng)檢測(cè)部分14就將″-N″檢測(cè)為階躍邊沿的運(yùn)動(dòng)向量。在這個(gè)示例中，如上所述，如果階躍邊沿在空間方向X上移動(dòng)則就用″+″來表示運(yùn)動(dòng)向量的方向，而如果階躍邊沿在與空間方向X相反的方向上移動(dòng)則就用″-″來表示運(yùn)動(dòng)向量的方向。
所述切換部分15根據(jù)運(yùn)動(dòng)檢測(cè)部分14所提供的檢測(cè)結(jié)果(運(yùn)動(dòng)向量)來轉(zhuǎn)換輸入。
更具體而言，如果運(yùn)動(dòng)檢測(cè)部分14所提供的感興趣像素的運(yùn)動(dòng)向量的數(shù)值小于閾值(如果感興趣像素不是移動(dòng)著的階躍邊沿中所包含的像素)，那么切換部分15就將輸入切換到圖像處理部分11并將圖像處理部分11所提供的感興趣像素的數(shù)據(jù)(像素值)提供給顯示控制部分16。
相反如果運(yùn)動(dòng)檢測(cè)部分14所提供的感興趣像素的運(yùn)動(dòng)向量的數(shù)值等于閾值或更大(如果感興趣像素是移動(dòng)著的階躍邊沿中所包含的像素)，那么切換部分15就將輸入切換到圖像處理部分12的校正部分22，并將校正部分22所提供的感興趣像素的數(shù)據(jù)(像素值)提供給顯示控制部分16。
所述顯示控制部分16將構(gòu)成目標(biāo)顯示幀的每個(gè)像素的數(shù)據(jù)(像素值)，也就是由切換部分15依次提供的像素的數(shù)據(jù)(像素值)，轉(zhuǎn)換成預(yù)定信號(hào)格式(表示持續(xù)型顯示設(shè)備2中的相應(yīng)顯示元素的目標(biāo)電平的信號(hào))，然后將它輸出到持續(xù)型顯示設(shè)備2。簡而言之，所述顯示控制部分16執(zhí)行處理以發(fā)出在持續(xù)型顯示設(shè)備2上顯示目標(biāo)顯示幀的命令。
如上所述，根據(jù)這個(gè)實(shí)施例的圖像處理設(shè)備1，根據(jù)運(yùn)動(dòng)檢測(cè)部分14所檢測(cè)出的運(yùn)動(dòng)向量來校正感興趣像素的像素值。在此，應(yīng)當(dāng)指出的是，這個(gè)運(yùn)動(dòng)向量匹配鄰近感興趣像素的其它像素的運(yùn)動(dòng)向量。換言之，為了容易地檢測(cè)匹配那些鄰近像素的像素的運(yùn)動(dòng)向量，也就是為了解決上述第二個(gè)問題，根據(jù)這個(gè)實(shí)施例的運(yùn)動(dòng)檢測(cè)部分14具有如圖2所示的結(jié)構(gòu)?，F(xiàn)在，將參照?qǐng)D2描述根據(jù)這個(gè)實(shí)施例的運(yùn)動(dòng)檢測(cè)部分14的細(xì)節(jié)。
參照?qǐng)D2，根據(jù)這個(gè)實(shí)施例的運(yùn)動(dòng)檢測(cè)部分14包括低通濾波器(在下文中，稱為LPF)31、LPF 32、亮度梯度檢測(cè)部分33、模板匹配部分34、直方圖部分35、運(yùn)動(dòng)向量校正部分36和LPF 37。
經(jīng)由LPF 31將輸入圖像(圖像數(shù)據(jù))，即目標(biāo)顯示幀的圖像數(shù)據(jù)，提供給亮度梯度檢測(cè)部分33和模板匹配部分34。
所述亮度梯度檢測(cè)部分33檢測(cè)目標(biāo)顯示幀上感興趣像素的位置上的亮度梯度。
將術(shù)語″亮度梯度″定義為下列值。假定函數(shù)f(x)接收預(yù)定方向上的坐標(biāo)值(例如，在這個(gè)示例中，是空間方向X上的坐標(biāo)值x)以作為一個(gè)參數(shù)并輸出輸入坐標(biāo)x的亮度(像素值)，將像素在位置i(i是空間方向X上的坐標(biāo)值)上的亮度梯度定義為函數(shù)f(x)在位置i上的一階導(dǎo)數(shù)的絕對(duì)值。簡言之，將位置i上的亮度梯度定義為|f′(x)|。
函數(shù)f(x)本身的生成和函數(shù)f(x)的一階導(dǎo)數(shù)的計(jì)算需要亮度梯度檢測(cè)部分33執(zhí)行計(jì)算集中處理。因此，例如，將下面所示的等式(2)中的值″slope″定義為亮度梯度。簡言之，所述亮度梯度檢測(cè)部分33計(jì)算等式(2)的右手側(cè)以獲得亮度梯度″slope″。其結(jié)果是，所述亮度梯度檢測(cè)部分33能夠容易地(以輕負(fù)載)計(jì)算目標(biāo)顯示幀上的感興趣像素(例如，圖3中所示的像素51)的位置上的亮度梯度″slope″。
slope＝max(|Yi-Yi-1|，|Yi-Yi+1|)...(2)在等式(2)中，Yi表示位于位置i上的感興趣像素51的亮度(像素值)，如圖3所示。Yi-1表示在感興趣像素51左側(cè)的像素52(所述像素52位于在與空間方向X相反方向上鄰近感興趣像素51的位置i-1處)的亮度(像素值)。Yi+1表示在感興趣像素51右邊的像素53(所述像素53位于在空間方向X上鄰近感興趣像素51的位置i+1處)的亮度(像素值)。此外，max(A，B，...，N)表示輸出輸入?yún)?shù)值A(chǔ)到N的最大值的函數(shù)。這個(gè)函數(shù)max()能夠接收任何數(shù)目的參數(shù)(N可以是任何數(shù)。)所述亮度梯度檢測(cè)部分33計(jì)算在感興趣像素51的亮度Yi與左側(cè)的像素52的亮度Yi-1之間的絕對(duì)差(absolute difference)A以及在感興趣像素51的亮度Yi與右側(cè)的像素53的亮度Yi+1之間的絕對(duì)差B。然后，所述亮度梯度檢測(cè)部分33向運(yùn)動(dòng)向量校正部分36提供絕對(duì)差A(yù)或B，即無論哪一個(gè)更大(最大值)，以作為在感興趣像素51的位置上的亮度梯度″slope″。
如上所述，還經(jīng)由LPF 31將目標(biāo)顯示幀的圖像數(shù)據(jù)提供給模板匹配部分34。在此時(shí)，模板匹配部分34進(jìn)一步經(jīng)由LPF 32接收存儲(chǔ)在參考圖像存儲(chǔ)部分13中的先前幀(先前的目標(biāo)顯示幀)的圖像數(shù)據(jù)以作為對(duì)于目標(biāo)顯示幀來講的參考圖像的圖像數(shù)據(jù)。
然后，所述模板匹配部分34從先前的目標(biāo)顯示幀中提取包含至少與感興趣像素的位置相對(duì)應(yīng)的位置的預(yù)定區(qū)域(在下文中，稱為窗口)，當(dāng)前目標(biāo)顯示幀上確定與所提取的窗口匹配的區(qū)域，根據(jù)匹配結(jié)果來確定感興趣像素的候選運(yùn)動(dòng)向量″pvec″，并且最終將它提供給直方圖部分35。
此外，所述模板匹配部分34生成運(yùn)動(dòng)向量校正部分36所使用的控制信號(hào)″flag″，并將它提供給運(yùn)動(dòng)向量校正部分36。稍后將描述控制信號(hào)″flag″的細(xì)節(jié)。
現(xiàn)在，將參照?qǐng)D4到10描述這個(gè)模板匹配部分34的細(xì)節(jié)。
圖4示出了根據(jù)這個(gè)實(shí)施例的模板匹配部分34的詳細(xì)示例性結(jié)構(gòu)。
參照?qǐng)D4，根據(jù)這個(gè)實(shí)施例的模板匹配部分34包括SAD(絕對(duì)差的總和)計(jì)算部分61、SAD最小值檢測(cè)部分62和SAD最小值估計(jì)部分63。
參照?qǐng)D5，所述SAD計(jì)算部分61從先前幀中提取例如由在空間方向X上排列成一排的預(yù)定數(shù)目的像素(在圖5的示例中，是五個(gè)像素)組成的窗口72，以便窗口72具有中心象素71，所述中心像素71置于與目標(biāo)顯示幀上的感興趣像素51的位置i相對(duì)應(yīng)的位置i上(表示上面描述的空間方向X上的坐標(biāo)值)。
此外，所述SAD計(jì)算部分61從目標(biāo)顯示幀中提取下列區(qū)域(稱為比較區(qū)域，與窗口不同)。更具體而言，提取由在空間方向X上排列成一排的預(yù)定數(shù)目的像素(與窗口72的像素?cái)?shù)目相同，在圖5的示例中是五個(gè)像素)組成的比較區(qū)域73-n，以便比較區(qū)域73-n具有中心象素，所述中心像素位于位置i+n(在下文中，稱為搜索位置i+n)上，所述位置i+n是在空間方向X上或在相反方向上離開感興趣像素51的位置i的n(n是預(yù)定范圍內(nèi)的整數(shù)，并且在圖5的示例中是從″-6″到″+6″的整數(shù))個(gè)像素的位置。盡管在圖5的示例中僅僅示出了與搜索位置i-6相對(duì)應(yīng)的比較區(qū)域73-(-6)和與搜索位置i+6相對(duì)應(yīng)的比較區(qū)域73-(+6)，但是按預(yù)定順序連續(xù)地提取總共13個(gè)比較區(qū)域73-n，包括比較73-(-6)和比較區(qū)域73-(+6)。
所述SAD計(jì)算部分61利用預(yù)定的估計(jì)函數(shù)來計(jì)算窗口72與13個(gè)比較區(qū)域73-n(比較區(qū)域73-(-6)到比較區(qū)域73-(+6))中的每一個(gè)之間的相關(guān)性，并且將計(jì)算結(jié)果提供給SAD最小值檢測(cè)部分62。
SAD計(jì)算部分61所使用的估計(jì)函數(shù)不限于特定的函數(shù)。所述SAD計(jì)算部分61能夠使用諸如歸一化相關(guān)函數(shù)和SSD(平方差的總和)函數(shù)之類的函數(shù)。在下面的說明中，假定SAD計(jì)算部分61使用SAD。
簡言之，所述SAD計(jì)算部分61計(jì)算下面所示的等式(3)的右手側(cè)以獲得窗口72與比較區(qū)域73-n中的每一個(gè)之間的相關(guān)值SAD(j)(j是i+n，并且在圖5的示例中是搜索范圍i-6到i+6內(nèi)的任意整數(shù))，并且將所獲得的相關(guān)值提供給SAD最小值檢測(cè)部分62。
SAD(j)=Σk=15|Ckj-Pkj|...(3)]]>如圖5所示，等式(3)中的Ckj表示從在搜索位置j(j＝i+n)處的比較區(qū)域73-n左側(cè)起第k個(gè)像素的亮度(像素值)。類似地，等式(3)中的Pkj表示從在位置i上具有中心像素71的窗口72的左側(cè)起第k個(gè)像素的亮度(像素值)。
更具體而言，如圖6所示，假定在目標(biāo)顯示幀上的空間方向X上的亮度(像素值)的變化是用曲線81來描繪的，而在先前幀上的空間方向X上的亮度(像素值)的變化是用曲線82來描繪的。在圖6中，縱軸表示亮度(像素值)，而橫軸表示像素位置。此外，如上所述，像素位置i表示感興趣像素51的位置。
圖7示出了SAD計(jì)算部分61的計(jì)算結(jié)果，也就是相關(guān)值SAD(j(＝i+n))。在圖7中，縱軸表示相關(guān)值SAD(j)，而橫軸表示搜索位置。更具體而言，圖7表示由具有圖6中的曲線82所示的像素值(亮度)的五個(gè)像素組成的窗口72與由具有圖6中的曲線81所示的像素值(亮度)的五個(gè)像素組成的比較區(qū)域73-n中的每一個(gè)之間的搜索位置i+n上的SAD(i+n(＝j(luò)))。
現(xiàn)在返回圖4，相關(guān)值SAD(j)越小，相關(guān)性越高；所述SAD最小值檢測(cè)部分62從SAD計(jì)算部分61所提供的相關(guān)值SAD(j(＝i+n))之中檢測(cè)出最小值″min″，并且將與最小值″min″相對(duì)應(yīng)的搜索位置″pos″(在圖7的示例中，pos＝i+3)提供給SAD最小值估計(jì)部分63和直方圖部分35。
最小值″min″對(duì)應(yīng)于在連接相關(guān)值SAD(j)的曲線的最小點(diǎn)(z，SAD(z))上的相關(guān)值SAD(z)(這里，z是從i-6到i+6范圍中的一個(gè)整數(shù))。更具體而言，在圖7的示例中，最小值″min″是在最小點(diǎn)(i+3，SAD(i+3))上的相關(guān)值SAD(i+3)(＝約40)。在下文中，最小值″min″也稱為最小值″min″。
SAD計(jì)算部分61和SAD最小值檢測(cè)部分62進(jìn)行的上述處理可以概述如下。所述SAD計(jì)算部分61檢測(cè)位于與感興趣像素51的位置相對(duì)應(yīng)的先前幀上的位置i處的像素71，并提取至少包含像素71的窗口72。然后，所述SAD計(jì)算部分61沿包含目標(biāo)顯示幀上的感興趣像素51的水平線(平行于空間方向X的線)連續(xù)地移動(dòng)窗口72。在此時(shí)，所述SAD計(jì)算部分61使用預(yù)定的估計(jì)函數(shù)(在這個(gè)示例中，是SAD)來計(jì)算在窗口72的每個(gè)移動(dòng)位置(搜索位置)i+n處的窗口72與重疊窗口72(比較區(qū)域)的區(qū)域73-n之間的符合度(相關(guān)性)。然后，所述SAD最小值檢測(cè)部分62把具有最高符合度(相關(guān)性)(即，最小值″min″)的比較區(qū)域73-n中的中心像素設(shè)置為窗口72的中心像素71(即，對(duì)應(yīng)于感興趣像素51的像素71)的對(duì)應(yīng)像素。更具體而言，從構(gòu)成目標(biāo)顯示幀的像素之中，將排列在與最小值″min″相對(duì)應(yīng)的搜索位置″pos″上的像素設(shè)置為窗口72的中心像素71的對(duì)應(yīng)像素。
SAD計(jì)算部分61和SAD最小值檢測(cè)部分62所執(zhí)行的技術(shù)例如稱為窗口匹配法、基于區(qū)域的匹配法或模板匹配法。對(duì)應(yīng)像素也稱作對(duì)應(yīng)點(diǎn)。
嚴(yán)格來說，向直方圖部分35提供候選運(yùn)動(dòng)向量″pvec″，它是從感興趣像素51的位置i處開始并且終止于搜索位置pos(＝i+n)的向量n(n表示移動(dòng)量和相對(duì)于窗口72的參考位置i的移動(dòng)方向)。在這個(gè)示例中，如上所述，數(shù)值n的絕對(duì)值表示向量(候選運(yùn)動(dòng)向量″pvec″)的數(shù)值，而數(shù)值n的符號(hào)表示向量(候選運(yùn)動(dòng)向量″pvec″)的方向。更詳細(xì)來講，如果數(shù)值n是正的，那么候選運(yùn)動(dòng)向量″pvec″的方向就是空間方向X，也就是相對(duì)于圖5中的感興趣像素51的向右的方向。反之，如果數(shù)值n是負(fù)的，那么候選運(yùn)動(dòng)向量″pvec″的方向就是與空間方向X相反的方向，也就是相對(duì)于圖5中的感興趣像素51的向左的方向。更具體而言，在圖7的示例中，將″+3″作為感興趣像素51的候選運(yùn)動(dòng)向量″pvec″提供給直方圖部分35。
更準(zhǔn)確地說，正如稍后描述的那樣，所述直方圖部分35生成感興趣像素51和鄰近像素51的像素的候選運(yùn)動(dòng)向量″pvec″的直方圖，并且根據(jù)這個(gè)直方圖來確定感興趣像素51的運(yùn)動(dòng)向量″vec″。為此，所述SAD計(jì)算部分61和SAD最小值檢測(cè)部分62利用與上面描述的方式一樣的方式不僅獲得感興趣像素51的候選運(yùn)動(dòng)向量″pvec″，而且還獲得構(gòu)成由在方向X上排列成一排的預(yù)定數(shù)目的像素組成的區(qū)域的每個(gè)像素的候選運(yùn)動(dòng)向量″pvec″，在所述區(qū)域中中心像素是感興趣像素51(例如，稍后將要描述的圖11中所示的區(qū)域95)，并且將它們提供給直方圖部分35。
如圖8所示，假定在目標(biāo)顯示幀上的空間方向X上的亮度(像素值)的變化是用曲線91來描繪的，而在先前幀上的空間方向X上的亮度(像素值)的變化是用曲線92來描繪的。在圖8中，縱軸表示亮度(像素值)，而橫軸表示像素位置。此外，如上所述，像素位置i表示感興趣像素51的位置。
圖9示出了SAD計(jì)算部分61的計(jì)算結(jié)果，也就是相關(guān)值SAD(j(＝i+n))。在圖9中，縱軸表示相關(guān)值SAD(j)，而橫軸表示搜索位置。更具體而言，圖9表示在由具有圖8中的曲線92所示的像素值(亮度)的五個(gè)像素組成的窗口72與由具有圖8中的曲線91所示的像素值(亮度)的五個(gè)像素組成的比較區(qū)域73-n中的每一個(gè)之間的搜索位置i+n上的SAD(i+n(＝j(luò)))。
在圖9中，連接相關(guān)值SAD(j)的曲線具有兩個(gè)最小點(diǎn)點(diǎn)(i-1，SAD(i-1))和點(diǎn)(i+5，SAD(i+5))。簡而言之，兩個(gè)最小點(diǎn)都存在于圖9的示例之中。如果如上所述存在多個(gè)最小點(diǎn)，那么所述SAD計(jì)算部分61就采用與多個(gè)最小點(diǎn)相對(duì)應(yīng)的相關(guān)值SAD(j)中的最小值，也就是所有相關(guān)值SAD(j)的最小值，作為最小值″min″。更具體而言，在圖9的示例中，采用最小點(diǎn)(i+5，SAD(i+5))上的相關(guān)值SAD(i+5)(＝約27)以作為最小值″min″。
因此，位于比較區(qū)域73-5(在圖中未示出)的中心處的像素，也就是目標(biāo)顯示幀上的位置i+5處的像素，被設(shè)置為窗口72的中心像素71的對(duì)應(yīng)像素(對(duì)應(yīng)點(diǎn))。簡言之，將″+5″作為感興趣像素51的候選運(yùn)動(dòng)向量″pvec″提供給直方圖部分35。
然而，如圖9所示，由于最小值″min″之間的差，也就是最小點(diǎn)(i+5，SAD(i+5))上的相關(guān)值SAD(i+5)(＝約27)與最小點(diǎn)(i-1，SAD(i-1))上的相關(guān)值SAD(i-1)(＝約30)之間的差很小，因此說窗口72的中心像素71的對(duì)應(yīng)像素(對(duì)應(yīng)點(diǎn))是處于位置i+5上的像素并不總是準(zhǔn)確地。換句話說，窗口72中的中心像素71的對(duì)應(yīng)像素(對(duì)應(yīng)點(diǎn))可能是處于位直i-1上的像素。
如果如上所述存在兩個(gè)或多個(gè)窗口72中的中心像素71的可能的(候選)對(duì)應(yīng)像素(對(duì)應(yīng)點(diǎn))(也就是，如果用如圖9所示的曲線的形式表示的SAD(j)的兩個(gè)或多個(gè)最小點(diǎn)上的相關(guān)值SAD(j)之間的差小)，那么所確定的對(duì)應(yīng)像素(在底部與最小點(diǎn)相對(duì)應(yīng)的像素)的置信級(jí)，也就是提供給直方圖部分35的感興趣像素51的候選運(yùn)動(dòng)向量″pvec″的置信級(jí)就低。
另外，只要所確定的對(duì)應(yīng)像素的相關(guān)值SAD(j)(＝最小值″min″)不是足夠小的話，那么即使只有一個(gè)窗口72的中心像素71的可能的(候選者)對(duì)應(yīng)像素(對(duì)應(yīng)點(diǎn))(即，如圖7所示，如果用曲線的形式表示的SAD(j)只有一個(gè)最小點(diǎn)，或者如果盡管在圖中未示出，但是用曲線的形式表示的SAD(j)具有兩個(gè)或多個(gè)最小點(diǎn)并且最小相關(guān)值SAD(j)(＝最小值″min″)與其它相關(guān)值SAD(j)中的每一個(gè)之間的差大)，則對(duì)應(yīng)像素的置信級(jí)就低，也就是提供給直方圖部分35的感興趣像素51的候選運(yùn)動(dòng)向量″pvec″的置信級(jí)就低。
為了估計(jì)這樣的最小值″min"，也就是作為最小值″min″上的像素的對(duì)應(yīng)像素的置信級(jí)(提供給直方圖部分35的感興趣像素51的候選運(yùn)動(dòng)向量″pvec″的置信級(jí))，根據(jù)這個(gè)實(shí)施例的模板匹配部分34具有如圖4所示的結(jié)構(gòu)。更具體而言，如圖4所示，根據(jù)這個(gè)實(shí)施例的模板匹配部分34除上述SAD計(jì)算部分61和SAD最小值檢測(cè)部分62之外還包括SAD最小值估計(jì)部分63。
所述SAD最小值估計(jì)部分63估計(jì)作為對(duì)應(yīng)像素的最小值″min″上的像素的置信級(jí)(提供給直方圖部分35的感興趣像素51的候選運(yùn)動(dòng)向量″pvec″的置信級(jí))。如果SAD最小值估計(jì)部分63判定置信級(jí)為低，則它就向運(yùn)動(dòng)向量校正部分36提供例如″1″以作為上面所述的控制信號(hào)″flag″。正如稍后描述的那樣，在這種情況下，所述運(yùn)動(dòng)向量校正部分36校正感興趣像素51的運(yùn)動(dòng)向量vec。
相反，如果SAD最小值估計(jì)部分63判定上述置信級(jí)為高的話，則它向運(yùn)動(dòng)向量校正部分36提供例如″0″以作為上述控制信號(hào)″flag″。正如稍后描述的那樣，在這種情況下，所述運(yùn)動(dòng)向量校正部分36取消(不執(zhí)行)感興趣像素51的運(yùn)動(dòng)向量vec的校正。
更具體而言，根據(jù)這個(gè)實(shí)施例，利用SAD最小值檢測(cè)部分62來計(jì)算或檢測(cè)例如SAD最小值估計(jì)部分63需要用以執(zhí)行上述估計(jì)的值，并且將它提供給SAD最小值估計(jì)部分36。
更具體而言，根據(jù)這個(gè)實(shí)施例，SAD最小值檢測(cè)部分62所檢測(cè)出的值不僅包括上述最小值″min″，也就是相關(guān)值SAD(j)的最小值″min″(在下文中，為了區(qū)別于如下將要描述的值min2，稱為最小值″min1″)，而且如圖10所示還包括與最小值″min1″相對(duì)應(yīng)的搜索位置pos1、與最小值″min1″相對(duì)應(yīng)的第二最小相關(guān)值SAD(j)(即，所有相關(guān)值SAD(j)的第二最小值，這在下文中稱為最小值″min2″)、以及與最小值″min2″相對(duì)應(yīng)的搜索位置pos2。
此外，根據(jù)這個(gè)實(shí)施例，SAD最小值檢測(cè)部分62所計(jì)算出的值包括在搜索范圍內(nèi)(在圖5的示例中，是從搜索位置i-6到i+6內(nèi))的相關(guān)值SAD(j)平均值SADave與最小值″min1″之間的差值″e(cuò)val1″(從平均值SADave到最小值″min1″之間的深度″e(cuò)val1″)；還包括平均值SADave與最小值″min2″之間的差值″e(cuò)val2″(從平均值SADave到最小值″min2″的深度″e(cuò)val2″)。
在這種情況下(即，如果搜索范圍是從i-6到i+6的搜索位置)，根據(jù)下面所示的等式(4)來計(jì)算平均值SADave。
SADave=12×6+1Σj=i-6i+6SAD(j)...(4)]]>現(xiàn)在返回圖4，如果從SAD最小值檢測(cè)部分62向SAD最小值估計(jì)部分63提供這些值(最小值min1、搜索位置pos1、深度eval1、最小值min2、搜索位置pos2和深度eval2)，那么就判斷是否滿足下面的第一條件或第二條件。
第一條件是要滿足下面所示的所有不等式(5)到(7)。
eval1＞eval_thresh...(5)eval2＞eval_thresh...(6)|pos1-pos2|＞pos_thresh ...(7)在不等式(5)和(6)中，eval_thresh表示預(yù)定閾值，這是預(yù)設(shè)的。同樣，不等式(7)中的pos_thresh表示預(yù)定閾值，這也是預(yù)設(shè)的。
如圖9所示，正如從從不等式(5)到(7)明顯看出的是，如果存在兩個(gè)或多個(gè)最小點(diǎn)并且這些最小點(diǎn)的每一對(duì)上的相關(guān)值S(j)之間的差小的話則滿足第一條件。換句話說，如果窗口存在72中的中心像素71的兩個(gè)或多個(gè)候選對(duì)應(yīng)像素(對(duì)應(yīng)點(diǎn))，進(jìn)一步講如果無法從候選者(在圖9的示例中，搜索位置i+5和搜索位置i-1上的像素都是候選對(duì)應(yīng)像素)中找到可信的對(duì)應(yīng)像素的話，則滿足第一條件。
在另一方面，第二條件是要滿足下面所示的不等式(8)。
min1＞min_thresh...(8)
在不等式(8)中，min_thresh表示預(yù)定閾值，這是預(yù)設(shè)值。
正如從不等式(8)明顯看出的那樣，如果最小值″min1″不是足夠小的話，則滿足第二條件。換句話說，如果沒有確信地建立窗口72與最小值″min1″的比較區(qū)域73-n的關(guān)聯(lián)性，則滿足第二條件。
因此，如果判定滿足第一和第二條件的至少其中之一，則SAD最小值估計(jì)部分63就判斷在最小值″min1″上的像素，也就是對(duì)應(yīng)像素的置信級(jí)(提供給直方圖部分35的感興趣像素51的候選運(yùn)動(dòng)向量″pvec″的置信級(jí))為低，并向運(yùn)動(dòng)向量校正部分36輸出″1″以作為控制信號(hào)″flag″。
相反，如果判定既不滿足第一條件也不滿足第二條件，則SAD最小值估計(jì)部分63就判斷在最小值″min1″上的像素，也就是對(duì)應(yīng)象素的置信級(jí)(提供給直方圖部分35的感興趣像素51的候選運(yùn)動(dòng)向量″pvec″的置信級(jí))為高，并向運(yùn)動(dòng)向量校正部分36輸出″0″以作為控制信號(hào)″flag″。
現(xiàn)在返回圖2，向所述直方圖部分35提供模板匹配部分34對(duì)由包含目標(biāo)顯示幀上的感興趣像素51在內(nèi)的多個(gè)像素組成的區(qū)域進(jìn)行匹配的結(jié)果。簡言之，將構(gòu)成所述區(qū)域的多個(gè)像素中的每一個(gè)的候選運(yùn)動(dòng)向量″pvec″提供給直方圖部分35。所述直方圖部分35生成多個(gè)已提供的候選運(yùn)動(dòng)向量pvec的直方圖，通過參照直方圖來以最高頻率檢測(cè)候選運(yùn)動(dòng)向量″pvec″，并且向運(yùn)動(dòng)向量校正部分36提供檢測(cè)出的候選運(yùn)動(dòng)向量″pvec″以作為感興趣像素51的運(yùn)動(dòng)向量vec。
為其生成直方圖的區(qū)域不限于特定的區(qū)域，只要該包含感興趣像素51即可。換句話說，不限定構(gòu)成所述區(qū)域的像素的數(shù)目或該區(qū)域中的感興趣像素51的位置。在這個(gè)示例中，假定為其生成直方圖的區(qū)域是由在空間方向X上排列成一排的17個(gè)像素組成的區(qū)域，其中感興趣像素51是所排列的像素的中心像素。換言之，所述區(qū)域是由位于中心處的感興趣像素51、在感興趣像素51的左側(cè)(在與空間方向X相反的方向上)的8個(gè)像素和在感興趣像素51的右側(cè)(在空間方向X上)的8個(gè)像素組成的。
更具體而言，假定模板匹配部分34輸出構(gòu)成圖11中所示的區(qū)域95的每個(gè)像素的向量候選者pvec。在圖11的區(qū)域95中，17個(gè)分段中的每一個(gè)都代表一個(gè)像素。17個(gè)分段的中心那個(gè)代表感興趣像素51。此外，每個(gè)像素(小的分段)中所示的數(shù)值表示相應(yīng)像素的候選運(yùn)動(dòng)向量″pvec″的示例。應(yīng)當(dāng)注意的是，省略正號(hào)″+″。
在這種情況下，所述直方圖部分35生成如圖12所示的直方圖。在圖12的示例中，由于具有最高頻率(＝7)的候選運(yùn)動(dòng)向量″pvec″是″+4″，因此直方圖部分35判定感興趣像素51的運(yùn)動(dòng)向量vec是″+4″，并且將它提供給圖2中的運(yùn)動(dòng)向量校正部分36。
所述運(yùn)動(dòng)向量校正部分36適當(dāng)?shù)匦Ｕ狈綀D部分35所提供的感興趣像素51的運(yùn)動(dòng)向量vec，以便根據(jù)下游處理(例如，在這個(gè)示例中，圖1中的圖像處理部分12所進(jìn)行的上述處理)、亮度梯度檢測(cè)部分33和模板匹配部分34進(jìn)行處理的結(jié)果(例如，在這個(gè)示例中，上述亮度梯度″slope″和控制信號(hào)″flag″)、或下游處理和亮度梯度檢測(cè)部分33和模板匹配部分34進(jìn)行處理的結(jié)果的組合，來使感興趣像素51的運(yùn)動(dòng)向量vec匹配鄰近感興趣像素51的其它像素的運(yùn)動(dòng)向量。
經(jīng)由LPF 37向外輸出運(yùn)動(dòng)向量校正部分36所校正的感興趣像素51的運(yùn)動(dòng)向量vec。
現(xiàn)在，將參照?qǐng)D13到19來描述這個(gè)運(yùn)動(dòng)向量校正部分36的細(xì)節(jié)。
圖13示出了根據(jù)這個(gè)實(shí)施例的運(yùn)動(dòng)向量校正部分36的詳細(xì)示例性結(jié)構(gòu)。
多種的運(yùn)動(dòng)向量校正部分36都是可能的，比如在圖18和19中所示出的那些。當(dāng)圖13、18和19中所示的運(yùn)動(dòng)向量校正部分36需要彼此加以區(qū)分時(shí)，分別將它們稱為運(yùn)動(dòng)向量校正部分36A、運(yùn)動(dòng)向量校正部分36B和運(yùn)動(dòng)向量校正部分36C。在另一方面，將運(yùn)動(dòng)向量校正部分36A、運(yùn)動(dòng)向量校正部分36B和運(yùn)動(dòng)向量校正部分36C統(tǒng)稱為運(yùn)動(dòng)向量校正部分36。
參照?qǐng)D13，所述運(yùn)動(dòng)向量校正部分36A包括下游處理校正部分101、切換部分102、置信級(jí)估計(jì)部分103和置信級(jí)校正部分104。
所述下游處理校正部分101根據(jù)下游處理例如圖1中所示的上述圖像處理部分12所進(jìn)行的處理的特征，來校正感興趣像素51的運(yùn)動(dòng)向量vec。
在下文中，如果需要彼此加以區(qū)分的話，分別把稍后將要描述的校正前的運(yùn)動(dòng)向量vec，下游處理校正部分101所校正的運(yùn)動(dòng)向量vec和置信級(jí)校正部分104所校正的運(yùn)動(dòng)向量vec稱為運(yùn)動(dòng)向量vec、運(yùn)動(dòng)向量vec′和運(yùn)動(dòng)向量vec″。相反，如果并非必須在運(yùn)動(dòng)向量vec、運(yùn)動(dòng)向量vec′和運(yùn)動(dòng)向量vec″之間加以區(qū)分的話，那么將它們都稱為運(yùn)動(dòng)向量rec。
所述下游處理校正部分101輸出所校正的運(yùn)動(dòng)向量vec′，然后將其提供給切換部分102。
下游處理校正部分101所采用的校正方法不限于特定的方法。作為替代，下游處理校正部分101能夠采用適合于下游處理的特征的校正方法。
現(xiàn)在將要介紹適合于圖1的校正部分22進(jìn)行處理的校正方法，所述處理是下游處理操作的其中一種。
如上所述，所述校正部分22執(zhí)行由圖1中的階躍邊沿檢測(cè)部分21所提供的感興趣像素51的像素值的校正(包括0校正)。更具體而言，所述校正部分22根據(jù)運(yùn)動(dòng)檢測(cè)部分14所提供的感興趣像素51的運(yùn)動(dòng)向量vec(嚴(yán)格來說是所校正的運(yùn)動(dòng)向量vec′或運(yùn)動(dòng)向量vec″)來校正感興趣像素51的像素值。
從運(yùn)動(dòng)檢測(cè)部分14的部分下游的視點(diǎn)來看，例如，圖像處理部分12，區(qū)分運(yùn)動(dòng)向量vec、運(yùn)動(dòng)向量vec′和運(yùn)動(dòng)向量vec″并不是必需的。因此，在下文中，在從運(yùn)動(dòng)檢測(cè)部分14的部分下游的視點(diǎn)來看的說明中，即對(duì)運(yùn)動(dòng)檢測(cè)部分14的處理下游的說明中，使用了″運(yùn)動(dòng)向量vec″這種表達(dá)。
假定校正部分22不使用作為基于上述等式(1)的計(jì)算結(jié)果的校正值R，而是依賴于圖14中所示的關(guān)系來判斷感興趣像素51的像素值的校正量(值)。
圖14是描繪用于在校正部分22中判斷感興趣像素51的像素值的校正量的方法的一個(gè)示例的圖。這種方法不同于基于上面描述的等式(1)的方法。
根據(jù)在圖14中描繪的校正方法(校正部分22進(jìn)行的處理)的示例，像素值的校正量線性地增加直到運(yùn)動(dòng)向量vec的數(shù)值(絕對(duì)值)到達(dá)作為搜索范圍的界限的6(″-6″或″+6″)為止，然而超過搜索范圍的界限像素值的校正量降至0(即，取消校正)。
因此，如果從運(yùn)動(dòng)檢測(cè)部分14中輸出感興趣像素51及其具有約6的數(shù)值的運(yùn)動(dòng)向量vec的鄰近像素，那么就利用大的校正量來校正一些輸出像素，而根本不校正其它的像素。
更具體而言，假定從運(yùn)動(dòng)檢測(cè)部分14中輸出具有運(yùn)動(dòng)向量vec″+6″的感興趣像素51，并且也從運(yùn)動(dòng)檢測(cè)部分14中輸出具有運(yùn)動(dòng)向量vec″+7″的鄰近像素。
在這種情況下，僅僅以最大的校正量來校正感興趣像素51的像素值，而不校正鄰近的像素。這導(dǎo)致在所得到的校正圖像(目標(biāo)顯示幀)上感興趣像素51的像素值(校正值)與鄰近像素的像素值(未校正的值)失配。簡言之，產(chǎn)生了上述的第二問題。
換言之，校正感興趣像素51的運(yùn)動(dòng)向量vec″+6″以便與鄰近像素的運(yùn)動(dòng)向量vec″+7″失配。也就是說，將感興趣像素51的運(yùn)動(dòng)向量vec″+6″校正為不匹配其鄰近像素的運(yùn)動(dòng)向量。
為了避免運(yùn)動(dòng)檢測(cè)部分14輸出不匹配鄰近像素的運(yùn)動(dòng)向量的運(yùn)動(dòng)向量vec，也就是說為了在校正部分22中避免像素值的校正量在運(yùn)動(dòng)向量vec的搜索范圍的界限上突然改變，圖13中的下游處理校正部分101能夠根據(jù)例如圖15中所示的關(guān)系來將運(yùn)動(dòng)向量vec校正成運(yùn)動(dòng)向量vec′。
圖15示出了用于在下游處理校正部分101中校正感興趣像素51的運(yùn)動(dòng)向量vec的方法的一個(gè)示例。
根據(jù)圖15中的校正方法，根據(jù)關(guān)系式vec′＝vec來對(duì)校正以前的運(yùn)動(dòng)向量vec的數(shù)值(絕對(duì)值)，即直方圖部分35所提供的運(yùn)動(dòng)向量vec進(jìn)行校正，直到它到達(dá)3(″-3″或″+3″)為止(即，不執(zhí)行校正)，從3到6(″-6″或″+6″)，根據(jù)關(guān)系式vec′＝-vec+6或-vec-6來校正運(yùn)動(dòng)向量vec，并且超出6這點(diǎn)以外，根據(jù)關(guān)系式vec′＝0來校正運(yùn)動(dòng)向量vec。
如果下游處理校正部分101根據(jù)圖15中所示的關(guān)系來輸出運(yùn)動(dòng)向量vec′，那么運(yùn)動(dòng)向量vec′的數(shù)值(絕對(duì)值)不超過3。簡言之，不輸出具有約為6的數(shù)值的運(yùn)動(dòng)向量vec。其結(jié)果是，如上所述，能夠防止像素值的校正量上的突變。簡言之，能夠解決已知的第二個(gè)問題。
如果圖13中的下游處理校正部分101根據(jù)圖15中所示的關(guān)系來執(zhí)行校正，可以存儲(chǔ)定義圖15中所示的關(guān)系的表以便通過參照該表來校正運(yùn)動(dòng)向量vec。作為選擇，所述下游處理校正部分101可以存儲(chǔ)定義上述關(guān)系式的函數(shù)，即分別依據(jù)規(guī)則vec′＝vec(-3≤vec≤3)、vec′＝-vec-6(-6≤vec＜-3)、vec′＝-vec+6(3＜vec≤6)或vec′＝0(vec＜-6，6＜vec)定義的函數(shù)，以便將運(yùn)動(dòng)向量vec輸入到相應(yīng)的函數(shù)，然后所述函數(shù)輸出校正后的運(yùn)動(dòng)向量vec′。
如上所述，圖15中所示的方法僅是用于在下游處理校正部分101中校正感興趣像素51的運(yùn)動(dòng)向量vec的各種不同方法當(dāng)中的一個(gè)示例，作為適合于如下情形的示例，即如圖14所示，表示圖1中的校正部分22進(jìn)行的處理(下游處理)的特征。
重要的是，下游處理校正部分101所采用的校正方法不限于特定的一種，只要適合于下游處理的特性即可。由此，可以根據(jù)下游處理的特性來改變校正方法。
假定相關(guān)的下游處理(未示出)的特征在于從由運(yùn)動(dòng)檢測(cè)部分14輸出的感興趣像素51的運(yùn)動(dòng)向量vec之中將所述相關(guān)的下游處理施加到具有中間級(jí)(intermediate level)(例如3)的數(shù)值(絕對(duì)值)的運(yùn)動(dòng)向量vec，以便增強(qiáng)具有中間級(jí)(intermediate level)的數(shù)值的運(yùn)動(dòng)向量vec的影響。
在這種情況下，所述下游處理校正部分101能夠根據(jù)例如圖16中所示的關(guān)系將運(yùn)動(dòng)向量vec校正成運(yùn)動(dòng)向量vec′。
圖16示出了用于在下游處理校正部分101中校正感興趣像素51的運(yùn)動(dòng)向量vec的方法的另一示例(不同于圖15中所示的示例)。
根據(jù)圖16中的校正方法，根據(jù)關(guān)系式vec′＝2vec來對(duì)校正前的運(yùn)動(dòng)向量vec即直方圖部分35所提供的運(yùn)動(dòng)向量的數(shù)值(絕對(duì)值)進(jìn)行校正，直到它到達(dá)3(″-3″或″+3″)為止，從3到6(″-6″或″+6″)、根據(jù)關(guān)系式vec′＝-2vec+12或-2vec-12來校正運(yùn)動(dòng)向量vec，并且超出6這點(diǎn)以外，根據(jù)關(guān)系式vec′＝0來校正運(yùn)動(dòng)向量vec。
如果下游處理校正部分101根據(jù)圖16中所示的關(guān)系執(zhí)行校正，可以存儲(chǔ)定義圖16中所示的關(guān)系的表以便通過參照該表來校正運(yùn)動(dòng)向量vec。作為選擇，所述下游處理校正部分101可以存儲(chǔ)定義上述關(guān)系式的函數(shù)，即分別依據(jù)規(guī)則vec′＝2vec(-3≤vec≤3)、vec′＝-2vec-12(-6≤vec＜-3)、vec′＝-2vec+12(3＜vec≤6)或vec′＝0(vec＜-6，6＜vec)定義的函數(shù)，以便將運(yùn)動(dòng)向量vec輸入到相應(yīng)的函數(shù)，然后所述函數(shù)輸出校正后的運(yùn)動(dòng)向量vec′。
此外，如果可能或確實(shí)存在兩個(gè)或多個(gè)下游處理操作，則下游處理校正部分101能夠根據(jù)需要改變其校正方法以便校正運(yùn)動(dòng)向量vec。更具體而言，如果存在Q(Q是1或更大的整數(shù))種下游處理操作的話，那么下游處理校正部分101能夠根據(jù)Q種校正方法中的每一種來校正感興趣像素51的其中一個(gè)運(yùn)動(dòng)向量vec，并分別輸出Q個(gè)所得到的運(yùn)動(dòng)向量vec′。
現(xiàn)在返回圖13，由下游處理校正部分101按照這種方式將直方圖部分35所輸出的感興趣像素51的運(yùn)動(dòng)向量vec校正成運(yùn)動(dòng)向量vec′，并然后將運(yùn)動(dòng)向量vec′提供給切換部分102。
所述切換部分102根據(jù)置信級(jí)估計(jì)部分103的控制將輸出目的地切換到外部LPF 37和置信級(jí)校正部分104的其中之一。
所述置信級(jí)估計(jì)部分103根據(jù)亮度梯度檢測(cè)部分33所提供的亮度梯度″slope″和模板匹配部分34所提供的控制信號(hào)″flag″來估計(jì)直方圖部分35所提供的感興趣像素51的運(yùn)動(dòng)向量vec的置信級(jí)。
如果置信級(jí)估計(jì)部分103判定感興趣像素51的運(yùn)動(dòng)向量vec的置信級(jí)為低，則它就把切換部分102的輸出目的地切換到置信級(jí)校正部分104。
因此，如果置信級(jí)估計(jì)部分103估計(jì)感興趣像素51的運(yùn)動(dòng)向量vec的置信級(jí)為低的話，則把由下游處理校正部分101所校正和輸出的運(yùn)動(dòng)向量vec′提供給置信級(jí)校正部分104。此后，正如稍后要描述的那樣，置信級(jí)校正部分104進(jìn)一步將由下游處理校正部分101所校正的運(yùn)動(dòng)向量vec′校正成運(yùn)動(dòng)向量vec″，所述運(yùn)動(dòng)向量vec″繼而經(jīng)由LPF 37從運(yùn)動(dòng)檢測(cè)部分14那里向外(圖1中的圖像處理部分11、圖像處理部分12和切換部分15)加以提供。
相反，如果置信級(jí)估計(jì)部分103估計(jì)感興趣像素51的運(yùn)動(dòng)向量vec的置信級(jí)為高，則它將切換部分102的輸出目的地切換到外部的LPF 37。
因此，如果置信級(jí)估計(jì)部分103估計(jì)感興趣像素51的運(yùn)動(dòng)向量vec的置信級(jí)為高，則不把由下游處理校正部分101所校正和輸出的運(yùn)動(dòng)向量vec′提供給置信級(jí)校正部分104而是經(jīng)由LPF 37從運(yùn)動(dòng)檢測(cè)部分14那里向外加以提供。
更詳細(xì)來講，例如，如果滿足要求建立下面所示的不等式(9)第三個(gè)條件和滿足要求控制信號(hào)″flag″為″1″第四個(gè)條件的至少其中之一，那么置信級(jí)估計(jì)部分103估計(jì)由直方圖部分35所提供的感興趣像素51的運(yùn)動(dòng)向量vec的置信級(jí)低，將切換部分102的輸出目的地切換到置信級(jí)校正部分104。
相反，如果不滿足第三個(gè)和第四個(gè)條件兩者中的任何一個(gè)，那么運(yùn)動(dòng)向量校正部分36估計(jì)由直方圖部分35所提供的感興趣像素51的運(yùn)動(dòng)向量vec的置信級(jí)高，將切換部分102的輸出目的地切換到外部的LPF 37。
slope＜slope_thresh...(9)在不等式(9)中，slope_thresh是預(yù)定閾值，這是一個(gè)預(yù)設(shè)值。
正如從不等式(9)明顯看出的那樣，如果感興趣像素51上的亮度梯度小，即如果感興趣像素51不對(duì)應(yīng)于特征部分，比如像如上所述的階躍邊沿的邊沿部分，那么就滿足第三個(gè)條件。
此外，如上所述，如果控制信號(hào)″flag″是″1″，所述控制信號(hào)能夠被稱為表示關(guān)于模板匹配部分34中的感興趣像素51的運(yùn)動(dòng)向量vec的置信級(jí)的估計(jì)結(jié)果的信號(hào)，也就是，如果模板匹配部分34估計(jì)感興趣像素51的運(yùn)動(dòng)向量vec的置信級(jí)為低的話，那么就滿足第四個(gè)條件。
如果將切換部分102的輸出目的地切換到置信級(jí)校正部分104，那么置信級(jí)校正部分104就根據(jù)預(yù)定的方法來進(jìn)一步校正由下游處理校正部分101所輸出的運(yùn)動(dòng)向量vec′，即運(yùn)動(dòng)向量vec′，它是作為由下游處理校正部分101校正的由直方圖部分35輸入的運(yùn)動(dòng)向量vec的結(jié)果加以輸出的，然后從運(yùn)動(dòng)檢測(cè)部分14經(jīng)由LPF 37向外(圖1中的圖像處理部分11、圖像處理部分12和切換部分15)輸出所得到的運(yùn)動(dòng)向量vec″。
置信級(jí)校正部分104所采用的校正方法不限于特定的方法。
在這個(gè)示例中，上述描述的圖像處理部分12使用感興趣像素51的運(yùn)動(dòng)向量vec。簡言之，所述圖像處理部分12根據(jù)感興趣像素51的運(yùn)動(dòng)向量vec的方向和數(shù)值來校正感興趣像素51的像素值(以便增強(qiáng)圖像)。在這種情況下，如果使用具有低置信級(jí)的感興趣像素51的運(yùn)動(dòng)向量vec，則就會(huì)發(fā)生感興趣像素51的像素值被過度校正的這類問題。
為了克服這個(gè)問題，例如置信級(jí)校正部分104能夠根據(jù)下面所示的等式(10)的右手側(cè)來將校正施加到作為下游處理校正部分101校正的感興趣像素51的運(yùn)動(dòng)向量vec的結(jié)果而獲得的運(yùn)動(dòng)向量vec′，并經(jīng)由LPF 37從運(yùn)動(dòng)檢測(cè)部分14那里向外輸出校正結(jié)果，即與等式(10)的左手側(cè)相對(duì)應(yīng)的值vec″，以作為感興趣像素51的最終的(校正后的)運(yùn)動(dòng)向量。
vec″＝α×vec′...(10)在等式(10)中，α是校正系數(shù)。這個(gè)校正系數(shù)α能夠被設(shè)置成0到1范圍內(nèi)的任何值。
所述置信級(jí)估計(jì)部分103能夠使用除上述第三個(gè)條件和第四個(gè)條件以外的條件來估計(jì)由直方圖部分35所提供的感興趣像素51的運(yùn)動(dòng)向量vec的置信級(jí)。
更具體而言，例如如果與僅次于最小值″min1″的最小相關(guān)值SAD(j)(即，最小值″min2″)相對(duì)應(yīng)的搜索位置pos2是如圖17所示的感興趣像素51的位置i，那么在很多情況下，窗口72中的中心像素71的對(duì)應(yīng)像素(對(duì)應(yīng)點(diǎn))不是處于與最小值″min1″相對(duì)應(yīng)的搜索位置pos1上的像素，而是處于位置i(搜索位置pos2)上的感興趣像素51。
因此，可以添加例如要求與最小值″min2″相對(duì)應(yīng)的搜索位置pos2是感興趣像素51的位置i的第五個(gè)條件，以便如果滿足第五個(gè)條件的話，則圖13中的置信級(jí)估計(jì)部分103就估計(jì)直方圖部分35所提供的感興趣像素51運(yùn)動(dòng)向量vec的置信級(jí)為低，由此將切換部分102的輸出目的地切換到置信級(jí)校正部分104。這使置信級(jí)校正部分104進(jìn)一步校正作為下游處理校正部分101校正的運(yùn)動(dòng)向量vec的結(jié)果而獲得的運(yùn)動(dòng)向量vec′。
盡管未示出，但是如果滿足第五個(gè)條件，則置信級(jí)估計(jì)部分103就通知置信級(jí)校正部分104滿足該第五個(gè)條件，以便置信級(jí)校正部分104把窗口72的中心像素71的對(duì)應(yīng)像素(對(duì)應(yīng)點(diǎn))視作為位置i(搜索位置pos2)上的感興趣像素51，也就是，解釋說明在感興趣像素51的位置i上沒有運(yùn)動(dòng)，并且將下游處理校正部分101所校正的感興趣像素51的運(yùn)動(dòng)向量vec′改變?yōu)椤?″。換言之，所述置信級(jí)校正部分104將上述等式(10)中的校正系數(shù)a設(shè)置為0以便校正下游處理校正部分101所校正的感興趣像素51的運(yùn)動(dòng)向量vec′。更具體而言，如果滿足第五個(gè)條件，則置信級(jí)校正部分104就把下游處理校正部分101所校正的感興趣像素51的運(yùn)動(dòng)向量vec′校正成0向量。
然而，在這種情況下，所述模板匹配部分34(圖4中的SAD最小值估計(jì)部分63)需要給置信級(jí)估計(jì)部分103提供這個(gè)搜索位置pos2以及控制信號(hào)″flag″。
作為選擇，如果滿足第五個(gè)條件，則所述SAD最小值估計(jì)部分63就總是可以輸出″1″作為控制信號(hào)″flag″。
為了解釋說明圖2中的運(yùn)動(dòng)向量校正部分36的可能變形，已經(jīng)描述了圖13中的運(yùn)動(dòng)向量校正部分36A的示例性結(jié)構(gòu)。
圖2中的運(yùn)動(dòng)向量校正部分36例如可以以圖18中所示的運(yùn)動(dòng)向量校正部分36B或圖19中所示的運(yùn)動(dòng)向量校正部分36C的形式加以實(shí)現(xiàn)。
圖18中的運(yùn)動(dòng)向量校正部分36B包括下游處理校正部分101。這個(gè)101下游處理校正部分101具有同圖13中的運(yùn)動(dòng)向量校正部分36A中的對(duì)應(yīng)部分的功能和結(jié)構(gòu)基本上相同的功能和結(jié)構(gòu)。圖18中的運(yùn)動(dòng)向量校正部分36B不對(duì)直方圖部分35所輸入的運(yùn)動(dòng)向量vec施加圖13的置信級(jí)校正部分104所執(zhí)行的校正處理；它僅僅執(zhí)行下游處理校正部分101所進(jìn)行的校正處理。
在另一方面，除了運(yùn)動(dòng)向量校正部分36C不包括運(yùn)動(dòng)向量校正部分36A中所包含的下游處理校正部分101之外，圖19中的運(yùn)動(dòng)向量校正部分36C具有與圖13中的運(yùn)動(dòng)向量校正部分36A相同的結(jié)構(gòu)。因此，圖19中的運(yùn)動(dòng)向量校正部分36C不對(duì)直方圖部分35所輸入的運(yùn)動(dòng)向量vec施加圖13中的下游處理校正部分所執(zhí)行的校正處理；它僅僅執(zhí)行置信級(jí)校正部分104所進(jìn)行的校正處理(只有當(dāng)置信級(jí)估計(jì)部分判定運(yùn)動(dòng)向量vec的置信級(jí)為低時(shí))。
已經(jīng)參照?qǐng)D2到19描述了圖2中的運(yùn)動(dòng)檢測(cè)部分14的示例性結(jié)構(gòu)。現(xiàn)在將略述運(yùn)動(dòng)檢測(cè)部分14的操作。
根據(jù)這個(gè)實(shí)施例的運(yùn)動(dòng)檢測(cè)部分14從構(gòu)成目標(biāo)顯示幀的像素之中將預(yù)定像素設(shè)置為感興趣像素。所述運(yùn)動(dòng)檢測(cè)部分14生成感興趣像素上的運(yùn)動(dòng)向量，根據(jù)該運(yùn)動(dòng)向量的置信級(jí)和下游處理的特征來校正運(yùn)動(dòng)向量，并向外(圖1中的圖像處理部分11、圖像處理部分12和切換部分15)輸出該運(yùn)動(dòng)向量。
更詳細(xì)地，所述模板匹配部分34將目標(biāo)顯示幀(圖像數(shù)據(jù))與先前的幀(圖像數(shù)據(jù))進(jìn)行比較，以生成感興趣像素上的候選運(yùn)動(dòng)向量″pvec″并將它提供給直方圖部分35。
換言之，所述模板匹配部分34檢測(cè)出目標(biāo)顯示幀上的第一個(gè)像素(第一個(gè)像素例如是在圖5中的搜索范圍i-6到i+6內(nèi)的像素之中的一個(gè)像素)以作為第二個(gè)像素的對(duì)應(yīng)像素，所述第二個(gè)像素被排列在與感興趣像素的位置相對(duì)應(yīng)的先前幀上的位置處(如果如圖5所示那樣設(shè)置起感興趣像素的作用的像素51，則第二個(gè)像素例如是處于位置i上的像素71)。然后，所述模板匹配部分34生成從感興趣像素開始并終止于第一個(gè)像素處的向量以作為感興趣像素上的候選運(yùn)動(dòng)向量″pvec″，(例如，如圖5所示，如果將像素51設(shè)置為感興趣像素，并且比較區(qū)域73-(+6)的中心像素，即處于位置i+6上的像素，被檢測(cè)為第一個(gè)像素，則候選運(yùn)動(dòng)向量″pvec″是″+6″)并且將該候選運(yùn)動(dòng)向量提供給直方圖部分35。
此外，如果判定目標(biāo)顯示幀包含兩個(gè)或多個(gè)候選對(duì)應(yīng)像素(例如，如圖9所示，如果搜索位置i-1上的像素和搜索位置i+5上的像素都是候選對(duì)應(yīng)像素，更具體而言，例如如果滿足要求建立上面示出的從不等式(5)到不等式(7)所有不等式的第一個(gè)條件)或者如果判定作為對(duì)應(yīng)像素的第二個(gè)像素的置信級(jí)為低(例如，如果滿足要求建立上面示出的不等式(8)的第二個(gè)條件)，則所述模板匹配部分34向運(yùn)動(dòng)向量校正部分36提供表示用于校正運(yùn)動(dòng)向量的命令的第一信息(在這個(gè)示例中，即為″1″的控制信號(hào)″flag″)。
所述直方圖部分35從由模板匹配部分34生成的感興趣像素和其鄰近像素上的候選運(yùn)動(dòng)向量″pvec″(例如，候選運(yùn)動(dòng)向量是圖11中的區(qū)域95中的像素(分段)上的值)之中將具有最高頻率(例如，在圖12中所示的直方圖中具有最高頻率的″+4″)的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量vec，并將該運(yùn)動(dòng)向量vec輸出到運(yùn)動(dòng)向量校正部分36。
所述亮度梯度檢測(cè)部分33計(jì)算在感興趣像素周圍的亮度變化的程度(例如，上面描述的亮度梯度，更具體而言，上面示出的等式(2)的值″slope″)，并且將其提供給運(yùn)動(dòng)向量校正部分36。
所述運(yùn)動(dòng)向量校正部分36能夠根據(jù)下游部分(例如圖1中的校正部分22)所進(jìn)行的處理的特征來校正由直方圖部分35所提供的運(yùn)動(dòng)向量vec，并照現(xiàn)在的樣子或在進(jìn)一步應(yīng)用下列校正處理之后，向外(圖1中的圖像處理部分11、圖像處理部分12和切換部分15)輸出所獲得的運(yùn)動(dòng)向量vec′。
更具體而言，所述運(yùn)動(dòng)向量校正部分36能夠根據(jù)來自于亮度梯度檢測(cè)部分33的處理結(jié)果(在這個(gè)示例中，亮度梯度″slope″)和來自于模板匹配部分34的處理結(jié)果(在這個(gè)示例中，控制信號(hào)″flag″)來估計(jì)由直方圖部分35所提供的運(yùn)動(dòng)向量vec的置信級(jí)。此后，如果運(yùn)動(dòng)向量校正部分36估計(jì)運(yùn)動(dòng)向量vec的置信級(jí)為低，更具體而言例如如果滿足要求建立上面示出的不等式(9)的第三個(gè)條件和滿足要求圖2中的模板匹配部分34所提供的控制信號(hào)″flag″為″1″的第四個(gè)條件的至少其中之一，那么運(yùn)動(dòng)向量校正部分36就能夠進(jìn)一步根據(jù)下游處理來校正已校正的運(yùn)動(dòng)向量vec′，并且向外(圖1中的圖像處理部分11、圖像處理部分12和切換部分15)輸出所獲得的運(yùn)動(dòng)向量vec″。
作為選擇，所述運(yùn)動(dòng)向量校正部分36能夠根據(jù)來自于亮度梯度檢測(cè)部分33的處理結(jié)果和來自于模板匹配部分34的處理結(jié)果來估計(jì)直方圖部分35所提供的運(yùn)動(dòng)向量vec的置信級(jí)，而不必根據(jù)下游處理執(zhí)行校正處理，并且如果運(yùn)動(dòng)向量校正部分36估計(jì)運(yùn)動(dòng)向量vec的置信級(jí)是低，則運(yùn)動(dòng)向量校正部分36就能夠校正由直方圖部分35所提供的運(yùn)動(dòng)向量vec，并向外(圖1中的圖像處理部分11、圖像處理部分12和切換部分15)將其輸出。
照此，根據(jù)這個(gè)實(shí)施例的運(yùn)動(dòng)檢測(cè)部分14能夠輸出匹配那些鄰近像素的像素的運(yùn)動(dòng)向量vec(嚴(yán)格來說，所校正的運(yùn)動(dòng)向量vec′或運(yùn)動(dòng)向量vec″)。其結(jié)果是，例如圖1中的圖像處理部分12能夠準(zhǔn)確地防止在持續(xù)型顯示設(shè)備2中發(fā)生運(yùn)動(dòng)混亂(特別是，因隨動(dòng)觀看而造成的運(yùn)動(dòng)混亂)，同時(shí)也防止了失配鄰近像素。
現(xiàn)在，將參照?qǐng)D20中的流程圖描述根據(jù)這個(gè)實(shí)施例的圖像處理設(shè)備1(圖1中所示)所進(jìn)行的圖像處理。
首先，在步驟S1中，所述圖像處理設(shè)備1輸入目標(biāo)顯示幀的圖像數(shù)據(jù)。更詳細(xì)地說，將目標(biāo)顯示幀的圖像數(shù)據(jù)輸入到圖像處理部分11、圖像處理部分12、參考圖像存儲(chǔ)部分13和運(yùn)動(dòng)檢測(cè)部分14。
在步驟S2中，所述圖像處理設(shè)備1(圖像處理部分11、圖像處理部分12、和運(yùn)動(dòng)檢測(cè)部分14，等等)從構(gòu)成目標(biāo)顯示幀的像素之中設(shè)置感興趣像素。
在步驟S3中，所述運(yùn)動(dòng)檢測(cè)部分14將目標(biāo)顯示幀的圖像數(shù)據(jù)與存儲(chǔ)在參考圖像存儲(chǔ)部分13中的參考圖像(先前的幀)的圖像數(shù)據(jù)進(jìn)行比較，以計(jì)算感興趣像素的運(yùn)動(dòng)向量vec，根據(jù)需要校正運(yùn)動(dòng)向量vec，并將它提供給圖像處理部分11、圖像處理部分12和切換部分15。
在下文中，由運(yùn)動(dòng)檢測(cè)部分14所進(jìn)行的上述處理(在步驟S3中的處理)稱為″運(yùn)動(dòng)向量計(jì)算處理″。稍后將參照?qǐng)D21中的流程圖描述″運(yùn)動(dòng)向量計(jì)算處理″的細(xì)節(jié)。
在步驟S4中，所述圖像處理設(shè)備1(圖像處理部分11、圖像處理部分12、切換部分15，等等)判斷感興趣像素的運(yùn)動(dòng)向量vec的數(shù)值是否等于閾值或大于閾值。
嚴(yán)格來說，在步驟S4到S7中的處理使用了作為″運(yùn)動(dòng)向量計(jì)算處理″的結(jié)果而輸出的感興趣像素的校正后的運(yùn)動(dòng)向量vec′或運(yùn)動(dòng)向量vec″，所述″運(yùn)動(dòng)向量計(jì)算處理″是在步驟S3中由運(yùn)動(dòng)檢測(cè)部分14進(jìn)行的處理。由于對(duì)于步驟S4到S7中的處理的說明而言不必彼此區(qū)分開運(yùn)動(dòng)向量vec′和運(yùn)動(dòng)向量vec″，因而運(yùn)動(dòng)向量v′和v″都是指運(yùn)動(dòng)向量vec。
如果在步驟S4中判定運(yùn)動(dòng)向量vec的數(shù)值低于閾值(運(yùn)動(dòng)向量vec的數(shù)值不等于或不高于閾值)，即如果感興趣像素沒有運(yùn)動(dòng)，那么切換部分15就將其輸入切換到圖像處理部分11。其結(jié)果是，在步驟S5中，所述圖像處理部分11對(duì)感興趣像素施加預(yù)定的圖像處理以便校正感興趣像素的像素值，并且經(jīng)由切換部分15將校正后的像素值提供給顯示控制部分16。
相反，如果在步驟S4中判定運(yùn)動(dòng)向量vec的數(shù)值等于閾值或大于閾值，即如果感興趣像素正在運(yùn)動(dòng)，那么切換部分15就將其輸入切換到圖像處理部分12(校正部分22)。
在此時(shí)，在步驟S6中，所述階躍邊沿檢測(cè)部分21計(jì)算感興趣像素的像素值與在預(yù)定方向(在這個(gè)示例中，是空間方向X或與之相反的方向，無論根據(jù)運(yùn)動(dòng)檢測(cè)部分24所提供的運(yùn)動(dòng)向量vec的方向(正方向或負(fù)方向)確定是哪一個(gè)方向)上鄰近于感興趣像素的像素的像素值之間的差值。然后，所述階躍邊沿檢測(cè)部分21把計(jì)算出的差值和感興趣像素的像素值提供給校正部分22。
在步驟S7中，所述校正部分22根據(jù)運(yùn)動(dòng)檢測(cè)部分14所提供的感興趣像素的運(yùn)動(dòng)向量和階躍邊沿檢測(cè)部分21所提供的差值來校正階躍邊沿檢測(cè)部分21所提供的感興趣像素的像素值，并且經(jīng)由切換部分15將校正后的像素值提供給顯示控制部分16。
在步驟S8中，所述顯示控制部分16向持續(xù)型顯示設(shè)備2輸出由圖像處理部分11或圖像處理部分12(根據(jù)需要，通過將像素值轉(zhuǎn)換成與持續(xù)型顯示設(shè)備2相對(duì)應(yīng)的信號(hào))經(jīng)由切換部分15所提供的感興趣像素的像素值。換言之，所述顯示控制部分16向持續(xù)型顯示設(shè)備2輸出感興趣像素的像素值以作為與持續(xù)型顯示設(shè)備2的顯示元素之中的感興趣像素相對(duì)應(yīng)的顯示元素的目標(biāo)電平。
在步驟S9中，所述圖像處理設(shè)備1判斷所有像素的像素值是否都已被輸出。
如果在步驟S9中判定一些像素的像素值尚未被輸出，那么所述流程就返回到步驟S2以重復(fù)后續(xù)的處理。更具體而言，將構(gòu)成目標(biāo)顯示幀的像素之中的其中一個(gè)未處理的像素設(shè)置為感興趣像素，并且校正新的感興趣像素的像素值(包括0校正)并將其輸出到持續(xù)型顯示設(shè)備2。
重復(fù)上述處理直到把構(gòu)成目標(biāo)顯示幀的所有像素的像素值傳遞到持續(xù)型顯示設(shè)備2為止。如果在步驟S9中判定所有像素的像素值都已被輸出，那么所述流程就前進(jìn)至步驟S10。
在此時(shí)，所述持續(xù)型顯示設(shè)備2向構(gòu)成屏幕的顯示元素(例如，液晶)施加與所提供的像素值(目標(biāo)電平)相對(duì)應(yīng)的電平的電壓，并且維持電壓的電平直到指定后續(xù)幀的顯示為止(直到提供構(gòu)成后續(xù)幀的所有像素的像素值為止)。簡言之，每個(gè)顯示元素都顯示并持續(xù)相應(yīng)的像素。
在步驟S10中，所述圖像處理設(shè)備1判斷構(gòu)成運(yùn)動(dòng)圖像的所有幀是否都已被處理。
如果在步驟S10中判定一些幀尚未被處理，那么所述流程就返回到步驟S1，在其中將后續(xù)幀的圖像數(shù)據(jù)作為目標(biāo)顯示幀的圖像數(shù)據(jù)加以輸入并且重復(fù)相同的處理。
最后，如果構(gòu)成運(yùn)動(dòng)圖像的幀之中構(gòu)成最后一幀的所有像素的像素值都被校正(包括0校正)并被輸出到持續(xù)型顯示設(shè)備2，那么在步驟S10中就判定所有幀都已被處理，并且圖像處理設(shè)備1進(jìn)行的圖像處理結(jié)束。
盡管在圖20的示例中，所述圖像處理設(shè)備1分別地將構(gòu)成目標(biāo)顯示幀的像素的像素值(校正后的像素值)輸出到持續(xù)型顯示設(shè)備2，但是所述圖像處理設(shè)備1也可以全部同時(shí)輸出構(gòu)成目標(biāo)顯示幀的所有像素的校正后的像素值(作為目標(biāo)顯示幀的圖像信號(hào))。
現(xiàn)在，將參照?qǐng)D21中的流程圖來描述圖2中的運(yùn)動(dòng)檢測(cè)部分14所進(jìn)行的″運(yùn)動(dòng)向量計(jì)算處理″(圖20的步驟S3中的處理)。
首先在步驟S21中，所述亮度梯度檢測(cè)部分33檢測(cè)感興趣像素周圍的亮度梯度″slope″并且將它提供給運(yùn)動(dòng)向量校正部分36。
在步驟S22中，所述模板匹配部分34計(jì)算包括感興趣像素在內(nèi)的每一個(gè)像素(例如，構(gòu)成圖11中的區(qū)域95的像素)處的候選運(yùn)動(dòng)向量″pvec″，并將它們提供給直方圖部分35。
此外，在步驟S23中，所述模板匹配部分34生成表示感興趣像素的運(yùn)動(dòng)向量vec是否應(yīng)該得到校正的控制信號(hào)″flag″，并將它提供給運(yùn)動(dòng)向量校正部分36。
在步驟S24中，所述直方圖部分35生成包括感興趣像素在內(nèi)的像素的候選運(yùn)動(dòng)向量″pvec″的直方圖(例如，圖12中的直方圖)，將具有最高頻率的候選運(yùn)動(dòng)向量″pvec″確定為感興趣像素的運(yùn)動(dòng)向量vec，并且將它提供給運(yùn)動(dòng)向量校正部分36。
在步驟S25中，圖13中的運(yùn)動(dòng)向量校正部分36A的下游處理校正部分101按照第一種校正方法來校正感興趣像素的運(yùn)動(dòng)向量vec，并將所得到的運(yùn)動(dòng)向量vec′提供給切換部分102。
如果圖2中的運(yùn)動(dòng)向量校正部分36是以圖19中的運(yùn)動(dòng)向量校正部分36C的形式實(shí)現(xiàn)的，那么就省略步驟S25中的處理。
在另一方面，如果圖2中的運(yùn)動(dòng)向量校正部分36是以圖18中的運(yùn)動(dòng)向量校正部分36B的形式實(shí)現(xiàn)的，那么就執(zhí)行步驟S25中的處理，并且省略稍后將要描述的步驟S26到S28中的處理。
如上所述，取決于圖2中的運(yùn)動(dòng)向量校正部分36的結(jié)構(gòu)，″運(yùn)動(dòng)向量計(jì)算處理″的操作略微不同。換言之，圖21是舉例說明當(dāng)圖2中的運(yùn)動(dòng)向量校正部分36是以圖13中的運(yùn)動(dòng)向量校正部分36A的形式實(shí)現(xiàn)時(shí)，″運(yùn)動(dòng)向量計(jì)算處理″的一個(gè)示例的流程圖。
當(dāng)步驟S25中的上述處理完成時(shí)，所述流程前進(jìn)至步驟S26。
在步驟S26中，圖13中的置信級(jí)估計(jì)部分103根據(jù)經(jīng)步驟S23中的處理、由模板匹配部分34生成的控制信號(hào)″flag″和經(jīng)步驟S21中的處理、由亮度梯度檢測(cè)部分33檢測(cè)出的亮度梯度″slope″來估計(jì)運(yùn)動(dòng)向量vec的置信級(jí)。
在步驟S27中，所述置信級(jí)估計(jì)部分103根據(jù)在步驟S26中的處理結(jié)果來判斷運(yùn)動(dòng)向量vec的置信級(jí)是否低。
如果置信級(jí)估計(jì)部分103在步驟S27中判定運(yùn)動(dòng)向量vec的置信級(jí)為高(不低)，則它就將切換部分102的輸出目的地切換到外部的LPF 37，并且所述流程前進(jìn)至步驟S29。
在步驟S29中，所述切換部分102從運(yùn)動(dòng)檢測(cè)部分14那里經(jīng)由LPF 37向外(圖1中的圖像處理設(shè)備11、圖像處理設(shè)備12和切換部分15)，輸出經(jīng)過在步驟S25的處理由下游處理校正部分101按照第一校正方法校正后的運(yùn)動(dòng)向量vec′。
相反，如果置信級(jí)估計(jì)部分103在步驟S27中判定運(yùn)動(dòng)向量vec的置信級(jí)低，則它就將切換部分102的輸出目的地切換到置信級(jí)校正部分104，并且所述流程前進(jìn)至步驟S28。
在這種情況下，將經(jīng)過在步驟S25中的處理由下游處理校正部分101按照第一種校正方法校正后的運(yùn)動(dòng)向量vec′提供給置信級(jí)校正部分104。在步驟S28中，所述置信級(jí)校正部分104進(jìn)一步按照第二種校正方法來校正感興趣像素的運(yùn)動(dòng)向量vec′(由下游處理校正部分101校正后的)，并且在步驟S29中經(jīng)由LPF 37從運(yùn)動(dòng)檢測(cè)部分14那里向外輸出校正后的運(yùn)動(dòng)向量vec″。
如果照此經(jīng)過步驟S29中的處理輸出校正后的感興趣像素的運(yùn)動(dòng)向量vec′或運(yùn)動(dòng)向量vec″，那么″運(yùn)動(dòng)向量計(jì)算處理″就結(jié)束。
應(yīng)用本發(fā)明的圖像處理設(shè)備不限于圖1中所示的結(jié)構(gòu)，并且能夠根據(jù)各種實(shí)施例加以實(shí)現(xiàn)。
應(yīng)用本發(fā)明的圖像處理設(shè)備能夠以例如圖22中所示的結(jié)構(gòu)的形式加以實(shí)現(xiàn)。圖22舉例說明了根據(jù)另一個(gè)實(shí)施例的圖像處理設(shè)備的示例性結(jié)構(gòu)。圖22中與圖1中的那些組件相同的組件都用相同的標(biāo)號(hào)來表示。
根據(jù)這個(gè)實(shí)施例的圖像處理設(shè)備151基本上與圖1中的圖像處理設(shè)備1具有相同的結(jié)構(gòu)和功能。所述圖像處理設(shè)備151包括從圖像處理部分11到顯示控制部分16的那些部分，這基本上都與圖1中的相同。
在圖1中的圖像處理設(shè)備1中，將來自于運(yùn)動(dòng)檢測(cè)部分14的檢測(cè)結(jié)果(運(yùn)動(dòng)向量vec)提供給階躍邊沿檢測(cè)部分21。然而，在圖22中的圖像處理設(shè)備151中，不把來自于運(yùn)動(dòng)檢測(cè)部分14的檢測(cè)結(jié)果提供給階躍邊沿檢測(cè)部分21，而是把來自于階躍邊沿檢測(cè)部分21的檢測(cè)結(jié)果提供給運(yùn)動(dòng)檢測(cè)部分14和圖像處理部分11。
由于上述結(jié)構(gòu)的關(guān)系，所述圖像處理設(shè)備151按照如下所述那樣進(jìn)行操作。
在圖像處理設(shè)備151中，所述階躍檢測(cè)部分21從構(gòu)成預(yù)定幀的像素之中檢測(cè)出與階躍邊沿相對(duì)應(yīng)的像素，并且將檢測(cè)結(jié)果提供給運(yùn)動(dòng)檢測(cè)14和圖像處理部分11，以及校正部分22。
其結(jié)果是，所述運(yùn)動(dòng)檢測(cè)部分14能夠?qū)⑵涮幚硎┘拥诫A躍邊沿檢測(cè)部分21所檢測(cè)出的像素(與階躍邊沿相對(duì)應(yīng)的像素)。換句話說，所述運(yùn)動(dòng)檢測(cè)部分14檢測(cè)階躍邊沿檢測(cè)部分21所檢測(cè)出的階躍邊沿是否正在運(yùn)動(dòng)。
此外，在階躍邊沿檢測(cè)部分21所檢測(cè)出的像素(與階躍邊沿相對(duì)應(yīng)的像素)之中，圖像處理部分11不將其處理施加到由運(yùn)動(dòng)檢測(cè)部分發(fā)現(xiàn)其運(yùn)動(dòng)著的像素。更具體而言，所述圖像處理部分11不將其處理施加到與運(yùn)動(dòng)著的階躍邊沿相對(duì)應(yīng)的像素，而將其處理施加到除那些與運(yùn)動(dòng)著的階躍邊沿相對(duì)應(yīng)的像素以外的像素。
如上所述，在圖22中的圖像處理設(shè)備151中，讓每個(gè)像素都經(jīng)歷圖像處理部分11或者圖像處理部分12進(jìn)行的圖像處理。換言之，讓一幀僅僅經(jīng)歷一次圖像處理操作。此外，僅僅將運(yùn)動(dòng)檢測(cè)部分14所進(jìn)行的處理施加到與階躍邊沿相對(duì)應(yīng)的像素。因此，能夠降低圖像處理設(shè)備151所進(jìn)行處理的總量。
上述處理序列不僅能夠利用硬件來執(zhí)行而且也能夠利用軟件來執(zhí)行。
如果使用軟件來執(zhí)行上述處理序列，那么就能夠利用例如如圖23所示的個(gè)人計(jì)算機(jī)來實(shí)現(xiàn)圖1中的圖像處理設(shè)備1和圖22中的圖像處理設(shè)備151。
在圖23中，CPU(中央處理單元)201根據(jù)存儲(chǔ)在ROM(只讀存儲(chǔ)器)202的程序或從存儲(chǔ)單元208加載到RAM(隨機(jī)存取存儲(chǔ)器)203中的程序來執(zhí)行各種處理。所述RAM 203還存儲(chǔ)CPU 201所需的數(shù)據(jù)以便執(zhí)行各種處理。
所述CPU 201、ROM 202和RAM 203都經(jīng)由總線204互連。輸入/輸出接口205也連接于總線204。
輸入單元206包括例如鍵盤和鼠標(biāo)；輸出單元207包括例如LCD；存儲(chǔ)單元208包括例如硬盤；以及通信單元209包括例如連接于輸入/輸出接口205的調(diào)制解調(diào)器和終端適配器。所述通信單元209經(jīng)由包括因特網(wǎng)在內(nèi)的網(wǎng)絡(luò)來執(zhí)行與其它信息處理設(shè)備(未示出)通信。
在這種情況下，輸出單元207本身可以是持續(xù)型顯示設(shè)備，或者可以根據(jù)需要將外部持續(xù)型顯示設(shè)備2(在圖1中)連接到與輸入/輸出接口205相連的連接部分(未示出)。
根據(jù)需要，將驅(qū)動(dòng)器210連接于輸入/輸出接口205。將包括例如磁盤、光盤、磁光盤或半導(dǎo)體存儲(chǔ)器的可拆卸介質(zhì)211安裝到驅(qū)動(dòng)器210上以便從驅(qū)動(dòng)器210中讀取計(jì)算機(jī)程序和在存儲(chǔ)單元208中存儲(chǔ)計(jì)算機(jī)程序。
如果處理的序列是利用軟件實(shí)現(xiàn)的，那么就將構(gòu)成該軟件的程序從網(wǎng)絡(luò)或記錄介質(zhì)安裝到內(nèi)建于專用硬件中的計(jì)算機(jī)或者例如安裝到需要安裝程序以執(zhí)行相應(yīng)功能的通用個(gè)人計(jì)算機(jī)。
如圖23所示，如果這類程序是從用戶的計(jì)算機(jī)獨(dú)立提供的話，那么包含程序的記錄介質(zhì)可以是可拆卸介質(zhì)211，比如封裝(package)介質(zhì)，包括磁盤(包括軟磁盤)；光盤(包括光盤只讀存儲(chǔ)器，即CD-ROM，和數(shù)字通用盤，即DVD)；磁光盤(包括迷你盤，即MD)；或半導(dǎo)體存儲(chǔ)器。如果在用戶的計(jì)算機(jī)上預(yù)先安裝記錄介質(zhì)上的程序的話，則所述記錄介質(zhì)可以是ROM 202或存儲(chǔ)單元208中的硬盤。
在本發(fā)明中，可以或可以不必根據(jù)所描述的步驟的順序按時(shí)間依次來執(zhí)行記錄在記錄介質(zhì)上的程序的步驟。此外，這些步驟可以并行或相互獨(dú)立的執(zhí)行。
盡管在上面描述的實(shí)施例中構(gòu)成幀的其中一個(gè)預(yù)定的像素對(duì)應(yīng)于構(gòu)成的持續(xù)型顯示設(shè)備2的屏幕的其中一個(gè)顯示元素(對(duì)于LCD設(shè)備而言是液晶)，但是一個(gè)像素可以對(duì)應(yīng)于多個(gè)顯示元素。換句話說，多個(gè)顯示元素可以顯示一個(gè)像素。
此外，盡管在上面描述的實(shí)施例中圖像處理設(shè)備生成平行于空間方向X的運(yùn)動(dòng)向量，但是圖像處理設(shè)備也能夠通過與上述一系列處理基本上相同的處理來生成平行于空間方向Y的運(yùn)動(dòng)向量或在平行于空間方向X和空間方向Y的二維平面上的任意方向上的運(yùn)動(dòng)向量。
權(quán)利要求
1.一種圖像處理設(shè)備，包括候選者生成裝置，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定裝置，用于從感興趣像素上的候選運(yùn)動(dòng)向量和候選者生成裝置所生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；亮度改變計(jì)算裝置，用于計(jì)算在感興趣像素周圍的亮度變化的程度；和校正裝置，用于根據(jù)亮度改變計(jì)算裝置和候選者生成裝置進(jìn)行處理的結(jié)果來估計(jì)運(yùn)動(dòng)向量確定裝置所確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定置信級(jí)低則校正該運(yùn)動(dòng)向量。
2.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備，其中，如果亮度改變計(jì)算裝置所計(jì)算出的亮度變化的程度低于閾值，則校正裝置就判定運(yùn)動(dòng)向量的置信級(jí)低并且校正該運(yùn)動(dòng)向量。
3.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備，其中，候選者生成裝置檢測(cè)出第一訪問單元上的第一個(gè)像素以作為第二訪問單元上的第二個(gè)像素的對(duì)應(yīng)像素，所述第二像個(gè)素被設(shè)置在與感興趣像素的位置相對(duì)應(yīng)的位置上，并且生成從感興趣像素開始并在第一個(gè)像素上終止的向量以作為感興趣像素上的候選運(yùn)動(dòng)向量。
4.根據(jù)權(quán)利要求3所述的圖像處理設(shè)備，其中，如果判定第一訪問單元包括對(duì)于對(duì)應(yīng)像素來講的多個(gè)候選者或者作為對(duì)應(yīng)像素的第一個(gè)像素的置信級(jí)低，則候選者生成裝置就給校正裝置提供表示用于校正該運(yùn)動(dòng)向量的命令的第一信息；并且如果校正裝置從候選者生成裝置那里接收第一信息，則校正裝置就判定運(yùn)動(dòng)向量的置信級(jí)低并且校正該運(yùn)動(dòng)向量。
5.根據(jù)權(quán)利要求4所述的圖像處理設(shè)備，其中，如果感興趣像素被包含在對(duì)于對(duì)應(yīng)像素來講的多個(gè)候選者中，則候選者生成裝置給校正裝置提供表示感興趣像素被包含在對(duì)于對(duì)應(yīng)像素來講的多個(gè)候選者中的第二信息；并且如果校正裝置從候選者生成裝置那里接收第二信息，則校正裝置就判定運(yùn)動(dòng)向量的置信級(jí)低并且將運(yùn)動(dòng)向量校正為0向量。
6.一種圖像處理方法，包括候選者生成步驟，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；亮度改變計(jì)算步驟，用于計(jì)算在感興趣像素周圍的亮度變化的程度；以及校正步驟，用于根據(jù)在亮度改變計(jì)算步驟和候選者生成步驟中進(jìn)行處理的結(jié)果來估計(jì)運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定置信級(jí)低則校正該運(yùn)動(dòng)向量。
7.一種計(jì)算機(jī)可執(zhí)行程序，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素并且將圖像處理施加到感興趣像素，所述程序包括候選者生成步驟，用于將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；亮度改變計(jì)算步驟，用于計(jì)算在感興趣像素周圍的亮度變化的程度；校正步驟，用于根據(jù)在亮度改變計(jì)算步驟和候選者生成步驟中進(jìn)行處理的結(jié)果來估計(jì)在運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定置信級(jí)低則校正該運(yùn)動(dòng)向量。
8.一種圖像處理設(shè)備，包括候選者生成裝置，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定裝置，用于從感興趣像素上的候選運(yùn)動(dòng)向量和候選者生成裝置所生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；校正裝置，用于校正運(yùn)動(dòng)向量確定裝置所確定的運(yùn)動(dòng)向量；和處理執(zhí)行裝置，用于利用校正裝置所校正的運(yùn)動(dòng)向量來執(zhí)行預(yù)定處理，其中校正裝置根據(jù)處理執(zhí)行裝置進(jìn)行的預(yù)定處理的特征來按第一種方法校正該運(yùn)動(dòng)向量。
9.根據(jù)權(quán)利要求8所述的圖像處理設(shè)備，還包括亮度改變計(jì)算裝置，用于計(jì)算在感興趣像素周圍的亮度變化的程度，其中校正裝置根據(jù)亮度改變計(jì)算裝置和候選者生成裝置進(jìn)行處理的結(jié)果來估計(jì)運(yùn)動(dòng)向量確定裝置所確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定運(yùn)動(dòng)向量的置信級(jí)低則進(jìn)一步按第二種方法來校正按第一種方法所校正的運(yùn)動(dòng)向量。
10.一種由信息處理設(shè)備執(zhí)行的圖像處理方法，所述方法包括候選者生成步驟，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；校正步驟，用于校正在運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量；以及處理控制步驟，用于控制信息處理設(shè)備利用在校正步驟中校正的運(yùn)動(dòng)向量來執(zhí)行預(yù)定處理，其中，在校正步驟中，根據(jù)在處理控制步驟中由圖像處理設(shè)備進(jìn)行的預(yù)定處理的特征來按校正方法校正該運(yùn)動(dòng)向量。
11.一種計(jì)算機(jī)可執(zhí)行程序，用于控制處理執(zhí)行設(shè)備以供將預(yù)定處理施加到構(gòu)成運(yùn)動(dòng)圖像的多個(gè)訪問單元的其中預(yù)定的一個(gè)，其中所述預(yù)定處理使用預(yù)定訪問單元上的每一個(gè)像素上的運(yùn)動(dòng)向量，所述程序包括候選者生成步驟，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定步驟，用于從感興趣像素上的候選運(yùn)動(dòng)向量和在候選者生成步驟中生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；校正步驟，用于校正在運(yùn)動(dòng)向量確定步驟中確定的運(yùn)動(dòng)向量；以及處理控制步驟，用于控制處理執(zhí)行設(shè)備利用在校正步驟中校正的運(yùn)動(dòng)向量來執(zhí)行預(yù)定處理，其中，在校正步驟中，根據(jù)在處理控制步驟中由處理執(zhí)行設(shè)備進(jìn)行的預(yù)定處理的特征來按校正方法校正該運(yùn)動(dòng)向量。
12.一種圖像處理設(shè)備，包括候選者生成單元，用于從構(gòu)成第一訪問單元的像素之中將預(yù)定像素設(shè)置為感興趣像素并且將第一訪問單元與第一訪問單元前的第二訪問單元進(jìn)行比較以便生成感興趣像素上的候選運(yùn)動(dòng)向量；運(yùn)動(dòng)向量確定單元，用于從感興趣像素上的候選運(yùn)動(dòng)向量和候選者生成單元所生成的鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量；亮度改變計(jì)算單元，用于計(jì)算在感興趣像素周圍的亮度變化的程度；和校正單元，用于根據(jù)亮度改變計(jì)算單元和候選者生成單元進(jìn)行處理的結(jié)果來估計(jì)運(yùn)動(dòng)向量確定單元所確定的運(yùn)動(dòng)向量的置信級(jí)，并且如果判定置信級(jí)低則校正該運(yùn)動(dòng)向量。
全文摘要
直方圖部分從由模板匹配部分提供的感興趣像素上的候選運(yùn)動(dòng)向量和鄰近感興趣像素的像素上的候選運(yùn)動(dòng)向量之中將具有最高頻率的候選運(yùn)動(dòng)向量確定為感興趣像素上的運(yùn)動(dòng)向量，并將它提供給運(yùn)動(dòng)向量校正部分。運(yùn)動(dòng)向量校正部分根據(jù)由亮度梯度檢測(cè)部分檢測(cè)出的感興趣像素周圍的亮度梯度和由模板匹配部分所提供的表示是否應(yīng)該執(zhí)行校正的控制信號(hào)，來估計(jì)由直方圖部分提供的運(yùn)動(dòng)向量的置信級(jí)。如果判定運(yùn)動(dòng)向量的置信級(jí)低則校正該運(yùn)動(dòng)向量。
文檔編號(hào)G06T5/00GK1691130SQ20051007414
公開日2005年11月2日 申請(qǐng)日期2005年2月25日 優(yōu)先權(quán)日2004年4月20日
發(fā)明者五味信一郎, 西亨, 橫山一樹, 淺野光康, 緒形昌美, 上田和彥 申請(qǐng)人:索尼株式會(huì)社