專利名稱：圖像處理裝置以及圖像處理方法
技術(shù)領(lǐng)域：
本發(fā)明涉及從通過按照時(shí)間序列取得的多個(gè)圖像構(gòu)成的時(shí)間序列圖像中提取摘要(digest)圖像組的圖像處理裝置以及圖像處理方法。
背景技術(shù)：
公知有如下的技術(shù)從運(yùn)動(dòng)圖像、或者連續(xù)拍攝的靜止圖像列這樣的時(shí)間序列圖 像中，提取例如場(chǎng)景變化的位置等有用的圖像作為摘要圖像組。如果提示所提取的摘要圖 像組，則用戶能夠在短時(shí)間內(nèi)掌握時(shí)間序列圖像的整體內(nèi)容而不用閱覽時(shí)間序列圖像中所 包含的所有圖像，能夠簡單地得到期望的場(chǎng)景或圖像。作為摘要圖像組的提取方法，一般熟知有以下的方法計(jì)算相鄰的圖像間的變化 量，根據(jù)所計(jì)算的變化量提取變化較大的圖像。例如，在日本特開2006-41794號(hào)公報(bào)中，通 過將相鄰的圖像間(幀間)的變化量與預(yù)定的閾值進(jìn)行比較，提取在幀間產(chǎn)生了閾值以上 的變化的變化點(diǎn)。例如在處理長時(shí)間的時(shí)間序列圖像的情況等時(shí)，有圖像間的變化較小的狀態(tài)長期 持續(xù)的情況。在這種圖像間的變化平緩的時(shí)間序列區(qū)間中，相鄰的圖像間的變化比較小，卻 能產(chǎn)生在其開頭和后方圖像不相同的情況。但是，如日本特開2006-41794號(hào)公報(bào)那樣，在 根據(jù)相鄰的圖像間的變化量提取摘要圖像組的方法中，不能考慮前述那樣的時(shí)間序列區(qū)間 中的變化來提取摘要圖像組。

發(fā)明內(nèi)容
本發(fā)明一個(gè)方式涉及的圖像處理裝置從由按照時(shí)間序列取得的多個(gè)圖像構(gòu)成的 時(shí)間序列圖像中提取摘要圖像組，其特征在于，上述圖像處理裝置具有圖像間變化量計(jì)算 部，其對(duì)構(gòu)成所述時(shí)間序列圖像的每個(gè)圖像，計(jì)算與時(shí)間序列順序鄰近的鄰近圖像間的變 化量來作為圖像間變化量；一次摘要圖像組提取部，其根據(jù)所述圖像間變化量，從所述時(shí)間 序列圖像中提取一次摘要圖像組；區(qū)間變化量計(jì)算部，其計(jì)算由構(gòu)成所述一次摘要圖像組 的各圖像所劃分的所述時(shí)間序列圖像的各時(shí)間序列區(qū)間中的區(qū)間變化量；以及摘要圖像組 提取部，其根據(jù)所述圖像間變化量和所述區(qū)間變化量，從所述時(shí)間序列圖像中提取摘要圖 像組。本發(fā)明的另一個(gè)方式涉及的圖像處理方法，其從由按照時(shí)間序列取得的多個(gè)圖像 構(gòu)成的時(shí)間序列圖像中提取摘要圖像組，其特征在于，上述圖像處理方法包括圖像間變化 量計(jì)算步驟，對(duì)構(gòu)成所述時(shí)間序列圖像的每個(gè)圖像，計(jì)算其與時(shí)間序列順序鄰近的鄰近圖 像之間的變化量作為圖像間變化量；一次摘要圖像組提取步驟，根據(jù)所述圖像間變化量，從 所述時(shí)間序列圖像中提取一次摘要圖像組；區(qū)間變化量計(jì)算步驟，計(jì)算由構(gòu)成所述一次摘 要圖像組的各圖像所劃分的所述時(shí)間序列圖像的各時(shí)間序列區(qū)間中的區(qū)間變化量；以及摘 要圖像組提取步驟，根據(jù)所述圖像間變化量和所述區(qū)間變化量，從所述時(shí)間序列圖像中提 取摘要圖像組。
—并參照附圖來閱讀如下的本發(fā)明的詳細(xì)說明，可進(jìn)一步對(duì)如上所述內(nèi)容以及本發(fā)明的其他目的、特征、優(yōu)點(diǎn)和技術(shù)上及產(chǎn)業(yè)上的意義加深理解。


圖1是表示包含圖像處理裝置的圖像處理系統(tǒng)的整體構(gòu)成的概略示意圖。圖2是說明實(shí)施方式1的圖像處理裝置的功能構(gòu)成的框圖。圖3是表示實(shí)施方式1的圖像處理裝置進(jìn)行的處理步驟的整體流程圖。圖4是表示構(gòu)成時(shí)間序列圖像的各圖像的圖像間變化量的一個(gè)例子的圖。圖5是表示一次摘要圖像組提取處理的詳細(xì)處理步驟的流程圖。圖6是表示相對(duì)于圖4所示的各圖像的圖像間變化量的排序處理結(jié)果的圖。圖7是說明區(qū)間變化量的計(jì)算原理的說明圖。圖8是說明區(qū)間變化量的計(jì)算原理的說明圖。圖9是說明區(qū)間變化量的計(jì)算原理的說明圖。圖10是表示區(qū)間變化量計(jì)算處理的詳細(xì)處理步驟的流程圖。圖11是表示通過依照?qǐng)D6所示的排序處理結(jié)果所提取的一次摘要圖像組劃分的 各時(shí)間序列區(qū)間的區(qū)間變化量的一個(gè)例子的圖。圖12是表示摘要圖像組提取處理的詳細(xì)處理步驟的流程圖。圖13是結(jié)合圖4或圖6所示的各圖像的圖像間變化量和圖11所示的各時(shí)間序列 區(qū)間的區(qū)間變化量進(jìn)行的排序處理結(jié)果的圖。圖14是說明實(shí)施方式2的圖像處理裝置的功能構(gòu)成的框圖。圖15是表示實(shí)施方式2的圖像處理裝置進(jìn)行的處理步驟的整體流程圖。圖16是表示使用了實(shí)施方式的計(jì)算機(jī)系統(tǒng)的構(gòu)成的系統(tǒng)構(gòu)成圖。圖17是表示圖16的計(jì)算機(jī)系統(tǒng)中的主體部的構(gòu)成的框圖。
具體實(shí)施例方式下面，參照附圖，以處理時(shí)間序列圖像的圖像處理裝置為例說明用于實(shí)施本發(fā)明 的最佳方式，處理時(shí)間序列圖像是由膠囊內(nèi)窺鏡一邊在消化管體內(nèi)管腔內(nèi)移動(dòng)一邊連續(xù)拍 攝到的。并且，本發(fā)明不限于該實(shí)施方式。另外，在各附圖的描述中，對(duì)相同部分標(biāo)以同一 符號(hào)進(jìn)行表示。首先，對(duì)實(shí)施方式1進(jìn)行說明。圖1是表示包含實(shí)施方式1的圖像處理裝置的圖 像處理系統(tǒng)的整體構(gòu)成的概略示意圖。如圖1所示，圖像處理系統(tǒng)由膠囊內(nèi)窺鏡3、接收裝 置5和圖像處理裝置10等構(gòu)成。膠囊內(nèi)窺鏡3對(duì)被檢體1內(nèi)部的圖像進(jìn)行拍攝。接收裝 置5接收從膠囊內(nèi)窺鏡3無線發(fā)送的圖像。圖像處理裝置10根據(jù)通過接收裝置5接收的 圖像，對(duì)通過膠囊內(nèi)窺鏡3拍攝到的圖像進(jìn)行處理并顯示。對(duì)于接收裝置5與圖像處理裝 置10之間的圖像數(shù)據(jù)傳遞，可使用例如移動(dòng)式記錄介質(zhì)(可移動(dòng)記錄介質(zhì))7。膠囊內(nèi)窺鏡3具有攝像功能和無線功能等，從被檢體1的口部飲入從而導(dǎo)入被檢 體1內(nèi)部，一邊在體內(nèi)管腔內(nèi)移動(dòng)一邊依次拍攝圖像。然后，將拍攝到的圖像無線發(fā)送到體 外。在通過膠囊內(nèi)窺鏡3拍攝的圖像中，顯現(xiàn)有粘膜，或在體腔內(nèi)浮游的內(nèi)容物、泡等，并且 有時(shí)顯現(xiàn)病變等重要場(chǎng)所。此處，通過膠囊內(nèi)窺鏡3拍攝的圖像的張數(shù)用攝像速率(大約2 4幀/秒)X膠囊內(nèi)窺鏡的體內(nèi)停留時(shí)間(大約8小時(shí)=8X60X60秒)來概略示出， 為幾萬張以上。并且，通過膠囊內(nèi)窺鏡3拍攝的管腔內(nèi)圖像是在圖像內(nèi)的各像素上具有與 R(紅)、G(綠)、B(藍(lán))各波長分量對(duì)應(yīng)的像素值的彩色圖像。接收裝置5具有接收用天線Al An，該接收用天線Al An分散配置在與被檢體1內(nèi)的膠囊內(nèi)窺鏡3的通過路徑對(duì)應(yīng)的體表上的位置上。而且，接收裝置5經(jīng)由各接收 用天線Al An接收從膠囊內(nèi)窺鏡3無線發(fā)送來的圖像數(shù)據(jù)。該接收裝置5構(gòu)成為能自由 拆裝可移動(dòng)記錄介質(zhì)7，將接收到的圖像數(shù)據(jù)依次保存在可移動(dòng)記錄介質(zhì)7內(nèi)。這樣，由膠 囊內(nèi)窺鏡3拍攝的被檢體1內(nèi)部的圖像就會(huì)通過接收裝置5按照時(shí)間序列順序存儲(chǔ)在可移 動(dòng)記錄介質(zhì)7內(nèi)，從而保存為時(shí)間序列圖像。圖像處理裝置10用于由醫(yī)生等觀察、診斷通過膠囊內(nèi)窺鏡3拍攝的圖像，通過工 作站或個(gè)人計(jì)算機(jī)等通用計(jì)算機(jī)來實(shí)現(xiàn)。該圖像處理裝置10構(gòu)成為能自由拆裝可移動(dòng)記 錄介質(zhì)7，對(duì)保存在可移動(dòng)記錄介質(zhì)7內(nèi)的時(shí)間序列圖像進(jìn)行處理，在例如LCD或EL顯示器 等顯示器上適當(dāng)進(jìn)行顯示。圖2是說明實(shí)施方式1的圖像處理裝置10的功能構(gòu)成的框圖。在本實(shí)施方式1 中，圖像處理裝置10具有外部接口部11、操作部12、顯示部13、記錄部14、運(yùn)算部15以及 控制圖像處理裝置10整體的動(dòng)作的控制部16。 外部接口部11用于取得由膠囊內(nèi)窺鏡3拍攝且通過接收裝置5接收的圖像數(shù)據(jù)， 拆裝自如地安裝例如可移動(dòng)記錄介質(zhì)7，由讀取保存在該可移動(dòng)記錄介質(zhì)7中的時(shí)間序列 圖像的圖像數(shù)據(jù)的讀出裝置構(gòu)成。經(jīng)由該外部接口部11從可移動(dòng)記錄介質(zhì)7讀取的圖像數(shù) 據(jù)被記錄到記錄部14中，由運(yùn)算部15處理，并在控制部60的控制下顯示在顯示部13上。 此外，通過膠囊內(nèi)窺鏡3拍攝的圖像數(shù)據(jù)的取得不限于使用可移動(dòng)記錄介質(zhì)7的構(gòu)成。例 如，還可以構(gòu)成為代替可移動(dòng)記錄介質(zhì)7而另外設(shè)置服務(wù)器，將通過膠囊內(nèi)窺鏡3拍攝的時(shí) 間序列圖像的圖像數(shù)據(jù)預(yù)先保存在該服務(wù)器內(nèi)。這種情況下，通過用于與服務(wù)器連接的通 信裝置等來構(gòu)成外部接口部11。此外，也可以經(jīng)由該外部接口部11與服務(wù)器進(jìn)行數(shù)據(jù)通 信，從而取得圖像數(shù)據(jù)?；蛘?，還可以構(gòu)成為在記錄部14內(nèi)預(yù)先保存通過膠囊內(nèi)窺鏡3拍 攝的時(shí)間序列圖像的圖像數(shù)據(jù)，從記錄部14進(jìn)行讀取來取得圖像數(shù)據(jù)。操作部12例如通過鍵盤、鼠標(biāo)、觸摸面板和各種開關(guān)等實(shí)現(xiàn)，并將操作信號(hào)輸出 到控制部16。顯示部13通過IXD、EL顯示器等顯示裝置來實(shí)現(xiàn)，在控制部16的控制下，顯 示包含由膠囊內(nèi)窺鏡3拍攝的圖像的顯示畫面在內(nèi)的各種畫面。記錄部14通過能更新記錄的閃速存儲(chǔ)器等ROM或RAM這樣的各種IC存儲(chǔ)器、內(nèi) 置的或通過數(shù)據(jù)通信端子來連接的硬盤、CD-ROM等信息記錄介質(zhì)及其讀取裝置等來實(shí)現(xiàn)。 該記錄部14記錄有程序以及在該程序執(zhí)行中所使用的數(shù)據(jù)等，該程序用于使圖像處理裝 置10進(jìn)行動(dòng)作、實(shí)現(xiàn)該圖像處理裝置10具備的各種功能。例如，在記錄部14中，將經(jīng)由外 部接口部11取入的時(shí)間序列圖像的圖像數(shù)據(jù)，與用于識(shí)別其時(shí)間序列順序的圖像編號(hào)對(duì) 應(yīng)起來進(jìn)行記錄。另外，在記錄部14中，記錄有用于從時(shí)間序列圖像中提取摘要圖像組的 圖像處理程序141。運(yùn)算部15對(duì)通過膠囊內(nèi)窺鏡3拍攝的時(shí)間序列圖像進(jìn)行處理，進(jìn)行用于提取摘要 圖像組的各種運(yùn)算處理。該運(yùn)算部15具有圖像間變化量計(jì)算部151、一次摘要圖像組提取 部152、區(qū)間變化量計(jì)算部154和摘要圖像組提取部155。圖像間變化量計(jì)算部151計(jì)算構(gòu)成時(shí)間序列圖像的圖像間的變化量(以下，稱作“圖像間變化量”)。一次摘要圖像組提取部 152根據(jù)圖像間變化量所表示的變化的大小，從構(gòu)成時(shí)間序列圖像的圖像中提取設(shè)為一次 摘要圖像組的圖像。該一次摘要圖像組提取部152具有作為第二排序處理部的排序處理部 153，其按照?qǐng)D像間變化量的大小的順序來排序圖像間變化量。區(qū)間變化量計(jì)算部154對(duì)通 過構(gòu)成一次摘要圖像組的圖像劃分的時(shí)間序列圖像在各時(shí)間序列區(qū)間上的變化量(以下， 稱作“區(qū)間變化量”)進(jìn)行計(jì)算。摘要圖像組提取部155根據(jù)圖像間變化量和所述區(qū)間變化 量所表示的變化的大小，從時(shí)間序列圖像中提取作為摘要圖像組的圖像。該摘要圖像組提 取部155具有作為第一排序處理部的排序處理部156，其按照?qǐng)D像間變化量和區(qū)間變化量 的大小的順序來排序圖像間變化量和區(qū)間變化量?？刂撇?6通過CPU等硬件來實(shí)現(xiàn)。該控制部16根據(jù)經(jīng)由外部接口部11取得的圖像數(shù)據(jù)或從操作部12輸入的操作信號(hào)、記錄在記錄部14中的程序和數(shù)據(jù)等，對(duì)構(gòu)成圖像 處理裝置10的各部分進(jìn)行指示和數(shù)據(jù)轉(zhuǎn)送等，統(tǒng)一控制圖像處理裝置10整體的動(dòng)作。圖3是表示實(shí)施方式1的圖像處理裝置10進(jìn)行的處理步驟的整體流程圖。此處 所說明的處理是通過運(yùn)算部15執(zhí)行存儲(chǔ)在記錄部14中的圖像處理程序141來實(shí)現(xiàn)的。如圖3所示，首先，運(yùn)算部15取得處理對(duì)象范圍內(nèi)的時(shí)間序列圖像(步驟al)。通 過此處的處理，運(yùn)算部15經(jīng)由外部接口部11從可移動(dòng)記錄介質(zhì)7進(jìn)行讀取，讀取并取得記 錄在記錄部14中的處理對(duì)象范圍內(nèi)的時(shí)間序列圖像。此時(shí)，可以將從時(shí)間序列圖像的開頭 到最末尾的整個(gè)范圍設(shè)為處理對(duì)象范圍，也可以將一部分范圍設(shè)為處理對(duì)象范圍。該處理 對(duì)象范圍能夠依照例如用戶操作適當(dāng)進(jìn)行設(shè)定。接著，圖像間變化量計(jì)算部151計(jì)算構(gòu)成時(shí)間序列圖像的圖像間的變化量(圖像 間變化量)(步驟a3)。此處，圖像間變化量是表示與時(shí)間序列順序鄰近的鄰近圖像之間的 變化量的值，使用例如圖像間的相關(guān)值(相似度)。具體而言，圖像間變化量計(jì)算部151將 在步驟al中取得的構(gòu)成時(shí)間序列圖像的各圖像依次設(shè)為關(guān)注圖像，將時(shí)間序列順序?yàn)槔?如緊前面的圖像作為鄰近圖像來計(jì)算與該鄰近圖像之間的相關(guān)值，將該相關(guān)值作為關(guān)注圖 像的圖像間變化量。作為相關(guān)值的計(jì)算方法，例如作為對(duì)線性的亮度的變化(圖像的亮度值和對(duì)比度 的線性變化)沒有影響的方法，能夠使用已經(jīng)公知的歸一化互相關(guān)(參考=CG-ARTS協(xié)會(huì)， r ^ ” 9 >畫像処理，204P，正規(guī)化相互相関(數(shù)字圖像處理，第204頁，歸一化互相關(guān)) (NCC))。具體而言，依照下式(1)來計(jì)算圖像數(shù)據(jù)I、T的歸一化互相關(guān)(NCC)。其中，在下
<formula>formula see original document page 6</formula>
歸一化互相關(guān)的相關(guān)值取-ι. 00 1. 00間的值，該值越接近-ι. 00表示變化越 大，越接近1.00表示變化越小。此外，關(guān)于時(shí)間序列順序?yàn)樽畛醯膱D像，沒有時(shí)間序列順序 在前的圖像，因此將圖像間變化量設(shè)為預(yù)先設(shè)定的固定值(例如，-1.00)。圖4是表示由20張圖像構(gòu)成的時(shí)間序列圖像的各圖像的圖像間變化量的一個(gè)例子的圖，與分配給各圖像的 圖像編號(hào)一起示出。如圖4所示，按照每個(gè)圖像計(jì)算出的圖像間變化量的數(shù)據(jù)，與其圖像編 號(hào)對(duì)應(yīng)地記錄在記錄部14中。另外，此處示出了計(jì)算使用了歸一化互相關(guān)的相關(guān)值作為表示圖像間的變化的值 的方法，但是不限于此。例如，在亮度的變化造成的影響較少的圖像的情況下，也可以使用 圖像間一致時(shí)的值為0，且圖像間越是不同越能夠得到較大值的差異度。作為該差異度，例 如能夠列舉SSD(對(duì)應(yīng)的像素分量之差的平方和)或SAD(對(duì)應(yīng)的像素分量之差的絕對(duì)值 和)等(參考CG-ARTS協(xié)會(huì)，r 4 ”夕 > 畫像処理，203P，類似度(數(shù)字圖像處理，第203 頁，相似度))。接著，如圖3所示，一次摘要圖像組提取部152執(zhí)行一次摘要圖像組提取處理，根 據(jù)圖像間變化量，從時(shí)間序列圖像中提取一次摘要圖像組(步驟a5)。圖5是表示一次摘要 圖像組提取處理的詳細(xì)處理步驟的流程圖。在一次摘要圖像組提取處理中，首先，一次摘要圖像組提取部152的排序處理部 153按變化的大小對(duì)在圖3的步驟a3中計(jì)算的各圖像的圖像間變化量進(jìn)行排序處理(步 驟bl)。圖6是表示相對(duì)于圖4所示的各圖 像的圖像間變化量的排序處理結(jié)果的圖。如 上所述，在實(shí)施方式1中，計(jì)算各圖像的圖像間變化量來作為歸一化互相關(guān)的相關(guān)值，該值 取-1.00 1.00間的值，越接近-1.00變化越大。在此處的排序處理中，如圖6所示，按照 負(fù)值從大到小的順序進(jìn)行排序。接著，如圖5所示，一次摘要圖像組提取部152依照?qǐng)D像間變化量的排序處理結(jié) 果，按照變化從大到小的順序提取預(yù)定張數(shù)M的圖像作為一次摘要圖像組(步驟b3)。例 如，在將預(yù)定張數(shù)M設(shè)為5張時(shí)，在圖6的例子中，提取圖像編號(hào)為{1，5，17，2，19}的5張 圖像作為一次摘要圖像組。此時(shí)，針對(duì)所提取的各圖像標(biāo)上一次摘要編號(hào)。具體而言，針對(duì) 各圖像，按照其圖像編號(hào)從小到大的順序分配連續(xù)編號(hào)來設(shè)為一次摘要編號(hào)。此外，提取為 一次摘要圖像組的圖像的張數(shù)M可以預(yù)先設(shè)定為固定值，也可以根據(jù)時(shí)間序列圖像的張數(shù) 進(jìn)行設(shè)定。或者，還可以依照例如用戶的操作輸入等外部輸入而可變地設(shè)定。如果提取出 了一次摘要圖像組，則返回圖3的步驟a5，之后轉(zhuǎn)移到步驟a7。即，在步驟a7中，區(qū)間變化量計(jì)算部154執(zhí)行區(qū)間變化量計(jì)算處理，按照由構(gòu)成一 次摘要圖像組的圖像所劃分的時(shí)間序列圖像的每個(gè)時(shí)間序列區(qū)間來計(jì)算區(qū)間變化量。在該區(qū)間變化量計(jì)算處理中，區(qū)間變化量計(jì)算部154將構(gòu)成一次摘要圖像組的各 圖像依次設(shè)為關(guān)注一次摘要圖像。并且，區(qū)間變化量計(jì)算部154計(jì)算一次摘要編號(hào)為關(guān)注 一次摘要圖像的前一個(gè)的圖像(一次摘要前圖像)、和圖像編號(hào)為關(guān)注一次摘要圖像的前 一個(gè)(時(shí)間序列順序?yàn)榍耙粋€(gè))的圖像(區(qū)間后方圖像)間的變化，作為由一次摘要前圖 像和關(guān)注一次摘要圖像所劃分的時(shí)間序列區(qū)間中的區(qū)間變化量。此處，參照?qǐng)D7 圖9，對(duì)區(qū)間變化量的計(jì)算原理進(jìn)行說明。在圖7 圖9中，分別 將橫軸設(shè)為圖4或圖6所示的20張時(shí)間序列圖像的時(shí)間序列順序(圖像編號(hào))，將縱軸設(shè) 為圖像特征量(例如平均亮度)，將構(gòu)成時(shí)間序列圖像的圖像間的變化繪成曲線圖來示出。 此外，在各圖7 圖9中，將依照?qǐng)D6所示的排序處理結(jié)果提取為一次摘要圖像組的圖像編 號(hào)為{1，5，17，2，19}的各圖像與其一次摘要編號(hào){1，2，3，4，5} —起示出。此處，在圖7 圖9中，將各圖像的圖像特征量設(shè)為平均亮度，將其變化繪成曲線圖，而該傾角越大則圖像間變化量越大(在實(shí)施方式1中所計(jì)算出的值接近-1.0)。如上所述，一次摘要圖像組由以下的圖像構(gòu)成，S卩根據(jù)在與時(shí)間序列順序在緊前 面的圖像之間所計(jì)算出的變化的大小(圖像間變化量)，從變化較大的圖像開始依次提取 的預(yù)定張數(shù)(此處為5張)的圖像。即，如圖7所示，構(gòu)成一次摘要圖像組的圖像編號(hào)為{1， 5,17,2,19}的各圖像是與緊前面的圖像之間的變化較大的圖像。此處，例如，著眼于用構(gòu)成 一次摘要圖像組的圖像編號(hào)為5和圖像編號(hào)為17的各圖像所劃分的時(shí)間序列區(qū)間。在該 時(shí)間序列區(qū)間中，在從開頭的圖像編號(hào)為5的圖像到圖像編號(hào)為16的圖像之間，圖像間逐 漸變化。并且，圖像編號(hào)為16的圖像和最末尾的圖像編號(hào)為17的圖像之間的變化較大，根 據(jù)這之間的圖像間變化量的大小，提取圖像編號(hào)為17的圖像來作為一次摘要圖像組。但是，在這種圖像間的變化較平緩的時(shí)間序列區(qū)間中，當(dāng)變化較小的狀態(tài)長期持續(xù)時(shí)，有時(shí)時(shí)間序列區(qū)間整體上變化較大。S卩，在所著眼的從圖像編號(hào)為5到圖像編號(hào)為16 的時(shí)間序列區(qū)間中，時(shí)間序列順序鄰近(此處為相鄰)的圖像間的變化量比較小，但是圖像 編號(hào)為5的圖像和圖像編號(hào)為16的圖像之間的變化非常大，時(shí)間序列區(qū)間整體上的圖像的 變化較大。在實(shí)施方式1中，為了加入這種變化來得到摘要圖像組，計(jì)算由構(gòu)成一次摘要圖 像組的各圖像所劃分的每個(gè)時(shí)間序列區(qū)間的變化來作為區(qū)間變化量。例如，如圖8所示，在將一次摘要編號(hào)為4或/圖像編號(hào)為17的圖像設(shè)為關(guān)注一 次摘要圖像的情況下，取得一次摘要編號(hào)為關(guān)注一次摘要圖像的前一個(gè)的一次摘要編號(hào)為 3或/圖像編號(hào)為5的圖像作為一次摘要前圖像。此外，取得圖像編號(hào)為關(guān)注一次摘要圖像 的前一個(gè)的圖像編號(hào)為16的圖像來作為區(qū)間后方圖像。并且，計(jì)算所取得的一次摘要前圖 像和區(qū)間后方圖像之間的變化來作為該時(shí)間序列區(qū)間(關(guān)注一次摘要圖像和一次摘要前 圖像之間的時(shí)間序列區(qū)間)的區(qū)間變化量。S卩，如圖9所示，關(guān)于一次摘要編號(hào)為3或/圖像編號(hào)為5的圖像，計(jì)算一次摘要 前圖像(一次摘要編號(hào)為2或/圖像編號(hào)為2)和區(qū)間后方圖像(圖像編號(hào)為4)之間的變 化Dl來作為區(qū)間變化量。對(duì)于一次摘要編號(hào)為4或/圖像編號(hào)為17的圖像，計(jì)算一次摘要 前圖像(一次摘要編號(hào)為3或/圖像編號(hào)為5)和區(qū)間后方圖像(圖像編號(hào)為16)之間的 變化D2來作為區(qū)間變化量。對(duì)于一次摘要編號(hào)為5或/圖像編號(hào)為19的圖像，計(jì)算一次 摘要前圖像(一次摘要編號(hào)為4或/圖像編號(hào)為17)和區(qū)間后方圖像(圖像編號(hào)為18)之 間的變化D3來作為區(qū)間變化量。此外，在所取得的區(qū)間后方圖像的時(shí)間序列順序(圖像編 號(hào))比一次摘要前圖像的時(shí)間序列順序(圖像編號(hào))靠后的情況下，計(jì)算區(qū)間變化量。即， 對(duì)于圖9所示的一次摘要編號(hào)為2或/圖像編號(hào)為2的圖像，一次摘要編號(hào)為前一個(gè)的圖 像(一次摘要編號(hào)為1或/圖像編號(hào)為1)和時(shí)間序列順序(圖像編號(hào))為前一個(gè)的圖像 (圖像編號(hào)為1)相同，因此不進(jìn)行區(qū)間變化量的計(jì)算。圖10是表示區(qū)間變化量計(jì)算處理的詳細(xì)處理步驟的流程圖。在實(shí)際的區(qū)間變化 量計(jì)算處理中，區(qū)間變化量計(jì)算部154首先初始化表示關(guān)注一次摘要圖像的符號(hào)i (步驟 cl)。此處，關(guān)注一次摘要圖像從一次摘要編號(hào)為第2個(gè)的圖像開始依次進(jìn)行選擇，將初始 值設(shè)為2來初始化i。這是因?yàn)樵谝淮握幪?hào)為第1個(gè)的圖像中不存在一次摘要前圖像。 接著，區(qū)間變化量計(jì)算部154從一次摘要圖像組中提取一次摘要編號(hào)為i的圖像來作為關(guān) 注一次摘要圖像(步驟c3)。接著，區(qū)間變化量計(jì)算部154從一次摘要圖像組中取得一次摘要編號(hào)為關(guān)注一次摘要圖像的前一個(gè)、即一次摘要編號(hào)為i-Ι的一次摘要前圖像(步驟C5)。此外，區(qū)間變化 量計(jì)算部154取得圖像編號(hào)為關(guān)注一次摘要圖像的前一個(gè)的區(qū)間后方圖像(步驟c7)。接著，區(qū)間變化量計(jì)算部154判定區(qū)間后方圖像的時(shí)間序列順序(圖像編號(hào))是 否比一次摘要前圖像的時(shí)間序列順序(圖像編號(hào))靠后，在靠后的情況下(步驟c9 是)， 進(jìn)行步驟cll的處理。即，在步驟cll中，區(qū)間變化量計(jì)算部154計(jì)算一次摘要前圖像和區(qū) 間后方圖像間的變化量來作為區(qū)間變化量。此處，區(qū)間變化量是表示由構(gòu)成一次摘要圖像組的各圖像所劃分的時(shí)間序列區(qū)間 的變化的值，具體而言，相當(dāng)于一次摘要前圖像和區(qū)間后方圖像之間的變化量。該區(qū)間變化 量與圖像間變化量同樣地，能夠使用例如歸一化互相關(guān)的圖像間的相關(guān)值(相似度)，但是 也可以使用差異度等其他值。接著，區(qū)間變化量計(jì)算部154判定一次摘要編號(hào)i是否在預(yù)定張數(shù)M以下，從而判定此次處理的關(guān)注一次摘要圖像是否為構(gòu)成一次摘要圖像組的最后的圖像。在為預(yù)定張數(shù) M以下、即此次處理的關(guān)注一次摘要圖像并非最后的圖像的情況下(步驟cl3:是)，增加符 號(hào)i來進(jìn)行更新(步驟cl5)，對(duì)于下一個(gè)關(guān)注一次摘要圖像，進(jìn)行步驟c3 cl3的處理。 另一方面，在處理了構(gòu)成一次摘要圖像組的最后的圖像的情況下(步驟cl3 否)，返回圖3 的步驟a7，之后轉(zhuǎn)移到步驟a9。圖11是表示通過依照?qǐng)D6所示的排序處理結(jié)果提取為一次摘要圖像組的圖像編 號(hào)為{1，5，17，2，19}的各圖像所劃分的各時(shí)間序列區(qū)間的區(qū)間變化量的一個(gè)例子的圖，將 對(duì)應(yīng)的一次摘要圖像編號(hào)和區(qū)間后方圖像的圖像編號(hào)一起示出。所計(jì)算出的區(qū)間變化量的 數(shù)據(jù)至少與其區(qū)間后方圖像的圖像編號(hào)對(duì)應(yīng)起來記錄在記錄部14中，在以后的處理中，將 按照每個(gè)時(shí)間序列區(qū)間計(jì)算出的區(qū)間變化量作為與其區(qū)間后方圖像相關(guān)的變化量進(jìn)行處 理。此外，此處，作為區(qū)間后方圖像，取得時(shí)間序列順序?yàn)殛P(guān)注一次摘要圖像的前一個(gè) 的圖像，但是不限于前一個(gè)。具體而言，還可以取得時(shí)間序列順序?yàn)殛P(guān)注一次摘要圖像的前 η個(gè)的圖像作為區(qū)間后方圖像。并且，此時(shí)可以將η的值預(yù)先設(shè)定為固定值，還可以依照例 如用戶的操作輸入等外部輸入來可變地設(shè)定。然后，如圖3所示，在步驟a9中，摘要圖像組提取部155執(zhí)行摘要圖像組提取處 理，根據(jù)圖像間變化量和區(qū)間變化量，從時(shí)間序列圖像中提取摘要圖像組。圖12是表示摘 要圖像組提取處理的詳細(xì)處理步驟的流程圖。在摘要圖像組提取處理中，首先，摘要圖像組提取部155的排序處理部156結(jié)合在 圖3的步驟a3中所計(jì)算的各圖像的圖像間變化量和在步驟a7中的每個(gè)時(shí)間序列區(qū)間的各 區(qū)間后方圖像的區(qū)間變化量，按變化的大小進(jìn)行排序處理(步驟dl)。圖13是表示結(jié)合圖 4或圖6所示的各圖像的圖像間變化量和圖11所示的各時(shí)間序列區(qū)間的區(qū)間變化量進(jìn)行的 排序處理結(jié)果的圖。此外，此處示出了結(jié)合各圖像的圖像間變化量和每個(gè)時(shí)間序列區(qū)間的各區(qū)間后方 圖像的區(qū)間變化量進(jìn)行排序的例子。與此相對(duì)，在后級(jí)的步驟d3中作為摘要圖像組而提取 的圖像的張數(shù)N為一次摘要圖像組的張數(shù)M以下的情況下，也可以結(jié)合一次摘要圖像組的 各圖像的圖像間變化量(在參照?qǐng)D6說明的例子中，是圖像編號(hào)為{1，5，17，2，19}的各圖 像的圖像間變化量)、和圖11所示的每個(gè)時(shí)間序列區(qū)間的圖像編號(hào)為{4，16，18}的各區(qū)間后方圖像的區(qū)間變化量，排序處理這些圖像。這是因?yàn)閷?duì)于沒有作為一次摘要圖像組被提 取的變化較小的圖像，進(jìn)行沒有必要排序處理。由此，能夠削減作為排序處理對(duì)象的數(shù)據(jù)數(shù) 量，能夠縮短處理時(shí)間。此外，如圖12所示，摘要圖像組提取部155依照?qǐng)D像間變化量和區(qū)間變化量的排 序處理結(jié)果，按照變化從大到小的順序提取預(yù)定張數(shù)N的圖像作為摘要圖像組(步驟d3)。 例如，將預(yù)定張數(shù)N設(shè)為5張。此時(shí)，如參照?qǐng)D6所說明的那樣，提取了圖像編號(hào)為{1，5， 17,2,19}的各圖像作為一次摘要圖像組，與此對(duì)應(yīng)，提取了圖像編號(hào)為{1，5，17，2，16}的 各圖像作為摘要圖像組。這是因?yàn)閷D像編號(hào)為16的圖像作為區(qū)間后方圖像而計(jì)算出的 區(qū)間變化量(圖像編號(hào)為5和16的各圖像間的變化)，比針對(duì)圖像編號(hào)為19的圖像所計(jì)算 出的圖像間變化量(圖像編號(hào)為18和19的各圖像間的變化)大。此外，此處使每個(gè)時(shí)間序列區(qū)間的區(qū)間變化量與區(qū)間后方圖像對(duì)應(yīng)起來，因此排 序處理的結(jié)果是，作為與區(qū)間后方圖像相關(guān)的變化量，其圖像間變化量和區(qū)間變化量重復(fù) 地存在。例如，在圖13中，如果著眼于圖像編號(hào)“16”，則包含基于區(qū)間變化量的記錄R1、和 基于圖像間變化量的記錄R3。因此，在以預(yù)定張數(shù)N提取的摘要圖像組中包含這些重復(fù)的 圖像編號(hào)的變化量的情況下，采用值較大的變化量。即，例如，在依照?qǐng)D13所示的排序處理 結(jié)果設(shè)N= 10來提取摘要圖像組的情況下，圖像編號(hào)“4”、“16”重復(fù)。因此，分別針對(duì)各個(gè) 圖像編號(hào)采用變化量較大的值，針對(duì)圖像編號(hào)“4”采用記錄R5的圖像間變化量，針對(duì)圖像 編號(hào)“16”采用記錄Rl的區(qū)間變化量。并且，從排序處理結(jié)果中去除圖像編號(hào)為“4”的區(qū) 間變化量(記錄R7)和圖像編號(hào)為“16”的圖像間變化量(記錄R3)，之后提取10個(gè)作為摘 要圖像組。此外，可以將作為摘要圖像組來提取的圖像的張數(shù)N預(yù)先設(shè)定為固定值，也可以 根據(jù)時(shí)間序列圖像的張數(shù)進(jìn)行設(shè)定?；蛘撸€可以依照用戶的操作輸入等外部輸入來可變 地設(shè)定。如果提取出了摘要圖像組，則返回圖3的步驟a9，之后轉(zhuǎn)移到步驟all。S卩，在步驟all中，運(yùn)算部15輸出摘要圖像組。例如，運(yùn)算部15將作為摘要圖像 組提取的各圖像依次輸出到顯示部13上進(jìn)行顯示。接著，結(jié)束圖像處理裝置10中的運(yùn)算 部15的處理。如以上所說明的那樣，根據(jù)實(shí)施方式1，能夠?qū)?gòu)成時(shí)間序列圖像的每個(gè)圖像計(jì)算 其與相鄰的圖像間的變化量(圖像間變化量)，并根據(jù)所計(jì)算的圖像間變化量提取一次摘 要圖像組。此外，能夠?qū)νㄟ^構(gòu)成一次摘要圖像組的各圖像所劃分的時(shí)間序列圖像的每個(gè) 時(shí)間序列區(qū)間計(jì)算區(qū)間變化量，加入該區(qū)間變化量來提取最終的摘要圖像組。由此，考慮到 了圖像間的變化平緩的時(shí)間序列區(qū)間中的變化，從而能夠適當(dāng)?shù)靥崛≌獔D像組。例如，在 本實(shí)施方式1的例子中，能夠從膠囊內(nèi)窺鏡3所拍攝的龐大張數(shù)的時(shí)間序列圖像中適當(dāng)提 取摘要圖像組，從而實(shí)現(xiàn)了醫(yī)生等觀察者的觀察效率的提高。 具體而言，將構(gòu)成一次摘要圖像組的各圖像依次設(shè)為關(guān)注一次摘要圖像。此外，作 為區(qū)間變化量，能夠計(jì)算相對(duì)于一次摘要圖像組中的關(guān)注一次摘要圖像而言時(shí)間序列順序 為前一個(gè)的一次摘要前圖像、和相對(duì)于時(shí)間序列圖像中的關(guān)注一次摘要圖像而言時(shí)間序列 順序?yàn)榍耙粋€(gè)的區(qū)間后方圖像之間的變化量。由此，能夠?qū)^(qū)間變化量較大的區(qū)間后方圖 像提取為摘要圖像組。由此，能夠?qū)D像間的變化較小的狀態(tài)長期持續(xù)的結(jié)果是圖像在其 時(shí)間序列區(qū)間的開頭和后方不同而整體上變化較大的時(shí)間序列區(qū)間的區(qū)間后方圖像提取為摘要圖像組。此外，對(duì)于通過根據(jù)圖像間變化量提取出的一次摘要圖像組所劃分的時(shí)間序列圖 像的各時(shí)間序列區(qū)間的區(qū)間變化量，只要計(jì)算相對(duì)于關(guān)注一次摘要圖像的一次摘要前圖像 和區(qū)間后方圖像之間的變化量即可。因此，能夠簡單進(jìn)行計(jì)算而不需要復(fù)雜的處理，能夠減 輕處理負(fù)荷。接著，對(duì)實(shí)施方式2進(jìn)行說明。圖14是說明實(shí)施方式2的圖像處理裝置IOb的功 能構(gòu)成的框圖。此外，針對(duì)與在實(shí)施方式1中說明的構(gòu)成相同的構(gòu)成標(biāo)以同一符號(hào)。如圖 14所示，圖像處理裝置IOb具有外部接口部11、操作部12、顯示部13、記錄部14b、運(yùn)算部 15b以及控制圖像處理裝置IOb整體的動(dòng)作的控制部16。在記錄部14b中，記錄有用于從時(shí)間序列圖像中提取摘要圖像組的圖像處理程序 141b。此外，運(yùn)算部15b包含圖像間變化量計(jì)算部151、一次摘要圖像組提取部152b、區(qū) 間變化量計(jì)算部154和摘要圖像組提取部155b。在實(shí)施方式2中，一次摘要圖像組提取部 152b對(duì)圖像間變化量進(jìn)行閾值處理來提取一次摘要圖像組。此外，摘要圖像組提取部155b 結(jié)合圖像間變化量和區(qū)間變化量來進(jìn)行閾值處理，來提取摘要圖像組。即，實(shí)施方式2的圖像處理裝置IOb在以下方面與實(shí)施方式1的圖像處理裝置10 不同在一次摘要圖像組提取部152b和摘要圖像組提取部155b中，沒有分別具有排序處理 部。圖15是表示實(shí)施方式2的圖像處理裝置IOb進(jìn)行的處理步驟的整體流程圖。此 處說明的處理通過運(yùn)算部15b執(zhí)行存儲(chǔ)在記錄部14b中的圖像處理程序141b來實(shí)現(xiàn)。此 夕卜，在圖15中，對(duì)與實(shí)施方式1相同的處理步驟，標(biāo)以同一符號(hào)。在實(shí)施方式2中，如圖15所示，在步驟a3中由圖像間變化量計(jì)算部151計(jì)算出 各圖像的圖像間變化量后，一次摘要圖像組提取部152b對(duì)各圖像的圖像間變化量進(jìn)行閾 值處理，提取圖像間變化量超過預(yù)先設(shè)定的預(yù)定閾值的圖像來作為一次摘要圖像組(步驟 e5)。此外，在此處的處理中所使用的閾值可以預(yù)先設(shè)定為固定值，也可以依照例如用戶的 操作輸入等外部輸入來可變地設(shè)定。接著，區(qū)間變化量計(jì)算部154與實(shí)施方式1同樣地執(zhí)行區(qū)間變化量計(jì)算處理(參 照?qǐng)D10)，對(duì)通過構(gòu)成一次摘要圖像組的圖像所劃分的時(shí)間序列圖像的每個(gè)時(shí)間序列區(qū)間 計(jì)算區(qū)間變化量(步驟a7)。接著，摘要圖像組提取部155b分別對(duì)各圖像的圖像間變化量和每個(gè)時(shí)間序列區(qū) 間的各區(qū)間后方圖像的區(qū)間變化量進(jìn)行閾值處理，提取圖像間變化量或區(qū)間變化量超過預(yù) 先設(shè)定的閾值的圖像來作為摘要圖像組(步驟e9)。此外，在此處的處理中所使用的閾值可 以是與在步驟e5中使用的閾值相同的值，也可以是不同的值。此外，該閾值可以預(yù)先設(shè)定 為固定值，也可以依照例如用戶的操作輸入等外部輸入來可變地設(shè)定。之后，運(yùn)算部15b輸出摘要圖像組(步驟all)，結(jié)束圖像處理裝置IOb的運(yùn)算部 15b中的處理。根據(jù)以上所說明的實(shí)施方式2，能夠通過對(duì)圖像間變化量進(jìn)行閾值處理來提取一 次摘要圖像組，并且通過對(duì)圖像間變化量和區(qū)間變化量進(jìn)行閾值處理來提取最終的摘要圖 像組，能夠起到與實(shí)施方式1相同的效果。此外，在實(shí)施方式2中所說明的閾值處理與在實(shí)施方式1中所說明的排序處理相比，處理負(fù)荷比較低，因此還具有能夠降低處理負(fù)荷的效^ O此外，在上述各實(shí)施方式中，對(duì)從通過膠囊內(nèi)窺鏡3拍攝的時(shí)間序列圖像中提取 摘要圖像組的情況進(jìn)行了說明，但是成為處理對(duì)象的圖像不限于用膠囊內(nèi)窺鏡3拍攝的圖 像。即，同樣能夠適用于從運(yùn)動(dòng)圖像、或者連續(xù)拍攝的靜止圖像列這樣的連續(xù)的時(shí)間序列圖 像中提取摘要圖像組的情況。此外，上述實(shí)施方式1的圖像處理裝置10和實(shí)施方式2的圖像處理裝置IOb能 夠通過由個(gè)人計(jì)算機(jī)或工作站等計(jì)算機(jī)系統(tǒng)執(zhí)行預(yù)先準(zhǔn)備的程序來實(shí)現(xiàn)。下面，針對(duì)以下 的計(jì)算機(jī)系統(tǒng)進(jìn)行說明該計(jì)算機(jī)系統(tǒng)具有與在各實(shí)施方式1、2中所說明的圖像處理裝置 IOUOb同樣的功能，執(zhí)行圖像處理程序141、141b。圖16是表示使用了實(shí)施方式的計(jì)算機(jī)系統(tǒng)200的構(gòu)成的系統(tǒng)構(gòu)成圖，圖17是表 示該計(jì)算機(jī)系統(tǒng)200中的主體部210的構(gòu)成的框圖。如圖16所示，計(jì)算機(jī)系統(tǒng)200具有主 體部210、和用于根據(jù)來自主體部210的指示在顯示畫面221上顯示圖像等信息的顯示器 220。此外，計(jì)算機(jī)系統(tǒng)200具有用于向該計(jì)算機(jī)系統(tǒng)200輸入各種信息的鍵盤230、和用于 指定顯示器220的顯示畫面221上的任意位置的鼠標(biāo)240。此外，如圖17所示，該計(jì)算機(jī)系統(tǒng)200中的主體部210具有CPU211、RAM 212,ROM 213、硬盤驅(qū)動(dòng)器(HDD) 214、收納⑶-ROM 260的⑶-ROM驅(qū)動(dòng)器215、可拆裝地連接USB存儲(chǔ) 器270的USB接口 216、顯示器220、連接鍵盤230和鼠標(biāo)240的I/O接口 217、以及用于與 局域網(wǎng)或廣域網(wǎng)(LAN/WAN)附連接的LAN接口 218。此外，在該計(jì)算機(jī)系統(tǒng)200中，連接有用于與因特網(wǎng)等公眾線路N3連接的調(diào)制解 調(diào)器250，并且經(jīng)由LAN接口 218以及局域網(wǎng)或廣域網(wǎng)Ni，連接有其他的計(jì)算機(jī)系統(tǒng)的個(gè)人 計(jì)算機(jī)(PC) 281、服務(wù)器282和打印機(jī)283等。此外，該計(jì)算機(jī)系統(tǒng)200通過讀取存儲(chǔ)在預(yù)定的存儲(chǔ)介質(zhì)中的圖像處理程序(例 如實(shí)施方式1的圖像處理程序141或?qū)嵤┓绞?的圖像處理程序141b)并執(zhí)行來實(shí)現(xiàn)圖像 處理裝置。此處，所謂預(yù)定的存儲(chǔ)介質(zhì)，除了⑶-ROM 260和USB存儲(chǔ)器270以外，還包含存 儲(chǔ)可由計(jì)算機(jī)系統(tǒng)200讀取的圖像處理程序的所有存儲(chǔ)介質(zhì)，例如以下的在發(fā)送程序時(shí)短 期保持程序的“通信介質(zhì)”介質(zhì)等包含MO光盤或DVD光盤、軟盤(FD)、光磁盤和IC卡等 的“可移動(dòng)用的物理介質(zhì)”；設(shè)置在計(jì)算機(jī)系統(tǒng)200內(nèi)外的HDD 214或RAM 212,ROM 213等 “固定用的物理介質(zhì)”；以及如經(jīng)由調(diào)制解調(diào)器250連接的公眾線路N3、或連接其他的計(jì)算機(jī) 系統(tǒng)(PC) 281或服務(wù)器282的局域網(wǎng)或廣域網(wǎng)附等。S卩，圖像處理程序?yàn)榭赏ㄟ^計(jì)算機(jī)讀取地存儲(chǔ)在“可移動(dòng)用的物理介質(zhì)”、“固定用 的物理介質(zhì)”、“通信介質(zhì)”等記錄介質(zhì)中的程序，計(jì)算機(jī)系統(tǒng)200通過從這種存儲(chǔ)介質(zhì)中讀 取圖像處理程序并執(zhí)行來實(shí)現(xiàn)圖像處理裝置。此外，圖像處理程序不限于通過計(jì)算機(jī)系統(tǒng) 200來執(zhí)行，在其他的計(jì)算機(jī)系統(tǒng)(PC) 281或服務(wù)器282執(zhí)行圖像處理程序的情況下、或它 們協(xié)作地執(zhí)行圖像處理程序的情況下，也同樣能夠使用本發(fā)明。根據(jù)本發(fā)明，能夠?qū)?gòu)成時(shí)間序列圖像的每個(gè)圖像計(jì)算其與鄰近圖像間的變化 量，根據(jù)圖像間變化量從時(shí)間序列圖像中提取一次摘要圖像組。此外，能夠?qū)τ蓸?gòu)成一次 摘要圖像組的各圖像所劃分的時(shí)間序列圖像的每個(gè)時(shí)間序列區(qū)間計(jì)算該時(shí)間序列區(qū)間中 的區(qū)間變化量，由此能夠根據(jù)圖像間變化量和區(qū)間變化量從時(shí)間序列圖像中提取摘要圖像組。因此，能夠考慮到由圖像間變化量表示的圖像間的圖像變化和由區(qū)間變化量表示的時(shí)間序列區(qū)間整體上的圖像變化來提取摘要圖像組，能夠從時(shí)間序列圖像中適當(dāng)提取摘要圖像組。
權(quán)利要求
一種圖像處理裝置，其從由按照時(shí)間序列取得的多個(gè)圖像構(gòu)成的時(shí)間序列圖像中提取摘要圖像組，其特征在于，該圖像處理裝置具有圖像間變化量計(jì)算部，其對(duì)構(gòu)成所述時(shí)間序列圖像的每個(gè)圖像，計(jì)算與時(shí)間序列順序鄰近的鄰近圖像之間的變化量來作為圖像間變化量；一次摘要圖像組提取部，其根據(jù)所述圖像間變化量，從所述時(shí)間序列圖像中提取一次摘要圖像組；區(qū)間變化量計(jì)算部，其計(jì)算由構(gòu)成所述一次摘要圖像組的各圖像所劃分的所述時(shí)間序列圖像的各時(shí)間序列區(qū)間中的區(qū)間變化量；以及摘要圖像組提取部，其根據(jù)所述圖像間變化量和所述區(qū)間變化量，從所述時(shí)間序列圖像中提取摘要圖像組。
2.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于，所述區(qū)間變化量計(jì)算部依次選 擇構(gòu)成所述一次摘要圖像組的圖像來作為關(guān)注一次摘要圖像，通過對(duì)所述一次摘要圖像組 中的時(shí)間序列順序?yàn)樗鲫P(guān)注一次摘要圖像的前一個(gè)的一次摘要前圖像、和所述時(shí)間序列 圖像中的時(shí)間序列順序?yàn)樗鲫P(guān)注一次摘要圖像的預(yù)定數(shù)量之前的區(qū)間后方圖像之間的 變化量進(jìn)行計(jì)算，由此對(duì)每個(gè)所述區(qū)間后方圖像計(jì)算所述區(qū)間變化量。
3.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于，所述摘要圖像組提取部具有結(jié) 合所述圖像間變化量和所述區(qū)間變化量并按照變化的大小順序來進(jìn)行排序的第一排序處 理部，依照所述第一排序處理部的排序處理結(jié)果，從所述時(shí)間序列圖像中提取所述圖像間 變化量或所述區(qū)間變化量較大的預(yù)定張數(shù)的圖像來作為所述摘要圖像組。
4.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于，所述摘要圖像組提取部將所述 圖像間變化量或所述區(qū)間變化量為預(yù)定的閾值以上的圖像作為所述摘要圖像組。
5.根據(jù)權(quán)利要求2所述的圖像處理裝置，其特征在于，所述區(qū)間后方圖像為時(shí)間序列 順序比所述一次摘要前圖像靠后的圖像。
6.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于，所述一次摘要圖像組提取部具 有按照變化的大小順序來對(duì)所述圖像間變化量進(jìn)行排序的第二排序處理部，依照所述第二 排序處理部的排序處理結(jié)果，從所述時(shí)間序列圖像中提取所述圖像間變化量的變化較大的 預(yù)定張數(shù)的圖像來作為所述一次摘要圖像組。
7.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于，所述一次摘要圖像組提取部將 所述圖像間變化量為預(yù)定的閾值以上的圖像作為所述一次摘要圖像組。
8.一種圖像處理方法，其從由按照時(shí)間序列取得的多個(gè)圖像構(gòu)成的時(shí)間序列圖像中提 取摘要圖像組，其特征在于，該圖像處理方法包括圖像間變化量計(jì)算步驟，對(duì)構(gòu)成所述時(shí)間序列圖像的每個(gè)圖像，計(jì)算其與時(shí)間序列順 序鄰近的鄰近圖像間的變化量來作為圖像間變化量；一次摘要圖像組提取步驟，根據(jù)所述圖像間變化量，從所述時(shí)間序列圖像中提取一次 摘要圖像組；區(qū)間變化量計(jì)算步驟，計(jì)算由構(gòu)成所述一次摘要圖像組的各圖像所劃分的所述時(shí)間序 列圖像的各時(shí)間序列區(qū)間中的區(qū)間變化量；以及摘要圖像組提取步驟，根據(jù)所述圖像間變化量和所述區(qū)間變化量，從所述時(shí)間序列圖 像中提取摘要圖像組。
全文摘要
本發(fā)明提供一種圖像處理裝置以及圖像處理方法。圖像處理裝置(10)具有圖像間變化量計(jì)算部(151)，其對(duì)由按照時(shí)間序列取得的多個(gè)圖像構(gòu)成的時(shí)間序列圖像的每個(gè)圖像，計(jì)算與時(shí)間序列順序鄰近的鄰近圖像之間的變化量來作為圖像間變化量；一次摘要圖像組提取部(152)，其根據(jù)圖像間變化量，從時(shí)間序列圖像中提取一次摘要圖像組；區(qū)間變化量計(jì)算部(154)，其計(jì)算由構(gòu)成一次摘要圖像組的各圖像所劃分的時(shí)間序列圖像的各時(shí)間序列區(qū)間中的區(qū)間變化量；以及摘要圖像組提取部(155)，其根據(jù)圖像間變化量和區(qū)間變化量，從時(shí)間序列圖像中提取摘要圖像組。
文檔編號(hào)G06T7/20GK101800846SQ201010112940
公開日2010年8月11日 申請(qǐng)日期2010年2月3日 優(yōu)先權(quán)日2009年2月4日
發(fā)明者河野隆志 申請(qǐng)人:奧林巴斯株式會(huì)社