圖像處理裝置、圖像顯示系統(tǒng)、圖像處理方法和圖像處理程序的制作方法
【專利摘要】提供一種能夠防止基于合成圖像中的組合位置進(jìn)行高精度診斷的增加難度的圖像處理設(shè)備。圖像處理設(shè)備具有：圖像數(shù)據(jù)獲取部件，獲得通過(guò)將成像目標(biāo)的成像范圍分割成多個(gè)區(qū)并對(duì)其進(jìn)行成像而獲得的多個(gè)分割圖像數(shù)據(jù)；合成圖像數(shù)據(jù)產(chǎn)生部件，基于多個(gè)分割圖像數(shù)據(jù)產(chǎn)生合成圖像數(shù)據(jù)；以及用于合成區(qū)顯示的數(shù)據(jù)產(chǎn)生部件，產(chǎn)生用于使觀察者識(shí)別合成圖像數(shù)據(jù)中的合成區(qū)的顯示圖像數(shù)據(jù)。圖像處理設(shè)備的特征在于，用于合成區(qū)顯示的數(shù)據(jù)產(chǎn)生部件至少改變包含在顯示區(qū)中的所有合成區(qū)的顏色或亮度。
【專利說(shuō)明】圖像處理裝置、圖像顯示系統(tǒng)、圖像處理方法和圖像處理程序
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及圖像處理裝置，并且特別地涉及用于觀察成像目標(biāo)的數(shù)字圖像處理?！颈尘凹夹g(shù)】
[0002]最近，在病理領(lǐng)域中，用作作為病理診斷的工具的光學(xué)顯微鏡的替代、且使得能夠通過(guò)拍攝安裝在制備物(pr印aration)上的要被檢查的樣本(成像目標(biāo))并通過(guò)數(shù)字化圖像來(lái)在顯示器上執(zhí)行病理診斷的虛擬載片(slide)系統(tǒng)受到關(guān)注。通過(guò)利用虛擬載片系統(tǒng)數(shù)字化病理診斷圖像，相關(guān)技術(shù)中的要被檢查的樣本的光學(xué)顯微鏡圖像可被作為數(shù)字?jǐn)?shù)據(jù)處理。結(jié)果，有望實(shí)現(xiàn)諸如更快的遠(yuǎn)距離診斷、使用數(shù)字圖像作為對(duì)病人的解釋性幫助、共享罕見(jiàn)的病例和更有效的教育和培訓(xùn)的優(yōu)點(diǎn)。
[0003]為了使用虛擬載片系統(tǒng)實(shí)現(xiàn)大致與使用光學(xué)顯微鏡等同的操作，必須數(shù)字化處于制備物上的整個(gè)要被檢查的樣本。通過(guò)數(shù)字化要被檢查的樣本，可使用在個(gè)人計(jì)算機(jī)(PC)或工作站上操作的查看器軟件觀察使用虛擬載片系統(tǒng)產(chǎn)生的數(shù)字?jǐn)?shù)據(jù)。用于整個(gè)數(shù)字化的要被檢查的樣本的像素的數(shù)量典型地為數(shù)億到數(shù)十億，這是量非常大的數(shù)據(jù)。
[0004]使用虛擬載片系統(tǒng)產(chǎn)生的數(shù)據(jù)量是巨大的，并且可通過(guò)使用查看器執(zhí)行放大/縮小處理執(zhí)行從微觀觀察(放大的細(xì)節(jié)圖像)到宏觀觀察(整體的鳥瞰圖)的各種觀察，并且系統(tǒng)因此在各個(gè)不同的方面是便利的。通過(guò)事先獲得所有必要的信息，可使用用戶希望的分辨率和倍率執(zhí)行低倍率圖像到高倍率圖像的即時(shí)顯示。另外，獲得的數(shù)字?jǐn)?shù)據(jù)經(jīng)受圖像分析，并且例如執(zhí)行細(xì)胞形狀的確定、細(xì)胞數(shù)量的計(jì)算和細(xì)胞核與細(xì)胞質(zhì)面積比(N/C比)的計(jì)算。因此，在病理診斷中有用的各種類型的信息也可被展現(xiàn)。
[0005]作為這種獲得成像目標(biāo)的高倍率圖像的技術(shù)，已提出了一種使用通過(guò)拍攝成像目標(biāo)的多個(gè)部分所獲得的高倍率圖像以獲得整個(gè)成像目標(biāo)的高倍率圖像的方法。具體地，在PTLl中，公開(kāi)了一種顯微鏡系統(tǒng)，該顯微鏡系統(tǒng)將成像目標(biāo)分割成被拍攝的小的部分，并且將由此獲得的小的部分的圖像合成為顯示的成像目標(biāo)的合成圖像。在PTL2中，公開(kāi)了一種圖像顯示系統(tǒng)，該圖像顯示系統(tǒng)通過(guò)在移動(dòng)顯微鏡的臺(tái)架的同時(shí)捕獲圖像來(lái)獲得成像目標(biāo)的部分圖像并且校正圖像中的畸變以便合成圖像。在PTL2中，產(chǎn)生具有不顯眼的連接區(qū)域的合成圖像。
[0006]引文列表
[0007]專利文獻(xiàn)
[0008]PTLl:日本專利公開(kāi) N0.2007-121837
[0009]PTL2:日本專利公開(kāi) N0.2010-134374

【發(fā)明內(nèi)容】

[0010]技術(shù)問(wèn)題
[0011]由于由例如不可避免地發(fā)生的部分圖像之間的錯(cuò)誤配準(zhǔn)和畸變校正所導(dǎo)致的偽像的不利影響，使用PTLl的顯微鏡系統(tǒng)和PTL2的圖像顯示系統(tǒng)獲得的合成圖像中的連接區(qū)域極有可能是與當(dāng)病理醫(yī)生使用光學(xué)顯微鏡執(zhí)行觀察時(shí)所獲得的圖像不同的圖像。盡管如此，當(dāng)在沒(méi)有認(rèn)識(shí)到這種誤診的可能性的情況下使用合成圖像進(jìn)行診斷時(shí)，存在基于合成圖像中的連接區(qū)域進(jìn)行診斷從而妨礙高度精確的診斷的問(wèn)題。
[0012]問(wèn)題的解決方案
[0013]本發(fā)明基本上在圖像處理裝置中體現(xiàn)，該圖像處理裝置包括圖像數(shù)據(jù)獲取部件、合成圖像數(shù)據(jù)產(chǎn)生部件和合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件。該圖像數(shù)據(jù)獲取部件獲取通過(guò)捕獲成像目標(biāo)的捕獲區(qū)被分割成的多個(gè)區(qū)域的圖像而獲得的多條分割圖像數(shù)據(jù)。該合成圖像數(shù)據(jù)產(chǎn)生部件基于多個(gè)分割圖像數(shù)據(jù)產(chǎn)生合成圖像數(shù)據(jù)。該合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件產(chǎn)生用于供觀察者識(shí)別合成圖像數(shù)據(jù)中的合成邊界區(qū)域的顯示圖像數(shù)據(jù)。所述合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件改變包含在顯示區(qū)中的所有合成邊界區(qū)域的顏色和亮度中的至少一個(gè)。
[0014]另外，本發(fā)明基本上在顯微鏡圖像顯示系統(tǒng)中體現(xiàn)，該顯微鏡圖像顯示系統(tǒng)至少包含圖像處理裝置和圖像顯示裝置。該圖像顯示裝置顯示用于成像目標(biāo)且從圖像處理裝置傳送的合成圖像數(shù)據(jù)和用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)。
[0015]并且，本發(fā)明基本上在圖像處理方法中體現(xiàn)，該圖像處理方法包括:獲取通過(guò)捕獲成像目標(biāo)的捕獲區(qū)被分割成的多個(gè)區(qū)域的圖像而獲得的多條分割圖像數(shù)據(jù)；基于多個(gè)分割圖像數(shù)據(jù)產(chǎn)生合成圖像數(shù)據(jù)；以及產(chǎn)生用于供觀察者識(shí)別合成圖像數(shù)據(jù)中的合成邊界區(qū)域的顯示圖像數(shù)據(jù)。在顯示圖像數(shù)據(jù)的產(chǎn)生中，對(duì)于包含在顯示區(qū)中的所有合成邊界區(qū)域改變顏色和亮度中的至少一個(gè)。
[0016]并且，本發(fā)明基本上在使計(jì)算機(jī)執(zhí)行處理的程序中體現(xiàn)，該處理包括:獲取通過(guò)捕獲成像目標(biāo)的捕獲區(qū)被分割成的多個(gè)區(qū)域的圖像而獲得的多條分割圖像數(shù)據(jù)；基于多個(gè)分割圖像數(shù)據(jù)產(chǎn)生合成圖像數(shù)據(jù)；以及產(chǎn)生用于供觀察者識(shí)別合成圖像數(shù)據(jù)中的合成邊界區(qū)域的顯示圖像數(shù)據(jù)。在顯示圖像數(shù)據(jù)的產(chǎn)生中，對(duì)于包含在顯示區(qū)中的所有合成邊界區(qū)域改變顏色和亮度中的至少一個(gè)。
[0017]本發(fā)明的有利效果
[0018]在根據(jù)本發(fā)明的優(yōu)選的圖像處理裝置、優(yōu)選的圖像顯示系統(tǒng)、優(yōu)選的圖像處理方法和優(yōu)選的圖像處理程序中，可以防止難以使用合成圖像中的合成邊界區(qū)域執(zhí)行高度精確的診斷的情況。
【專利附圖】

【附圖說(shuō)明】
[0019]圖1是根據(jù)本發(fā)明的使用圖像處理裝置的圖像顯示系統(tǒng)的裝置配置的示例性總體示圖。
[0020]圖2是根據(jù)本發(fā)明的使用圖像處理裝置的圖像顯示系統(tǒng)中的成像裝置的示例性功能框圖。
[0021]圖3是根據(jù)本發(fā)明的圖像處理裝置的示例性功能框圖。
[0022]圖4是根據(jù)本發(fā)明的圖像處理裝置的示例性硬件配置圖。
[0023]圖5包含用于描述根據(jù)第一實(shí)施例的合成圖像數(shù)據(jù)產(chǎn)生和合成邊界區(qū)域數(shù)據(jù)產(chǎn)生的概念的圖。[0024]圖6是根據(jù)本發(fā)明的圖像處理裝置中的合成邊界區(qū)域顯示數(shù)據(jù)的產(chǎn)生的示例性流程圖。
[0025]圖7是合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)的產(chǎn)生的示例性流程圖。
[0026]圖8是疊加處理的示例性流程圖。
[0027]圖9示出根據(jù)本發(fā)明的圖像顯示系統(tǒng)的示例性顯示畫面。
[0028]圖10是通過(guò)根據(jù)本發(fā)明的圖像處理裝置的切換部件執(zhí)行的顯示的切換的示例性流程圖。
[0029]圖11是根據(jù)第二實(shí)施例的使用圖像處理裝置的圖像顯示系統(tǒng)的總體示圖。
[0030]圖12是用于描述根據(jù)第二實(shí)施例的合成邊界區(qū)域數(shù)據(jù)產(chǎn)生的概念的圖。
[0031]圖13是根據(jù)第二實(shí)施例的合成邊界區(qū)域數(shù)據(jù)產(chǎn)生的流程圖。
[0032]圖14是根據(jù)第二實(shí)施例的疊加處理的流程圖。
[0033]圖15示出根據(jù)第二實(shí)施例的圖像顯示系統(tǒng)的示例性顯示畫面。
【具體實(shí)施方式】
[0034]以下將參照附 圖描述本發(fā)明的實(shí)施例。以下全部描述都是關(guān)于本發(fā)明的優(yōu)選實(shí)施例，并且本發(fā)明不限于此。
[0035]根據(jù)本發(fā)明的優(yōu)選的圖像處理裝置包含圖像數(shù)據(jù)獲取部件、合成圖像數(shù)據(jù)產(chǎn)生部件和合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件。該圖像數(shù)據(jù)獲取部件獲取通過(guò)捕獲成像目標(biāo)的捕獲區(qū)被分割成的多個(gè)區(qū)域的圖像而獲得的多條分割圖像數(shù)據(jù)。該合成圖像數(shù)據(jù)產(chǎn)生部件基于多個(gè)分割圖像數(shù)據(jù)產(chǎn)生合成圖像數(shù)據(jù)。該合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件產(chǎn)生用于供觀察者識(shí)別合成圖像數(shù)據(jù)中的合成邊界區(qū)域的顯示圖像數(shù)據(jù)。所述合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件改變包含在顯示區(qū)中的所有合成邊界區(qū)域的顏色和亮度中的至少一個(gè)。因此，當(dāng)合成通過(guò)將要被拍攝的成像目標(biāo)的區(qū)域分割成小的部分而捕獲的圖像(數(shù)據(jù))使得產(chǎn)生成像目標(biāo)的圖像(數(shù)據(jù))時(shí)，可防止由于可能與成像目標(biāo)的原始圖像不同的合成圖像(數(shù)據(jù))的顯示而難以使用合成邊界區(qū)域執(zhí)行高度精確的診斷的情況。根據(jù)本發(fā)明的圖像處理裝置可被應(yīng)用于使用顯微鏡獲得的圖像。另外，根據(jù)本發(fā)明的圖像處理裝置可被用于圖像顯示系統(tǒng)、特別是顯微鏡圖像顯示系統(tǒng)或虛擬載片系統(tǒng)中。
[0036]這里使用的合成圖像(數(shù)據(jù))的方法的示例包含連接多條圖像數(shù)據(jù)(以下，也可稱為“部分圖像數(shù)據(jù)”)、疊加多條部分圖像數(shù)據(jù)、α混合多條部分圖像數(shù)據(jù)和內(nèi)插以平滑地合成多條部分圖像數(shù)據(jù)。用于連接要被重疊的多條圖像數(shù)據(jù)的方法的示例包含通過(guò)基于臺(tái)架的位置信息對(duì)準(zhǔn)多條圖像數(shù)據(jù)來(lái)連接它們的方法、通過(guò)關(guān)聯(lián)多條分割圖像中的對(duì)應(yīng)點(diǎn)或?qū)?yīng)線來(lái)連接多條圖像數(shù)據(jù)的方法和基于分割圖像數(shù)據(jù)的位置信息連接多條圖像數(shù)據(jù)的方法。疊加在廣義上意味著多條圖像數(shù)據(jù)重疊。用于疊加多條圖像數(shù)據(jù)的方法的示例包含多條圖像數(shù)據(jù)中的多個(gè)部分或者全部在具有重疊的圖像數(shù)據(jù)的區(qū)域中重疊的情況。α混合表示兩個(gè)圖像使用系數(shù)(α值)合成。執(zhí)行內(nèi)插以平滑地連接多條圖像數(shù)據(jù)的方法的示例包含使用零階內(nèi)插的處理、使用線性內(nèi)插的處理和使用較高次內(nèi)插的處理。為了平滑地連接圖像，使用較高次內(nèi)插的處理是優(yōu)選的。
[0037]合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件是用于產(chǎn)生供觀察者視覺(jué)地識(shí)別顯示圖像中的合成邊界區(qū)域的數(shù)據(jù)的部件。[0038]合成邊界區(qū)域是在合成圖像數(shù)據(jù)時(shí)獲得的，并且是多條原始部分圖像數(shù)據(jù)之間的連接區(qū)域或處于合成圖像中且由于合成處理而產(chǎn)生其外觀(appearance)與原始部分圖像數(shù)據(jù)不同的圖像數(shù)據(jù)的區(qū)域。當(dāng)顯示合成邊界區(qū)域時(shí)，觀察者需要視覺(jué)地識(shí)別合成邊界區(qū)域。因此，多條原始部分圖像數(shù)據(jù)之間的連接區(qū)域是包含一定程度的周邊區(qū)的區(qū)，而不僅僅是線。一定程度的周邊區(qū)的寬度可能依賴于顯示倍率。
[0039]術(shù)語(yǔ)“用于顯示合成邊界區(qū)域的數(shù)據(jù)”不僅僅是關(guān)于合成邊界區(qū)域的數(shù)據(jù)(諸如合成邊界區(qū)域的位置信息)，而且是以下方面中的一個(gè):數(shù)據(jù)，基于該數(shù)據(jù)，合成圖像數(shù)據(jù)被處理使得要被顯示的圖像中的合成邊界區(qū)域可被視覺(jué)地識(shí)別；和被重寫以便變成與部分圖像數(shù)據(jù)不同的數(shù)據(jù)使得合成圖像數(shù)據(jù)中的合成邊界區(qū)域可被視覺(jué)地識(shí)別的數(shù)據(jù)的一部分(包含在合成圖像數(shù)據(jù)中)。
[0040]合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件可在產(chǎn)生合成圖像數(shù)據(jù)之后提取合成邊界區(qū)域，以便產(chǎn)生用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)，或者可基于例如分割圖像數(shù)據(jù)的位置信息產(chǎn)生用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)。
[0041]合成圖像數(shù)據(jù)的產(chǎn)生和用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)的產(chǎn)生被以任意的次序執(zhí)行，并且例如可被同時(shí)執(zhí)行。作為用于顯示合成邊界區(qū)域的方法，優(yōu)選改變顏色或亮度。
[0042]優(yōu)選地，圖像處理裝置通過(guò)使用捕獲顯微鏡圖像(光學(xué)顯微鏡圖像)的圖像數(shù)據(jù)獲取部件來(lái)獲得多條分割圖像數(shù)據(jù)，并在虛擬載片系統(tǒng)中使用所獲得的數(shù)據(jù)。
[0043]圖像數(shù)據(jù)獲取部件可獲取通過(guò)以多條分割圖像數(shù)據(jù)具有重疊區(qū)域的方式捕獲圖像所獲得的多條分割圖像數(shù)據(jù)，并且合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件可產(chǎn)生多條分割圖像數(shù)據(jù)重疊的區(qū)數(shù)據(jù)作為用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)。
[0044]當(dāng)通過(guò)以多條分割圖像數(shù)據(jù)具有重疊區(qū)域的方式捕獲圖像來(lái)獲得多條分割圖像數(shù)據(jù)時(shí)，合成圖像數(shù)據(jù)產(chǎn)生部件優(yōu)選對(duì)多條分割圖像數(shù)據(jù)執(zhí)行疊加或混合以便產(chǎn)生合成圖像數(shù)據(jù)。
[0045]當(dāng)通過(guò)以多條分割圖像數(shù)據(jù)具有重疊區(qū)域的方式捕獲圖像來(lái)獲得多條分割圖像數(shù)據(jù)時(shí)，合成圖像數(shù)據(jù)產(chǎn)生部件優(yōu)選對(duì)多條分割圖像數(shù)據(jù)重疊的區(qū)域進(jìn)行內(nèi)插，以便產(chǎn)生合成圖像數(shù)據(jù)。
[0046]合成圖像數(shù)據(jù)產(chǎn)生部件可合成多條分割圖像數(shù)據(jù)以便產(chǎn)生要被顯示的合成圖像數(shù)據(jù)，并且合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件可產(chǎn)生多條分割圖像數(shù)據(jù)被連接的區(qū)域的線作為合成邊界區(qū)域數(shù)據(jù)。
[0047]優(yōu)選地，圖像處理裝置還包含合成邊界區(qū)域數(shù)據(jù)切換部件，其執(zhí)行由合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件所產(chǎn)生的用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)的切換。合成邊界區(qū)域數(shù)據(jù)切換部件可優(yōu)選在顯示合成邊界區(qū)域的模式與不顯示合成邊界區(qū)域的模式之間切換合成邊界區(qū)域的顯示模式。
[0048]合成邊界區(qū)域數(shù)據(jù)切換部件優(yōu)選在某一邊界處執(zhí)行由合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件所產(chǎn)生的用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)的切換。作為某一邊界，可以使用預(yù)定的倍率或預(yù)定的(在圖像顯示裝置上顯示的圖像的)滾動(dòng)速度。例如，僅在倍率比某一倍率高的情況下或者在(圖像顯示裝置上顯示的圖像的)滾動(dòng)速度比某一速度低的情況下，產(chǎn)生用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)才是優(yōu)選的。[0049]根據(jù)本發(fā)明的優(yōu)選的圖像顯示系統(tǒng)至少包含上述圖像處理裝置和圖像顯示裝置，該圖像顯示裝置顯示用于成像目標(biāo)且從圖像處理裝置傳送的合成圖像數(shù)據(jù)，并且顯示用于供觀察者識(shí)別合成圖像數(shù)據(jù)中的合成邊界區(qū)域的圖像數(shù)據(jù)。
[0050]根據(jù)本發(fā)明的優(yōu)選的圖像處理方法包含:獲取通過(guò)捕獲成像目標(biāo)的捕獲區(qū)被分割成的多個(gè)區(qū)域的圖像而獲得的多條分割圖像數(shù)據(jù)；基于多個(gè)分割圖像數(shù)據(jù)產(chǎn)生合成圖像數(shù)據(jù)；以及產(chǎn)生用于供觀察者識(shí)別合成圖像數(shù)據(jù)中的合成邊界區(qū)域的顯示圖像數(shù)據(jù)。在顯示圖像數(shù)據(jù)的產(chǎn)生中，對(duì)于包含在顯示區(qū)中的所有合成邊界區(qū)域改變顏色和亮度中的至少一個(gè)。合成圖像數(shù)據(jù)的產(chǎn)生和顯示圖像數(shù)據(jù)的產(chǎn)生可被同時(shí)執(zhí)行。
[0051]根據(jù)本發(fā)明的優(yōu)選的程序使計(jì)算機(jī)執(zhí)行處理，該處理包含:獲取通過(guò)捕獲成像目標(biāo)的捕獲區(qū)被分割成的多個(gè)區(qū)域的圖像而獲得的多條分割圖像數(shù)據(jù)；基于多個(gè)分割圖像數(shù)據(jù)產(chǎn)生合成圖像數(shù)據(jù)；以及產(chǎn)生用于供觀察者識(shí)別合成圖像數(shù)據(jù)中的合成邊界區(qū)域的顯示圖像數(shù)據(jù)。在顯示圖像數(shù)據(jù)的產(chǎn)生中，對(duì)于包含在顯示區(qū)中的所有合成邊界區(qū)域改變顏色和亮度中的至少一個(gè)。
[0052]說(shuō)明書中關(guān)于根據(jù)本發(fā)明的圖像處理裝置的優(yōu)選方面可在根據(jù)本發(fā)明的圖像處理方法或程序中反映。
[0053]第一實(shí)施例
[0054]根據(jù)本發(fā)明的圖像處理裝置可被用于包含成像裝置和圖像顯示裝置的圖像顯示系統(tǒng)中。將通過(guò)使用圖1來(lái)描述該圖像顯示系統(tǒng)。
[0055](圖像拾取系統(tǒng)的配置)
[0056]圖1示出根據(jù)本發(fā)明的使用圖像處理裝置的圖像顯示系統(tǒng)。圖像顯示系統(tǒng)包含成像裝置(顯微鏡裝置或虛擬載片掃描儀)101、圖像處理裝置102和圖像顯示裝置103，并具有獲得和顯示要被拍攝的成像目標(biāo)(要被檢查的樣本)的二維圖像的功能。成像裝置101和圖像處理裝置102通過(guò)作為專用I/F或通用I/F的線纜104彼此連接，而圖像處理裝置102和圖像顯示裝置103通過(guò)作為通用I/F的線纜105彼此連接。
[0057]作為成像裝置101，可以使用具有沿二維方向在不同位置處捕獲多個(gè)二維圖像并輸出數(shù)字圖像的功能的虛擬載片裝置。諸如電荷耦合器件(CCD)或互補(bǔ)金屬氧化物半導(dǎo)體(CMOS)的固態(tài)圖像感測(cè)元件被用于獲得二維圖像。代替虛擬載片裝置，成像裝置101可包含其中數(shù)字照相機(jī)被附接到典型的光學(xué)顯微鏡的目鏡部分的數(shù)字顯微鏡裝置。
[0058]圖像處理裝置102具有例如通過(guò)使用從成像裝置101所獲得的多條被分割的原始圖像數(shù)據(jù)來(lái)產(chǎn)生合成圖像數(shù)據(jù)的功能。圖像處理裝置102由包含諸如中央處理單元(CPU)、RAM、存儲(chǔ)設(shè)備、操作單元和I/F的硬件資源的通用計(jì)算機(jī)或工作站構(gòu)成。存儲(chǔ)設(shè)備是諸如硬盤驅(qū)動(dòng)的大容量信息存儲(chǔ)設(shè)備，并存儲(chǔ)例如用于實(shí)現(xiàn)以下描述的處理的程序、數(shù)據(jù)和操作系統(tǒng)(OS)。上述功能利用CPU將必要的程序和數(shù)據(jù)從存儲(chǔ)設(shè)備加載到RAM上并執(zhí)行程序來(lái)實(shí)現(xiàn)。操作單元由例如鍵盤和鼠標(biāo)構(gòu)成，并被操作員用于輸入各種指令。圖像顯示裝置103是顯示作為由圖像處理裝置102執(zhí)行的計(jì)算的結(jié)果的用于觀察的圖像的監(jiān)視器，并由例如CRT或液晶顯示器構(gòu)成。
[0059]在圖1中的示例中，圖像拾取系統(tǒng)由成像裝置101、圖像處理裝置102和圖像顯示裝置103這三個(gè)裝置構(gòu)成。但是，本發(fā)明的配置不限于此。例如，可以使用圖像顯示裝置被集成到其中的圖像處理裝置，或者圖像處理裝置的功能可被合并到成像裝置中?？商娲兀稍趩蝹€(gè)裝置中實(shí)現(xiàn)成像裝置、圖像處理裝置和圖像顯示裝置的功能。相反，例如圖像處理裝置的功能可被分割成在多個(gè)裝置中執(zhí)行的小功能。
[0060](成像裝置的配置)
[0061]圖2是示出成像裝置101的功能配置的框圖。
[0062]成像裝置101 —般包含照明單元201、臺(tái)架202、臺(tái)架控制單元205、成像光學(xué)系統(tǒng)207、圖像拾取單元210、顯影處理單元216、預(yù)測(cè)量單元217、主控制系統(tǒng)218和數(shù)據(jù)輸出單元 219。
[0063]照明單元201是利用光均勻地照射位于臺(tái)架202上的制備物206的部件，并包含光源、照明光學(xué)系統(tǒng)和用于驅(qū)動(dòng)光源的控制系統(tǒng)。臺(tái)架202被臺(tái)架控制單元205驅(qū)動(dòng)和控制，并可沿XYZ三個(gè)軸移動(dòng)。制備物206是其中用作觀察對(duì)象的組織的切片或涂抹細(xì)胞被置于載玻片上以便與封固劑一起被保持在蓋玻片下面的部材(member)。
[0064]臺(tái)架控制單元205包含驅(qū)動(dòng)控制系統(tǒng)203和臺(tái)架驅(qū)動(dòng)機(jī)構(gòu)204。驅(qū)動(dòng)控制系統(tǒng)203接收來(lái)自主控制系統(tǒng)218的指令并控制臺(tái)架202的驅(qū)動(dòng)。基于通過(guò)預(yù)測(cè)量單元217所測(cè)量的成像目標(biāo)的位置信息和厚度信息(距離信息)并在必要時(shí)基于來(lái)自用戶的指令，確定臺(tái)架202的移動(dòng)方向、移動(dòng)量等。臺(tái)架驅(qū)動(dòng)機(jī)構(gòu)204根據(jù)來(lái)自驅(qū)動(dòng)控制系統(tǒng)203的指令驅(qū)動(dòng)臺(tái)架202。
[0065]成像光學(xué)系統(tǒng)207是用于將制備物206上的成像目標(biāo)的光學(xué)圖像形成在成像傳感器208上的透鏡單元。
[0066]圖像拾取單元210包含成像傳感器208和模擬前端(AFE) 209。成像傳感器208是通過(guò)光電轉(zhuǎn)換將二維光學(xué)圖像轉(zhuǎn)換成電氣物理量的一維或二維圖像傳感器，并且，例如使用C⑶或CMOS器件。當(dāng)使用一維傳感器時(shí)，通過(guò)沿掃描方向執(zhí)行掃描來(lái)獲得二維圖像。具有根據(jù)光強(qiáng)度的電壓值的電信號(hào)從成像傳感器208輸出。在作為捕獲圖像希望彩色圖像的情況下，例如，可以使用附接使用Bayer陣列的濾色器的單芯片圖像傳感器。圖像拾取單元210在臺(tái)架202沿XY軸方向被驅(qū)動(dòng)的情況下捕獲成像目標(biāo)的分割圖像。
[0067]AFE209是將從成像傳感器208輸出的模擬信號(hào)轉(zhuǎn)換成數(shù)字信號(hào)的電路。AFE209包含以下描述的Η/V驅(qū)動(dòng)器、相關(guān)雙采樣(CDS)、放大器、AD轉(zhuǎn)換器和定時(shí)產(chǎn)生器。Η/V驅(qū)動(dòng)器將用于驅(qū)動(dòng)成像傳感器208的垂直同步信號(hào)和水平同步信號(hào)轉(zhuǎn)換成驅(qū)動(dòng)傳感器所需要的電勢(shì)。CDS是去除固定模式噪聲的相關(guān)雙采樣電路。放大器是調(diào)整在CDS中經(jīng)受噪聲消減的模擬信號(hào)的增益的模擬放大器。AD轉(zhuǎn)換器將模擬信號(hào)轉(zhuǎn)換成數(shù)字信號(hào)。在來(lái)自成像裝置的最后級(jí)的輸出為8比特的情況下，AD轉(zhuǎn)換器在考慮下游處理的情況下將模擬信號(hào)轉(zhuǎn)換成通過(guò)從10比特到16比特階的量化所獲得的數(shù)字?jǐn)?shù)據(jù)，并輸出該數(shù)字?jǐn)?shù)據(jù)。經(jīng)轉(zhuǎn)換的傳感器輸出數(shù)據(jù)被稱為RAW數(shù)據(jù)。RAW數(shù)據(jù)在位于下游的顯影處理單元216中經(jīng)受顯影處理。定時(shí)產(chǎn)生器產(chǎn)生用于調(diào)整成像傳感器208的定時(shí)和用于位于下游的顯影處理單元216的定時(shí)的信號(hào)。
[0068]在CXD被用作成像傳感器208的情況下，上述AFE209是必需的。相反，在使用可輸出數(shù)字輸出的CMOS圖像傳感器的情況下，傳感器包含上述AFE209的功能。另外，存在控制成像傳感器208的圖像拾取控制器(未示出)，并且該圖像拾取控制器不僅控制成像傳感器208的操作，而且負(fù)責(zé)操作定時(shí)和快門速度、幀速率、關(guān)注區(qū)域(ROI)等的控制。
[0069] 顯影處理單元216包含黑校正單元211、白平衡調(diào)整單元212、去馬賽克單元213、濾波單元214和Y校正單元215。黑校正單元211從RAW數(shù)據(jù)的像素中的每一個(gè)減去在遮光的情況下所獲得的用于黑校正的數(shù)據(jù)。白平衡調(diào)整單元212根據(jù)來(lái)自照明單元201的光的色溫調(diào)整RGB顏色中的每一個(gè)的增益以便再現(xiàn)希望的白色。具體地，用于白平衡校正的數(shù)據(jù)被加到黑校正之后的RAW數(shù)據(jù)。在處理單色圖像的情況下，白平衡調(diào)整處理不是必須的。顯影處理單元216產(chǎn)生通過(guò)圖像拾取單元210所拍攝的成像目標(biāo)的分割圖像數(shù)據(jù)。
[0070]去馬賽克單元213從根據(jù)Bayer陣列的RAW數(shù)據(jù)產(chǎn)生RGB顏色中的每一個(gè)的圖像數(shù)據(jù)。去馬賽克單元213使用RAW數(shù)據(jù)中周圍像素(包含相同顏色的像素和其它顏色的像素)的值通過(guò)內(nèi)插來(lái)計(jì)算目標(biāo)像素的RGB顏色值。另外，去馬賽克單元213對(duì)有缺陷的像素執(zhí)行校正處理(內(nèi)插處理)。在成像傳感器208不具有濾色器且獲得單色圖像的情況下，去馬賽克處理不是必須的。
[0071]濾波單元214是實(shí)現(xiàn)包含在圖像中的高頻率成分的抑制、噪聲消減和高分辨率的強(qiáng)調(diào)的數(shù)字濾波器。Y校正單元215向圖像添加典型顯示設(shè)備的灰度(gradation)表現(xiàn)特性的逆特性，并通過(guò)高輝度部分中的灰度壓縮或暗部處理根據(jù)人的視覺(jué)特性執(zhí)行灰度轉(zhuǎn)換。根據(jù)本實(shí)施例，為了獲得用于形態(tài)觀察的圖像，圖像數(shù)據(jù)經(jīng)受適合位于下游的合成處理和顯示處理的灰度轉(zhuǎn)換。
[0072]預(yù)測(cè)量單元217執(zhí)行用于計(jì)算制備物206上的成像目標(biāo)的位置信息、到希望的焦點(diǎn)位置的距離信息和用于由成像目標(biāo)的厚度導(dǎo)致的光量調(diào)整的參數(shù)的預(yù)測(cè)量。預(yù)測(cè)量單元217在主測(cè)量之前獲得信息，從而使得能夠有效地捕獲圖像。為了獲得二維平面中的位置信息，具有比成像傳感器208的分辨率低的分辨率的二維成像傳感器被使用。預(yù)測(cè)量單元217從獲得的圖像確定成像目標(biāo)在XY平面中的位置。激光位移傳感器或Shack-Hartmann測(cè)量設(shè)備被用于獲得距離信息和厚度信息。
[0073]主控制系統(tǒng)218控制上述各種單元。主控制系統(tǒng)218和顯影處理單元216的功能通過(guò)具有CPU、ROM和RAM的控制電路來(lái)實(shí)現(xiàn)。即，ROM存儲(chǔ)程序和數(shù)據(jù)，并且CPU使用RAM作為工作存儲(chǔ)器以便執(zhí)行程序，從而實(shí)現(xiàn)主控制系統(tǒng)218和顯影處理單元216的功能。諸如EEPROM或閃存的設(shè)備被用作R0M，并且諸如DDR3的DRAM設(shè)備被用作RAM。
[0074]數(shù)據(jù)輸出單元219是用于將由顯影處理單元216產(chǎn)生的RGB彩色圖像傳送到圖像處理裝置102的接口。成像裝置101和圖像處理裝置102通過(guò)光學(xué)通信線纜彼此連接。可替代地，使用諸如USB或GigabitEthernet (注冊(cè)商標(biāo))的接口。
[0075](圖像處理裝置的配置)
[0076]圖3是示出根據(jù)本發(fā)明的圖像處理裝置102的功能配置的框圖。
[0077]圖像處理裝置102 —般包含數(shù)據(jù)輸入/輸出單元301和308、存儲(chǔ)保持單元302、合成處理器303、合成邊界區(qū)域提取單元304、合成邊界區(qū)域呈現(xiàn)單元305、疊加處理器306和模式選擇器307。
[0078]存儲(chǔ)保持單元302經(jīng)由數(shù)據(jù)輸入單元301接收從外部裝置獲得以及通過(guò)拍攝成像目標(biāo)的分割部分獲得的RGB的分割彩色圖像數(shù)據(jù)，并且存儲(chǔ)和保持該數(shù)據(jù)。彩色圖像數(shù)據(jù)不僅包含圖像數(shù)據(jù)，而且包含位置信息。位置信息是描述哪條分割圖像數(shù)據(jù)與成像目標(biāo)的哪個(gè)拍攝部分對(duì)應(yīng)的信息。例如，可通過(guò)在捕獲分割圖像數(shù)據(jù)時(shí)記錄正被驅(qū)動(dòng)的臺(tái)架202的XY坐標(biāo)以及分割圖像數(shù)據(jù)來(lái)獲得位置信息。
[0079]合成處理器303基于多條分割圖像數(shù)據(jù)的位置信息通過(guò)使用通過(guò)拍攝成像目標(biāo)的分割部分而獲得的彩色圖像數(shù)據(jù)(分割圖像數(shù)據(jù))來(lái)產(chǎn)生成像目標(biāo)的合成圖像數(shù)據(jù)。
[0080]合成邊界區(qū)域提取單元304在由合成處理器303產(chǎn)生的合成圖像數(shù)據(jù)中提取經(jīng)受例如內(nèi)插的合成邊界區(qū)域。例如，當(dāng)以簡(jiǎn)單的方式連接多條分割圖像數(shù)據(jù)時(shí)，連接區(qū)域被提取作為合成邊界區(qū)域。當(dāng)通過(guò)例如內(nèi)插平滑地連接多條分割圖像數(shù)據(jù)時(shí)，已施加內(nèi)插等的連接區(qū)域被提取作為合成邊界區(qū)域。在本實(shí)施例中，假定以與連接區(qū)域?qū)?yīng)的區(qū)彼此重疊的方式捕獲圖像，并且向獲得的多條分割圖像數(shù)據(jù)施加內(nèi)插處理，使得多條分割圖像數(shù)據(jù)被平滑地連接。
[0081]模式選擇器307選擇顯示合成邊界區(qū)域的模式。作為顯示合成邊界區(qū)域的模式，顏色的變化、亮度的變化、點(diǎn)線的顯示、閃爍等被指定。將通過(guò)使用圖5來(lái)描述細(xì)節(jié)。
[0082]合成邊界區(qū)域呈現(xiàn)單元305通過(guò)使用由模式選擇器307所選擇的模式來(lái)呈現(xiàn)由合成邊界區(qū)域提取單元304所提取的合成邊界區(qū)域。
[0083]疊加處理器306在由合成處理器303產(chǎn)生的合成圖像數(shù)據(jù)上疊加已由合成邊界區(qū)域呈現(xiàn)單元305呈現(xiàn)的用于合成邊界區(qū)域的呈現(xiàn)數(shù)據(jù)。在疊加處理之后獲得且其中產(chǎn)生的連接區(qū)域重疊的合成圖像數(shù)據(jù)中，經(jīng)受合成處理的區(qū)域與沒(méi)有經(jīng)受合成處理的原始分割圖像數(shù)據(jù)區(qū)分開(kāi)。在疊加處理之后獲得且其中合成邊界區(qū)域被區(qū)分的合成圖像數(shù)據(jù)經(jīng)由數(shù)據(jù)輸出單元308被傳送到例如外部監(jiān)視器。
[0084](圖像處理裝置的硬件配置)
[0085]圖4是示出根據(jù)本發(fā)明的圖像處理裝置的硬件配置的框圖。例如，個(gè)人計(jì)算機(jī)(PC) 400被用作信息處理裝置。
[0086]PC400包含中央處理單元(CPU) 401、硬盤驅(qū)動(dòng)(HDD) 402、隨機(jī)存取存儲(chǔ)器(RAM) 403、數(shù)據(jù)輸入/輸出單元405和將這些彼此連接的總線404。
[0087]CPU401在必要時(shí)適當(dāng)訪問(wèn)例如RAM403，并在執(zhí)行各種計(jì)算處理的同時(shí)總體控制PC400中的全部塊。硬盤驅(qū)動(dòng)(HDD) 402是永久存儲(chǔ)由CPU401執(zhí)行的OS和諸如程序和各種參數(shù)的固件且記錄并讀出信息的輔助存儲(chǔ)器。RAM403被用作例如CPU401的工作區(qū)，并且暫時(shí)存儲(chǔ)OS、正被執(zhí)行的各種程序和要被處理的各種數(shù)據(jù)，諸如在疊加處理之后獲得并且作為本發(fā)明的特征的合成圖像。
[0088]圖像顯示裝置103、輸入裝置407和作為外部裝置的成像裝置101等與數(shù)據(jù)輸入/輸出單元405連接。
[0089]圖像顯示裝置103是使用例如液晶、電致發(fā)光(EL)或陰極射線管(CRT)的顯示設(shè)備。假定圖像顯示裝置103作為外部裝置被連接?？商娲?，可假定PC400與圖像顯示裝置集成。
[0090]輸入裝置407的示例包含諸如鼠標(biāo)的定點(diǎn)設(shè)備、鍵盤、觸摸板和其它操作輸入裝置。當(dāng)輸入裝置407包含觸摸板時(shí)，觸摸板可與圖像顯示裝置103集成。
[0091]成像裝置101是圖像拾取裝備，諸如顯微鏡裝置或虛擬載片掃描儀。
[0092](合成邊界區(qū)域的顯示)
[0093]將通過(guò)使用圖5來(lái)描述作為由包含在根據(jù)本發(fā)明的圖像處理裝置中的疊加處理器306所產(chǎn)生的顯示數(shù)據(jù)、并且要在圖像顯示裝置103上顯示的疊加處理之后的合成圖像。
[0094]在根據(jù)本發(fā)明的圖像處理裝置中，通過(guò)合成通過(guò)拍攝分割部分所獲得的多條圖像數(shù)據(jù)來(lái)產(chǎn)生合成圖像數(shù)據(jù)(圖5(a))。通過(guò)呈現(xiàn)合成邊界區(qū)域并將它們疊加在獲得的合成圖像數(shù)據(jù)上，獲得其中合成邊界區(qū)域被區(qū)分的疊加處理之后的合成圖像數(shù)據(jù)(圖5(b))。
[0095]作為用于產(chǎn)生要被用于顯示合成邊界區(qū)域的數(shù)據(jù)并顯示產(chǎn)生的數(shù)據(jù)的方法，例如可以使用以下方法:通過(guò)改變合成邊界區(qū)域的顏色信息來(lái)產(chǎn)生數(shù)據(jù)的方法；通過(guò)改變合成邊界區(qū)域的亮度信息來(lái)產(chǎn)生數(shù)據(jù)的方法；通過(guò)在合成邊界區(qū)域的中心區(qū)域(中心線)中顯示網(wǎng)格來(lái)產(chǎn)生數(shù)據(jù)的方法；利用諸如箭頭的標(biāo)記顯示合成邊界區(qū)域的方法；和以時(shí)間分割的方式切換呈現(xiàn)的合成邊界區(qū)域且顯示閃爍以表示是否已執(zhí)行疊加的方法。通過(guò)改變合成邊界區(qū)域的顏色來(lái)產(chǎn)生顯示數(shù)據(jù)的方法是優(yōu)選的，原因在于用于合成邊界區(qū)域的區(qū)與其它區(qū)域區(qū)分開(kāi)。通過(guò)改變合成邊界區(qū)域的亮度來(lái)產(chǎn)生顯示數(shù)據(jù)的方法是優(yōu)選的，原因在于用于合成邊界區(qū)域的區(qū)與其它區(qū)域區(qū)分開(kāi)，并且可以使用在診斷中所需要的合成邊界區(qū)域的圖像數(shù)據(jù)。
[0096](用于顯示合成邊界區(qū)域的方法)
[0097]將使用圖6中的流程圖描述根據(jù)本發(fā)明的圖像處理裝置中的合成邊界區(qū)域顯示數(shù)據(jù)的產(chǎn)生的流程。
[0098]在步驟601中，在圖像處理裝置102中，通過(guò)將要拍攝的成像目標(biāo)的區(qū)域分割成多個(gè)區(qū)域并拍攝獲得的區(qū)域所獲得的多條圖像數(shù)據(jù)(分割圖像數(shù)據(jù))經(jīng)由數(shù)據(jù)輸入/輸出單元301從例如作為外部裝置的成像裝置101獲得，并被傳送到存儲(chǔ)保持單元302。
[0099]在步驟602中，掌握(grasp)包含于存儲(chǔ)在存儲(chǔ)保持單元302中的分割圖像數(shù)據(jù)中的位置信息或作為單獨(dú)的數(shù)據(jù)附加到分割圖像數(shù)據(jù)的位置信息。位置信息是描述哪條分割圖像數(shù)據(jù)與成像目標(biāo)的哪個(gè)拍攝部分對(duì)應(yīng)的信息。 [0100]在步驟603中，合成處理器303基于掌握的位置信息合成分割圖像數(shù)據(jù)，并產(chǎn)生成像目標(biāo)的合成圖像數(shù)據(jù)。合成方法的示例包含連接多條部分圖像數(shù)據(jù)、疊加多條部分圖像數(shù)據(jù)、α混合多條部分圖像數(shù)據(jù)和內(nèi)插以平滑地合成多條部分圖像數(shù)據(jù)。用于連接要被重疊的多條圖像數(shù)據(jù)的方法的示例包含通過(guò)基于臺(tái)架的位置信息對(duì)準(zhǔn)多條圖像數(shù)據(jù)來(lái)連接它們的方法、通過(guò)關(guān)聯(lián)多條分割圖像中的對(duì)應(yīng)點(diǎn)或?qū)?yīng)線來(lái)連接多條圖像數(shù)據(jù)的方法和基于分割圖像數(shù)據(jù)的位置信息來(lái)連接多條圖像數(shù)據(jù)的方法。疊加在廣義上意味著多條圖像數(shù)據(jù)重疊。用于疊加多條圖像數(shù)據(jù)的方法的示例包含多條圖像數(shù)據(jù)的多個(gè)部分或整體在具有重疊圖像數(shù)據(jù)的區(qū)域中重疊的情況。α混合表示使用系數(shù)(α值)合成兩個(gè)圖像。執(zhí)行內(nèi)插以平滑地連接多條圖像數(shù)據(jù)的方法的示例包含使用零階內(nèi)插的處理、使用線性內(nèi)插的處理和使用較高次內(nèi)插的處理。為了平滑地連接圖像，使用較高次內(nèi)插的處理是優(yōu)選的。
[0101]在步驟604中，模式選擇器307選擇用于顯示合成邊界區(qū)域的方法。模式選擇器307首先選擇是否要顯示合成邊界區(qū)域。如果要顯示合成邊界區(qū)域，那么模式選擇器307選擇顯示如何顯現(xiàn)。例如，作為顯示方法，選擇諸如改變顏色或改變亮度的顯示模式。
[0102]在步驟605中，確定是否要在合成圖像中顯示合成邊界區(qū)域。如果確定不在合成圖像中顯示合成邊界區(qū)域，那么在不呈現(xiàn)合成邊界區(qū)域或在疊加處理器306中疊加呈現(xiàn)的合成邊界區(qū)域的情況下圖像數(shù)據(jù)經(jīng)由數(shù)據(jù)輸出單元308被傳送到外面。如果確定要在合成圖像中顯示合成邊界區(qū)域，那么處理前進(jìn)到下一步驟S606。
[0103]在步驟606中，基于位置信息從產(chǎn)生的合成圖像數(shù)據(jù)提取合成邊界區(qū)域的區(qū)。
[0104]在步驟607中，合成邊界區(qū)域呈現(xiàn)單元305通過(guò)使用在步驟604中選擇的顯示方法來(lái)產(chǎn)生在步驟606中提取的合成邊界區(qū)域的呈現(xiàn)數(shù)據(jù)。以下將使用另一流程圖描述合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)的產(chǎn)生的細(xì)節(jié)。
[0105]在步驟608中，疊加處理器306將步驟607中所產(chǎn)生的合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)疊加在步驟603中所獲得的合成圖像數(shù)據(jù)上，并獲得在疊加處理之后獲得且其中合成邊界區(qū)域與其它區(qū)域區(qū)分開(kāi)的合成圖像數(shù)據(jù)。以下將使用另一流程圖描述疊加處理的細(xì)節(jié)。
[0106](呈現(xiàn)連接區(qū)域)
[0107]圖7是作為合成邊界區(qū)域的連接區(qū)域的呈現(xiàn)數(shù)據(jù)的產(chǎn)生的流程圖。將使用圖7描述通過(guò)改變合成邊界區(qū)域的亮度或顏色來(lái)執(zhí)行顯示的情況下的流程。
[0108]在步驟S701中，確定已由模式選擇器307設(shè)定的模式。在該步驟中，確定要在呈現(xiàn)合成邊界區(qū)域中改變亮度還是顏色。
[0109]在步驟S702中，確定是否要在合成邊界區(qū)域的呈現(xiàn)中改變亮度。如果要改變亮度，那么處理前進(jìn)到步驟S703。如果不要改變亮度，那么處理前進(jìn)到步驟S706。
[0110]在步驟S703中，確定是否要通過(guò)降低合成邊界區(qū)域的亮度來(lái)改變亮度。如果合成邊界區(qū)域的亮度與合成邊界區(qū)域以外的區(qū)的亮度相比要被相對(duì)降低，那么處理前進(jìn)到步驟S704。如果不要降低合成邊界區(qū)域的亮度，即要改變合成邊界區(qū)域以外的區(qū)的亮度或者要增加合成邊界區(qū)域的亮度，那么處理前進(jìn)到步驟S705。
[0111]在步驟S704中，在降低亮度的情況下產(chǎn)生合成圖像中的合成邊界區(qū)域的呈現(xiàn)數(shù)據(jù)。
[0112]在步驟S705中，在不改變或者增加亮度的情況下產(chǎn)生合成邊界區(qū)域的呈現(xiàn)數(shù)據(jù)。
[0113]在步驟S706中，為了改變顏色，設(shè)定當(dāng)顯示合成邊界區(qū)域時(shí)所使用的顏色。
[0114]在步驟S707中，基于已在步驟S706中設(shè)定的顏色產(chǎn)生合成邊界區(qū)域的呈現(xiàn)數(shù)據(jù)。
[0115](疊加合成邊界區(qū)域呈現(xiàn)數(shù)據(jù))
[0116]圖8是在合成圖像上疊加合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)的流程圖。在圖8中，在合成圖像數(shù)據(jù)上疊加合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)。當(dāng)選擇改變亮度作為合成邊界區(qū)域的呈現(xiàn)方法時(shí)，顯示方法中的一種是降低合成圖像的亮度使得合成邊界區(qū)域與其它區(qū)域區(qū)分開(kāi)。當(dāng)要在觀察顯示圖像的同時(shí)調(diào)查合成邊界區(qū)域時(shí)，降低合成圖像的亮度是有利的。
[0117]在步驟S801中，獲得通過(guò)由合成處理器303執(zhí)行的合成所產(chǎn)生的合成圖像數(shù)據(jù)。
[0118]在步驟S802中，獲得通過(guò)合成邊界區(qū)域呈現(xiàn)單元305所產(chǎn)生的合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)。
[0119]在步驟S803中，基于在步驟S701中所確定的合成邊界區(qū)域的呈現(xiàn)方法的設(shè)定，確定是否要降低合成邊界區(qū)域的亮度。如果合成邊界區(qū)域的亮度與合成邊界區(qū)域以外的區(qū)的亮度相比要被相對(duì)降低，那么處理前進(jìn)到步驟S804。如果不要降低合成邊界區(qū)域的亮度，SP要改變合成邊界區(qū)域以外的區(qū)的亮度，那么處理前進(jìn)到步驟S805。在步驟S805中，降低合成圖像中的合成邊界區(qū)域的亮度。
[0120]在步驟S804中，為了與合成邊界區(qū)域以外的區(qū)的亮度相比相對(duì)降低合成邊界區(qū)域的亮度，在步驟S603中所產(chǎn)生的合成圖像數(shù)據(jù)上疊加其中合成邊界區(qū)域的亮度被降低的合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)。除了通過(guò)在合成圖像數(shù)據(jù)上重寫(overwrite)合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)來(lái)產(chǎn)生疊加圖像的處理以外，疊加處理的示例還包含多條圖像數(shù)據(jù)中的每一條經(jīng)受α混合使得產(chǎn)生疊加圖像的處理。
[0121](顯示畫面布局)[0122]圖9描述在圖像顯示裝置103上顯示由根據(jù)本發(fā)明的圖像處理裝置102所產(chǎn)生的用于顯示的圖像數(shù)據(jù)的情況的示例。
[0123]圖9(a)示出圖像顯示裝置103的畫面的布局。在畫面中的整個(gè)窗口 901中，顯示用于詳細(xì)觀察的圖像拾取目標(biāo)圖像數(shù)據(jù)的顯示區(qū)902、要觀察的成像目標(biāo)的縮略圖圖像903和顯示設(shè)定區(qū)904。這些區(qū)可以將整個(gè)窗口 901中的顯示區(qū)分成功能區(qū)的方式在單個(gè)文件界面中被顯示，或者可以在單獨(dú)的窗口中顯示每個(gè)區(qū)的方式在多個(gè)文件界面中被顯示。在用于圖像拾取目標(biāo)圖像數(shù)據(jù)的顯示區(qū)902中，顯示用于詳細(xì)觀察的成像目標(biāo)的圖像數(shù)據(jù)。來(lái)自用戶的操作指令導(dǎo)致顯示區(qū)的移動(dòng)(要在整個(gè)成像目標(biāo)中觀察的部分區(qū)的選擇和移動(dòng))和由于顯示倍率的變化而造成的放大或縮小圖像的顯示。縮略圖圖像903表示圖像拾取目標(biāo)圖像數(shù)據(jù)的顯示區(qū)902相對(duì)于成像目標(biāo)的整個(gè)圖像的位置和尺寸。在顯示設(shè)定區(qū)904中，例如，通過(guò)來(lái)自外部連接的諸如觸摸板或鼠標(biāo)的輸入裝置407的用戶指令來(lái)選擇和按壓設(shè)置按鈕905，由此可改變顯示設(shè)定。
[0124]圖9(b)示出當(dāng)選擇和按壓設(shè)置按鈕905時(shí)顯示為對(duì)話框且其中選擇是否要顯示作為合成圖像中的合成邊界區(qū)域的連接區(qū)域的顯示設(shè)定畫面。在本實(shí)施例中，假定提供設(shè)置按鈕并通過(guò)按壓按鈕打開(kāi)設(shè)定畫面?？商娲兀芍苯釉陲@示設(shè)定區(qū)904上提供可顯示、選擇和改變圖9 (c)所示的各種詳細(xì)設(shè)定的Π。可代替的是，可顯示其中集成顯示包含是否要顯示合成邊界區(qū)域的詳細(xì)設(shè)定的列表的畫面。
[0125]圖9(c)示出用于連接區(qū)域并且當(dāng)要顯示作為合成邊界區(qū)域的連接區(qū)域時(shí)顯示為對(duì)話框的顯示設(shè)定畫面。在顯示設(shè)定畫面中，選擇或設(shè)定如何顯示作為合成圖像中的合成邊界區(qū)域的連接區(qū)域。具體地，從例如以下選項(xiàng)選擇作為合成邊界區(qū)域的連接區(qū)域的顯示方法:改變連接區(qū)域的顏色；改變連接區(qū)域的亮度；和改變合成圖像的亮度。選擇改變顏色和選擇改變亮度是相互排 斥的。當(dāng)要改變連接區(qū)域的顏色時(shí)，可以選擇連接區(qū)域的顏色。在改變顏色時(shí)，能夠進(jìn)一步提供顏色樣本的列表以允許用戶選擇希望的顏色。在要改變合成邊界區(qū)域的區(qū)的亮度的情況下，或者在要改變合成邊界區(qū)域以外的區(qū)的亮度的情況下，可以設(shè)定要改變亮度的程度。在改變亮度中，可以假定以下情況:使用例如使用滑塊的直觀界面的情況；和輸入數(shù)值以相對(duì)于當(dāng)前亮度相對(duì)改變亮度的情況。另外，能夠在合成邊界區(qū)域經(jīng)受疊加處理時(shí)對(duì)要疊加的圖像設(shè)定α值，以便設(shè)定半透明疊加圖像的顯示。
[0126]圖9(d)示出在改變合成邊界區(qū)域的顏色時(shí)顯示的示例性顯示畫面。在本示例中，使用特定的顏色作為十字形連接區(qū)域的顏色呈現(xiàn)圖像，該十字形連接區(qū)域是四條部分圖像數(shù)據(jù)中的合成邊界區(qū)域，由此，可以掌握連接區(qū)域的位置和多條部分圖像數(shù)據(jù)之間的關(guān)系。圖9(e)示出通過(guò)降低合成邊界區(qū)域以外的合成圖像的亮度來(lái)使合成邊界區(qū)域與其它區(qū)域區(qū)分開(kāi)的示例性顯示畫面。在本示例中，四條部分圖像數(shù)據(jù)中的合成邊界區(qū)域以外的區(qū)的亮度被降低，由此可以深入觀察合成邊界區(qū)域中的細(xì)胞和組織片。
[0127](合成邊界區(qū)域區(qū)的顯示的改變)
[0128]在以用戶希望的方式顯示合成圖像數(shù)據(jù)中的合成邊界區(qū)域之后，可通過(guò)來(lái)自用戶的指令進(jìn)一步改變合成邊界區(qū)域的顯示的模式。將通過(guò)使用圖10中的流程圖來(lái)描述改變合成邊界區(qū)域區(qū)的顯示模式(疊加處理)的流程。
[0129]在步驟S1001中，確定是否已接收到來(lái)自用戶的用于改變合成邊界區(qū)域的顯示的指令。如果已接收到指令，那么處理前進(jìn)到步驟S1002。如果還沒(méi)有接收到指令，那么保持當(dāng)前的顯示。
[0130]在步驟S1002中，掌握來(lái)自用戶的關(guān)于合成邊界區(qū)域的顯示模式的指令。
[0131]在步驟S1003中，獲得合成邊界區(qū)域的圖像數(shù)據(jù)。該處理與圖6中的步驟606相同。
[0132]在步驟S1004中，合成邊界區(qū)域呈現(xiàn)單元305通過(guò)使用在步驟S1002中確定的顯示方法來(lái)產(chǎn)生合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)。產(chǎn)生合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)的該處理與圖7的相同。
[0133]在步驟S1005中，在步驟S1004中所產(chǎn)生的合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)被疊加在圖6中的步驟603中所描述的合成圖像上，并且獲得在疊加處理之后獲得且其中合成邊界區(qū)域與其它區(qū)域區(qū)分開(kāi)的合成圖像數(shù)據(jù)。該疊加處理與圖8的相同。
[0134]因此，可依賴于用戶的指令或意圖改變觀察圖像中的合成邊界區(qū)域的顯示方法。例如，在圖像在選擇降低合成邊界區(qū)域的亮度的顯示方法的狀態(tài)下被觀察的情況下，當(dāng)關(guān)注區(qū)從合成邊界區(qū)域以外的區(qū)偏移到合成邊界區(qū)域中的區(qū)時(shí)，合成邊界區(qū)域的亮度返回到原始值，而取而代之的是，降低合成邊界區(qū)域以外的區(qū)的亮度。因此，可在關(guān)注合成邊界區(qū)域的同時(shí)執(zhí)行組織片和細(xì)胞的平滑的形態(tài)觀察。
[0135]在本實(shí)施例中，能夠執(zhí)行以下一系列的處理:事先在整個(gè)合成圖像數(shù)據(jù)上疊加合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)；選擇要在圖像顯示裝置103上顯示的疊加合成圖像的區(qū)域；和在圖像顯示裝置103上輸出選擇的區(qū)域。可替代地，在必要時(shí)，可疊加和輸出與要在圖像顯示裝置103上顯示的區(qū)域?qū)?yīng)的合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)。
[0136]通過(guò)將觀察圖像中的合成邊界區(qū)域與其它區(qū)域區(qū)分開(kāi)，防止難以使用合成邊界區(qū)域執(zhí)行高度精確的診斷的情況。特別地，在本實(shí)施例中，假定合成邊界區(qū)域具有通過(guò)內(nèi)插獲得的一定量的連接區(qū)域的情況。因此，觀察圖像被顯示，并且同時(shí)，通過(guò)改變其亮度區(qū)分合成邊界區(qū)域，由此可以在不妨礙診斷處理的情況下執(zhí)行診斷成像。
[0137]第二實(shí)施例
[0138]將使用附圖描述根據(jù)本發(fā)明的第二實(shí)施例的圖像顯示系統(tǒng)。
[0139]在第一實(shí)施例中，對(duì)于其中例如向通過(guò)拍攝分割部分所獲得的多條圖像數(shù)據(jù)施加內(nèi)插的合成圖像數(shù)據(jù)產(chǎn)生要通過(guò)改變合成邊界區(qū)域的顏色或亮度而顯示的顯示數(shù)據(jù)。在第二實(shí)施例中，使用其中沿一維連接區(qū)域(線)對(duì)準(zhǔn)通過(guò)拍攝分割部分而獲得的圖像的合成圖像，產(chǎn)生要以區(qū)分連接區(qū)域的線的方式顯示的顯示數(shù)據(jù)。
[0140]圖像合成方法的示例包含僅依賴于臺(tái)架的位置精度基于臺(tái)架的位置信息對(duì)準(zhǔn)圖像的方法，和通過(guò)諸如仿射變換的幾何變換改變獲得的分割圖像數(shù)據(jù)中的像素的位置且在連接區(qū)域的理想位置處合成圖像的方法。除了與第一實(shí)施例中的那些組件不同的組件以夕卜，可在第二實(shí)施例中使用在第一實(shí)施例中所描述的配置。
[0141](圖像處理裝置的系統(tǒng)配置)
[0142]圖11是根據(jù)本發(fā)明的第二實(shí)施例的圖像顯示系統(tǒng)的裝置配置的總體示圖。
[0143]在圖11中，根據(jù)本發(fā)明的使用圖像處理裝置的圖像顯示系統(tǒng)包含圖像服務(wù)器1101、圖像處理裝置102和圖像顯示裝置103。圖像處理裝置102可從圖像服務(wù)器1101獲得成像目標(biāo)的分割圖像，并可產(chǎn)生要在圖像顯示裝置103上顯示的圖像數(shù)據(jù)。圖像服務(wù)器1101和圖像處理裝置102經(jīng)由網(wǎng)絡(luò)1102與作為通用I/F的LAN線纜1103連接。圖像服務(wù)器1101是包含存儲(chǔ)由作為虛擬載片裝置的成像裝置101所捕獲的分割圖像數(shù)據(jù)的大容量存儲(chǔ)設(shè)備的計(jì)算機(jī)。圖像服務(wù)器1101可在與圖像服務(wù)器1101連接的本地存儲(chǔ)器中將分割圖像作為組存儲(chǔ)?？商娲兀瑘D像服務(wù)器1101可由單獨(dú)存在于網(wǎng)絡(luò)上的某處的服務(wù)器(云服務(wù)器)構(gòu)成，并可單獨(dú)地具有每一條分割圖像數(shù)據(jù)自身及其鏈接信息。不必將分割圖像數(shù)據(jù)自身存儲(chǔ)在一個(gè)服務(wù)器中。圖像處理裝置102和圖像顯示裝置103與根據(jù)第一實(shí)施例的圖像拾取系統(tǒng)中的類似。
[0144]在圖11中的示例中，圖像處理系統(tǒng)由圖像服務(wù)器1101、圖像處理裝置102和圖像顯示裝置103這三個(gè)裝置構(gòu)成。但是，本發(fā)明的配置不限于此。例如，可以使用圖像顯示裝置被集成到其中的圖像處理裝置，或者圖像處理裝置102的一部分功能可被合并到圖像服務(wù)器1101中。相反，圖像服務(wù)器1101和圖像處理裝置102的功能可被分割成在多個(gè)裝置中執(zhí)行的小功能。
[0145](合成邊界區(qū)域的顯示)
[0146]將使用圖12描述在疊加處理之后獲得、作為由包含在根據(jù)第二實(shí)施例的圖像處理裝置中的疊加處理器306所產(chǎn)生的顯示數(shù)據(jù)、且在圖像顯示裝置103上被顯示的合成圖像。
[0147]在圖12中，通過(guò)拍攝分割部分所獲得的多條圖像數(shù)據(jù)在以任何方式經(jīng)受例如坐標(biāo)變換之后被連接。實(shí)際上，通過(guò)沿任意邊界對(duì)準(zhǔn)在變換處理之后獲得的多條圖像數(shù)據(jù)來(lái)產(chǎn)生合成圖像。通過(guò)在連接的合成圖像數(shù)據(jù)上疊加與用于連接作為合成邊界區(qū)域的區(qū)域的線對(duì)應(yīng)的呈現(xiàn)數(shù)據(jù)，獲得其中合成邊界區(qū)域與其它區(qū)域區(qū)分開(kāi)的合成圖像數(shù)據(jù)。用于連接區(qū)域的線的顏色、線寬和線型可被設(shè)定。例如，線型可以是單線或多線，可以是點(diǎn)線、虛線或點(diǎn)-劃線，或者可以是這些線的組合。并且，用于連接區(qū)域的線以時(shí)間分割的方式切換，并且可以顯示閃爍以表示是否存在線。
[0148](呈現(xiàn)連接區(qū)域)
[0149]圖13是與根據(jù)第一實(shí)施例的圖6中的步驟607中的處理對(duì)應(yīng)并且其中產(chǎn)生用于合成邊界區(qū)域的呈現(xiàn)數(shù)據(jù)的第二實(shí)施例中的處理的流程圖。
[0150]在步驟S1301、S1302和S1303中，根據(jù)由模式選擇器307執(zhí)行的選擇來(lái)分別選擇顏色、線寬和線型。
[0151]在步驟S1304中，反映在步驟S1301、S1302和S1303中選擇的設(shè)定值，以便產(chǎn)生與合成邊界區(qū)域?qū)?yīng)的線的呈現(xiàn)數(shù)據(jù)。
[0152](合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)的疊加)
[0153]圖14是根據(jù)第二實(shí)施例的在合成圖像上疊加合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)的流程圖。該處理流程與根據(jù)第一實(shí)施例的圖8中的處理流程對(duì)應(yīng)。
[0154]在步驟S1401中，獲得通過(guò)由合成處理器303所執(zhí)行的合成處理而獲得的合成圖像數(shù)據(jù)。
[0155]在步驟S1402中，獲得通過(guò)合成邊界區(qū)域呈現(xiàn)單元305所產(chǎn)生的合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)。參照?qǐng)D13描述產(chǎn)生合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)的處理。
[0156]在步驟S1403中，在步驟S1402中所獲得的合成邊界區(qū)域呈現(xiàn)數(shù)據(jù)上疊加在步驟S1401中所獲得的合成圖像數(shù)據(jù)。
[0157](畫面布局)[0158]圖15(a)示出根據(jù)第二實(shí)施例的當(dāng)在圖像顯示裝置103上顯示由圖像處理裝置102所產(chǎn)生的圖像數(shù)據(jù)時(shí)所使用的示例性畫面布局。顯示區(qū)具有整個(gè)窗口 1501，其中包含用于詳細(xì)觀察的圖像拾取目標(biāo)圖像數(shù)據(jù)的顯示區(qū)1502、要觀察的成像目標(biāo)的縮略圖圖像1503和顯示設(shè)定區(qū)1504。在用于圖像拾取目標(biāo)圖像數(shù)據(jù)的顯示區(qū)1502中，除了用于詳細(xì)觀察的圖像拾取目標(biāo)圖像數(shù)據(jù)以外，合成圖像中的連接區(qū)域1505被顯示為線。圖15(b)示出當(dāng)選擇和按壓設(shè)置按鈕時(shí)顯示為對(duì)話框的顯示設(shè)定畫面，并且選擇作為合成圖像中的合成邊界區(qū)域的連接區(qū)域是否顯示為線。圖15(c)示出用于連接區(qū)域的線的各種顯示設(shè)定并且當(dāng)要顯示用于連接作為合成邊界區(qū)域的區(qū)域的線時(shí)顯示為對(duì)話框的畫面，并且設(shè)定要如何顯示用于連接作為合成圖像中的合成邊界區(qū)域的區(qū)域的線。具體地，例如，可選擇和設(shè)定線的顏色、線寬和線型。在本實(shí)施例中，與第一實(shí)施例類似，假定提供設(shè)置按鈕并通過(guò)按壓按鈕打開(kāi)設(shè)定畫面。但是，可直接在顯示設(shè)定區(qū)1504上提供可顯示、選擇和改變圖15(c)所示的各種詳細(xì)設(shè)定的UI?？商娲?，可顯示其中集成提供包含是否要顯示合成邊界區(qū)域的詳細(xì)設(shè)定的列表的畫面。
[0159]在本實(shí)施例中，能夠確定由不可避免地發(fā)生的部分圖像之間的位置偏離和部分圖像之間的焦點(diǎn)偏離所導(dǎo)致的奇怪圖像顯現(xiàn)。作為結(jié)果，防止難以使用合成邊界區(qū)域執(zhí)行高度精確的診斷的情況。
[0160]第三實(shí)施例
[0161]在第三實(shí)施例中，通過(guò)設(shè)定邊界來(lái)改變合成圖像中的合成邊界區(qū)域的顯示模式。
[0162]在第三實(shí)施例中，與第一實(shí)施例類似，在連接區(qū)域具有一定程度的寬度的前提下，顯示倍率被設(shè)定為邊界。當(dāng)顯示倍率高時(shí)，如第一實(shí)施例那樣，顯示合成邊界區(qū)域。當(dāng)顯示倍率變低時(shí)，如第二實(shí)施例那樣，合成邊界區(qū)域顯示為線。
[0163]例如，在當(dāng)使用40倍的顯示倍率時(shí)其中連接區(qū)域的寬度為64像素的數(shù)據(jù)的情況下，為了詳細(xì)觀察，用于顯示連接區(qū)域的像素的數(shù)量在40倍的顯示倍率(光學(xué)顯微鏡的場(chǎng)中的觀察倍率)下為64，并且在20倍的顯示倍率下為32。因此，由于連接區(qū)域具有足夠的寬度，盡管提供亮度的變化，但希望從觀察的角度顯示連接區(qū)域的圖像。但是，在病理診斷中的篩選處理中，典型地利用5?10倍的顯示倍率執(zhí)行鳥瞰圖觀察。在上述情況下，用于顯示連接區(qū)域的像素的數(shù)量為8?16。這對(duì)于組織和細(xì)胞的形態(tài)觀察是不足的。隨著顯示倍率變低，這種趨勢(shì)明顯地顯現(xiàn)，并且亮度改變的連接區(qū)域的可見(jiàn)性顯著降低。為了補(bǔ)全這一點(diǎn)，在合成邊界區(qū)域的寬度不足以觀察的倍率下，切換到合成邊界區(qū)域如第二實(shí)施例中所描述的那樣顯示為線的方法是有效的。一般地，希望通過(guò)使用執(zhí)行篩選的10倍的倍率作為邊界來(lái)改變合成邊界區(qū)域顯示的模式。
[0164]在本實(shí)施例中，根據(jù)用作邊界的顯示倍率切換用于呈現(xiàn)合成邊界區(qū)域的方法，由此能夠以適于觀察顯示倍率中的每一個(gè)的目的的方式顯示連接區(qū)域。
[0165]其它實(shí)施例
[0166]在第一到第三實(shí)施例中，描述了與用戶可視覺(jué)地觀察的圖像數(shù)據(jù)(諸如顯微鏡圖像)等同的圖像數(shù)據(jù)的連接區(qū)域。本發(fā)明不僅可應(yīng)用于基于這種視覺(jué)信息的圖像的連接區(qū)域，而且可應(yīng)用于其通過(guò)使用各種類型的部件或原理將關(guān)于諸如人體的內(nèi)部結(jié)構(gòu)的一般不可見(jiàn)對(duì)象的信息可視化的裝置(諸如磁共振成像裝置(MRI)、X射線診斷裝置或使用光學(xué)超聲的診斷設(shè)備)而獲得的顯示數(shù)據(jù)的連接區(qū)域，從而實(shí)現(xiàn)類似的效果。特別地，與可見(jiàn)圖像不同，這是從基于強(qiáng)度的信息而產(chǎn)生的圖像數(shù)據(jù)。因此，當(dāng)發(fā)生連接區(qū)域周圍的襯度或亮度的變化、由校正處理導(dǎo)致的圖像劣化或由縫合(Stitch)對(duì)準(zhǔn)導(dǎo)致的誤差時(shí)，與使用例如具有顏色信息的顯微鏡獲得的圖像信息相比，非常難以確定這種圖像變化或奇異點(diǎn)是否由于連接區(qū)域而發(fā)生或者指示診斷部位的異常狀態(tài)。因此，向用戶清楚地展現(xiàn)連接區(qū)域使得給予用戶連接區(qū)域周圍的圖像區(qū)可能具有低的可靠性的指示是非常重要的。
[0167]本發(fā)明的目的可實(shí)現(xiàn)如下。即，其中記錄實(shí)現(xiàn)上述實(shí)施例的功能中的一些或全部的軟件程序代碼的記錄介質(zhì)(或存儲(chǔ)介質(zhì))被供給到系統(tǒng)或裝置。然后，系統(tǒng)或裝置中的計(jì)算機(jī)(或CPU或MPU)讀出并執(zhí)行存儲(chǔ)在記錄介質(zhì)中的程序代碼。在這種情況下，從記錄介質(zhì)讀出的程序代碼自身實(shí)現(xiàn)上述實(shí)施例的功能，并且其中記錄程序代碼的記錄介質(zhì)包含在本發(fā)明中。
[0168]計(jì)算機(jī)執(zhí)行讀出的程序代碼，由此，例如，在計(jì)算機(jī)上操作的操作系統(tǒng)(OS)基于程序代碼的指令執(zhí)行實(shí)際處理中的一些或全部。這些處理實(shí)現(xiàn)上述實(shí)施例的功能的情況可包含在本發(fā)明中。
[0169]另外，從記錄介質(zhì)讀出的程序代碼可被寫入到插入計(jì)算機(jī)中的功能擴(kuò)展卡或包含在與計(jì)算機(jī)連接的功能擴(kuò)展單元中的存儲(chǔ)器中。然后，例如，包含在功能擴(kuò)展卡或功能擴(kuò)展單元中的CPU基于程序代碼的指令執(zhí)行實(shí)際處理中的一些或全部，并且這種處理實(shí)現(xiàn)上述實(shí)施例的功能。這種情況也包含在本發(fā)明中。
[0170]在本發(fā)明被應(yīng)用于上述記錄介質(zhì)的情況下，與上述流程圖對(duì)應(yīng)的程序代碼存儲(chǔ)在記錄介質(zhì)中。
[0171]本發(fā)明不限于上述實(shí)施例。在不背離本發(fā)明的精神和范圍的情況下可進(jìn)行各種修改和改變。因此，附加權(quán)利要求以向公眾宣告本發(fā)明的范圍。
[0172]本申請(qǐng)要求2011年12月27日提交的日本專利申請(qǐng)N0.2011-286785和2012年12月26日提交的日本專利申請(qǐng)N0.2012-282781的權(quán)益，其在此通過(guò)全部引用而被特此合并。
[0173]附圖標(biāo)記列表
[0174]101成像裝置
[0175]102圖像處理裝置
[0176]103圖像顯示裝置
[0177]303合成處理器
[0178]304合成邊界區(qū)域提取單元
[0179]305合成邊界區(qū)域呈現(xiàn)單元
[0180]306疊加處理器
[0181]307模式選擇器
[0182]1101圖像服務(wù)器
【權(quán)利要求】
1.一種圖像處理裝置，包括: 圖像數(shù)據(jù)獲取部件，該圖像數(shù)據(jù)獲取部件獲取通過(guò)捕獲成像目標(biāo)的捕獲區(qū)被分割成的多個(gè)區(qū)域的圖像而獲得的多條分割圖像數(shù)據(jù)； 合成圖像數(shù)據(jù)產(chǎn)生部件，該合成圖像數(shù)據(jù)產(chǎn)生部件基于多個(gè)分割圖像數(shù)據(jù)產(chǎn)生合成圖像數(shù)據(jù)；以及 合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件，該合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件產(chǎn)生用于供觀察者識(shí)別合成圖像數(shù)據(jù)中的合成邊界區(qū)域的顯示圖像數(shù)據(jù)， 其中，所述合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件改變包含在顯示區(qū)中的所有合成邊界區(qū)域的顏色和亮度中的至少一個(gè)。
2.根據(jù)權(quán)利要求1的圖像處理裝置， 其中，所述圖像處理裝置被應(yīng)用于通過(guò)使用顯微鏡獲得的圖像。
3.根據(jù)權(quán)利要求1的圖像處理裝置， 其中，所述圖像處理裝置被用于虛擬載片系統(tǒng)中。
4.根據(jù)權(quán)利要求1~3中的任一項(xiàng)的圖像處理裝置， 其中，所述圖像數(shù)據(jù)獲取部件獲取通過(guò)以存在多條分割圖像數(shù)據(jù)重疊的區(qū)域的方式捕獲圖像而獲得的多條分割圖像數(shù)據(jù)，并且 其中，所述合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件使用多條分割圖像數(shù)據(jù)重疊的區(qū)域的圖像數(shù)據(jù)，以便產(chǎn)生用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)。
5.根據(jù)權(quán)利要求4的圖像處理裝置， 其中，所述合成圖像數(shù)據(jù)產(chǎn)生部件對(duì)多條分割圖像數(shù)據(jù)執(zhí)行疊加或混合以便產(chǎn)生合成圖像數(shù)據(jù)。
6.根據(jù)權(quán)利要求4的圖像處理裝置， 其中，所述合成圖像數(shù)據(jù)產(chǎn)生部件對(duì)多條分割圖像數(shù)據(jù)重疊的區(qū)域進(jìn)行內(nèi)插，以便產(chǎn)生合成圖像數(shù)據(jù)。
7.根據(jù)權(quán)利要求1~3中的任一項(xiàng)的圖像處理裝置， 其中，所述合成圖像數(shù)據(jù)產(chǎn)生部件對(duì)多條分割圖像數(shù)據(jù)進(jìn)行合成以便產(chǎn)生要被顯示的合成圖像數(shù)據(jù)，并且所述合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件產(chǎn)生多條分割圖像數(shù)據(jù)被連接的區(qū)域的線作為合成邊界區(qū)域數(shù)據(jù)。
8.根據(jù)權(quán)利要求1~7中的任一項(xiàng)的圖像處理裝置，還包括: 合成邊界區(qū)域數(shù)據(jù)切換部件，該合成邊界區(qū)域數(shù)據(jù)切換部件執(zhí)行由所述合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件所產(chǎn)生的用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)的切換。
9.根據(jù)權(quán)利要求8的圖像處理裝置， 其中，所述合成邊界區(qū)域數(shù)據(jù)切換部件在某一邊界處執(zhí)行由所述合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件所產(chǎn)生的用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)的切換。
10.根據(jù)權(quán)利要求8的圖像處理裝置， 其中，所述合成邊界區(qū)域數(shù)據(jù)切換部件以某一倍率執(zhí)行由所述合成邊界區(qū)域顯示數(shù)據(jù)產(chǎn)生部件所產(chǎn)生的用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)的切換。
11.一種顯微鏡圖像顯示系統(tǒng)，包括: 圖像處理裝置；以及圖像顯示裝置， 其中，所述圖像處理裝置是根據(jù)權(quán)利要求1~6中的任一項(xiàng)的圖像處理裝置，并且 其中，所述圖像顯示裝置顯示用于成像目標(biāo)且從所述圖像處理裝置傳送的合成圖像數(shù)據(jù)和用于供觀察者識(shí)別合成邊界區(qū)域的圖像數(shù)據(jù)。
12.根據(jù)權(quán)利要求11的顯微鏡圖像顯示系統(tǒng)， 其中，所述顯微鏡圖像顯示系統(tǒng)具有用于在接收到顯示合成邊界區(qū)域的指令時(shí)顯示所述合成邊界區(qū)域的機(jī)構(gòu)。
13.一種圖像處理方法，包括: 獲取通過(guò)捕獲成像目標(biāo)的捕獲區(qū)被分割成的多個(gè)區(qū)域的圖像而獲得的多條分割圖像數(shù)據(jù)； 基于多個(gè)分割圖像數(shù)據(jù)產(chǎn)生合成圖像數(shù)據(jù)；以及 產(chǎn)生用于供觀察者識(shí)別合成圖像數(shù)據(jù)中的合成邊界區(qū)域的顯示圖像數(shù)據(jù)， 其中，在顯示圖像數(shù)據(jù)的產(chǎn)生中，對(duì)于包含在顯示區(qū)中的所有合成邊界區(qū)域改變顏色和亮度中的至少一個(gè)。
14.根據(jù)權(quán)利要求13的 圖像處理方法， 其中，合成圖像數(shù)據(jù)的產(chǎn)生和顯示圖像數(shù)據(jù)的產(chǎn)生被同時(shí)執(zhí)行。
15.一種使計(jì)算機(jī)執(zhí)行處理的程序，該處理包括: 獲取通過(guò)捕獲成像目標(biāo)的捕獲區(qū)被分割成的多個(gè)區(qū)域的圖像而獲得的多條分割圖像數(shù)據(jù)； 基于多個(gè)分割圖像數(shù)據(jù)產(chǎn)生合成圖像數(shù)據(jù)；以及 產(chǎn)生用于供觀察者識(shí)別合成圖像數(shù)據(jù)中的合成邊界區(qū)域的顯示圖像數(shù)據(jù)， 其中，在顯示圖像數(shù)據(jù)的產(chǎn)生中，對(duì)于包含在顯示區(qū)中的所有合成邊界區(qū)域改變顏色和亮度中的至少一個(gè)。
16.一種存儲(chǔ)根據(jù)權(quán)利要求15的程序的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。
【文檔編號(hào)】H04N1/387GK104025150SQ201280064883
【公開(kāi)日】2014年9月3日 申請(qǐng)日期:2012年12月27日 優(yōu)先權(quán)日:2011年12月27日
【發(fā)明者】辻本卓哉, 谷崇男 申請(qǐng)人:佳能株式會(huì)社