專利名稱:圖像處理設(shè)備、圖像處理方法和計算機程序的制作方法
技術(shù)領(lǐng)域:
本公開涉及圖像處理設(shè)備、圖像處理方法和計算機程序。
背景技術(shù):
時分驅(qū)動視頻顯示裝置是輸出多個視頻流而同時以時分方式順序地切換視頻流的視頻顯示裝置。這樣的時分驅(qū)動視頻顯示裝置的例子包括利用所謂的快門眼鏡的時分立體視頻顯示系統(tǒng)(例如,參見日本專利申請?zhí)亻_第9-138384號、第2000-36969號和第 2003-45343號)和利用快門眼鏡以允許多個觀看者觀看不同視頻而無需劃分屏幕的多視頻顯示系統(tǒng)。人們從右眼和左眼所獲得的二維視網(wǎng)膜視頻之間的差異(雙眼視差)中提取多個深度線索(cue)并且合并多個深度線索,由此感知三維信息并將對象識別為像三維的立體視頻。眼球的轉(zhuǎn)動運動改變會聚角,即視線的交叉角,并且人們基于該會聚角來確定距對象的距離,從而以三維方式識別空間。利用該原理以立體方式示出圖像被稱為立體視覺。利用用于右眼和左眼的各圖像所示出的圖像被稱作立體圖像。通過準(zhǔn)備用于右眼和左眼的多個圖像并連續(xù)改變用于右眼和左眼的多個圖像而示出的視頻被稱作立體視頻。能夠顯示立體圖像和視頻的設(shè)備被稱作立體視頻顯示裝置。時分立體視頻顯示系統(tǒng)是利用以下立體視頻顯示裝置的視頻顯示系統(tǒng),該立體視頻顯示裝置以極短的周期在整個屏幕上交替顯示左眼視頻和右眼視頻并同時與左眼視頻和右眼視頻的顯示周期同步地單獨提供右眼視頻和左眼視頻。例如,在快門眼鏡方法中,在顯示左眼視頻的同時,快門眼鏡的左眼單元使光通過,而右眼單元屏蔽光。另一方面,在顯示右眼視頻的同時,快門眼鏡的右眼單元使光通過,而左眼單元屏蔽光。一種用于生成立體圖像的方法包括準(zhǔn)備兩個攝像機,以水平移位的方式安裝一個攝像機用于右眼而安裝另一個攝像機用于左眼,并獲取具有視差的圖像的方法。在通過計算機圖形制作的立體視頻中,從屏幕到用戶的距離以及右眼的位置和左眼的位置是虛擬限定的,并且被渲染為好像從右眼的位置觀看要顯示的對象的圖像和被渲染為好像從左眼的位置觀看要顯示的對象的圖像被生成為兩個視差圖像。
發(fā)明內(nèi)容
然而,由于根據(jù)上述步驟生成利用上述雙眼視差的立體圖像,因而在圖像生成期間的視點位置(上述攝像機位置和虛擬視點位置)限制為每個圖像一個點作為可以被正確識別為立體圖像的視點位置。由于上述原因,假定在顯示這些立體圖像時從視頻顯示裝置的前方觀看這些立體圖像。因此,當(dāng)在同一屏幕上顯示多個立體圖像時,所顯示的每個立體圖像均在其自身的前方具有視點位置。這意味著在整個屏幕中對于一個屏幕有多個視點位置。這降低了整個屏幕的觀看放松度,并且存在觀看者的眼睛高度緊張的問題。鑒于上述問題,期望提供一種能夠在顯示立體圖像時改善觀看者的觀看放松度的新的改進(jìn)的圖像處理設(shè)備、圖像處理方法和計算機程序。根據(jù)本公開的實施例,提供了一種圖像處理設(shè)備,包括操作識別單元,用于識別操作信號,該操作信號用于標(biāo)識顯示在圖像顯示單元的屏幕上的圖像中的聚焦圖像;以及圖像繪制單元,用于基于操作識別單元提供的識別結(jié)果在屏幕上繪制圖像,以在屏幕上將該圖像顯示為立體圖像或平面圖像。當(dāng)圖像繪制單元顯示操作識別單元所標(biāo)識的聚焦圖像時,圖像繪制單元可以在屏幕上繪制圖像以在屏幕上將該圖像顯示為立體圖像,而當(dāng)圖像繪制單元顯示除了操作識別單元所標(biāo)識的聚焦圖像之外的圖像時,圖像繪制單元可以在屏幕上繪制圖像以在屏幕上將該圖像顯示為平面圖像。當(dāng)屏幕上的滾動速度等于或大于預(yù)定速度作為操作識別單元所執(zhí)行的識別的結(jié)果時,圖像繪制單元可以在屏幕上繪制圖像以在屏幕上將該圖像顯示為平面圖像。當(dāng)屏幕上的滾動速度不大于或不等于預(yù)定速度作為操作識別單元所執(zhí)行的識別的結(jié)果時,圖像繪制單元可以進(jìn)行如下操作。當(dāng)圖像繪制單元顯示操作識別單元所標(biāo)識的聚焦圖像時,圖像繪制單元可以在屏幕上繪制圖像以在屏幕上將該圖像顯示為立體圖像, 而當(dāng)圖像繪制單元顯示除了操作識別單元所標(biāo)識的聚焦圖像之外的圖像時,圖像繪制單元可以在屏幕上繪制圖像以在屏幕上將該圖像顯示為平面圖像。圖像繪制單元可以基于圖像在屏幕上占據(jù)的面積的尺寸在屏幕上繪制該圖像以將該圖像顯示為立體圖像或平面圖像。圖像繪制單元可以基于從屏幕中的圖像到屏幕的中心的距離在屏幕上繪制該圖像以將該圖像顯示為立體圖像或平面圖像。當(dāng)圖像繪制單元在屏幕上繪制圖像以在屏幕上將圖像顯示為平面圖像,并且圖像將要被顯示在相對于屏幕的中心的右側(cè)時,圖像繪制單元可以利用在用于將圖像顯示為立體圖像的圖像之中的用于左眼的圖像來生成平面圖像,而當(dāng)圖像將要被顯示在相對于屏幕的中心的左側(cè)時,圖像繪制單元可以利用在用于將圖像顯示為立體圖像的圖像之中的用于右眼的圖像來生成平面圖像。根據(jù)本公開的另一實施例,提供了一種圖像處理方法,包括識別用于標(biāo)識顯示在圖像顯示單元的屏幕上的圖像中的聚焦圖像的操作信號;以及基于識別結(jié)果在屏幕上繪制圖像,以在屏幕上將該圖像顯示為立體圖像或平面圖像。根據(jù)本公開的又一實施例,提供了一種計算機程序,用于使計算機執(zhí)行識別用于標(biāo)識顯示在圖像顯示單元的屏幕上的圖像中的聚焦圖像的操作信號;以及基于識別結(jié)果在屏幕上繪制圖像,以在屏幕上將該圖像顯示為立體圖像或平面圖像。如上所述,根據(jù)本公開,可以在顯示立體圖像時改善觀看者的觀看放松度。
圖1是圖示了通過立體顯示裝置實現(xiàn)的立體視覺的原理的說明圖;圖2是圖示了通過立體顯示裝置實現(xiàn)的立體視覺的原理的說明圖;圖3是圖示了通過立體顯示裝置實現(xiàn)的立體視覺的原理的說明圖;圖4是示意性圖示了根據(jù)本公開的實施例的視頻顯示系統(tǒng)的配置的說明圖;圖5是示意性圖示了根據(jù)本實施例的顯示裝置的配置的說明圖6是圖示了根據(jù)本實施例的顯示裝置中的視頻信號控制單元的功能配置的框圖;圖7是圖示了根據(jù)本實施例的通過顯示裝置執(zhí)行的圖像繪制處理的流程圖;圖8是圖示了在顯示裝置的圖像顯示單元上顯示多個立體圖像的情況的說明圖;圖9是圖示了在顯示裝置的圖像顯示單元中只有給予聚焦(focus)的立體圖像被顯示為立體圖像的情況的說明圖;圖10是圖示了從前面觀看圖像顯示單元的屏幕的情況的說明圖;圖11是用于圖示從圖像顯示單元的上方觀看立體圖像的情況以說明顯示在圖像顯示單元的屏幕上的立體圖像的示意圖;圖12是用于圖示從圖像顯示單元的上方觀看立體圖像的情況以說明顯示在圖像顯示單元的屏幕上的立體圖像的示意圖;圖13是用于圖示從圖像顯示單元的上方觀看立體圖像的情況以說明顯示在圖像顯示單元的屏幕上的立體圖像的示意圖;圖14是用于圖示從圖像顯示單元的上方觀看立體圖像的情況以說明顯示在圖像顯示單元的屏幕上的立體圖像的示意圖;圖15是用于圖示從圖像顯示單元的上方觀看立體圖像的情況以闡述說明在圖像顯示單元的屏幕上的立體圖像的示意圖;圖16是圖示了根據(jù)本實施例通過顯示裝置執(zhí)行的另一圖像繪制處理的流程圖;圖17是圖示了在顯示裝置的圖像顯示單元上顯示場景搜索應(yīng)用程序的屏幕的情況的說明圖;以及圖18是圖示了在顯示裝置的圖像顯示單元上顯示場景搜索應(yīng)用程序的屏幕的情況的說明圖。
具體實施例方式—種圖像處理設(shè)備,包括操作識別單元,用于識別操作信號,該操作信號用于標(biāo)識顯示在圖像顯示單元的屏幕上的圖像中的聚焦圖像;以及圖像繪制單元,用于基于操作識別單元提供的識別結(jié)果在屏幕上繪制圖像,以在屏幕上將該圖像顯示為立體圖像或平面圖像。一種圖像處理方法,包括識別用于標(biāo)識顯示在圖像顯示單元的屏幕上的圖像中的聚焦圖像的操作信號;以及基于識別結(jié)果在屏幕上繪制圖像,以在屏幕上將該圖像顯示為立體圖像或平面圖像。下文中,將參照附圖來詳細(xì)描述本公開的優(yōu)選實施例。注意,在本說明書和附圖中,具有基本相同功能的結(jié)構(gòu)元件和結(jié)構(gòu)被標(biāo)示為相同的參考標(biāo)號,并且省略這些結(jié)構(gòu)元件的重復(fù)說明。以下闡述將按下列順序做出。1.立體視覺的原理2.本公開的實施例2-1.根據(jù)本公開的實施例的視頻顯示系統(tǒng)的配置2-2.根據(jù)本公開的實施例的顯示裝置的配置
6
2-3.根據(jù)本公開的實施例的顯示裝置的操作3.結(jié)論<1.立體視覺的原理>首先,將參照附圖來闡述立體顯示裝置中所使用的立體視覺的原理。如圖1所示, 人們從右眼和左眼所獲得的二維視網(wǎng)膜視頻之間的差異(雙眼視差)中提取多個深度線索 (cue)并且合并多個深度線索,由此感知三維信息并將對象識別為像三維的立體視頻。眼球的轉(zhuǎn)動運動改變會聚角,如圖1中所示,并且人們基于該會聚角來確定距對象的距離,從而以三維方式識別空間。如圖1中所示,會聚角是視線的交叉角。利用上述人類特性,準(zhǔn)備被給定了針對右眼和左眼的視差的兩個平面圖像,如圖2中所示,并且將這兩個平面圖像單獨投射到右眼和左眼。這樣基于會聚角產(chǎn)生了距對象的距離的幻覺,如圖3 中所示,從而人們可以以立體方式識別圖像。視差是用于右眼的圖像和用于左眼的圖像之間的位移量,如圖2中所示。利用該原理,可以以立體方式示出圖像。<2.本公開的實施例>[2-1.根據(jù)本公開的實施例的視頻顯示系統(tǒng)的配置]首先將闡述根據(jù)本公開的實施例的視頻顯示系統(tǒng)10的配置。圖4是示意性圖示了根據(jù)本實施例的視頻顯示系統(tǒng)10的配置的說明圖。圖4還示出了顯示裝置100和在觀看者將顯示在顯示裝置100上的圖像感知為立體圖像時所使用的快門眼鏡200。視頻顯示系統(tǒng)10包括顯示裝置100和快門眼鏡200。圖4中所示的顯示裝置100包括用于顯示圖像的圖像顯示單元110。顯示裝置100 是不僅可以在圖像顯示單元110上顯示正常圖像還可以在圖像顯示單元110上顯示被觀看者感知為立體圖像的立體圖像的裝置。盡管稍后將詳細(xì)闡述圖像顯示單元110的配置,但是這里仍簡要闡述圖像顯示單元110的配置。圖像顯示單元110包括光源、液晶面板和中間夾著液晶面板的一對極化板。 光源發(fā)射的光穿過液晶面板和極化板,以被轉(zhuǎn)換為在預(yù)定方向上極化的光??扉T眼鏡200包括右眼圖像傳輸單元212和左眼圖像傳輸單元214,右眼圖像傳輸單元212和左眼圖像傳輸單元214由例如液晶快門制成。快門眼鏡200響應(yīng)于從顯示裝置 100傳輸?shù)男盘?,對均由液晶快門制成的右眼圖像傳輸單元212和左眼圖像傳輸單元214執(zhí)行開啟操作和閉合操作。右眼圖像傳輸單元212和左眼圖像傳輸單元214所執(zhí)行的開啟操作和閉合操作由稍后闡述的快門控制單元130來執(zhí)行。觀看者可以通過觀看從圖像顯示單元110發(fā)出的、穿過快門眼鏡200的右眼圖像傳輸單元212和左眼圖像傳輸單元214的光, 將顯示在圖像顯示單元110上的圖像感知為立體圖像。另一方面,當(dāng)在圖像顯示單元110上顯示正常圖像時,觀看者可以通過將從圖像顯示單元110輸出的光看成它本來的樣子而將該圖像感知為正常圖像。在圖4中,顯示裝置100被示出為電視接收機,但是應(yīng)當(dāng)理解到,顯示裝置的形態(tài)不限于本公開中的這樣的例子。例如,根據(jù)本公開的顯示裝置可以是例如通過連接到諸如個人電腦等的另一電子裝置來使用的監(jiān)視器,或者顯示裝置可以是移動游戲機、移動電話或便攜式音樂播放裝置。[2-2.根據(jù)本公開的實施例的顯示裝置的配置]隨后,將闡述根據(jù)本公開的實施例的顯示裝置100的配置。圖5是示意性圖示了根據(jù)本實施例的顯示裝置100的配置的說明圖。如圖5中所示,根據(jù)本實施例的顯示裝置100包括圖像顯示單元110、視頻信號控制單元120、快門控制單元130、定時控制單元140、存儲器150和背光控制單元155。圖像顯示單元110以上述方式顯示圖像,并且當(dāng)從外部源施加信號時,根據(jù)所施加的信號來顯示圖像。圖像顯示單元Iio包括顯示面板112、柵極驅(qū)動器113、數(shù)據(jù)驅(qū)動器 114和背光115。顯示面板112根據(jù)從外部源施加的信號來顯示圖像。顯示面板112通過順序地掃描多個掃描線來顯示圖像。具有預(yù)定定向的液晶分子被填充在顯示面板112的透明板之間的空間中,透明板由玻璃等制成。顯示面板112的驅(qū)動系統(tǒng)可以是扭曲向列型(TN)系統(tǒng)、 垂直定向(VA)系統(tǒng)或共面切換(in-plane-switching,簡稱IPS)系統(tǒng)。在以下闡述中,除非有其他說明,否則顯示面板112的驅(qū)動系統(tǒng)就是VA系統(tǒng),但是應(yīng)當(dāng)理解,本公開不限于該例子。應(yīng)當(dāng)注意,根據(jù)本實施例的顯示面板112是可以以高速幀率(例如,120Hz或MOHz) 對屏幕進(jìn)行重寫的顯示面板。在本實施例中,用于右眼的圖像和用于左眼的圖像以預(yù)定定時交替顯示在顯示面板112上,從而使觀看者感知立體圖像。柵極驅(qū)動器113是驅(qū)動顯示面板112的柵極總線(在附圖中未示出)的驅(qū)動器。 信號從定時控制單元140傳輸?shù)綎艠O驅(qū)動器113,并且柵極驅(qū)動器113根據(jù)從時序控制單元 140傳輸?shù)男盘枌⑿盘栞敵龅綎艠O總線。數(shù)據(jù)驅(qū)動器114是生成被施加到顯示面板112的數(shù)據(jù)線(在附圖中未示出)的信號的驅(qū)動器。信號從定時控制單元140傳輸?shù)綌?shù)據(jù)驅(qū)動器114。數(shù)據(jù)驅(qū)動器114根據(jù)從定時控制單元140傳輸?shù)男盘杹砩梢皇┘拥綌?shù)據(jù)線的信號,并輸出所生成的信號。背光115被設(shè)置在從觀看者那側(cè)看來的圖像顯示單元110的最遠(yuǎn)側(cè)。當(dāng)圖像被顯示在圖像顯示單元110上時,未被極化的白光(未極化的光)從背光115輸出到位于觀看者那側(cè)的顯示面板112。例如,背光115可以利用發(fā)光二極管,或者可以利用冷陰極管。應(yīng)當(dāng)注意,圖5中所示的背光115是表面光源,但是本公開不限于這樣的例子。例如,光源可以被布置在顯示面板112的周圍部分,并且可以通過利用漫射器板等漫射來自光源的光而將光輸出到顯示面板112??商鎿Q地,例如,點光源和聚光透鏡可以與表面光源結(jié)合使用,或者替代表面光源。當(dāng)視頻信號控制單元120從視頻信號控制單元120的外部源接收視頻信號和用于標(biāo)識聚焦圖像的操作信號,視頻信號控制單元120基于所接收到的操作信號的識別結(jié)果而對所接收到的視頻信號執(zhí)行各種信號處理,使得視頻信號變得適合于在圖像顯示單元110 中顯示立體圖像或平面圖像,并輸出處理后的視頻信號。稍后將詳細(xì)闡述用于標(biāo)識聚焦圖像的操作信號。視頻信號控制單元120處理過的視頻信號被傳輸?shù)蕉〞r控制單元140。當(dāng)視頻信號控制單元120執(zhí)行信號處理時,視頻信號控制單元120根據(jù)該信號處理將預(yù)定信號傳輸?shù)娇扉T控制單元130。視頻信號控制單元120所執(zhí)行的信號處理的例子包括以下處理。當(dāng)視頻信號控制單元120接收到用來在圖像顯示單元110上顯示用于右眼的圖像的視頻信號(右眼視頻信號)、用來在圖像顯示單元110上顯示用于左眼的圖像的視頻信號(左眼視頻信號)以及用于標(biāo)識聚焦圖像的操作信號時,基于所接收到的操作信號的識別結(jié)果來做出關(guān)于該圖像是否將被顯示為立體圖像的確定。當(dāng)該圖像將要被顯示為立體圖像時,視頻信號控制單元120根據(jù)所接收到的兩個視頻信號生成用于立體圖像的視頻信號。在本實施例中,視頻信號控制單元120根據(jù)所接收到的右眼視頻信號和左眼視頻信號生成視頻信號,以按照以下時分方式的順序在顯示面板112上顯示圖像用于右眼的圖像、 用于左眼的圖像、用于右眼的圖像、用于左眼的圖像,等等。在一些情況下,用于左眼的圖像的多個幀和用于右眼的圖像的多個幀被重復(fù)顯示。在這樣的情況下,例如,視頻信號控制單元120生成視頻信號以按照以下順序顯示圖像用于右眼的圖像、用于右眼的圖像、用于左眼的圖像、用于左眼的圖像、用于右眼的圖像、用于右眼的圖像,等等。另一方面,當(dāng)視頻信號控制單元120接收到用來在圖像顯示單元110上顯示用于右眼的圖像的視頻信號(右眼視頻信號)、用來在圖像顯示單元110上顯示用于左眼的圖像的視頻信號(左眼視頻信號)以及用于標(biāo)識聚焦圖像的操作信號時,基于所接收到的操作信號的識別結(jié)果來做出關(guān)于該圖像是否將被顯示為立體圖像的確定。當(dāng)該圖像將不被顯示為立體圖像時,即,當(dāng)該圖像將被顯示為平面圖像時,視頻信號控制單元120根據(jù)所接收到的兩個視頻信號中的至少一個來生成稍后描述的用于平面圖像的視頻信號??扉T控制單元130接收根據(jù)視頻信號控制單元120執(zhí)行的信號處理所生成的預(yù)定信號,并根據(jù)該預(yù)定信號生成用于控制快門眼鏡200的快門操作的快門控制信號??扉T眼鏡200基于快門控制單元130所生成的、并基于例如IEEE802. 15. 4無線傳輸?shù)目扉T控制信號,來執(zhí)行右眼圖像傳輸單元212和左眼圖像傳輸單元214的開啟操作和閉合操作。背光控制單元155接收基于通過視頻信號控制單元120執(zhí)行的信號處理所生成的預(yù)定信號,并根據(jù)該信號來生成用于控制背光的發(fā)光操作的背光控制信號。根據(jù)從視頻信號控制單元120傳輸?shù)男盘?,定時控制單元140生成用于操作柵極驅(qū)動器113和數(shù)據(jù)驅(qū)動器114的脈沖信號。當(dāng)通過定時控制單元140生成脈沖信號,并且柵極驅(qū)動器113和數(shù)據(jù)驅(qū)動器114接收到定時控制單元140所生成的脈沖信號時,與從視頻信號控制單元120傳輸來的信號對應(yīng)的圖像被顯示在顯示面板112上。存儲器150存儲顯示裝置100的各種設(shè)置、用于操作顯示裝置100的計算機程序寸寸。隨后,將闡述根據(jù)本公開的實施例的顯示裝置100中的視頻信號控制單元120的功能配置。圖6是圖示了根據(jù)本實施例的顯示裝置100中的視頻信號控制單元120的功能配置的框圖。在圖6中,視頻信號控制單元120包括用于執(zhí)行圖像繪制處理的圖像繪制處理單元122,以用于在圖像顯示單元110上顯示立體圖像或平面圖像。此外,圖像繪制處理單元 122包括操作識別單元,124和圖像繪制單元126。操作識別單元IM適用于識別用于標(biāo)識聚焦圖像的、傳輸?shù)揭曨l信號控制單元 120的、從顯示在圖像顯示單元110的屏幕上的圖像中選擇的操作信號。操作信號是表示當(dāng)多個圖像被顯示在圖像顯示單元110上時由觀看者執(zhí)行的操作等的信號。操作信號的例子包括表示利用遙控器(未示出)等的箭頭鍵進(jìn)行選擇的信號、表示利用鼠標(biāo)(未示出)的指針進(jìn)行選擇(單擊)的信號、以及表示在鼠標(biāo)的指針的位置處做出選擇(鼠標(biāo)在對象之上)的信號等等。此外,操作信號的其他例子包括表示觀看者的頭跟蹤和眼睛跟蹤的信號。 操作識別單元IM識別操作信號并且標(biāo)識從顯示在圖像顯示單元110的屏幕上的圖像中選擇的聚焦圖像。
圖像繪制單元1 基于操作識別單元IM所識別的操作信號的識別結(jié)果,將要被顯示在圖像顯示單元110上的圖像繪制為立體圖像或平面圖像。當(dāng)圖像繪制單元1 接收到用來在圖像顯示單元110上顯示用于右眼的圖像的視頻信號(右眼視頻信號)和用來在圖像顯示單元110上顯示用于左眼的圖像的視頻信號 (左眼視頻信號)時,基于操作識別單元IM所給出的識別結(jié)果來做出是否對圖像給予聚焦的確定。當(dāng)對圖像給予聚焦時,圖像繪制單元1 根據(jù)所接收到的兩個視頻信號來生成用于立體圖像的視頻信號。另一方面,當(dāng)圖像繪制單元1 接收到用來在圖像顯示單元110上顯示用于右眼的圖像的視頻信號(右眼視頻信號)和用來在圖像顯示單元110上顯示用于左眼的圖像的視頻信號(左眼視頻信號)時,基于操作識別單元IM所給出的識別結(jié)果來做出是否對圖像給予聚焦的確定。當(dāng)未對圖像給予聚焦時,圖像繪制單元1 根據(jù)所接收到的兩個視頻信號中的至少一個生成用于平面圖像的視頻信號。例如,當(dāng)未對圖像給予聚焦時,圖像繪制單元1 根據(jù)所接收到的兩個視頻信號中預(yù)先限定的那個(即右眼視頻信號或左眼視頻信號)生成用于平面圖像的視頻信號。例如,當(dāng)未對圖像給予聚焦作為操作識別單元124的識別結(jié)果,并且圖像將被顯示在相對于圖像顯示單元110的屏幕的中心的右側(cè)時,圖像繪制單元1 根據(jù)所接收到的兩個視頻信號中的左眼視頻信號生成用于平面圖像的視頻信號。另一方面,當(dāng)未對圖像給予聚焦作為操作識別單元124的識別結(jié)果,并且圖像將要被顯示在相對于圖像顯示單元110的屏幕的中心的左側(cè)時,圖像繪制單元1 根據(jù)所接收到的兩個視頻信號中的右眼視頻信號生成用于平面圖像的視頻信號。通過該處理,觀看者可以觀看到適當(dāng)?shù)钠矫鎴D像??商鎿Q地,例如,當(dāng)未對圖像給予聚焦作為操作識別單元1 的識別結(jié)果,并且圖像將被顯示在相對于圖像顯示單元110的屏幕的中心的右側(cè)時,圖像繪制單元1 根據(jù)所接收到的兩個視頻信號中的右眼視頻信號生成用于平面圖像的視頻信號。 另一方面,當(dāng)未對圖像給予聚焦作為操作識別單元124的識別結(jié)果,并且圖像將被顯示在相對于圖像顯示單元110的屏幕的中心的左側(cè)時,圖像繪制單元1 根據(jù)所接收到的兩個視頻信號中的左眼視頻信號生成用于平面圖像的視頻信號。[2-3.根據(jù)本公開的實施例的顯示裝置的操作]隨后,將闡述根據(jù)本公開的實施例的顯示裝置100的操作。首先,將闡述根據(jù)本實施例的顯示裝置100所執(zhí)行的圖像繪制處理。圖7是圖示了根據(jù)本實施例的顯示裝置100 所執(zhí)行的圖像繪制處理的流程圖。在圖7中,首先,當(dāng)視頻信號控制單元120接收到用來在圖像顯示單元110上顯示用于右眼的圖像的視頻信號(右眼視頻信號)和用來在圖像顯示單元110上顯示用于左眼的圖像的視頻信號(左眼視頻信號)時,圖像繪制處理單元122的操作識別單元IM識別用于標(biāo)識由視頻信號控制單元120所接收到的聚焦圖像的操作信號,并確定是否對圖像給予聚焦(步驟S100)。當(dāng)對圖像給予聚焦作為步驟SlOO中的確定結(jié)果時(步驟SlOO中為是),圖像繪制處理單元122的圖像繪制單元1 繪制圖像以在圖像顯示單元110上顯示立體圖像(步驟 S102),然后該處理結(jié)束。當(dāng)未對圖像給予聚焦作為步驟SlOO中的確定結(jié)果時(步驟SlOO中的否),圖像繪制處理單元122的圖像繪制單元1 繪制圖像以在圖像顯示單元110上顯示平面圖像(步驟S104),然后該處理結(jié)束。根據(jù)圖7的圖像繪制處理,在圖像顯示單元110上將聚焦圖像顯示為立體圖像而非聚焦圖像被顯示為平面圖像。例如,如圖8中所示,當(dāng)多個立體圖像160、161、162被顯示在顯示裝置100的圖像顯示單元110上時,所顯示的立體圖像160、161、162中的每個都在其自身的前方具有視點位置。這意味著在整個屏幕中對于一個屏幕有多個視點位置。這降低了整個屏幕中的觀看放松度,從而觀看者的眼睛高度緊張。另一方面,例如,如圖9中所示,當(dāng)只有通過觀看者執(zhí)行的操作等所選擇的具有框163的立體圖像160(即,只有聚焦立體圖像160)被作為立體圖像顯示在顯示裝置100的圖像顯示單元110上時,平面圖像164、 165被顯示為平面圖像而非立體圖像161、162,對于一個屏幕不存在多個視點位置,而只有一個視點位置。這改善了觀看者的觀看放松度。在圖9中,例如,當(dāng)通過觀看者執(zhí)行的操作等將框163移動到平面圖像165使得平面圖像165被選擇(即,聚焦)時,顯示立體圖像162而非平面圖像165,并且顯示與立體圖像160對應(yīng)的平面圖像(未示出)而非立體圖像160。圖10至15是圖示了在圖像顯示單元110的屏幕上顯示多個立體圖像166、167、 168、169、170的情況的說明圖。圖10是圖示了從前方觀看圖像顯示單元110的屏幕的情況的說明圖。圖11-15是用于圖示從圖像顯示單元110的上方觀看立體圖像的情況以闡述顯示在圖像顯示單元110的屏幕上的立體圖像的示意圖。在圖10中,在圖像顯示單元110的屏幕上顯示多個不同圖像尺寸的立體圖像166、 167、168、169、170。如圖10中所示,位于接近于屏幕的中心位置處的立體圖像166的圖像尺寸大于其他立體圖像167、168、169、170的圖像尺寸,而位于遠(yuǎn)離屏幕的中心位置處的立體圖像169、170的圖像尺寸小于其他立體圖像166、167、168的圖像尺寸。相應(yīng)地,如圖11 中所示,觀看者感覺好像立體圖像166被顯示在比其他立體圖像167、168、169、170更接近于觀看者的位置處,而立體圖像169、170被顯示在比其他立體圖像166、167、168更遠(yuǎn)離觀看者的位置處。在圖10和11中,類似于圖12,只有立體圖像166(即聚焦圖像)被顯示為立體圖像,而立體圖像167、168、169、170(即非聚焦圖像)被顯示為平面圖像171、172、173、174而非立體圖像167、168、169、170,從而如上所述這改善了觀看者的觀看放松度。在圖10至12中,在圖像顯示單元110的屏幕上顯示多個不同圖像尺寸的圖像。類似地,甚至當(dāng)如圖13中所示在圖像顯示單元110的屏幕上顯示相同圖像尺寸的多個立體圖像175、176、177、178、179時,仍可以改善觀看者的觀看放松度。換句話說,如圖14中所示, 只有立體圖像175(即聚焦圖像)被顯示為立體圖像,而立體圖像176、177、178、179(即非聚焦圖像)被顯示為平面圖像180、181、182、183而非立體圖像176、177、178、179,從而如上所述這改善了觀看者的觀看放松度。如圖15中所示,位于接近于屏幕的中心位置處的立體圖像166的圖像尺寸大于其他立體圖像(未示出)的圖像尺寸。類似地,甚至當(dāng)使觀看者感覺好像立體圖像166被顯示在比其他立體圖像(未示出)更接近于觀看者的位置處時,仍可以改善觀看者的觀看放松度。換句話說,如圖15中所示,只有立體圖像166(即聚焦圖像)被顯示為立體圖像,而其他立體圖像(即,非聚焦圖像)被顯示為平面圖像180、181、182、183而非立體圖像(未示出),從而如上所述這改善了觀看者的觀看放松度。
隨后,將闡述根據(jù)本實施例的通過顯示裝置100執(zhí)行的另一圖像繪制處理。圖16 是圖示了根據(jù)本實施例的通過顯示裝置100執(zhí)行的另一圖像繪制處理的流程圖。在圖16中,首先,當(dāng)視頻信號控制單元120接收用來在圖像顯示單元110上顯示用于右眼的圖像的視頻信號(右眼視頻信號)和用來在圖像顯示單元110上顯示用于左眼的圖像的視頻信號(左眼視頻信號)時,圖像繪制處理單元122的操作識別單元IM識別視頻信號控制單元120所接收到的用于標(biāo)識聚焦圖像的操作信號,并確定圖像顯示單元 110的屏幕中的滾動速度是否等于或大于預(yù)定速度(步驟S200)。當(dāng)確定滾動速度不大于或不等于預(yù)定速度作為步驟S200中的確定結(jié)果時(步驟 S200中為否),圖像繪制處理單元122的操作識別單元IM識別視頻信號控制單元120所接收到的用于標(biāo)識聚焦圖像的操作信號,并確定是否對圖像給予聚焦(步驟S202)。當(dāng)對圖像給予聚焦作為步驟S202中的確定結(jié)果時(步驟S202中為是),圖像繪制處理單元122的圖像繪制單元1 繪制圖像以在圖像顯示單元110上顯示立體圖像(步驟 S204),然后該處理結(jié)束。當(dāng)確定滾動速度等于或大于預(yù)定速度作為步驟S200中的確定結(jié)果時(步驟S200 中為是),或者不對圖像給予聚焦作為步驟S202中的確定結(jié)果時(步驟S202中為否),圖像繪制處理單元122的圖像繪制單元1 繪制圖像以在圖像顯示單元110上顯示平面圖像 (步驟S206),然后該處理結(jié)束。根據(jù)圖16的另一圖像繪制處理,當(dāng)滾動速度等于或大于圖像顯示單元110的屏幕上的預(yù)定速度時,所有圖像均被顯示為平面圖像,并且當(dāng)滾動速度不大于或不等于預(yù)定速度時,聚焦圖像被顯示為立體圖像,而非聚焦圖像被顯示為平面圖像。例如,如圖17中所示,當(dāng)例如在顯示裝置100的圖像顯示單元110上顯示場景搜索應(yīng)用程序的屏幕時,觀看者所執(zhí)行的操作的滾動速度等于或大于預(yù)定速度,如果聚焦圖像184被顯示為立體圖像則整個屏幕中的觀看放松度降低。這可能進(jìn)一步增大觀看者眼睛的緊張。由于該原因,當(dāng)滾動速度等于或大于預(yù)定速度時,所有圖像均被顯示為平面圖像,使得改善了觀看者的觀看放松度并降低了觀看者眼睛的緊張。另一方面,當(dāng)滾動速度不大于或不等于預(yù)定速度時,甚至當(dāng)聚焦圖像184被顯示為立體圖像時整個屏幕的觀看放松度仍不會降低,并且這不會增大觀看者眼鏡的緊張。因此,在該情況下,聚焦圖像184被顯示為立體圖像,使得觀看者看見立體圖像。在如上所述的本實施例中,用于標(biāo)識聚焦圖像的操作信號被識別以確定是否對圖像給予聚焦,并且只有聚焦圖像被顯示為立體圖像??商鎿Q地,如圖18中所示,可以基于圖像在圖像顯示單元110的屏幕中占據(jù)的區(qū)域的尺寸來做出關(guān)于圖像是否將被顯示為立體圖像的確定。例如,在圖像顯示單元110的屏幕中占據(jù)最大區(qū)域的圖像185可以被顯示為立體圖像。在如上所述的本實施例中,用于標(biāo)識聚焦圖像的操作信號被識別以確定是否對圖像給予聚焦,并且只有聚焦圖像被顯示為立體圖像??商鎿Q地,如圖18中所示,可以基于在圖像顯示單元110的屏幕中從圖像到屏幕中心的距離大小來做出關(guān)于圖像是否將被顯示為立體圖像的確定。例如,在圖像顯示單元110的屏幕中,在距中心的距離最小的位置處的 (即,位置最接近于中心的)圖像185可以被顯示為立體圖像。<3.結(jié)論〉
如上所述,根據(jù)本公開的實施例的顯示裝置100識別用于標(biāo)識圖像顯示單元110 的屏幕上所顯示的圖像中的聚焦圖像的操作信號,并基于識別結(jié)果來繪制圖像以在圖像顯示單元110的屏幕上將圖像顯示為立體圖像或平面圖像。例如,當(dāng)顯示裝置100顯示聚焦圖像時,顯示裝置100繪制圖像以在圖像顯示單元 110的屏幕上將圖像顯示為立體圖像。當(dāng)顯示裝置100顯示除了聚焦圖像之外的圖像時,顯示裝置100繪制圖像以在圖像顯示單元110的屏幕上將圖像顯示為平面圖像。因此,根據(jù)本公開的實施例的顯示裝置100可以改善觀看者在立體圖像顯示中觀看者的觀看放松度。本公開的目的還可以通過提供存儲以下軟件的程序代碼的記錄介質(zhì)來實現(xiàn),該軟件將上述實施例的功能實現(xiàn)到系統(tǒng)或設(shè)備并且使系統(tǒng)或設(shè)備的計算機(或CPU、MPU等)讀取并執(zhí)行存儲在記錄介質(zhì)中的程序代碼。在這種情況下,從記錄介質(zhì)中讀取的程序代碼本身實現(xiàn)了上述實施例的功能。因此,程序代碼和存儲程序代碼的記錄介質(zhì)構(gòu)成了本公開。提供程序代碼的記錄介質(zhì)的例子包括軟(注冊商標(biāo))盤、硬盤、磁光盤、光盤(諸如 CD-ROM、CD-R、CD-RW、DVD-ROM、DVD-RAM、DVD-RW 和 DVD+RW)、磁盤、非易失性存儲卡和 ROM??商鎿Q地,程序代碼可以經(jīng)由網(wǎng)絡(luò)來下載。通過執(zhí)行計算機所讀取的程序代碼來實現(xiàn)上述實施例的功能。此外,還通過基于程序代碼所給出的命令而使運行在計算機上的OS(操作系統(tǒng))執(zhí)行實際處理的一部分或全部來實現(xiàn)上述實施例的功能。要理解到,通過那些處理來實現(xiàn)的上述實施例的功能也包括在本公開內(nèi)。此外,從記錄介質(zhì)讀取的程序代碼可以被寫到與計算機相連的功能擴展單元或插入到計算機中的功能擴展板中設(shè)置的存儲器,之后可以通過擴展板、設(shè)置在擴展單元中的 CPU等基于程序代碼所給出的命令來執(zhí)行擴展功能的實際處理的一部分或全部。要理解到, 通過那些處理所實現(xiàn)的上述實施例的功能也包括在本公開內(nèi)。本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解到,可以根據(jù)設(shè)計要求和其他因素來進(jìn)行各種修改、組合、子組合和更改,只要這些修改、組合、子組合和更改處于所附權(quán)利要求及其等同物的范圍內(nèi)。例如,在上述實施例中,顯示裝置100被闡述為用戶通過快門眼鏡200來觀看顯示在顯示裝置100上的圖像并將圖像感知為立體圖像的例子。然而,本公開不限于這樣的例子。類似地,本公開也可以被應(yīng)用于用戶直接觀看顯示在顯示裝置100上的圖像并將圖像識別為立體圖像的顯示裝置。例如,在上述實施例中,視頻信號控制單元120接收右眼視頻信號和左眼視頻信號兩者。可替換地,當(dāng)通過渲染來生成右眼視頻信號和左眼視頻信號時,不一定基于右視點位置和左視點位置執(zhí)行兩次繪制處理,而可以基于僅一個視點或右視點位置和左視點位置的中間點來執(zhí)行繪制處理,使得當(dāng)顯示平面圖像時可以對于雙眼顯示同一圖像。例如,當(dāng)本公開被應(yīng)用于能夠顯示立體視頻的電子裝置(諸如電視接收機和便攜式終端)時,用戶將對示出多個立體圖像(諸如封面流和縮略圖)的選擇屏幕感覺不那么緊張。當(dāng)在三維電視機等之中采用雙屏幕同時顯示模式時,可以以立體顯示模式顯示主要屏幕,而可以以平面顯示模式顯示次要屏幕,使得這種配置改善屏幕上的觀看放松度并降
13低觀看者眼睛的緊張。此外,還可以從利用顯示器的電子廣告和電子布告板獲得同樣的效果。
當(dāng)對被顯示為平面圖像的圖像本身給定了視差時,該目標(biāo)圖像本身被以突出方式顯示。當(dāng)本公開被應(yīng)用于這種情況時,也可以獲得同樣的效果。本公開提供了與可以從用于調(diào)整立體效果的方法(即,用于通過消除圖像本身的視差來降低上述視差而向右眼和左眼顯示完全相同的圖像的方法)獲得的效果相同的效果。用于調(diào)整立體效果的另一方法包括用于向圖像添加框的方法。在該方法中,向圖像本身添加框,從而易于識別圖像深度,這允許觀看者更明顯地感受到立體效果。由于該原因,通過單獨接通/斷開中心圖像和其他圖像中的框來調(diào)整立體效果,從而降低觀看者的緊張。本公開包含與2010年9月6日提交到日本專利局的日本在先專利申請JP 2010-198981中披露的主題相關(guān)的主題,該在先專利申請的整體內(nèi)容通過引用結(jié)合于此。
權(quán)利要求
1.一種圖像處理設(shè)備,包括操作識別單元,用于識別操作信號,該操作信號用于標(biāo)識顯示在圖像顯示單元的屏幕上的圖像中的聚焦圖像;以及圖像繪制單元,用于基于所述操作識別單元提供的識別結(jié)果在所述屏幕上繪制圖像, 以在所述屏幕上將該圖像顯示為立體圖像或平面圖像。
2.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,當(dāng)所述圖像繪制單元顯示所述操作識別單元所標(biāo)識的聚焦圖像時,所述圖像繪制單元在所述屏幕上繪制圖像以在所述屏幕上將該圖像顯示為立體圖像,而當(dāng)所述圖像繪制單元顯示除了所述操作識別單元所標(biāo)識的聚焦圖像之外的圖像時,所述圖像繪制單元在所述屏幕上繪制圖像以在所述屏幕上將該圖像顯示為平面圖像。
3.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,當(dāng)所述屏幕上的滾動速度等于或大于預(yù)定速度作為所述操作識別單元所執(zhí)行的識別的結(jié)果時,所述圖像繪制單元在所述屏幕上繪制圖像以在所述屏幕上將該圖像顯示為平面圖像。
4.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,當(dāng)所述屏幕上的滾動速度不大于或不等于預(yù)定速度作為所述操作識別單元所執(zhí)行的識別的結(jié)果時,所述圖像繪制單元進(jìn)行如下操作當(dāng)所述圖像繪制單元顯示所述操作識別單元所標(biāo)識的聚焦圖像時,所述圖像繪制單元在所述屏幕上繪制圖像以在所述屏幕上將該圖像顯示為立體圖像;以及當(dāng)所述圖像繪制單元顯示除了所述操作識別單元所標(biāo)識的聚焦圖像之外的圖像時,所述圖像繪制單元在所述屏幕上繪制圖像以在所述屏幕上將該圖像顯示為平面圖像。
5.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,所述圖像繪制單元基于圖像在屏幕上占據(jù)的面積的尺寸在所述屏幕上繪制該圖像以將該圖像顯示為立體圖像或平面圖像。
6.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,所述圖像繪制單元基于從屏幕中的圖像到所述屏幕的中心的距離在所述屏幕上繪制該圖像以將該圖像顯示為立體圖像或平面圖像。
7.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,當(dāng)所述圖像繪制單元在所述屏幕上繪制圖像以在所述屏幕上將所述圖像顯示為平面圖像,并且所述圖像將要被顯示在相對于所述屏幕的中心的右側(cè)時,所述圖像繪制單元利用在用于將所述圖像顯示為立體圖像的圖像之中的用于左眼的圖像來生成平面圖像, 以及當(dāng)所述圖像將要被顯示在相對于所述屏幕的中心的左側(cè)時,所述圖像繪制單元利用在用于將所述圖像顯示為立體圖像的圖像之中的用于右眼的圖像來生成平面圖像。
8.一種圖像處理方法,包括識別用于標(biāo)識顯示在圖像顯示單元的屏幕上的圖像中的聚焦圖像的操作信號;以及基于識別結(jié)果在所述屏幕上繪制圖像,以在所述屏幕上將該圖像顯示為立體圖像或平面圖像。
9.一種計算機程序,用于使計算機執(zhí)行識別用于標(biāo)識顯示在圖像顯示單元的屏幕上的圖像中的聚焦圖像的操作信號;以及基于識別結(jié)果在所述屏幕上繪制圖像,以在所述屏幕上將該圖像顯示為立體圖像或平面圖像。
全文摘要
提供了一種圖像處理設(shè)備、圖像處理方法和計算機程序,該圖像處理設(shè)備,包括操作識別單元,用于識別用于標(biāo)識顯示在圖像顯示單元的屏幕上的圖像中的聚焦圖像的操作信號;以及圖像繪制單元,用于基于操作識別單元提供的識別結(jié)果在屏幕上繪制圖像,以在屏幕上將該圖像顯示為立體圖像或平面圖像。
文檔編號H04N13/02GK102387395SQ201110259358
公開日2012年3月21日 申請日期2011年8月30日 優(yōu)先權(quán)日2010年9月6日
發(fā)明者北尾崇, 工藤祐介, 深澤遼 申請人:索尼公司