針對(duì)多視點(diǎn)圖像的標(biāo)簽信息的處理裝置及其標(biāo)簽信息的處理方法
【技術(shù)領(lǐng)域】
[0001] 本技術(shù)設(shè)及一種在通過從多個(gè)視點(diǎn)拍攝拍攝對(duì)象而得到的多視點(diǎn)圖像中，對(duì)關(guān)注 部分賦予標(biāo)簽信息的標(biāo)簽信息的處理裝置。
【背景技術(shù)】
[0002] 專利文獻(xiàn)1公開有一種僅使用單臺(tái)相機(jī)即可容易地獲取多視點(diǎn)圖像的立體影像處 理裝置。
[0003] 現(xiàn)有技術(shù)文獻(xiàn)
[0004] 專利文獻(xiàn)
[0005] 專利文獻(xiàn)1:日本特開2009-212728號(hào)公報(bào)

【發(fā)明內(nèi)容】

[0006] 本技術(shù)是在從多個(gè)視點(diǎn)拍攝特定拍攝對(duì)象所得的多個(gè)圖像信號(hào)中對(duì)基于各圖像 信號(hào)的圖像所共同拍攝出的關(guān)注部分賦予的針對(duì)多視點(diǎn)圖像的標(biāo)簽信息的處理裝置。
[0007] 處理裝置具有：顯示部，其對(duì)基于多個(gè)圖像信號(hào)中拍攝出關(guān)注部分的特定的圖像 信號(hào)的圖像進(jìn)行顯示；和控制部，其對(duì)顯示在顯示部上的基于特定的圖像信號(hào)的圖像的關(guān) 注部分賦予標(biāo)簽信息?？刂撇烤哂?第一功能，獲取坐標(biāo)空間中的標(biāo)簽信息在=維空間上的 坐標(biāo)，所述坐標(biāo)是在=維空間上表現(xiàn)拍攝對(duì)象時(shí)使用的坐標(biāo)空間中的坐標(biāo);第二功能，在顯 示部上顯示基于其他圖像信號(hào)的圖像，所述其他圖像信號(hào)是與基于特定的圖像信號(hào)的圖像 的視點(diǎn)不同視點(diǎn)的圖像的圖像信號(hào)，并且拍攝出與通過特定的圖像信號(hào)拍攝出的關(guān)注部分 相同的關(guān)注部分;第=功能，將在第一功能中獲取的標(biāo)簽信息的坐標(biāo)轉(zhuǎn)換為，對(duì)第二功能中 顯示在顯示部上的不同視點(diǎn)的圖像的每一個(gè)圖像信號(hào)賦予平面上的標(biāo)簽信息的坐標(biāo);和第 四功能，對(duì)視點(diǎn)不同的每一個(gè)圖像信號(hào)，在通過第=功能得到的規(guī)定的坐標(biāo)位置賦予標(biāo)簽 信息。
[000引根據(jù)本發(fā)明，在對(duì)從多個(gè)視點(diǎn)拍攝一個(gè)拍攝對(duì)象而得到的圖像信號(hào)賦予標(biāo)簽信息 的情況下，能夠容易地確認(rèn)與賦予的標(biāo)簽信息相關(guān)的S維空間上的位置。
【附圖說明】
[0009] 圖1是用于說明本發(fā)明的實(shí)施方式的針對(duì)多視點(diǎn)圖像的標(biāo)簽信息的處理裝置的結(jié) 構(gòu)的框圖。
[0010] 圖2是用于說明本實(shí)施方式中的標(biāo)簽信息處理裝置的整體動(dòng)作的流程圖。
[0011 ]圖3是表示顯示在顯示部上的圖像的一例的說明圖。
[0012] 圖4是表示在顯示部上顯示基于多個(gè)圖像信號(hào)的圖像時(shí)的一例的說明圖。
[0013] 圖5是用于說明控制部中的計(jì)算出標(biāo)簽信息在S維空間上的坐標(biāo)的功能的流程 圖。
[0014] 圖6是用于說明在控制部中至少選擇一個(gè)W上圖像信號(hào)時(shí)的動(dòng)作的流程圖。
[0015] 圖7是用于說明在控制部中生成可視信息圖的動(dòng)作的流程圖。
[0016] 圖8是表示控制部生成的可視信息圖的一例的說明圖。
【具體實(shí)施方式】
[0017] W下，參照附圖對(duì)本發(fā)明的實(shí)施方式的針對(duì)多視點(diǎn)圖像的標(biāo)簽信息的處理方法和 標(biāo)簽信息的處理裝置進(jìn)行說明。但有時(shí)會(huì)省略過于詳細(xì)的說明。例如有時(shí)會(huì)省略對(duì)已經(jīng)公 知的事項(xiàng)的詳細(xì)說明或?qū)嵸|(zhì)上相同結(jié)構(gòu)的重復(fù)說明。運(yùn)是為了避免W下的說明過于冗長(zhǎng)， 使本領(lǐng)域技術(shù)人員更容易理解。此外，發(fā)明人為了使本領(lǐng)域技術(shù)人員充分地理解本技術(shù)而 提供了附圖和W下的說明，但其目的不是為了由此限定權(quán)利要求中所述的主題。
[0018] 圖1是用于說明本發(fā)明的實(shí)施方式的針對(duì)多視點(diǎn)圖像的標(biāo)簽信息的處理裝置的結(jié) 構(gòu)的框圖。
[0019] 如圖1所示，標(biāo)簽信息處理裝置10具備:控制部11;輸入部12;顯示部13;模型數(shù)據(jù) 的保持部14,其用于保持模型數(shù)據(jù);校準(zhǔn)數(shù)據(jù)的保持部15,其用于保持校準(zhǔn)數(shù)據(jù);多視點(diǎn)圖 像信號(hào)的保持部16,其用于保持多視點(diǎn)圖像信號(hào)。
[0020] 控制部11按照由軟件或固件所記載的計(jì)算機(jī)程序，控制整個(gè)標(biāo)簽信息處理裝置 10。該控制部11基于從輸入部12輸入的控制信號(hào)執(zhí)行規(guī)定的動(dòng)作。另外，控制部11根據(jù)需要 從模型數(shù)據(jù)的保持部14、和校準(zhǔn)數(shù)據(jù)的保持部15讀出信息并進(jìn)行處理。進(jìn)而，控制部11使顯 示部13顯示從多視點(diǎn)圖像信號(hào)的保持部16讀出的多視點(diǎn)圖像。
[0021] 另外，控制部11具有如下（1)~(4)的控制功能。
[0022] (1)獲取標(biāo)簽信息在S維空間上的坐標(biāo)的第一功能；
[0023] (2)從多視點(diǎn)圖像信號(hào)的保持部16所存儲(chǔ)的多個(gè)圖像信號(hào)選擇至少一個(gè)W上特定 圖像信號(hào)的第二功能；
[0024] (3)基于標(biāo)簽信息在S維空間上的坐標(biāo)，計(jì)算出（2)中所選擇的圖像信號(hào)的平面上 的坐標(biāo)的第=功能；
[0025] (4)生成在選擇的圖像信號(hào)上的標(biāo)簽信息的坐標(biāo)位置重疊了標(biāo)簽信息的圖像信號(hào) 并輸出到顯示部13的第四功能。
[0026] 接下來，對(duì)控制部11實(shí)現(xiàn)的各個(gè)功能進(jìn)行說明。
[0027] 上述（1)的功能，在從輸入部12輸入表示賦予標(biāo)簽信息的部位的控制信號(hào)的情況 下，對(duì)該部位，計(jì)算并獲取標(biāo)簽信息在=維空間上的坐標(biāo)。在此，標(biāo)簽信息是對(duì)多視點(diǎn)圖像 信號(hào)的保持部16中收納的多個(gè)圖像信號(hào)的關(guān)注部分賦予的附加信息。即，通過經(jīng)由輸入部 12對(duì)圖像信號(hào)賦予標(biāo)簽信息，從而使用者能夠在顯示部13上同時(shí)視覺識(shí)別關(guān)注部分、和標(biāo) 簽信息。由此，能夠促進(jìn)使用者對(duì)關(guān)注部分的理解。
[0028] 關(guān)注部分表示圖像信號(hào)中拍攝出的特定的被攝體的部分，例如人的手、腳等。在關(guān) 注部分為人的手的情況下，標(biāo)簽信息成為介紹此人的手的文字等信息。觀看者能夠通過讀 標(biāo)簽信息而理解圖像信號(hào)中拍攝出的人的手的特性等。
[0029] 另外，標(biāo)簽信息中的=維空間上的坐標(biāo)，成為將規(guī)定的被攝體從多視點(diǎn)圖像信號(hào) 的保持部16中存儲(chǔ)的圖像信號(hào)投射到=維空間時(shí)使用的坐標(biāo)軸的坐標(biāo)。即，通過指定標(biāo)簽 信息在=維空間上的坐標(biāo)，從而確定多視點(diǎn)圖像信號(hào)的保持部16具有的圖像信號(hào)上的位 置。此外，下面對(duì)計(jì)算出標(biāo)簽信息在=維空間上的坐標(biāo)的動(dòng)作進(jìn)行說明。
[0030] 對(duì)于上述(2)的功能，控制部11選擇多視點(diǎn)圖像信號(hào)的保持部16中存儲(chǔ)的圖像信 號(hào)中、在顯示部13中顯示時(shí)使用者能夠?qū)x予標(biāo)簽信息的關(guān)注部分進(jìn)行視覺識(shí)別的圖像信 號(hào)。下面對(duì)該圖像信號(hào)的選擇動(dòng)作進(jìn)行說明。
[0031] 對(duì)于上述(3)的功能，控制部11計(jì)算出將在上述（1)的功能中已經(jīng)計(jì)算出的標(biāo)簽信 息在=維空間上的坐標(biāo)投射至輸出到顯示部13的圖像信號(hào)的平面上時(shí)得到的坐標(biāo)?？刂撇?11將計(jì)算出的坐標(biāo)輸出到顯示部13。通過運(yùn)樣構(gòu)成，從而，即使在控制部11從多視點(diǎn)圖像信 號(hào)的保持部16選擇了視點(diǎn)不同的圖像信號(hào)的情況下，由于能夠從標(biāo)簽信息在S維空間上的 坐標(biāo)計(jì)算出選擇的圖像信號(hào)上的坐標(biāo)，因此也能夠在選擇的圖像信號(hào)上重疊標(biāo)簽信息進(jìn)行 顯示。
[0032] 對(duì)于上述(4)的功能，控制部11基于上述(3)的功能中計(jì)算出的標(biāo)簽信息的坐標(biāo)， 對(duì)上述(2)的功能中選擇出的圖像信號(hào)重疊標(biāo)簽信息，生成新的圖像信號(hào)?？刂撇?1將生成 的新的圖像信號(hào)輸出到顯示部13。
[0033] 接下來，輸入部12是從使用者接受對(duì)標(biāo)簽信息處理裝置10的操作指示的設(shè)備。輸 入部12例如由鼠標(biāo)等定位設(shè)備構(gòu)成。此外，也可W使用如觸控面板那樣的設(shè)備或鍵盤。即， 只要是從使用者接受操作指示的設(shè)備，則使用怎樣的設(shè)備都可W。
[0034] 輸入部12在從使用者接受到操作指示的情況下，生成基于該操作指示的控制信 號(hào)，并輸出到控制部11。
[0035] 顯示部13是對(duì)從控制部11輸出的圖像信號(hào)進(jìn)行顯示的設(shè)備。此時(shí)，顯示部13從控 制部11獲取圖像信號(hào)，并對(duì)獲取的圖像信號(hào)進(jìn)行顯示。
[0036] 模型數(shù)據(jù)的保持部14存儲(chǔ)表示多視點(diǎn)圖像信號(hào)的保持部16中存儲(chǔ)的多個(gè)圖像信 號(hào)共同拍攝出的被攝體在=維空間上的位置的模型數(shù)據(jù)。在此，模型數(shù)據(jù)在至少任意地設(shè) 定在被攝體的表面的離散點(diǎn)，由=維空間