專利名稱：圖像處理設(shè)備，控制方法和計算機可讀介質(zhì)的制作方法
技術(shù)領(lǐng)域：
本技術(shù)涉及圖像處理設(shè)備，更具體地說，涉及處理全景圖像的圖像處理設(shè)備，其控制方法，和在非臨時性計算機可讀介質(zhì)上編碼的，使計算機執(zhí)行所述方法的程序。
背景技術(shù)：
近年來，通過對諸如風景之類的被攝物體成像，生成圖像(圖像數(shù)據(jù))，并把生成的圖像記錄成圖像文件的成像設(shè)備，比如數(shù)字靜態(tài)照相機已得到廣泛使用。另外，提出了一種按照時間順序連續(xù)生成多個圖像，并利用多個生成的圖像，生成包括較寬范圍的被攝物體的全景圖像的成像設(shè)備。
例如，提出了一種成像設(shè)備，在沿著其軸在成像設(shè)備的后方(例如，攝影者的位置)的弧線，移動成像設(shè)備的時候，所述成像設(shè)備生成多個圖像，并且所述設(shè)備利用所述多個圖像生成全景圖像(例如，參見未經(jīng)審查的日本專利申請公報No. 2009-268037)。

發(fā)明內(nèi)容
按照上述現(xiàn)有技術(shù)，一邊把成像設(shè)備拿在手中，一邊沿著弧線移動成像設(shè)備的用戶能夠進行全景圖像成像操作，從而，用戶能夠以較容易的方式進行成像操作。例如，在利用上述現(xiàn)有技術(shù)進行全景圖像成像操作的情況下，用戶通過環(huán)顧四周，目視確認全景圖像的被攝物體，隨后進行成像操作的開始操作。不過，由于全景圖像是包括較寬范圍的被攝物體的圖像，因此預期用戶在成像操作的開始操作之前，僅僅進行目視確認不能產(chǎn)生用戶預期的成像范圍。因而，為了生成用戶中意的全景圖像，重要的是能夠容易地決定用戶中意的全景圖像成像范圍。理想的是使得能夠容易地決定用戶中意的全景圖像成像范圍。概括地說，本發(fā)明包括圖像處理設(shè)備，其控制方法，和在非臨時性計算機可讀介質(zhì)上編碼的，使計算機執(zhí)行所述控制方法的程序。在一個實施例中，圖像處理設(shè)備包括操作接受單元，所述操作接受單元被配置成在開始全景圖像的成像操作之前，接受決定在開始利用多個圖像的全景圖像的成像操作之后的全景圖像中的基準位置的決定操作，所述多個圖像由按照時間順序?qū)Ρ粩z物體連續(xù)成像的成像單元生成；和控制單元，所述控制單元被配置成根據(jù)決定的基準位置，控制被攝物體中的全景圖像的成像范圍的決定。因而，在全景圖像成像操作的開始之前，接受決定在開始全景圖像成像操作之后的全景圖像中的基準位置的決定操作具有根據(jù)決定的基準位置，決定全景圖像成像操作的效果。在另一個實施例中，所述種設(shè)備包括基準位置接收單元，所述基準位置接收單元被配置成接收用戶輸入的中間或終止全景基準位置信息，和控制單元，所述控制單元被配置成在基準位置接收單元接收中間或終止全景基準位置信息之后，根據(jù)用戶輸入的中間或終止全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。在另一個實施例中，所述設(shè)備包括基準位置接收單元，所述基準位置接收單元被配置成接收用戶輸入的多個基準點的全景基準位置信息，和控制單元，所述控制單元被配置成在基準位置接收單元收到多個基準點的全景基準位置信息之后，根據(jù)用戶輸入的多個基準點的全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。在另一個實施例中，所述設(shè)備包括基準位置接收單元，所述基準位置接收單元被配置成接收終止全景基準位置圖像，和控制單元，所述控制單元被配置成在基準位置接收單元收到終止全景基準位置圖像之后，根據(jù)用戶輸入的終止全景基準位置圖像，控制成像裝置開始生成將用于生成全景圖像的多個圖像，和當當前圖像匹配終止全景基準位置圖像時，控制成像裝置終止生成所述多個圖像。圖像處理設(shè)備還包括顯示控制單元，所述顯示控制單元被配置成在成像單元的全景圖像的成像操作期間，在成像單元生成的圖像上，顯示代表決定的成像范圍的操作支持屏幕。這具有在成像單元的全景圖像的成像操作期間，在成像單元生成的圖像上，顯示代表決定的成像范圍的操作支持屏幕的效果。顯示控制單元可在顯示單元上，顯示從包含在成像單元生成的圖像中的被攝物體之中，識別包含在決定的成像范圍中的被攝物體的圖像，作為操作支持屏幕。這具有顯示從·包含在成像單元生成的圖像中的被攝物體之中，識別包含在決定的成像范圍中的被攝物體的圖像(操作支持圖像)的效果。圖像處理設(shè)備還包括姿勢檢測單元，所述姿勢檢測單元被配置成檢測成像設(shè)備的姿勢的變化，同時顯示控制單元根據(jù)檢測的姿勢變化，改變顯示的操作支持屏幕的顯示形式。這具有根據(jù)檢測的姿勢變化，改變顯示的操作支持屏幕的顯示形式的效果。顯示控制單元可在顯示單元上顯示代表與全景圖像對應的大體矩形的輪廓的圖像，作為操作支持屏幕。這具有顯示代表與全景圖像對應的大體矩形的輪廓的圖像(操作支持圖像)的效果。操作接受單元可接受設(shè)定全景圖像的成像范圍的縱向大小的設(shè)定操作，同時控制單元根據(jù)設(shè)定的大小和決定的基準位置，決定全景圖像的成像范圍。這具有根據(jù)設(shè)定的大小和決定的基準位置，決定全景圖像成像范圍的效果。在利用在成像設(shè)備以成像設(shè)備的位置或成像設(shè)備附近的位置為軸，沿著特定方向的轉(zhuǎn)動移動期間，利用成像單元生成的多個圖像生成全景圖像的情況下，操作接受單元可接受決定轉(zhuǎn)動移動的終止位置為基準位置的決定操作；同時控制單元判定在接受所述決定操作時，利用成像單元生成的圖像，和在所述決定操作后的成像設(shè)備的姿勢變化之后，利用成像單元生成的圖像是否匹配，如果這些圖像匹配，那么實現(xiàn)停止利用成像單元的全景圖像的成像操作的控制。這具有判定在接受決定成像設(shè)備的轉(zhuǎn)動移動的終止位置(基準位置)的決定操作時，利用成像單元生成的圖像，和在所述決定操作后的成像設(shè)備設(shè)備的姿勢變化之后，利用成像單元生成的圖像是否匹配，并且如果這些圖像匹配，那么停止全景圖像的成像操作的效果。在利用在成像設(shè)備以成像設(shè)備的位置或成像設(shè)備附近的位置為軸，沿著特定方向的轉(zhuǎn)動移動期間，利用成像單元生成的多個圖像生成全景圖像的情況下，操作接受單元可接受決定轉(zhuǎn)動移動的中間位置為基準位置的決定操作；同時控制單元根據(jù)決定的中間位置，決定利用成像單元的全景圖像的成像操作的開始位置和終止位置。這具有在接受決定成像設(shè)備的轉(zhuǎn)動移動的中間位置(基準位置)的決定操作的情況下，根據(jù)決定的中間位置，決定全景圖像成像操作的開始位置和終止位置的效果。
圖像處理設(shè)備還包括配置成檢測成像設(shè)備的姿勢變化的姿勢檢測單元；其中在成像設(shè)備以成像設(shè)備的位置或成像設(shè)備附近的位置為軸，沿著特定方向的轉(zhuǎn)動移動被檢測為姿勢變化的情況下，控制單元決定全景圖像的成像范圍，以致所述特定方向是全景圖像成像范圍的縱向方向，而在成像設(shè)備以成像設(shè)備的位置或成像設(shè)備附近的位置為軸，沿著與所述特定方向垂直的正交方向的轉(zhuǎn)動移動被檢測為姿勢變化的情況下，控制單元決定全景圖像的成像范圍，以致所述正交方向是全景圖像成像范圍的縱向方向。這具有在檢測到成像設(shè)備沿著特定方向的轉(zhuǎn)動移 動的情況下，決定以所述特定方向作為縱向方向的全景圖像成像范圍，而在檢測到成像設(shè)備沿著正交方向的轉(zhuǎn)動移動的情況下，決定以所述正交方向作為縱向方向的全景圖像成像范圍的效果。圖像處理設(shè)備還包括第一成像單元；和布置成具有與第一成像單元的光軸方向不同的光軸方向的第二成像單元；其中在利用在成像設(shè)備以成像設(shè)備的位置或成像設(shè)備附近的位置為軸，沿著特定方向的轉(zhuǎn)動移動期間，利用成像單元生成的多個圖像生成全景圖像的情況下，操作接受單元接受決定轉(zhuǎn)動移動的中間位置為基準位置的決定操作；其中當在第二成像單元的光軸方向面對全景圖像的成像操作中的開始位置或終止位置的狀態(tài)下，接受所述決定操作時，控制單元根據(jù)第一成像單元和第二成像單元之間的位置關(guān)系，決定全景圖像的成像范圍。這具有當在第二成像單元的光軸方向朝著全景圖像成像操作中的開始位置或終止位置的狀態(tài)下，接受決定成像設(shè)備的轉(zhuǎn)動移動的中間位置(基準位置)的決定操作時，根據(jù)第一成像單元和第二成像單元之間的位置關(guān)系，決定全景圖像成像范圍的效果。第二成像單元可在與全景圖像的成像操作期間的第一成像單元的曝光條件不同的曝光條件下，生成多個圖像；同時用第一成像單元生成的多個圖像和用第二成像單元生成的多個圖像被合成，以生成其中至少部分區(qū)域具有擴展的動態(tài)范圍的全景圖像。這具有通過合成用第一成像單元生成的多個圖像和用第二成像單元生成的多個圖像，生成其中至少部分區(qū)域具有擴展的動態(tài)范圍的全景圖像的效果。按照本技術(shù)，可獲得突出的優(yōu)點，因為能夠容易地決定用戶中意的全景圖像成像范圍。


圖I是圖解說明按照本技術(shù)的第一實施例的成像設(shè)備的功能結(jié)構(gòu)例子的方框圖；圖2A和2B是圖解說明按照本技術(shù)的第一實施例的成像設(shè)備的外觀的透視圖；圖3是圖解說明按照本技術(shù)的第一實施例，顯示在成像設(shè)備的輸入/輸出面板上的設(shè)定屏幕(圖像大小設(shè)定屏幕)的例子的示圖；圖4A和4B是圖解說明在利用按照本技術(shù)的第一實施例的成像設(shè)備生成全景圖像的情況下的成像操作，和利用該成像操作生成的全景圖像之間的關(guān)系的例子的示圖；圖5A和5B是示意圖解說明按照本技術(shù)的第一實施例的成像設(shè)備的姿勢和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖；圖6A和6B是示意圖解說明按照本技術(shù)的第一實施例的成像設(shè)備的姿勢和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖；圖7A和7B是示意圖解說明按照本技術(shù)的第一實施例的成像設(shè)備的姿勢和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖；圖8A和SB是示意圖解說明按照本技術(shù)的第一實施例的成像設(shè)備的姿勢和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖；圖9A和9B是示意圖解說明按照本技術(shù)的第一實施例的成像設(shè)備的姿勢和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖；圖IOA和IOB是示意圖解說明按照本技術(shù)的第一實施例的成像設(shè)備的姿勢和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖；圖11是圖解說明按照本技術(shù)的第一實施例的成像設(shè)備的成像控制處理的處理過程的例子的流程圖；圖12是圖解說明按照本技術(shù)的第一實施例的成像設(shè)備的成像控制處理的處理過程的例子的流程圖；圖13是圖解說明按照本技術(shù)的第二實施例的成像設(shè)備的功能結(jié)構(gòu)例子的方框圖；圖14A和14B是示意圖解說明在把圖像保持在按照本技術(shù)的第二實施例的匹配圖像檢測單元中的情況下的圖像保持的例子的示圖；圖15A和15B是示意圖解說明利用按照本技術(shù)的第二實施例的匹配圖像檢測單元·的匹配處理的示圖；圖16是圖解說明按照本技術(shù)的第二實施例的成像設(shè)備的成像控制處理的處理過程的例子的流程圖；圖17是圖解說明按照本技術(shù)的第二實施例的成像設(shè)備的成像控制處理的處理過程的例子的流程圖；圖18A和18B是圖解說明按照本技術(shù)的第三實施例的成像設(shè)備的姿勢和顯示在輸入/輸出面板上的顯示屏幕之間的關(guān)系的例子的示圖；圖19A和19B是表示按照本技術(shù)的第四實施例的成像設(shè)備的外觀的外部結(jié)構(gòu)圖；圖20是是表示按照本技術(shù)的第四實施例的成像設(shè)備的功能結(jié)構(gòu)例子的方框圖；圖21是表示顯示在按照本技術(shù)的第四實施例的成像設(shè)備的輸入/輸出面板上的設(shè)定屏幕(攝影方法設(shè)定屏幕)的例子的示圖；圖22A和22B是示意圖解說明按照本技術(shù)的第四實施例的成像設(shè)備的姿勢和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖；圖23A和23B是示意圖解說明按照本技術(shù)的第四實施例的成像設(shè)備的姿勢和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖；圖24A和24B是示意圖解說明按照本技術(shù)的第四實施例的成像設(shè)備的姿勢和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖；圖25A-25C是圖解說明按照本技術(shù)的第四實施例的利用多個成像單元生成的圖像，合成全景圖像的例子的示圖；圖26A和26B是表示按照本技術(shù)的第四實施例的成像設(shè)備的外觀的外部結(jié)構(gòu)圖；圖27A和27B是圖解說明顯示在按照本技術(shù)的實施例的變形例的成像設(shè)備上的操作輔助屏幕的顯示例子的示圖；圖28A和28B是圖解說明顯示在按照本技術(shù)的實施例的變形例的成像設(shè)備上的操作輔助屏幕的顯示例子的示圖；圖29A和29B是圖解說明顯示在按照本技術(shù)的實施例的變形例的成像設(shè)備上的操作輔助屏幕的顯示例子的示圖；圖30A和30B是圖解說明顯示在按照本技術(shù)的實施例的變形例的成像設(shè)備上的操作輔助屏幕的顯示例子的示圖；圖31是圖解說明顯示在按照本技術(shù)的實施例的變形例的成像設(shè)備上的操作輔助屏幕的顯示例子的示圖；圖32A到32B是圖解說明利用按照本技術(shù)的實施例的變形例的成像設(shè)備生成的全景圖像的成像范圍和成像操作之間的關(guān)系的示圖；
圖33A和33B是示意圖解說明在利用按照本技術(shù)的實施例的變形例的成像設(shè)備，生成全景圖像時進行的成像操作的示圖。
具體實施例方式下面說明實現(xiàn)本技術(shù)的實施例(下面稱為“實施例”)。將按照以下順序進行說明。I.第一實施例(根據(jù)用戶操作確定的全景圖像中的基準位置，確定全景圖像的成像范圍的例子)2.第二實施例(根據(jù)利用用戶操作確定的全景圖像中的基準位置的匹配處理，確定全景圖像的成像操作的終止定時的例子)3.第三實施例(確定全景圖像中的中間位置作為基準位置的例子)4.第四實施例(利用具有多個成像單元的成像設(shè)備，進行全景圖像的成像操作的例子)5.變形例I.第一實施例成像設(shè)備的功能結(jié)構(gòu)例子圖I是圖解說明按照本技術(shù)的第一實施例的成像設(shè)備100的功能結(jié)構(gòu)例子的方框圖。成像設(shè)備100包括鏡頭單元111、成像裝置112、圖像處理單元113、圖像合成單元120、記錄控制單元130、記錄介質(zhì)140、姿勢檢測單元150、控制單元160、顯示控制單元170、顯示單元180和操作接受單元190。成像設(shè)備100可用能夠通過對被攝物體成像，生成多個圖像(圖像數(shù)據(jù))，并對這些多個圖像進行各種圖像處理的數(shù)字靜態(tài)照相機實現(xiàn)。鏡頭單元111由聚集來自被攝物體的光的多個鏡頭(變焦鏡頭，聚焦鏡頭等)構(gòu)成，把經(jīng)這些鏡頭和光圈，從被攝物體輸入的光提供給成像裝置112。根據(jù)控制單元160的控制，成像裝置112轉(zhuǎn)換來自被攝物體的入射光，從而生成圖像(圖像數(shù)據(jù))，生成的圖像被提供給圖像處理單元113。具體地說，經(jīng)鏡頭單元111輸入的被攝物體的光學圖像被成像在成像裝置112的成像面上，在這種狀態(tài)下進行成像操作的成像裝置112生成圖像(圖像數(shù)據(jù))。另外，在設(shè)定了全景圖像成像模式的情況下，成像裝置112通過按照時間順序，連續(xù)對被攝物體成像，依次生成多個圖像，并把多個成像的圖像提供給圖像處理單元113?？梢允褂玫某上裱b置112的例子包括(XD(電荷耦合器件)、CMOS(互補金屬氧化物半導體)等。
根據(jù)控制單元160的控制，圖像處理單元113對成像裝置112生成的圖像(圖像數(shù)據(jù))，進行各種圖像處理，然后把經(jīng)過圖像處理的圖像(圖像數(shù)據(jù))提供給圖像合成單元120和顯示控制單元170。圖像處理單元113把成像裝置112生成的圖像(圖像數(shù)據(jù))臨時保存在例如圖像存儲器(未示出)中，并對保存在其中的圖像進行圖像處理。圖像存儲器由例如DRAM(動態(tài)隨機存取存儲器)構(gòu)成。例如，圖像處理單元113對成像裝置112生成的圖像(圖像數(shù)據(jù))進行顯示用圖像處理，并把經(jīng)過該圖像處理的圖像輸出給顯示控制單元170，以便顯示在顯示單元180上。另外，在設(shè)定了全景圖像成像模式的情況下，圖像處理單元113對成像裝置112生成的圖像(圖像數(shù)據(jù))進行全景圖像的圖像處理，然后輸出給圖像合成單元120。
另外，在設(shè)定了全景圖像成像模式的情況下，圖像處理單元113對保存在圖像存儲器(未示出)中的圖像，檢測時間軸上相鄰的圖像之間的移動量和移動方向。圖像處理單元113隨后把與檢測的移動量和移動方向相關(guān)的信息(移動信息)輸出給圖像合成單元120和控制單元160。例如，圖像處理單元113進行構(gòu)成兩個相鄰圖像的像素之間的匹配處理(即，區(qū)分相同被攝物體的成像區(qū)域的匹配處理)，然后計算圖像之間的移動的像素數(shù)。在該匹配處理中，在假定被攝物體基本保持靜止的情況下進行處理。注意，在被攝物體中包含運動物體的情況下，檢測與整個圖像的運動向量不同的運動向量，不過，與這些運動物體對應的運動向量是在免于檢測的情況下處理的。即，只檢測與歸因于成像設(shè)備100的運動而發(fā)生的整個圖像的運動對應的運動向量(全局運動向量，也簡稱為“GMV”)。根據(jù)控制單元160的控制，圖像合成單元120利用從圖像處理單元113提供的多個圖像，生成全景圖像，然后把生成的全景圖像提供給記錄控制單元130。例如，圖像合成單元120把從圖像處理單元113供給的多個圖像臨時保持在圖像存儲器(未示出)中，然后利用保持的這些多個圖像，生成全景圖像。在另一個實施例中，設(shè)備100與服務器通信，把從圖像處理單元113供給的多個圖像傳給服務器。服務器隨后生成全景圖像，并把全景圖像發(fā)給設(shè)備100。在這樣的實施例中，設(shè)備100可以是移動電話機。另外，根據(jù)從控制單元160輸出的分析結(jié)果(成像設(shè)備100的姿勢的變化量的分析結(jié)果)，圖像合成單元120計算保持在圖像存儲器(未示出)之中的多個圖像中的每一個的待合成區(qū)域。圖像合成單元120隨后從多個圖像中的每一個的待合成區(qū)域提取圖像，然后通過合成這些提取的圖像，生成全景圖像。在這種情況下，圖像合成單元120根據(jù)從圖像處理單元113輸出的移動信息(移動量和移動方向)，疊加并合成提取的圖像。在控制單元160的控制下，記錄控制單元130進行控制，以把經(jīng)過圖像處理單元113的圖像處理的圖像(圖像數(shù)據(jù))記錄在記錄介質(zhì)140中。另外，在設(shè)定了全景圖像成像模式的情況下，記錄控制單元130把用圖像合成單元120生成的全景圖像(圖像數(shù)據(jù))記錄在記錄介質(zhì)140中。記錄介質(zhì)140是在記錄控制單元130的控制下，把經(jīng)過圖像處理單元113的圖像處理的圖像，和用圖像合成單元120生成的全景圖像記錄成圖像文件(圖像內(nèi)容)的裝置。例如，諸如JPEG格式圖像數(shù)據(jù)之類的各種數(shù)據(jù)被記錄在記錄介質(zhì)140中。記錄介質(zhì)140可以內(nèi)置于成像設(shè)備100中，或者可以從成像設(shè)備100分離?？梢允褂玫挠涗浗橘|(zhì)140的例子包括各種記錄介質(zhì)，比如半導體存儲器、光學記錄介質(zhì)、磁盤、HDD(硬盤驅(qū)動器)等等。注意，光學記錄介質(zhì)的例子包括可記錄DVD (數(shù)字通用光盤)、可記錄⑶(光盤)、藍光光盤(注冊商標)等等。姿勢檢測單元150通過檢測成像設(shè)備100的加速度、運動、傾斜等等，檢測成像設(shè)備100的姿勢的變化，并把與檢測的姿勢的變化相關(guān)的姿勢信息輸出給控制單元160?？梢允褂玫淖藙輽z測單元150的一個例子是陀螺傳感器。陀螺傳感器檢測成像設(shè)備100的角加速度，從而檢測成像設(shè)備100的姿勢的變化。注意可以作出其中使用除陀螺傳感器以外的傳感器(例如，加速度傳感器)檢測成像設(shè)備100的加速度、運動、傾斜等，以便檢測成像設(shè)備100的姿勢及其變化的安排。在控制單元160的控制下，顯示控制單元170把各種圖像顯示在顯示單元180上。例如，顯示控制單元170把從圖像處理單元113供給的圖像，作為顯示圖像(例如實時取景圖像(也稱為“LV圖像”))顯示在顯示單元180上。顯示控制單元170把各種設(shè)定屏幕(例如，圖3中所示的圖像大小設(shè)定屏幕300)顯示在顯示單元180上。另外，顯示控制單元 170合成圖像(例如，圖6B中所示的操作支持圖像317和318)與從圖像處理單元113供給的圖像(例如LV圖像),以便顯示在顯示單元180上。例如，在進行全景圖像成像操作時，顯示控制單元170把代表全景圖像的成像范圍的操作支持圖像重疊在從圖像處理單元113供給的圖像(例如，LV圖像)上。所述操作支持圖像是如圖6B，7B, 8B, 9B和IOB中所示，從包含在LV圖像中的被攝物體之中，識別包含在全景圖像的成像范圍中的被攝物體的圖像(例如，表示與全景圖像對應的通常矩形的圖像)的圖像。另外，顯示控制單元170根據(jù)姿勢檢測單元150檢測的姿勢的變化，改變操作支持圖像的顯示形式，如圖6B，7B，8B，9B和IOB中所示。S卩，顯示控制單元170導致進行顯示，以致操作支持圖像根據(jù)從控制單元160輸出的分析結(jié)果(成像設(shè)備的姿勢的變化量的分析結(jié)果)移動。顯示單元180是在顯示控制單元170的控制下,顯示各種圖像的顯示單元。顯示單元180以LV圖像的形式，順序顯示由成像裝置112生成的圖像。注意可以使用的顯示單元180的一個例子是諸如有機EL(電致發(fā)光)面板之類的顯示面板。另外，可以使用用戶通過使他/她的手指接觸或者鄰近其顯示屏幕，能夠借以進行操作的觸摸面板，如圖3中所
/Jn ο操作接受單元190是接受用戶操作的操作輸入的操作接受單元，并把與接受的操作輸入對應的操作信號輸出給控制單元160。操作接受單元190包括諸如快門按鈕191和撥盤192之類的操作部件。如圖6A中所示，例如，操作接受單元190在開始全景成像操作之前，接收決定在開始全景圖像成像操作之后的全景圖像中的基準位置(例如，終止位置)的操作。另外，例如如圖3中所示，操作接受單元190接受設(shè)定在全景圖像的成像范圍的縱向方向的全景圖像的大小(圖像大小)的設(shè)定操作。注意如圖2B中所示，可以作為輸入/輸出面板200 —體地形成顯示單元180和操作接受單元190?？刂茊卧?60根據(jù)來自操作接受單元190的操作信號，和來自姿勢檢測單元150的姿勢信息，控制成像設(shè)備100的部件。例如，在操作接受單元190接受了成像模式設(shè)定操作的情況下，控制單元160設(shè)定與該設(shè)定操作對應的成像模式。注意就本技術(shù)的第一實施例來說，將舉例說明其中設(shè)定全景圖像成像模式，以生成全景圖像的情況。另外，在操作接受單元190接受關(guān)于圖像大小(圖3中所示)的設(shè)定操作的情況下，按照該設(shè)定操作設(shè)定圖像大小。另外，根據(jù)從姿勢檢測單元150輸出的姿勢信息，控制單元160分析成像設(shè)備100的姿勢的變化量(移動方向，移動量等)，然后把分析結(jié)果輸出給圖像合成單元120和顯示控制單元170。另外，在操作接受單元190接受了決定基準位置(例如，終止位置)的決定操作的情況下，控制單元160實現(xiàn)根據(jù)決定的基準位置，決定全景圖像的成像范圍的控制。如圖6A中所示，根據(jù)設(shè)定的圖像大小(例如，Θ I)和決定的基準位置(例如，終止位置422)，決定全景圖像的成像范圍(例如，用開始位置423和終止位置422確定的旋轉(zhuǎn)角)。所決定的這一切將決定被攝物體的全景圖像成像范圍。成像設(shè)備的外部結(jié)構(gòu)例子圖2A和2B是表示按照本技術(shù)的第一實施例的成像設(shè)備100的外觀的透視圖。圖 2A是圖解說明成像設(shè)備100的正面(即，設(shè)置有對著被攝物體的鏡頭單元111的一面)的外觀的透視圖。另外，圖2B是圖解說明成像設(shè)備100的背面(即，設(shè)置有對著攝影者的輸入/輸出面板200的一面)的外觀的透視圖。成像設(shè)備100具有鏡頭單元111，快門按鈕191，撥盤192和輸入/輸出面板200。注意雖然成像設(shè)備100具有諸如電源開關(guān)，模式切換開關(guān)，變焦按鈕之類的其它操作部件，不過這里將省略這些其它操作部件的圖示和說明?？扉T按鈕191是用戶在把成像裝置112生成的圖像(圖像數(shù)據(jù))記錄成圖像內(nèi)容時按下的按鈕。例如，在設(shè)定了記錄靜止圖像的靜止圖像成像模式，并且半按下快門按鈕191的情況下，實現(xiàn)進行自動聚焦的聚焦控制。另外，當全按下快門按鈕191時，實現(xiàn)聚焦控制，并把全按下快門按鈕191時，成像裝置112生成的圖像作為圖像文件(靜止圖像文件)記錄在記錄介質(zhì)140中。將參考圖5A-10B和其它附圖詳細說明在設(shè)定全景圖像成像模式的情況下，快門按鈕191的按下操作。撥盤192是用于進行各種調(diào)整的撥盤。例如，操作撥盤192，以設(shè)定全景圖像的成像范圍(圖像大小)。輸入/輸出面板200顯示各種圖像，還通過檢測在輸入/輸出面板200上的觸摸操作，接受來自用戶的操作輸入。輸入/輸出面板200例如用觸摸面板實現(xiàn)。輸入/輸出面板200對應于圖I中所示的顯示單元180和操作接受單元190。注意就本技術(shù)的第一實施例的描述來說，以成像設(shè)備100的當前位置(或者在成像設(shè)備100附近的位置(例如，后方位置))作為軸，沿著特定方向(例如，水平方向，垂直方向)旋轉(zhuǎn)成像設(shè)備100的旋轉(zhuǎn)操作將被稱為“擺動操作”。另外，其操作方向?qū)⒈环Q為“擺動方向”。設(shè)備100的這種旋轉(zhuǎn)可由用戶進行，由附接到設(shè)備100的另一個設(shè)備進行，或者由包括在設(shè)備100中的旋轉(zhuǎn)促動器進行。圖像大小設(shè)定屏幕的例子圖3是圖解說明顯示在本技術(shù)的第一實施例的輸入/輸出面板200上的設(shè)定屏幕(圖像大小設(shè)定屏幕300)的例子。圖像大小設(shè)定屏幕300是在設(shè)定全景圖像的成像范圍(圖像大小)時，顯示在輸入/輸出面板200上的屏幕。例如，在進行全景圖像成像模式的設(shè)定操作之后，立即顯示圖像大小設(shè)定屏幕300。另外，在圖像大小設(shè)定屏幕300設(shè)定的全景圖像的成像范圍(圖像大小)是在成像設(shè)備100的擺動方向的成像范圍(圖像大小)。圖像大小設(shè)定屏幕300具備圖像大小指定條301，指定位置標識符302，OK按鈕303和返回按鈕304。圖像大小指定條301是用于指定全景圖像成像范圍(圖像大小)的條形物，并在上面顯示指定位置標識符302的情況下顯示。例如，在能夠指定最多360°，作為全景圖像成像范圍(圖像大小)的情況下，在圖像 大小指定條301的一端顯示“0° ”，在其另一端顯示“360?！?。另外，在圖像大小指定條301上每隔固定間距(例如，間距60° )，顯示數(shù)值(例如，60° ,120°等等)。用戶可通過沿著圖像大小指定條301，移動指定位置標識符302到所需位置，指定全景圖像成像范圍(圖像大小)。指定位置標識符302的這種移動操作可通過例如操作撥盤192，或者利用輸入/輸出面板200上的觸摸操作來實現(xiàn)。OK按鈕是在進行指定操作之后被按下，以確認指定的全景圖像成像范圍(圖像大小)的按鈕。另外，與利用按下OK按鈕303的操作決定的全景圖像成像范圍(圖像大小)相關(guān)的信息(圖像大小信息)被輸出給控制單元160，并被保存。返回按鈕304是在返回之前剛剛顯示的顯示屏幕的情況上按下的按鈕。注意就本例來說，圖解說明了利用圖像大小指定條302指定圖像大小的例子，不過例如可以利用按鈕按壓操作，或者其中輸入數(shù)值的輸入操作，指定圖像大小。例如，可以進行其中用戶從多種圖像大小中選擇目標圖像大小的選擇操作(例如，圖像大小按鈕按壓操作)。另外，用戶可通過進行輸入操作(例如，圖像大小(角度)的數(shù)值的輸入操作)，設(shè)定圖像大小。另外就本例來說，圖解說明了利用用戶操作，指定全景圖像成像范圍(圖像大小)的例子，不過成像范圍可被預先設(shè)定。例如，可把180°設(shè)定成基準大小。 成像操作和全景圖像之間的關(guān)系的例子下面，說明利用成像設(shè)備100進行成像操作的情況。圖4A和4B是圖解說明當利用按照本技術(shù)的第一實施例的成像設(shè)備100生成全景圖像時的成像操作，和用所述成像操作拍攝的全景圖像之間的關(guān)系的示圖。圖4A是圖解說明作為在利用成像設(shè)備100生成全景圖像時的成像對象的場所400的平面圖。場所400是包括山，建筑物401和402，大樹403，湖等的場所，為了易于說明，圖4A中簡化地圖示了所述山，建筑物401和402，大樹403，湖等。另外，圖4A圖解說明在180°被設(shè)定為圖像大小的情況下，從左側(cè)向右側(cè)進行成像設(shè)備100的擺動操作的例子。在圖4A中，圖解說明了用戶操作成像設(shè)備100，生成全景圖像，以致建筑物401和402以及大樹403將被包含在全景圖像中的例子。注意在本技術(shù)的實施例中使用的術(shù)語左和右意味以操作成像設(shè)備100的用戶為基準的左和右。圖4B圖解說明用圖4A中所示的成像操作生成的全景圖像410。S卩，全景圖像410是包括建筑物401和402以及大樹403的全景圖像。從而我們將假定在湖邊漫步的用戶420期望包括建筑物401和402以及大樹403的全景圖像。在這種情況下，用戶420必須在成像操作的開始位置405開始全景圖像成像操作，并在成像操作的終止位置406終止全景圖像成像操作。
為了進行這種成像操作，用戶420必須環(huán)顧場所400，把握全景圖像的成像范圍，然后開始成像操作。不過，預期用戶420難以環(huán)顧場所400，從而難以利用目視準確地把握全景圖像的成像范圍。另外，在難以準確地把握全景圖像的成像范圍的情況下，不能生成用戶404想要的全景圖像(包括建筑物401和402以及大樹403的全景圖像)?，F(xiàn)在，就本技術(shù)的第一實施例來說，說明其中在開始全景圖像成像操作之前，接受在開始全景圖像成像操作之后，決定全景圖像中的基準位置的確定操作，然后根據(jù)決定的基準位置，確定全景圖像成像范圍的例子。全景成像操作的例子圖5A-10B是圖解說明按照本技術(shù)的第一實施例的成像設(shè)備100的姿勢和顯示在輸入/輸出面板200上的顯示屏幕的轉(zhuǎn)變例子的示圖。即，圖5A，6A, 7A, 8A, 9A和IOA圖解說明成像設(shè)備100的姿勢的轉(zhuǎn)變的例子。注意在圖5A，6A, 7A, 8A, 9A和IOA中，只表示了圖4A中所示的場所400中的建筑物401和402以及大樹403，省略了其它景物的圖示。另外，圖5B，6B, 7B, 8B, 9B和IOB圖解說明按照成像設(shè)備100的姿勢的變化，顯示在輸入/輸出面·板200上的顯示屏幕的轉(zhuǎn)變的例子。圖5A-10B圖解說明在圖像大小被設(shè)定成180°的情況下的成像操作的例子。圖5A簡化地圖解說明從上方觀察的成像設(shè)備100，和用雙手拿著成像設(shè)備100的用戶420的狀態(tài)。我們假定用戶420 —邊確認全景圖像的終止位置，一邊觀看顯示在輸入/輸出面板200上的LV圖像。圖5B圖解說明在進行決定全景圖像的終止位置的決定操作之前顯示的顯示屏幕310。顯示屏幕310具有顯示成LV圖像的目前待成像的被攝物體，和重疊顯示在LV圖像上的消息顯示區(qū)311。消息顯示區(qū)311是其中顯示用于支持用戶420進行的操作的消息的區(qū)域。例如，在消息顯示區(qū)311中顯示提示用戶決定全景圖像成像操作的終止位置的消息。例如，我們假定其中用戶420設(shè)定了全景圖像成像模式的情況。例如，當開啟成像設(shè)備100的電源時，成像設(shè)備100啟動，在輸入/輸出面板200上顯示LV圖像。用戶420在查看顯示在輸入/輸出面板200上的LV圖像的時候，從對應于全景圖像的成像范圍中確定最終位置(與全景圖像的右端對應的位置)。例如，在如圖5B中所示，把包括大樹403的成像范圍確定為終止位置的情況下，用戶420在圖5A中所示的狀態(tài)下進行快門按鈕191的全按下操作(決定操作)。在這樣進行了終止位置的決定操作的情況下，控制單元160把在進行所述決定操作時的成像設(shè)備100的姿勢確定為成像設(shè)備100的基準姿勢。即，與在進行該決定操作時，從姿勢檢測單元150輸出的姿勢信息相關(guān)的姿勢被確定為成像設(shè)備100的基準姿勢。注意圖6B中圖解說明在用戶420決定全景圖像成像操作的終止位置之后，顯示在輸入/輸出面板200上的顯示屏幕的例子。圖6A簡化圖解說明在圖5A中所示的狀態(tài)下，用戶420全按下快門按鈕191的狀態(tài)。在這個例子中，我們假定設(shè)定的圖像大小為Θ I(即，180° )，下面說明決定水平方向的成像操作的開始位置的方法。例如，我們假定在圖5A中所示的狀態(tài)下，用戶420全按下快門按鈕191的情況。在這種情況下，以從成像操作時的位置421起的光軸方向(終止位置422的方向)作為基準，根據(jù)設(shè)定的圖像大小Θ I決定成像操作的開始位置423。具體地說，如圖6A中所示，通過以當進行快門按鈕191的全按下操作時的位置421為旋轉(zhuǎn)軸，沿著擺動方向旋轉(zhuǎn)角度Θ I而到達的位置被確定為成像操作的開始位置423。注意在進行快門按鈕191的全按下操作時的位置421 (用戶420的位置(S卩，成像設(shè)備100的位置))充當旋轉(zhuǎn)軸的情況下，其沿光軸方向的位置被確定為成像操作的終止位置422。垂直方向的成像操作的開始位置可以按相同方式確定。圖6B表示在進行了決定全景圖像成像操作的終止位置的決定操作的情況下顯示的操作幫助屏幕315。操作幫助屏幕315顯示作為LV圖像顯示的當前待成像的被攝物體，和重疊在LV圖像上的消息顯示區(qū)316及操作支持圖像317和318。消息顯示區(qū)316顯示大意是全景圖像成像操作的終止位置已被決定的消息，和提示用戶把成像設(shè)備100移動到全景圖像成像操作的開始位置的消息。操作支持圖像317和318是支持與全景圖像成像操作相關(guān)的用戶操作(成像設(shè)備100的擺動操作)的圖像。例如，識別包括在全景圖像成像范圍中的被攝物體的圖像(表示 與全景圖像對應的大體呈矩形的輪廓的虛線)被顯示成操作支持圖像317和318?，F(xiàn)在，在決定全景圖像成像操作的終止位置時，成像設(shè)備100的擺動方向(水平方向或垂直方向)未被確定，從而僅僅顯不操作支持圖像317和318,而不顯不對應于任何一個擺動方向的操作支持圖像。另外，按照成像設(shè)備100的姿勢的變化，對應于擺動方向之一地顯示操作支持圖像。S卩，在檢測到水平方向的成像設(shè)備100的擺動操作的情況下，決定以水平方向為縱向方向的全景圖像成像范圍，顯示與水平方向?qū)牟僮髦С謭D像。另外，在檢測到垂直方向的成像設(shè)備100的擺動操作的情況下，決定以垂直方向作為縱向方向的全景圖像成像范圍，并顯示與垂直方向?qū)牟僮髦С謭D像。注意，與成像設(shè)備100的姿勢的變化對應的操作支持圖像的顯示方法將參考圖7A-10B詳細說明。另外，在預先設(shè)定了成像設(shè)備100的擺動方向(水平方向或垂直方向)的情況下，可以作出其中在決定全景圖像成像操作的終止位置的時候，對應于設(shè)定的擺動方向地顯示操作支持圖像的安排。從而，在快門按鈕191的全按下之后，操作幫助屏幕315被顯示在輸入/輸出面板200上，從而用戶420能夠遵循操作幫助屏幕315，容易地進行成像設(shè)備100的擺動操作。另外，將參考圖7B和其它附圖，圖解說明在用戶啟動擺動操作之后，顯示在輸入/輸出面板200上的顯示屏幕的例子。圖7A簡化地表示其中用戶420從圖6A中所示的狀態(tài)起，沿著箭頭424的方向移動成像設(shè)備100的狀態(tài)。圖7B表示在用戶420沿著箭頭424的方向，移動成像設(shè)備100之后，立即顯示在輸入/輸出面板200上的操作幫助屏幕320。注意控制單元160根據(jù)來自姿勢檢測單元150的姿勢信息，確定成像設(shè)備100在快門按鈕191的全按下操作之后的運動。操作幫助屏幕320顯示作為LV圖像顯示的當前待成像的被攝物體，和重疊在LV圖像上的消息顯示區(qū)321及操作支持圖像322和324。消息顯示區(qū)321顯示大意是顯示全景圖像成像范圍的消息，和提示用戶把成像設(shè)備100移動到全景圖像成像操作的開始位置的消息。如上所述，操作支持圖像322-324是支持與全景圖像成像操作相關(guān)的用戶操作(成像設(shè)備100的擺動操作)的圖像。具體地說，操作支持圖像322和323是識別包括在全景圖像成像范圍中的被攝物體的圖像，可以是代表與全景圖像對應的大體矩形的輪廓的虛線(整體矩形虛線)。另外，操作支持圖像322和323被置于顯示在操作幫助屏幕320上的LV圖像上。另外，操作支持圖像324是指示全景圖像中的中心位置(擺動方向的中心位置)的實線，位于顯示在操作幫助屏幕320上的LV圖像之上。從而，依據(jù)顯示的操作支持圖像324，用戶能夠容易地把握全景圖像中的中間位置?，F(xiàn)在，根據(jù)設(shè)定的圖像大小Θ I (即，180° )，和成像操作的終止位置422，決定操作支持圖像324的顯示位置。即，離成像操作的終止位置422 “ Θ 1/2”的位置被決定為操作支持圖像324的顯示位置。例如，如圖7A中所示，作為成像范圍，垂直方向范圍和中心位置示意地在全景圖像成像范圍的中間附近。另外，如圖8B中所示，作為成像范圍，垂直方向范圍和終止位置(左端部分)示意地在全景圖像成像范圍的終止位置(左端部分)附近。
下面，說明操作支持圖像(操作支持圖像322、323等)的顯示方法。作為對于在全景圖像成像操作中必須進行的全體操作量(例如，擺動操作的旋轉(zhuǎn)角)的當前操作位置的基準，顯示操作支持圖像。例如，全景圖像成像操作的終止位置被設(shè)定成基準位置，并根據(jù)相對于該基準位置(終止位置)的操作量，水平方向或垂直方向的操作支持圖像被確定為待顯示的操作支持圖像。具體地說，控制單元160根據(jù)在時間軸上相鄰的圖像(成像裝置112生成的圖像)之間的移動量和移動方向的檢測結(jié)果(圖像處理單元113的檢測結(jié)果)，計算當前的操作量?？刂茊卧?60隨后根據(jù)當前的操作量，確定待顯示的操作支持圖像(水平方向或垂直方向)，并改變操作支持圖像的顯示狀態(tài)。例如，檢測與歸因于成像設(shè)備100移動而發(fā)生的圖像的整體移動對應的運動向量(即，GMV)，作為所述移動量和移動方向。另外，控制單元160可根據(jù)姿勢檢測單元150檢測的角速度，計算當前操作量。此外，控制單元160可利用所述移動量和移動方向，以及姿勢檢測單元150檢測的角速度，計算當前操作量。在這種情況下，通過顯示操作支持圖像，用戶能夠容易地把握全景圖像成像范圍。另外，可根據(jù)是在從決定終止位置422的操作到開始位置423的擺動操作中的操作支持圖像，還是在從開始位置423到終止位置422的擺動操作中的操作支持圖像，以不同的方式顯示操作支持圖像。對于在從決定終止位置422的操作到開始位置423的擺動操作中的操作支持圖像，可以使操作支持圖像被閃爍地顯示。從而，通過在進行準備用擺動操作的時候，顯示操作支持圖像，能夠通知用戶該操作不是全景圖像成像操作，而是作為全景圖像成像操作的準備的移動。另外，在成像設(shè)備100到達開始位置423，并且用戶420執(zhí)行了全景圖像成像操作的開始指令操作的情況下，操作支持圖像的顯示形式可從閃爍顯示變成正常顯示(常亮)。即，在從開始位置423到終止位置422的擺動操作(全景圖像成像操作)期間，可正常顯示操作支持圖像。因而，通過改變操作支持圖像的顯示形式，用戶能夠容易地把握當前是在準備全景圖像成像操作，還是在進行全景圖像成像操作。圖8A圖解說明用戶420把成像設(shè)備100移動到成像操作的開始位置423的狀態(tài)。圖SB表示在用戶420把成像設(shè)備100移動到成像操作的開始位置423時，顯示在輸入/輸出面板200上的操作幫助屏幕325。注意控制單元160根據(jù)來自姿勢檢測單元150的姿勢 目息，確定成像設(shè)備100是否已到達開始位直423。操作幫助屏幕325具有代替圖7Β中的操作幫助屏幕320中的操作支持圖像322和323顯示的操作支持圖像327-329。操作支持圖像327和329是指示全景圖像中的垂直方向成像范圍的操作支持圖像，而操作支持圖像328是指示全景圖像的在左端部的成像范圍的操作支持圖像。消息顯示區(qū)326顯示大意是根據(jù)操作支持圖像327-329，提示全景圖像成像操作的開始位置決定操作的消息，和提示用戶在所述決定操作之后，開始全景圖像成像操作的消息。從而，在成像設(shè)備100移動到成像操作的開始位置423的情況下，顯示提示全景圖像成像操作的開始位置決定部分的消息。另外，連同所述顯示一起，顯示大意是沿著與迄今為止的擺動方向相反的方向擺動成像設(shè)備100，以開始成像操作的消息。 從而，在成像設(shè)備100被移動到成像操作的開始位置423，并且在輸入/輸出面板200上顯示操作幫助屏幕325之后，用戶420進行快門按鈕191的全按下操作的情況下，開始全景圖像成像操作。另外，當開始全景圖像成像操作時，操作支持圖像327-329從閃爍顯示變成常亮狀態(tài)。另外，操作支持圖像327-329與成像設(shè)備100的運動相應地移動?，F(xiàn)在，在用戶420進行了開始位置決定操作(例如，快門按鈕191的全按下操作)的情況下，可假定在進行決定操作時的位置不同于開始位置423。例如，可以假定以位置421為中心，在進行決定操作時的位置偏離開始位置423幾度(例如，I度到5度)。在這種情況下，可根據(jù)用戶420的開始位置決定操作，改變設(shè)定的圖像大小。例如，我們假定在開始位置決定操作時的位置相對于開始位置423偏離+5° (以位置421為中心的中心角)。這種情況下，設(shè)定的圖像大小(180° )可被改變成185°。注意就本例來說，舉例說明了其中用戶420進行的快門按鈕191的全按下操作是全景圖像成像操作的開始位置決定操作的例子，不過可以作出其中成像設(shè)備100在到達開始位置423時，自動決定開始位置的安排。在這種情況下，只顯示大意是將開始全景圖像成像操作的消息，并自動開始全景圖像成像操作。從而，當開始全景圖像成像操作時，操作支持圖像按照成像設(shè)備100的移動而變化。下面參考圖9Α和9Β說明一個例子。圖9Α圖解說明從成像操作開始位置423移動到成像操作終止位置422的成像設(shè)備100的轉(zhuǎn)變。圖9Β表示在成像設(shè)備100從成像操作開始位置423到成像操作終止位置422的移動期間顯示的操作幫助屏幕330。這樣，在成像設(shè)備100從成像操作開始位置423開始成像操作之后，按照成像設(shè)備100的移動顯示操作幫助屏幕330，直到成像設(shè)備100到達成像操作終止位置422為止。操作幫助屏幕330顯示作為LV圖像顯示的當前待成像的被攝物體，和重疊在LV圖像上的消息顯示區(qū)331，操作支持圖像332和333，和箭頭334。消息顯示區(qū)331顯示大意是進行到全景圖像成像操作終止位置的成像設(shè)備100的擺動操作的消息。箭頭334是用于支持與全景圖像成像操作相關(guān)的用戶操作(成像設(shè)備100的擺動操作)的箭頭。即，通過沿著箭頭334指示的方向，擺動成像設(shè)備100，用戶能夠進行全景圖像成像操作。圖IOA簡化地表示其中用戶420把成像設(shè)備100移動到成像操作的終止位置422的狀態(tài)。圖IOB表示在用戶420把成像設(shè)備100移動到成像操作的終止位置422時，顯示在輸入/輸出面板200上的操作幫助屏幕335。如圖IOB中所示，當成像設(shè)備100被移動到成像操作的終止位置422，并且用戶420進行了成像操作的終止指令操作時，在消息顯示區(qū)336上顯示大意是成像操作已結(jié)束的消息。另外，在操作幫助屏幕335上顯示指示垂直方向成像范圍和右端部成像范圍的操作支持圖像337-339，從而圖9B中所示的箭頭被消除。從而，在用戶420把成像設(shè)備100移動到成像操作的終止位置422的情況下，全景圖像的成像操作結(jié)束，顯示大意是全景圖像成像操作已結(jié)束的消息?？刂茊卧?60通過根據(jù)來自姿勢檢測單元150的姿勢信息，確定成像設(shè)備100是否已到達終止位置422，進行全景圖像成像操作的終止處理。另外，圖像合成單元120利用成像操作生成的多個圖像，生成全景圖像。在終止全景圖像成像操作之后，記錄控制單元130把生成的全景圖像作為靜態(tài)圖像文件記錄在記錄 介質(zhì)140中。注意就本技術(shù)的第一實施例來說，說明了其中預先設(shè)定全景圖像的成像范圍(圖像大小)，并利用該圖像大小，進行全景圖像成像操作的終止處理的例子。不過注意，可以作出根據(jù)用戶操作，在全景圖像成像操作期間改變圖像大小的安排。例如，通過在全景圖像成像操作期間，向左或向右移動指示在右端部的成像范圍的操作支持圖像338，可改變圖像大小。這種移動操作可以用利用撥盤192的操作，或者在輸入/輸出面板200上的觸摸操作(描跡)實現(xiàn)。因而，在確認全景圖像的成像范圍的時候，用戶能夠調(diào)整全景圖像的成像范圍。注意存在當成像設(shè)備100從成像操作的開始位置423移動到成像操作的終止位置422時，用戶未正確進行擺動操作的可能性。例如，可以預料在沿著水平方向的擺動操作中，成像設(shè)備100也會在垂直方向稍微移動。在這種情況下，按照垂直方向的移動，移動地顯示操作支持圖像的顯示位置。另外，在這種情況下，可以顯示提示正確的擺動操作，以便向用戶通知正確的擺動操作的消息。從而，通過顯示指示根據(jù)全景圖像成像范圍的終止位置的決定操作決定的成像范圍的操作支持圖像，在開始全景圖像成像操作之前，用戶能夠容易地把握全景圖像的成像范圍。即，通過進行成像設(shè)備100的擺動操作，用戶能夠容易地確認全景圖像成像范圍。另外，在全景圖像成像操作結(jié)束之前，一直顯示操作支持圖像。因而，通過遵循操作支持圖像，擺動成像設(shè)備100，用戶能夠容易地拍攝預期的全景圖像。即，能夠容易地生成用戶中意的全景圖像。成像設(shè)備的操作例子下面參考附圖，說明按照本技術(shù)的第一實施例的成像設(shè)備100的操作。圖11和12是圖解說明按照本技術(shù)的第一實施例的成像設(shè)備100的成像控制處理的處理過程的例子的流程圖。首先，設(shè)定全景圖像成像模式(步驟S901)。隨后，控制單元160判定是否進行了全景圖像成像操作的終止位置的決定操作(步驟S902)，如果未進行所述決定操作，那么繼續(xù)進行監(jiān)控。如果進行了決定操作(步驟S902中“是”)，那么由在接受所述決定操作時的成像設(shè)備100的姿勢確定的位置被設(shè)定為終止位置(步驟S903)。即，控制單元160根據(jù)終止位置，決定全景圖像的成像范圍(水平方向和垂直方向)。注意步驟S902是在發(fā)明內(nèi)容中描述的接受的例子。另外，步驟S903是在發(fā)明內(nèi)容中描述的決定的例子。隨后，生成成像圖像(步驟S904)，控制單元160根據(jù)來自姿勢檢測單元150的姿勢信息，計算相對于終止位置的移動量(移動角度)(步驟S905)。隨后，控制單元160相對于計算的移動量，比較水平方向的移動量和垂直方向的移動量(步驟S906)。在水平方向的移動量大于垂直方向的移動量的情況下(步驟S906中“是”)，顯示控制單元170顯示重疊在LV圖像上的其水平方向是移動方向的操作支持圖像(步驟S908)。例如，其水平方向是縱向方向的矩形虛線的一部分(例如參見圖7B和8B)作為操作支持圖像被顯示在顯示單元180上。另一方面，在水平方向的移動量不大于垂直方向的移動量的情況下(步驟S906中 “否”)，顯示控制單元170顯示重疊在LV圖像上的其垂直方向是移動方向的操作支持圖像(步驟S907)。例如，其垂直方向是縱向方向的矩形虛線的一部分作為操作支持圖像被顯示在顯示單元180上。之后，控制單元160判定是否進行了全景圖像成像操作的開始指令操作(開始位置決定操作)(步驟S909)，如果未進行開始指令操作，那么流程返回步驟S904。如果進行了全景圖像成像操作的開始指令操作(步驟S909中“是”)，那么控制單元160比較水平方向的移動量和垂直方向的移動量(步驟S910)。如果比較結(jié)果表明水平方向的移動量大于垂直方向的移動量(步驟S910中“是”)，那么控制單元160產(chǎn)生以水平方向作為移動方向(擺動方向)的設(shè)定(步驟S912)。另一方面，在水平方向的移動量不大于垂直方向的移動量(步驟S910中“是”)的情況下，控制單元160以垂直方向作為移動方向(擺動方向)進行設(shè)定(步驟S911)。根據(jù)按照這種方式設(shè)定的移動方向(水平方向或垂直方向)，顯示操作支持圖像。例如，在水平方向被設(shè)定為移動方向(擺動方向)的情況下(步驟S912)，在顯示單元180上顯示其水平方向為縱向方向的矩形虛線的一部分(例如，參見圖8B-10B)，作為操作支持圖像。隨后，生成成像圖像(步驟S913)。之后，顯示控制單元170根據(jù)控制單元160設(shè)定的移動方向(水平方向或垂直方向)，在顯示單元180上顯示重疊在LV圖像上的操作支持圖像(步驟S914)。之后，進行生成的成像圖像的記錄處理(步驟S915)。利用該處理，臨時記錄用于全景圖像的成像圖像(經(jīng)過圖像處理單元113的圖像處理的一個成像圖像)。之后，控制單元160判定是否進行了全景圖像成像操作的終止指令操作(步驟S916)，如果未進行終止指令操作，那么流程返回步驟S913。如果進行了終止指令操作(步驟S916中“是”)，那么在控制單元160的控制下，圖像合成單元120利用經(jīng)過圖像處理單元113的圖像處理的圖像(臨時記錄的多個圖像)，生成全景圖像。之后，在控制單元160的控制下，記錄控制單元130把圖像合成單元120生成的全景圖像作為圖像文件記錄在記錄介質(zhì)140中(步驟S918)。2.第二實施例就按照本技術(shù)的第一實施例來說，舉例說明了其中根據(jù)用戶操作，決定全景圖像成像操作的終止位置的例子。由于全景圖像成像操作的終止位置是根據(jù)用戶操作決定的，因此也可設(shè)想利用在該用戶操作時(終止位置)的成像圖像，決定全景圖像成像操作的終止定時。因而，就按照本技術(shù)的第二實施例來說，將舉例說明其中利用在全景圖像成像操作的終止位置的成像圖像，決定全景圖像成像操作的終止定時的例子。成像設(shè)備的結(jié)構(gòu)例子圖13是圖解說明按照本技術(shù)的第二實施例的成像設(shè)備500的功能結(jié)構(gòu)例子的方框圖。注意成像設(shè)備500是圖I中所示的成像設(shè)備100的變形例。因而，與成像設(shè)備100的部分一樣的部分將具有相同的名稱，其一部分的說明將被省略。成像設(shè)備500具有匹配圖像檢測單元510和控制單元520。匹配圖像檢測單元510用于對成像裝置112生成的圖像進行匹配處理，并把其檢測結(jié)果輸出給控制單元520。具體地說，在進行全景圖像成像操作的終止位置的決定操作的情況下，匹配圖像檢測單元510保持用成像裝置112生成的圖像(經(jīng)過圖像處理單元113的圖像處理的圖像)。匹配圖像檢測單元510隨后判定保持的圖像(保持圖像)和在接受所述決定操作后的成像設(shè)備500的姿勢變化之后，利用成像裝置112生成的圖像是否匹配，并檢測匹配的圖像。
控制單元520根據(jù)來自匹配圖像檢測單元510的檢測結(jié)果，進行停止全景圖像成像操作的控制。具體地說，控制單元520根據(jù)來自匹配圖像檢測單元510的檢測結(jié)果，判定上述保持圖像和成像裝置112在全景圖像成像操作期間生成的圖像是否匹配。如果這些圖像匹配，那么控制單元520進行停止全景圖像成像操作的控制。保持圖像的例子圖14A和14B是示意圖解說明在把圖像保持在按照本技術(shù)的第二實施例的匹配圖像檢測單元510中的情況下的圖像保持的例子的示圖。圖14A表示在進行決定全景圖像成像操作的終止位置的決定操作的情況下，顯示的操作輔助屏幕315。注意圖14A中所示的操作輔助屏幕315和圖6B中的操作輔助屏幕315相同，從而省略其說明。圖14B簡化地圖解說明了保存在匹配圖像檢測單元510中的圖像(保持圖像511)。如圖14A和14B中所示，成像裝置112在全景圖像成像操作的終止位置的決定操作時生成的，并且經(jīng)過圖像處理單元113的圖像處理的圖像(保持圖像511)被保持在匹配圖像檢測單元510中。匹配圖像檢測單元510利用保持圖像511，對在全景圖像成像操作期間生成的成像圖像進行匹配處理。下面參考圖15A和15B詳細說明該匹配處理。檢測匹配圖像的例子圖15A和15B是示意圖解說明利用按照本技術(shù)的第二實施例的匹配圖像檢測單元510的匹配處理的示圖。圖15A示意地圖解說明在全景圖像成像操作期間，檢測與保持圖像511匹配的圖像(匹配圖像)的匹配處理。具體地說，圖15A和15B圖解說明作為全景圖像成像操作的成像對象的成像范圍(全景圖像成像范圍530)和作為成像裝置112的成像對象的成像范圍531之間的關(guān)系。另外，不意表不了確定成像范圍531和保持圖像511是否匹配的匹配處理532。如圖15A中所示，順序進行在進行成像設(shè)備500的擺動操作時生成的成像圖像(示于成像范圍531內(nèi)的圖像)和保持的圖像511之間的匹配處理。此刻，匹配處理是比較要比較的兩個圖像的特征量的處理，根據(jù)比較結(jié)果，計算這兩個圖像的特征量的相似性，并根據(jù)所述相似性，判定這兩個圖像是否匹配。例如，在計算的相似性低于閾值的情況下，確定要比較的兩個圖像不匹配，而在計算的相似性等于或大于閾值的情況下，要比較的兩個圖像被確定為匹配。圖15B示意地圖解說明在匹配處理536中檢測到與保持圖像511匹配的圖像(顯示在成像范圍535內(nèi)的圖像)的情況。如圖15B中所示，當在匹配處理536中檢測到與保持圖像511匹配的圖像(顯示在成像范圍535內(nèi)的圖像)時，匹配圖像檢測單元510向控制單元520輸出帶有這個意思的通知。當收到所述通知時，控制單元520進行終止全景圖像成像操作的終止處理。即，在與全景圖像成像操作的終止位置對應的圖像的成像操作結(jié)束之后，結(jié)束成像操作。如果在匹配處理中未檢測到與保持圖像511匹配的圖像，那么在預先設(shè)定的全景圖像成像范圍(終止位置(或者相對于終止位置，提前預定角度的位置))進行終止處理。另外，雖然舉例說明了其中在進行成像設(shè)備500的擺動操作的時候，順序進行匹配處理的例子，不過可以作出其中只在預先設(shè)定的距全景圖像成像操作的終止位置的一定范圍內(nèi)，進行匹配處理的安排。例如，可在到達距終止位置±5°的范圍內(nèi)的情況下，開始匹配處理。因而，能夠降低當進行成像操作時，成像設(shè)備500的負荷。另外，即使在全景的大部分具有很少特征的情況下，也能夠恰當?shù)剡M行匹配處理。成像設(shè)備的操作例子 圖16和17是圖解說明按照本技術(shù)的第二實施例的成像設(shè)備500的成像控制處理的處理過程的例子的流程圖。圖16和17是圖11和12的變形例，從而與圖11和12相同的部分用相同的附圖標記表示，其說明的一部分將被省略。在設(shè)定了全景圖像成像操作的終止位置(步驟S903)之后，匹配圖像檢測單元510保持在接受了決定操作時，利用成像裝置112生成的圖像(步驟S921)。另外，在進行了生成的成像圖像的記錄處理(步驟S915)之后，匹配圖像檢測單元510判定生成的圖像和保持的圖像(保持圖像)是否匹配(步驟S922)。如果生成的圖像和保持圖像不匹配(步驟S922中“否”)，那么流程返回步驟S913。另一方面，如果生成的圖像和保持圖像匹配(步驟S922中“是”)，那么匹配圖像檢測單元510向控制單元160輸出生成的圖像和保持圖像匹配的通知。從而，進行全景圖像成像操作的終止處理，圖像合成單元120生成全景圖像(步驟S917)。3.第三實施例就按照本技術(shù)的第一實施例來說，舉例說明了其中手動進行全景圖像成像操作的終止位置和開始位置的決定操作的例子。現(xiàn)在，在預先設(shè)定了全景圖像的圖像大小(角度)的情況下，可以設(shè)想通過決定全景圖像上的預定位置(例如，中間位置)，自動決定全景圖像成像操作的開始位置和終止位置。因而，就本技術(shù)的第三實施例來說，將舉例說明通過決定全景圖像上的預定位置，自動決定全景圖像成像操作的開始位置和終止位置的例子。注意，按照本技術(shù)的第三實施例的成像設(shè)備的結(jié)構(gòu)大體和圖I中所示的例子的結(jié)構(gòu)相同。因而，與按照本技術(shù)的第一實施例一樣的部分用相同的附圖標記表不，其說明將被省略。全景圖像成像操作的例子圖18A和18B是圖解說明按照本技術(shù)的第三實施例的成像設(shè)備100的姿勢和顯示在輸入/輸出面板200上的顯示屏幕之間的關(guān)系的例子的圖像。注意按照和圖5A及其它附圖相同的方式，在圖18A中只顯示在圖4A中所示的場所400中的建筑物401和402，以及大樹403，其它景物的圖示被省略，以便說明。另外，圖18A和18B圖解說明在預先設(shè)定180°圖像大小的情況下的成像操作的例子。圖18A簡化地圖解說明從上方觀察的成像設(shè)備100，和雙手拿著成像設(shè)備100的用戶420的狀態(tài)。我們將假定在觀看顯示在輸入/輸出面板200上的被攝物體時，用戶420已確認了全景圖像中的中間位置(與全景圖像的中心相當?shù)奈恢?，并且進行了決定全景圖像的中間位置的決定操作。所述決定操作可用快門按鈕191的全按下操作實現(xiàn)。例如，用戶420在觀看顯示在輸入/輸出面板200上的LV圖像時，決定全景圖像中的中間位置。在如圖18A中所示，包括建筑物401的成像范圍將被決定為中間位置的情況下，用戶420在圖18A中所示的狀態(tài)下進行快門按鈕191的全按下操作(決定操作)。在按照這種方式進行了中間位置決定操作的情況下，控制單元160把在所述決定操作時成像設(shè)備100的姿勢視為基準姿勢。即，與當進行決定操作時，從姿勢檢測單元150輸出的姿勢信息相關(guān)的姿勢被決定為成像設(shè)備100的基準姿勢。注意，圖18B中表示了在用戶決定了全景圖像成像操作的中間位置之后，顯示在輸入/輸出面板200上的顯示屏幕的例子?，F(xiàn)在，說明在設(shè)定的圖像大小為Θ 1(180° )的情況下，決定水平方向的成像操作的開始位置和終止位置的方法?，F(xiàn)在，我們將假定在圖18A中所示的狀態(tài)下，用戶420進行了快門按鈕191的全按下操作。這種情況下，以從進行成像操作時的位置601起的光軸方向 (中間位置602的方向)作為基準，根據(jù)設(shè)定的圖像大小Θ I決定成像操作的開始位置603和終止位置604。具體地說，根據(jù)圖像大小Θ 1，決定從中間位置602到成像操作的開始位置603的角度Θ 2(90° )，和從中間位置602到成像操作的終止位置604的角度Θ 3(90° )。即，計算 θ2=θ1/2 和 Θ 3=0 1/2。注意，除中間位置以外的位置可被決定為基準位置。例如在120°被決定為圖像大小的情況下，40° (即，距開始位置40° )可被用作基準位置。在這種情況下，Θ 2= θ IX Θ (1/3)和Θ 3= θ IX Θ (2/3)。注意，該基準位置可用用戶操作改變。圖18Β表示在進行決定全景圖像的中間位置的決定操作時，顯示的操作幫助屏幕610。操作幫助屏幕610具有作為LV圖像的當前成像的被攝物體，以及重疊地顯示在LV圖像上的消息顯示區(qū)611和操作支持圖像612-614。消息顯示區(qū)611顯示大意是全景圖像成像操作的中間位置已被決定的消息，并顯示提示用戶把成像設(shè)備100移動到全景圖像成像操作的開始位置的消息。按照和本技術(shù)的第一實施例相同的方式，操作支持圖像612和613是指示全景圖像成像范圍(矩形)的虛線(全部的矩形虛線)，并被置于顯示在操作幫助屏幕610上的LV圖像上。另外，按照和本技術(shù)的第一實施例相同的方式，操作支持圖像614是指示全景圖像中的中心位置(擺動方向的中心位置)的實線，并且位于顯示在操作幫助屏幕610上的LV圖像上。注意顯示與成像設(shè)備100的姿勢的變化對應的操作幫助屏幕的方法大體與本技術(shù)的第一實施例相同，從而這里將省略其說明。從而，即使在決定全景圖像成像位置的終止位置以外的位置(例如，中間位置)作為基準位置的情況下，也能夠容易地生成用戶中意的全景圖像。4.第四實施例就按照本技術(shù)的第一實施例來說，說明了具有單一成像單元的成像設(shè)備的例子。現(xiàn)在，可以想象其中單一成像設(shè)備具有多個成像單元(例如，主照相機和輔助照相機)的情況。在這種情況下，雖然可利用一個成像單元(例如，主照相機)進行全景圖像成像操作，不過，可以想象在全景圖像成像操作中使用另一個成像單元(例如，輔助照相機)。因而，就按照本技術(shù)的第四實施例來說，將舉例說明利用具有多個成像單元的成像設(shè)備，進行全景圖像成像操作的例子。成像設(shè)備的外部結(jié)構(gòu)的例子圖19A和19B是表示按照本技術(shù)的第四實施例的成像設(shè)備700的外觀的外部結(jié)構(gòu)圖。圖19A是圖解說明成像設(shè)備700的正面?zhèn)鹊耐庥^的透視圖。另外，圖19B是圖解說明成像設(shè)備700的上面(B卩，設(shè)置快門按鈕191和撥盤192的表面)的上視圖。注意在圖19B中，用虛線簡化地圖解說明了除右側(cè)鏡頭單元701和左側(cè)鏡頭單元702以外的部分。注意成像設(shè)備700是圖2A和2B中所示的成像設(shè)備100的局部變形例。因而，在圖19A和19B中，和成像設(shè)備100相同的部分用相同的附圖標記表示，其說明的一部分將被省略。成像設(shè)備700具有右側(cè)鏡頭單元701和左側(cè)鏡頭單元702。右側(cè)鏡頭單元701和左側(cè)鏡頭單元702由收集來自被攝物體的光的多個透鏡(變焦透鏡、聚焦透鏡等)構(gòu)成，并 且可沿著特定方向(圖19A和19B中所示例子中的水平方向)轉(zhuǎn)動。例如，右側(cè)鏡頭單元701可以沿著水平方向轉(zhuǎn)動Θ 11 (度)，左側(cè)鏡頭單元702可沿著水平方向旋轉(zhuǎn)0 12(度)。例如,可以實現(xiàn)Θ 11= Θ 12=90(度)。這種情況下，從右側(cè)鏡頭單元701的光軸方向和鏡頭單元111的光軸方向平行的位置，到右側(cè)鏡頭單元701的光軸方向和鏡頭單元111的光軸方向垂直的位置的范圍可以是右側(cè)鏡頭單元701的轉(zhuǎn)動范圍。同樣地，從左側(cè)鏡頭單元702的光軸方向和鏡頭單元111的光軸方向平行的位置，到左側(cè)鏡頭單元702的光軸方向和鏡頭單元111的光軸方向垂直的位置的范圍可以是左側(cè)鏡頭單元702的轉(zhuǎn)動范圍。成像設(shè)備的功能結(jié)構(gòu)的例子圖20是圖解說明按照本技術(shù)的第四實施例的成像設(shè)備700的功能結(jié)構(gòu)例子的方框圖。注意成像設(shè)備700是圖I中所示的成像設(shè)備100的局部變形例。因而，在圖20中，和成像設(shè)備100相同的部分用相同的附圖標記表示，其說明的一部分將被省略。成像設(shè)備700包括右側(cè)鏡頭單元701、左側(cè)鏡頭單元702、成像裝置703、成像裝置704、圖像處理單元711、圖像合成單元712和控制單元713。右側(cè)鏡頭單元701和左側(cè)鏡頭單元702和圖19A和19B中所示的相同。經(jīng)右側(cè)鏡頭單元701和光圈輸入的來自被攝物體的光被提供給成像裝置703，經(jīng)左側(cè)鏡頭單元702和光圈輸入的來自被攝物體的光被提供給成像裝置704。成像裝置703轉(zhuǎn)換經(jīng)右側(cè)鏡頭單元701輸入的光(來自被攝物體的入射光)，從而生成圖像(圖像數(shù)據(jù))，然后把生成的圖像提供給圖像處理單元711。成像裝置704轉(zhuǎn)換經(jīng)左側(cè)鏡頭單元702輸入的光(來自被攝物體的入射光)，從而生成圖像(圖像數(shù)據(jù))，然后把生成的圖像提供給圖像處理單元711。注意成像裝置112是在發(fā)明內(nèi)容中說明的成像單元的例子。另外，成像裝置703和704是在發(fā)明內(nèi)容中說明的第二成像單元的例子。S卩，鏡頭單元111和成像裝置112起主照相機作用，而右側(cè)鏡頭單元701和成像裝置703，和左側(cè)鏡頭單元702和成像裝置704起輔助照相機(副照相機)作用。另外，輔助照相機可被配置成以致主照相機的光軸方向和輔助照相機的光軸方向不同。注意具有不同功能的照相機可被用作主照相機和輔助照相機。例如，可以作出其中主照相機是分辨率約1200萬像素的照相機，而輔助照相機是分辨率約2百萬像素的照相機的安排。圖像處理單元711在控制單元713的控制下，對分別由成像裝置112、成像裝置703和成像裝置704生成的圖像(圖像數(shù)據(jù))進行各種圖像處理。另外，圖像處理單元711把經(jīng)過圖像處理的圖像(圖像數(shù)據(jù))提供給圖像合成單元712和顯示控制單元170。圖像合成單元712在控制單元713的控制下，利用從圖像處理單元711供給的多個圖像，合成全景圖像，然后把生成的全景圖像提供給記錄控制單元130。當在輔助照相機的光軸方向面對全景圖像成像操作的開始位置或終止位置的狀態(tài)下，接受決定操作時，控制單元713根據(jù)主照相機和輔助照相機之間的位置關(guān)系，決定全景圖像成像范圍。所述決定操作是其中全景圖像中的中間位置被決定為基準位置的決定操作。設(shè)定拍攝全景圖像的方法的屏幕的例子圖21是圖解說明在按照本技術(shù)的第四實施例中，顯示在輸入/輸出面板200上的 設(shè)定屏幕(攝影方法設(shè)定屏幕730)的示圖。攝影方法設(shè)定屏幕730是在設(shè)定全景圖像攝影方法時，顯示在輸入/輸出面板200上的屏幕。例如，在進行了全景圖像成像模式設(shè)定操作之后，立即顯示攝影方法設(shè)定屏幕730。攝影方法設(shè)定屏幕730包括選擇按鈕731-734，OK按鈕735和返回按鈕736。選擇按鈕731-734是用于設(shè)定全景圖像攝影方法的按鈕。現(xiàn)在，對應于設(shè)定按鈕734的全景圖像攝影方法與利用本技術(shù)的第一實施例舉例說明的攝影方法對應。另外，將參考圖22A-24B，詳細說明與選擇按鈕731-733對應的全景圖像攝影方法。注意在下面的說明中，對應于選擇按鈕731的全景圖像攝影方法將被稱為“第一攝影方法”。另外，對應于選擇按鈕732的全景圖像攝影方法將被稱為“第二攝影方法”，而對應于選擇按鈕733的全景圖像攝影方法將被稱為“第三攝影方法”。OK按鈕735是在進行了選擇全景圖像攝影方法的選擇操作之后，為了決定所述選擇而按下的按鈕。另外，與利用OK按鈕735的按下操作決定的全景圖像攝影方法相關(guān)的信息(攝影方法信息)被輸出給控制單元160，并被保存。返回按鈕736是為了返回之前剛剛顯示的顯示屏幕而按下的按鈕。全景圖像成像操作的例子(第一攝影方法)圖22k和22B是示意圖解說明按照本技術(shù)的第四實施例的成像設(shè)備700的姿勢和顯示在輸入/輸出面板200上的顯示屏幕的轉(zhuǎn)變例子的示圖。注意按照和圖5A及其它附圖相同的方式，在圖22A中只顯示在圖4A中所示的場所400中的建筑物401和402，以及大樹403，其它景物的圖示被省略，以便說明。另外，圖22A和22B圖解說明在預先設(shè)定180°圖像大小的情況下的成像操作的例子。另外，圖22A和22B圖解說明在設(shè)定了第一成像方法的情況(即，設(shè)定了與圖21中的選擇按鈕731對應的全景圖像攝影方法的情況)下的成像操作的例子。于是，如果設(shè)定了第一攝影方法，那么我們將假定右側(cè)鏡頭單元701和左側(cè)鏡頭單元702的光軸方向都是根據(jù)已設(shè)定的圖像大小決定的。例如，在設(shè)定的圖像大小為Θ1的情況下，右側(cè)鏡頭單元701和左側(cè)鏡頭單元702的光軸方向都被確定為從鏡頭單元111的光軸方向轉(zhuǎn)動Θ 1/2的位置。例如，在設(shè)定的圖像大小為180°的情況下，如圖22A中所示，右側(cè)鏡頭單元701和左側(cè)鏡頭單元702的光軸方向都被確定為從鏡頭單元111的光軸方向轉(zhuǎn)動90°的位置。即，鏡頭單元111的光軸方向和右側(cè)鏡頭單元701和左側(cè)鏡頭單元702的光軸方向都被確定為在正交的位置。注意在控制單元713的控制下，可利用一個或多個驅(qū)動單元(未示出)，按照圖像大小自動移動右側(cè)鏡頭單元701和左側(cè)鏡頭單元702。圖22k簡化地圖解說明從上方觀察的其中鏡頭單元111的光軸方向面對建筑物401的方向的成像設(shè)備700的狀態(tài)。圖22B表示在進行了決定全景圖像的中間位置的決定操作(開始位置和終止位置的決定操作)的情況下顯示的操作幫助屏幕750。操作輔助屏幕750具有重疊在LV圖像上的開始位置被攝物體顯示區(qū)751、終止位置被攝物體顯示區(qū)752、消息顯示區(qū)753和操作支持圖像754及755。注意LV圖像是成像裝置112根據(jù)經(jīng)鏡頭單元111輸入的被攝物體光生成的圖像(即，包括建筑物401的圖像)。即，這是包括由主照相機當前成像的被攝物體的圖像。開始位置被攝物體顯示區(qū)751中顯示由成像裝置704根據(jù)經(jīng)左側(cè)鏡頭單元702輸入的被攝物體光，生成的圖像(即，包括建筑物402的圖像)。終止位置被攝物體顯示區(qū)752中顯示由成像裝置703根據(jù)經(jīng)右側(cè)鏡頭單元701輸入的被攝物體光，生成的圖像(即，包括大樹403的圖像)。
消息顯示區(qū)753中顯示大意是位于全景圖像成像操作的開始位置和終止位置的被攝物體被顯示的消息，和提示用戶把成像設(shè)備700移動到全景圖像成像操作的開始位置的消息。以和按照本技術(shù)的第一實施例相同的方式，操作支持圖像754和755是指示垂直方向的全景圖像的成像范圍的圖像(虛線)?，F(xiàn)在，用戶在觀看顯示在輸入/輸出面板200上的被攝物體(位于開始位置、中間位置和終止位置的被攝物體)的時候，能夠確認全景圖像的位置，并進行決定全景圖像的中間位置(開始位置和終止位置)的決定操作。可以和按照本技術(shù)的第一實施例相同的方式，利用快門按鈕191的全按下，實現(xiàn)所述決定操作。例如，在查看顯示在輸入/輸出面板200上的LV圖像的時候，用戶能夠決定與全景圖像對應的成像范圍。例如，如圖22k中所示，在建筑物402的位置將為開始位置742，大樹的位置將為終止位置743的情況下，用戶在圖22A中所示的狀態(tài)下，進行快門按鈕191的全按下操作(決定操作)。在進行了這種決定操作的情況下，控制單元713把進行所述決定操作時的成像設(shè)備700的姿勢視為基準姿勢。即，與在進行決定操作時，從姿勢檢測單元150輸出的姿勢信息相關(guān)的姿勢被確定為成像設(shè)備700的基準姿勢?，F(xiàn)在，開始位置被攝物體顯示區(qū)751和終止位置被攝物體顯示區(qū)752可以繼續(xù)僅僅顯示從決定操作以來的圖像，直到全景圖像成像操作結(jié)束為止。因而，進行全景圖像成像操作的用戶能夠容易地目視把握全景圖像成像操作的開始位置和終止位置。從而，通過在開始位置被攝物體顯示區(qū)751中，顯示與開始位置742相當?shù)谋粩z物體，和在終止位置被攝物體顯示區(qū)752中，顯示與終止位置743相當?shù)谋粩z物體，用戶能夠容易地把握全景圖像中的各個位置。此時，按照成像設(shè)備700的姿勢的變化，顯示操作支持圖像的方法大體與按照本技術(shù)的第一實施例相同，從而這里省略其說明。全景圖像成像操作的例子(第二攝影方法)圖23A和23B是示意圖解說明按照本技術(shù)的第四實施例的成像設(shè)備700的姿勢和顯示在輸入/輸出面板200上的顯示屏幕的轉(zhuǎn)變例子的示圖。注意按照和圖5A和其它附圖相同的方式，在圖23A中只顯示在圖4A中所示的場所400中的建筑物401和402，以及大樹403，其它景物的圖示被省略，以便說明。另外，圖23A和23B圖解說明在預先設(shè)定180°圖像大小的情況下的成像操作的例子。另外，圖23A和23B圖解說明在設(shè)定了第二成像方法的情況(即，設(shè)定了與圖21中的選擇按鈕732對應的全景圖像攝影方法的情況)下的成像操作的例子。于是，在設(shè)定了第二攝影方法的情況下，我們假定左側(cè)鏡頭單元702的光軸方向是根據(jù)設(shè)定的圖像大小確定的。例如，在設(shè)定的圖像大小為Θ I的情況下，左側(cè)鏡頭單元702的光軸方向被確定為從鏡頭單元111的光軸方向轉(zhuǎn)動Θ 1/2的位置。例如，在如圖23A中所示，設(shè)定的圖像大小為180°的情況下，左側(cè)鏡頭單元702的光軸方向被確定為從鏡頭單元111的光軸方向轉(zhuǎn)動90°的位置。即，鏡頭單元111的光軸方向和左側(cè)鏡頭單元702的光軸方向被確定為在正交的位置。注意在控制單元713的控制下，可利用驅(qū)動單元(未示出)，根據(jù)圖像大小自動移動左側(cè)鏡頭 單元702。圖23A簡化地圖解說明從上方觀察的其中鏡頭單元111的光軸方向面對建筑物401的方向的成像設(shè)備700的狀態(tài)。圖23B表示在進行了決定全景圖像的中間位置(開始位置)的決定操作的情況下顯示的操作幫助屏幕760。操作幫助屏幕760具有重疊在LV圖像上的開始位置被攝物體顯示區(qū)761，消息顯示區(qū)762，和操作支持圖像763及764。注意除了其中未顯示在圖22B中圖解說明的終止位置被攝物體顯示區(qū)752之外，操作幫助屏幕760大體上和圖22B中圖解說明的操作支持圖像750相同。因而，這里將省略詳細的說明。從而，通過在開始位置被攝物體顯示區(qū)761中顯示與開始位置742相當?shù)谋粩z物體，用戶能夠容易地把握全景圖像中的各個位置。全景圖像成像操作的例子(第三攝影方法)圖24A和24B是示意地圖解說明按照本技術(shù)的第四實施例的成像設(shè)備700的姿勢和顯示在輸入/輸出面板200上的顯示屏幕的轉(zhuǎn)變例子的示圖。注意按照和圖5A及其它附圖相同的方式，在圖24A中只顯示在圖4A中所示的場所400中的建筑物401和402，以及大樹403，其它景物的圖示被省略，以便說明。另外，圖24A和24B圖解說明在預先設(shè)定180°圖像大小的情況下的成像操作的例子。另外，圖24A和24B圖解說明在設(shè)定了第三成像方法的情況(即，設(shè)定了與圖21中的選擇按鈕733對應的全景圖像攝影方法的情況)下的成像操作的例子。于是，在設(shè)定了第三攝影方法的情況下，我們假定右側(cè)鏡頭單元701的光軸方向是根據(jù)設(shè)定的圖像大小確定的。例如，在設(shè)定的圖像大小為Θ I的情況下，右側(cè)鏡頭單元701的光軸方向被確定為從鏡頭單元111的光軸方向轉(zhuǎn)動Θ 1/2的位置。例如，在如圖24A中所示，設(shè)定的圖像大小為180°的情況下，右側(cè)鏡頭單元701的光軸方向被確定為從鏡頭單元111的光軸方向轉(zhuǎn)動90°的位置。即，鏡頭單元111的光軸方向和右側(cè)鏡頭單元701的光軸方向被確定為在正交的位置。注意在控制單元713的控制下，可利用驅(qū)動單元(未示出)，根據(jù)圖像大小自動移動右側(cè)鏡頭單元701。圖24A簡化地圖解說明從上方觀察的其中鏡頭單元111的光軸方向面對建筑物401的方向的成像設(shè)備700的狀態(tài)。圖24B表示在進行了決定全景圖像的中間位置(終止位置)的決定操作的情況下顯示的操作幫助屏幕770。操作幫助屏幕770具有重疊在LV圖像上的開始位置被攝物體顯示區(qū)771、消息顯示區(qū)772、及操作支持圖像773和774。注意除了未顯示在圖22B中圖解說明的開始位置被攝物體顯示區(qū)751之外，操作幫助屏幕770通常與圖22B中圖解說明的操作支持圖像750相同。因而，將省略詳細的說明。從而，通過在終止位置被攝物體顯示區(qū)771中顯示與終止位置743相當?shù)谋粩z物體，用戶能夠容易地把握全景圖像中的各個位置。注意可以作出其中使用利用輔助照相機生成的圖像，自動進行在全景圖像成像操作的開始位置的成像操作的開始處理，或在全景圖像成像操作的終止位置的成像操作的結(jié)束處理的安排。例如，可以應用按照本技術(shù)的第二實施例。具體地說，顯示在開始位置被攝物體顯示區(qū)中的圖像(即，用成像裝置704生成的圖像)被保持，然后利用保持圖像和用成像裝置112生成的圖像之間的匹配處理，檢測全景圖像成像操作的開始位置。在檢測到開始位置的情況下，自動進行全景圖像成像操作的開始處理。按照相同的方式，顯示在終止位置被攝物體顯示區(qū)中的圖像(即，用成像裝置703生成的圖像)被保持，然后利用保持圖像和用成像裝置112生成的圖像之間的匹配處理，檢測全景圖像成像操作的終止位置。在檢測到終止位置的情況下，自動進行全景圖像成像操作的結(jié)束處理。利用輔助照相機的圖像，生成全景圖像的例子到目前為止，舉例說明了利用主照相機生成的圖像生成全景圖像的例子。這里，說明利用主照相機生成的圖像，和輔助照相機生成的圖像生成全景圖像的例子。
·
圖25A-25C是圖解說明按照本技術(shù)的第四實施例，利用多個成像單元生成的圖像，合成全景圖像的例子的示圖。這里，在把明暗差異極大的場景(例如，圖32A中所示的日落場景)作為全景圖像成像范圍的情況下，可以設(shè)想成像設(shè)備700具有的成像裝置112的動態(tài)范圍將不足。在成像裝置112的動態(tài)范圍因此不足的情況下，可能存在其中全景圖像中的明亮部分變得飽和，從而顯得白化，而全景圖像中的陰暗部分變黑的情況?，F(xiàn)在，存在其中通過合成曝光時間不同的長曝光時間圖像和短曝光時間圖像，生成具有擴展的動態(tài)范圍的合成圖像的技術(shù)。注意長曝光時間圖像和短曝光時間圖像是在不同曝光條件下不斷生成的成像圖像。具體地說，短曝光時間圖像是其曝光時間較短，優(yōu)先考慮相同拍攝場景中的被攝物體的較明亮部分的成像圖像。另一方面，長曝光時間圖像是其曝光時間較長，優(yōu)先考慮相同拍攝場景中的被攝物體的較陰暗部分的成像圖像。因而，通過合成長曝光時間圖像和短曝光時間圖像，能夠生成其中再現(xiàn)輝亮和陰影梯度的合成圖像，從而能夠擴展動態(tài)范圍。因而，就圖25A-25C中所示的例子來說，圖解說明利用由多個成像裝置生成的圖像，擴展動態(tài)范圍的例子。圖25A圖解說明利用由成像裝置112、703和704生成的圖像，生成全景圖像的例子。例如，我們假定將用成像裝置112成像的成像范圍是主照相機成像范圍780。我們還假定將用成像裝置704成像的成像范圍是輔助照相機成像范圍781，將用成像裝置703成像的成像范圍是輔助照相機成像范圍782。例如，成像裝置112生成正常成像圖像，成像裝置703和704生成具有不同曝光條件的多個成像圖像(長曝光時間圖像和短曝光時間圖像)。具體地說，成像裝置703和704通過利用和在全景圖像成像操作中的成像裝置112的曝光條件不同的曝光條件，連續(xù)兩次對相同被攝物體成像，生成長曝光時間圖像和短曝光時間圖像。圖像合成單元712通過合成用成像裝置703和704生成的多個圖像與成像裝置112生成的多個圖像，生成具有在至少部分區(qū)域中擴展的動態(tài)范圍的全景圖像。例如，圖像合成單元712按照構(gòu)成短曝光時間圖像的像素的亮度，決定像素的合成比，然后根據(jù)所述合成比，對從圖像處理單元711輸出的圖像(長曝光時間圖像和短曝光時間圖像)進行高動態(tài)范圍合成處理。這種情況下，成像合成單元712通過進行匹配處理，對從圖像處理單元711輸出的圖像(正常成像圖像，長曝光時間圖像和短曝光時間圖像)進行定位，從而能夠進行合成處理。圖25B圖解說明利用成像裝置112和704生成的圖像，生成全景圖像的例子。另夕卜，圖25C圖解說明利用成像裝置110和703生成的圖像，生成全景圖像的例子。注意就圖25B和25C中的例子來說，可以生成其中僅僅關(guān)于全景圖像的一部分，擴展動態(tài)范圍的圖像。這種情況下，可按照被攝物體選擇任意一種成像操作。具有能夠沿除水平方向外的方向轉(zhuǎn)動的輔助照相機的成像設(shè)備的例子到目前為止，說明了利用可沿水平方向轉(zhuǎn)動的輔助照相機，生成全景圖像的例子?，F(xiàn)在，在生成其垂直方向為縱向方向的全景圖像的情況下，可以預期利用可沿垂直方向轉(zhuǎn)動的輔助照相機生成全景圖像。因而，在這種例子中，圖解說明具有能夠沿除水平方向外的方向轉(zhuǎn)動的輔助照相機的成像設(shè)備的例子。
圖26A和26B是表示按照本技術(shù)的第四實施例的成像設(shè)備790的外觀的外部結(jié)構(gòu)圖。圖26A是圖解說明成像設(shè)備790的正面的外觀的透視圖。另外，圖26B是圖解說明成像設(shè)備790的上面(即，設(shè)置快門按鈕191和撥盤192的表面)的上視圖。注意成像設(shè)備790是圖19A和19B中所示的成像設(shè)備700的局部變形例。因而，在圖26A和26B中，和成像設(shè)備700相同的部分用相同的附圖標記表示，其說明的一部分將被省略。成像設(shè)備790具有右側(cè)鏡頭單元791和左側(cè)鏡頭單元792。右側(cè)鏡頭單元791和左側(cè)鏡頭單元792由集中來自被攝物體的光的多個透鏡(變焦透鏡、聚焦透鏡等)構(gòu)成，可沿各個方向(例如，就圖26A和26B中的例子來說，水平方向和垂直方向)轉(zhuǎn)動。例如，我們假定右側(cè)鏡頭單元791可沿水平方向的箭頭793的方向轉(zhuǎn)動，并可沿垂直方向的箭頭794的方向轉(zhuǎn)動。另外，我們假定左側(cè)鏡頭單元792可沿水平方向的箭頭795的方向轉(zhuǎn)動，并可沿垂直方向的箭頭796的方向轉(zhuǎn)動。注意在控制單元713的控制下，利用驅(qū)動單元(未示出)，可按照圖像大小自動移動右側(cè)鏡頭單元791和左側(cè)透鏡單元792。從而，本技術(shù)的第四實施例可適用于具有可沿除水平方向以外的方向轉(zhuǎn)動的輔助照相機的成像設(shè)備。5.變形例就第一到第四實施例來說，舉例說明了其中顯示指示全景圖像成像范圍的操作支持圖像的例子。本變形例圖解說明操作支持圖像的另一個顯示例子。注意本變形例是圖I中所示的成像設(shè)備100的局部變形。因而，就本變形例來說，與成像設(shè)備100相同的部分用相同的附圖標記表示，其說明的一部分將被省略。另外，就本變形例來說，將從圖示中省略顯示在操作支持圖像中的消息顯示區(qū)。改變?nèi)皥D像成像范圍外的顏色的例子圖27A和27B是圖解說明顯示在按照本技術(shù)的實施例的變形例的成像設(shè)備100上的操作幫助屏幕的顯示例子的示圖。圖27A圖解說明在對相當于全景圖像的中心位置(擺動方向的中心位置)的被攝物體成像的情況下顯示的操作幫助屏幕800的顯示例子。注意操作幫助屏幕800大體與圖7B中圖解說明的操作幫助屏幕320和圖18B中圖解說明的操作幫助屏幕610相同，從而這里將省略其說明。圖27B表示在相當于在全景圖像中的開始位置附近的被攝物體將被成像的情況下顯示的操作幫助屏幕805的顯示例子。就圖27B中的例子來說，圖解說明使成像設(shè)備100擺動通過全景圖像中的開始位置的情況。這種情況下，朝著屏幕的中間顯示指示在全景圖像的左端的成像范圍的操作支持圖像807。另外，就圖27B中的顯示例子來說，在全景圖像成像范圍之外的顏色被改變。例如，可以使在全景圖像成像范圍之外的區(qū)域809為灰色。從而，通過以不同的形式顯示，用戶能夠被告知在全景圖像成像范圍之外的區(qū)域809是可能不包含在全景圖像中的區(qū)域。全景圖像成像范圍的顯示角度的例子圖28A和28B是圖解說明顯示在按照本技術(shù)的實施例的變形例的成像設(shè)備100上的操作幫助屏幕的顯示例子的示圖。圖28A和28B圖解說明與全景圖像成像范圍對應的顯示角度的例子。圖28A和28B圖解說明與顯示對應于全景圖像成像范圍的角度的操作幫助屏幕·810和815的顯示例子。操作幫助屏幕810和圖27A中的操作幫助屏幕800的不同之處在于顯示了對應于全景圖像成像范圍的角度，不過關(guān)于其它各點，大體與操作幫助屏幕800相同。另外，操作幫助屏幕815和圖27B中的操作幫助屏幕805的不同之處在于顯示了對應于全景圖像成像范圍的角度，不過關(guān)于其它各點，大體與操作幫助屏幕805相同。與操作幫助屏幕800和805相同的各個部分將用相同的附圖標記表述。例如，沿著在下部的操作支持圖像802和808，顯示對應于全景圖像成像范圍的角度。這些角度是在全景圖像的中心位置為0°情況下的角度。從而，依據(jù)顯示的對應于全景圖像成像范圍的角度，用戶能夠容易地把握準確的成像范圍。顯示表示全景圖像成像范圍的中心的操作支持圖像的例子圖29A和29B是圖解說明顯示在按照本技術(shù)的實施例的變形例的成像設(shè)備100上的操作幫助屏幕的顯示例子的示圖。圖29A和29B表示顯示操作支持圖像的例子，所述操作支持圖像指示全景圖像成像范圍的中心(與擺動方向正交的方向的中心)。圖29A和29B圖解說明指示全景圖像成像范圍的中心的操作幫助屏幕820和825的顯示例子。操作幫助屏幕820和圖28A中的操作幫助屏幕810的不同之處在于顯示了操作支持圖像821，不過關(guān)于其它各點，大體與操作幫助屏幕810相同。另外，操作幫助屏幕825和圖28B中的操作幫助屏幕815的不同之處在于顯示了操作支持圖像826，不過關(guān)于其它各點，大體與操作幫助屏幕815相同。因而，與操作幫助屏幕810和815相同的部分將用相同的附圖標記表述。例如，在擺動方向是水平方向的情況下，顯示指示垂直方向的全景圖像成像范圍的中心的操作支持圖像821和826。通過這樣顯示操作支持圖像821和826，用戶能夠容易地把握全景圖像的擺動方向，和在垂直方向的全景圖像成像范圍的中心。顯示指示從全景圖像中的基準位置起的預定范圍的操作支持圖像的例子圖30A和30B是圖解說明顯示在按照本技術(shù)的實施例的變形例的成像設(shè)備100上的操作幫助屏幕的顯示例子的示圖。圖30A和30B表示顯示指示從全景圖像中的基準位置起的預定范圍的操作支持圖像的例子。例如，所述基準位置可以是全景圖像的中心位置，或者全景圖像的端部位置。圖30A和30B圖解說明其中顯示指示從全景圖像中的基準位置起的預定范圍的操作支持圖像的操作幫助屏幕830和835的顯示例子。操作幫助屏幕830和圖29A中的操作幫助屏幕820的不同之處在于顯示了操作支持圖像831，不過關(guān)于其它各點，大體與操作幫助屏幕820相同。另外，操作幫助屏幕835和圖29B中的操作幫助屏幕825的不同之處在于顯示了操作支持圖像836，不過關(guān)于其它各點，大體與操作幫助屏幕825相同。因而，與操作幫助屏幕820和825相同的部分將用相同的附圖標記表述。例如，如圖30A中所示，顯示指示從全景圖像中的中心位置(擺動方向的中心位置)起的預定范圍(例如，±10° )的操作支持圖像831。另外，例如，如圖30B中所示，顯示指示從全景圖像中的左端位置(擺動方向的左端位置)起的預定范圍(例如，±10° )的操作支持圖像836。從而，通過顯示操作支持圖像831和836，用戶能夠容易地把握這是距全景圖像的基準位置的預定范圍。在擺動方向是垂直方向的情況下的操作支持圖像的顯示例子到目前為止，關(guān)于其中擺動方向是水平方向的情況，舉例說明了操作支持圖像的顯示例子。不過如上所述，本技術(shù)的實施例也可以適用于其中擺動方向是垂直方向的情況。 因而，圖31圖解說明在擺動方向是垂直方向的情況下的操作支持圖像的顯示例子。圖31是圖解說明顯示在按照本技術(shù)的實施例的變形例的成像設(shè)備100上的操作幫助屏幕的顯示例子的示圖。注意，圖31中所示的操作幫助屏幕840是在擺動方向是垂直方向的情況下，變成操作幫助屏幕，并且除此之外，大體和操作幫助屏幕830相同的圖30A中所示的操作幫助屏幕830。S卩，操作支持圖像841-845對應于圖30A中所示的操作支持圖像801-803，821和831。從而，通過顯示各種操作支持圖像，能夠容易地進行全景圖像成像操作，并且能夠容易地生成用戶中意的全景圖像。另外，利用用戶操作，可以改變這些操作支持圖像。因而，用戶能夠利用用戶中意的操作支持圖像，進行全景圖像成像操作。利用從全景圖像成像操作的終止位置到開始位置的亮度信息，進行曝光控制的例子圖32A和32B是圖解說明用按照本技術(shù)的實施例的變形例的成像設(shè)備860生成的全景圖像的成像范圍和成像操作之間的關(guān)系的示圖。圖32A表示在以日落場景作為被攝物體的情況下，利用成像設(shè)備860生成全景圖像的情況下的全景圖像成像范圍850。一般來說，全景圖像的成像范圍是較寬的范圍，從而較亮的部分和較暗的部分會共存于全景圖像內(nèi)。例如，如圖32A中圖解所示，在以日落場景作為被攝物體拍攝全景圖像的情況下，較亮的部分(明亮區(qū)域851)和較暗的部分(陰暗區(qū)域852)通常共存于全景圖像成像范圍850中。在這種情況下，預期用戶861能夠在全景圖像成像范圍850中，找到亮度剛剛好的部分，并利用手動操作進行曝光調(diào)整。不過，也可預期難以在全景圖像成像范圍850中，找到亮度剛剛好的部分。圖32B圖解說明在利用成像設(shè)備860生成全景圖像的情況下的全景圖像成像操作?，F(xiàn)在，就本技術(shù)的第一和第二實施例來說，說明了其中把成像設(shè)備從全景圖像成像操作的終止位置移動到開始位置，隨后把成像設(shè)備從開始位置移動到終止位置的例子。即，成像設(shè)備860在開始位置和終止位置之間進行一次往復移動，如圖32B中的擺動方向863和864所示。在這種情況下，借助從終止位置到開始位置的擺動操作(擺動方向863)，成像設(shè)備860能夠收集全景圖像成像范圍850中的各種信息。因而，就這種變形例來說，將舉例說明其中在成像設(shè)備860從全景圖像成像操作的終止位置到開始位置的擺動期間，收集全景圖像成像范圍850的亮度信息，并且獲得的亮度信息被用于自動設(shè)定全景圖像的曝光的例子。例如，在亮度設(shè)定屏幕中預先設(shè)定用戶中意的亮度。例如，在全景圖像成像范圍中包含天空的情況下，通過在有點明亮的部分固定曝光量，通?？梢允谷皥D像看起來相當漂亮。因而，在全景圖像成像范圍中包含天空的情況下，可以作出在有點明亮的部分，固定曝光量的設(shè)定。當在按照這種方式設(shè)定了曝光條件的情況下，進行全景圖像成像操作時，成像設(shè)備860根據(jù)曝光條件，自動設(shè)定曝光量。另外，我們假定成像設(shè)備860是能夠設(shè)定多種成像模式(例如，風景模式、日落模式、夜景模式、雪景模式、海灘模式、水下模式)的成像設(shè)備。這種情況下，根據(jù)設(shè)定的成像模式，利用從全景圖像成像范圍850獲得的亮度信息，能夠自動設(shè)定全景圖像的曝光。這種設(shè)定使得可以容易地生成用戶中意的全景圖像。
當直線移動時的全景圖像成像操作的例子就本技術(shù)的第一到第四實施例來說，舉例說明了其中通過以成像設(shè)備的位置作為基準，用戶進行成像設(shè)備的擺動操作，進行全景圖像成像操作的例子。不過，可以預料通過沿著大體平行于被攝物體的直線，移動成像設(shè)備100，進行全景圖像成像操作的情況。因而，下面說明通過沿著大體平行于被攝物體的直線，移動成像設(shè)備，進行全景圖像成像操作的例子。圖33A和33B是示意地圖解說明在利用按照本技術(shù)的實施例的變形例的成像設(shè)備870，生成全景圖像時進行的成像操作的示圖。圖33A示意地圖解說明從上方觀察的通過以成像設(shè)備870的位置(用戶871的位置)作為旋轉(zhuǎn)中心，沿著水平方向(擺動方向873)旋轉(zhuǎn)成像設(shè)備870，生成全景圖像的成像操作的狀態(tài)。另外，在圖33A中，利用粗線把用所述成像操作生成的全景圖像的全景成像范圍示意地圖示成全景圖像成像范圍872。注意圖33A中所示的例子與在第一到第四實施例中所示的例子相同，因而，這里將省略其說明。圖33B示意地圖解說明從上方觀察的通過沿著大體平行于被攝物體的直線883，移動成像設(shè)備870，生成全景圖像的成像操作。例如，圖33B中所示的成像操作是在成像設(shè)備870的光軸方向垂直于其移動方向881的情況下，利用能夠勻速移動的諸如車輛之類的移動裝置進行的全景圖像成像操作。例如，雙手拿著成像設(shè)備870的用戶871所乘坐的車輛沿著移動方向881勻速或變速移動。另外，在圖33B中，利用粗線把用所述成像操作生成的全景圖像的全景圖像成像范圍示意地圖示成全景圖像成像范圍882。這樣，就圖33B中所示的例子來說，沿著直線883順序改變成像設(shè)備870的位置，從而代替旋轉(zhuǎn)角度，沿著直線行進的距離被用作成像設(shè)備870的姿勢的變化。另外，直線上的位置被用于全景圖像成像操作的開始位置和終止位置。注意，雖然利用本技術(shù)的實施例，說明了具有成像單元的成像設(shè)備的例子，不過，本技術(shù)的實施例可適用于其成像單元可拆卸的成像設(shè)備。另外，雖然利用本技術(shù)的實施例，說明了通過合成靜止圖像，生成全景圖像的例子，不過，本技術(shù)的實施例可適用于利用運動圖像成像操作生成的運動圖像，生成全景圖像的情況。另外，本技術(shù)的實施例也可適用于生成多視點全景圖像的情況。
另外，本技術(shù)的實施例可適用于諸如具有成像功能的蜂窩電話機，具有成像功能的個人數(shù)字終端之類的圖像處理設(shè)備。注意，上述例子是實現(xiàn)本技術(shù)的例子，在實施例中公開的具體元件和權(quán)利要求中的特征之間存在對應性。類似地，權(quán)利要求中的特征和在實施例中公開的具有相同名稱的具體元件之間存在對應性。不過注意本技術(shù)并不局限于這些實施例，通過對實施例進行各種修改，可實現(xiàn)本技術(shù)，而不脫離其本質(zhì)。另外，在上面的實施 例中說明的處理步驟可被看作具有所述一系列步驟的方法，也可被理解成使計算機執(zhí)行所述一系列步驟的程序，和保存所述程序的記錄介質(zhì)。這種記錄介質(zhì)的例子包括CD (光盤)，MD (小型光盤)，DVD (數(shù)字通用光盤)，存儲卡和藍光光盤(注冊商標)等等。另外，本技術(shù)可具有以下結(jié)構(gòu)。(I) 一種設(shè)備，包括基準位置接收單元，所述基準位置接收單元被配置成接收用戶輸入的中間或終止全景基準位置信息；和控制單元，所述控制單元被配置成在基準位置接收單元接收中間或終止全景基準位置信息之后，根據(jù)用戶輸入的中間或終止全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。(2)按照(I)所述的設(shè)備，其中中間全景基準位置信息包括全景圖像的中心位置。(3)按照⑴或⑵所述的設(shè)備，還包括成像裝置，所述成像裝置被配置成生成多個圖像。(4)按照(I)所述的設(shè)備，其中終止全景基準位置信息包括基準圖像，當當前圖像匹配基準圖像時，控制單元控制成像裝置終止生成所述多個圖像。(5)按照(1)-(4)所述的設(shè)備，還包括姿勢檢測單元，所述姿勢檢測單元被配置成檢測設(shè)備的當前定向。(6)按照(5)所述的設(shè)備，其中終止全景基準位置信息包括終止全景基準位置定向，當當前定向匹配終止全景基準位置定向時，控制單元終止生成所述多個圖像。(7)按照(5)所述的設(shè)備，其中控制單元從用戶接收圖像寬度，根據(jù)圖像寬度和終止全景基準位置信息，確定起點定向。(8)按照(5)所述的設(shè)備，其中中間全景基準位置信息包括中間全景基準位置定向，控制單元從用戶接收圖像寬度，根據(jù)圖像寬度和中間全景基準位置信息，確定起點定向和終點定向。(9)按照(I)-⑶所述的設(shè)備，其中控制單元從用戶接收圖像寬度，根據(jù)圖像寬度和中間全景基準位置信息，確定起點和終點。(10)按照(3)所述的設(shè)備，其中成像裝置包括主成像裝置和副成像裝置。(11)按照(10)所述的設(shè)備，其中副成像裝置成像終止全景基準圖像，當當前圖像匹配終止全景基準圖像時，控制裝置終止生成所述多個圖像。(12)按照(10)所述的設(shè)備，其中副成像裝置成像開始全景基準圖像，當當前圖像匹配開始全景基準圖像時，控制裝置開始生成所述多個圖像。(13)按照(12)所述的設(shè)備，其中副成像裝置成像終止全景基準圖像，當當前圖像匹配終止全景基準圖像時，控制裝置終止生成所述多個圖像。(14)按照(10)所述的設(shè)備，其中主成像裝置成像用于全景圖像的所有多個圖像。(15)按照(1)-(14)所述的設(shè)備，其中所述設(shè)備是移動電話機，所述移動電話機把多個圖像傳給服務器，和從服務器接收全景圖像。(16)按照(1)-(15)所述的設(shè)備，其中控制單元被配置成在基準位置接收單元收到多個基準點的全景基準位置信息之后，根據(jù)用戶輸入的多個基準點的全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。(17)按照(16)所述的設(shè)備，其中控制單元接收至少包括起點和中心點的多個基 準點的全景基準位置信息。(18)按照(1)-(17)所述的設(shè)備，其中控制單元被配置成在基準位置接收單元收到終止全景基準位置圖像之后，根據(jù)用戶輸入的終止全景基準位置圖像，控制成像裝置開始生成將用于生成全景圖像的多個圖像，和當當前圖像匹配終止全景基準位置圖像時，控制成像裝置終止生成所述多個圖像。(19) 一種方法，包括接收用戶輸入的中間或終止全景基準位置信息；和在基準位置接收單元接收中間或終止全景基準位置信息之后，根據(jù)用戶輸入的中間或終止全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。(20) 一種具有程序的非臨時性計算機可讀介質(zhì)，當被加載到處理器上時，所述程序使處理器執(zhí)行包括以下步驟的方法接收用戶輸入的中間或終止全景基準位置信息；和在基準位置接收單元接收中間或終止全景基準位置信息之后，根據(jù)用戶輸入的中間或終止全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。
權(quán)利要求
1.一種設(shè)備，包括 基準位置接收單元，所述基準位置接收單元被配置成接收用戶輸入的中間或終止全景基準位置信息；和 控制單元，所述控制單元被配置成在所述基準位置接收單元接收中間或終止全景基準位置信息之后，根據(jù)用戶輸入的中間或終止全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。
2.按照權(quán)利要求I所述的設(shè)備，其中中間全景基準位置信息包括全景圖像的中心位置。
3.按照權(quán)利要求I所述的設(shè)備，還包括 成像裝置，所述成像裝置被配置成生成多個圖像。
4.按照權(quán)利要求I所述的設(shè)備，其中終止全景基準位置信息包括基準位置圖像，并且在當前圖像匹配基準位置圖像時，控制單元控制成像裝置終止生成所述多個圖像。
5.按照權(quán)利要求I所述的設(shè)備，還包括 姿勢檢測單元，所述姿勢檢測單元被配置成檢測設(shè)備的當前取向。
6.按照權(quán)利要求5所述的設(shè)備，其中終止全景基準位置信息包括終止全景基準位置取向，并且在當前取向匹配終止全景基準位置取向時，控制單元終止生成所述多個圖像。
7.按照權(quán)利要求5所述的設(shè)備，其中控制單元從用戶接收圖像寬度，并且根據(jù)圖像寬度和終止全景基準位置信息，確定起點取向。
8.按照權(quán)利要求5所述的設(shè)備，其中中間全景基準位置信息包括中間全景基準位置取向，并且控制單元從用戶接收圖像寬度，根據(jù)圖像寬度和中間全景基準位置取向，確定起點取向和終點取向。
9.按照權(quán)利要求I所述的設(shè)備，其中控制單元從用戶接收圖像寬度，并根據(jù)圖像寬度和中間全景基準位置信息，確定起點和終點。
10.按照權(quán)利要求3所述的設(shè)備，其中成像裝置包括主成像裝置和副成像裝置。
11.按照權(quán)利要求10所述的設(shè)備，其中副成像裝置成像終止全景基準位置圖像，并且在當前圖像匹配終止全景基準位置圖像時，控制裝置終止生成所述多個圖像。
12.按照權(quán)利要求10所述的設(shè)備，其中副成像裝置成像開始全景基準位置圖像，并且在當前圖像匹配開始全景基準位置圖像時，控制裝置開始生成所述多個圖像。
13.按照權(quán)利要求12所述的設(shè)備，其中副成像裝置成像終止全景基準位置圖像，并且在當前圖像匹配終止全景基準位置圖像時，控制裝置終止生成所述多個圖像。
14.按照權(quán)利要求10所述的設(shè)備，其中主成像裝置成像用于全景圖像的所有多個圖像。
15.按照權(quán)利要求I所述的設(shè)備，其中所述設(shè)備是移動電話機，所述移動電話機把多個圖像傳給服務器，并從服務器接收全景圖像。
16.按照權(quán)利要求I所述的設(shè)備，其中控制單元被配置成在基準位置接收單元收到多個基準點的全景基準位置信息之后，根據(jù)用戶輸入的多個基準點的全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。
17.按照權(quán)利要求16所述的設(shè)備，其中控制單元接收至少包括起點和中心點的多個基準點的全景基準位置信息。
18.按照權(quán)利要求I所述的設(shè)備，其中控制單元被配置成在基準位置接收單元收到終止全景基準位置圖像之后，根據(jù)用戶輸入的終止全景基準位置圖像，控制成像裝置開始生成將用于生成全景圖像的多個圖像，并且在當前圖像匹配終止全景基準位置圖像時，控制成像裝置終止生成所述多個圖像。
19.按照權(quán)利要求7所述的設(shè)備，其中控制單元控制以與全景圖像的成像范圍之內(nèi)的區(qū)域的顏色不同的顏色顯示全景圖像的成像范圍之外的區(qū)域。
20.按照權(quán)利要求7所述的設(shè)備，其中控制單元控制顯示對應于全景圖像的成像范圍的角度。
21.—種方法,包括 接收用戶輸入的中間或終止全景基準位置信息；和 在基準位置接收單元接收中間或終止全景基準位置信息之后，根據(jù)用戶輸入的中間或終止全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。
22.—種用程序編碼的非臨時性計算機可讀介質(zhì)，當被加載到處理器上時，所述程序使處理器執(zhí)行包括以下步驟的方法 接收用戶輸入的中間或終止全景基準位置信息；和 在基準位置接收單元接收中間或終止全景基準位置信息之后，根據(jù)用戶輸入的中間或終止全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。
全文摘要
本發(fā)明涉及圖像處理設(shè)備，控制方法和計算機可讀介質(zhì)。設(shè)備的一個實施例包括基準位置接收單元，所述基準位置接收單元被配置成接收用戶輸入的中間或終止全景基準位置信息，和控制單元，所述控制單元被配置成在基準位置接收單元接收中間或終止全景基準位置信息之后，根據(jù)用戶輸入的中間或終止全景基準位置信息，控制成像裝置開始生成將用于生成全景圖像的多個圖像。
文檔編號G03B37/00GK102917167SQ201210261439
公開日2013年2月6日 申請日期2012年7月26日 優(yōu)先權(quán)日2011年8月2日
發(fā)明者仙頭一也 申請人:索尼公司