陣列相機、移動終端、及其操作方法
【專利摘要】公開一種陣列相機、移動終端、及其操作方法。用于操作包括多個相機模塊的陣列相機的方法包括：將不同于其它的相機模塊的相機環(huán)境設置應用于多個相機模塊中的至少一個；通過多個相機模塊獲取圖像；以及組合所獲取的圖像。
【專利說明】陣列相機、移動終端、及其操作方法
[0001]相關申請的交叉引用
[0002]本申請要求在韓國知識產權局于2012年11月15日提交的韓國專利申請N0.10-2012-0129626的優(yōu)先權，其全部內容通過引用合并在此。
【技術領域】
[0003]本發(fā)明涉及一種陣列相機、移動終端、及其操作方法，并且更加具體地，涉及一種陣列相機、用于操作陣列相機的方法、具有陣列相機的移動終端、以及用于操作移動終端的方法。
【背景技術】
[0004]通過捕獲對象獲取特定圖像，即，視頻和圖像的相機已經被型化。因此，諸如移動終端、個人數字助理(PDA)、膝上型計算機、圖像顯示裝置等等的越來越多的數字裝置被裝備有相機。
[0005]隨著朝著小尺寸和細長的趨勢，對獲取和恢復高質量圖像的方法已經進行深入研究。
[0006]移動終端是一種便攜式裝置，該便攜式終端能夠執(zhí)行語音呼叫和視頻呼叫功能、信息輸入/輸出功能、以及數據存儲功能中的一個或者多個，同時被用戶攜帶。隨著其功能的多樣化，移動終端已經被演化為具有諸如拍攝照片、視頻記錄、音樂或者視頻的回放、游戲、廣播接收、以及無線因特網的復雜功能的綜合多媒體播放器。
[0007]為了在被發(fā)展為多媒體播放器的這樣移動終端中實現復雜的功能，已經在硬件或者軟件方面進行新的嘗試。例如，用戶界面(UI)環(huán)境被創(chuàng)建為呈現用戶友好的功能搜索或者功能選擇。
[0008]此外，在使用移動終端捕獲的圖片或者視頻的有效管理和利用上正在進行研究。
【發(fā)明內容】

[0009]因此，鑒于上述問題已經提出本發(fā)明，并且本發(fā)明的目的是為了提供一種能夠被小型化并且獲取高質量圖像的陣列相機，和用于操作陣列相機的方法。
[0010]本發(fā)明的另一目的是為了提供一種被裝備有陣列相機的移動終端和用于操作移動終端的方法，其能夠增加用戶便利。
[0011]根據本發(fā)明的一方面，通過提供一種操作陣列相機的方法能夠完成以上和其它的目的，該陣列相機包括多個相機模塊，該方法包括，將不同于其它的相機模塊的相機環(huán)境設置應用于多個相機模塊中的至少一個；通過多個相機模塊獲取圖像；以及組合所獲取的圖像。
[0012]根據本發(fā)明的另一方面，提供一種用于操作具有陣列相機的移動終端的方法，該陣列相機包括多個相機模塊，該方法包括將不同于其它的相機模塊的相機環(huán)境設置應用于多個相機模塊中的至少一個；通過多個相機模塊獲取圖像；以及組合所獲取的圖像。【專利附圖】

【附圖說明】
[0013]根據以下結合附圖的詳細的描述，將會更加清楚地理解本發(fā)明的以上和其它目的、特征以及其它優(yōu)點，其中:
[0014]圖1是涉及用于描述根據本發(fā)明的實施例的陣列相機和用于操作陣列相機的方法的視圖；
[0015]圖2圖示根據本發(fā)明的陣列相機的示例性的各種布局；
[0016]圖3是根據本發(fā)明的實施例的陣列相機的框圖；
[0017]圖4和圖5是涉及用于描述根據本發(fā)明的實施例的陣列相機和用于操作陣列相機的方法的視圖；
[0018]圖6是根據本發(fā)明的實施例的移動終端的框圖；
[0019]圖7是根據本發(fā)明的實施例的移動終端的前透視圖；
[0020]圖8是根據本發(fā)明的實施例的移動終端的后透視圖；
[0021]圖9是圖示根據本發(fā)明的實施例的用于操作陣列相機和具有陣列相機的移動終端的方法的流程圖；以及
[0022]圖10至圖25是涉及用于描述根據本發(fā)明的實施例的陣列相機、移動終端、以及用于操作陣列相機和移動終端的方法的視圖。
【具體實施方式】
[0023]下面將會參考附圖描述本發(fā)明的實施例。
[0024]被用于表示組件的術語“模塊”和“單元”在此被用于幫助組件的理解并且因此它們不應被認為是具有特定的意義或者作用。因此，術語“模塊”和“單元”可以被互換地使用。
[0025]圖1是涉及用于描述根據本發(fā)明的實施例的陣列相機和用于操作陣列相機的方法的視圖。
[0026]參考圖1，陣列相機可以包括多個相機模塊11至19。多個相機模塊11至19可以被排列成MxN矩陣(M和N是I或者大于I的整數)。
[0027]陣列相機可以通過使用可以獨立地控制的多個相機模塊11至19捕獲特定對象來獲得靜止圖像和視頻，即，圖像和視頻數據，并且可以獨立地捕獲圖像。
[0028]例如，當陣列相機捕獲特定對象20時，其可以通過同時捕獲相同對象20或者在預定的不同時間點利用多個相機模塊11至19捕獲多個圖像31至39。
[0029]另外，陣列相機可以通過使用各種圖像組合算法中的至少一個來組合所獲取的圖像31至39生成高質量合成圖像。
[0030]雖然通過示例，在圖1中示出的陣列相機包括以3x3矩陣排列的九個相機模塊，但是本發(fā)明不限于特定示例并且因此被包括在陣列相機中的相機模塊的數目和布局可以變化。
[0031]圖2圖示根據本發(fā)明的陣列相機的示例性的各種布局。具體地，在陣列相機包括四個相機模塊的情況下，可以以在圖2中圖示的布局排列相機模塊。
[0032]在圖2 Ca)中，四個相機模塊以2x2矩陣排列。在圖2 (b)中，四個相機模塊以2x2矩陣排列，相互分開了預定的距離。
[0033]四個相機模塊以圖2(c)中的1x4矩陣排列。雖然四個相機模塊以1x4矩陣排列，但是在圖2 (d)中它們被相互隔開了預定的距離。
[0034]不同于在圖2中圖示的相機模塊的布局，四個相機模塊可以以4x1矩陣排列。
[0035]圖3是根據本發(fā)明的實施例的陣列相機的框圖，以及圖4和圖5是涉及用于描述根據本發(fā)明的實施例的陣列相機和用于操作陣列相機的方法的視圖。
[0036]參考圖3，將會描述陣列相機的配置，集中于與圖像獲取和圖像處理有關的組件。陣列相機可以包括多個相機模塊121、顯示器151、存儲器160、以及控制器180。當需要時，陣列相機可以進一步包括其它的組件。例如，陣列相機可以進一步包括用于接收用戶輸入的用戶輸入單元(未示出)和用于在陣列相機和其它的電子裝置之間進行對接的接口(未示出)。
[0037]在實際實現中，當需要時，在陣列相機100中，兩個組件可以被合并到單個組件中或者一個組件可以被分離成兩個或者更多個組件。
[0038]在本發(fā)明中，相機模塊121是多個可獨立控制的相機模塊121a、121b、121c、......。
各種已知的相機模塊作為相機模塊 121a、121b、121c、……是可用的。
[0039]相機模塊121a、121b、121c、...中的每一個可以包括鏡頭單元122和相機傳感器123。
[0040]通過鏡頭單元122收集的光可以在相機傳感器123上形成對象的用戶捕獲的圖像。相機傳感器123可以用作將通過鏡頭單元122輸入的外部圖像轉換成圖像數據。例如，相機傳感器123可以是電荷耦合器件(CCD)傳感器、互補金屬氧化物半導體(CMOS)傳感器等等，本發(fā)明不限于此。
[0041]相機傳感器123可以在正常模式或者快速模式下操作。相機傳感器123可以在正常模式下以普通的方式捕獲視頻，同時其可以以快速或者超快速度捕獲視頻?；蛘呦鄼C傳感器123可以在其中能夠以每秒預定數目的幀拍攝照片的模式下操作。
[0042]鏡頭單元122可以包括多個鏡頭。
[0043]因為分辨率與鏡頭的直徑成比例地增加，所以具有較大的直徑的鏡頭提供較高的分辨率。然而，由此產生的焦距的增加使其難以呈現小的和細長的相機模塊。
[0044]相反地，在生產小、細長的相機模塊中具有小直徑的鏡頭是令人滿意的，但是使其難以獲得高分辨率、高質量圖像。
[0045]然而，包括多個相機模塊的本發(fā)明的陣列相機能夠通過組合利用多個相機模塊捕獲的多個圖像來獲取高質量圖像。因此，能夠使用相對小的鏡頭。因此，相機模塊能夠被制作得小和細長。
[0046]根據本發(fā)明的實施例，多個相機模塊121中的至少一個的鏡頭單元122可以包括在類型、放大率、以及尺寸上不同于其它的相機模塊121的那些的鏡頭。
[0047]控制器180對陣列相機100提供整體控制。控制器180可以從相機模塊121中的每一個接收圖像數據并且處理該圖像數據。
[0048]參考圖3，控制器180可以包括處理器181，處理器181用于控制控制器180的整體操作；視頻處理器182，視頻處理器182用于處理從多個相機模塊121接收到的數據；組合器183，組合器183用于組合多個圖像或者圖片；以及后處理器184，后處理器184用于處理圖像或者圖片以顯示或者存儲合成的圖像或者圖片。
[0049]視頻處理器182可以將從相機傳感器123接收到的模擬視頻數據轉換成數字視頻數據。
[0050]例如，相機傳感器123可以通過捕獲對象來獲取作為電模擬視頻數據的視頻幀。視頻幀中的每一個可以包括多個像素和關于各個像素的信息。視頻處理器182可以在模擬至數字視頻數據轉換期間處理每像素信息。
[0051]視頻處理器182或者后處理器184可以執(zhí)行增強視頻質量的視頻處理，包括顏色校正、顏色增強、伽馬校正等等。
[0052]組合器183可以在處理器181的控制下執(zhí)行諸如圖像解釋、圖像識別、圖像效果處理等等的主視頻處理。對于圖像識別，組合器183可以執(zhí)行對象提取、區(qū)域提取、面部識別、場景識別等等。另外，組合器183可以組合多個圖像。
[0053]組合器183可以駐留在處理器181中。
[0054]顯示器151可以顯示陣列相機100的操作狀態(tài)、操縱屏幕等等。
[0055]顯示器151可以從控制器180接收要被顯示的數據并且可以基于接收到的數據顯示最終圖像或者預覽圖像。
[0056]或者顯示器151可以根據設置顯示從多個相機模塊121當中的預設的基準相機模塊121a接收到的圖像作為預覽圖像。
[0057]控制器180可以控制作為能夠三維地捕獲對象的立體相機的相機模塊121中的至少兩個的使用。
[0058]控制器180可以通過處理利用多個相機模塊121獲取的多個圖像來創(chuàng)建深度圖。深度圖可以被用作用于有效圖像組合以及用于三維(3D)成像的基準數據。
[0059]根據本發(fā)明的實施例，控制器180可以通過已知的圖像分析技術從圖像數據識別對象?？刂破?80可以分析被包括在多個圖像中的對象的邊緣、尺寸、顏色、亮度、以及運動特性中的至少一個。這些參數可以對應于深度提示。
[0060]可以檢查諸如對象和背景的顏色、亮度、清潔度、以及尺寸的運動特性，和對象和背景中的圖像運動的存在。
[0061]也可以確定對象的時間順序。在二維(2D)至3D轉換期間的設置深度值中或者在組合圖像中可以使用被顯示在相同的屏幕上的不重疊的對象以及重疊的對象的時間順序。
[0062]深度提示是這樣的因素，通過該因素可以確定2D圖像固有的透視?？刂破?80可以基于深度提示生成深度圖。
[0063]例如，深度提示被劃分為包括紋理梯度(texture gradient)、線性透視、大氣透視、以及陰影的靜態(tài)提示和包括運動視差和動力深度效果的動態(tài)提示。
[0064]控制器180可以控制多個相機模塊121以自動地聚焦不同的對象。
[0065]控制器180可以從多個圖像提取對象。在圖示多個圖像的圖1的示例中，可以提取人41、高爾夫球桿42、高爾夫球43、以及背景44，如在圖4中所圖示?？刂破?80可以將被提取的對象組合成合成圖像，如在圖5中所示。
[0066]控制器180可以在組合對象中參考深度圖。
[0067]或者控制器180可以從多個圖像中選擇焦點，基于焦點生成深度圖，并且使用深度圖組合多個圖像。[0068]或者控制器180可以使用包括高動態(tài)范圍(HDR)拍攝的各種圖像組合技術。
[0069]在圖3中圖示的控制器180僅是示例性的?？刂破?80中的每個組件可以被單獨地配置在控制器180外部。也能夠將控制器180的組件實現為程序。
[0070]控制器180的兩個或者更多個組件可以被合并在單個組件中，或者控制器180的一個組件可以被分離成兩個或者更多個組件。另外，在圖3中沒有圖示的新的組件可以被添加到控制器180。
[0071]存儲器160可以存儲操作陣列相機所要求的程序和在陣列相機的操作期間獲得的數據。當需要時，陣列相機可以被設置有用于臨時緩沖數據的緩沖器。
[0072]圖6是根據本發(fā)明的實施例的移動終端的框圖。
[0073]如在此提出的移動終端可以是便攜式電話、智能電話、膝上型計算機、數字廣播終端、個人數字助理(PDA)、便攜式多媒體播放器(PMP)、相機、導航儀、平板計算機、電子書閱讀器等等中的任意一個。
[0074]參考圖6，下面將會描述移動通信終端的功能組件。
[0075]參考圖6，移動終端200可以包括無線通信模塊210、音頻/視頻(A/V)輸入單元220、用戶輸入單元230、傳感器單元240、輸出單元250、存儲器260、接口 270、控制器280、以及電源290。在可替代的實施例中移動終端200的兩個或者更多個組件可以被組合成單個組件或者其單個組件可以被分離成兩個或者更多個組件。例如，相機211，特別地陣列相機可以駐留在A/V輸入單元220中。或者陣列相機221可以被配置成與A/V輸入單元220分離。
[0076]無線通信模塊210可以包括廣播接收模塊211、移動通信模塊213、無線因特網模塊215、短程通信模塊217、以及全球定位系統(tǒng)(GPS)模塊219。
[0077]廣播接收模塊211從外部廣播管理服務器接收廣播信號或者關于廣播信道的廣播有關信息中的至少一個。廣播信道可以是衛(wèi)星信道、陸地信道等等中的任意一個。廣播管理服務器可以指的是用于生成和傳輸廣播信號或者廣播有關信息中的至少一個的服務器或者用于接收已經生成的廣播信號或者已經生成的廣播有關信息中的至少一個并且將接收到的廣播信號或者廣播有關信息中的至少一個提供給終端的服務器。
[0078]廣播信號可以是TV廣播信號、無線電廣播信號、數據廣播信號、或者TV廣播信號和數據廣播信號或者無線電廣播信號和數據廣播信號的組合。廣播有關信息可以是與廣播信道、廣播節(jié)目、或者廣播服務器提供商有關的信息?？梢酝ㄟ^移動通信網絡提供廣播有關信息。在這樣的情況下，移動通信模塊213可以接收廣播有關信息。廣播有關信息可以采用各種形式。
[0079]廣播接收模塊211可以通過廣播系統(tǒng)接收廣播信號，具體地，通過諸如陸地數字多媒體廣播(DMB-T)、衛(wèi)星數字多媒體廣播(DMB-S)、僅媒體前向鏈路(MediaFLO)、數字視頻廣播手持(DVB-H)、或者數字廣播-陸地綜合業(yè)務(ISDB-T)的數字廣播系統(tǒng)接收數字廣播信號。廣播接收模塊211可以被適合于提供廣播信號的所有其它的廣播信號以及數字廣播系統(tǒng)。在廣播接收模塊211處接收到的廣播信號和/或者廣播有關信息可以被存儲在存儲器260中。
[0080]移動通信模塊213通過移動通信網絡將無線電信號傳輸到基站(BS)、外部終端、或者服務器中的至少一個并且從基站(BS)、外部終端、或者服務器中的至少一個接收無線電信號。無線電信號可以包括在多媒體消息傳輸和接收中涉及的語音呼叫信號、視頻呼叫信號、或者文本/其它各種類型的數據。
[0081]無線因特網模塊215是用于將無線互聯網連接提供給移動終端200的內置或者外部模塊。無線因特網模塊215可以符合無線局域網(WLAN)(無線保真(WiFi))、無線寬帶(Wibro)、全球微波接入互操作性(WiMAX)、高速下行分組接入(HSDPA)等等操作。
[0082]短程通信模塊217被用于短程通信。對于短程通信，短程通信模塊217可以符合藍牙、射頻識別(RFID)、紅外數據協(xié)會(IrDA)、超寬帶(UWB)、紫蜂(ZigBee )、近場通信(NFC)
坐坐寸寸o
[0083]GPS模塊219從多個GPS衛(wèi)星接收位置信息。
[0084]A/V輸入單元220被用于接收音頻信號或者視頻信號并且可以包括相機221和麥克風223。相機221在視頻呼叫模式或者相機模式下處理從圖像傳感器捕獲的靜止圖像或者視頻的視頻幀。被處理的視頻幀可以被顯示在顯示器251上。
[0085]相機221可以是包括能夠獨立地控制并且能夠獨立地獲取圖像的多個相機模塊的陣列相機。
[0086]通過相機221處理的視頻幀可以被存儲在存儲器260中或者通過無線通信模塊210被外部地傳輸。取決于移動終端200的配置規(guī)格可以將兩個或者更多個相機221提供給移動終端200。例如，相機221可以被設置在移動終端200的前表面和后表面上。在這樣的情況下，前相機和后相機221中的至少一個可以是陣列相機。特別地，后相機優(yōu)選是陣列相機，以便于獲取聞質量圖像。
[0087]麥克風223在呼叫模式、記錄模式、或者語音識別模式下接收外部音頻信號并且將該音頻信號處理成電語音數據。在呼叫模式下，被處理的語音數據可以被轉換成可傳輸到BS并且通過移動通信模塊213輸出的格式。為了消除在外部音頻信號的輸入期間引入的噪聲對于麥克風223可用各種噪聲消除算法。
[0088]用戶輸入單元230生成用戶輸入的鍵輸入數據以控制移動終端200的操作。用戶輸入單元230可以包括鍵盤、薄膜開關、(電阻/電容)觸摸板等等，以通過用戶的按壓或者觸摸操縱來接收命令或者信息。用戶輸入單元230可以被配置成以滾輪或者包括鍵旋轉的推動(jog)方式、以操縱桿方式、或者以手指鼠標方式操作。特別當觸摸板與顯示器251形成層時，所得到的結構可以被稱為觸摸屏。
[0089]傳感器單元240感測諸如移動通信終端200的當前狀態(tài)，諸如移動通信終端200的打開或者閉合狀態(tài)、位置、或者用戶觸摸并且根據感測到的狀態(tài)生成控制移動終端200的操作的感測信號。例如，如果移動終端200是滑蓋電話，則傳感器單元240可以感測滑蓋電話是否被打開或者閉合。另外，傳感器單元240可以感測電源290是否供應電力或者接口 270是否與外部設備耦接。
[0090]傳感器單元240可以包括接近傳感器241、壓力傳感器243、以及運動傳感器245。在沒有機械接觸的情況下，接近傳感器241可以檢測接近移動終端200的對象或者移動終端200的附近的對象的存在或者不存在。接近傳感器241可以基于交替或者靜電磁場或者電容的變化率檢測附近的對象。另外，接近傳感器241可以感測用戶緊握的移動終端200的表面。取決于移動終端200的規(guī)格一個或者多個接近傳感器241可以被設置到移動終端200。[0091]壓力傳感器243可以確定壓力是否被施加到移動終端200以及壓力是多強。根據使用移動終端200的環(huán)境，壓力傳感器，243可以被安裝在需要壓力檢測的移動終端200的一部分處。
[0092]如果壓力傳感器243被安裝在顯示器251上，則根據從壓力傳感器243輸出的信號，可以識別在顯示器251上的觸摸輸入區(qū)別于顯示器251上的按壓觸摸輸入，對于按壓觸摸輸入施加了比對于觸摸輸入更強的壓力。另外，在按壓觸摸輸入的情況下，也可以從壓力傳感器243輸出的信號獲知被施加到顯不器251的壓力的量級。
[0093]如果壓力傳感器243被布置在移動終端200的邊緣處，那么壓力傳感器243可以通過檢測壓力感測用戶緊握的移動終端200的表面。
[0094]運動傳感器245使用加速度傳感器、陀螺儀傳感器等等感測移動終端200的位置或者運動。加速度傳感器是將方向中的加速度變化轉換成電信號的裝置。隨著微電機系統(tǒng)(MEMS)技術的發(fā)展，加速度傳感器已經變得普遍。
[0095]存在廣范圍的加速度傳感器，從測量用于感測車輛的安全氣囊的碰撞的大的加速度值的加速度傳感器到測量用于作為當玩游戲時能夠識別精細的手的運動的輸入設備而使用的非常小的加速度值的加速度傳感器。通常，取決于使用環(huán)境，2軸或者3軸加速度傳感器被封裝到一個封裝中或者使用單個z軸加速度傳感器。因此，當要使用不是Z軸加速度傳感器而是X軸或者Y軸加速度傳感器時,借助于基板片段substrate fragment)加速度傳感器可以被直立在主基板上。
[0096]陀螺儀傳感器測量角速度并且因此感測相對于基準方向的旋轉的方向。
[0097]傳感器單元240可以包括用于用戶認證的傳感器。例如，當基于用戶的生物信息認證用戶時，傳感器單元240可以包括用于識別體溫、指紋、虹膜、面部等等的傳感器。根據為移動終端200設置的認證方法，傳感器單元240可以包括必要的傳感器。
[0098]輸出單元250輸出音頻信號、視頻信號、或者報警信號。輸出單元250可以包括顯示器251、音頻輸出模塊253、報警發(fā)射器255、以及觸覺模塊257。
[0099]顯示器251顯示在移動終端200中處理的信息。例如，當移動終端200是處于呼叫模式中時，顯示器251顯示與呼叫有關的UI或者圖形用戶界面(GUI)。在視頻呼叫模式或者相機模式下，顯示器251可以單獨地或者同時顯示捕獲或者接收到的圖像并且也可以顯示UI或者⑶I。
[0100]如前面所描述的，如果通過將顯示器251與觸摸板形成層配置觸摸屏，則顯示器251不僅可以被用作輸出裝置而且可以被用作能夠通過用戶的觸摸接收信息的輸入裝置。
[0101]如果顯示器251被配置成觸摸屏，則其可以包括觸摸屏面板、觸摸屏面板控制器等等。在這樣的情況下，觸摸屏面板，其是被附接在觸摸屏的外部上的透明面板，可以被連接到移動終端200的內部總線。觸摸屏面板保持監(jiān)視是否被用戶觸摸。在檢測到觸摸輸入之后，觸摸屏面板將與觸摸輸入相對應的信號提供給觸摸屏面板控制器。觸摸屏面板控制器將接收到的信號處理成數據，并且將該數據傳輸到控制器280，使得控制器280可以確定觸摸輸入的存在或者不存在，并且可以定位觸摸屏上的觸摸點。
[0102]顯示器251可以被配置成電子紙(電子紙)。像紙和墨水一樣，電子紙是具有包括高分辨率、寬的視角、以及明亮的白色背景的極好的視覺特性的一種反射顯示器。電子紙可以被形成在諸如塑料、金屬、紙等等的材料的任何基板上。因為電子紙能夠在電源被切斷之后保持圖像并且不要求背光組件，所以其延長移動終端200的壽命。使用靜電充電的半球形扭轉球(electrostatic-charged hemispherical twist balls)、電泳沉積(electrophoretic deposition)、或者微囊體(microcapsules),顯不器 251 可以被配置成電子紙。
[0103]此外，顯示器251可以被配置成液晶顯示器(IXD)、薄膜晶體管-1XD、有機發(fā)光二極管(OLED)顯示器、柔性的顯示器、以及3D顯示器中的至少一個。取決于移動終端200的實現，移動終端200可以被設置有兩個或者更多個顯示器251。例如，外部和內部顯示器(未示出)都可以被安裝到移動終端200。
[0104]在呼叫終止模式、呼叫模式、記錄模式、語音識別模式、或者廣播接收模式中音頻輸出單元253輸出從無線通信模塊210接收到的或者被存儲在存儲器260中的音頻數據。音頻輸出模塊253也輸出在通過移動終端200執(zhí)行的功能中涉及的音頻信號，例如，與呼叫來電聲音、消息接收聲音等等有關的音頻信號。音頻輸出模塊253可以包括揚聲器、蜂鳴器
坐坐寸寸o
[0105]報警發(fā)射器255將通知事件的發(fā)生的信號輸出到移動終端200。移動終端200的事件包括呼叫信號接收、消息接收、鍵信號輸入等等。報警發(fā)射器255可以以除了音頻信號或者視頻信號的形式輸出事件通知信號。例如，可以以振動的形式輸出事件通知信號。在接收到呼叫信號或者消息之后，報警單元255可以輸出通知呼叫信號或者消息接收的信號。在接收到鍵信號之后，報警單元255可以輸出用于鍵信號輸入的反饋信號。因此，用戶根據從報警單元255輸出的信號意識到事件的發(fā)生。也可以通過移動終端200中的顯示器251或者音頻輸出模塊253輸出通知事件的發(fā)生的信號。
[0106]觸覺模塊257生成用戶能夠感覺的各種觸覺效果。觸覺效果的主要示例是振動。當觸覺模塊257生成振動作為觸覺效果時，可以改變振動的強度和模式。觸覺模塊257可以合成不同的振動效果并且輸出被合成的振動效果?？商娲鼗蛄硗獾?，觸覺模塊257可以順序地輸出不同的振動效果。
[0107]觸覺模塊257可以提供除了振動之外的各種觸覺效果，諸如使用垂直于接觸皮膚表面而移動的針陣列獲得觸覺效果、通過注入孔或者吸入孔注入或者吸入空氣獲得的觸覺效果、通過給予皮膚的表面刺激獲得的觸覺效果、通過接觸電極獲得的觸覺效果、使用電磁力獲得的觸覺效果、以及通過使用能夠吸收熱或者生成熱的裝置實現熱或者冷的感覺獲得的觸覺效果。觸覺模塊257可以被配置為使用戶使用手指或手臂的肌肉運動感覺能夠識別觸覺效果。移動終端200可以包括兩個或者更多個觸覺模塊257。
[0108]存儲器260可以存儲被要求用于在控制器280中處理和控制的程序或者臨時存儲輸入或者輸出數據(例如，電話簿、消息、靜止圖像、視頻等等)。
[0109]存儲器260可以包括閃存型存儲介質、硬盤型存儲介質、多媒體卡微型存儲介質、卡型存儲器(例如，安全數字(SD)或者極限數字(XD)存儲器)、隨機存取存儲器(RAM)或者只讀存儲器(ROM)中的至少一個。移動終端200可以操作網絡存儲，其在因特網上執(zhí)行存儲器260的存儲功能。
[0110]接口 270在移動終端200和被連接到移動終端200的所有外部設備之間對接。夕卜部設備可以包括有線/無線頭帶式耳機、外部充電器、有線/無線數據端口、存儲卡、諸如用戶認證模塊(SM)卡或者用戶識別模塊(UM)卡的卡式插槽、音頻輸入/輸出(1/0)端口、視頻I/O端口、耳機等等。接口 270可以從這樣的外部裝置接收數據或者電力并且將數據或者電力傳輸到移動終端200的每個組件。另外，接口 270可以將來自移動終端200的數據傳輸到外部裝置。
[0111]當移動終端200被連接到外部托架時，接口 270可以提供用于將來自于外部托架的電力供應到移動終端200或者將來自于外部托架的各種用戶輸入命令信號傳輸到移動終端200的路徑。
[0112]控制器280通常通過控制每個組件的操作向移動終端200提供整體控制。例如，控制器280控制和處理視頻呼叫、數據通信、視頻呼叫等等?？刂破?80可以包括用于播放多媒體的多媒體播放器281?？梢砸钥刂破?80內部的硬件或者與控制器280分離的軟件來配置多媒體播放器281。
[0113]電源290可以從外部電源或者內部電源接收電力并且將電力供應到移動終端200的其它的組件。
[0114]具有上述配置的移動終端200可以被配置成在能夠傳輸幀或者分組中的數據的通信系統(tǒng)中操作，該通信系統(tǒng)包括有線/無線通信系統(tǒng)或者衛(wèi)星通信系統(tǒng)。
[0115]如果相機221是移動終端200中的陣列相機，則移動終端200不需要多余地包括在圖3中圖示的陣列相機的所有組件。因此，顯然的是，陣列相機的組件能夠被替換為移動終端200的對應物。
[0116]例如，因為移動終端200包括顯示器251，則移動終端200不需要包括用于顯示陣列相機100的操作狀態(tài)、被操縱的屏幕、預覽圖像、以及最終圖像的附加的顯示器，除非明確需要附加的顯示器。
[0117]S卩，陣列相機的控制器180、顯示器151、以及存儲器160可以被替換為移動終端200的控制器280、顯示器251、以及存儲器260。具有本發(fā)明的陣列相機的移動終端200可以以參考圖1至圖5描述的方式進行操作。
[0118]圖7是根據本發(fā)明的實施例的移動終端的前透視圖，以及圖8是在圖7中圖示的移動終端的后透視圖。參考圖7和圖8，將會描述移動終端的外部，以它的外部組件為中心。雖然在具有前觸摸屏的直板式移動終端的背景下給出下面的描述，但是這僅是示例性的。因此要理解的是，本發(fā)明也可應用于包括折疊式、擺動式、以及滑蓋式的其它類型的移動終端。
[0119]參考圖7，前外殼200-1和后外殼200-2形成移動終端200的外殼。大量的電子部件被安裝在由前外殼200-1和后外殼200-2限定的空間中。
[0120]顯不器251、第一音頻輸出模塊253a、第一相機221a、以及第一、第二和第三用戶輸入單元230a、230b和230c可以被布置在移動終端200的主體中，特別地在前外殼200-1上。第四和第五用戶輸入單元230a和230e和麥克風223可以被布置在后外殼200-2的側
表面上。
[0121]如果觸摸板與顯示器251層疊，則顯示器251可以用作觸摸屏使得用戶能夠通過觸摸顯示器251將各種類型的信息鍵入到移動終端200。
[0122]第一音頻輸出模塊253a可以被實現為接收器或者揚聲器。第一相機221a可以被配置成適合于捕獲用戶的靜止圖像或者視頻。麥克風223可以被配置成適當地接收用戶的語音或者其它聲音。[0123]第一至第五用戶輸入單元230a至230e和后面描述的第六和第七用戶輸入單元230f和230g可以被統(tǒng)稱為用戶輸入單元230，并且能夠采用任何裝置作為第一至第七用戶輸入單元230a至230f?，只要其能夠以觸覺的方式進行操作。
[0124]例如，用戶輸入單元230可以被實現為能夠根據通過用戶的按壓或者觸摸操縱接收命令或者信息的薄膜開關或者觸摸板，或者可以被實現為輪子或者用于旋轉鍵的滾輪或者操作桿。在功能方面，第一、第二和第三用戶輸入單元230a、230b以及230c可以作為用于鍵入諸如開始、結束、或者滾動的命令的功能鍵進行操作，第四用戶輸入單元230d可以作為用于選擇用于移動終端200的操作模式的功能鍵進行操作，并且第五用戶輸入單元230e可以作為用于激活移動終端200內的特定功能的熱鍵進行操作。
[0125]參考圖8，第二相機221b可以被附加地提供在后外殼200-2的后表面上，并且第六和第七用戶輸入單元230f?和230g和接口 270可以被布置在后外殼200-2的一個側表面上。
[0126]第二相機221b可以具有與第一相機221a的拍攝方向大體上相對的拍攝方向，并且可以具有不同于第一相機221a的分辨率。閃光燈(未示出)和鏡子(未示出)可以被附加地布置在第二相機221b的附近。
[0127]為了捕獲3D圖像，第三相機可以進一步被安裝在第二相機221b的附近。
[0128]第一和第二相機221a和221b中的至少一個可以是具有多個相機模塊的陣列相機并且能夠捕獲3D圖像。特別地，第二相機221b可以是陣列相機。
[0129]當利用第二相機221b捕獲對象的圖像時，閃光燈可以照亮對象。當他或者她使用第二相機221b想要捕獲他或者她自己的圖像(進行自拍)時鏡子可以允許用戶看到他自己或者她自己。`
[0130]另一音頻輸出模塊(未不出)可以被附加地提供在后外殼200-2上。后外殼200-2上的音頻輸出模塊可以與前外殼200-1上的音頻輸出模塊253 —起實現立體聲功能。在免提電話模式下也可以使用后外殼200-2上的音頻輸出模塊。
[0131]接口 270可以被用作允許移動終端200與外部裝置交換數據的通道。除了被用于呼叫的天線之外，廣播信號接收天線(未示出)可以被布置在前或者后外殼200-1或者200-2的一側處。廣播信號接收天線可以被安裝使得其能夠從后外殼200-2伸出。
[0132]電源290可以被安裝在后外殼200-2以將電力供應到移動終端200。電源290例如可以是可充電電池，其能夠被可拆卸地安裝到后外殼200-2以被充電。
[0133]第二相機221b和其它的元件已經被描述為被設置在后外殼200-2中，本發(fā)明不限于此。
[0134]即使不提供第二相機221b，第一相機221a可以被配置成可旋轉，并且因此在第二相機221b的拍攝方向中捕獲圖像。
[0135]圖9是圖示根據本發(fā)明的實施例的用于操作陣列相機和具有陣列相機的移動終端的方法的流程圖，以及圖10至圖25是涉及用于描述根據本發(fā)明的實施例的陣列相機、移動終端、以及用于操作陣列相機和移動終端的方法的視圖。
[0136]參考圖9，在包括多個相機模塊121的陣列相機100或者具有陣列相機100的移動終端200中，不同的相機環(huán)境設置被應用于多個相機模塊121中的至少一個(S910)。
[0137]例如，當為相機模塊121中的至少一個設置高分辨率拍攝條件時，相機模塊121包括具有高分辨率設置的相機模塊和具有標準分辨率設置的相機模塊。因此以后相機模塊121可以獲取不同分辨率的圖像。
[0138]在另一示例中，如果對于相機模塊121中的至少一個設置高分辨率拍攝條件并且對于相機模塊121中的至少一個設置低分辨率拍攝條件，則具有高分辨率設置的相機模塊、具有低分辨率設置的相機、以及具有標準分辨率設置的相機共存于相機模塊121中。因此，以后相機模塊121可以獲取不同分辨率的圖像。
[0139]S卩，兩個或者更多個不同的設置可以應用于根據本發(fā)明的實施例的多個相機模塊121。
[0140]在相機環(huán)境設置應用步驟S910中，在從用戶接收設置輸入時或者在加載與用戶選擇的相機模式相對應的預設設置值時，控制器180或者280可以將設置應用于多個相機模塊121。
[0141]例如，控制器180或者280可以通過被顯示在顯示器151或者251上的設置菜單從用戶接收手動設置輸入或者為用戶提供應用了推薦的設置值的多個相機模塊。然后控制器180或者280可以將與用戶選擇的模式相對應的用戶輸入設置或者被加載的設置值應用于各個相機模塊。
[0142]或者在沒有從用戶接收設置輸入的情況下，控制器180或者280可以根據環(huán)境照明、當前時間、要被捕獲的圖像的類型(視頻或者靜止圖像)等等自動地應用被推薦的設置。
[0143]或者控制器180或者280可以重新使用最后的用戶輸入或者用戶選擇設置。
[0144]相機環(huán)境設置應用步驟S910其特征在于，控制器180或者280將不同的設置應用于相機模塊121中的每一個。例如，如果陣列相機100包括四個相機模塊，則不同的分辨率條件可以被應用于各自的四個相機模塊。或者其可以通過1、2、3、以及4秒鐘的各自的時間延遲設置四個相機模塊開始捕獲圖像。
[0145]隨后，控制器180或者280可以響應于用戶的拍攝命令通過對其已經應用兩個或者更多個設置的多個相機模塊121獲取圖像(S920)，并且可以組合所獲取的圖像(S930)。由于控制器180或者280在至少兩種不同的條件下組合捕獲的視頻或者圖像，其能夠生成高質量的最終數據。
[0146]在相機環(huán)境設置應用步驟S910中，控制器180或者280可以控制不同的分辨率和
中貞率設置的應用。
[0147]在這樣的情況下，控制器180或者280可以基于從在圖像組合步驟S930中對其已經應用低分辨率和高幀率拍攝條件的相機模塊獲取的圖像，控制具有高分辨率和高幀率的圖像的生成。
[0148]例如，多個相機模塊121中的至少一個可以在低分辨率、快拍條件下獲取圖像，并且多個相機模塊121中的至少一個可以在高分辨率、慢拍條件下獲取圖像。
[0149]在低分辨率、快拍條件下捕獲的圖像包含具有相對低的分辨率的許多幀，而在高分辨率、慢拍條件下捕獲的圖像包含相對少數目的幀，每個幀具有高分辨率。
[0150]因此，控制器180或者280可以基于通過諸如插值的算法在低分辨率條件下捕獲的圖像，來創(chuàng)建更多的圖像。
[0151]另外，參考關于所獲取的圖像的時序信息，控制器180或者280可以通過以各種方式將低分辨率圖像與高分辨率圖像組合或合成來生成高分辨率、高幀率圖像。例如，參考關于低分辨率圖像的時序信息，控制器180或者280可以在高分辨率圖像之間插入低分辨率圖像。
[0152]此外，為了生成附加的高分辨率圖像并且將它們插入到現有的高分辨率圖像中，控制器180或者280可以檢測與必要的時序時段相對應的低分辨率圖像中的圖像變化，并且在生成不能利用在高分辨率條件下捕獲的圖像來創(chuàng)建的對象或者區(qū)域中使用檢測到的圖像變化。
[0153]相反地，控制器180或者280可以將在低分辨率拍攝條件下捕獲的圖像的一些對象或者區(qū)域替換為在高分辨率拍攝條件下捕獲的圖像。
[0154]因為陣列相機100包括多個相機模塊121，所以其可以在更多不同的拍攝條件下捕獲圖像并且組合它們。
[0155]例如，如果陣列相機100包括九個相機模塊121，則其最多可以在九種不同的拍攝條件下捕獲相同的對象。在這樣的情況下，相機模塊121可以捕獲具有不同的幀率以及不同的分辨率的圖像，從而在不同的時序處產生圖像。
[0156]因此，能夠獲得關于相同的對象的在分辨率和時序中不同的多個采樣圖像并且通過各種已知的圖像組合技術能夠創(chuàng)建高質量的圖像。
[0157]例如，控制器180或者280可以通過組合關于在與高分辨率圖像的拍攝時序相鄰的時序捕獲的低分辨率圖像中的每一個的像素信息，在高分辨率拍攝條件下捕獲的圖像中不存在的時序時段生成高分辨率圖像評估。
[0158]基于運動的超分辨率算法是評估低分辨率圖像之間的運動、補償運動、并且然后組合低分辨率圖像的像素值，從而恢復高分辨率圖像的方法。圖像之間的運動的精確評估對于通過基于運動的超分辨率算法的高分辨率圖像的生成來說是重要的。因為運動評估利用更多的低分辨率圖像來變得更加精確，所以產生的圖像的質量取決于低分辨率圖像的數目。
[0159]關于這一點，本發(fā)明能夠進一步增加圖像質量，因為借助于對其應用不同的設置的多個相機模塊能夠獲取多個圖像，特別地，具有各種分辨率的圖像。
[0160]考慮到最終的圖像質量也受在其它的圖像組合技術中采樣圖像的數目的顯著影響，所以在增加合成圖像的質量中本發(fā)明是高效的。
[0161]根據本發(fā)明，能夠基于從具有低分辨率、快拍設置的相機模塊獲取的圖像和從具有高分辨率、慢拍設置的相機模塊獲取的圖像生成具有高分辨率和高幀率的圖像。
[0162]另外，本發(fā)明提供用于使用通過具有不同的分辨率和幀率的陣列相機捕獲的圖像來選擇和提高視頻質量的方法和設備。
[0163]為了防止在當在高分辨率和高幀率捕獲圖像時觀察的低照明下的噪聲和圖像質量的降低，基于像素裝倉(binning)通過低分辨率圖像的快拍，能夠提高低頻區(qū)域的圖像質量并且能夠確保具有高幀率的圖像，同時通過組合來自于高分辨率、慢拍圖像中的圖像可以恢復和生成高頻率區(qū)域。
[0164]因此，本發(fā)明能夠通過將不同的幀率應用于多個相機模塊來減輕在快速捕獲視頻中涉及的分辨率限制。
[0165]另外，借助于小尺寸的相機模塊或者低價格的相機模塊，相對于如在傳統(tǒng)技術中所實現的圖像質量，本發(fā)明能夠產生高質量視頻。[0166]本發(fā)明能夠獲取視頻，從該視頻消除在低照明處引起的各種噪聲分量，并且為此提高歸因于低亮度的被降級的圖像質量。
[0167]根據本發(fā)明，用戶能夠在各種相機模式下創(chuàng)建視頻，并且選擇性地存儲和再生視頻。用戶能夠選擇性地存儲和再生具有低分辨率、高幀率以及噪聲少的視頻，和具有高分辨率和低幀率的視頻。
[0168]在圖像組合步驟S930中，可以基于從已經應用低分辨率和高幀率的第一設置的相機模塊獲取的圖像和從已經應用高分辨率和低幀率的第二設置的相機模塊獲取的圖像來生成合成圖像，并且合成圖像可以與從已經應用比第二設置更高的分辨率和更低的幀率的第三設置的相機模塊獲取的圖像組合。
[0169]圖10 Ca)圖不從已經應用低分辨率和聞巾貞率的第一設置的相機模塊獲取的圖像1011至1018，圖10 (b)圖示從已經應用高分辨率和低幀率的第二設置的相機模塊獲取的圖像1021至1024，以及圖10 (c)圖示從已經應用比第二設置更高的分辨率和更低的幀率的第三設置的相機模塊獲取的圖像1031和1032。
[0170]為了在中間分辨率條件下獲取的圖像1021至1024中不存在的時序時段中生成圖像，控制器180或者280可以參考在低分辨率條件下獲取的圖像1011至1018。
[0171]控制器180或者280可以使用對應于與在中間分辨率條件下獲取兩個圖像1021和1022的相同的時序時段或者相似的時序時段的低分辨率圖像1011至1014生成具有與中間分辨率圖像相同或者相似的圖像質量的高幀率圖像。同樣地，使用與時序時段對應的低分辨率圖像1015至1018可以生成與在兩個圖像1022和1023之間的特定時序時段對應的圖像。
[0172]通過組合從將第一和第二設置的圖像與第三設置的圖像1031和1032組合產生的合成圖像可以生成高分辨率、高幀率圖像，如在圖11中所圖示。當需要時，可以基于所有的合成圖像和在不同的設置下，例如，在第一、第二以及第三設置下獲取的圖像，可以生成最終的合成圖像。
[0173]另外，可以使用從已經應用不同于第三設置的第四設置的相機模塊獲取的圖像來生成合成圖像。即，通過對在更多其它的拍攝條件下獲取的圖像重復上述操作可以生成高質量圖像。
[0174]在最高分辨率條件下捕獲的圖像被簡單地插入到最終合成圖像之間。因此，當要回放被組合的視頻時，可以將可用的高分辨率圖像的時序指示給用戶，使得用戶可以選擇圖像。
[0175]根據本發(fā)明的實施例，用戶可以借助于具有多個相機模塊121的陣列相機100在各種拍攝條件下同時捕獲視頻圖像。
[0176]用戶可以為每個相機模塊自由地設置幀率、分辨率等等或者可以加載與拍攝模式有關的預設值并且為各自的相機模塊設置被加載的值。
[0177]如果陣列相機100包括四個相機模塊，則使用同時捕獲的四個視頻，S卩，具有被減輕噪聲分量的高幀率圖像和具有高頻分量的低幀率圖像，可以獲取具有噪聲少的高分辨率、高幀率視頻。
[0178]根據本發(fā)明的實施例的用于操作陣列相機和移動終端的方法可以進一步包括基于通過多個相機模塊獲取的視頻圖像來生成深度圖。[0179]在根據本發(fā)明的實施例的陣列相機中，設置能夠被應用于各個單獨的相機模塊。另外，取決于陣列相機，不同的優(yōu)化設置能夠被應用于每個相機模塊，并且在拍攝期間移動終端處于風景模式或者肖像模式中。
[0180]傳感器單元240，特別地移動終端200中的運動傳感器245可以感測關于移動終端200的角度信息。例如，角度信息可以是相對于x、y以及z軸關于移動終端200的角度信息。
[0181]運動傳感器245的陀螺儀傳感器可以感測相對于x、y以及z軸的角速度信息，并且基于角速度信息計算相對于x、y以及z軸的角度信息。
[0182]可替代地或者另外地，陀螺儀傳感器可以感測相對于x、y以及Z軸的角速度信息，并且控制器280可以基于角速度信息計算相對于X、y以及Z軸的角度信息。
[0183]控制器280可以基于從傳感器單元240接收到的感測值確定風景模式或者肖像模式，并且可以根據所確定的模式基于相機模塊控制設置的應用。
[0184]特別地，如果指定基準相機以便于捕獲用于圖像組合的預覽圖像或者基準圖像，則控制器280可以取決于風景模式或者肖像模式來控制基準相機的重新指定。
[0185]例如，在包括以2x2矩陣排列的四個相機模塊的陣列相機的情況下，在位置(1，2)處的相機模塊可以被指定為在風景模式下的基準相機，并且在位置(1，I)處的相機模塊可以被指定為在肖像模式下的基準相機。
[0186]或者通過使用深度圖定位對象，離該對象最近的相機可以被指定為基準相機。
[0187]根據本發(fā)明的實施例，在陣列相機中多個相機模塊中的至少一個可以具有不同于其它的相機模塊的放大率或者類型的鏡頭。
[0188]S卩，可以從陣列相機中的具有不同的光學鏡頭的相機模塊獲取各種圖像。
[0189]例如，陣列相機100可以包括具有X0.5的放大率的鏡頭1210、具有XL 0的放大率的鏡頭1220、具有X2.0的放大率的鏡頭1230、以及具有X3.0的放大率的鏡頭1240，如在圖12中所圖示。
[0190]小尺寸的相機，諸如被包括在移動終端中的相機的缺點是由于有限的裝置尺寸造成光學縮放的困難。
[0191]然而，根據本發(fā)明的實施例的陣列相機和移動終端能夠通過同時使用具有不同的放大率的鏡頭來實現縮放功能。
[0192]借助于具有不同的放大率的鏡頭1210、1220、1230以及1240可以獲取并且存儲相同對象的各種圖像1310、1320、1330以及1340。
[0193]當用戶放大特定圖像時，在圖像質量方面，可以顯示優(yōu)于數字縮放的圖像的光學縮放的圖像。例如，如果用戶選擇放大特定圖像1320，則被放大的圖像1330可以被顯示。如果用戶選擇縮小特定圖像1320，則被縮小的圖像1310可以被顯示。
[0194]在圖像切換期間，在光學縮放之間可以介入數字縮放以在光學縮放之間呈現平滑切換。
[0195]多個相機模塊可以包括不同類型的鏡頭。例如，多個相機模塊可以包括具有廣角鏡頭的相機模塊和具有長焦鏡頭的相機模塊。
[0196]通過將個別的設置應用于本發(fā)明的陣列相機可以以定制的方式拍攝圖片。
[0197]用戶可以改變用于陣列相機100的相機模塊121的包括曝光、視角等等的個別的設置，并且因此可以通過已經應用不同設置的相機模塊121獲取的個別的幀的圖像配準(image registration)來獲取自然定制的圖片。
[0198]例如，在將設置應用于每個單獨的相機模塊之后，用戶可以進入特定拍攝模式。
[0199]參考圖15至圖18，當特定拍攝模式被設置時，至少顯示器151或者251的部分屏幕1510可以被劃分為四個柵格，S卩，左上、右上、左下、以及右下區(qū)域。指示拍攝模式的對象1520可以進一步被顯示在顯示器151或者251的特定區(qū)域中。
[0200]陣列相機100的相機模塊121自動地聚焦左上、右上、左下、以及右下，并且顯示器151或者251通過組合從相機模塊121獲取的幀來顯示預覽圖像1611至1614。預覽圖像1611至1614中的每一個對應于相機模塊121中的一個。
[0201]用戶可以放大或者縮小個別的柵格區(qū)域。圖17圖示通過使用與區(qū)域相對應的相機模塊121的縮放功能放大右上和右下區(qū)域來顯示被放大的預覽圖像1712和1714以及指示放大率的對象1721和1722的示例。
[0202]在拍攝的用戶選擇時，陣列相機100可以組合從相機模塊121獲取的圖像并且存儲合成圖像，如在圖18中所圖示。
[0203]根據本發(fā)明的實施例，陣列相機100可以包括不同類型的鏡頭。
[0204]例如，在陣列相機100中具有廣角鏡頭的相機模塊可以與具有長焦鏡頭的相機模塊交替地布置。
[0205]參考圖19，具有廣角鏡頭1910和長焦鏡頭1920的相機模塊可以以如在圖19 (a)中所圖示的1x4矩陣或者以在圖19 (b)中所示的2x2矩陣排列。
[0206]在這樣的情況下，用于操作根據本發(fā)明的實施例的陣列相機和移動終端的方法可以進一步包括，從具有廣角鏡頭的相機模塊獲取的圖像中生成深度圖并且從具有長焦鏡頭的相機模塊獲取的圖像中提取對象區(qū)域。
[0207]圖像組合步驟S930其特征可以在于，基于深度圖對背景進行透視并且插入所提取的對象區(qū)域。
[0208]例如，如果廣角鏡頭1910與長焦鏡頭1920被交替地布置，如在圖19 (a)中所示，則廣角鏡頭1910可以聚焦于除了對象之外的背景，而長焦鏡頭1920可以聚焦于前景中的對象。
[0209]圖20 Ca)圖示從廣角鏡頭1910獲取的示例性圖像，并且圖20 (b)圖示從長焦鏡頭1920獲取的示例性圖像。
[0210]控制器180或者280可以從廣角鏡頭1910獲取的圖像中提取深度圖并且從長焦鏡頭1920獲取的圖像中單獨地提取高分辨率對象區(qū)域。
[0211]由于廣角拍攝，廣角鏡頭1910在捕獲廣闊的、遙遠的風景時是有利的。然而，因為在對象和相機之間的短距離而不便于利用廣角鏡頭1910捕獲諸如人的對象。
[0212]盡管有精確拍攝人的能力，但是長焦鏡頭1920易于不聚焦，從而呈現除了對象之外的背景模糊。
[0213]控制器180或者280可以基于所提取的深度圖對背景進行透視并且組合背景與對象區(qū)域。
[0214]因此，可以獲取高分辨率3D圖像，如在圖21中所圖示。
[0215]在相機環(huán)境設置應用步驟S910中不同的曝光設置可以被應用于單獨的相機模塊或者單獨的相機模塊組。
[0216]或者可以使用閃光捕獲處于更大亮度級別的圖像。例如，可以通過使用或者不使用閃光或者通過變化曝光和閃光條件來設置不同的拍攝條件。除了曝光設置之外，借助于閃光可以獲得處于更大亮度級別的圖像。
[0217]圖22圖示其中通過至少兩個單獨的相機模塊在不同的曝光條件下，同時接通或者關閉閃光燈，拍攝圖片的示例。
[0218]根據本發(fā)明的實施例，可以獲取具有各種亮度值的圖像，如在圖22中所圖示，并且可以通過組合具有各種亮度級別的圖像來創(chuàng)建高動態(tài)范圍(HDR)圖像，如在圖23中所圖
/Jn o
[0219]可以通過在各種曝光條件下拍攝圖片、適當地提取被曝光的圖片、以及組合它們來生成HDR圖片。
[0220]根據本發(fā)明的實施例，可以使用多個相機拍攝不同亮度值的圖片，并且從而通過組合它們可以更加快速地獲得HDR圖片。
[0221]根據本發(fā)明的實施例，因為可以存儲在圖22中圖示的具有各種亮度值的圖像和在圖23中圖示的合成的HDR圖片用于管理，所以可以給用戶提供各種W。
[0222]例如，當用戶選擇n上的圖像的特定區(qū)域并且應用諸如順時針旋轉、逆時針旋轉、或者左、右、上或者下觸摸的指示方向的觸摸輸入時，控制器180或者280可以使特定區(qū)域變亮或者變暗?？刂破?80或者280可以識別與所選擇的區(qū)域相同的區(qū)域并且將被識別的區(qū)域的亮度變成與所選擇的區(qū)域的相同的級別?？刂破?80或者280可以基于在陣列相機100的相機模塊之間的焦距差、步長等等識別區(qū)域。
[0223]圖24圖示其中當用戶在圖像中的人周圍繪制順時針方向的圓圈時控制器180或者280識別人并且使人變亮的示例，并且圖25圖示其中當用戶在圖像中的天空上繪制逆時針方向的圓圈時控制器180或者280識別天空或者使天空變暗的示例。
[0224]根據上面的描述顯然的是，本發(fā)明能夠以各種方式將設置應用于陣列相機的各個模塊。
[0225]本發(fā)明能夠使相機小型化并且能夠獲取高質量圖像。此外，因為從多個相機獲取各種圖像并且進行組合，所以能夠滿足各種用戶喜好并且能夠增加用戶便利。
[0226]根據前述示例性實施例的陣列相機、移動終端、以及用于操作其的方法不限于在此闡述的示例性實施例。因此，在此闡述的示例性實施例的變化和組合可以落入本發(fā)明的范圍內。
[0227]本發(fā)明能夠被實現為能夠被寫在計算機可讀記錄介質上并且因此能夠由陣列相機和移動終端中的處理器讀取的代碼。計算機可讀記錄介質可以是其中以計算機可讀方式存儲數據的任何類型的記錄裝置。計算機可讀記錄介質的示例包括ROM、RAM、CD-ROM、磁帶、軟盤、光數據存儲、以及載波(例如，通過因特網的數據傳輸)?？梢詫⒂嬎銠C可讀記錄介質分布在連接到網絡的多個計算機系統(tǒng)上，使得計算機可讀代碼被寫入其中并且以分散的方式從中執(zhí)行。本領域的普通技術人員可以構造用于實現本實施例的程序、代碼和代碼段。
[0228]雖然參考本發(fā)明的示例性實施例已經特別地示出并且描述本發(fā)明，但是本領域的普通技術人員將理解的是，在沒有脫離由下面的權利要求限定的本發(fā)明的范圍和精神的情況下可以在其中進行形式上和細節(jié)上的各種改變。
【權利要求】
1.一種用于操作包括多個相機模塊的陣列相機的方法，所述方法包括: 將不同于其它的相機模塊的相機環(huán)境設置應用于所述多個相機模塊中的至少一個； 通過所述多個相機模塊獲取圖像；以及 組合所獲取的圖像。
2.根據權利要求1所述的方法，其中，所述應用包括根據用戶設置輸入或者預設設置值的加載將設置應用于所述多個相機模塊。
3.根據權利要求1所述的方法，其中，所述應用包括將不同的設置應用于所述多個相機模塊中的每一個。
4.根據權利要求1所述的方法，其中，所述應用包括將不同的分辨率和幀率設置應用于所述多個相機模塊中的至少一個。
5.根據權利要求4所述的方法，其中，所述組合包括基于在低分辨率、快拍設置下從相機模塊獲取的圖像和在高分辨率、慢拍設置下從相機模塊獲取的圖像生成高分辨率、高幀率圖像。
6.根據權利要求4所述的方法，其中，所述組合包括基于在低分辨率和高幀率的第一設置下從相機模塊獲取的圖像和在相對于所述第一設置的高分辨率和低幀率的第二設置下從相機模塊獲取的圖像生 成合成圖像。
7.根據權利要求6所述的方法，其中，所述組合進一步包括基于在相對于所述第二設置的高分辨率和低幀率的第三設置下從相機模塊獲取的圖像生成所述合成圖像。
8.根據權利要求1所述的方法，進一步包括基于通過所述多個相機模塊獲取的圖像生成深度圖。
9.根據權利要求1所述的方法，其中，所述多個相機模塊中的至少一個包括不同于所述其它的相機模塊的放大率或者類型的鏡頭。
10.根據權利要求9所述的方法，其中，所述多個相機模塊包括被交替地排列的具有廣角鏡頭的相機模塊和具有長焦鏡頭的相機模塊。
11.根據權利要求10所述的方法，進一步包括: 從所述具有廣角鏡頭的相機模塊獲取的圖像中生成深度圖；和 從所述具有長焦鏡頭的相機模塊獲取的圖像中提取對象區(qū)域， 其中，所述組合包括基于所述深度圖對背景區(qū)域進行透視并且插入所提取的對象區(qū)域。
12.根據權利要求1所述的方法，其中，所述應用包括將不同的曝光設置應用于所述多個相機模塊中的至少一個。
13.一種用于操作移動終端的方法，所述移動終端具有包括多個相機模塊的陣列相機，所述方法包括: 將不同于其它的相機模塊的相機環(huán)境設置應用于所述多個相機模塊中的至少一個； 通過所述多個相機模塊獲取圖像；以及 組合所獲取的圖像。
14.根據權利要求13所述的方法，其中，所述應用包括將不同的分辨率和幀率設置應用于所述多個相機模塊中的至少一個。
15.根據權利要求14所述的方法，其中，所述組合包括基于在低分辨率、快拍設置下從相機模塊獲取的圖像和在高分辨率、慢拍設置下從相機模塊獲取的圖像生成高分辨率、高幀率圖像。
【文檔編號】H04N5/372GK103813108SQ201310160851
【公開日】2014年5月21日 申請日期:2013年5月3日 優(yōu)先權日:2012年11月15日
【發(fā)明者】李智弘, 沈恩志, 許亨茂, 都昊奭 申請人:Lg電子株式會社