用于預(yù)覽雙鏡頭圖像的方法和設(shè)備的制作方法
【專利摘要】本發(fā)明公開一種用于預(yù)覽雙鏡頭圖像的方法和設(shè)備。一種具有兩個(gè)圖像傳感器的電子裝置提供實(shí)時(shí)地組合從第一圖像傳感器捕捉的局部圖像和從第二圖像傳感器捕捉的背面圖像的預(yù)覽屏幕。局部圖像是正面圖像的一部分，該部分包括基于算法檢測(cè)的期望的用戶的部分(諸如，用戶的面部)。電子裝置通過將局部圖像疊加在背面圖像上來(lái)顯示雙鏡頭預(yù)覽屏幕。
【專利說明】用于預(yù)覽雙鏡頭圖像的方法和設(shè)備

【技術(shù)領(lǐng)域】
[0001]本公開總體來(lái)說涉及用于預(yù)覽由電子裝置拍攝的正面的雙鏡頭圖像和背面的雙鏡頭圖像的方法和設(shè)備。

【背景技術(shù)】
[0002]通信技術(shù)的快速發(fā)展已經(jīng)引起了對(duì)新穎且創(chuàng)新的電子裝置以及電子裝置功能的開發(fā)。已經(jīng)被看出快速發(fā)展的一個(gè)領(lǐng)域是在各種用戶界面(UI)方案和Π功能的開發(fā)上。此外，用于提高現(xiàn)有電子裝置的有用性并滿足終端用戶需求的驅(qū)動(dòng)力已經(jīng)導(dǎo)致甚至在基礎(chǔ)應(yīng)用程序上的發(fā)展。
[0003]隨著很多這樣的電子裝置(諸如，蜂窩電話、智能電話、平板電腦和便攜式個(gè)人計(jì)算機(jī))包括相機(jī)，具體地，已經(jīng)看出相機(jī)相關(guān)的應(yīng)用從僅允許視覺捕捉被攝體(subject)的基本相機(jī)功能發(fā)展到能夠通過文本消息、電子郵件或社交媒體將捕捉的圖像與其他用戶共享的功能。也可為了各種目的改變或編輯捕捉的圖像。例如，現(xiàn)在存在各種允許用戶執(zhí)行各種簡(jiǎn)單或甚至復(fù)雜的編輯任務(wù)(諸如，添加濾鏡、去除紅眼、或甚至改變照片中的人物外貌(例如，改變照片中人的發(fā)型))的圖像編輯應(yīng)用。
[0004]在功用和功能上，也已經(jīng)看出這些電子裝置的硬件的發(fā)展。例如，現(xiàn)在很多現(xiàn)代電子裝置配備有兩個(gè)相機(jī)，一個(gè)相機(jī)置于電子裝置的正面，一個(gè)置于電子裝置的背面。這能夠?qū)崿F(xiàn)多個(gè)功能(諸如，實(shí)時(shí)視頻聊天、更容易自拍等)。另一相對(duì)新穎的功能包括分別顯示由正面相機(jī)和背面相機(jī)拍攝的正面圖像和背面圖像。在這種所謂的“雙鏡頭模式”下，將正面圖像與背面圖像組合以形成合成圖像。例如，主圖像(由背面相機(jī)捕捉)可以以類似于畫中畫(PIP)格式的某種格式來(lái)與子圖像(由正面相機(jī)捕捉)疊加。這可允許用戶捕捉感興趣的事件或事物(由背面相機(jī)拍攝)而同時(shí)捕捉他或她自己本身對(duì)于事件的體驗(yàn)或反應(yīng)(由正面相機(jī)拍攝)。
[0005]然而，當(dāng)用戶試圖利用雙鏡頭模式時(shí)問題出現(xiàn)，這是由于那時(shí)用戶必須同時(shí)考慮并捕捉兩個(gè)圖像構(gòu)圖。在常見雙鏡頭模式下，正面圖像以PIP “盒子”被顯示在背面圖像上方(通常，正面圖像PIP “盒子”的位置被預(yù)定，但是可在圖片構(gòu)圖內(nèi)改變)。對(duì)于正面圖像，通常難以設(shè)置適當(dāng)?shù)溺R頭構(gòu)圖。具體地，在任何得到的正面圖像構(gòu)圖中，臉部通常傾向于一側(cè)，以致捕捉的圖像的一側(cè)的權(quán)值更重，特別是在正面相機(jī)的視角寬的情況下。
[0006]此外，當(dāng)相較于完整的合成圖像的大小，正面圖像PIP “盒子”(也可被稱作子圖像)相對(duì)較小時(shí)，由于在預(yù)覽屏幕內(nèi)它的大小限制，用戶會(huì)難以確認(rèn)子圖像的質(zhì)量。
[0007]此外，由于用戶必須使用一只手來(lái)觸發(fā)捕捉按鈕，并使用另一只手使電子裝置固定，所以電子裝置會(huì)搖晃以致產(chǎn)生失焦圖像。因此，合成圖像通常質(zhì)量欠佳以致用戶不滿。
[0008]提出以上信息僅作為背景信息以幫助理解本公開，至于任何上述信息是否可應(yīng)用為針對(duì)本發(fā)明的現(xiàn)有技術(shù)，尚未作出決定，也未作出聲明。


【發(fā)明內(nèi)容】

[0009]本發(fā)明旨在至少部分地解決、減輕或消除與現(xiàn)有技術(shù)相關(guān)的問題和/或缺點(diǎn)中的至少一個(gè)。
[0010]本發(fā)明是一種用于預(yù)覽雙鏡頭圖像并幫助捕捉雙鏡頭照片的方法和設(shè)備。所述方法和設(shè)備利用包含在算法上被識(shí)別的被攝體部分(諸如，用戶的面部)的局部圖像。本發(fā)明幫助通過實(shí)時(shí)預(yù)覽雙鏡頭圖像來(lái)合成組合的雙鏡頭圖像。
[0011]根據(jù)本發(fā)明的一方面，公開一種用于預(yù)覽雙鏡頭圖像的電子裝置設(shè)備。電子裝置設(shè)備包括:第一圖像傳感器，用于捕捉正面圖像；第二圖像傳感器，用于捕捉背面圖像，圖像信號(hào)處理器，用于對(duì)由第一圖像傳感器和第二圖像傳感器捕捉的圖像執(zhí)行圖像處理；控制器，用于根據(jù)來(lái)自正面圖像的被攝體的算法識(shí)別來(lái)設(shè)置感興趣的像素的區(qū)域。第一圖像傳感器被指示為基于感興趣的像素的區(qū)域來(lái)輸出局部圖像，圖像信號(hào)處理器通過將局部圖像疊加在背面圖像上來(lái)創(chuàng)建組合的雙鏡頭圖像。然后，組合的雙鏡頭預(yù)覽圖像被顯示。
[0012]根據(jù)本發(fā)明的另一方面，公開一種用于預(yù)覽在電子裝置中捕捉的雙鏡頭圖像的方法。在算法上識(shí)別由第一圖像傳感器捕捉的正面圖像中的期望的被攝體部分。根據(jù)在正面圖像中識(shí)別的期望的被攝體部分的位置來(lái)設(shè)置感興趣的像素的區(qū)域。第一圖像傳感器被指示為輸出與感興趣的像素的區(qū)域相應(yīng)的局部圖像。通過將局部圖像疊加在由第二圖像傳感器捕捉的背面圖像上來(lái)創(chuàng)建組合的雙鏡頭圖像。在顯示器上預(yù)覽組合的雙鏡頭圖像。
[0013]通過以下結(jié)合附圖公開的本發(fā)明的示例性實(shí)施例的詳細(xì)描述，本發(fā)明的其它方面、優(yōu)點(diǎn)和突出特征對(duì)于本領(lǐng)域技術(shù)人員來(lái)說將變得清楚。

【專利附圖】

【附圖說明】
[0014]通過參照附圖詳細(xì)地描述本發(fā)明的示例性實(shí)施例，本發(fā)明的以上和其它特征以及優(yōu)點(diǎn)將變得更清楚，其中:
[0015]圖1是示出根據(jù)本發(fā)明的實(shí)施例的電子裝置的配置的框圖；
[0016]圖2示出根據(jù)本發(fā)明的實(shí)施例的示例智能電話電子裝置的正面的透視圖；
[0017]圖3示出根據(jù)本發(fā)明的實(shí)施例的示例智能電話電子裝置的背面的透視圖；
[0018]圖4是將根據(jù)本發(fā)明的實(shí)施例的使用電子裝置的兩個(gè)圖像傳感器捕捉圖像形象化的概要示圖；
[0019]圖5是示出根據(jù)本發(fā)明的實(shí)施例的用于實(shí)現(xiàn)雙鏡頭圖像預(yù)覽的電子裝置的配置的框圖；
[0020]圖6A是根據(jù)本發(fā)明的實(shí)施例的由背面相機(jī)捕捉的背面圖像的示圖；
[0021]圖6B是根據(jù)本發(fā)明的實(shí)施例的由正面相機(jī)捕捉的正面圖像的示圖；
[0022]圖6C是根據(jù)本發(fā)明的實(shí)施例將組合圖6A中的背面圖像和圖6B中的正面圖像的圖像預(yù)覽形象化的示圖；
[0023]圖7是示出根據(jù)本發(fā)明的實(shí)施例的圖像預(yù)覽方法的流程圖。

【具體實(shí)施方式】
[0024]在下文中將參照示出本發(fā)明的說明性的實(shí)施例的附圖，更充分地描述本發(fā)明。然而，本發(fā)明可以以很多形式被實(shí)施，并且不應(yīng)被解釋為受限于在此描述的實(shí)施例；與之相反，提供這些實(shí)施例使得本公開將是徹底的并完整的，并且將發(fā)明的范圍充分地傳達(dá)給本領(lǐng)域技術(shù)人員。貫穿本公開，相同的標(biāo)號(hào)可被理解為指示相同的部分、組件和結(jié)構(gòu)。
[0025]將理解:盡管可在此使用術(shù)語(yǔ)“第一”、“第二”、“第三”等描述各種元件、組件、區(qū)域、層和/或區(qū)段，但是這些元件、組件、區(qū)域、層和/或區(qū)段不應(yīng)該被這些術(shù)語(yǔ)所限制。僅使用這些術(shù)語(yǔ)來(lái)區(qū)分一個(gè)元件、組件、區(qū)域、層和/或區(qū)段與另一區(qū)域、層或區(qū)段。因此，在不脫離本發(fā)明的教導(dǎo)的情況下，以下討論的“第一”元件、組件、區(qū)域、層或區(qū)段可被稱為“第二”元件、組件、區(qū)域、層或區(qū)段。當(dāng)通過使用連接詞“和/或”等描述相關(guān)聯(lián)的列表項(xiàng)時(shí)，所述描述應(yīng)被理解為包括所述相關(guān)聯(lián)的列表項(xiàng)的一項(xiàng)或更多項(xiàng)的任意和全部組合。
[0026]在此使用的術(shù)語(yǔ)僅為了描述具體實(shí)施例的目的，而非意圖限制本發(fā)明。
[0027]將理解:除非上下文清楚地另有指示，否則單數(shù)形式包括復(fù)數(shù)指代。還將理解:在說明書中使用術(shù)語(yǔ)“包括”時(shí)，術(shù)語(yǔ)“包括”指定聲明的特征、整體、步驟、操作、元件和/或組件的存在，但不排除一個(gè)或更多個(gè)其它特征、整體、步驟、操作、元件、組件和/或其組合的存在或附加。
[0028]除非另有定義，否則在此使用的所有術(shù)語(yǔ)(包括技術(shù)和科學(xué)術(shù)語(yǔ))具有與本發(fā)明所屬領(lǐng)域的普通技術(shù)人員的一般理解相同的含義。還將理解:應(yīng)該將術(shù)語(yǔ)(諸如常用詞典中所定義的術(shù)語(yǔ))解釋為具有與在相關(guān)領(lǐng)域的上下文中的它們的含義一致的含義，并且除非在此被明確地這樣定義，否則將不以理想的或過于正式的含義解釋所述術(shù)語(yǔ)。
[0029]在下文中，詳細(xì)地公開雙鏡頭圖像預(yù)覽方法和設(shè)備。電子裝置設(shè)備可被配備有兩個(gè)圖像傳感器，所述兩個(gè)圖像傳感器可以是正面相機(jī)和背面相機(jī)。預(yù)覽雙鏡頭圖像可以被顯示在電子裝置的顯示屏上。預(yù)覽雙鏡頭圖像優(yōu)選地顯示由電子裝置的背面相機(jī)捕捉的背面圖像，該背面相機(jī)可被用于捕捉“被攝體”圖像或(通常)背面圖像。當(dāng)雙向模式被激活時(shí)，電子裝置也可利用電子裝置的正面相機(jī)來(lái)捕捉“用戶”圖像、“前景”場(chǎng)景圖像或(通常)正面圖像。正面相機(jī)優(yōu)選地被指示為輸出由用戶所指示的部分圖像，該部分圖像僅包括正面圖像中的期望的元素，例如，該部分圖像可以是用戶的身體中的一部分(例如，具體地，用戶的面部)。這可基于指定感興趣的基于像素的區(qū)域(包括例如用戶的面部的用戶的部位)的信息來(lái)確定。然后，電子裝置可通過將正面圖像疊加在背面圖像的上方來(lái)顯示雙鏡頭預(yù)覽屏幕。因此，僅對(duì)正面圖像的相對(duì)小的區(qū)域執(zhí)行潛在圖像處理，這具有減少計(jì)算需求和功耗的附加優(yōu)點(diǎn)。
[0030]圖1是示出根據(jù)本發(fā)明的實(shí)施例的電子裝置的配置的框圖。在此描述的電子裝置可構(gòu)成具有顯示單元以及正面相機(jī)和背面相機(jī)的任意裝置。電子裝置也可被稱作“便攜式裝置”、“移動(dòng)終端”、“通信終端”、“便攜式通信終端” “便攜式移動(dòng)終端”等。例如，電子裝置可以是智能電話、蜂窩電話、游戲機(jī)、電視、顯示裝置、車輛頭部單元、筆記本計(jì)算機(jī)、膝上型計(jì)算機(jī)、平板個(gè)人計(jì)算機(jī)(PC)、個(gè)人媒體播放器(PMP)、個(gè)人數(shù)字助理(PDA)或任意其它相似電子裝置。電子裝置可被實(shí)現(xiàn)為具有無(wú)線通信功能的袖珍的便攜式通信終端。電子裝置也可是柔性顯示裝置。配備有至少兩個(gè)圖像傳感器的任意其它裝置也可被用于執(zhí)行或啟用本發(fā)明。雖然在本發(fā)明的一些實(shí)施例中將采用便攜式裝置作為電子裝置的代表性示例，但應(yīng)理解:可省略或替換便攜式裝置的一些組件。
[0031]現(xiàn)在參照?qǐng)D1，電子裝置100可包括觸摸屏190和至少一個(gè)觸摸屏控制器195。觸摸屏190和觸摸屏控制器195可被分別實(shí)現(xiàn)為顯示單元和顯示控制器。電子裝置100也可包括控制器110、通信模塊120、圖像傳感器模塊150、輸入/輸出模塊160、傳感器模塊170、存儲(chǔ)器175和供電單元180。
[0032]控制器110可包括:中央處理單元(CPU) 111 ;只讀存儲(chǔ)器(ROM) 112，用于存儲(chǔ)用于控制電子裝置100的操作系統(tǒng)；隨機(jī)存取存儲(chǔ)器(RAM) 113，用于存儲(chǔ)從外部源輸入的信號(hào)或數(shù)據(jù)，或用作計(jì)算存儲(chǔ)器并執(zhí)行電子裝置100中的應(yīng)用。CPUlll可利用一個(gè)或更多個(gè)處理器核，因此CPUlll可被實(shí)現(xiàn)為雙核、三核或四核裝置等。對(duì)于任意計(jì)算裝置典型的是，CPUllU ROMl 12和RAMl 13可通過內(nèi)部總線相互連接。
[0033]控制器110可控制通信模塊120、圖像傳感器模塊150、輸入/輸出模塊160、傳感器模塊170、存儲(chǔ)器175、供電單元180、觸摸屏190和觸摸屏控制器195。
[0034]通信模塊120可包括移動(dòng)通信模塊、無(wú)線局域網(wǎng)絡(luò)(WLAN)模塊和短距離通信模塊中的至少一個(gè)。通信模塊120可使用一個(gè)或更多個(gè)天線通過移動(dòng)通信來(lái)將電子裝置100連接到外部電子裝置。移動(dòng)通信模塊將用于語(yǔ)音呼叫、視頻會(huì)議呼叫、短消息服務(wù)(SMS)消息或多媒體消息服務(wù)(MMS)消息的無(wú)線信號(hào)發(fā)送到蜂窩電話、智能電話、平板PC或其它電子裝置，或從上述裝置接收所述無(wú)線信號(hào)。
[0035]WLAN模塊優(yōu)選地允許經(jīng)由無(wú)線接入點(diǎn)(AP，未示出)連接到互聯(lián)網(wǎng)。WLAN模塊優(yōu)選地支持WLAN標(biāo)準(zhǔn)IEEE802.llx。
[0036]短距離通信模塊可能夠在便攜式終端100和外部電子裝置之間進(jìn)行短距離通信。短距離通信可被實(shí)現(xiàn)為例如藍(lán)牙、紅外數(shù)據(jù)協(xié)會(huì)(IrDA)、WiFi直連、近場(chǎng)通信(NFC)等，并且可包括一個(gè)或更多個(gè)短距離通信解決方案。
[0037]圖像傳感器模塊150可包括以矩陣MXN排列的多個(gè)像素，并且每個(gè)像素可包括光電二極管和至少一個(gè)晶體管。像素累積由入射光產(chǎn)生的電荷(即，曝光處理)，并且基于累積的電荷的電壓指示入射光的照度(即，圖像數(shù)據(jù)輸出處理)。當(dāng)形成靜止圖像或運(yùn)動(dòng)圖像的圖像被處理時(shí)，從圖像傳感器模塊150輸出的圖像數(shù)據(jù)包括從像素輸出的電壓集(即像素值)，并且該圖像數(shù)據(jù)指示一個(gè)圖像(即，靜止圖像)。該圖像包括MXN個(gè)像素。僅為了列舉一些非限制性的可能，圖像傳感器模塊150可以是電荷耦合器件(CCD)圖像傳感器、互補(bǔ)金屬氧化物半導(dǎo)體(CMOS)圖像傳感器。
[0038]圖像傳感器模塊150可包括例如用于捕捉靜止圖像或視頻影片的第一圖像傳感器151和第二圖像傳感器152。第一圖像傳感器151和第二圖像傳感器152為電子裝置100提供相機(jī)功能，從而優(yōu)選地將通過鏡頭系統(tǒng)輸入的光信號(hào)轉(zhuǎn)換成電圖像信號(hào)，然后將電圖像信號(hào)發(fā)送到控制器110。這允許用戶使用電子裝置100來(lái)拍攝視頻影片或捕捉靜止圖像。第一圖像傳感器151和第二圖像傳感器152中的每一個(gè)可包括通用相機(jī)模塊(諸如，鏡頭系統(tǒng)、光圈等)。在理解第一圖像傳感器151和第二圖像傳感器152分別是正面相機(jī)和背面相機(jī)的示例的情況下給出以下描述。
[0039]圖像傳感器模塊150也可包括用于啟用變焦功能的鏡頭筒155中的至少一個(gè)。電機(jī)單元154可使鏡頭筒155的移動(dòng)自動(dòng)化。閃光單元153可提供捕捉被攝體所需的輔助光源。在電子裝置的一種通用配置中，第一圖像傳感器151可被置于電子裝置100的正表面，第二圖像傳感器152可被置于電子裝置100的背表面。
[0040]圖像傳感器模塊150可選地包括第三圖像傳感器(未示出)。第一圖像傳感器151和第三圖像傳感器的位置相互鄰近(通常在Icm到8cm之間的距離內(nèi))可允許捕捉三維(3D)靜止圖像或視頻影片。輸入/輸出模塊160可包括以下中的至少一個(gè):一個(gè)或更多個(gè)按鈕161、至少一個(gè)振動(dòng)組件164(用于提供觸覺反饋)和鍵盤166。然而，輸入/輸出模塊160不限于前述元件，還可包括其它未示出的元件，諸如，麥克風(fēng)、揚(yáng)聲器、耳機(jī)插孔、鼠標(biāo)、軌跡球、操縱桿、光標(biāo)控制(諸如，用于控制觸摸屏190上的光標(biāo)的移動(dòng)的光標(biāo)方向鍵)等。
[0041]按鈕161可被置于電子裝置100的外殼(殼體)的正面、側(cè)面或背面上，并且可至少包括電源/鎖定按鈕、音量按鈕、菜單按鈕、主屏幕按鈕、回退按鈕或搜索按鈕。
[0042]振動(dòng)組件164可將電信號(hào)轉(zhuǎn)換成機(jī)械振動(dòng)，從而向用戶提供觸覺反饋。例如，當(dāng)電子裝置100從另一裝置接收語(yǔ)音或視頻呼叫時(shí)，電子裝置100可觸發(fā)振動(dòng)組件164。振動(dòng)組件164也可響應(yīng)于通過觸摸屏190的用戶輸入進(jìn)行操作。一個(gè)或更多個(gè)振動(dòng)電機(jī)164可被安裝在電子裝置100中以按照需要提供不同類型的振動(dòng)或不同振動(dòng)量。
[0043]鍵盤166可從用戶接收鍵輸入以幫助控制電子裝置100。鍵盤166可包括機(jī)械鍵盤或顯示在觸摸屏190上的虛擬鍵盤。根據(jù)電子裝置100的性能或結(jié)構(gòu)(具體來(lái)說，如果期望使用虛擬鍵盤或使用虛擬鍵盤有利)，可省略電子裝置100的機(jī)械鍵盤。
[0044]傳感器模塊170優(yōu)選地包括用于檢測(cè)電子裝置100的狀態(tài)和條件的至少一個(gè)傳感器。例如，傳感器模塊170可包括:接近傳感器，用于檢測(cè)用戶到電子裝置100的接近；照度傳感器，用于檢測(cè)在電子裝置100的當(dāng)前環(huán)境中的周圍光量；運(yùn)動(dòng)傳感器，用于檢測(cè)電子裝置100的任意移動(dòng)(例如，旋轉(zhuǎn)、加速度或應(yīng)用于電子裝置100的振動(dòng))；地磁傳感器，用于使用磁場(chǎng)來(lái)檢測(cè)方向；重力傳感器，用于檢測(cè)重力作用的方向；高度計(jì)，用于通過測(cè)量氣壓來(lái)檢測(cè)電子裝置100的高度。傳感器模塊170可也被考慮為包括用于捕捉圖像的圖像傳感器模塊150 (雖然沒有示出此關(guān)系)。當(dāng)然，可按照需要添加或利用除了前述傳感器之外的傳感器。
[0045]存儲(chǔ)器175可被用于存儲(chǔ)用于幫助通信模塊120、圖像傳感器模塊150、輸入/輸出模塊160、傳感器模塊170或觸摸屏190的操作的信號(hào)、程序、指令或數(shù)據(jù)輸入/輸出。存儲(chǔ)器175可存儲(chǔ)用于控制、執(zhí)行或幫助電子裝置100或控制器110的各種特征的控制程序和應(yīng)用。應(yīng)理解:術(shù)語(yǔ)“存儲(chǔ)器”不但指示存儲(chǔ)器175，還指示任意其它數(shù)據(jù)存儲(chǔ)器，諸如，在控制器110中的R0M112、RAMl 13或安裝在電子裝置100中的存儲(chǔ)卡(例如，SD卡、記憶棒)。存儲(chǔ)器175也可包括非易失性存儲(chǔ)器、易失性存儲(chǔ)器、硬盤驅(qū)動(dòng)器(HDD)或固態(tài)驅(qū)動(dòng)器(SSD)。
[0046]存儲(chǔ)器175也可存儲(chǔ)很多不同的功能應(yīng)用(諸如，全球定位系統(tǒng)(GPS)應(yīng)用、游戲、基于時(shí)間的鬧鐘應(yīng)用等)、關(guān)于與應(yīng)用相關(guān)聯(lián)的圖形用戶界面(GUI)的圖像、與用戶信息相關(guān)的數(shù)據(jù)庫(kù)或數(shù)據(jù)、文檔、用于處理觸摸輸入的方法、操作電子裝置100所需的背景圖像(例如，菜單屏幕、待機(jī)屏幕等)、操作程序、由圖像傳感器模塊150捕捉的圖像或視頻等。
[0047]存儲(chǔ)器175優(yōu)選為機(jī)器可讀(S卩，計(jì)算機(jī)可讀)介質(zhì)，該機(jī)器可讀介質(zhì)可被定義為可接受將數(shù)據(jù)提供給機(jī)器使其能夠執(zhí)行具體功能的介質(zhì)。存儲(chǔ)器175可適當(dāng)?shù)匕ǚ且资越橘|(zhì)和易失性介質(zhì)使得電子裝置100可讀取并執(zhí)行存儲(chǔ)在介質(zhì)中的指令。
[0048]機(jī)器可讀介質(zhì)可被實(shí)現(xiàn)為例如軟盤、柔性磁盤、硬盤、磁帶、光盤只讀存儲(chǔ)器(CD-ROM)、光盤、打孔卡(punch card)、紙帶、RAM、可編程 ROM(PROM)、可擦除 PROM(EPROM)和閃存EPROM。
[0049]供電單元180優(yōu)選地從一個(gè)或更多個(gè)置于電子裝置100的外殼內(nèi)部的電池向電子裝置100供電。供電單元180也可經(jīng)由例如耦合到電子裝置100的充電線纜向電子裝置100提供來(lái)自外部電源的電力。供電單元180也可使用無(wú)線充電技術(shù)向電子裝置100提供來(lái)自外部電源的無(wú)線電力。
[0050]電子裝置100可具有至少一個(gè)觸摸屏以向用戶提供用于控制電子裝置100的操作(例如，呼叫、數(shù)據(jù)通信、廣播、攝影等)的GUI功能。觸摸屏190可接收由用戶的身體部位(例如，手指)做出的至少一個(gè)用戶輸入。觸摸可以是單觸摸或連續(xù)觸摸移動(dòng)，或者任意其它類型的觸摸輸入。觸摸屏190可將與觸摸輸入的連續(xù)移動(dòng)相應(yīng)的模擬信號(hào)發(fā)送到觸摸屏控制器195?？梢砸远喾N不同的方法(包括但不得以任何方式限制于電容部件、紅外部件、聲波部件或它們的組合)來(lái)實(shí)現(xiàn)觸摸屏。
[0051]在此使用的術(shù)語(yǔ)“觸摸”不但指示觸摸屏190和用戶輸入部件(諸如，手指)之間的直接接觸，還指示非直接接觸，諸如，懸停(例如，手指在觸摸屏190的上方可檢測(cè)的距離內(nèi)，諸如，在Icm內(nèi))。距觸摸屏190的可檢測(cè)的距離可根據(jù)電子裝置100的性能或結(jié)構(gòu)而改變。觸摸屏190可針對(duì)發(fā)生的不同類型的觸摸事件輸出不同值(例如，模擬電壓或電流值)從而區(qū)別例如直接觸摸事件(在該事件中，用戶直接觸摸觸摸屏190)和懸停觸摸事件(在該事件中，用戶將輸入裝置懸停在觸摸屏190的上方)。
[0052]響應(yīng)于從觸摸屏控制器195接收的用戶輸入信號(hào)，控制器110可觸發(fā)或激活顯示在GUI上的程序或功能。例如，響應(yīng)于直接觸摸事件或顯示在觸摸屏190上快捷鍵按鈕或?qū)ο笊戏降膽彝Ｊ录?，控制?10可選擇或執(zhí)行快捷鍵或?qū)ο蟆Ｓ|摸屏控制器195也可被實(shí)現(xiàn)為控制器110的組件功能或核心功能。
[0053]觸摸屏控制器195可不但確定做出用戶輸入的位置還可通過檢測(cè)通過觸摸屏190輸出的值(例如，當(dāng)前值)來(lái)確定懸停距離，將確定的距離轉(zhuǎn)換成數(shù)字信號(hào)(例如，z坐標(biāo)軸)，并將數(shù)字信號(hào)提供給控制器110?？刂破?10也可檢測(cè)通過其它模塊(諸如，圖像傳感器模塊150、輸入/輸出模塊160、傳感器模塊170等)接收的各種用戶輸入。用戶輸入可包括輸入到電子裝置100的不同形式的信息，諸如，觸摸、用戶手勢(shì)、語(yǔ)音、瞳孔移動(dòng)、生命體征等?？刂破?10可控制響應(yīng)于用戶輸入的任意組合來(lái)執(zhí)行電子裝置100中的預(yù)定的操作或功能。
[0054]圖2示出根據(jù)本發(fā)明的實(shí)施例的電子裝置的示例(智能電話)的正面的透視圖，圖3示出根據(jù)本發(fā)明的實(shí)施例的電子裝置的示例(智能電話)的背面的透視圖?，F(xiàn)在參照?qǐng)D2和圖3，觸摸屏190被置于電子裝置100的正面101的中心空間位置。觸摸屏190可足夠大以占據(jù)電子裝置100的正面101的主要部分。觸摸屏190顯示示例首要主屏幕。首要主屏幕是當(dāng)電子裝置100被通電時(shí)顯示在觸摸屏190上的第一屏幕。如果電子裝置100具有多個(gè)主屏幕，則首要主屏幕可簡(jiǎn)單地被定義為將被顯示的預(yù)配置的多個(gè)主屏幕中的第一主屏幕。在首要主屏幕中，快捷鍵圖標(biāo)191-1、191-2和191-3可被設(shè)置用于訪問頻繁使用的應(yīng)用。主菜單鍵191-4被設(shè)置用于訪問示出當(dāng)前安裝在電子裝置100上的全部應(yīng)用的菜單。同樣地，時(shí)間指示符、天氣指示符和其它功能指示符可按照用戶的期望來(lái)顯示。
[0055]在觸摸屏190的底部，可存在安裝在電子裝置100的主體中的多個(gè)物理按鈕，包括主屏幕按鈕161a、菜單按鈕161b和回退按鈕161c。
[0056]當(dāng)主屏幕按鈕161a被觸發(fā)時(shí)，主屏幕按鈕161a可使電子裝置100在觸摸屏190上顯示首要主屏幕。菜單按鈕161b提供可在觸摸屏190上顯示的鏈接菜單。鏈接菜單可包括微件添加菜單、背景改變菜單、搜索菜單、編輯菜單、環(huán)境設(shè)置菜單等?；赝税粹o161c可被用于顯示在當(dāng)前屏幕之前顯示在右邊的屏幕，或被用于停止最近使用的應(yīng)用。
[0057]多個(gè)傳感器可被安裝在電子裝置100的正面101的最遠(yuǎn)部分，包括例如第一圖像傳感器151、照度傳感器170a和接近傳感器170b。同樣地，現(xiàn)在參照?qǐng)D3，多個(gè)裝置可被安裝在電子裝置100的背面，包括例如第二圖像傳感器152、閃光單元153和揚(yáng)聲器163。此夕卜，多個(gè)控制器和裝置可被安裝在電子裝置100的邊緣，諸如，電源/鎖定按鈕162d(圖2中)、音量按鈕161e (圖3中)和一個(gè)或更多個(gè)麥克風(fēng)162 (圖3中)。
[0058]雖然到目前為止所描述的電子裝置100包括兩個(gè)圖像傳感器151和152，但是應(yīng)理解:在本發(fā)明的其它實(shí)施例中，在電子裝置100中可包括多于兩個(gè)的圖像傳感器。本發(fā)明的實(shí)施例也可被應(yīng)用到將由多于兩個(gè)或更多的圖像傳感器拍攝的額外圖像組合為單個(gè)圖像的處理。具體地，從由第一圖像傳感器151捕捉的圖像中選擇的圖像、從由第二圖像傳感器152捕捉的圖像中選擇的圖像和從由第三圖像傳感器捕捉的圖像中選擇的圖像可被組合為單個(gè)圖像。然而，為了簡(jiǎn)潔起見，描述在此的實(shí)施例將僅包括兩個(gè)圖像傳感器151和152。
[0059]在本發(fā)明的一個(gè)實(shí)施例中，通過組合分別由第一圖像傳感器151和第二圖像傳感器152捕捉的正面圖像和背面圖像來(lái)創(chuàng)建組合的雙鏡頭圖像。通過使用電子裝置100的第二圖像傳感器152捕捉期望的圖像來(lái)獲得背面圖像。通過使用電子裝置100的第一圖像傳感器151捕捉被攝體來(lái)創(chuàng)建正面圖像。例如，第一圖像傳感器151可被配置為捕捉正在持有電子裝置100的用戶的圖像，第二圖像傳感器152可被配置為捕捉用戶當(dāng)前正在觀看的任何事物。
[0060]然后，控制器110調(diào)節(jié)電子裝置100的一般操作(包括電子裝置100的各種組件)。因此，當(dāng)產(chǎn)生雙鏡頭圖像時(shí)，在接收到合適的用戶輸入時(shí)，控制器110可指示第一圖像傳感器151執(zhí)行以下操作:捕捉正面圖像(在這種情況下，用戶的圖片)，設(shè)置僅包括捕捉的圖像的整個(gè)像素區(qū)域中用戶的身體(可以是用戶的面部、手部等)的感興趣的像素區(qū)域，然后輸出與感興趣的像素區(qū)域相應(yīng)的圖像?？刂破?10也可指示第二圖像傳感器152捕捉背面圖像(假定某個(gè)感興趣的對(duì)象、人或風(fēng)景畫)并輸出背面圖像。最終，控制器110可將背面圖像和來(lái)自正面圖像的感興趣的像素區(qū)域組合。特別地，第一圖像傳感器151并非完整地輸出整個(gè)正面圖像，與之相反，僅輸出存在與限定的感興趣的像素區(qū)域內(nèi)的圖像，該圖像必然小于完整的像素區(qū)域內(nèi)捕捉的正面圖像。
[0061]如下將提供雙鏡頭模式和最佳鏡頭模式的簡(jiǎn)潔描述，該描述將有助于理解本發(fā)明。雙鏡頭模式是指使用兩個(gè)不同的圖像傳感器來(lái)同時(shí)或順序地捕捉兩個(gè)圖像，在雙鏡頭模式中，將兩個(gè)圖像組合為單個(gè)圖像。最佳鏡頭模式是指拍攝一系列的照片，基于預(yù)定的分類偏好在一系列照片中選擇最佳照片，其中，預(yù)定的分類偏好確定哪些圖像是更期望的。預(yù)定的分類偏好可與例如模糊量的各個(gè)數(shù)值、面部表情、拍攝成分等相應(yīng)。
[0062]參照?qǐng)D4將更詳細(xì)地描述雙鏡頭模式。圖4是將根據(jù)本發(fā)明的實(shí)施例的使用電子裝置的兩個(gè)圖像傳感器捕捉圖像形象化的概要示圖。
[0063]參照?qǐng)D4，假設(shè):第一圖像傳感器151和第二圖像傳感器152同時(shí)或具有最小時(shí)差來(lái)拍攝正面圖像和背面圖像，用戶必須幾乎同時(shí)地調(diào)整兩張圖片的構(gòu)圖。例如，如果用戶期望使用第二圖像傳感器152捕捉被攝體400，則為了期望的構(gòu)圖，用戶必須調(diào)整第二圖像傳感器152的觀看角度從而使被攝體400在第二圖像傳感器152的適當(dāng)?shù)挠^看角度內(nèi)。同時(shí)，用戶還必須改變他們自己相對(duì)于第一圖像傳感器151的位置以確保適合捕捉期望的用戶的面部405的圖片。
[0064]然而，根據(jù)本發(fā)明的一個(gè)實(shí)施例，拍攝雙鏡頭照片從自動(dòng)識(shí)別用戶的面部405開始，然后雙鏡頭照片作為實(shí)時(shí)圖像被預(yù)覽。這能夠使用戶無(wú)需改變他們自己的位置更容易地決定是否拍攝圖像。換言之，本發(fā)明的該實(shí)施例并非從由第一圖像傳感器151拍攝的靜止圖像中提取用戶的面部并同時(shí)將提取的區(qū)域與背面圖像組合，而是第一圖像傳感器151可輸出包括具有識(shí)別出的面部的最小區(qū)域的局部圖像，并且第二圖像傳感器152以原始大小輸出背面圖像。通過將局部圖像疊加在背面圖像上來(lái)創(chuàng)建組合的圖像，從而在逐幀基礎(chǔ)上提供實(shí)時(shí)實(shí)況預(yù)覽。因此，在捕捉任意圖像之前，用戶可通過實(shí)況預(yù)覽屏幕來(lái)檢查包括他們的面部405的正面圖像的構(gòu)圖，其中，在實(shí)時(shí)預(yù)覽屏幕中，用戶的面部405被跟蹤并顯示。
[0065]根據(jù)本發(fā)明的一個(gè)實(shí)施例，第一圖像傳感器151可根據(jù)從ISP156或控制器110接收的控制信號(hào)來(lái)使第一圖像傳感器151的全部像素曝光，或僅使第一圖像傳感器151的全部像素中的感興趣的區(qū)域的像素曝光，并從像素輸出的圖像數(shù)據(jù)被輸出到ISP156。
[0066]因此，本發(fā)明同時(shí)提供由第一圖像傳感器151捕捉的第一實(shí)時(shí)預(yù)覽圖像和由第二圖像傳感器152捕捉的第二實(shí)時(shí)預(yù)覽圖像。因此，第一實(shí)時(shí)預(yù)覽圖像從第一圖像傳感器151的全部像素中的識(shí)別出的面部的部分像素輸出。
[0067]在雙鏡頭模式下，分別由第一圖像傳感器151和第二圖像傳感器152來(lái)實(shí)時(shí)(或具有某個(gè)等級(jí)的時(shí)差)捕捉第一預(yù)覽圖像和第二預(yù)覽圖像，并將第一預(yù)覽圖像和第二預(yù)覽圖像顯示在一個(gè)屏幕中。用戶可分析第一預(yù)覽圖像和第二預(yù)覽圖像以確定何時(shí)拍攝雙鏡頭照片。預(yù)覽圖像優(yōu)選地是可配置的。例如，根據(jù)PIP格式，正面圖像可被顯示在背面圖像的上方，或可選地，它們可被配置為將以用戶指定的大小的預(yù)覽圖像顯示在用戶指定的位置。例如，預(yù)覽屏幕可劃分屏幕的特定區(qū)域，或者它們中每一個(gè)可單獨(dú)以完整大小被顯示。
[0068]由第一圖像傳感器151捕捉的第一預(yù)覽圖像的分辨率可不同于由第二圖像傳感器152捕捉的第二預(yù)覽圖像的分辨率。例如，來(lái)自第二圖像傳感器152的預(yù)覽圖像的分辨率可比來(lái)自第一圖像傳感器151的預(yù)覽圖像的分辨率高。這可能是一種常見實(shí)現(xiàn)方式，因?yàn)楸趁嫦鄼C(jī)的分辨率通常比正面相機(jī)(其通常被認(rèn)為是輔助或補(bǔ)充相機(jī))的分辨率高。在本發(fā)明的一些實(shí)施例中，控制器110可從正面圖像確定并選擇用戶的面部405，并指示第一圖像傳感器151輸出僅包括用戶的面部的局部圖像。然后可將局部圖像與背面圖像組合以形成最終的雙鏡頭圖像。由于局部圖像必然比完整的正面圖像小，因此，局部圖像需要較少的由電子裝置100的處理，所以這導(dǎo)致在計(jì)算和功耗上的急劇減少。
[0069]圖5是示出根據(jù)本發(fā)明的實(shí)施例的用于實(shí)現(xiàn)雙鏡頭圖像預(yù)覽的電子裝置的配置的框圖。電子裝置100可還包括圖像信號(hào)處理器(ISP) 156。ISP156可接收由圖像傳感器模塊150捕捉的實(shí)時(shí)圖像，處理圖像以符合期望的視覺特性(大小、質(zhì)量、分辨率等)，并顯示處理的圖像。圖像的處理可包括例如伽馬校正、插值、空間變換、圖像效果、圖像縮放、自動(dòng)白平衡(AWB)、自動(dòng)曝光(AE)、自動(dòng)聚焦(AF)等。觸摸屏190顯示從ISP156接收的高質(zhì)量圖像。控制器110控制圖像傳感器模塊150和/或ISP156以幫助和調(diào)節(jié)圖像處理的執(zhí)行。
[0070]當(dāng)需要使用圖像傳感器151和圖像傳感器152的應(yīng)用(例如，相機(jī)應(yīng)用)被觸發(fā)時(shí)，第一圖像傳感器151由控制器110激活。第一圖像傳感器151可將包括第一圖像傳感器151的完整像素范圍的圖像信號(hào)500輸出發(fā)送到ISP156。然后ISP156可對(duì)圖像信號(hào)500執(zhí)行信號(hào)處理。從ISP156示出的任意和全部的像素信息可被用于在算法上識(shí)別用戶的一部分(例如，用戶的面部、手部等)，因此，所述像素信息被優(yōu)選地被處理至可容易地進(jìn)行被攝體部分的檢測(cè)和識(shí)別的程度。也就是說，盡管期望將圖像轉(zhuǎn)換為高質(zhì)量圖像以更好地符合觸摸屏190的視覺特性，但是如果僅可從低質(zhì)量圖像識(shí)別被攝體部分，那么像素信息應(yīng)被處理至這樣的程度以創(chuàng)建低質(zhì)量圖像。
[0071]隨后，控制器110接收由ISP156處理的像素信息。然后，控制器110優(yōu)選地從包括圖像的像素的完整范圍選擇一部分來(lái)限定感興趣的像素區(qū)域，從而創(chuàng)建被攝體部分(例如，用戶的面部405)位于其中心處的預(yù)定大小的局部圖像。
[0072]感興趣的像素區(qū)域被用于創(chuàng)建僅包括期望且識(shí)別的被攝體部分(諸如，用戶的面部405)的圖像，并且在感興趣的像素區(qū)域內(nèi)的像素的數(shù)量必然比捕捉的正面圖像中的像素的完整范圍的像素的數(shù)量少，但是比包括期望的被攝體部分的像素的數(shù)量多。例如，感興趣的像素區(qū)域的大小可與最小尺寸的矩形相應(yīng)，其中，該矩形將用戶的面部的圖像(根據(jù)由控制器110識(shí)別的被攝體部分的位置)完整地包圍。當(dāng)然，該矩形將比由第一圖像傳感器151捕捉的完整的正面圖像小，但是比期望的被攝體部分大，這是由于用戶的面部被該矩形包圍，但是不包括該矩形中的全部的像素。
[0073]控制器110優(yōu)選地分析從ISP156接收的正面圖像的像素信息，確定適當(dāng)?shù)母信d趣的像素區(qū)域，有效地選擇將被疊加到由第二圖像傳感器152捕捉的背面圖像上的部分正面圖像?？刂破?10通過使用來(lái)自處理的正面圖像的像素信息識(shí)別期望的被攝體部分來(lái)確定適當(dāng)?shù)母信d趣的像素區(qū)域。然后，控制器110將感興趣的像素區(qū)域設(shè)置為完整地包圍期望的被攝體部分的區(qū)域。
[0074]可在算法上利用例如圖像模式算法來(lái)識(shí)別期望的被攝體部分?？刂破?00可基于這樣已知的模式信息(可包括面部、手部等的圖像模式)來(lái)設(shè)置感興趣的像素區(qū)域?？蛇x地，控制器110可基于很多學(xué)習(xí)模式算法來(lái)識(shí)別被攝體部分。
[0075]一旦控制器110基于來(lái)自接收的像素信息的特征識(shí)別出被攝體部分，則控制器110可指示第一圖像傳感器151基于關(guān)于被攝體部分的位置的信息來(lái)輸出局部圖像。然后，第一圖像傳感器151基于僅與感興趣的像素區(qū)域相應(yīng)的指示來(lái)優(yōu)選地輸出圖像信號(hào)510。因此，第一圖像傳感器151可輸出從像素的完整范圍中的一部分輸出的實(shí)時(shí)預(yù)覽圖像。在本發(fā)明的一個(gè)實(shí)施例中，在識(shí)別出被攝體部分之后，控制器110可確定在第一圖像傳感器151的完整范圍的像素區(qū)域內(nèi)是否已經(jīng)做出被攝體部分的位置的改變，以便通過跟蹤被攝體部分來(lái)顯示實(shí)時(shí)預(yù)覽屏幕。如果控制器110確定已經(jīng)做出了被攝體部分的位置的改變，則控制器110可修改感興趣的像素區(qū)域使得期望的被攝體部分繼續(xù)存在于局部圖像中。其后，控制器110指示第一圖像傳感器151輸出僅包括修改后的感興趣的像素區(qū)域的局部圖像 510。
[0076]然后，可由ISP156接收輸出的局部圖像。然后，ISP156可通過將局部圖像510疊加在背面圖像505的上方來(lái)創(chuàng)建組合的雙鏡頭圖像515。這可自動(dòng)完成或在由用戶的請(qǐng)求時(shí)完成。如果相機(jī)模式是用于組合正面圖像和背面圖像的組合模式，則ISP156優(yōu)選地通過將感興趣的像素的局部圖像510置于背部圖像505內(nèi)的預(yù)定位置或用戶指定的位置來(lái)組合局部圖像510和背面圖像505OISP156也可調(diào)整將被疊加到背面圖像505上的局部圖像510的大小。當(dāng)確定局部圖像510的適當(dāng)大小時(shí)，ISP156可考慮背面圖像505的大小、存在于背面圖像505內(nèi)的對(duì)象和其它類似的因素。局部圖像510可被透明地或不透明地疊加到背面圖像505上。也就是說，感興趣的像素的圖像510可被疊加使得背面圖像505的相應(yīng)部分不可見(不透明疊加)或透明可見(透明疊加)。因此，控制器110可操作第一圖像傳感器151和第二圖像傳感器152實(shí)時(shí)地、同時(shí)地、或具有最小時(shí)差地拍攝照片以創(chuàng)建雙鏡頭預(yù)覽。觸摸屏190可顯示由ISP156創(chuàng)建的組合的雙鏡頭圖像515。當(dāng)用戶期望使用連續(xù)捕捉的照片來(lái)創(chuàng)建雙鏡頭圖像時(shí)，也可利用所述方法和設(shè)備。在這種情況下，電子裝置100可被配置為:首先第二圖像傳感器152聚焦拍攝被攝體，然后在預(yù)定的時(shí)間間隔之后，第一圖像傳感器151聚焦拍攝被攝體(反之亦然)。然后，圖像可被自動(dòng)地疊加以創(chuàng)建雙鏡頭圖像。
[0077]圖6A是根據(jù)本發(fā)明的實(shí)施例的由背面相機(jī)捕捉的背面圖像的示圖，圖6B是根據(jù)本發(fā)明的實(shí)施例的由正面相機(jī)捕捉的正面圖像的示圖。一旦用戶執(zhí)行利用圖像傳感器的應(yīng)用(諸如，相機(jī)應(yīng)用)，則如圖6A中所描述，由第二圖像傳感器152來(lái)捕捉背面圖像。如圖6B中所描述，還由第一圖像傳感器151來(lái)捕捉正面圖像605。然后，該圖像605被依次從第一圖像傳感器151輸出到ISP156(相應(yīng)于從圖5輸出的圖像信號(hào)500)。然后，控制器110確定在整個(gè)像素圖像605內(nèi)是否檢測(cè)到面部(當(dāng)面部是期望的被攝體部分時(shí))。如果檢測(cè)到面部，則控制器110將具有在其上居中的識(shí)別的面部的區(qū)域610設(shè)置為感興趣的像素區(qū)域，并且區(qū)域610足夠大到完整地包圍期望的被攝體部分(面部)。然后，控制器110將區(qū)域610的信息發(fā)送到第一圖像傳感器151。然后，第一圖像傳感器151將來(lái)自區(qū)域610的相應(yīng)像素的信號(hào)輸出到ISP156，ISP156將區(qū)域610的像素的相應(yīng)局部圖像620依次輸出到觸摸屏190。
[0078]圖6C是根據(jù)本發(fā)明的實(shí)施例的將組合圖6A中的背面圖像和圖6B中的正面圖像的圖像預(yù)覽形象化的示圖。然后，ISP156可將局部圖像620疊加到背面圖像600，以創(chuàng)建合成的雙鏡頭圖像預(yù)覽615。局部圖像620具有特定的像素大小(反映確定的感興趣的像素區(qū)域)，其中，被攝體部分(在這種情況下是用戶的面部)位于局部圖像中心。如果期望，局部圖像620也可以以PIP格式被疊加到背面圖像600上的預(yù)定位置。因此，如圖6C中所描述，可在觸摸屏190上預(yù)覽組合的雙鏡頭圖像。
[0079]在雙鏡頭圖像這樣預(yù)覽的情況下，一旦接收到用于捕捉照片的命令，則控制器110可使第二圖像傳感器152實(shí)時(shí)拍攝背面圖像600，并可使第一圖像傳感器151拍攝局部圖像610。背面圖像和局部圖像優(yōu)選地根據(jù)預(yù)覽圖像615被組合，然后作為單個(gè)靜止的雙鏡頭圖像被存儲(chǔ)在存儲(chǔ)器175中。
[0080]圖7是示出根據(jù)本發(fā)明的實(shí)施例的圖像預(yù)覽方法的流程圖。在執(zhí)行需要捕捉視頻的圖像的應(yīng)用時(shí)，在步驟700中，控制器優(yōu)選地激活第一圖像傳感器151和第二圖像傳感器152，它們均開始發(fā)送像素信息(同時(shí)或者具有某個(gè)較小的時(shí)差)。在步驟705中，控制器110接收優(yōu)選地為來(lái)自第一圖像傳感器151的完整像素圖像的正面圖像。在步驟710中，控制器確定正面圖像(或第一圖像)是否包含被攝體部分(諸如，用戶的面部、手部等)。[0081 ] 雖然在本發(fā)明的一些實(shí)施例中，用戶的面部、手部等可被限定為被攝體部分，但是在用戶希望在他/她的面部移出焦距的情況下拍攝前景對(duì)象(諸如，建筑物)的其它實(shí)施例中，可能在第一圖像中發(fā)現(xiàn)沒有被攝體部分。因此，如果在第一圖像中沒有發(fā)現(xiàn)被攝體，則控制器100可在第一圖像中搜索建筑物、物品和/或?qū)ο蟮奶卣鳎⒎植寄切┨卣鞯膮^(qū)域設(shè)置為已經(jīng)提前學(xué)習(xí)的對(duì)象的區(qū)域。因此，在步驟720中，控制器110可以以預(yù)定的大小輸出包括已經(jīng)被提取學(xué)習(xí)的對(duì)象(即，訓(xùn)練對(duì)象)的第三圖像(即，局部圖像)。因此，訓(xùn)練對(duì)象的圖像(諸如，建筑物、動(dòng)物、物品等)可被用于指定感興趣的像素區(qū)域。關(guān)于訓(xùn)練對(duì)象的信息可被存儲(chǔ)在數(shù)據(jù)庫(kù)中，或電子裝置100的存儲(chǔ)器175中，并且感興趣的像素區(qū)域可被設(shè)置為完整地包圍訓(xùn)練對(duì)象的像素區(qū)域。
[0082]另一方面，如果在第一圖像中確實(shí)發(fā)現(xiàn)了被攝體部分，那么在步驟715中，感興趣的像素區(qū)域可被設(shè)置為完整地包圍被攝體部分所需的最小像素區(qū)域(在其中具有居中的被攝體部分)，并且控制器I1優(yōu)選地輸出第三圖像(即，局部圖像620或510)。在步驟725中，控制器110優(yōu)選地通過將第三圖像疊加到由第二圖像傳感器捕捉的背面圖像上來(lái)組合背面圖像和第三圖像，然后將組合的雙鏡頭圖像預(yù)覽顯示在觸摸屏190上。
[0083]根據(jù)本發(fā)明的一個(gè)實(shí)施例，用戶可預(yù)覽包括局部圖像的雙鏡頭圖像，其中，所述局部區(qū)域僅包括被攝體部分(用戶的身體)而非由第一輸入傳感器捕捉的完整的正面圖像。同時(shí)，用戶可預(yù)覽從第二圖像傳感器接收的背面圖像。將局部圖像與背面圖像進(jìn)行疊加以實(shí)時(shí)創(chuàng)建雙鏡頭圖像預(yù)覽。在雙鏡頭圖像預(yù)覽被顯示在屏幕上的情況下，用戶可安排照片的構(gòu)圖，并在完成期望的構(gòu)圖時(shí)捕捉雙鏡頭圖像。
[0084]第一圖像傳感器和第二圖像傳感器也可被分別稱作“正面圖像傳感器”和“背面圖像傳感器”，或“正面相機(jī)”和“背面相機(jī)”。
[0085]雖然在此使用觸摸屏190來(lái)描述示例性顯示單元，但是沒有觸摸檢測(cè)功能的標(biāo)準(zhǔn)顯示器可代替觸摸屏190被使用。
[0086]根據(jù)本發(fā)明的一些實(shí)施例，電子裝置試圖拍攝用戶和目標(biāo)被攝體的照片，由電子裝置的圖像傳感器模塊獲得的用戶的圖像被調(diào)整為僅包括用戶的面部的局部圖像。其后圖像傳感器模塊可輸出與包圍用戶的面部的區(qū)域相應(yīng)的局部圖像，這樣電子裝置可輸出雙鏡頭預(yù)覽屏幕，在雙鏡頭預(yù)覽屏幕中，局部圖像被疊加到目標(biāo)被攝體的圖像的頂部。
[0087]局部圖像比整個(gè)正面圖像小，但是它被特別指定為包括期望的用戶的被攝體部分的區(qū)域。由于局部圖像必然比完整的正面圖像小，所以這減少了執(zhí)行圖像處理上的計(jì)算需求和功耗。
[0088]根據(jù)本發(fā)明的一些實(shí)施例，通過實(shí)時(shí)地將與正面圖像中的選擇的區(qū)域相應(yīng)的局部圖像(包括期望的用戶的被攝體部分)疊加到背面圖像的上方來(lái)創(chuàng)建雙鏡頭預(yù)覽。因此，使用預(yù)覽捕捉的任何產(chǎn)生的雙鏡頭圖像可具有更愉悅的構(gòu)圖。
[0089]此外，根據(jù)本發(fā)明的一些實(shí)施例，用戶可通過使用雙鏡頭預(yù)覽屏幕來(lái)捕捉雙鏡頭圖像，在該預(yù)覽屏幕中，用戶的面部的圖像被疊加在具有期望的被攝體或場(chǎng)景的背面圖像上，預(yù)覽屏幕能夠創(chuàng)建更好的攝影構(gòu)圖。
[0090]本公開的上述實(shí)施例可在硬件、固件中被實(shí)現(xiàn)，或者經(jīng)由可被存儲(chǔ)在記錄介質(zhì)中的軟件或計(jì)算機(jī)代碼的執(zhí)行來(lái)實(shí)現(xiàn)(諸如，⑶ROM、數(shù)字通用光盤(DVD)、磁帶、RAM、軟盤、硬盤或磁光盤)，或者可通過網(wǎng)絡(luò)下載的計(jì)算機(jī)代碼實(shí)現(xiàn)(其中，所述計(jì)算機(jī)代碼初始存儲(chǔ)在遠(yuǎn)程記錄介質(zhì)上或非暫時(shí)性機(jī)器可讀介質(zhì)并將被存儲(chǔ)在本地記錄介質(zhì)上)，使得描述在此的方法可使用通用計(jì)算機(jī)或?qū)Ｓ锰幚砥髟诒淮鎯?chǔ)在記錄介質(zhì)上的軟件中被實(shí)現(xiàn)，或者在可編程硬件或?qū)Ｓ糜布?諸如ASIC或FPGA)中被實(shí)現(xiàn)。如本領(lǐng)域中所理解:計(jì)算機(jī)、處理器、微處理器控制器或可編程硬件包括存儲(chǔ)器組件(例如，RAM、R0M、閃存等)，其中，所述存儲(chǔ)器組件可存儲(chǔ)或接收軟件或計(jì)算機(jī)代碼，其中，所述軟件或計(jì)算機(jī)代碼在被計(jì)算機(jī)、處理器或硬件訪問并執(zhí)行時(shí)將實(shí)現(xiàn)描述在此的處理方法。此外，應(yīng)認(rèn)識(shí)到:當(dāng)通用計(jì)算機(jī)訪問用于實(shí)現(xiàn)在此示出的所述處理的代碼時(shí)，所述代碼的執(zhí)行將通用計(jì)算機(jī)轉(zhuǎn)變?yōu)橛糜趫?zhí)行在此示出的所述處理的專用計(jì)算機(jī)。在附圖中提供的任意功能和步驟可在硬件、軟件或它們的組合來(lái)實(shí)現(xiàn)，并且所述功能和步驟可在計(jì)算機(jī)的編程的指令內(nèi)完全或部分地被執(zhí)行。
[0091]在此的功能和處理步驟可響應(yīng)于用戶命令被自動(dòng)地或完全地或部分地被執(zhí)行。自動(dòng)執(zhí)行的活動(dòng)(包括步驟)響應(yīng)于可執(zhí)行指令或裝置操作執(zhí)行，不需要用戶指示活動(dòng)的開始。
[0092]在此指示的術(shù)語(yǔ)“單元”或“模塊”被理解為包括針對(duì)特定期望的功能被配置的硬件(諸如，處理器或微處理器)，或包括機(jī)器可執(zhí)行代碼的非暫時(shí)性介質(zhì)。
[0093]電子裝置可從有線/無(wú)線地連接的程序提供器接收程序并存儲(chǔ)程序。程序提供器可包括用于存儲(chǔ)具有用于執(zhí)行本發(fā)明的實(shí)施例的指令的程序、用于存儲(chǔ)本發(fā)明的實(shí)施例所需的信息的存儲(chǔ)器、用于有線/無(wú)線地與電子裝置通信的通信單元和用于在請(qǐng)求時(shí)或自動(dòng)地將程序發(fā)送到電子裝置的控制器。
[0094]雖然連同例如移動(dòng)通信終端已經(jīng)描述了多個(gè)實(shí)施例，但是本領(lǐng)域普通技術(shù)人員將理解并領(lǐng)會(huì):在不脫離本發(fā)明的范圍的情況下可作出各種修改。因此，本領(lǐng)域普通技術(shù)人員將清楚:本發(fā)明不限于描述的實(shí)施例，提供所述實(shí)施例僅為了說明目的。
【權(quán)利要求】
1.一種用于預(yù)覽雙鏡頭圖像的電子裝置，其特征在于: 顯示屏； 第一圖像傳感器，被配置為捕捉正面圖像； 第二圖像傳感器，被配置為捕捉背面圖像； 圖像信號(hào)處理器，被配置為對(duì)由第一圖像傳感器和第二圖像傳感器捕捉的圖像執(zhí)行圖像處理； 控制器，被配置為: 基于正面圖像內(nèi)的被攝體部分的算法識(shí)別來(lái)設(shè)置感興趣的像素的區(qū)域，其中，感興趣的像素的區(qū)域包圍被攝體部分， 基于設(shè)置的感興趣的像素的區(qū)域，從第一圖像傳感器輸出局部圖像， 使用圖像信號(hào)處理器通過將局部圖像疊加在背面圖像上來(lái)創(chuàng)建組合的圖像， 在顯示屏上顯示組合的圖像。
2.如權(quán)利要求1所述的電子裝置，其特征在于:控制器被配置為基于面部識(shí)別算法確定被攝體部分是否存在于正面圖像中，并且當(dāng)確定被攝體部分存在于正面圖像中時(shí)，將包括被攝體部分的正面圖像中的一部分設(shè)置為感興趣的像素的區(qū)域。
3.如權(quán)利要求1所述的電子裝置，其特征在于:圖像信號(hào)處理器被配置為通過以畫中畫格式將局部圖像置于背面圖像的預(yù)定位置來(lái)創(chuàng)建組合的圖像。
4.如權(quán)利要求1所述的電子裝置，其特征在于:包括感興趣的像素的區(qū)域的局部圖像在大小上比正面圖像小。
5.如權(quán)利要求1所述的電子裝置，其特征在于:第一圖像傳感器被配置為基于關(guān)于感興趣的像素的區(qū)域的信息將局部圖像發(fā)送到圖像信號(hào)處理器。
6.如權(quán)利要求1所述的電子裝置，其特征在于:控制器被配置為控制從第一圖像傳感器實(shí)時(shí)捕捉正面圖像和局部圖像并且從第二圖像傳感器實(shí)時(shí)捕捉背面圖像以在顯示屏中進(jìn)行預(yù)覽。
7.如權(quán)利要求1所述的電子裝置，其特征在于:控制器在組合的圖像在顯示屏上被預(yù)覽時(shí)，控制第一圖像傳感器實(shí)時(shí)地從第一圖像傳感器捕捉局部圖像，控制第二圖像傳感器實(shí)時(shí)地從第二圖像傳感器捕捉背面圖像，并存儲(chǔ)組合的圖像。
8.如權(quán)利要求1所述的電子裝置，其特征在于:控制器被配置為確定在由第一圖像傳感器捕捉的第一正面圖像和隨后的正面圖像之間被攝體部分的位置是否存在改變； 在確定存在改變時(shí)，基于在隨后的正面圖像內(nèi)的被攝體部分的算法識(shí)別來(lái)重設(shè)感興趣的像素的區(qū)域； 基于重設(shè)的感興趣的像素的區(qū)域，從第一圖像傳感器輸出局部圖像。
9.一種用于預(yù)覽雙鏡頭圖像的方法，其特征在于: 使用處理器在算法上識(shí)別由第一圖像傳感器捕捉的正面圖像中的被攝體部分； 基于在正面圖像中識(shí)別的被攝體部分來(lái)設(shè)置感興趣的像素的區(qū)域，其中，感興趣的像素的區(qū)域包圍被攝體部分； 基于設(shè)置的感興趣的像素的區(qū)域來(lái)指示第一圖像傳感器輸出局部圖像； 通過將局部圖像疊加在從第二圖像傳感器輸出的背面圖像上來(lái)創(chuàng)建組合的圖像； 通過將組合的圖像顯示在顯示屏上來(lái)預(yù)覽組合的圖像。
10.如權(quán)利要求9所述的方法，其特征在于:包括感興趣的像素的區(qū)域的局部圖像在大小上比正面圖像小。
11.如權(quán)利要求9所述的方法，其特征在于:設(shè)置感興趣的像素的區(qū)域的步驟包括: 基于面部識(shí)別算法確定被攝體部分是否存在于正面圖像中； 當(dāng)確定被攝體部分存在時(shí)，將包括被攝體部分的正面圖像中的某部分設(shè)置為感興趣的像素的區(qū)域。
12.如權(quán)利要求11所述的方法，其特征在于:組合的圖像包括以畫中畫格式疊加在背面圖像的預(yù)定位置的局部圖像。
13.如權(quán)利要求9所述的方法，其特征在于:正面圖像和局部圖像由第一圖像傳感器實(shí)時(shí)捕捉并且背面圖像由第二圖像傳感器實(shí)時(shí)捕捉，以進(jìn)行預(yù)覽。
14.如權(quán)利要求9所述的方法，其特征還在于: 從第一圖像傳感器實(shí)時(shí)捕捉局部圖像并從第二圖像傳感器實(shí)時(shí)捕捉背面圖像； 存儲(chǔ)組合的圖像。
15.如權(quán)利要求9所述的方法，其特征還在于: 確定在由第一圖像傳感器捕捉的正面圖像和隨后的正面圖像之間被攝體部分的位置是否存在改變； 在確定存在改變時(shí)，基于在隨后的正面圖像內(nèi)的被攝體部分的算法識(shí)別來(lái)重設(shè)感興趣的像素的區(qū)域； 基于重設(shè)的感興趣的像素的區(qū)域，從第一圖像傳感器輸出局部圖像。
【文檔編號(hào)】H04N5/232GK104284064SQ201410319176
【公開日】2015年1月14日 申請(qǐng)日期:2014年7月4日 優(yōu)先權(quán)日:2013年7月5日
【發(fā)明者】金汶洙 申請(qǐng)人:三星電子株式會(huì)社