用戶終端裝置及其控制方法以及擴展的顯示系統(tǒng)的制作方法
【專利摘要】提供了用戶終端裝置、控制用戶終端裝置的方法及其擴展的顯示系統(tǒng)。該方法包括：在應(yīng)用的執(zhí)行屏幕正在被顯示的時候響應(yīng)于用戶終端裝置與外部顯示裝置配對，獲取關(guān)于顯示裝置的信息；基于關(guān)于用戶終端裝置正在執(zhí)行的應(yīng)用的信息和獲得的關(guān)于顯示裝置的信息中的至少一條信息，顯示應(yīng)用的第一屏幕；以及向顯示裝置發(fā)送應(yīng)用的第二屏幕的數(shù)據(jù)。
【專利說明】用戶終端裝置及其控制方法以及擴展的顯示系統(tǒng)
[0001] 相關(guān)申請的交叉引用
[0002] 本申請要求2013年8月29日向美國專利商標(biāo)局提交的第61/871,615號美國臨 時專利申請和2014年5月28日韓國知識產(chǎn)權(quán)局提交的第10-2014-0064595號韓國專利申 請的優(yōu)先權(quán)，其公開通過引用整體并入本文。

【技術(shù)領(lǐng)域】
[0003] 與示例性實施例一致的方法和裝置涉及用戶終端裝置、控制用戶終端裝置的方法 和擴展的顯示系統(tǒng)，更具體地，涉及重新配置屏幕并在單獨的顯示器上輸出屏幕的用戶終 端裝置、控制用戶終端裝置的方法及其擴展的顯示系統(tǒng)。

【背景技術(shù)】
[0004] 由于與用戶終端裝置有關(guān)的技術(shù)的發(fā)展，在最新的用戶終端裝置上顯示的內(nèi)容正 變得更加多樣化和復(fù)雜化。這些內(nèi)容可以通過各種應(yīng)用來提供。存在各種應(yīng)用，它們的范 圍從被廣泛應(yīng)用在相關(guān)技術(shù)的用戶終端裝置中的、提供發(fā)送消息的功能的應(yīng)用到需要大顯 示屏幕和高功耗的用于游戲、視頻、相機和電子書的應(yīng)用。
[0005] 在相關(guān)技術(shù)的用戶終端裝置中，顯示屏幕的大小存在限制，并且它們具有的功能 不足以以光學(xué)形式顯示屏幕以使得用戶可以方便地進行觀看。為了解決這些問題，一種技 術(shù)被開發(fā)以將顯示屏幕劃分成兩個或更多個顯示屏幕，以便提供方便用戶的顯示屏幕。但 是，仍然存在一個問題，即，這樣的屏幕只能在內(nèi)容元素和信息之間的相互包含關(guān)系被預(yù)先 配置時才可以使用。
[0006] 此外，還存在不能根據(jù)顯示器和內(nèi)容的類型充分管理功耗的問題。


【發(fā)明內(nèi)容】

[0007] 示例性實施例提供了用戶終端裝置及其控制方法和擴展的顯示系統(tǒng)，該用戶終端 裝置根據(jù)顯示特性和應(yīng)用特性重新配置屏幕并在用戶終端裝置上顯示屏幕。
[0008] 根據(jù)示例性實施例，提供了一種用戶終端裝置，包括：顯示器，被配置為顯示應(yīng)用 的執(zhí)行屏幕；通信器，被配置為與顯示裝置執(zhí)行通信；以及控制器，被配置為在顯示器顯示 應(yīng)用的執(zhí)行屏幕的時候響應(yīng)于用戶終端裝置正在通過通信器與顯示裝置配對，獲取關(guān)于顯 示裝置的信息，基于用戶終端裝置正在執(zhí)行的應(yīng)用的信息和獲得的關(guān)于顯示裝置的信息中 的至少一條信息來控制顯示器顯示應(yīng)用的第一屏幕，而且控制通信器向顯示裝置發(fā)送應(yīng)用 的第二屏幕的數(shù)據(jù)。
[0009] 關(guān)于顯示裝置的信息可以包括顯示裝置的顯示類型、分辨率、響應(yīng)時間、色彩、色 調(diào)、可視角度、色彩范圍、連接角度、和連接狀態(tài)中的至少一個。
[0010] 關(guān)于應(yīng)用的信息可以包括應(yīng)用的類別、每個部分的色彩屬性、和每個部分的屏幕 更新速度中的至少一個。
[0011] 控制器可以基于關(guān)于應(yīng)用的信息將正在顯示器上顯示的應(yīng)用的執(zhí)行屏幕劃分為 多個元素，利用所述多個劃分的元素中的第一集合來配置第一屏幕，而且利用所述多個劃 分的元素中的第二集合來配置第二屏幕。
[0012] 控制器可以基于每個部分的屏幕更新速度將正在顯示器上顯示的應(yīng)用的執(zhí)行屏 幕劃分為多個元素，利用所述多個劃分的元素中的包括視頻的元素來配置劃分的屏幕中的 第一屏幕，而且利用所述多個劃分的元素中的剩余元素來配置劃分的屏幕中的第二屏幕。
[0013] 控制器可以基于每個部分的色彩屬性將正在顯示器上顯示的應(yīng)用的執(zhí)行屏幕劃 分為多個元素，利用所述多個劃分的元素中的第一色彩的元素來配置劃分的屏幕中的第 一屏幕，而且利用所述多個劃分的元素中的第二色彩的元素來配置劃分的屏幕中的第二屏 唇。
[0014] 控制器可以控制顯示器繼續(xù)將應(yīng)用的執(zhí)行屏幕顯示為第一屏幕，并控制通信器向 顯示裝置發(fā)送有關(guān)第二屏幕的數(shù)據(jù)，該數(shù)據(jù)包括關(guān)于應(yīng)用的執(zhí)行屏幕的附加信息。
[0015] 響應(yīng)于應(yīng)用的執(zhí)行屏幕包括文本，控制器可以控制通信器向顯示裝置發(fā)送有關(guān)第 二屏幕的數(shù)據(jù)，該數(shù)據(jù)包括總結(jié)了所包括的文本的內(nèi)容的文本或圖像。
[0016] 響應(yīng)于應(yīng)用的執(zhí)行屏幕包括視頻內(nèi)容，控制器可以控制通信器向顯示裝置發(fā)送有 關(guān)第二屏幕的數(shù)據(jù)，該數(shù)據(jù)包括有關(guān)所包括的視頻內(nèi)容的信息或字幕。
[0017] 響應(yīng)于正在做出的用戶輸入指示復(fù)制模式，控制器可以控制顯示器不顯示第一屏 幕，而且控制通信器向顯示裝置發(fā)送關(guān)于在指示復(fù)制模式的用戶輸入被確定時的應(yīng)用的執(zhí) 行屏幕的數(shù)據(jù)。
[0018] 響應(yīng)于顯示裝置不支持用戶輸入，控制器可以控制通信器向顯示裝置發(fā)送與用戶 輸入相對應(yīng)的數(shù)據(jù)。
[0019] 根據(jù)另一示例性實施例，提供了一種控制用戶終端裝置的方法，該方法包括：在應(yīng) 用的執(zhí)行屏幕正在被顯示的時候，響應(yīng)于用戶終端裝置正在與外部顯示裝置配對，獲取關(guān) 于顯示裝置的信息；基于關(guān)于用戶終端裝置正在執(zhí)行的應(yīng)用的信息和獲得的關(guān)于顯示裝置 的信息中的至少一條信息，顯示應(yīng)用的第一屏幕；以及向顯示裝置發(fā)送應(yīng)用的第二屏幕的 數(shù)據(jù)。
[0020] 關(guān)于顯示裝置的信息可以包括顯示裝置的顯示類型、分辨率、響應(yīng)時間、色彩、色 調(diào)、可視角度、色彩范圍、連接角度、和連接狀態(tài)中的至少一個。
[0021] 關(guān)于應(yīng)用的信息可以包括應(yīng)用的類別、每個部分的色彩屬性、和每個部分的屏幕 更新速度中的至少一個。
[0022] 方法還可以包括：基于關(guān)于應(yīng)用的信息將正在顯示的應(yīng)用的執(zhí)行屏幕劃分為多個 元素；以及利用所述多個劃分的元素中的第一集合來配置第一屏幕，而且利用所述多個劃 分的元素中的第二集合來配置第二屏幕。
[0023] 所述劃分可以基于每個部分的屏幕更新速度將正在顯示的應(yīng)用的執(zhí)行屏幕劃分 為多個元素，以及所述配置可以利用所述多個劃分的元素中的包括視頻的元素來配置第一 屏幕，而且利用所述多個劃分的元素中的剩余元素來配置第二屏幕。
[0024]所述劃分可以基于每個部分的色彩屬性將正在顯示的應(yīng)用的執(zhí)行屏幕劃分為多 個元素，所述配置可以利用所述多個劃分的元素中的第一色彩的元素來配置第一屏幕，而 且利用所述多個劃分的元素中的第二色彩的元素來配置第二屏幕。
[0025]所述發(fā)送可以繼續(xù)將應(yīng)用的執(zhí)行屏幕顯示為第一屏幕，并向顯示裝置發(fā)送有關(guān)第 二屏幕的數(shù)據(jù)，該數(shù)據(jù)包括關(guān)于應(yīng)用的執(zhí)行屏幕的附加信息。
[0026] 響應(yīng)于應(yīng)用的執(zhí)行屏幕包括文本，所述方法可以向顯示裝置發(fā)送有關(guān)第二屏幕的 數(shù)據(jù)，該數(shù)據(jù)包括總結(jié)了所包括的文本的內(nèi)容的文本或圖像。
[0027] 響應(yīng)于應(yīng)用的執(zhí)行屏幕包括視頻內(nèi)容時，所述方法可以向顯示裝置發(fā)送有關(guān)第二 屏幕的數(shù)據(jù)，該數(shù)據(jù)包括有關(guān)所包括的視頻內(nèi)容的信息或字幕。
[0028] 響應(yīng)于正在做出的用戶輸入指示復(fù)制模式，所述方法可以不顯示第一屏幕，而是 可以向顯示裝置發(fā)送關(guān)于存在指示復(fù)制模式的用戶輸入時的應(yīng)用的執(zhí)行屏幕的數(shù)據(jù)。
[0029] 所述方法還可以包括，響應(yīng)于顯示裝置不支持用戶輸入，向顯示裝置發(fā)送與用戶 輸入相對應(yīng)的數(shù)據(jù)。
[0030] 根據(jù)另一示例性實施例，提供了擴展的顯示系統(tǒng)，其包括：顯示裝置，被配置為與 用戶終端裝置配對，并且顯示從用戶終端裝置發(fā)送的第二屏幕的數(shù)據(jù)；以及用戶終端裝置， 被配置為在顯示器正在顯示應(yīng)用的執(zhí)行屏幕的時候響應(yīng)于用戶終端裝置正在與顯示裝置 配對，獲取關(guān)于顯示裝置的信息，基于用戶終端裝置正在執(zhí)行的應(yīng)用的信息和獲得的信息 中的至少一條信息來顯示應(yīng)用的第一屏幕，而且向顯示裝置發(fā)送關(guān)于應(yīng)用的第二屏幕的數(shù) 據(jù)。
[0031] 根據(jù)上述的各種示例性實施例，可以基于用戶終端裝置和顯示裝置的互鎖操作使 用寬屏幕來具體實施各種用戶情境，以光學(xué)形式顯示屏幕以使得用戶可以根據(jù)顯示特性方 便地觀看屏幕，并根據(jù)顯示器和應(yīng)用中的每一個的功耗特性以低功率顯示內(nèi)容。

【專利附圖】

【附圖說明】
[0032] 通過參照附圖描述某些示例性實施例，本公開的以上和/或其他方面將更加明 顯，其中：
[0033] 圖1是示出根據(jù)示例性實施例的擴展的顯示系統(tǒng)的視圖；
[0034] 圖2和圖3是示出根據(jù)示例性實施例的用戶終端裝置的配置的框圖；
[0035] 圖4是示出存儲在用戶終端裝置的存儲器中的模塊的框圖；
[0036] 圖5是示出根據(jù)類別的應(yīng)用特征的視圖；
[0037] 圖6A和圖6B是示出根據(jù)示例性實施例的根據(jù)每個部分的屏幕更新速度的屏幕配 置的視圖；
[0038] 圖7A到圖7C是示出根據(jù)示例性實施例的根據(jù)每個部分的色彩屬性的屏幕配置的 視圖；
[0039] 圖8A到圖8C是示出根據(jù)示例性實施例的劃分和重新配置屏幕的各種形式的視 圖；
[0040] 圖9A到圖9B是示出根據(jù)示例性實施例的劃分視頻再現(xiàn)應(yīng)用的屏幕的情況的視 圖；
[0041] 圖10是示出根據(jù)示例性實施例的劃分電子書的屏幕的情況的視圖；
[0042] 圖11是示出根據(jù)示例性實施例的總結(jié)并顯示網(wǎng)絡(luò)瀏覽器屏幕的情況的視圖；
[0043] 圖12是示出根據(jù)示例性實施例的總結(jié)并顯示電子書的內(nèi)容的情況的視圖；
[0044] 圖13是示出根據(jù)示例性實施例的圖形化地顯示日程應(yīng)用的內(nèi)容的情況的視圖；
[0045] 圖14是示出根據(jù)示例性實施例的顯示與照片有關(guān)的元信息的情況的視圖；
[0046] 圖15是示出根據(jù)示例性實施例的顯示關(guān)于視頻的信息或字幕的情況的視圖；
[0047] 圖16是示出根據(jù)示例性實施例的顯示與網(wǎng)絡(luò)瀏覽器屏幕有關(guān)的幫助信息的情況 的視圖；
[0048]圖17是示出根據(jù)示例性實施例的顯示與電子書的內(nèi)容有關(guān)的幫助信息的情況的 視圖；
[0049] 圖18是示出根據(jù)示例性實施例的顯示攝影構(gòu)圖的情況的視圖；
[0050] 圖19A和圖19B是示出根據(jù)示例性實施例的網(wǎng)絡(luò)瀏覽器中的復(fù)制模式的視圖；
[0051] 圖20是示出根據(jù)示例性實施例的電子書的復(fù)制模式的視圖；
[0052] 圖21是示出根據(jù)示例性實施例的支持觸摸輸入的視圖；
[0053] 圖22是示出根據(jù)示例性實施例的支持屏幕編輯功能的視圖；
[0054] 圖23是根據(jù)示例性實施例的在拍攝過程期間識別周圍會話并且以聲音到文本 (Sound-to_Text，STT)格式提供周圍會話的視圖；
[0055] 圖24A和圖24B是示出根據(jù)示例性實施例的顯示窗口小部件（widget)的情況的 視圖；
[0056] 圖25是示出根據(jù)示例性實施例的顯示消息或電子郵件窗口小部件的情況的視 圖；
[0057] 圖26和圖27是示出根據(jù)各種示例性實施例的用戶終端裝置的控制方法的流程 圖；
[0058] 圖28是示出根據(jù)示例性實施例的擴展的顯示系統(tǒng)的操作的順序圖；
[0059] 圖29A和圖29B是示出根據(jù)示例性實施例的具有多個顯示器的用戶終端裝置的視 圖和框圖；以及
[0060] 圖30A到圖31C是示出根據(jù)示例性實施例的在用戶終端裝置的殼體中配置顯示裝 置的情況的視圖。

【具體實施方式】
[0061] 下面參照附圖更詳細(xì)地描述某些示例性實施例。
[0062] 在下面的描述中，即使在不同的附圖中，相同的參考標(biāo)記被用于相同的元件。描述 中定義的、諸如詳細(xì)結(jié)構(gòu)和元件的事項被提供以便有助于全面理解示例性實施例。然而，示 例性實施例可以在沒有這些具體定義的事項的情況下實現(xiàn)。此外，沒有詳細(xì)描述公知的功 能或結(jié)構(gòu)，因為它們會以不必要的細(xì)節(jié)模糊本申請。
[0063]圖1是示出根據(jù)示例性實施例的擴展的顯示系統(tǒng)的視圖。參照圖1，擴展的顯示系 統(tǒng)包括用戶終端裝置100和顯示裝置200。
[0064] 顯示裝置200從用戶終端裝置100接收數(shù)據(jù)，并顯示與接收到的數(shù)據(jù)相對應(yīng)的屏 幕。如圖1所示，顯示裝置可以是，但不限于，智能手表、智能手機或智能眼鏡。顯示裝置可 以具體實施為具有顯示器的各種裝置之一，諸如電子紙、電子相框（E-frame)和平板個人 計算機（PC)，但不限于此。此外，包括控制器的諸如智能電話的顯示裝置200,也可以劃分 顯示屏幕，并執(zhí)行用戶終端裝置100的控制器所執(zhí)行的功能，這將在下文中說明。
[0065]當(dāng)用戶終端裝置100在顯示應(yīng)用的執(zhí)行屏幕的時候正在與外部顯示裝置200配對 時，用戶終端裝置100獲取關(guān)于該顯示裝置200的信息?；谡陲@示裝置200上執(zhí)行的 應(yīng)用的信息和獲得的關(guān)于顯示裝置200的信息中的至少一條信息，用戶終端裝置100顯示 應(yīng)用的第一屏幕。此外，用戶終端裝置100將應(yīng)用的第二屏幕的數(shù)據(jù)發(fā)送到顯示裝置200。 [0066] 在上述擴展的顯示系統(tǒng)中，通過將用戶終端裝置100與顯示裝置200配對，可以獲 得諸如擴展顯示屏幕、最大化可視性和高效的功耗的效果。
[0067] 圖2是示意性地示出根據(jù)示例性實施例的用戶終端裝置100的配置的框圖。參照 圖2,用戶終端裝置100包括顯示器110、通信器120和控制器170。在下文中，用戶終端裝 置100被解釋為智能電話，但不限于此，并且用戶終端裝置100可以具體實施為可以在其中 執(zhí)行平板PC等的裝置。顯示器110顯示可以在用戶終端裝置100中執(zhí)行的包括應(yīng)用執(zhí)行 屏幕的各種屏幕。
[0068] 顯示器110可以被設(shè)計成各種顯示面板之一。也就是說，顯示器110可以以各種 顯示技術(shù)來具體實施，諸如液晶顯示器0XD)、有機發(fā)光二極管（0LED)、電子紙、等離子顯 示面板（PDP)、真空熒光顯示器（VFD)、場發(fā)射顯示器（FED)、和電致發(fā)光顯示器（ELD)。顯 示面板可以是發(fā)光型顯示器，但是它也可以被具體實施為反射型顯示器。此外，顯示器110 可以被具體實施為柔性顯示器或透明顯示器等等。
[0069] 通信器120向/從外部顯示裝置200發(fā)送/接收數(shù)據(jù)。通信器120可以包括無線 通信模塊或有線通信模塊，并且可以與顯示裝置200執(zhí)行無線通信或有線通信。更具體地， 通信器120接收關(guān)于顯示裝置200的信息，并向顯示裝置200發(fā)送將被顯示在顯示裝置200 上的第二屏幕的數(shù)據(jù)。
[0070] 控制器170控制用戶終端裝置100的整體配置。具體地，當(dāng)在顯示器110顯示應(yīng) 用的執(zhí)行屏幕的時候通過通信器120與顯示裝置200配對時，控制器200獲取關(guān)于顯示裝 置200的信息，并且基于關(guān)于用戶終端裝置100執(zhí)行的應(yīng)用的信息和獲得的關(guān)于顯示裝置 200的信息中的至少一條來控制顯示器110顯示應(yīng)用的第一屏幕，并且控制通信器120將應(yīng) 用的第二屏幕的數(shù)據(jù)發(fā)送到顯示裝置200。
[0071] 更具體地，控制器170可以基于關(guān)于應(yīng)用的信息將正在顯示器110上顯示的應(yīng)用 的執(zhí)行屏幕劃分成多個元素，利用多個劃分的元素中的一些來配置第一屏幕，而且利用多 個劃分的元素中的其余元素來配置第二屏幕。根據(jù)示例性實施例，控制器170可以基于每 個部分的屏幕更新速度將正在顯示器110上顯示的應(yīng)用的執(zhí)行屏幕劃分成多個元素，利用 多個劃分的元素中的包括視頻的元素來配置第一屏幕，而且利用多個劃分的元素中的其余 元素來配置第二屏幕。在視頻的情況下，屏幕更新速度應(yīng)該足夠快，并因此視頻應(yīng)該被顯示 在諸如0LED的顯示面板上，而且用于文本等而不是視頻的具有較慢屏幕更新速度的屏幕 應(yīng)該被顯示在不能跟上視頻的屏幕更新速度的顯示面板上，諸如電子紙。根據(jù)另一示例性 實施例，控制器170可以基于每個部分的色彩屬性將正在顯示器110上顯示的應(yīng)用的執(zhí)行 屏幕劃分成多個元素，利用多個劃分的元素的第一色彩的元素來配置第一屏幕，而且利用 多個劃分的元素的第二色彩的元素來配置第二屏幕。存在一種類型的顯示器，對其而言，根 據(jù)顯示器的特征，在顯示具有接近白色的許多明亮顯示的情況下，其功耗增加。例如，0LED 具有自發(fā)光發(fā)射特性，因而在具有接近白色的許多明亮顯示的情況下，功耗增加。因此，基 于每個部分的色彩屬性，控制器170可以控制利用具有許多明亮顯示的元素來配置第二屏 幕，該明亮顯示具有作為白色的第二色彩，并且在0LED中利用具有作為黑色的第一色彩的 其余元素來配置第一屏幕。
[0072] 控制器170可以控制顯示器110繼續(xù)顯示應(yīng)用的執(zhí)行屏幕作為第一屏幕，并控制 通信器120向顯示裝置200發(fā)送包括應(yīng)用的執(zhí)行屏幕的附加信息的第二屏幕的數(shù)據(jù)。例如， 在用戶只利用用戶終端裝置1〇〇來搜索關(guān)于應(yīng)用的執(zhí)行屏幕的附加信息的情況下，可能存 在必須停止執(zhí)行應(yīng)用的不便。如果這樣的附加信息被顯示在外部顯示裝置200上，則用戶 可以能夠使用戶終端裝置1〇〇繼續(xù)執(zhí)行應(yīng)用而無需停止。根據(jù)示例性實施例，在應(yīng)用的執(zhí) 行屏幕包括文本的情況下，控制器170可以控制通信器120向顯示裝置發(fā)送第二屏幕的數(shù) 據(jù)，該數(shù)據(jù)包括總結(jié)了所包括的文本的內(nèi)容的文本或圖像。根據(jù)另一示例性實施例，在應(yīng)用 的執(zhí)行屏幕包括視頻內(nèi)容的情況下，控制器170可以控制通信器向顯示裝置200發(fā)送第二 屏幕的數(shù)據(jù)，該數(shù)據(jù)包括所包含的視頻內(nèi)容的信息或字幕。
[0073] 此外，響應(yīng)于存在指示復(fù)制模式的用戶輸入，控制器170可以控制顯示器110不顯 示第一屏幕，并且控制通信器120向顯示裝置200發(fā)送當(dāng)存在指示復(fù)制模式的用戶輸入時 的應(yīng)用的執(zhí)行屏幕的數(shù)據(jù)。例如，在使用電子紙（其使用反射光）作為顯示裝置200的情 況下，由于電子紙的特征在于在改變屏幕之后在不耗電的情況下顯示字母和圖像，因此用 戶可以使用復(fù)制模式將正在顯示器110上顯示的屏幕移動到消耗更少電力的電子紙上并 將它顯示出來。
[0074] 響應(yīng)于顯示裝置不支持用戶輸入，控制器170可以控制通信器向顯示裝置200發(fā) 送與用戶輸入相對應(yīng)的數(shù)據(jù)。例如，為了轉(zhuǎn)換不支持滾動輸入的顯示裝置200的屏幕，在用 戶終端裝置100中接收到滾動輸入之后，控制器170可以將滾動輸入轉(zhuǎn)換為與滾動輸入相 對應(yīng)的、適用于顯示裝置的數(shù)據(jù)，諸如頁面轉(zhuǎn)換輸入等，并向顯示裝置200發(fā)送該數(shù)據(jù)。
[0075] 利用上述的用戶終端裝置100,當(dāng)使用顯示裝置時，可以以光學(xué)形式顯示屏幕，以 使得用戶在觀看屏幕時感覺不麻煩，各種附加信息也可以顯示在顯示裝置200上，并且可 以根據(jù)用戶終端裝置100和顯示裝置200的低功耗特性使用低電力消耗來顯示內(nèi)容。
[0076] 圖3是詳細(xì)地示出根據(jù)示例性實施例的用戶終端裝置的配置的框圖。參照圖3,用 戶終端裝置100包括顯示器110、通信器120、存儲器130、接口 140、音頻輸出器150、相機 160和控制器170。
[0077] 顯示器110顯示正在用戶終端裝置100上執(zhí)行的各種屏幕，包括應(yīng)用的執(zhí)行屏幕。 當(dāng)只有用戶終端裝置1〇〇正在被使用時，顯示應(yīng)用的執(zhí)行屏幕而不管顯示器的類型。因此， 在具有根據(jù)正在顯示的屏幕的類型的特定類型的顯示的顯示器110中，它可能在功率消耗 方面不適合。因此，在重新配置屏幕時，期望考慮顯示器110的特性來配置要在顯示器110 上顯示的第一屏幕。顯示器110的特性，諸如顯示類型等將在下文中詳細(xì)說明。
[0078] 通信器120向/從外部顯示裝置200發(fā)送/接收數(shù)據(jù)。通信器120包括無線通信 模塊或有線通信模塊，并且與顯示裝置200執(zhí)行無線通信或有線通信。更具體地，通信器 120接收顯示裝置200的信息，并向顯示裝置200發(fā)送將被顯示在顯示裝置200上的第二屏 幕的數(shù)據(jù)。
[0079] 通信器120可以使用高清晰度多媒體接口（HDMI)、低壓差分信號（LVDS)和局域網(wǎng) (LAN)有線通信方法。在通信器120正在通過HDMI(它是未壓縮型數(shù)字視頻/音頻接口標(biāo) 準(zhǔn)之一）連接到顯示裝置200的情況下，使用在HDMI本身支持的源和接收端（sink)之間交 換屬性的標(biāo)準(zhǔn)方法是有優(yōu)勢的。例如，通過使用在源和基于CEA861的信息幀和E-EDID的接 收端之間的已定義的方法，接收端裝置可以向源裝置提供接收端裝置的分辨率和與顯示相 關(guān)的其它屬性。類似地，當(dāng)用戶終端裝置100和顯示裝置200正在通過HDMI配對時，它可 以在E-EDID中記錄與顯示裝置200相關(guān)的信息并通過DDC信道提供該信息，并因此通信器 120可以接收顯示裝置200和用戶終端裝置100的物理連接狀態(tài)，以及顯示裝置200的顯示 屬性信息。LVDS是用于將圖像數(shù)據(jù)從圖像裝置發(fā)送到計算機顯示器的信號標(biāo)準(zhǔn)，其被用于 平板的平板顯示鏈接（FlatPanelDisplayLink,FPD)或開放LVDS顯示接口（OpenLDI)。 在通過LVDS類型有線連接進行通信的情況下，通信器120可以通過信號檢查有線LVDS的 物理連接狀態(tài)，而且通信器120可以通過新定義信號的保留的或未定義的數(shù)據(jù)部分來使用 保留或未定義的數(shù)據(jù)部分以用于交換顯示屬性信息。更具體地，LVDS接口可以根據(jù)在劃分 JEIDA和VESA中的比特和配對的數(shù)目而改變，而且LVDS接口可以使用保留的數(shù)據(jù)部分來交 換與顯示相關(guān)的屬性。在用戶終端裝置100和顯示裝置200通過有線LAN配對的情況下， 關(guān)于是否做出連接的信息必須能夠通過確定的協(xié)議在用戶終端裝置100和顯示裝置200之 間發(fā)送/接收以用于相互識別。以與定義協(xié)議類似的方式，還可以定義使用通過通信器120 交換數(shù)據(jù)，諸如顯示屬性信息等。為此，協(xié)議可以通過應(yīng)用層或表示層來定義，應(yīng)用層或表 示層是0SI7層模型（開放系統(tǒng)互聯(lián)7層模型）中的上層。
[0080] 通信器120可以使用各種方法，諸如近場通信（NFC)、無線LAN、紅外（IR)通信、紫 蜂通信、WiFi和藍牙，以用于無線通信。NFC是用于在非常近的距離內(nèi)執(zhí)行無線通信的技 術(shù)，它用于各種服務(wù)中，諸如交通、門票和支付等。當(dāng)前支持的數(shù)據(jù)通信速度是每秒424千 比特。對于用戶終端裝置100和顯示裝置200之間的配對和屬性信息的交換，NFC讀取器和 NFC標(biāo)簽可以被分別安裝在用戶終端裝置100和顯示裝置200內(nèi)。使用安裝在內(nèi)部的NFC 讀取器和NFC標(biāo)簽，可以基于彼此接觸的用戶終端裝置100和顯示裝置200的自然操作來 確定是否配對，而且當(dāng)安裝在用戶終端裝置100內(nèi)的NFC讀取器讀出安裝在顯示裝置200 內(nèi)的NFC標(biāo)簽中所記錄的信息時，通信器120可以接收顯示裝置200的顯示屬性信息。在 用戶終端裝置100和顯示裝置200通過無線LAN配對的情況下，關(guān)于通信連接是否被做出 的信息必須能夠通過確定的協(xié)議被發(fā)送/接收，以用于用戶終端裝置100和顯示裝置200 之間的相互識別。以與上述有線LAN方法相同的方式，可以使用0SI7層模型中的上層中 的應(yīng)用層或表示層來定義協(xié)議，而且通信器120可以使用定義的協(xié)議來發(fā)送/接收數(shù)據(jù)。
[0081] 如上所述，通信器120可以使用各種有線和無線通信方法，但不限于上述通信方 法。
[0082] 存儲器130存儲操作用戶終端裝置100所需的各種程序、模塊和數(shù)據(jù)。圖4是示 出存儲在存儲器130中的一些模塊的框圖。如圖4所示，存儲器130可以包括用于管理顯 示屬性的模塊131、用于管理應(yīng)用屬性的模塊132、以及用于重新配置屏幕的模塊133。
[0083] 用于管理顯示屬性的模塊131是用于識別和確定顯示裝置200的顯示類型、分辨 率、響應(yīng)時間、色彩、色調(diào)、可視角度、色彩范圍、連接角度、和連接狀態(tài)的模塊。用于管理顯 示屬性的模塊131可以包括用于識別已連接的顯示器的類型的模塊131-1、用于識別已連 接的顯示器的屬性的模塊131-2、用于確定顯示器之間的連接角度的模塊131-3、以及用于 確定顯示器的連接狀態(tài)的模塊131-4。
[0084] 更具體地，用于識別已連接的顯示器的類型的模塊131-1被用于基于操作方法識 別正在配對的顯示裝置200的顯示類型。由于功耗特性基于顯示類型而不同，因此必須根 據(jù)顯示類型來區(qū)分屏幕顯示方法。例如，在液晶顯示器（LCD)的情況下，一個像素包括兩個 透明電極連接到的液晶，并且在兩側(cè)存在彼此垂直的偏振過濾器。在正常狀態(tài)下，液晶的 規(guī)則排列使光通過，但是當(dāng)施加電壓時，液晶的排列被固定并因此不能使光通過，從而阻擋 光。因此，IXD示出一定功耗特性，與顯示的屏幕無關(guān)。另一例子是有機發(fā)光二極管（OLED)， 它是薄膜發(fā)光二極管，其中，發(fā)光層由有機化合物制成。因為它具有自發(fā)光的發(fā)射特性，所 以當(dāng)存在接近白色的許多顯示時，OLED消耗大量的電力。另一例子是電子紙，這是將普通油 墨的特性應(yīng)用于紙張的顯示技術(shù)。不同于使用背光以使得可以照亮像素的相關(guān)技術(shù)的平板 顯示器，電子紙像普通紙一樣反射光。通過具有雙穩(wěn)態(tài)特性的操作原理，當(dāng)屏幕改變時，文 本和圖片可以在不耗電的情況下顯示。此外，不同于平板顯示器，電子紙可以折疊或彎曲。 電子紙是在所有現(xiàn)有的顯示器中最可以彎曲的顯示器。電子紙與LCD相比具有寬視角，因 而具有從薄弱（vulnerate)角度讀取字母的優(yōu)點。然而，由于電子紙使用反射的特性，它不 可能使用背光，而且響應(yīng)時間較慢，這是缺點。另外，在TOP的情況下，由于PDP使用放電 (electricaldischarge)，所以幾乎沒有殘像，并提供平滑屏幕從而減少用戶眼睛的疲勞， 并且每英寸的成本較便宜。然而，PDP需要相對大量的功耗，產(chǎn)生大量的熱量，并且較厚，這 是缺點。
[0085] 用于識別已連接的顯示器的屬性的模塊131-2是用于分析顯示器的通用屬性信 息，諸如分辨率、響應(yīng)時間、色彩和色調(diào)的模塊。由于配置和顯示方法需要根據(jù)顯示裝置200 的顯示屬性而不同，因此需要使用用于識別所連接的顯示器的屬性的模塊131-2。例如，在 響應(yīng)時間的情況下，0LED具有以iiS(微秒）為單位的響應(yīng)時間，LCD具有2到30ms(毫 秒）的增加的響應(yīng)時間，并且電子紙具有大約250ms的響應(yīng)時間。因此，很難顯示需要大約 30fps的屏幕更新的圖像，諸如一般的視頻。在色彩和色調(diào)方面，大部分的電子紙具有灰度 級，而且只支持一些色彩。
[0086] 用于確定顯示器之間的連接角度的模塊131-3是可以經(jīng)常使用的模塊，特別是當(dāng) 用戶終端裝置100和顯示裝置200通過電纜連接的時候?？梢允褂眠@樣的方法：對經(jīng)由線 纜與壓電元件連接的部分進行配置，并測量由彎曲角度所引起的壓力以識別連接角度。然 而，由于連接角度也可以使用用于無線連接的傳感器來確定，因此模塊131-3不是僅用于 有線連接的模塊。因為使用用戶終端裝置100和顯示裝置200可以顯示的情境取決于連接 角度而不同，所以必須理解連接角度。例如，當(dāng)連接角度為0°時，可以假設(shè)顯示器110接觸 在顯示裝置200上顯示的部分的狀態(tài)?？梢允褂貌恢丿B的部分來顯示簡單信息?？梢源嬖?另一示例性實施例：當(dāng)連接角度為60°或更小時執(zhí)行復(fù)制模式。另一例子可以是當(dāng)連接角 度為180°時。
[0087] 在示例性實施例中，大多數(shù)的用戶終端裝置100和顯示裝置200將通過180°的連 接角度進行配對。下文中說明的代表性的示例性實施例是基于連接角度是180°的情況，但 是連接角度不必是180°。作為另一例子，當(dāng)連接角度是270°或更小時，可能存在這樣的 情境：顯示器110和顯示裝置200的被顯示的部分指向相反的方向，并被設(shè)置桌子上?？赡?存在用戶設(shè)置顯示器110和顯示裝置200的被顯示部分而且只在一側(cè)觀看屏幕的情況，但 是也可能存在兩個或更多個用戶相互面對并且在另一側(cè)觀看屏幕的情況。作為另一例子， 與連接角度為0°的情況相反，也可以假設(shè)在連接角度是360°的情況下，顯示器110和顯 示裝置200的被顯示部分被暴露。
[0088] 用于確定顯示器的連接狀態(tài)的模塊131-4是可以用于確定用戶終端裝置100和顯 示裝置200是否配對以及他們的連接形式的模塊。確定方法可以根據(jù)在通信器120中使用 什么類型的通信方法而不同。
[0089] 用于管理應(yīng)用屬性的模塊132是用于識別和確定在用戶終端裝置100中正在執(zhí)行 的應(yīng)用的類別、每個部分的色彩屬性、和每個部分的屏幕更新速度的模塊。用于管理應(yīng)用屬 性的模塊132包括用于識別應(yīng)用類型的模塊132-1、用于分析每個部分的屏幕更新速度的 模塊132-2、和用于分析每個部分的色彩屬性的模塊132-3。
[0090] 更具體地，由于根據(jù)正在執(zhí)行的應(yīng)用的類別需要不同的顯示特性，因此用于識別 應(yīng)用類型的模塊132-1被用于識別在用戶終端裝置100中正在執(zhí)行的應(yīng)用的類別。圖5是 示出根據(jù)類別的應(yīng)用屬性的視圖。各種應(yīng)用類別中的九個最具代表性的類別是主頁和鎖定 屏幕、網(wǎng)絡(luò)瀏覽器、電子書、消息、相機、視頻播放器、日歷、圖庫和游戲。如圖5所示，如重新 配置屏幕的情境那樣，電池消耗相對于每個類別是不同的。例如，參照圖5,游戲應(yīng)用每分鐘 的電池消耗是主頁和鎖定屏幕應(yīng)用的5倍以上。
[0091] 用于分析每個部分的屏幕更新速度的模塊132-2是用于根據(jù)屏幕更新周期劃分 應(yīng)用執(zhí)行屏幕并且重新配置屏幕的模塊。必須分析屏幕更新速度的原因是因為根據(jù)顯示 特征存在可以不顯示要求快速屏幕更新速度的內(nèi)容的裝置。例如，當(dāng)響應(yīng)時間慢于250ms 時，諸如在電子紙中，可以不顯示需要快速更新速度的內(nèi)容，諸如視頻。圖6A是示出顯示應(yīng) 用執(zhí)行屏幕的用戶終端裝置100的視圖，該屏幕包括顯示需要快速更新速度的視頻的部分 610以及顯示不需要被更新的文本的部分620。使用用于分析每個部分的屏幕更新速度的 模塊132-2,應(yīng)用執(zhí)行屏幕可以被區(qū)分成兩個部分610、620。如圖6B所示，期望的是，顯示 需要快速更新速度的視頻的部分610顯示在使用具有快速響應(yīng)時間特性的0LED的用戶終 端裝置100上，而且顯示不需要被更新的文本的部分620顯示在一旦被更新就不需要額外 的功耗的顯示裝置200上，例如電子紙。
[0092] 用于分析每個部分的色彩屬性的模塊132-3可以被用于通過色彩配置獲得每個 區(qū)域的色彩分布直方圖，并根據(jù)色彩分布提供功耗標(biāo)準(zhǔn)從而提供屏幕重新配置標(biāo)準(zhǔn)。必須 分析正在顯示的屏幕的每個部分的色彩屬性的原因是因為根據(jù)顯示特性，按照配置屏幕的 顯示色彩而存在功耗差異。具體地，在應(yīng)用諸如0LED的自發(fā)光發(fā)射顯示器的情況下，每個 部分的色彩屬性必須被考慮。圖7A示出了用于分析每個部分的色彩屬性的每個區(qū)域的色 彩直方圖分析的例子。如圖7A所示，色彩分析不僅可以在黑白屏幕上進行，而且也可以在 已經(jīng)放入各種色彩的時候進行。圖7B示出了在屏幕的重新配置之前應(yīng)用在用戶終端裝置 100上正在執(zhí)行的屏幕710、720。顯示視頻的部分710可以是具有較暗背景的區(qū)域，而顯示 文本的部分720看起來是白色總體上占主導(dǎo)的區(qū)域，因為文字是黑色的而文字的背景是白 色的。
[0093] 利用使用用于分析每個部分的色彩屬性的模塊132-3進行分析的結(jié)果，可以如圖 7C所示單獨顯示用戶終端裝置100的屏幕710和顯示裝置200的屏幕720。例如，在功耗 方面是有利的，因為由0LED配置以顯示部分710的用戶終端裝置100的顯示器110在消耗 更少功率的黑色屏幕上顯示視頻，而且由對于白色消耗更少功率的電子紙或IXD配置以顯 示部分720的顯示裝置200在白色屏幕上顯示文本。
[0094] 用于重新配置屏幕的模塊133是用于使用劃分在用戶終端裝置100上正在執(zhí)行的 應(yīng)用的元素的方法來重新配置分別在用戶終端裝置100和顯示裝置200上顯示的屏幕的模 塊。用于重新配置屏幕的模塊133可以包括用于劃分應(yīng)用元素的模塊133-1、用于劃分應(yīng)用 頁面的模塊133-2、用于應(yīng)用操作布局圖案的模塊133-3、以及用于排列自適應(yīng)文本的模塊 133-4。
[0095] 更具體地，用于劃分應(yīng)用元素的模塊133-1是用于執(zhí)行將一個應(yīng)用劃分成不同元 素的功能的模塊。在顯示結(jié)構(gòu)化為網(wǎng)頁的文檔的應(yīng)用的情況下，劃分元素的額外處理不是 必要的。然而，在一般的應(yīng)用的情況下，需要根據(jù)屏幕屬性將應(yīng)用劃分為多個部分的處理。 可以通過上述的用于管理應(yīng)用屬性的模塊132來提供劃分標(biāo)準(zhǔn)。劃分方法可以包括通過分 割處理進行檢測的方法、以及解析應(yīng)用的布局的方法。
[0096] 用于劃分應(yīng)用頁面的模塊133-2是用于確定顯示裝置200是否適合滾動界面或頁 面界面，并且當(dāng)顯示裝置200適合頁面界面時劃分頁面的模塊。例如，在正在提供使用滾動 操作顯示文本的屏幕的情況下，用戶終端裝置100可以向使用電子紙的顯示裝置200發(fā)送 顯示文本的屏幕，并且顯示屏幕。由于諸如響應(yīng)時間的特性，難以將滾動方法應(yīng)用于電子 紙。在這種情況下，用于劃分應(yīng)用頁面的模塊133-2可以按照每頁劃分文本，以使得滾動界 面不會出現(xiàn)并且向使用電子紙的顯示裝置200提供經(jīng)劃分的文本。
[0097] 用于應(yīng)用操作布局圖案的模塊133-3是用于提供控制功能的模塊，所述控制功能 可以在使用用于劃分應(yīng)用元素的模塊133-1單獨在用戶終端裝置100和顯示裝置200上顯 示經(jīng)劃分的屏幕的情況下自適應(yīng)地執(zhí)行每個屏幕。用于應(yīng)用操作布局圖案的模塊133-3可 以動態(tài)地劃分屏幕并顯示經(jīng)劃分的屏幕，并進一步包括使經(jīng)劃分的屏幕適合屏幕的大小的 功能。例如，參照圖8A，正在用戶終端裝置100上顯示的執(zhí)行屏幕可以被劃分成五個元素 810、820、830、840、850。圖8B示出了動態(tài)劃分執(zhí)行屏幕的情況。在用戶終端裝置100上可 以顯示經(jīng)劃分的元素中的三個元素810、830、850,并且在顯示裝置200上可以顯示剩余的 兩個元素820、840。圖8C示出了動態(tài)劃分執(zhí)行屏幕并且使經(jīng)劃分的屏幕適合屏幕的大小的 情況。用戶終端裝置100在重新配置之前根據(jù)顯示器110的大小改變屏幕的大小和排列結(jié) 構(gòu)，并顯示三個元素820'、830'、840'。顯示裝置200還根據(jù)屏幕的大小，以比原始大小更大 的大小來顯示兩個元素810'、850'。上文中，對根據(jù)屏幕的大小改變元素的大小進行了說 明，但是不限于此，因此還可以基于其他特性，諸如顯示器的分辨率，來改變元素的大小。
[0098] 用于排列自適應(yīng)文本的模塊133-4是這樣的模塊：在顯示裝置200上顯示包括文 本的網(wǎng)頁的情況下，為了用戶的可視性，根據(jù)擴大/縮小命令提供自動調(diào)整文本流的功能。 可以存在系統(tǒng)地一起使用用于劃分應(yīng)用頁面的模塊133-2和用于排列自適應(yīng)文本的模塊 133-4的情境。例如，在向顯示裝置200發(fā)送用于在用戶終端裝置100上顯示的文本屏幕并 且顯示文本屏幕的情況下，用于排列自適應(yīng)文本的模塊133-4可以提供將字體大小改變?yōu)?適合顯示裝置200的大小，并且改變文本以使得文本不會溢出顯示裝置200的寬度的功能。
[0099] 接口 140使用戶終端裝置100能夠從/向用戶接收/發(fā)送命令。例如，接口 140 可以是觸摸屏或鍵盤等。根據(jù)示例性實施例，在顯示裝置200不支持用戶輸入的情況下，接 口 140可以接收用戶終端裝置100中的用戶輸入，并且通過通信器120向顯示裝置200發(fā) 送與用戶輸入對應(yīng)的數(shù)據(jù)。此外，在顯示裝置200的大小較小并因此難以直接觸摸屏幕和 編輯屏幕的情況下，可以存在在接口 140中從用戶接收屏幕編輯命令的輸入并且編輯顯示 裝置200的屏幕的示例性實施例。
[0100] 音頻輸出器150可以輸出正在用戶終端裝置100上執(zhí)行的應(yīng)用的語音信號。
[0101] 相機160使能提供圖像拍攝和視頻拍攝功能的應(yīng)用以執(zhí)打拍攝。此外，相機160 可以與接口 140-起執(zhí)行用戶運動的識別。例如，在用戶執(zhí)行與復(fù)制模式相對應(yīng)的手部運 動操作的情況下，相機160可以拍攝用戶的手部動作操作并且將它提供給接口 140或控制 器 170。
[0102] 控制器170控制顯示器110、通信器120、存儲器130、接口 140、音頻輸出器150和 相機160?？刂破?70可以包括只讀存儲器（ROM)或隨機存取存儲器（RAM)，其存儲用于控 制CPU和用戶終端裝置100的模塊和數(shù)據(jù)。在這種情況下，上述的用于管理顯示屬性的模 塊131、用于管理應(yīng)用屬性的模塊132、以及用于重新配置屏幕的模塊133可以存儲在控制 器170中。
[0103] 當(dāng)顯示器110顯示應(yīng)用的執(zhí)行屏幕的時候，通過通信器120與顯示裝置200配對 時，控制器170獲取關(guān)于顯示裝置200的信息，并且基于關(guān)于正在由用戶終端裝置100執(zhí)行 的應(yīng)用的信息和獲得的關(guān)于顯示裝置200的信息中的至少一條信息，控制顯示器110顯示 關(guān)于應(yīng)用的第一屏幕，并且控制通信器120向顯示裝置200發(fā)送關(guān)于應(yīng)用的第二屏幕的數(shù) 據(jù)。
[0104] 更具體地，基于使用用于劃分應(yīng)用元素的模塊133-1獲得的、關(guān)于正在用戶終端 裝置100上執(zhí)行的應(yīng)用的信息，控制器170可以將應(yīng)用執(zhí)行屏幕劃分成多個元素。利用劃 分的元素中的一些來配置第一屏幕，而且利用劃分的元素中的其余元素來配置第二屏幕。
[0105] 根據(jù)示例性實施例，如圖9A所示，由包括視頻910的部分和包括文本920的部分 組成的執(zhí)行屏幕可以在用戶終端裝置100上顯示。在將執(zhí)行屏幕劃分成多個元素之前，必 須識別關(guān)于顯示類型和屬性的信息。例如，假設(shè)圖9B中所示的用戶終端裝置100是具有 由0LED組成的顯示器110的裝置，而且顯示裝置200是由電子紙組成的裝置。0LED的特 征在于，在表示白色時消耗大量功率，而電子紙的特征在于，難以顯示需要快速屏幕轉(zhuǎn)換的 內(nèi)容，諸如視頻。因此，根據(jù)每個部分的這種色彩屬性和每個部分的屏幕更新速度，控制器 170可以將應(yīng)用執(zhí)行屏幕劃分成包括視頻的元素910,而且包括文字的元素920是經(jīng)劃分的 屏幕的剩余部分。此外，控制器170可以控制以使得，第一屏幕利用包括視頻的元素910來 配置，然后在用戶終端裝置100上顯示，并且第二屏幕利用包括文本的元素920來配置，然 后由通信器120將關(guān)于第二屏幕的數(shù)據(jù)發(fā)送到顯示裝置200。
[0106] 根據(jù)示例性實施例，圖10是示出正在由用戶終端裝置100和顯示裝置200顯示的 一個電子書屏幕的視圖。電子書屏幕可以包括具有顏色的圖片部分1010和顯示文本的部 分1020。此外，圖片部分1010可以被圖片、視頻內(nèi)容和交互內(nèi)容等替換，或者一起包括圖 片、視頻內(nèi)容和交互內(nèi)容等等。假設(shè)圖10中所示的用戶終端裝置100是顯示器110由0LED 組成的裝置而且顯示裝置200是包括電子紙的裝置，色彩或視頻應(yīng)該在0LED顯示器上顯 示，而排列大量白色的文本部分應(yīng)該在消耗更少功率的電子紙上顯示。因此，在劃分電子書 屏幕時，第一屏幕利用包括圖片部分的元素1010配置并且在用戶終端裝置100上顯示，而 且第二屏幕利用包括文本部分的元素1020配置并且在顯示裝置200上顯示。這將是重新 配置屏幕的有效方法。
[0107] 根據(jù)示例性實施例，控制器170可以控制顯示器100保持將正在用戶終端裝置100 上執(zhí)行的應(yīng)用的執(zhí)行屏幕顯示為第一屏幕，并控制通信器120向顯示裝置200發(fā)送關(guān)于第 二屏幕的數(shù)據(jù)，該第二屏幕包括關(guān)于執(zhí)行屏幕的附加信息。
[0108] 圖11是用于說明總結(jié)網(wǎng)絡(luò)瀏覽器屏幕并顯示網(wǎng)絡(luò)瀏覽器屏幕的示例性實施例的 視圖。參照圖11，網(wǎng)絡(luò)瀏覽器應(yīng)用正在用戶終端裝置100上執(zhí)行，并且網(wǎng)頁屏幕1110正在 顯示器110上顯示。可以識別網(wǎng)頁屏幕110的內(nèi)容，總結(jié)作為網(wǎng)頁屏幕1110的主要內(nèi)容的 諸如"日內(nèi)瓦"和"車展"的內(nèi)容，并配置將要在顯示裝置200上顯示的第二屏幕1120。在 識別和總結(jié)文本時，可以使用自然語言處理技術(shù)。為了用戶的可視性，存在與詞語的出現(xiàn)次 數(shù)成比例地增大字體大小的方法。配置第二屏幕1120的信息的更新周期可以是在用戶終 端裝置100中每次刷新網(wǎng)絡(luò)頁面時更新，或者在每個預(yù)定的時間段更新。圖11中所示的示 例性實施例可以提供增加文本對于用戶的可視性的效果。
[0109] 圖12是示出總結(jié)并顯示電子書的內(nèi)容的示例性實施例的視圖。參照圖12,電子 書執(zhí)行屏幕1210正在用戶終端裝置100上顯示，而且電子書執(zhí)行屏幕1210的內(nèi)容被總結(jié) 為幾個句子的屏幕1220正在顯示裝置200上顯示?？偨Y(jié)屏幕1220的更新周期可以是每當(dāng) 改變正在用戶終端裝置100上執(zhí)行的電子書的頁面的時候被更新。如果正在用戶終端裝置 1〇〇上執(zhí)行的電子書應(yīng)用是通過滾動轉(zhuǎn)換內(nèi)容的一種類型的應(yīng)用，則也可以提供在每個預(yù) 定周期更新的方法。為了識別電子書的內(nèi)容，可以應(yīng)用自然語言處理方法。圖12僅示出了 顯示其中電子書的內(nèi)容被總結(jié)為句子的屏幕1220的情況，但是內(nèi)容可以被表示為圖片或 圖標(biāo)以便很容易地被用戶識別。
[0110] 圖13是示出圖形化地顯示日程應(yīng)用的內(nèi)容的示例性實施例的視圖。參照圖13,執(zhí) 行包括日程的日歷應(yīng)用的屏幕1310正在用戶終端裝置100上顯示，而且具有卡通格式的與 日程的內(nèi)容有關(guān)的整個旅程的第二屏幕1320正在顯示裝置200上顯示。為了以卡通格式 配置旅程，不僅考慮日程的內(nèi)容，而且可以一起考慮關(guān)于在日歷應(yīng)用中收集記錄的特征的 信息以及關(guān)于它是否是緊急旅程的信息。第二屏幕1320可以不必以卡通格式配置。第二 屏幕1320可以使用在相應(yīng)旅程的日期由相機160拍攝的圖片進行配置。
[0111] 圖14是示出顯示與照片有關(guān)的元信息的示例性實施例的視圖。與照片有關(guān)的元 信息可以包括照片的分辨率、大小和格式，以及拍攝日期和拍攝裝置信息。參照圖14,示出 照片的圖庫應(yīng)用的執(zhí)行屏幕1410正在用戶終端裝置100上顯示，而且由正在第一屏幕1410 上顯示的照片的元信息組成的第二屏幕1420正在顯示裝置200上顯示。期望的是，正在第 二屏幕1420上顯示的元信息的更新周期是在用戶終端裝置100中每次選擇單個照片時更 新。根據(jù)另一示例性實施例，在顯示裝置200中也可以做出用戶輸入的情況下，當(dāng)一定的元 信息值在第二屏幕1420上被選擇和搜索時，第一屏幕1410可以利用存儲在用戶終端裝置 100中的照片中與搜索條件相對應(yīng)的照片來配置并被顯示。例如，在根據(jù)具有5月15日為 拍攝時間的元信息來實行搜索的情況下，如果在存儲在用戶終端裝置100中的照片當(dāng)中存 在四個拍攝于5月15日的照片的情況下，第一屏幕1410可以被配置以使得四個照片以格 子格式或直線格式排列并被顯示。
[0112] 根據(jù)示例性實施例，在用戶終端裝置100上正在顯示的應(yīng)用的執(zhí)行屏幕包括視頻 內(nèi)容的情況下，控制器170可以控制通信器120向顯示裝置200發(fā)送關(guān)于視頻內(nèi)容的信息 的數(shù)據(jù)以及包括字幕的第二屏幕。本文中，關(guān)于視頻內(nèi)容的信息可以包括故事情節(jié)信息、關(guān) 于導(dǎo)演或男演員/女演員的信息、以及關(guān)于更新下一演出的視頻內(nèi)容的數(shù)據(jù)的信息。例如， 在獲得故事情節(jié)信息的方法中，信息可以以在用戶終端裝置100的背景中訪問因特網(wǎng)的方 法來獲得并提供。另外，可以使用包含在視頻內(nèi)容中的信息。圖15是示出顯示關(guān)于視頻或 字幕的信息的示例性實施例的視圖。參照圖15,可以再現(xiàn)視頻內(nèi)容的視頻播放器應(yīng)用的執(zhí) 行屏幕1510正在用戶終端裝置100上顯示。在顯示裝置200上，正在用戶終端裝置100上 顯示的視頻內(nèi)容的字幕正在第二屏幕1520中顯示。電子紙具有最慢的響應(yīng)速度而且也具 有足以顯示字幕的屏幕更新速度，并且因此顯示字幕的示例性實施例可以在任何顯示類型 的顯示裝置200中實施。
[0113] 根據(jù)另一示例性實施例，在用于顯示網(wǎng)頁的應(yīng)用正在用戶終端裝置100上執(zhí)行的 情況下，可以幫助閱讀網(wǎng)頁的內(nèi)容可以在顯示裝置200上顯示。在使用用戶終端裝置100閱 讀網(wǎng)頁的時候想要搜索相關(guān)詞語的解釋的情況下，用戶遇到停止網(wǎng)絡(luò)瀏覽以便將正在顯示 網(wǎng)頁的屏幕轉(zhuǎn)換到用于搜索詞語的屏幕的不便。然而，如果可以在顯示裝置200中搜尋相 關(guān)詞語，則用戶將能夠獲得相關(guān)信息而不停止網(wǎng)絡(luò)瀏覽。圖16是示出用于顯示與網(wǎng)絡(luò)瀏覽 器屏幕有關(guān)的幫助信息的示例性實施例的視圖。網(wǎng)絡(luò)瀏覽器應(yīng)用的執(zhí)行屏幕1610正在用 戶終端裝置100中顯示，而且包括關(guān)于網(wǎng)絡(luò)瀏覽器屏幕1610中的內(nèi)容"概念車"的詞匯表 信息的第二屏幕1620正在顯示裝置200上顯示。需要詞匯表信息的部分可以自動地從網(wǎng) 頁1610的內(nèi)容中選擇，或者它可以由用戶通過接口 140從第一屏幕1610輸入的觸摸來選 擇。例如，在用戶從第一屏幕1610的內(nèi)容選擇"日內(nèi)瓦國際車展"部分的情況下，關(guān)于"日 內(nèi)瓦國際車展"的信息可以在第二屏幕1620上顯示。配置第二屏幕1620所需的信息可以 從存儲在用戶終端裝置100中的字典應(yīng)用、或通過互聯(lián)網(wǎng)訪問來獲得。在自動地選擇需要 詞匯表信息的部分的情況下，信息更新周期可以是在在用戶終端裝置100中每次刷新網(wǎng)頁 1610時更新，或者可以被更新以使得關(guān)于其他詞語的詞匯表信息在確定的時間過去時被顯 示。在用戶選擇需要詞匯表信息的部分的情況下，信息更新周期可以被選擇以使得在出現(xiàn) 另一用戶輸入前不執(zhí)行更新。
[0114] 圖17是示出用于顯示與電子書的內(nèi)容有關(guān)的幫助信息的示例性實施例的視圖。 參照圖17,電子書應(yīng)用的執(zhí)行屏幕1710正在用戶終端裝置100上顯示，而且關(guān)于在電子書 中出現(xiàn)的詞語的英語字典信息在顯示裝置200上提供。在電子書中出現(xiàn)的詞語"H_"，它 是"Swing"的韓語詞，一起顯示在第二屏幕1720上。關(guān)于構(gòu)成第二屏幕1720的電子書的 信息可以包括字典、關(guān)于相關(guān)詞語的詞匯表信息、書簽、重點和備忘錄，但并不限于此。需要 詞匯表信息和字典搜索的部分可以從電子書的內(nèi)容自動選擇，或者可以由用戶來選擇。字 典搜索可以基于個人化的數(shù)據(jù)庫使用現(xiàn)有的字典搜索歷史以定制的方式操作。信息更新周 期可以在用戶終端裝置100中每次轉(zhuǎn)換電子書的頁面時進行。然而，對于如果諸如書簽、重 點和備忘錄的信息被與頁面轉(zhuǎn)換無關(guān)地顯示，則用戶發(fā)現(xiàn)剛方便，更新周期可以被設(shè)置以 使得在一定的用戶輸入之前不進行更新。
[0115] 安裝在用戶終端裝置100的相機160上的相機裝置的性能正在逐漸提高，而且用 戶使用用戶終端裝置100拍攝圖像已經(jīng)變?yōu)槠毡樽龇?。然而，由于普通用戶不具有拍攝角 度或構(gòu)圖的專業(yè)知識，因此向用戶提供有關(guān)拍攝角度或構(gòu)圖的信息可以是有用的體驗。圖 18是示出在拍攝照片時顯示構(gòu)圖信息的示例性實施例的視圖。通過相機160顯示的拍攝屏 幕1810正在用戶終端裝置100上顯示。在用戶終端裝置100中提供構(gòu)圖信息的情況下，拍 攝屏幕1810和構(gòu)圖信息屏幕必須交替可見，并因此用戶要依賴于他/她的記憶，這是不方 便的。通過向顯示裝置200提供關(guān)于同一地點的構(gòu)圖草圖屏幕1820,用戶終端裝置100使 得用戶能夠更容易地拍攝與推薦的構(gòu)圖相對應(yīng)的照片。具體地，在著名的旅游景點的情況 下，使用可以包括在用戶終端裝置100中的GPS裝置，將有可能向用戶提供關(guān)于用戶當(dāng)前所 在的旅游點的代表性照片構(gòu)圖的信息。
[0116] 根據(jù)另一示例性實施例，在用戶終端裝置100中執(zhí)行消息應(yīng)用的情況下，與對方 先前會話的記錄、周年紀(jì)念日或事件信息可以在顯示裝置200的第二屏幕上顯示。在顯示 裝置200上顯示先前會話的記錄可以幫助用戶與對方進行不間斷的會話，并防止用戶在會 話期間犯錯。
[0117] 根據(jù)示例性實施例，當(dāng)存在指示復(fù)制模式的用戶輸入時，控制器170可以控制顯 示器110不顯示第一屏幕，并且可以當(dāng)存在指示復(fù)制模式的用戶輸入時控制通信器120向 顯示裝置200發(fā)送應(yīng)用關(guān)于應(yīng)用執(zhí)行屏幕的數(shù)據(jù)。
[0118] 圖19A是示出在網(wǎng)絡(luò)瀏覽器中存在指示復(fù)制模式的用戶輸入的情況的視圖。參照 圖19A，為了指示復(fù)制模式，用戶使用他/她的手在用戶終端裝置100上執(zhí)行擦動（scrub) 操作。通過使用接口 140或相機160的關(guān)于用戶動作的動作識別操作，用戶終端裝置100識 別存在關(guān)于復(fù)制模式的用戶命令。指示復(fù)制模式的用戶輸入可以是不同類型的預(yù)定操作。 預(yù)定操作可以是使用觸摸屏或鍵盤等的用戶輸入，而不是動作識別。參照圖19B，當(dāng)存在圖 19A中的關(guān)于復(fù)制模式的用戶輸入時在用戶終端裝置100上顯示的屏幕1910被原樣復(fù)制到 顯示裝置200,然后第二屏幕1910被配置并顯示。在屏幕根據(jù)復(fù)制模式操作被復(fù)制到顯示 裝置200之后，在用戶終端裝置100上可以什么都不顯示。然而，不同于圖19B所示，可以 存在這樣的示例性實施例：應(yīng)用的執(zhí)行屏幕在用戶終端裝置100上繼續(xù)顯示，而且當(dāng)存在 指示復(fù)制模式的用戶輸入時只有應(yīng)用的執(zhí)行屏幕被復(fù)制到顯示裝置200。使用復(fù)制模式的 目的之一是降低功耗。在與比用戶終端裝置100消耗更少功率的顯示裝置200配對的情況 下，可以使消耗更少功率的顯示裝置顯示先前在用戶終端裝置100上顯示的屏幕，而且使 用戶終端裝置100什么都不顯示，從而降低了功耗總量。
[0119] 相比于顯示頻繁地更新的內(nèi)容（諸如視頻），復(fù)印模式可能在靜態(tài)屏幕（諸如網(wǎng) 頁和電子書）中更加有用。圖20是用于說明在電子書中執(zhí)行復(fù)制模式的示例性實施例的 視圖。在顯示裝置200中，當(dāng)存在指示復(fù)制模式的用戶輸入時，用于在用戶終端裝置上顯示 的電子書屏幕被復(fù)制以配置第二屏幕2010然后被顯示。用于在用戶終端裝置上顯示的屏 幕不再被顯示。例如，在電子書的情況下，由于用戶讀取信件，所以用戶將能夠通過使用眼 睛滾動（這是使用人體的眼睛的運動識別）更容易地指示復(fù)制模式，而無需執(zhí)行附加的操 作。根據(jù)另一示例性實施例，在用戶終端裝置1〇〇的相機160識別到用戶讀完被復(fù)制并被 顯示在顯示裝置200上的電子書屏幕2010的情況下，控制器170可以直接向顯示裝置200 發(fā)送與下一頁相對應(yīng)的數(shù)據(jù)，而無需在用戶終端裝置100上再次顯示屏幕的操作。根據(jù)另 一示例性實施例，可以提供連同傳感器來執(zhí)行復(fù)制模式的功能。在短暫地關(guān)閉和打開用于 通過用戶終端裝置100顯示的屏幕的情況下，用于在用戶終端裝置100上顯示的第一屏幕 可以被復(fù)制到顯示裝置200的第二屏幕并被顯示?？刂破?70將能夠識別：關(guān)閉和打開顯 示裝置的操作是使用利用磁原理的霍爾傳感器、照度傳感器、方向/位置傳感器和相機160 執(zhí)行的。此外，還可以存在當(dāng)使用用于確定顯示器之間的連接角度的模塊131-3確定連接 角度為0°時，確定存在指示復(fù)制模式的用戶命令的方法。
[0120] 根據(jù)示例性實施例，當(dāng)顯示裝置200不支持用戶輸入或者由于它較小的大小而難 以編輯屏幕時，控制器170可以控制通信器120向顯示裝置200發(fā)送與用戶輸入或屏幕編 輯命令相對應(yīng)的數(shù)據(jù)。
[0121] 圖21是示出支持觸摸輸入的示例性實施例的視圖。參照圖21，顯示裝置200是不 支持諸如觸摸的用戶輸入的顯示裝置。用戶將與頁面轉(zhuǎn)換相對應(yīng)的觸摸輸入到用戶終端裝 置的屏幕2110,而且控制器170控制通信器120向顯示裝置200發(fā)送與用于轉(zhuǎn)換頁面的用 戶輸入相對應(yīng)的數(shù)據(jù)。使得顯示裝置200基于接收到的用戶輸入數(shù)據(jù)在第二屏幕中執(zhí)行轉(zhuǎn) 換頁面的操作。這樣的通過用戶終端裝置中的觸摸輸入控制顯示裝置200的功能可以在模 塊中配置。執(zhí)行這樣的功能的顯示裝置觸摸輸入模塊131-5 (未示出）可以被包括在用于 管理顯示屬性的模塊131中。
[0122] 根據(jù)另一示例性實施例，用戶可以通過用戶終端裝置100執(zhí)行顯示裝置200的屏 幕編輯。圖22是示出支持屏幕編輯功能的示例性實施例的視圖。在圖22中所示的顯示裝 置200是具有小屏幕的裝置（諸如智能手表）的情況下，即使顯示裝置支持用戶輸入，使 用具有更大屏幕的用戶終端裝置100來編輯屏幕也是更容易的。此外，即使在不提供屏幕 編輯功能的顯示裝置200的情況下，也可以應(yīng)用提供屏幕編輯功能的示例性實施例。假設(shè) 顯示裝置200在處于空閑屏幕或主頁屏幕狀態(tài)下的時候選擇性地只顯示一些信息，由于始 終要被顯示的窗口小部件信息對于每個用戶而言可能有所不同，因此需要個人化窗口小部 件屏幕。通過提供用于在用戶終端裝置100的主頁屏幕編輯模式內(nèi)編輯已配對的顯示裝置 200的窗口小部件的屏幕、并且在用戶終端裝置100中編輯與顯示裝置200相對應(yīng)的窗口小 部件，可以使對應(yīng)的內(nèi)容實時地反映在顯示裝置中。舉另一例子，即使在使用電子紙作為顯 示裝置200的情況下，可以支持在進入電子紙布局模式時通過拖放改變位置、或者插入/刪 除專用于電子紙的小工具。此外，當(dāng)輸入后退按鈕時，可以使布局改變以便自動地反映在電 子紙中。
[0123] 根據(jù)示例性實施例，在用戶終端裝置100中執(zhí)行拍攝照片的應(yīng)用的情況下，可以 一起記錄周圍聲音，并使文本屏幕以聲音到文本（STT)格式實時顯示在顯示裝置200上。參 照圖23,通過相機160顯示的屏幕2310可以在用戶終端裝置100上顯示以用于拍攝。根據(jù) 用戶的語音使用用戶區(qū)分技術(shù)（userdifferentiationtechnology)和STT技術(shù)，在顯示 裝置200上顯示示出了拍攝期間兩個人之間進行的會話的文本的屏幕2320。此外，通過存 儲顯示在顯示裝置200上的文本并且稍后提供它，用戶可以在拍攝期間使用所存儲的文本 來識別氣氛。在顯示裝置200的顯示類型是具有較慢更新速度的類型（諸如電子紙）的情 況下，可能無法實時反映文本。因此，在顯示裝置200是電子紙類型的情況下，通過僅更新 在實時會話期間更新的部分，可以去除在一次全部更新整個屏幕時可能出現(xiàn)的問題。
[0124] 根據(jù)另一示例性實施例，在用戶終端裝置100的可用電池電力下降到一定級別以 下的情況下，可以進行轉(zhuǎn)換以使得用于在用戶終端裝置100上顯示的屏幕被自動顯示在顯 示裝置200上。本文中，可以添加僅當(dāng)用戶想要的時候才使屏幕顯示在用戶終端裝置100上 的特征。根據(jù)另一示例性實施例，在用戶終端裝置300如圖29B所示具有兩個顯示器310、 320的情況下，可以使第一顯示器310作為正常時的主顯示器，然后如果可用的電池下降到 一定級別以下，則使比第一顯示器310消耗更小功率的第二顯示器320顯示屏幕。
[0125] 根據(jù)示例性實施例，在用戶終端裝置100中配置窗口小部件屏幕的情況下，控制 器170可以控制通信器120向顯示裝置200發(fā)送關(guān)于經(jīng)配置的窗口小部件屏幕的數(shù)據(jù)。參 照圖24A，在用戶終端裝置100中配置的窗口小部件屏幕2420在顯示裝置200上顯示，而 且主頁屏幕2410在用戶終端裝置100上顯示。在用戶終端裝置100(諸如智能電話）中， 可以向左和向右滾動主頁屏幕以配置各種屏幕，并進一步將這些屏幕之一編輯為窗口小部 件屏幕。用戶配置窗口小部件屏幕的原因是，根據(jù)每個用戶的使用形式，將各種應(yīng)用制成窗 口小部件，并方便地使用窗口小部件。因此，通過使由用戶頻繁使用的應(yīng)用組成的窗口小部 件屏幕2420始終在顯示裝置200上顯示，即使當(dāng)在用戶終端裝置100中使用不同的主頁屏 幕的時候，也可以快速使用內(nèi)容。即使當(dāng)用戶終端裝置100顯示如圖24B所示的鎖定屏幕 2410'時，可以使得顯示裝置200顯示窗口小部件屏幕2420'。更新窗口小部件屏幕的信息 可以恰好在轉(zhuǎn)換到鎖定屏幕之前進行以包括最新的信息，或者可以在每次對主頁屏幕進行 轉(zhuǎn)換時被更新。此外，在配置以使得當(dāng)用戶終端裝置100被開機的情況時對主頁屏幕進行 轉(zhuǎn)換而且當(dāng)用戶終端裝置100被關(guān)機情況時對鎖定屏幕進行轉(zhuǎn)換的情況下，可以使用霍爾 傳感器或照度傳感器來識別打開/關(guān)閉的情況，并且因此可以配置為每當(dāng)被打開的情況時 更新窗口小部件彳目息。
[0126] 根據(jù)另一示例性實施例，即使當(dāng)用戶終端裝置100的屏幕關(guān)閉時，消息或電子 郵件應(yīng)用也接收數(shù)據(jù)。每當(dāng)接收消息時開啟用戶終端裝置100的屏幕可能需要較高功 耗。因此，顯示裝置200可以被配置為在鎖定屏幕狀態(tài)期間以窗口小部件格式綜合地 (comprehensively)顯示到達的消息或電子郵件信息。參照圖25,用戶終端裝置100的屏幕 處于鎖定屏幕狀態(tài)，并因此什么都沒有顯示，而顯示裝置200顯示由窗口小部件組成的屏 幕2510,該窗口小部件綜合地顯示消息的內(nèi)容。在顯示裝置200上顯示的窗口小部件屏幕 2510是應(yīng)用各種數(shù)據(jù)可視化方法之一在一個屏幕上顯示各種數(shù)據(jù)的例子。可以存在各種可 視化方法，包括窗口小部件屏幕被提供為根據(jù)接收消息的時間的列表，但是不限于圖25所 示的例子。
[0127] 上述各種示例性實施例是當(dāng)顯示器之間的連接角度是大約180° (這是一般的情 況）時進行的實施例。然而，示例性實施例可以不必在大約180°的連接角度的情況下進 行。在下文中，將說明具有大約270°或360°的顯示器的連接角度的示例性實施例。
[0128] 在確定顯示器之間的連接角度大約為270°的情況下，控制器170可以控制以使 得在顯示裝置200上顯示的窗口小部件屏幕被更新。為了便于說明，假設(shè)有線連接的情況， 對于用于發(fā)現(xiàn)連接角度為270°的方法，可以將用戶終端裝置100和顯示裝置200之間的 連接的部分配置為包括壓電元件，以便發(fā)現(xiàn)兩個裝置之間的角度。另外，可以存在這樣的方 法：將經(jīng)由線纜連接的用戶終端裝置100和顯示裝置200設(shè)置在桌子上，然后通過用戶終端 裝置100的方向傳感器識別用戶終端裝置100放置在桌子上的角度。除了上述方法，可以 應(yīng)用用于識別用戶終端裝置100和顯示裝置200之間的連接角度的各種方法。
[0129] 在顯示器之間的連接角度是360°的情況下，將一般觸摸輸入與后方（rear)觸摸 輸入?yún)^(qū)分開是很重要的。用戶終端裝置100使用用戶終端裝置100的方向傳感器識別用戶 終端裝置的方向，并且還連同相機160識別朝向用戶的裝置是用戶終端裝置100還是顯示 裝置200。當(dāng)用戶終端裝置100朝向用戶的相反方向時做出的觸摸輸入被確定為后方觸摸 輸入。根據(jù)示例性實施例，在用戶終端裝置1〇〇和顯示裝置200通過360°的連接角度配對 而且顯示裝置200不支持用戶輸入的情況下，當(dāng)對用戶終端裝置100做出后方觸摸輸入時， 認(rèn)識到已經(jīng)指示復(fù)制模式，控制器170可以控制以使得正在用戶終端裝置100上顯示的屏 幕在顯示裝置200中顯示。通過上述的用戶終端裝置100,提供了用戶終端裝置100與顯示 裝置200配對的各種示例性實施例。通過這樣的配對，用戶可以獲得諸如擴展顯示屏幕、最 大化可視性和高效的功耗的效果。
[0130] 在下文中，將參照圖26和圖27對用戶終端裝置的控制方法進行說明。
[0131] 圖26是示出根據(jù)示例性實施例的用戶終端裝置的控制方法的流程圖。首先，用 戶終端裝置執(zhí)行應(yīng)用，并且在用戶終端裝置上顯示應(yīng)用的執(zhí)行屏幕（操作S2610)。為了 重新配置正在用戶終端裝置上顯示的屏幕，用戶終端裝置需要與外部顯示裝置進行配對。 用戶終端裝置確定它是否與外部顯示裝置配對（操作S2620)。如果確定未作出配對（操 作S2620-否），則可以繼續(xù)監(jiān)測是否進行配對。如果確定做出與外部顯示裝置的配對（操 作S2620-是），則用戶終端裝置接收關(guān)于與用戶終端裝置配對的顯示裝置的信息（操作 S2630)。本文中，關(guān)于顯示裝置的信息可以包括顯示裝置的顯示類型、分辨率、響應(yīng)速度、色 彩、色調(diào)，可視角度、色彩范圍、連接角度、和連接狀態(tài)中的至少一個。用戶終端裝置基于獲 得的顯示裝置200的信息和關(guān)于正在用戶終端裝置上執(zhí)行的應(yīng)用的信息來顯示關(guān)于應(yīng)用 的第一屏幕，并且向配對的顯示裝置發(fā)送關(guān)于應(yīng)用的第二屏幕的數(shù)據(jù)。本文中，關(guān)于應(yīng)用的 信息可以包括應(yīng)用的類別、每個部分的色彩屬性、和每個部分的屏幕更新速度中的至少一 個。
[0132] 根據(jù)示例性實施例，用戶終端裝置可以繼續(xù)顯示用于在用戶終端裝置上執(zhí)行的應(yīng) 用的執(zhí)行屏幕作為第一屏幕，并向顯示裝置發(fā)送關(guān)于第二屏幕的數(shù)據(jù)，該第二屏幕包括關(guān) 于應(yīng)用的執(zhí)行屏幕的附加信息。根據(jù)另一示例性實施例，在應(yīng)用的執(zhí)行屏幕包括文本的情 況下，可以向顯示裝置發(fā)送有關(guān)第二屏幕的數(shù)據(jù)，該數(shù)據(jù)包括總結(jié)了所包含的文本的內(nèi)容 的文本或圖像。根據(jù)另一示例性實施例，在應(yīng)用的執(zhí)行屏幕包括視頻內(nèi)容的情況下，可以向 顯示裝置發(fā)送有關(guān)第二屏幕的數(shù)據(jù)，該數(shù)據(jù)包括關(guān)于所包含的視頻內(nèi)容的信息或字幕。
[0133] 根據(jù)示例性實施例，在存在指示復(fù)制模式的用戶輸入的情況下，用戶終端裝置可 以不顯示第一屏幕，而是向顯示裝置發(fā)送有關(guān)當(dāng)存在指示復(fù)制模式的用戶輸入時的應(yīng)用的 執(zhí)行屏幕的數(shù)據(jù)。通過另一示例，用戶終端裝置可以繼續(xù)顯示應(yīng)用的執(zhí)行屏幕顯示作為第 一屏幕，并且向顯示裝置發(fā)送有關(guān)當(dāng)存在指示復(fù)制模式的用戶輸入時的應(yīng)用的執(zhí)行屏幕的 數(shù)據(jù)。
[0134] 根據(jù)另一示例性實施例，在配對的顯示裝置不支持用戶輸入的情況下，還可以包 括向顯示裝置發(fā)送與用戶輸入對應(yīng)的數(shù)據(jù)的操作。
[0135] 圖27是用于詳細(xì)說明根據(jù)另一示例性實施例的用戶終端裝置的控制方法的流程 圖。用戶終端裝置執(zhí)行應(yīng)用，而且應(yīng)用的執(zhí)行屏幕在用戶終端裝置上顯示（操作S2710)。用 戶終端裝置與外部顯示裝置配對，并且變得能夠向用戶提供包括劃分屏幕的各種功能。用 戶終端裝置確定它是否與外部顯示裝置配對（操作S2720)。如果確定用戶終端裝置未與外 部顯示裝置配對（操作S2720-否），則用戶終端裝置繼續(xù)監(jiān)視是否做出配對。如果確定用 戶終端裝置與外部顯示裝置配對（操作S2720-是），則用戶終端裝置接收關(guān)于與用戶終端 裝置配對的顯示裝置的信息（操作S2730)。用戶終端裝置基于關(guān)于應(yīng)用的信息將正在用戶 終端裝置上執(zhí)行的應(yīng)用的執(zhí)行屏幕劃分成多個元素（操作S2740)。利用接收到的關(guān)于顯示 裝置的信息和關(guān)于應(yīng)用的信息，用戶終端裝置基于元素應(yīng)該在哪個裝置上顯示來確定每個 劃分的元素應(yīng)該是第一屏幕的組件還是第二屏幕的組件，以最大化可視性和功耗效率（操 作S2750)。如果確定每個劃分的元素是應(yīng)該在用戶終端裝置上顯示的元素，則該元素被配 置在第一屏幕中并在用戶終端裝置上顯示（操作S2760)，但是，如果確定每個劃分的元素 是應(yīng)該在顯示裝置上顯示的元素，則該元素被配置在第二屏幕中而且用戶終端裝置向顯示 裝置發(fā)送有關(guān)第二屏幕的數(shù)據(jù)（操作S2770)。
[0136] 根據(jù)另一示例性實施例，當(dāng)用戶將應(yīng)用的執(zhí)行屏幕劃分成多個元素時，用戶可以 基于每個部分的屏幕更新速度劃分成應(yīng)用的執(zhí)行屏幕，利用多個劃分的元素中包括視頻的 元素來配置第一屏幕并在用戶終端裝置上顯示第一屏幕，而且利用多個劃分的元素中的其 余元素來配置第二屏幕。
[0137] 根據(jù)另一示例性實施例，用戶終端裝置可以基于每個部分的色彩屬性將應(yīng)用的執(zhí) 行屏幕劃分成多個元素。此外，用戶終端裝置可以利用多個劃分的元素中的第一色彩的元 素來配置第一屏幕，并且利用多個劃分的元素中的第二色彩的元素來配置第二屏幕。例如， 在用戶終端裝置的顯示類型是0LED，而且配對的顯示裝置的顯示類型是電子紙的情況下， 當(dāng)白色元素在0LED中顯示時，功耗由于自發(fā)光發(fā)射特性而增加，并且因此利用白色元素配 置第二屏幕并在顯示裝置（它是電子紙類型顯示器）上顯示第二屏幕在功耗效率方面是有 利的。
[0138] 由于上述的用戶終端裝置的控制方法，用戶可以體驗擴展的顯示環(huán)境，并且可以 重新配置可以更方便地使用的應(yīng)用的執(zhí)行屏幕。
[0139] 在下文中，將參照圖28對擴展的顯示系統(tǒng)的順序進行說明。
[0140] 參照圖28,擴展的顯示系統(tǒng)可以按照以下次序顯示第一屏幕和第二屏幕。首先，在 應(yīng)用的執(zhí)行屏幕正在用戶終端裝置100上顯示的情況下（操作S2810)，用戶終端裝置100 與顯示裝置200配對（操作S2820)。當(dāng)與用戶終端裝置100配對時，顯示裝置200向用戶 終端裝置100發(fā)送顯示裝置信息（操作S2830)。用戶終端裝置100基于從顯示裝置發(fā)送的 顯示裝置信息和關(guān)于正在執(zhí)行的應(yīng)用的信息來顯示關(guān)于應(yīng)用的第一屏幕（操作S2840)。
[0141] 此外，用戶終端裝置100向顯示裝置200發(fā)送關(guān)于應(yīng)用的第二屏幕。而且，顯示裝 置200使用接收到的關(guān)于第二屏幕的數(shù)據(jù)來顯示第二屏幕。
[0142] 上文中，僅對用戶終端裝置和顯示裝置每個只有一個顯示器的情況進行了說明， 但是上述示例性實施例不限于如上說明的兩個裝置。例如，上述示例性實施例可以應(yīng)用到 具有多個顯示器的用戶終端裝置，或者一個用戶終端裝置與多個顯示裝置配對的情況。圖 29A是示出具有多個顯示器310、320的用戶終端裝置300的視圖，而且圖29B是用于說明這 樣的用戶終端裝置300的框圖。在具有多個顯示器的用戶終端裝置300中，第一顯示器310 和第二顯示器320可以被配置為具有不同的顯示特性而且被應(yīng)用于上述示例性實施例。
[0143] 根據(jù)另一示例性實施例，諸如電子紙的顯示裝置可以被附接到用戶終端裝置殼體 的一側(cè)。圖30A是示出包括電子紙的用戶終端裝置殼體400的視圖。用戶終端裝置殼體 400可以包括顯示器410、連接器420、電路板430和控制器440。顯示器410可以由各種類 型的顯示裝置組成。下文中，為了便于說明，將對顯示裝置被配置為電子紙的情況進行說 明。在用戶終端裝置殼體400中，連接器420執(zhí)行連接用戶終端裝置100將被安裝到其上 的部分與將閉合用戶終端裝置100的部分的功能。連接器420可以被配置為柔性印刷電路 板（FPCB)，并使顯示器410和用戶終端裝置100能夠經(jīng)由線纜彼此連接和操作。此外，連接 器420的彎曲度可以使用壓電元件等測量，用戶終端裝置100可以確定自身與顯示器410 之間的連接角度。電路板430可以被放置在將要安裝用戶終端裝置100的位置中，并且控 制器440可以被包括在電路板430中。圖30B是示出安裝到用戶終端裝置殼體400的用戶 終端裝置100的視圖。如圖30B所示，當(dāng)使用用戶終端裝置100的顯示器110和用戶終端 裝置殼體400的顯示器410時，上述各種示例性實施例可以被應(yīng)用。當(dāng)使用用戶終端裝置 殼體400時，可以在便攜性方面得到改善用戶的便利性。
[0144] 圖31A是示出不同種類的用戶終端裝置殼體500的視圖。這個用戶終端裝置殼體 與圖30B中示出的用戶終端裝置殼體400的不同之處在于，顯示器510被附接在它的后側(cè)， 而且包括了電源裝置550。此外，用戶終端裝置殼體500可以包括發(fā)光器560和光接收器 570。圖31B是示出附接到用戶終端裝置殼體500的用戶終端裝置100的視圖。如圖31B 所示，當(dāng)用戶終端裝置殼體500被打開時，用戶可以觀看的屏幕僅是用戶終端裝置100的顯 示器110。因此，當(dāng)用戶終端裝置殼體500被打開時，用戶可以觀看的屏幕僅是用戶終端裝 置100的顯示器110。因此，當(dāng)用戶終端裝置殼體500被打開時，顯示器510不顯示屏幕， 但是可以由太陽能電池等組成的電源裝置550可以被充電以用在顯示器510中。當(dāng)用戶終 端裝置殼體500被關(guān)閉時，發(fā)光器560接觸用戶終端裝置100的相機以及其中安裝了相機 或光學(xué)傳感器的部分560'。此外，光接收器570被配置為對應(yīng)于用戶終端裝置的發(fā)光元件 570'。因此，在用戶終端裝置殼體500被閉合并覆蓋用戶終端裝置100的情況下，用戶終端 裝置殼體500可以使用發(fā)光器560和光接收器570向/從用戶終端裝置100發(fā)送/接收數(shù) 據(jù)，并且使用照度等識別連接角度。圖31C是示出用戶終端裝置殼體500被閉合的情況的 視圖。即使在用戶終端裝置殼體500被閉合情況下，用戶也可以使用附接在殼體外部的顯 示器510來檢查用戶終端裝置的窗口小部件屏幕100。關(guān)于在顯示器510上顯示的屏幕的 數(shù)據(jù)可以使用使用光接收器570和NFC標(biāo)簽（未示出）以無線通信方法、或者通過連接器 520以有線通信方法來接收。通過用戶終端裝置殼體500,可以執(zhí)行各種示例性實施例。具 體地，可以應(yīng)用連接角度為0°的情況的示例性實施例。
[0145] 此外，用于執(zhí)行根據(jù)各種示例性實施例的上述控制方法的程序代碼可以被存儲在 各種類型的記錄介質(zhì)中。更具體地，程序代碼可以被存儲在諸如RAM、閃存、ROM、可擦除可 編程ROM(EPROM)、電可擦除可編程ROM(EEPR0M)、寄存器、硬盤、可移動磁盤、存儲卡、USB存 儲器、CD-ROM等的各種類型的計算機可讀記錄介質(zhì)中。
[0146] 盡管已經(jīng)示出并描述了一些示例性實施例，但是本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解，在不 脫離本發(fā)明的原則和精神情況下，可以對示例性實施例進行改變，本發(fā)明的范圍由所附權(quán) 利要求及其等效物限定。
【權(quán)利要求】
1. 一種用戶終端裝置，包括： 顯示器，被配置為顯示應(yīng)用的執(zhí)行屏幕； 通信器，被配置為與顯示裝置執(zhí)行通信；以及 控制器，被配置為在顯示器顯示應(yīng)用的執(zhí)行屏幕的時候，響應(yīng)于用戶終端裝置正在通 過通信器與顯示裝置配對，獲取關(guān)于顯示裝置的信息，基于關(guān)于應(yīng)用的信息和獲得的關(guān)于 顯示裝置的信息中的至少一條信息來控制顯示器顯示應(yīng)用的第一屏幕，而且控制通信器向 顯示裝置發(fā)送應(yīng)用的第二屏幕的數(shù)據(jù)。
2. 如權(quán)利要求1所述的用戶終端裝置， 其中，關(guān)于顯示裝置的信息包括顯示裝置的顯示類型、分辨率、響應(yīng)時間、色彩、色調(diào)、 可視角度、色彩范圍、連接角度和連接狀態(tài)中的至少一個，以及 關(guān)于應(yīng)用的信息包括應(yīng)用的類別、每個部分的色彩屬性和每個部分的屏幕更新速度中 的至少一個。
3. 如權(quán)利要求1所述的用戶終端裝置， 其中，所述控制器基于關(guān)于應(yīng)用的信息將正在顯示器上顯示的應(yīng)用的執(zhí)行屏幕劃分為 多個元素，利用所述多個劃分的元素中的第一集合來配置第一屏幕，而且利用所述多個劃 分的元素中的第二集合來配置第二屏幕。
4. 如權(quán)利要求3所述的用戶終端裝置， 其中，所述控制器基于每個部分的屏幕更新速度將正在顯示器上顯示的應(yīng)用的執(zhí)行屏 幕劃分為多個元素，利用所述多個劃分的元素中的包括視頻的元素來配置第一屏幕，而且 利用除了包括視頻的元素外的元素來配置第二屏幕。
5. 如權(quán)利要求3所述的用戶終端裝置， 其中，所述控制器基于每個部分的色彩屬性將正在顯示器上顯示的應(yīng)用的執(zhí)行屏幕劃 分為多個元素，利用所述多個劃分的元素中的第一色彩的元素來配置第一屏幕，而且利用 所述多個劃分的元素中的第二色彩的元素來配置第二屏幕。
6. 如權(quán)利要求1所述的用戶終端裝置， 其中，所述控制器控制顯示器繼續(xù)顯示應(yīng)用的執(zhí)行屏幕作為第一屏幕，并控制通信器 向顯示裝置發(fā)送有關(guān)第二屏幕的數(shù)據(jù)， 其中，有關(guān)第二屏幕的數(shù)據(jù)包括關(guān)于應(yīng)用的執(zhí)行屏幕的附加信息。
7. 如權(quán)利要求6所述的用戶終端裝置， 其中，當(dāng)應(yīng)用的執(zhí)行屏幕包括文本時，所述控制器控制通信器向顯示裝置發(fā)送有關(guān)第 二屏幕的數(shù)據(jù)，該有關(guān)第二屏幕的數(shù)據(jù)包括總結(jié)了文本的內(nèi)容的文本或圖像中的至少一 個。
8. 如權(quán)利要求6所述的用戶終端裝置， 其中，當(dāng)應(yīng)用的執(zhí)行屏幕包括視頻內(nèi)容時，所述控制器控制通信器向顯示裝置發(fā)送有 關(guān)第二屏幕的數(shù)據(jù)，該有關(guān)第二屏幕的數(shù)據(jù)包括有關(guān)視頻內(nèi)容的信息和有關(guān)視頻內(nèi)容的字 幕中的至少一個。
9. 如權(quán)利要求1所述的用戶終端裝置， 其中，當(dāng)指示復(fù)制模式的用戶輸入被輸入時，所述控制器控制顯示器以使得不顯示第 一屏幕，而且控制通信器向顯示裝置發(fā)送關(guān)于應(yīng)用的執(zhí)行屏幕的數(shù)據(jù)。
10. 如權(quán)利要求1所述的用戶終端裝置， 其中，當(dāng)顯示裝置不支持用戶輸入時，所述控制器控制通信器向顯示裝置發(fā)送與用戶 輸入相對應(yīng)的數(shù)據(jù)。
11. 一種控制用戶終端裝置的方法，該方法包括： 在用戶終端裝置上顯示應(yīng)用的執(zhí)行屏幕的時候，在用戶終端裝置與外部顯示裝置配對 時獲取關(guān)于外部顯示裝置的信息； 基于關(guān)于用戶終端裝置正在執(zhí)行的應(yīng)用的信息和獲得的關(guān)于外部顯示裝置的信息中 的至少一條信息，顯示應(yīng)用的第一屏幕；以及 向外部顯示裝置發(fā)送應(yīng)用的第二屏幕的數(shù)據(jù)。
12. 如權(quán)利要求11所述的方法，還包括： 基于關(guān)于應(yīng)用的信息將正在顯示的應(yīng)用的執(zhí)行屏幕劃分為多個元素；以及 利用所述多個劃分的元素中的第一集合來配置第一屏幕，而且利用所述多個劃分的元 素中的第二集合來配置第二屏幕。
13. 如權(quán)利要求11所述的方法， 其中，所述劃分是基于每個部分的屏幕更新速度將正在顯示的應(yīng)用的執(zhí)行屏幕劃分為 多個元素，以及 所述配置是利用所述多個劃分的元素中的包括視頻內(nèi)容的元素來配置第一屏幕，而且 利用除了視頻內(nèi)容外的劃分的元素來配置第二屏幕。
14. 如權(quán)利要求11所述的方法， 其中所述發(fā)送是繼續(xù)顯示應(yīng)用的執(zhí)行屏幕作為第一屏幕，并向外部顯示裝置發(fā)送有關(guān) 第二屏幕的數(shù)據(jù)，其中，有關(guān)第二屏幕的數(shù)據(jù)包括關(guān)于應(yīng)用的執(zhí)行屏幕的附加信息。
15. 如權(quán)利要求11所述的方法， 其中，當(dāng)做出指示復(fù)制模式的用戶輸入時，所述發(fā)送不顯示第一屏幕，而是向外部顯示 裝置發(fā)送關(guān)于應(yīng)用的執(zhí)行屏幕的數(shù)據(jù)。
【文檔編號】G06F3/0488GK104423805SQ201410437926
【公開日】2015年3月18日 申請日期:2014年8月29日 優(yōu)先權(quán)日:2013年8月29日
【發(fā)明者】樸洪奭, 金炳澈, 樸賞湧 申請人:三星電子株式會社