信息處理設(shè)備、信息處理方法以及計算機(jī)程序的制作方法
【專利摘要】一種信息處理設(shè)備,可以包括控制單元,該控制單元通過檢測從設(shè)備的外部輸入至設(shè)備的至少一個信息信號,基于對于(i)用戶的位置變化以及(ii)用戶的狀態(tài)的確定來控制用戶接口。
【專利說明】信息處理設(shè)備、信息處理方法以及計算機(jī)程序
[0001]相關(guān)申請的交叉引用
[0002]本申請要求于2012年I月13日提交日本專利局的日本專利申請JP2012-005551的優(yōu)先權(quán),其全部內(nèi)容通過引用合并到本文中。
【技術(shù)領(lǐng)域】
[0003]本公開內(nèi)容涉及具有還用作為輸入單元的顯示屏(諸如觸摸板)的信息處理設(shè)備、信息處理方法及計算機(jī)程序,更具體地,涉及包括大屏幕的信息處理設(shè)備、信息處理方法及計算機(jī)程序,該大屏幕能夠被多個用戶共享,并且使得多個用戶能夠通過觸摸板的操作執(zhí)行協(xié)同動作。
【背景技術(shù)】
[0004]近年來,具有還用作為輸入單元的顯示屏(諸如觸摸板)的平板終端迅速普及。由于使用窗口小部件或桌面作為接口能夠容易地在視覺上看到平板終端的操作方法,所以平板終端能夠比通過使用鍵盤或鼠標(biāo)進(jìn)行輸入操作的個人計算機(jī)更方便用戶使用。
[0005]已經(jīng)提出了如下觸敏裝置:其從多點(diǎn)感測裝置(諸如多點(diǎn)觸摸屏)讀取基于與該多點(diǎn)感測裝置相關(guān)聯(lián)的觸摸輸入的數(shù)據(jù),并且基于從多點(diǎn)感測裝置讀取的數(shù)據(jù)來識別多點(diǎn)手勢(例如,參見PTL I)。
[0006]通常,在平板終端的屏幕上以各種取向布置有用戶要操作的多個對象。要操作的單獨(dú)對象可以包括再現(xiàn)內(nèi)容(如運(yùn)動圖像或靜止圖像)、從另一用戶接收的電子郵件或消息等。為了正好面對用戶來顯示期望的要操作的對象,用戶需要單獨(dú)地旋轉(zhuǎn)地操作平板終端主體。例如,可以容易地旋轉(zhuǎn)操作具有A4或A5尺寸的平板終端。然而,當(dāng)平板終端具有幾十英寸的大屏幕時,對于單個用戶來說當(dāng)操作對象時難以旋轉(zhuǎn)地操作平板終端。
[0007]可以考慮多個用戶同時對具有大屏幕的平板終端中的單獨(dú)對象進(jìn)行操作的使用形式。
[0008]例如,已經(jīng)提出了如下平板終端:當(dāng)通過使用接近傳感器檢測到在終端的側(cè)邊緣中用戶存在的位置時,識別用戶的右臂與左臂之間的區(qū)域,并且將該區(qū)域映射到用戶的觸摸點(diǎn)區(qū)域上(例如,參見NPL1)。當(dāng)檢測到多個用戶時,通過設(shè)置用戶對每個對象的各自操作權(quán)限或通過事先阻止用戶的額外參與,平板終端禁止用戶操作由另一用戶操作的對象,以便旋轉(zhuǎn)該對象以正好面對該用戶。
[0009]作為由多個用戶共享具有大屏幕的平板終端的使用形式,除了如上所述用戶各自操作要操作的對象的情況以外,還可以考慮用戶交換要操作的對象并且執(zhí)行協(xié)同動作的情況。當(dāng)設(shè)置由用戶占用的觸摸點(diǎn)區(qū)域,并且在每個區(qū)域中由用戶操作給定操作權(quán)限的對象時,難以實(shí)現(xiàn)協(xié)同動作。
[0010]當(dāng)顯示在終端的屏幕上的GUI固定而不取決于用戶與屏幕之間的距離或用戶狀態(tài)時,存在如下問題:用戶可能位于很遠(yuǎn),但是顯示在屏幕上的信息太細(xì)密而不能使該信息被很好地理解,或用戶可能位于附近,而小量的信息顯示在屏幕上。類似地,當(dāng)使得用戶能夠操作終端的輸入單元固定而不取決于用戶與屏幕之間的距離或用戶狀態(tài)時,存在如下問題:用戶可能位于附近但沒有用于操作終端的遙控器,或用戶為了操作觸摸板而需要接近終端。
[0011]在根據(jù)相關(guān)技術(shù)的對象顯示系統(tǒng)中,在不考慮對象的實(shí)際尺寸信息的情況下,在屏幕上顯示實(shí)際存在的對象的圖像。因此,存在如下問題:要顯示的對象的尺寸取決于屏幕的尺寸或分辨率(dpi)而變化。
[0012]在顯示系統(tǒng)中,當(dāng)在屏幕上以并列或重疊方式同時顯示多個源的圖像內(nèi)容時,同時顯示的圖像的尺寸關(guān)系不正確,并且圖像的相應(yīng)區(qū)域的尺寸或位置全部不同,因此用戶難以識別圖像。
[0013]當(dāng)具有旋轉(zhuǎn)機(jī)制的終端中的屏幕的方向變化時,對用戶來說難以識別圖像,因此需要旋轉(zhuǎn)顯示屏。
[0014]引用列表
[0015]專利文獻(xiàn)
[0016]PTL1JP-A-2010-170573
[0017]非專利文獻(xiàn)
[0018]NPLl:http://www.autodeskresearch.com/publicat1ns/medusa(2011 年 12 月15日)概要
【發(fā)明內(nèi)容】
[0019]技術(shù)問題
[0020]期望提供包括大屏幕的信息處理設(shè)備、信息處理方法及計算機(jī)程序,該大屏幕能夠被多個用戶共享,并且可以使得多個用戶通過觸摸板的操作適當(dāng)?shù)貓?zhí)行協(xié)同動作。
[0021]也期望提供不管用戶位置或用戶狀態(tài)而對用戶操作給出高度便利性的信息處理設(shè)備、信息處理方法及計算機(jī)程序。
[0022]也期望提供能夠在不取決于實(shí)際對象的尺寸或屏幕的尺寸或分辨率的情況下在屏幕上以適當(dāng)?shù)某叽缯o@示對象的圖像的信息處理設(shè)備、信息處理方法及計算機(jī)程序。
[0023]也期望提供能夠在屏幕上以并列或重疊方式適當(dāng)?shù)赝瑫r顯示多個源的圖像內(nèi)容的信息處理設(shè)備、信息處理方法及計算機(jī)程序。
[0024]也期望提供能夠在任何旋轉(zhuǎn)角度或者在旋轉(zhuǎn)其主體時在其變化過程中最佳地調(diào)整圖像內(nèi)容的顯示形式的信息處理設(shè)備、信息處理方法及計算機(jī)程序。
[0025]問題的解決方案
[0026]根據(jù)本公開內(nèi)容的一個實(shí)施方式,一種信息處理設(shè)備可以包括控制單元,該控制單元通過檢測從設(shè)備的外部輸入至該設(shè)備的至少一個信息信號,基于對于(i)用戶的位置變化以及(ii)用戶的狀態(tài)的確定來控制用戶接口。
[0027]根據(jù)本公開內(nèi)容的一個實(shí)施方式,一種信息處理方法可以包括由處理器通過檢測從信息處理設(shè)備的外部輸入至該信息處理設(shè)備的至少一個信息信號,基于對于(i)用戶的位置變化以及(ii)用戶的狀態(tài)的確定來控制用戶接口。
[0028]根據(jù)本公開內(nèi)容的一個實(shí)施方式,一種非暫態(tài)記錄介質(zhì)能夠記錄有可被計算機(jī)執(zhí)行的程序,其中,該程序可以包括通過檢測從信息處理設(shè)備的外部輸入至該信息處理設(shè)備的至少一個信息信號,基于對于(i)用戶的位置變化以及(ii)用戶的狀態(tài)的確定來控制用
戶接口。
[0029]根據(jù)本公開內(nèi)容的實(shí)施方式的計算機(jī)程序定義了以計算機(jī)可讀格式描述的以便于在計算機(jī)上實(shí)現(xiàn)預(yù)定處理的計算機(jī)程序。換句話說,通過將根據(jù)本公開內(nèi)容的實(shí)施方式的計算機(jī)程序安裝在計算機(jī)中,在計算機(jī)上進(jìn)行協(xié)同動作,以實(shí)現(xiàn)與根據(jù)本公開內(nèi)容的其他實(shí)施方式的信息處理設(shè)備相同的操作優(yōu)點(diǎn)。
[0030]有益效果
[0031]根據(jù)本公開內(nèi)容的實(shí)施方式,可以提供包括大屏幕的信息處理設(shè)備、信息處理方法以及計算機(jī)程序,該大屏幕可以被多個用戶共享,并且可以允許多個用戶通過觸摸板的操作適當(dāng)?shù)剡M(jìn)行協(xié)同動作。
[0032]根據(jù)本公開內(nèi)容的實(shí)施方式,可以提供通過取決于用戶位置或用戶狀態(tài)優(yōu)化顯示GUI或輸入單元來對用戶給予高便利性的信息處理設(shè)備、信息處理方法以及計算機(jī)程序。
[0033]根據(jù)本公開內(nèi)容的實(shí)施方式,可以提供在不取決于實(shí)際對象的尺寸或屏幕的尺寸或分辨率的情況下,一般能夠在屏幕上以適當(dāng)?shù)某叽顼@示對象的圖像的信息處理設(shè)備、信息處理方法以及計算機(jī)程序。
[0034]根據(jù)本公開內(nèi)容的實(shí)施方式,可以提供能夠提供以下屏幕的信息處理設(shè)備、信息處理方法以及計算機(jī)程序,該屏幕能夠被用戶容易地識別,并且在該屏幕中,當(dāng)在屏幕上以并列或重疊方式同時顯示多個源的圖像內(nèi)容時通過執(zhí)行圖像歸一化處理而將圖像的相應(yīng)區(qū)域的尺寸或位置相互匹配。
[0035]根據(jù)本公開內(nèi)容的實(shí)施方式,可以提供能夠在任何旋轉(zhuǎn)角度或者在旋轉(zhuǎn)其主體時在其變化過程中最佳地調(diào)整圖像內(nèi)容的顯示形式的信息處理設(shè)備、信息處理方法以及計算機(jī)程序。
[0036]根據(jù)下文要描述的實(shí)施方式或參照附圖的詳細(xì)描述,本公開內(nèi)容的其他要求、特征或優(yōu)點(diǎn)將變得明顯。
【專利附圖】
【附圖說明】
[0037][圖1]圖1是示出了具有大屏幕的信息處理設(shè)備的使用形式的示例(墻面)的圖。
[0038][圖2]圖2是示出了具有大屏幕的信息處理設(shè)備的使用形式的另一示例(桌面)的圖。
[0039][圖3A]圖3A是示出了具有大屏幕的信息處理設(shè)備的使用形式的又一示例的圖。
[0040][圖3B]圖3B是示出了具有大屏幕的信息處理設(shè)備的使用形式的又一示例的圖。
[0041][圖3C]圖3C是示出了具有大屏幕的信息處理設(shè)備的使用形式的又一示例的圖。
[0042][圖4]圖4是示意性示出了信息處理設(shè)備的功能配置的圖。
[0043][圖5]圖5是示出了輸入接口單元的內(nèi)部配置的圖。
[0044][圖6]圖6是示出了輸出接口單元的內(nèi)部配置的圖。
[0045][圖7]圖7是示出了對要操作的對象進(jìn)行處理的操作單元的內(nèi)部配置的圖。
[0046][圖8]圖8是示出了在屏幕上設(shè)置用戶占用區(qū)域的狀態(tài)的圖。
[0047][圖9A]圖9A是示出了在設(shè)置用戶占用區(qū)域A之前將要操作的相應(yīng)對象#1至#6隨機(jī)定向的狀態(tài)的圖。
[0048][圖9B]圖9B是示出了通過設(shè)置用戶A的用戶占用區(qū)域A將要操作的對象#1至#6變成正好面對用戶A的狀態(tài)的圖。
[0049][圖10]圖10是示出了通過檢測除了用戶A以外的用戶B的存在,來在屏幕上額外設(shè)置共用區(qū)域和用戶B的用戶占用區(qū)域B的狀態(tài)的圖。
[0050][圖11]圖11是示出了通過檢測除了用戶A和用戶B以外的用戶D的存在,來在屏幕上額外設(shè)置共用區(qū)域和用戶D的用戶占用區(qū)域D的狀態(tài)的圖。
[0051][圖12]圖12是示出了通過檢測除了用戶A、用戶B和用戶D以外的用戶C的存在,來在屏幕上額外設(shè)置共用區(qū)域和用戶C的用戶占用區(qū)域C的狀態(tài)的圖。
[0052][圖13A]圖13A是示出了用于基于屏幕的形狀或尺寸以及用戶數(shù)量將屏幕劃分成相應(yīng)用戶的用戶占用區(qū)域的區(qū)域劃分模式的圖。
[0053][圖13B]圖13B是示出了用于基于屏幕的形狀或尺寸以及用戶數(shù)量將屏幕劃分成相應(yīng)用戶的用戶占用區(qū)域的區(qū)域劃分模式的圖。
[0054][圖13C]圖13C是示出了用于基于屏幕的形狀或尺寸以及用戶數(shù)量將屏幕劃分成相應(yīng)用戶的用戶占用區(qū)域的區(qū)域劃分模式的圖。
[0055][圖13D]圖13D是示出了用于基于屏幕的形狀或尺寸以及用戶數(shù)量將屏幕劃分成相應(yīng)用戶的用戶占用區(qū)域的區(qū)域劃分模式的圖。
[0056][圖13E]圖13E是示出了用于基于屏幕的形狀或尺寸以及用戶數(shù)量將屏幕劃分成相應(yīng)用戶的用戶占用區(qū)域的區(qū)域劃分模式的圖。
[0057][圖14]圖14是示出了由監(jiān)視器區(qū)域劃分單元執(zhí)行的監(jiān)視器區(qū)域劃分處理的流程的流程圖。
[0058][圖15]圖15是示出了通過將對象拖動或拋擲到用戶占用區(qū)域中,來將要操作的對象自動旋轉(zhuǎn)成正好面對用戶的狀態(tài)的圖。
[0059][圖16A]圖16A是示出了將新出現(xiàn)在用戶占用區(qū)域中的對象自動旋轉(zhuǎn)成正好面對用戶的狀態(tài)的圖。
[0060][圖16B]圖16B是示出了將新出現(xiàn)在用戶占用區(qū)域中的對象自動旋轉(zhuǎn)成正好面對用戶的狀態(tài)的圖。
[0061][圖17]圖17是示出了由對象優(yōu)化單元執(zhí)行的對象優(yōu)化處理的流程的流程圖。
[0062][圖18]圖18是示出了取決于用戶觸摸對象的位置來控制旋轉(zhuǎn)方向的狀態(tài)的圖。
[0063][圖19]圖19是示出了取決于用戶觸摸對象的位置來控制旋轉(zhuǎn)方向的狀態(tài)的圖。
[0064][圖20]圖20是示出了在信息處理設(shè)備與由用戶攜帶的終端之間交換對象的交互的示例的圖。
[0065][圖21]圖21是示出了由裝置交互數(shù)據(jù)發(fā)送和接收單元執(zhí)行的裝置交互數(shù)據(jù)發(fā)送和接收處理的流程的流程圖。
[0066][圖22]圖22是示出了將要操作的對象在用戶占用區(qū)域之間移動以拷貝對象的狀態(tài)的圖。
[0067][圖23]圖23是示出了取決于到用戶的距離來執(zhí)行優(yōu)化處理的操作單元的內(nèi)部配置的圖。
[0068][圖24A]圖24A是示出了表格的圖,在該表格中設(shè)置了基于用戶位置和用戶狀態(tài)由顯示⑶I優(yōu)化單元執(zhí)行的⑶I顯示優(yōu)化處理。
[0069][圖24B]圖24B是示出了信息處理設(shè)備的屏幕基于用戶位置和用戶狀態(tài)的變化的圖。
[0070][圖24C]圖24C是示出了信息處理設(shè)備的屏幕基于用戶位置和用戶狀態(tài)的變化的圖。
[0071][圖24D]圖24D是示出了信息處理設(shè)備的屏幕基于用戶位置和用戶狀態(tài)的變化的圖。
[0072][圖24E]圖24E是示出了信息處理設(shè)備的屏幕基于用戶位置和用戶狀態(tài)的變化的圖。
[0073][圖25A]圖25A是示出了用于隨機(jī)顯示要操作的各種對象以及自動變換對象的屏幕的顯示示例的圖。
[0074][圖25B]圖25B是示出了要自動變換的多個對象的顯示位置或尺寸時刻改變的屏幕的顯示示例的圖。
[0075][圖26]圖26是示出了在用戶看電視但不操作電視的狀態(tài)下的屏幕的顯示示例的圖。
[0076][圖27A]圖27A是示出了在用戶正在操作電視的狀態(tài)下的屏幕的顯示示例的圖。
[0077][圖27B]圖27B是示出了在用戶正在操作電視的狀態(tài)下的屏幕的顯示示例的圖。
[0078][圖28]圖28不出了表格的圖,在該表格中設(shè)置了基于用戶位置和用戶狀態(tài)由輸入單元優(yōu)化單元執(zhí)行的輸入單元優(yōu)化處理。
[0079][圖29]圖29是表格的圖,在該表格中設(shè)置了基于用戶位置由距離檢測模式切換單元執(zhí)行的距離檢測模式切換處理。
[0080][圖30]圖30是示出了根據(jù)相關(guān)技術(shù)的對象顯示系統(tǒng)的問題的圖。
[0081][圖31]圖31是示出了根據(jù)相關(guān)技術(shù)的對象顯示系統(tǒng)的問題的圖。
[0082][圖32]圖32是示出了執(zhí)行與監(jiān)視器性能對應(yīng)的對象實(shí)際尺寸顯示處理的操作單元的內(nèi)部配置的圖。
[0083][圖33]圖33是示出了在具有不同監(jiān)視器規(guī)格的屏幕上以實(shí)際尺寸顯示同一對象的圖像的示例的圖。
[0084][圖34]圖34是示出了在同一屏幕上以正確的相互尺寸關(guān)系顯示具有不同實(shí)際尺寸的兩個對象的圖像的示例的圖。
[0085][圖35]圖35是示出了以實(shí)際尺寸顯示對象的圖像的示例的圖。
[0086][圖36]圖36是示出了以實(shí)際尺寸顯示的對象的圖像被旋轉(zhuǎn)或在姿態(tài)方面被改變的示例的圖。
[0087][圖37A]圖37A是示出了估計主題的實(shí)際尺寸信息的狀態(tài)的圖。
[0088][圖37B]圖37B是示出了基于所估計的主題的實(shí)際尺寸信息來執(zhí)行對象實(shí)際尺寸顯示處理的狀態(tài)的圖。
[0089][圖38A]圖38A是示出了相互視頻聊天的用戶的面部尺寸或位置全部不同的狀態(tài)的圖。
[0090][圖38B]圖38B是示出了通過對多個圖像的歸一化處理將相互視頻聊天的用戶的面部尺寸或位置相互匹配的狀態(tài)的圖。[0091][圖39A]圖39A是示出了并列顯示在屏幕上的用戶的體形的尺寸或位置與指導(dǎo)者的體形的尺寸或位置不相互匹配的狀態(tài)的圖。
[0092][圖39B]圖39B是示出了通過對多個圖像的歸一化處理,將并列顯示在屏幕上的用戶的體形的尺寸或位置與指導(dǎo)者的體形的尺寸或位置相互匹配的狀態(tài)的圖。
[0093][圖39C]圖39C是示出了通過對多個圖像的歸一化處理而歸一化的用戶的體形被顯示為與指導(dǎo)者的體形重疊的狀態(tài)的圖。
[0094][圖40A]圖40A是示出了產(chǎn)品的樣品圖像沒有以正確的尺寸關(guān)系在適當(dāng)位置處與用戶的圖像重疊的狀態(tài)的圖。
[0095][圖40B]圖40B是示出了產(chǎn)品的樣品圖像以正確的尺寸關(guān)系在適當(dāng)位置處與用戶的圖像重疊的狀態(tài)的圖。
[0096][圖41]圖41是示出了執(zhí)行圖像歸一化處理的操作單元的內(nèi)部配置的圖。
[0097][圖42]圖42是示出了圖像內(nèi)容的整個區(qū)域被顯示為不在任何旋轉(zhuǎn)角度覆蓋圖像內(nèi)容的顯示形式的圖。
[0098][圖43]圖43是示出了在任何旋轉(zhuǎn)角度將圖像內(nèi)容中的感興趣區(qū)域最大化的顯示形式的圖。
[0099][圖44]圖44是示出了旋轉(zhuǎn)圖像內(nèi)容以便不顯示無效區(qū)域的顯示形式的圖。
[0100][圖45]圖45是示出了關(guān)于圖42至圖44示出的顯示形式中的旋轉(zhuǎn)位置的圖像內(nèi)容的縮放比的關(guān)系的圖。
[0101][圖46]圖46是示出了當(dāng)旋轉(zhuǎn)信息處理設(shè)備時在操作單元中控制圖像內(nèi)容的顯示形式的處理的流程的流程圖。
[0102][圖47]圖47是示出了操作單元的內(nèi)部配置的圖,該操作單元在信息處理設(shè)備主體的任何旋轉(zhuǎn)角度或者在其轉(zhuǎn)變過程中執(zhí)行調(diào)整圖像內(nèi)容的顯示形式的處理。
【具體實(shí)施方式】
[0103]在下文中,將參照附圖詳細(xì)描述本公開內(nèi)容的實(shí)施方式。
[0104]A.系統(tǒng)配置
[0105]根據(jù)一種實(shí)施方式的信息處理設(shè)備100具有大屏幕,并且可以將如圖1所示的懸掛在墻上的“墻面”形式和如圖2所示的安裝在桌子上的“桌面”形式考慮為信息處理設(shè)備的主要使用形式。
[0106]在圖1中示出的“墻面”形式中,通過使用例如旋轉(zhuǎn)和附接機(jī)制單元180將信息處理設(shè)備100旋轉(zhuǎn)且可拆卸地附接至墻。旋轉(zhuǎn)和附接機(jī)制單元180還用作信息處理設(shè)備100與其外部之間的電接觸,電源電纜或網(wǎng)絡(luò)電纜(在圖中未示出兩者)通過旋轉(zhuǎn)和附接機(jī)制單元180連接至信息處理設(shè)備100,并且信息處理設(shè)備100可以從商用交流電源接收驅(qū)動電力,并且能夠訪問因特網(wǎng)上的各種服務(wù)器。
[0107]如下文將描述的,信息處理設(shè)備100包括距離傳感器、接近傳感器和觸摸傳感器,并且能夠獲取正好面對屏幕的用戶位置(距離和方向)。當(dāng)檢測到用戶時或在正在檢測用戶的狀態(tài)下,可以在屏幕上表達(dá)波狀檢測指示符(下文將描述)或表示檢測狀態(tài)的照明,以給用戶視覺反饋。
[0108]信息處理設(shè)備100基于用戶位置自動選擇最佳交互。例如,信息處理設(shè)備100基于用戶位置自動選擇或調(diào)整⑶I (圖形用戶接口)顯示,諸如要操作的對象的構(gòu)架和信息密度。信息處理設(shè)備100可以基于用戶位置或到用戶的距離,從多個輸入單元(諸如具有屏幕的觸摸輸入、接近輸入、使用手等的手勢、遙控器以及基于用戶狀態(tài)的間接操作)中自動選擇一個輸入單兀。
[0109]信息處理設(shè)備100包括一個或更多個攝像機(jī),并且除了用戶位置以外還可以根據(jù)使用攝像機(jī)捕捉的圖像來識別人、對象或裝置。信息處理設(shè)備100包括極近距離通信單元,并且還可以直接且自然地向極近距離內(nèi)的附近用戶所攜帶的裝置發(fā)送數(shù)據(jù)和從極近距離內(nèi)的附近用戶所攜帶的裝置接收數(shù)據(jù)。
[0110]在墻面形式的大屏幕上,定義了由用戶操作的對象。要操作的每個對象具有功能模塊(如運(yùn)動圖像、靜止圖像、文本內(nèi)容、因特網(wǎng)網(wǎng)站、應(yīng)用或窗口小部件)的特定顯示區(qū)域。要操作的對象包括電視廣播的接收內(nèi)容、來自記錄介質(zhì)的再現(xiàn)內(nèi)容、通過網(wǎng)絡(luò)獲取的流視頻、以及從另一設(shè)備(如用戶攜帶的移動終端)輸入的運(yùn)動圖像和靜止圖像。
[0111]如圖1所示,當(dāng)懸掛在墻上的信息處理設(shè)備100的旋轉(zhuǎn)位置被設(shè)置成水平放置大屏幕時,可以幾乎以電影中顯示的視野將圖像顯示為具有與整個屏幕相對應(yīng)的尺寸的對象。
[0112]在此,如圖3A所示,當(dāng)懸掛在墻上的信息處理設(shè)備100的旋轉(zhuǎn)位置被設(shè)置成豎直放置大屏幕時,可以豎直地布置具有16:9的寬高比的三個屏幕。例如,可以同時布置和顯示三種內(nèi)容#1至#3:同時從不同的廣播站接收的廣播內(nèi)容、來自記錄介質(zhì)的再現(xiàn)內(nèi)容以及網(wǎng)絡(luò)上的流視頻。當(dāng)用戶使用例如指尖豎直操作屏幕時,如圖3B所示,豎直地滾動相應(yīng)的內(nèi)容。當(dāng)用戶使用指尖水平地操作三級中的任何地方時,如圖3C所示,水平地滾動相應(yīng)級的屏幕。
[0113]另一方面,在圖2中示出的“桌面”形式中,將信息處理設(shè)備100直接安裝在桌子上。在圖1中示出的使用形式中,旋轉(zhuǎn)和附接機(jī)制單元180也用作電接觸(如上所述)。然而,在如圖2所示信息處理設(shè)備100安裝在桌子上的狀態(tài)下,與信息處理設(shè)備100的電接觸是不可見的。因此,在圖中示出的桌面形式中,信息處理設(shè)備100可以被構(gòu)造成以內(nèi)置電池而不使用電源來操作。當(dāng)信息處理設(shè)備100包括與無線LAN(局域網(wǎng))的移動站的功能相對應(yīng)的無線通信單元,并且旋轉(zhuǎn)和附接機(jī)制單元180包括與無線LAN的接入點(diǎn)的功能相對應(yīng)的無線通信單元時,信息處理設(shè)備100可以通過與旋轉(zhuǎn)和附接機(jī)制單元180(甚至在桌面形式中其作為接入點(diǎn))的無線通信來訪問因特網(wǎng)上的各種服務(wù)器。
[0114]在桌面形式的大屏幕上,定義了要操作的多個對象。要操作的每個對象具有功能模塊(如運(yùn)動圖像、靜止圖像、文本內(nèi)容、因特網(wǎng)網(wǎng)站、應(yīng)用或窗口小部件)的特定顯示區(qū)域。
[0115]信息處理設(shè)備100包括在大屏幕的四個邊緣中的每個邊緣處檢測用戶的存在或狀態(tài)的接近傳感器。如上所述,接近大屏幕的用戶可以被使用攝像機(jī)成像,并且可以被識別為人。極近距離通信單元檢測被檢測到存在的用戶是否攜帶諸如移動終端的裝置,或檢測來自用戶所攜帶的終端的數(shù)據(jù)發(fā)送和接收請求。當(dāng)用戶或由用戶攜帶的終端被檢測到時,或在正在檢測用戶的狀態(tài)下,可以在屏幕上表達(dá)波狀檢測指示符或表示檢測狀態(tài)的照明(下文將描述),以給用戶視覺反饋。
[0116]當(dāng)通過使用接近傳感器等檢測用戶的存在時,信息處理設(shè)備100使用檢測結(jié)果來執(zhí)行Π控制。當(dāng)除了檢測到用戶的存在以外還檢測到軀干、手或腿、用戶的頭的位置等時,檢測結(jié)果可以用于更詳細(xì)的Π控制。信息處理設(shè)備100包括極近距離通信單元,并且還可以直接且自然地向極近距離內(nèi)的附近用戶發(fā)送數(shù)據(jù)和從極近距離內(nèi)的附近用戶接收數(shù)據(jù)。
[0117]在此,作為Π控制的示例,信息處理設(shè)備100取決于所檢測的用戶的布置,來在大屏幕中設(shè)置每個用戶的用戶占用區(qū)域以及由用戶共享的共用區(qū)域。檢測每個用戶在用戶占用區(qū)域和共用區(qū)域中的觸摸傳感器輸入。屏幕的形狀以及區(qū)域被劃分的模式不限于矩形形狀,而是可以具有以下形狀:如正方形形狀、環(huán)形形狀以及包括立體形狀(如圓錐形狀)的形狀。
[0118]當(dāng)信息處理設(shè)備100的屏幕在尺寸上增大時,在桌面形式中產(chǎn)生使得多個用戶可以同時輸入觸摸的空間余量(margin of space)。如上所述,通過在屏幕中設(shè)置共用區(qū)域和用戶的用戶占用區(qū)域,多個用戶可以舒適且有效地享受同時操作。
[0119]將放置在用戶占用區(qū)域中的對象的操作權(quán)限給予相應(yīng)的用戶。用戶可以通過將對象從共用區(qū)域或另一用戶的用戶占用區(qū)域移動到他或她自己的用戶占用區(qū)域,來將要操作的對象的操作權(quán)移動到他或她自己。當(dāng)要操作的對象進(jìn)入用戶占用區(qū)域中時,自動改變其顯示,使得對象正好面對用戶。
[0120]當(dāng)要操作的對象在用戶占用區(qū)域之間移動時,取決于進(jìn)行移動操作的觸摸位置,物理地且自然地移動對象。當(dāng)用戶朝向彼此拉一個對象時,可以劃分或拷貝要操作的對象。
[0121]圖4示意性示出了信息處理設(shè)備100的功能框圖。信息處理設(shè)備100包括:從外部接收信息信號的輸入接口單元110、基于輸入信息信號執(zhí)行顯示屏等的控制的操作處理的操作單元120、基于操作結(jié)果將信息輸出至外部的輸出接口單元130、由硬盤驅(qū)動器(HDD)等形成的大容量存儲單元140、連接至外部網(wǎng)絡(luò)的通信單元150、提供驅(qū)動電力的電源單元160、以及電視調(diào)諧器單元170。存儲單元140存儲由操作單元120執(zhí)行的各種處理算法以及用于操作單元120中的操作處理的各種數(shù)據(jù)庫。
[0122]輸入接口單元Il0的主要功能包括:檢測用戶的存在、檢測所檢測到的用戶對屏幕(即觸摸板)的觸摸操作、檢測由用戶攜帶的裝置(如移動終端)以及從該裝置接收傳輸數(shù)據(jù)的處理。圖5示出了輸入接口單元110的內(nèi)部配置。
[0123]遙控器接收單元501從遙控器或移動終端接收遙控器信號。信號分析單元502通過對所接收的遙控器信號進(jìn)行解調(diào)和解碼來獲取遙控器命令。
[0124]攝像機(jī)單元503采用單目式,或者雙目式和主動式中的一種或兩種。攝像機(jī)單元503由成像裝置,如CMOS(互補(bǔ)金屬氧化物半導(dǎo)體)或(XD(電荷耦合裝置)構(gòu)成。攝像機(jī)單元503包括控制其平移、傾斜、縮放等的攝像機(jī)控制器。攝像機(jī)單元503通知操作單元120攝像機(jī)信息,如平移、傾斜、縮放,并且可以基于來自操作單元120的攝像機(jī)控制信息來控制攝像機(jī)單元503的平移、傾斜、縮放。
[0125]圖像識別單元504識別由攝像機(jī)單元503捕捉的圖像。具體地,圖像識別單元504通過使用背景差異檢測用戶的面部或手部運(yùn)動來識別手勢,識別包括在捕捉圖像中的用戶的面部,識別軀干,或識別到用戶的距離。
[0126]麥克風(fēng)單元505接收由用戶發(fā)出的聲音或語音。語音識別單元506對輸入語音信號進(jìn)行識別。
[0127]距離傳感器507例如由PSD (位置敏感檢測器)構(gòu)成,并且檢測從用戶或?qū)ο蠓祷氐男盘?。信號分析單?08分析所檢測的信號并且測量到用戶或?qū)ο蟮木嚯x。除了 PSD傳感器以外,熱電傳感器或簡單攝像機(jī)可以用作距離傳感器507。一般地,距離傳感器507監(jiān)視用戶是否存在于距信息處理設(shè)備100的一定半徑內(nèi),例如距其5至10米。因此,優(yōu)選地,具有低功耗的傳感器裝置可以用作距離傳感器507。
[0128]觸摸檢測單元509由在屏幕上疊加的觸摸傳感器等構(gòu)成,并且從用戶的指尖與屏幕接觸的地方處輸出檢測信號。信號分析單元510分析檢測信號,并且獲取位置信息。
[0129]接近傳感器511安裝在大屏幕的四個側(cè)邊緣中每一個處,并且通過使用例如電容來檢測用戶身體接近屏幕。信號分析單元512分析檢測信號。
[0130]極近距離通信單元513通過例如NFC(近場通信)來從用戶攜帶的裝置接收非接觸通信信號。信號分析單元514通過對所接收的信號進(jìn)行解調(diào)和解碼來獲取接收數(shù)據(jù)。
[0131]三軸傳感器單元515由陀螺儀等構(gòu)成,并且檢測信息處理設(shè)備100關(guān)于X軸、y軸和z軸的姿態(tài)。GPS(全球定位系統(tǒng))接收單元516接收GPS衛(wèi)星的信號。信號分析單元517分析來自三軸傳感器單元515和GPS接收單元516的信號,并且獲取信息處理設(shè)備100的位置信息或姿態(tài)信息。
[0132]輸入接口集成單元520將信息信號的輸入集成,并且將所集成的信息信號輸出至操作單元120。輸入接口集成單元520將信號分析單元508、510、512和514的分析結(jié)果集成,并且獲取和輸出在信息處理設(shè)備100周圍的用戶的位置信息至操作單元120。
[0133]操作單元120的主要功能包括基于輸入接口單元110的用戶檢測結(jié)果、屏幕觸摸檢測結(jié)果以及從用戶攜帶的裝置所接收的數(shù)據(jù)來進(jìn)行操作處理,如UI屏幕生成處理,并且將操作結(jié)果輸出至輸出接口單元130。操作單元120可以通過加載安裝在存儲單元140中的應(yīng)用程序并且執(zhí)行所加載的應(yīng)用程序來執(zhí)行每個應(yīng)用的處理操作。將在下文中描述與每個應(yīng)用對應(yīng)的操作單元120的功能配置。
[0134]輸出接口單元130的主要功能包括基于操作單元120的操作結(jié)果在屏幕上顯示UI,并且將數(shù)據(jù)發(fā)送至用戶攜帶的裝置。圖6示出了輸出接口單元130的內(nèi)部配置。
[0135]輸出接口集成單元610基于操作單元120的監(jiān)視器劃分處理、對象優(yōu)化處理以及裝置交互數(shù)據(jù)發(fā)送和接收處理的操作結(jié)果來集成和處理信息輸出。
[0136]輸出接口集成單元610指示內(nèi)容顯示單元601將運(yùn)動圖像內(nèi)容或靜止圖像內(nèi)容(如所接收的電視廣播內(nèi)容和從諸如藍(lán)光光盤的記錄介質(zhì)再現(xiàn)的內(nèi)容)的圖像和語音輸出至顯示單元603和揚(yáng)聲器單元604。
[0137]輸出接口集成單元610指示⑶I顯示單元602將要操作的對象顯示在顯示單元603 上。
[0138]輸出接口集成單元610指示照明顯示單元605從照明單元606輸出表示檢測狀態(tài)的照明顯示。
[0139]輸出接口集成單元610指示極近距離通信單元513通過非接觸通信將數(shù)據(jù)發(fā)送至用戶攜帶的裝置等。
[0140]信息處理設(shè)備100可以基于從攝像機(jī)單元503所捕捉圖像中的識別或距離傳感器507、觸摸傳感器509、接近傳感器511、極近距離通信單元513等的檢測信號來檢測用戶。通過從攝像機(jī)單元503所捕捉的圖像中識別面部或通過使用極近距離通信單元513來識別用戶攜帶的裝置,可以指定所檢測到的用戶的個人身份。所指定的用戶可以登錄到信息處理設(shè)備100。能夠登錄的賬戶可以限于特定用戶。信息處理設(shè)備100取決于用戶位置或用戶狀態(tài)適當(dāng)?shù)厥褂镁嚯x傳感器507、觸摸傳感器509和接近傳感器511,來接收用戶的操作。
[0141]信息處理設(shè)備100通過通信單元150連接至外部網(wǎng)絡(luò)。到外部網(wǎng)絡(luò)的連接格式僅限于有線方式和無線方式中之一。信息處理設(shè)備100可以與移動終端(如用戶攜帶的智能手機(jī))或另一設(shè)備(如平板終端)通信。所謂的“三個屏幕”可以由信息處理設(shè)備100、移動終端和平板終端這三種類型的設(shè)備的組合來構(gòu)成。信息處理設(shè)備100可以提供以下Π:該UI使得三個屏幕在比其他兩個屏幕更大的屏幕上相互交互。
[0142]例如,在用戶觸摸屏幕或?qū)⑺幕蛩龜y帶的終端帶到靠近信息處理設(shè)備100的動作的背景下,在信息處理設(shè)備100與相應(yīng)的攜帶終端之間發(fā)送和接收數(shù)據(jù)(如運(yùn)動圖像、靜止圖像、文本內(nèi)容等),該數(shù)據(jù)是要操作的對象的實(shí)體??梢栽谕獠烤W(wǎng)絡(luò)上安裝云服務(wù)器等,并且三個屏幕可以使用云服務(wù)器的操作能力。也就是說,可以通過使用信息處理設(shè)備100享受云計算的益處。
[0143]下面將順序描述信息處理設(shè)備100的一些應(yīng)用。
[0144]B.多個用戶在大屏幕上的同時操作
[0145]信息處理設(shè)備100可以由多個用戶通過使用大屏幕而同時操作。具體地,由于信息處理設(shè)備包括對于大屏幕的四個側(cè)邊緣中的每一個檢測用戶的存在或用戶狀態(tài)的接近傳感器511,并且取決于多個用戶的布置在屏幕中設(shè)置用戶占用區(qū)域和共用區(qū)域,所以多個用戶可以舒適且有效地同時操作信息處理設(shè)備。
[0146]當(dāng)信息處理設(shè)備100的屏幕在尺寸上增大時,在桌面形式中產(chǎn)生多個用戶可以同時輸入觸摸的這樣的空間余量。如上所述,通過在屏幕中設(shè)置共用區(qū)域和用戶的用戶占用區(qū)域,多個用戶可以舒適且有效地享受同時操作。
[0147]將對于放置在用戶占用區(qū)域中的對象的操作權(quán)限給予相應(yīng)的用戶。用戶可以通過將對象從共用區(qū)域或另一用戶的用戶占用區(qū)域移動到他或她自己的用戶占用區(qū)域,來將要操作的對象的操作權(quán)限移動到他或她自己。當(dāng)要操作的對象進(jìn)入用戶的用戶占用區(qū)域時,自動改變其顯示,使得對象正好面對用戶。
[0148]當(dāng)要操作的對象在用戶占用區(qū)域之間移動時,取決于進(jìn)行移動操作的觸摸位置來物理地且自然地移動對象。當(dāng)用戶相互拉一個對象時,可以劃分或拷貝要操作的對象。
[0149]當(dāng)執(zhí)行該應(yīng)用時操作單元120的主要功能包括優(yōu)化對象,以及基于輸入接口單元110中的用戶檢測結(jié)果、屏幕觸摸檢測結(jié)果以及從用戶攜帶的裝置接收的數(shù)據(jù)來生成Π。圖7示出了用于處理要操作的對象的操作單元120的內(nèi)部配置。操作單元120包括監(jiān)視器區(qū)域劃分單元710、對象優(yōu)化單元720以及裝置交互數(shù)據(jù)發(fā)送和接收單元730。
[0150]當(dāng)從輸入接口集成單元520獲取用戶的位置信息時,監(jiān)視器區(qū)域劃分單元710參照存儲在存儲單元140中的裝置數(shù)據(jù)庫711以及與形狀或傳感器布置有關(guān)的區(qū)域劃分模式數(shù)據(jù)庫712在屏幕上設(shè)置用戶占用區(qū)域和共用區(qū)域。監(jiān)視器區(qū)域劃分單元710將設(shè)置的區(qū)域信息輸出至對象優(yōu)化單元720以及裝置交互數(shù)據(jù)發(fā)送和接收單元730。下文將描述監(jiān)視器區(qū)域劃分處理的流程的細(xì)節(jié)。
[0151]對象優(yōu)化單元720從輸入接口集成單元520接收與在屏幕上對要操作的對象執(zhí)行的操作有關(guān)的信息。對象優(yōu)化單元720根據(jù)從存儲單元140加載的優(yōu)化算法721來執(zhí)行與用戶的操作(如旋轉(zhuǎn)、移動、顯示、劃分或拷貝由用戶操作的對象)對應(yīng)的對象優(yōu)化處理,并且將經(jīng)優(yōu)化的對象輸出到顯示單元603的屏幕上。下文將描述對象優(yōu)化處理的細(xì)節(jié)。
[0152]裝置交互數(shù)據(jù)發(fā)送和接收單元730從輸入接口集成單元520接收用戶或用戶攜帶的裝置的位置信息以及與該裝置發(fā)送和接收的數(shù)據(jù)。裝置交互數(shù)據(jù)發(fā)送和接收單元730根據(jù)從存儲單元140加載的發(fā)送和接收算法731,通過與用戶攜帶的裝置的交互來執(zhí)行數(shù)據(jù)發(fā)送和接收處理。對象優(yōu)化單元720與數(shù)據(jù)發(fā)送和接收處理對應(yīng)地優(yōu)化對象。例如,對象優(yōu)化單元720伴隨著通過與用戶攜帶裝置的交互的數(shù)據(jù)發(fā)送和接收處理來執(zhí)行對象優(yōu)化處理,諸如旋轉(zhuǎn)、移動、顯示或拷貝與所發(fā)送和接收的數(shù)據(jù)相關(guān)聯(lián)的對象,并且將經(jīng)優(yōu)化的對象輸出到顯示單元603的屏幕。下文將描述伴隨著與裝置的交互的對象優(yōu)化處理的細(xì)節(jié)。
[0153]隨后,將詳細(xì)描述監(jiān)視器區(qū)域劃分處理。將監(jiān)視器區(qū)域劃分處理假定為在信息處理設(shè)備100以桌面形式被多個用戶共享的使用形式下的處理,但也可以在信息處理設(shè)備以墻面形式被多個用戶共享的使用形式下進(jìn)行。
[0154]當(dāng)通過使用輸入接口集成單元520來檢測用戶的存在時,監(jiān)視器區(qū)域劃分單元710對屏幕分配相應(yīng)用戶的用戶占用區(qū)域。圖8示出了當(dāng)基于布置在屏幕的側(cè)邊緣上的接近傳感器511 (或距離傳感器507)的檢測信號而檢測到用戶A的存在時,監(jiān)視器區(qū)域劃分單元710在屏幕中設(shè)置用戶A的用戶占用區(qū)域A的狀態(tài)。當(dāng)檢測到僅存在一個用戶時,如圖所示,可以將整個屏幕設(shè)置為相應(yīng)用戶的用戶占用區(qū)域。
[0155]在此,當(dāng)設(shè)置了用戶占用區(qū)域A時,對象優(yōu)化單元720基于從輸入接口集成單元520獲取的用戶A的位置信息來改變用戶占用區(qū)域A中要操作的對象的方向,以便正好面對用戶。圖9A示出了在設(shè)置用戶占用區(qū)域A之前將對象#1至#6隨機(jī)定向的狀態(tài)。在圖中,對象中的附 圖標(biāo)記…的傾斜度表示對象的取向。圖9B示出了通過設(shè)置用戶A的用戶占用區(qū)域A來將區(qū)域中的所有對象#1至#6變成正好面對用戶A的狀態(tài)。
[0156]當(dāng)檢測到僅存在用戶A時,可以將用戶A的用戶占用區(qū)域A設(shè)置成整個屏幕。相反,當(dāng)檢測到存在兩個或更多個用戶時,優(yōu)選地,可以設(shè)置能夠由用戶共享的共用區(qū)域來進(jìn)行用戶之間的協(xié)同動作。
[0157]圖10示出了當(dāng)基于接近傳感器511或距離傳感器507的檢測信號而在屏幕的相鄰側(cè)邊緣處檢測到除了用戶A以外還存在用戶B時,監(jiān)視器區(qū)域劃分單元710在屏幕中額外設(shè)置共用區(qū)域以及用戶B的用戶占用區(qū)域B的狀態(tài)。基于用戶A和用戶B的位置信息,用戶A的用戶占用區(qū)域A退縮到用戶A所位于的地方,而用戶B的用戶占用區(qū)域B出現(xiàn)在用戶B所位于的地方附近。當(dāng)新檢測到存在用戶B時,在用戶占用區(qū)域B中顯示波狀檢測指示符。屏幕中除了用戶占用區(qū)域A和用戶占用區(qū)域B以外的區(qū)域全部為共用區(qū)域。在用戶B接近信息處理設(shè)備100從而在屏幕中新設(shè)置用戶占用區(qū)域B之后用戶占用區(qū)域B中的任何對象最初被觸摸的時間點(diǎn)處,可以使用戶占用區(qū)域B成為有效的。盡管在圖10中未示出,但在設(shè)置用戶占用區(qū)域B的時間點(diǎn)或用戶占用區(qū)域B成為有效的點(diǎn)處將新變成用戶占用區(qū)域B的區(qū)域中要操作的對象變成正好面對用戶B。
[0158]圖11示出了當(dāng)在屏幕的另一側(cè)邊緣上檢測到除了用戶A和用戶B以外還存在用戶D時,監(jiān)視器區(qū)域劃分單元710在屏幕中在用戶D所位于的地方附近額外設(shè)置用戶D的用戶占用區(qū)域D的狀態(tài)。通過在用戶占用區(qū)域D中顯示波狀檢測指示符,能夠表達(dá)出新檢測到存在用戶D。圖12示出了當(dāng)在屏幕的另一側(cè)邊緣上檢測到除了用戶A、用戶B和用戶D以外還存在用戶C時,監(jiān)視器區(qū)域劃分單元710在屏幕中在用戶C所位于的地方附近額外設(shè)置用戶C的用戶占用區(qū)域C的狀態(tài)。通過在用戶占用區(qū)域C中顯示波狀檢測指示符,能夠表達(dá)出新檢測到存在用戶C。
[0159]圖8至圖12中示出的用戶占用區(qū)域和共用區(qū)域的區(qū)域劃分模式僅是示例。區(qū)域劃分模式也取決于屏幕的形狀、檢測到存在的用戶的數(shù)量以及用戶的布置。區(qū)域劃分模式數(shù)據(jù)庫712存儲與屏幕的形狀或尺寸以及用戶數(shù)量對應(yīng)的區(qū)域劃分模式有關(guān)的信息。裝置數(shù)據(jù)庫711存儲關(guān)于信息處理設(shè)備100中所使用的屏幕的形狀或尺寸的信息。當(dāng)從輸入接口集成單元520輸入檢測到的用戶的位置信息時,監(jiān)視器區(qū)域劃分單元710從裝置數(shù)據(jù)庫711讀取屏幕的形狀或尺寸,并且從區(qū)域劃分模式數(shù)據(jù)庫712查閱相應(yīng)的區(qū)域劃分模式。圖13A至圖13E示出了取決于屏幕的形狀或尺寸以及用戶數(shù)量將屏幕劃分成相應(yīng)用戶的用戶占用區(qū)域的區(qū)域劃分模式。
[0160]圖14是示出了由監(jiān)視器區(qū)域劃分單元710執(zhí)行的監(jiān)視器區(qū)域劃分處理的流程的流程圖。
[0161]首先,監(jiān)視器區(qū)域劃分單元710基于來自接近傳感器511或距離傳感器507的檢測信號的信號分析結(jié)果,來檢查屏幕附近是否存在用戶(步驟S1401)。
[0162]當(dāng)檢測到存在用戶時(步驟S1401中“是”),監(jiān)視器區(qū)域劃分單元710獲取存在的用戶的數(shù)量(步驟S1402),并且還另外獲取用戶的位置(步驟S1403)。基于從輸入接口集成單元520接收的用戶的位置信息來進(jìn)行步驟S1401至S1403的處理。
[0163]隨后,監(jiān)視器區(qū)域劃分單元710參考裝置數(shù)據(jù)庫711獲取與在信息處理設(shè)備100中使用的顯示單元603的屏幕形狀或接近傳感器511的布置有關(guān)的裝置信息,并且使用該信息和用戶的位置信息從區(qū)域劃分模式數(shù)據(jù)庫712查閱相應(yīng)的區(qū)域劃分模式(步驟S1404)。
[0164]監(jiān)視器區(qū)域劃分單元710基于所獲取的區(qū)域劃分模式在屏幕中設(shè)置共用區(qū)域和用戶的用戶占用區(qū)域(步驟S1405),并且該處理的流程結(jié)束。
[0165]下面將描述由對象優(yōu)化單元720執(zhí)行的對象優(yōu)化處理的細(xì)節(jié)。
[0166]當(dāng)從輸入接口集成單元520輸入與用戶在屏幕上對對象進(jìn)行的操作有關(guān)的信息時,對象優(yōu)化單元720響應(yīng)于用戶的操作來執(zhí)行顯示處理,諸如對屏幕上的對象進(jìn)行旋轉(zhuǎn)、移動、顯示、劃分或拷貝等。響應(yīng)于用戶的拖動或拋擲操作而對對象進(jìn)行旋轉(zhuǎn)、移動、顯示、劃分或拷貝的處理類似于桌面的屏幕上的GUI操作。
[0167]在該實(shí)施方式中,在屏幕中設(shè)置用戶占用區(qū)域和共用區(qū)域,并且對象優(yōu)化單元720取決于存在要操作對象的區(qū)域來優(yōu)化顯示。優(yōu)化處理的代表示例是改變每個用戶占用區(qū)域中的相應(yīng)對象的方向以便正好面對相應(yīng)用戶的處理。
[0168]圖15示出了在共用區(qū)域中的對象#1被拖動或拋擲到用戶A的用戶占用區(qū)域A,并且對象的一部分或中心坐標(biāo)進(jìn)入用戶占用區(qū)域A的時間點(diǎn)處,對象優(yōu)化單元720自動旋轉(zhuǎn)對象#1以便正好面對用戶A的狀態(tài)。圖15還示出了在用戶B的用戶占用區(qū)域B中的對象#2被拖動或拋擲到用戶A的用戶占用區(qū)域A,并且對象的一部分或中心坐標(biāo)進(jìn)入用戶占用區(qū)域A的時間點(diǎn)處,對象優(yōu)化單元720自動旋轉(zhuǎn)對象#2以便正好面對用戶A的狀態(tài)。
[0169]如圖10所示,當(dāng)用戶B接近信息處理設(shè)備100時,在屏幕上在用戶B附近新設(shè)置用戶占用區(qū)域B。當(dāng)在用戶占用區(qū)域B中存在正好面對用戶A的對象#3并且用戶占用區(qū)域B新出現(xiàn)時,如圖16B所示,對象優(yōu)化單元720自動旋轉(zhuǎn)對象#3以便立即正好面對用戶B。[0170]可替代地,代替于立即旋轉(zhuǎn)對象,用戶占用區(qū)域B可以在通過用戶B接近信息處理設(shè)備100而新設(shè)置用戶占用區(qū)域B之后最初觸摸用戶占用區(qū)域B中的任何對象的時間點(diǎn)處成為有效的。在這種情況下,在用戶占用區(qū)域B成為有效的時間點(diǎn)處,可以同時旋轉(zhuǎn)用戶占用區(qū)域B中的所有對象以正好面對用戶B。
[0171 ] 對象優(yōu)化單元720可以基于從輸入接口集成單元520獲取的用戶的操作信息以及從監(jiān)視器區(qū)域劃分單元710接收的區(qū)域信息來執(zhí)行優(yōu)化對象的處理。圖17是示出了由對象優(yōu)化單元720執(zhí)行的對象優(yōu)化處理的流程的流程圖。
[0172]當(dāng)從輸入接口集成單元520接收到由用戶操作的對象的位置信息并且從監(jiān)視器區(qū)域劃分單元710獲取了劃分的監(jiān)視器區(qū)域信息時,對象優(yōu)化單元720檢查被用戶操作的對象所存在的區(qū)域(步驟S1701)
[0173]在此,當(dāng)被用戶操作的對象存在于用戶占用區(qū)域中時,對象優(yōu)化單元720檢查對象是否被定向?yàn)檎妹鎸τ脩粽加脜^(qū)域中的用戶(步驟S1702)。
[0174]當(dāng)對象未被定向?yàn)檎妹鎸τ脩魰r(步驟S1702中“否”),對象優(yōu)化單元720旋轉(zhuǎn)對象,以便正好面對相應(yīng)用戶占用區(qū)域中的用戶(步驟S1703)。
[0175]當(dāng)用戶將對象從共用區(qū)域或另一用戶的用戶占用區(qū)域拖動或拋擲到他或她的用戶占用區(qū)域時,可以基于用戶觸摸對象的位置來控制旋轉(zhuǎn)方向。圖18示出了在通過允許用戶觸摸對象的重心位置的右側(cè)并且拖動或拋擲對象,對象進(jìn)入用戶占用區(qū)域的時間點(diǎn)處,圍繞重心位置順時針旋轉(zhuǎn)對象以正好面對用戶的狀態(tài)。圖19示出了通過允許用戶觸摸對象的重心位置的左側(cè)并且拖動或拋擲對象,來圍繞重心位置逆時針旋轉(zhuǎn)對象以正好面對用戶的狀態(tài)。
[0176]如圖18和圖19所示,可以通過改變對象圍繞重心位置的旋轉(zhuǎn)方向來給用戶自然的操作感覺。
[0177]隨后,下面將描述由裝置交互數(shù)據(jù)發(fā)送和接收單元730執(zhí)行的裝置交互數(shù)據(jù)發(fā)送和接收處理。
[0178]如圖4所示,信息處理設(shè)備100可以通過使用通信單元150與另一設(shè)備(如用戶攜帶的移動終端)進(jìn)行通信。例如,在用戶觸摸屏幕或?qū)⑺蛩龜y帶的終端帶到靠近信息處理設(shè)備100的動作的背景下,在信息處理設(shè)備100與相應(yīng)的攜帶終端之間發(fā)送和接收諸如運(yùn)動圖像、靜止圖像、文本內(nèi)容等的數(shù)據(jù),該數(shù)據(jù)是要操作的對象的實(shí)體。
[0179]圖20示出了在信息處理設(shè)備100與用戶攜帶的終端之間給予和獲得對象的交互的示例。在圖中示出的示例中,當(dāng)用戶A使他或她攜帶的終端接近分配給用戶的用戶占用區(qū)域A附近時,進(jìn)行以下Π表達(dá):對象從終端附近出現(xiàn)并且流入用戶占用區(qū)域A。
[0180]信息處理設(shè)備100可以基于來自極近距離通信單元513的檢測信號的信號分析結(jié)果或來自攝像機(jī)單元503的捕捉的用戶圖像的識別結(jié)果來檢測用戶攜帶的終端接近用戶占用區(qū)域A附近。裝置交互數(shù)據(jù)發(fā)送和接收單元730可以通過使用用戶A與信息處理設(shè)備100之間的上下文(context)(或用戶A與另一用戶之間通過信息處理設(shè)備100的交換),來指定是否存在要從用戶發(fā)送至信息處理設(shè)備100的數(shù)據(jù)以及要發(fā)送的數(shù)據(jù)是什么。當(dāng)存在發(fā)送數(shù)據(jù)時,在用戶將他或她攜帶的終端帶到靠近用戶占用區(qū)域A的動作的背景下,裝置交互數(shù)據(jù)發(fā)送和接收單元730在信息處理設(shè)備100與相應(yīng)的攜帶終端之間發(fā)送和接收諸如運(yùn)動圖像、靜止圖像、文本內(nèi)容的數(shù)據(jù),該數(shù)據(jù)是要操作的對象的實(shí)體。[0181]在該背景下,當(dāng)向用戶攜帶的終端發(fā)送數(shù)據(jù)和從用戶攜帶的終端接收數(shù)據(jù)時,通過使用對象優(yōu)化單元720中的對象優(yōu)化處理,裝置交互數(shù)據(jù)發(fā)送和接收單元730進(jìn)行以下UI表達(dá):要操作的對象從用戶攜帶的終端出現(xiàn)在顯示單元603的屏幕上。圖20示出了要操作的對象從用戶A攜帶的終端流入用戶占用區(qū)域A的Π表達(dá)的示例。
[0182]圖21是示出了由裝置交互數(shù)據(jù)發(fā)送和接收單元730執(zhí)行的裝置交互數(shù)據(jù)發(fā)送和接收處理的流程的流程圖。當(dāng)基于來自極近距離通信單元513的檢測信號的信號分析結(jié)果,某個用戶攜帶的終端接近他或她的用戶占用區(qū)域附近時,啟動裝置交互數(shù)據(jù)發(fā)送和接收單元730的處理。
[0183]裝置交互數(shù)據(jù)發(fā)送和接收單元730基于來自極近距離通信單元513的檢測信號的信號分析結(jié)果,來檢查是否存在通信中的用戶攜帶的終端(步驟S2101)。
[0184]當(dāng)存在通信中的用戶攜帶的終端時(步驟S2101中“是”),裝置交互數(shù)據(jù)發(fā)送和接收單元730基于來自極近距離通信單元513的檢測信號的信號分析結(jié)果來獲取終端的位置(步驟S2102)。
[0185]裝置交互數(shù)據(jù)發(fā)送和接收單元730檢查是否存在要發(fā)送至用戶攜帶的終端的數(shù)據(jù)以及要從用戶攜帶的終端接收的數(shù)據(jù)(步驟S2103)。
[0186]當(dāng)存在要發(fā)送至用戶攜帶的終端的數(shù)據(jù)以及要從用戶攜帶的終端接收的數(shù)據(jù)時(步驟S2103中“是”),裝置交互數(shù)據(jù)發(fā)送和接收單元730根據(jù)發(fā)送和接收算法731取決于終端的位置來進(jìn)行要操作的對象的UI顯示(參見圖20)。裝置交互數(shù)據(jù)發(fā)送和接收單元730在Π顯示的背景下向終端發(fā)送數(shù)據(jù)以及從終端接收數(shù)據(jù),該數(shù)據(jù)是對象的實(shí)體(步驟S2104)。
[0187]如圖20和圖21所示,由信息處理設(shè)備100從用戶攜帶的終端獲取的對象被布置在相應(yīng)用戶的用戶占用區(qū)域中。當(dāng)在用戶之間給予和獲得數(shù)據(jù)時,僅必須要執(zhí)行在用戶占用區(qū)域之間移動對象的操作。圖22示出了由用戶A將用戶B保持在用戶占用區(qū)域B中的對象拷貝到用戶占用區(qū)域A的狀態(tài)。可替代地,可以劃分對象而不是拷貝對象。
[0188]當(dāng)拷貝在屏幕上的對象是諸如運(yùn)動圖像或靜止圖像的內(nèi)容時,簡單地準(zhǔn)備獨(dú)立數(shù)據(jù)。當(dāng)拷貝的對象是應(yīng)用的窗口時,準(zhǔn)備應(yīng)用的另一窗口,該另一窗口可以被最初保持對象的用戶和拷貝目的地的用戶協(xié)同操作。
[0189]C.取決于用戶位置的輸入單元和顯示⑶I的最佳選擇
[0190]信息處理設(shè)備100包括距離傳感器507和接近傳感器511,并且在例如圖1和圖3中示出的墻面形式下可以檢測信息處理設(shè)備100的主體(即屏幕)到用戶的距離。
[0191]信息處理設(shè)備100包括觸摸傳感器509、接近傳感器511、攝像機(jī)單元503和遙控器接收單元501,并且可以向用戶提供多個輸入單元,諸如觸摸屏幕、接近、使用手的手勢、遙控器以及取決于用戶狀態(tài)的間接操作。相應(yīng)的輸入單元取決于從信息處理設(shè)備100的主體(即屏幕)到用戶的距離適當(dāng)?shù)夭僮?。例如,位于距信息處理設(shè)備100的主體50cm內(nèi)的用戶可以通過直接觸摸屏幕來穩(wěn)妥地操作要操作的對象。由于位于距信息處理設(shè)備100的主體2m內(nèi)的用戶太遠(yuǎn)而不能直接觸摸屏幕,但可以通過識別由攝像機(jī)單元503捕捉的圖像來精確地捕捉面部或手的動作,所以用戶可以輸入手勢。位于距信息處理設(shè)備100的主體超過2m的用戶可以操作遙控器,因?yàn)閳D像識別的精確度低,但是可以穩(wěn)妥地輸入遙控器信號。取決于到用戶的距離來改變具有要顯示在屏幕上的對象的構(gòu)架或信息密度的最佳GUI顯不O
[0192]在該實(shí)施方式中,由于信息處理設(shè)備100取決于用戶位置或到用戶的距離而自動選擇多個輸入單元中的輸入單元,并且取決于用戶位置自動選擇或調(diào)整⑶I顯示,所以提高了用戶的便利性。
[0193]圖23示出了取決于到用戶的距離執(zhí)行優(yōu)化處理的操作單元120的內(nèi)配配置。操作單元120包括顯示⑶I優(yōu)化單元2310、輸入單元優(yōu)化單元2320和距離檢測模式切換單元2330。
[0194]顯示⑶I優(yōu)化單元2310取決于用戶位置和用戶狀態(tài)來優(yōu)化具有要顯示在顯示單元603的屏幕上的對象的構(gòu)架或信息密度的最佳GUI顯示。
[0195]在此,通過由距離檢測模式切換單元2330切換的距離檢測模式來獲取用戶位置。當(dāng)用戶位置變得靠近時,通過使用根據(jù)攝像機(jī)單元503所捕捉圖像的面部識別或與用戶攜帶的終端的接近通信,個人認(rèn)證(personal authenticat1n)是可以的?;诟鶕?jù)攝像機(jī)單元503所捕捉圖像的圖像識別或距離傳感器507中的信號分析來指定用戶狀態(tài)。用戶狀態(tài)廣義地被分類成“存在用戶(存在)”和“不存在用戶(不存在)”兩種狀態(tài)。狀態(tài)“存在用戶”被分類成“用戶正在看電視(顯示單元603的屏幕)(觀看中)”和“用戶沒在看電視(非觀看中)”兩種狀態(tài)。狀態(tài)“用戶正在看電視”被分類成“用戶正在操作電視(操作中)”和“用戶沒在操作電視(非操作中)”兩種狀態(tài)。
[0196]顯示⑶I優(yōu)化單元2310在確定用戶狀態(tài)時參考存儲單元140中的裝置輸入單元數(shù)據(jù)庫。在取決于所確定的用戶位置和用戶狀態(tài)而優(yōu)化顯示GUI時,參考存儲單元140中的GUI顯示(構(gòu)架和密度)數(shù)據(jù)庫和內(nèi)容數(shù)據(jù)庫。
[0197]圖24A示出了以下表格,在該表格中布置了由顯示⑶I優(yōu)化單元2310執(zhí)行的、與用戶位置和用戶狀態(tài)對應(yīng)的顯示⑶I優(yōu)化處理的。圖24B至圖24E示出了信息處理設(shè)備100的屏幕取決于用戶位置和用戶狀態(tài)的變化。
[0198]在“不存在用戶”的狀態(tài)下,顯示⑶I優(yōu)化單元2310停止顯示單元603的屏幕顯示,并且等待直到檢測到存在用戶為止(參見圖24B)。
[0199]在“存在用戶”的“用戶沒在看電視”的狀態(tài)下,顯示⑶I優(yōu)化單元2310選擇“自動變換(automatic zapping) ”作為最佳顯示⑶I (參見圖24C)。自動變換是隨機(jī)顯示要操作的各種對象并且吸引用戶的注意力來看電視。用于變換的對象包括由顯示CTI優(yōu)化單元2310基于內(nèi)容數(shù)據(jù)庫所選擇的多個對象,諸如除了通過使用電視調(diào)諧器單元170所接收的電視廣播的節(jié)目內(nèi)容以外,通過因特網(wǎng)從通信150獲取的網(wǎng)絡(luò)內(nèi)容以及來自另一用戶的電子郵件或消息。
[0200]圖25A示出了用于自動變換的顯示⑶I的示例。顯示⑶I優(yōu)化單元2310可以如圖25B所示時刻改變顯示在屏幕上的位置或尺寸(也就是說,暴露程度),以作用于用戶的潛意識。當(dāng)用戶的位置變得靠近并且個人認(rèn)證變得可能時,顯示⑶I優(yōu)化單元2310可以使用所識別的用戶信息選擇要自動變換的對象。
[0201]在“用戶正在看電視”的“用戶沒在操作電視”的狀態(tài)下,顯示⑶I優(yōu)化單元2310選擇“自動變換”作為最佳顯示GUI (參見圖24D)。在此,與上述不同,可以通過如圖26所示將屏幕劃分成展示區(qū)(stage)等等來規(guī)則地布置基于內(nèi)容數(shù)據(jù)庫所選擇的多個對象,以便于對單獨(dú)對象的顯示細(xì)節(jié)的理解。當(dāng)用戶的位置變得靠近并且個人認(rèn)證是可能的時,顯示GUI優(yōu)化單元2310可以使用所識別的用戶的信號選擇要自動變換的對象。顯示GUI優(yōu)化單元2310可以取決于用戶位置來控制顯示GUI的信息密度,使得當(dāng)用戶遠(yuǎn)離時GUI的信息密度降低,而當(dāng)用戶靠近時GUI的信息密度提高。
[0202]另一方面,在“用戶正在看電視”的“用戶正在操作電視”的狀態(tài)下,用戶使用由輸入單元優(yōu)化單元2320優(yōu)化的輸入單元來操作信息處理設(shè)備100 (參見圖24E)。在該狀態(tài)下,最佳輸入單元的示例包括對遙控器接收單元501的遙控器信號的輸入、對攝像機(jī)單元503的手勢輸入、由觸摸傳感器509檢測的觸摸輸入、對麥克風(fēng)505的語音輸入以及對接近傳感器511的接近輸入。顯示⑶I優(yōu)化單元2310可以取決于用戶的輸入操作來顯示所劃分的展示區(qū)中的對象作為最佳顯示GUI,并且可以響應(yīng)于用戶的操作來滾動或選擇性地操作對象。如圖27A所示,在通過使用輸入單元所指示的屏幕上的位置處顯示光標(biāo)。由于上面沒有放置光標(biāo)的對象不是用戶感興趣的,所以可以降低亮度等級以表達(dá)與圖中的陰影線所表示的感興趣對象的對比(其中光標(biāo)放置在圖中使用用戶的指尖觸摸的對象#3上)。如圖27B所示,當(dāng)用戶選擇上面放置光標(biāo)的對象時,所選擇的對象可以顯示在整個屏幕中(可替代地,可以被放大并且盡可能大地顯示)(其中所選擇的對象#3在圖中被放大)。
[0203]輸入單元優(yōu)化單元2320取決于用戶位置和用戶狀態(tài)來優(yōu)化用戶使用其操作信息處理設(shè)備100的輸入單元。
[0204]如上所述,在由距離檢測模式切換單元2330切換的距離檢測模式下獲取用戶的位置。當(dāng)用戶的位置變得靠近時,通過根據(jù)攝像機(jī)單元503所捕捉圖像的面部識別或與用戶攜帶的終端的接近通信,個人認(rèn)證是可能的。通過根據(jù)攝像機(jī)單元503所捕捉圖像的圖像識別或距離傳感器507的信號分析來指定用戶狀態(tài)。
[0205]輸入單元優(yōu)化單元2320在確定用戶狀態(tài)時參考存儲單元140中的裝置輸入單元數(shù)據(jù)庫。
[0206]圖28示出了以下表格:在該表格中布置了由輸入單元優(yōu)化單元2320執(zhí)行的、與用戶位置和用戶狀態(tài)對應(yīng)的輸入單元優(yōu)化處理。
[0207]在“不存在用戶”的狀態(tài)、“存在用戶”的“用戶沒在看電視”的狀態(tài)、以及“用戶正在看電視”的“用戶沒在操作電視”的狀態(tài)下,輸入單元優(yōu)化單元2320等待,直到用戶的操作開始為止。
[0208]在“用戶正在看電視”的“用戶正在操作電視”的狀態(tài)下,輸入單元優(yōu)化單元2320主要取決于用戶位置來優(yōu)化相應(yīng)的輸入單元。輸入單元的示例包括對遙控器接收單元501的遙控器信號的輸入、對攝像機(jī)單元503的手勢輸入、由觸摸傳感器509檢測的觸摸輸入、對麥克風(fēng)505的語音輸入以及對接近傳感器511的接近輸入。
[0209]遙控器接收單元501對于用戶的所有位置都啟動(也就是說,一般說來幾乎都啟動),并且等待,直到接收到遙控器信號為止。
[0210]當(dāng)用戶變得較遠(yuǎn)時,根據(jù)捕捉圖像的攝像機(jī)單元503的識別精確度降低。當(dāng)用戶變得太靠近時,用戶的體形容易偏離攝像機(jī)單元503的視野。因此,輸入單元優(yōu)化單元2320接收在幾十厘米至幾米的用戶位置的范圍內(nèi)對攝像機(jī)單元503的手勢輸入。
[0211]對疊加在顯示單元603的屏幕上的觸摸板的觸摸不限于用戶的手觸及到的范圍。因此,輸入單元優(yōu)化單元2320接收直到幾十厘米的用戶位置的范圍內(nèi)對觸摸傳感器509的觸摸輸入。甚至在未被觸摸的情況下,接近傳感器511可以檢測在幾十厘米內(nèi)的用戶。因此,輸入單元優(yōu)化單元2320接收接近輸入直到觸摸輸入是不可能的用戶位置。
[0212]當(dāng)用戶變得較遠(yuǎn)時,對麥克風(fēng)單元505的語音輸入的識別精確度降低。因此,輸入單元優(yōu)化單元2320接收在幾米的用戶位置的范圍內(nèi)對攝像機(jī)單元503的手勢輸入。
[0213]距離檢測模式切換單元2330執(zhí)行以下處理:對信息處理設(shè)備100取決于用戶位置來檢測到用戶的距離或用戶的位置的模式進(jìn)行切換。
[0214]在確定用戶狀態(tài)時,距離檢測模式切換單元2330參考存儲單元140中的用于每個檢測模式的區(qū)域覆蓋數(shù)據(jù)庫。
[0215]圖29示出了以下表格:在該表格中布置了由距離檢測模式切換單元2330執(zhí)行的、與用戶位置對應(yīng)的距離檢測模式切換處理。
[0216]距離傳感器507由具有較低功耗的傳感器裝置簡單構(gòu)成,諸如PSD傳感器或熱電傳感器或簡單攝像機(jī)。一般地,為了監(jiān)視在距信息處理設(shè)備1005至10米的半徑內(nèi)是否存在用戶,距離檢測模式切換單元2330 —般開啟距離傳感器507。
[0217]當(dāng)攝像機(jī)單元503采用單目式時,圖像識別單元504基于背景差異來執(zhí)行用戶的運(yùn)動識別、面部識別和軀干識別。距離檢測模式切換單元2330開啟在70厘米至6米的用戶位置的范圍內(nèi)的圖像識別單元504的識別(距離檢測)功能,在該范圍內(nèi)獲得根據(jù)所捕捉圖像的滿意的識別精確度。
[0218]當(dāng)攝像機(jī)單元503采用雙目式或主動式時,圖像識別單元504可以在稍微較近的60厘米至5米的范圍內(nèi) 實(shí)現(xiàn)足夠的識別精確度,并且距離檢測模式切換單元2330開啟在該用戶位置的范圍內(nèi)的圖像識別單元504的識別(距離檢測)功能。
[0219]當(dāng)用戶變得太靠近時,用戶的體形容易偏離攝像機(jī)單元503的視野。因此,當(dāng)用戶變得太靠近時,距離檢測模式切換單元2330可以關(guān)閉攝像機(jī)單元503和圖像識別單元504。
[0220]對疊加在顯示單元603的屏幕上的觸摸板的觸摸不限于用戶的手觸及到的范圍。因此,距離檢測模式切換單元2330開啟在幾十厘米的用戶位置的范圍內(nèi)的觸摸傳感器509的距離檢測功能。甚至在未被觸摸的情況下,接近傳感器511可以檢測在幾十厘米內(nèi)的用戶。因此,距離檢測模式切換單元2330開啟接近傳感器511的距離檢測功能直到觸摸輸入是不可能的用戶位置。
[0221]作為具有多個距離檢測模式的信息處理設(shè)備100的設(shè)計方法,由于用于檢測比幾米或10米更遠(yuǎn)的遠(yuǎn)程位置的距離檢測模式被設(shè)計成檢查用戶的存在,并且因此應(yīng)當(dāng)一般被開啟,所以優(yōu)選地使用具有低功耗的裝置。相反,由于用于檢測比I米更近的位置的距離檢測模式通過獲取具有高密度的信息可以具有識別功能(諸如面部識別功能和軀干識別功能),但在識別處理中消耗大功率,所以在不能實(shí)現(xiàn)滿意的識別精確度的距離上關(guān)閉其功倉泛。
[0222]D.取決于監(jiān)視器性能的對象的實(shí)際尺寸顯示
[0223]在根據(jù)相關(guān)技術(shù)的對象顯示系統(tǒng)中,在屏幕上顯示實(shí)際存在的對象的圖像而不考慮其實(shí)際尺寸信息。因此,要顯示的對象的尺寸取決于屏幕的尺寸或分辨率(dpi)而改變。例如,具有a厘米的橫向?qū)挾鹊陌伙@示在32英寸監(jiān)視器上時的橫向?qū)挾萢’與該包被顯示在50英寸監(jiān)視器上時的橫向?qū)挾萢”不同(a! = a’! =a”)(參見圖30)。
[0224]當(dāng)在同一監(jiān)視器屏幕上同時顯示多個對象的圖像時,在不考慮對象的實(shí)際尺寸信息的情況下,沒有正確地顯示對象的相互尺寸關(guān)系。例如,當(dāng)在同一監(jiān)視器屏幕上同時顯示具有a厘米的橫向?qū)挾鹊陌途哂衎厘米的橫向?qū)挾鹊拇鼤r,以a’厘米顯示包而以b’厘米顯示袋,也就是說,沒有正確地顯示其相互尺寸關(guān)系(a:b? a’:b’)(參見圖31)。
[0225]例如,在網(wǎng)購產(chǎn)品中,當(dāng)樣品圖像不能再現(xiàn)實(shí)際尺寸時,用戶不能準(zhǔn)確地將產(chǎn)品與他或她自己的體形搭配,從而可能購買不正確的產(chǎn)品。當(dāng)意圖通過網(wǎng)購?fù)瑫r購買多個產(chǎn)品并且在屏幕上同時顯示產(chǎn)品的樣品圖像,但沒有正確地顯示樣品圖像的相互尺寸關(guān)系時,用戶不能準(zhǔn)確地以組合來搭配產(chǎn)品,從而可能以不適當(dāng)?shù)慕M合購買產(chǎn)品。
[0226]相反,根據(jù)本實(shí)施方式的信息處理設(shè)備100管理要顯示的對象的實(shí)際尺寸信息,以及與顯示單元603的屏幕的尺寸和分辨率(像素間距)有關(guān)的信息,并且即使在對象或屏幕的尺寸改變時一般也在屏幕上以實(shí)際的尺寸顯示對象的圖像。
[0227]圖32示出了取決于監(jiān)視器性能執(zhí)行對象實(shí)際尺寸顯示處理的操作單元120的內(nèi)部配置。操作單元120包括實(shí)際尺寸顯示單元3210、實(shí)際尺寸估計單元3220和實(shí)際尺寸擴(kuò)展單元3230。假定實(shí)際尺寸顯示單元3210、實(shí)際尺寸估計單元3220和實(shí)際尺寸擴(kuò)展單元3230中的至少一個功能塊被實(shí)施在通過通信單元150連接的云服務(wù)器上。
[0228]當(dāng)在同一監(jiān)視器屏幕上同時顯示多個對象的圖像時,實(shí)際尺寸顯示單元3210通過考慮對象的實(shí)際尺寸信息,取決于顯示單元603的屏幕的尺寸和分辨率(像素間距),一般以實(shí)際尺寸顯示對象的圖像。當(dāng)在顯示單元603的屏幕上同時顯示多個對象的圖像時,實(shí)際尺寸顯示單元3210正確地顯示對象的相互尺寸關(guān)系。
[0229]實(shí)際尺寸顯示單元3210從存儲單元140讀取監(jiān)視器規(guī)格,諸如顯示單元603的屏幕的尺寸和分辨率(像素間距)。實(shí)際尺寸顯示單元3210從旋轉(zhuǎn)和附接機(jī)制單元180獲取監(jiān)視器狀態(tài),諸如顯示單元603的屏幕的方向和傾斜度。 [0230]實(shí)際尺寸顯示單元3210從存儲單元140中的對象圖像數(shù)據(jù)庫讀取要顯示的對象的圖像,并且從對象實(shí)際尺寸數(shù)據(jù)庫讀取對象的實(shí)際尺寸信息。在此,假定對象圖像數(shù)據(jù)庫或?qū)ο髮?shí)際尺寸數(shù)據(jù)庫被布置在通過通信單元150連接的數(shù)據(jù)庫服務(wù)器上。
[0231]實(shí)際尺寸顯示單元3210基于監(jiān)視器性能和監(jiān)視器狀態(tài)來轉(zhuǎn)換對象的圖像,使得要顯示的對象被以實(shí)際尺寸顯示在顯示單元603的屏幕上(可替代地,使得對象的相互尺寸關(guān)系是正確的)。也就是說,即使當(dāng)同一對象的圖像被顯示在具有不同監(jiān)視器規(guī)格的屏幕上時,a = a’ = a”也成立,如圖33所示。
[0232]如圖34所示,當(dāng)在同一屏幕上顯示具有不同的實(shí)際尺寸的兩個對象的圖像時,實(shí)際尺寸顯示單元3210顯示a:b = a’:b’的關(guān)系,也就是說,正確的相互尺寸關(guān)系。
[0233]例如,當(dāng)用戶通過使用樣品圖像的顯示來網(wǎng)購時,信息處理設(shè)備100可以實(shí)現(xiàn)對象的實(shí)際尺寸顯示或可以如上所述以正確的尺寸關(guān)系顯示對象的多個樣品圖像。因此,用戶可以準(zhǔn)確地搭配產(chǎn)品,從而能夠減少產(chǎn)品的錯誤選擇。
[0234]另外將描述將實(shí)際尺寸顯示單元3210中的對象圖像的實(shí)際尺寸顯示應(yīng)用于網(wǎng)購應(yīng)用的示例。響應(yīng)于用戶對目錄的顯示屏上的期望產(chǎn)品圖像的觸摸,將該產(chǎn)品的圖像切換成實(shí)際尺寸顯示(參見圖35)。以實(shí)際尺寸顯示的圖像響應(yīng)于用戶的觸摸能夠在姿態(tài)方面被旋轉(zhuǎn)或改變,從而能夠以改變后的實(shí)際尺寸對象的方向來顯示(參見圖36)。
[0235]實(shí)際尺寸估計單元3220執(zhí)行估計以下對象的實(shí)際尺寸的處理:該對象的實(shí)際尺寸信息是盡管參考對象實(shí)際尺寸數(shù)據(jù)庫也不能獲得的,諸如由攝像機(jī)單元503成像的人。例如,當(dāng)實(shí)際尺寸被估計的對象是用戶的面部時,基于用戶面部數(shù)據(jù),諸如通過使用圖像識別單元504識別由攝像機(jī)單元503捕捉的圖像而獲得的用戶的面部尺寸、年齡和方向,以及在由距離檢測模式切換單元2330切換的距離檢測模式下所獲得的用戶的位置,來估計用戶的實(shí)際尺寸。
[0236]所估計的用戶的實(shí)際尺寸信息被反饋至實(shí)際尺寸顯示單元3210,并且被存儲在例如對象圖像數(shù)據(jù)庫中。根據(jù)用戶面部數(shù)據(jù)而估計的實(shí)際尺寸信息被用于實(shí)際尺寸顯示單元3210中的取決于監(jiān)視器性能的后續(xù)的實(shí)際尺寸顯示。
[0237]例如,如圖37A所示,當(dāng)顯示包括主題(嬰兒)的捕捉圖像的對象時,實(shí)際尺寸估計單元3220基于其面部數(shù)據(jù)估計實(shí)際尺寸。之后,即使當(dāng)用戶通過觸摸操作來放大和顯示對象時,如圖37B所示,對象不被放大超過主題的實(shí)際尺寸。也就是說,沒有不自然地放大嬰兒的圖像,從而保持了圖像的真實(shí)性。
[0238]當(dāng)網(wǎng)絡(luò)內(nèi)容和由攝像機(jī)單元503成像的內(nèi)容以并列或重疊方式顯示在顯示單元603的屏幕上時,可以通過基于所估計的實(shí)際尺寸對內(nèi)容的圖像進(jìn)行歸一化(normalize),來實(shí)現(xiàn)協(xié)調(diào)的并列或重疊顯示。
[0239]實(shí)際尺寸擴(kuò)展單元3230將通過實(shí)際尺寸顯示單元3210實(shí)現(xiàn)在顯示單元603的屏幕上的對象的實(shí)際尺寸顯示以3D來實(shí)現(xiàn),也就是說,包括深度方向。當(dāng)通過僅在水平方向上的雙目式或視差射線重構(gòu)類型(parallax rays reconstruct1n type)以3D來顯示對象時,僅在生成3D圖像時所假定的觀看位置處實(shí)現(xiàn)期望的效果??梢酝ㄟ^在所有方向上的視差射線重構(gòu)類型從任何位置以實(shí)際尺寸來顯示對象。
[0240]實(shí)際尺寸擴(kuò)展單元3230檢測用戶的視點(diǎn)位置,并且也在僅在水平方向上的雙目式或視差射線重構(gòu)類型中關(guān)于所檢測的位置來校正3D圖像,由此,可以從任何位置實(shí)現(xiàn)相同的實(shí)際尺寸顯示。
[0241]例如,可以參考共同擁有的JP-A-2002-300602、JP-A-2005-149127 和JP-A-2005-142957。
[0242]E.圖像組的同時顯示
[0243]在顯示系統(tǒng)中,可以以并列或重疊方式在同一屏幕上同時顯示多個源的圖像內(nèi)容。其示例包括⑴多個用戶相互視頻聊天的情況、⑵從記錄介質(zhì)(諸如DVD)再現(xiàn)的(或者通過網(wǎng)絡(luò)以流方式再現(xiàn)的)指導(dǎo)者的圖像或者由攝像機(jī)單元503捕捉的用戶他自己或她自己的圖像在瑜伽課等時間被同時顯示的情況、以及⑶網(wǎng)購中的產(chǎn)品的樣品圖像以及由攝像機(jī)單元503捕捉的用戶他自己或她自己的圖像以重疊方式顯示以用于搭配的情況。
[0244]在(I)至(3)中的任何情況下,當(dāng)沒有正確顯示同時顯示的圖像的尺寸關(guān)系時,用戶不能適當(dāng)?shù)厥褂盟@示的圖像。例如,當(dāng)相互視頻聊天的用戶的面部的尺寸或位置全部不同時(圖38A),與聊天對方的面對面接觸特性被破壞,從而不促進(jìn)談話。當(dāng)用戶的體形與指導(dǎo)者的體形的尺寸或位置不相互匹配時(圖39A),用戶難以檢查他或她的動作與指導(dǎo)者的動作之間的差異,不能看到要改正和改進(jìn)的任何點(diǎn),從而不能實(shí)現(xiàn)課程的滿意結(jié)果。當(dāng)產(chǎn)品的樣品圖像沒有與用戶(該用戶在他或她的手里拿著產(chǎn)品做出姿勢)的圖像在適當(dāng)?shù)奈恢靡哉_的尺寸關(guān)系重疊時,用戶難以確定產(chǎn)品是否與用戶相配,從而不能實(shí)現(xiàn)準(zhǔn)確的搭配(圖40A) ο
[0245]相反,當(dāng)以并列或重疊方式顯示多個源的圖像內(nèi)容時,根據(jù)本實(shí)施方式的信息處理設(shè)備100將圖像進(jìn)行歸一化,并且基于諸如圖像的比例(scale)或相應(yīng)區(qū)域的信息,以并列或重疊方式顯示經(jīng)歸一化的圖像。當(dāng)執(zhí)行歸一化時,信息處理設(shè)備對數(shù)字圖像數(shù)據(jù)(諸如靜止圖像和運(yùn)動圖像)執(zhí)行數(shù)字縮放圖像處理等。當(dāng)并列圖像或重疊圖像中之一是使用攝像機(jī)單元503捕捉的圖像時,對實(shí)際的攝像機(jī)執(zhí)行光學(xué)控制,諸如平移、傾斜和縮放。
[0246]可以使用諸如通過面部識別獲得的面部尺寸、年齡和方向的信息或諸如通過個人識別獲得的軀干形狀或尺寸的信息來簡單地實(shí)施圖像歸一化處理。當(dāng)以并列或重疊方式顯示多個圖像時,對一個圖像自動執(zhí)行鏡像或旋轉(zhuǎn)處理,以容易地匹配其他圖像。
[0247]圖38B示出了通過對多個圖像的歸一化處理而使相互視頻聊天的用戶的面部尺寸或位置相互匹配的狀態(tài)。圖39B示出了通過對多個圖像的歸一化處理而使并列顯示在屏幕上的用戶的體形與指導(dǎo)者的體形的尺寸或位置相互匹配的狀態(tài)。圖40B示出了通過對多個圖像的歸一化處理而使產(chǎn)品的樣品圖像被顯示成在適當(dāng)?shù)奈恢锰幰哉_的尺寸關(guān)系與用戶(該用戶在他或她的手里拿著產(chǎn)品做出姿勢)的圖像重疊的狀態(tài)。在圖39B或圖40B中,除了尺寸歸一化處理之外,還進(jìn)行鏡像處理,以便用戶容易地根據(jù)由攝像機(jī)單元503捕捉的圖像來校正用戶的姿勢。如果需要,也可以進(jìn)行旋轉(zhuǎn)處理。當(dāng)用戶的體形與指導(dǎo)者的體形可以被歸一化時,可以如圖39C所示以重疊方式顯示其圖像,而不是如圖39B所示并列顯示其圖像,由此,用戶可以容易地識別用戶的姿勢與指導(dǎo)者的姿勢之間的差異。
[0248]圖41示出了進(jìn)行圖像歸一化處理的操作單元120的內(nèi)部配置。操作單元120包括圖像間歸一化單元4110、面部歸一化單元4120和實(shí)際尺寸擴(kuò)展單元4130。在此,圖像間歸一化單元4110、面部歸一化單元4120和實(shí)際尺寸擴(kuò)展單元4130中的至少一個功能塊被假定成實(shí)施在通過通信單元150連接的云服務(wù)器上。
[0249]圖像間歸一化單元4110進(jìn)行歸一化處理,使得在多個圖像之間正確地顯示用戶的面部圖像與另一對象之間的尺寸關(guān)系。
[0250]圖像間歸一化單元4110通過輸入接口集成單元520接收使用攝像機(jī)單元503捕捉的用戶的圖像。此時,也獲取在對用戶進(jìn)行成像時的攝像機(jī)信息,諸如攝像機(jī)單元503的平移、傾斜和縮放。圖像間歸一化單元4110從圖像數(shù)據(jù)庫中獲取要與用戶的圖像并列或重疊顯示的另一對象的圖像,并且獲取用戶的圖像與另一對象的圖像以并列或重疊方式顯示的模式。圖像數(shù)據(jù)庫可以布置在存儲單元140中,或可以布置在通過通信單元150來訪問的數(shù)據(jù)庫服務(wù)器上。
[0251]圖像間歸一化單元4110對用戶的圖像執(zhí)行圖像處理,諸如放大、旋轉(zhuǎn)和鏡像,使得根據(jù)歸一化算法來校正關(guān)于另一對象的尺寸關(guān)系或姿勢,并且生成用于控制攝像機(jī)單元503的平移、傾斜、縮放等的攝像機(jī)控制信息,以便適當(dāng)?shù)夭蹲接脩舻膱D像。例如,如圖40B所示,通過圖像間歸一化單元4110的處理以與另一對象的圖像的正確尺寸關(guān)系來顯示用戶的圖像。
[0252]面部歸一化單元4120進(jìn)行歸一化處理,使得使用攝像機(jī)單元503捕捉的用戶的面部圖像以與另一對象的面部圖像(例如,從記錄介質(zhì)再現(xiàn)的圖像中的指導(dǎo)者的面部或與用戶視頻聊天的對方用戶的面部)的正確尺寸關(guān)系來顯示。
[0253]面部歸一化單元4120通過輸入接口集成單元520接收使用攝像機(jī)單元503捕捉的用戶的圖像。此時,也獲取在對用戶進(jìn)行成像時的攝像機(jī)信息,諸如攝像機(jī)單元503的平移、傾斜和縮放。面部歸一化單元4120通過存儲單元140或通信單元150獲取要與用戶的捕捉圖像并列或重疊顯示的另一對象的面部圖像。[0254]面部歸一化單元4120對用戶的圖像進(jìn)行圖像處理,諸如放大、旋轉(zhuǎn)和鏡像,使得面部圖像的尺寸關(guān)系是正確的,并且生成用于控制攝像機(jī)單元503的平移、傾斜、縮放等的攝像機(jī)控制信息,以便適當(dāng)?shù)夭蹲接脩舻膱D像。例如,如圖38B、圖39B和圖39C所示,通過面部歸一化單元4120的處理以與另一面部圖像的圖像的正確尺寸關(guān)系來顯示用戶的圖像。
[0255]實(shí)際尺寸擴(kuò)展單元4130將通過圖像間歸一化單元4110實(shí)現(xiàn)在顯示單元603的屏幕上的對象的并列或重疊顯示以3D來實(shí)現(xiàn),即包括深度方向。當(dāng)通過僅在水平方向上的雙目式或視差射線重構(gòu)類型以3D來顯示對象時,僅在生成3D圖像時所假定的觀看位置處實(shí)現(xiàn)期望的效果。可以通過在所有方向上的視差射線重構(gòu)類型從任何位置以實(shí)際尺寸來顯示對象。
[0256]實(shí)際尺寸擴(kuò)展單元4130檢測用戶的視點(diǎn)位置,并且也在僅在水平方向上的雙目式或視差射線重構(gòu)類型中關(guān)于所檢測的位置來校正3D圖像,由此,可以從任何位置實(shí)現(xiàn)相同的實(shí)際尺寸顯示。
[0257]例如,可以參考共同擁有的JP-A-2002-300602、JP-A-2005-149127 和JP-A-2005-142957ο
[0258]F.在旋轉(zhuǎn)屏幕上的視頻內(nèi)容的顯示方法
[0259]如上所示,根據(jù)本實(shí)施方式的信息處理設(shè)備100的主體通過使用旋轉(zhuǎn)和附接機(jī)制單元180而旋轉(zhuǎn)且可拆卸地附接至例如墻。當(dāng)旋轉(zhuǎn)地操作主體,同時信息處理設(shè)備100的電源接通時,也就是說,當(dāng)要操作的對象顯示在顯示單元603上時,相應(yīng)地旋轉(zhuǎn)對象,使得用戶可以以正確的姿勢觀看對象。
[0260]下面將描述在信息處理設(shè)備100的主體的任何旋轉(zhuǎn)角度或者在其轉(zhuǎn)變過程中最佳地調(diào)整圖像內(nèi)容的顯示形式的方法。
[0261]在屏幕的任何旋轉(zhuǎn)角度或者在其轉(zhuǎn)變過程中的圖像內(nèi)容的顯示形式的示例包括如下三種方法:(I)在任何旋轉(zhuǎn)角度完全不覆蓋圖像內(nèi)容的顯示形式、(2)圖像內(nèi)容中的感興趣內(nèi)容在任何旋轉(zhuǎn)角度被最大化的顯示形式、以及(3)旋轉(zhuǎn)圖像內(nèi)容以便不產(chǎn)生無效區(qū)域的顯示形式。
[0262]圖42示出了顯示圖像內(nèi)容的整個區(qū)域,以便當(dāng)逆時針旋轉(zhuǎn)信息處理設(shè)備100 (屏幕)90度時不在任何旋轉(zhuǎn)角度覆蓋圖像內(nèi)容的顯示形式。如圖所示,當(dāng)在水平放置的屏幕上顯示水平方向上長的圖像內(nèi)容,并且將屏幕逆時針旋轉(zhuǎn)90度成豎直放置時,圖像內(nèi)容在尺寸上減小,并且在屏幕中出現(xiàn)由黑色表示的無效區(qū)域。在將屏幕從水平放置狀態(tài)改變成豎直放置狀態(tài)的過程中,圖像內(nèi)容具有最小尺寸。
[0263]當(dāng)圖像內(nèi)容的至少一部分被覆蓋時,存在如下問題:作為版權(quán)作品的圖像內(nèi)容失去了同一性(identity)。在圖42所示的顯示形式中,在任何旋轉(zhuǎn)角度或者在其轉(zhuǎn)變過程中保證了作為版權(quán)作品的同一性。也就是說,這種顯示形式適合于所保護(hù)的內(nèi)容。
[0264]圖43示出了在將信息處理設(shè)備100 (屏幕)逆時針旋轉(zhuǎn)90度的過程中在任何旋轉(zhuǎn)角度將圖像內(nèi)容中的感興趣區(qū)域最大化的顯示形式。在圖中,圖像內(nèi)容中的包括使用虛線所圍繞的主題的區(qū)域被設(shè)置為感興趣區(qū)域,并且在任何旋轉(zhuǎn)角度將該感興趣區(qū)域最大化。由于感興趣區(qū)域是豎直方向上長的,所以通過將屏幕從水平放置狀態(tài)改變成豎直放置狀態(tài),圖像內(nèi)容被放大。在從水平放置狀態(tài)向豎直放置狀態(tài)轉(zhuǎn)變的過程中,在屏幕的對角線方向上將感興趣區(qū)域最大化地放大。在從水平放置狀態(tài)向豎直放置狀態(tài)轉(zhuǎn)變的過程中,在屏幕中出現(xiàn)由黑色表達(dá)的無效區(qū)域。
[0265]作為圖像內(nèi)容中的感興趣區(qū)域吸引注意力的顯示形式,可以考慮旋轉(zhuǎn)圖像內(nèi)容同時保持感興趣區(qū)域的尺寸恒定的修改示例。隨著屏幕的旋轉(zhuǎn),感興趣區(qū)域看起來平滑地旋轉(zhuǎn),但是放大了無效區(qū)域。
[0266]圖44示出了當(dāng)將信息處理設(shè)備100 (屏幕)逆時針旋轉(zhuǎn)90度時旋轉(zhuǎn)圖像內(nèi)容以便不產(chǎn)生無效區(qū)域的顯示形式。
[0267]圖45示出了在圖42至圖44中示出的顯示形式下圖像內(nèi)容的旋轉(zhuǎn)位置與縮放比率之間的關(guān)系。在圖42中示出的在任何旋轉(zhuǎn)角度完全不覆蓋圖像內(nèi)容的顯示形式中,可以保護(hù)內(nèi)容,但在轉(zhuǎn)變過程中產(chǎn)生了大的無效區(qū)域。由于在轉(zhuǎn)變過程中圖像被縮小,所以可能給用戶不舒適的感覺。在圖43中示出的在任何旋轉(zhuǎn)角度將圖像內(nèi)容中的感興趣區(qū)域最大化的顯示形式中,可以在改變屏幕的過程中平滑地顯示感興趣區(qū)域,但在轉(zhuǎn)變過程中產(chǎn)生了無效區(qū)域。在圖44中示出的顯示形式中,在轉(zhuǎn)變過程中不產(chǎn)生無效區(qū)域,在轉(zhuǎn)變過程中放大了圖像內(nèi)容,從而可能給觀看圖像內(nèi)容的用戶不自然的印象。
[0268]圖46是示出了當(dāng)旋轉(zhuǎn)信息處理設(shè)備100 (顯示單元603的屏幕)時在操作單元120中控制圖像內(nèi)容的顯示形式的處理的流程的流程圖。例如,當(dāng)旋轉(zhuǎn)和附接機(jī)制單元180檢測到信息處理設(shè)備100的主體被旋轉(zhuǎn),或當(dāng)三軸傳感器515檢測到信息處理設(shè)備100的主體在旋轉(zhuǎn)位置方面變化時,開始該處理的流程。
[0269]當(dāng)旋轉(zhuǎn)信息處理設(shè)備100 (顯示單元603的屏幕)時,操作單元120獲取顯示在屏幕上的圖像內(nèi)容的屬性信息(步驟S4601)。然后,檢查屏幕上顯示的圖像內(nèi)容是否是被版權(quán)等保護(hù)的內(nèi)容(步驟S4602)。
[0270]在此,當(dāng)顯示在屏幕上的圖像內(nèi)容是被版權(quán)等保護(hù)的內(nèi)容時(步驟S4602中“是”),操作單元120選擇如圖42所示的顯示圖像內(nèi)容的整個區(qū)域以便不在任何旋轉(zhuǎn)角度覆蓋圖像內(nèi)容的顯示形式(步驟S4603)。
[0271]當(dāng)顯示在屏幕上的圖像內(nèi)容不是被版權(quán)等保護(hù)的內(nèi)容時(步驟S4602中“否”),檢查是否存在由用戶指定的顯示形式(步驟S4604)。
[0272]當(dāng)用戶選擇顯示圖像內(nèi)容的整個區(qū)域的顯示形式時,處理的流程進(jìn)行至步驟S4603。當(dāng)用戶選擇最大化地顯示感興趣區(qū)域的顯示形式時,處理的流程進(jìn)行至步驟S4605。當(dāng)用戶選擇不顯示無效區(qū)域的顯示形式時,處理的流程進(jìn)行至步驟S4606。當(dāng)用戶不選擇任何顯示形式時,選擇三種顯示形式之中被設(shè)置為默認(rèn)的顯示形式。
[0273]圖47示出了執(zhí)行在信息處理設(shè)備100的主體的任何旋轉(zhuǎn)角度或者在其轉(zhuǎn)變過程中調(diào)整圖像內(nèi)容的顯示形式的處理的操作單元120的內(nèi)部配置。操作單元120包括顯示形式確定單元4710、旋轉(zhuǎn)位置輸入單元4720和圖像處理單元4730,并且對從所接收的電視廣播或記錄介質(zhì)再現(xiàn)的圖像內(nèi)容的顯示形式進(jìn)行調(diào)整。
[0274]顯示形式確定單元4710根據(jù)圖46中示出的處理的流程來確定當(dāng)在信息處理設(shè)備100的主體的任何旋轉(zhuǎn)角度或者在其轉(zhuǎn)變的過程中旋轉(zhuǎn)圖像內(nèi)容時的顯示形式。
[0275]旋轉(zhuǎn)位置輸入單元4720通過輸入接口集成單元520接收由旋轉(zhuǎn)和附接機(jī)制單元180或三軸傳感器515獲得的信息處理設(shè)備100的主體(或顯示單元603的屏幕)的旋轉(zhuǎn)位置。
[0276]圖像處理單元4730基于由顯示形式確定單元4710確定的顯示形式對從所接收的電視廣播或記錄介質(zhì)再現(xiàn)的圖像內(nèi)容進(jìn)行處理,以便適合于傾斜一旋轉(zhuǎn)角度的顯示單元603的屏幕,該旋轉(zhuǎn)角度被輸入至旋轉(zhuǎn)位置輸入單元4720。
[0277]G.本公開的技術(shù)
[0278]本說明書中所公開的技術(shù)可以具有下面的配置。
[0279](I) 一種信息處理設(shè)備,包括:
[0280]控制單元,通過檢測從所述設(shè)備的外部輸入至所述設(shè)備的至少一個信息信號,基于對于(i)用戶的位置變化以及(ii)用戶的狀態(tài)的確定來控制用戶接口。
[0281](2)根據(jù)(I)所述的設(shè)備,其中,所述用戶接口包括要顯示在顯示單元上的圖形用戶接口。
[0282](3)根據(jù)(2)所述的設(shè)備,其中,所述設(shè)備包括所述顯示單元。
[0283](4)根據(jù)⑴所述的設(shè)備,其中,所述控制單元基于所述用戶的位置變化和所述用戶的狀態(tài),來控制要顯示在顯示單元的顯示屏上并且由用戶操作的一個或更多個對象的構(gòu)架或信息密度中的至少一個.[0284](5)根據(jù)⑴所述的設(shè)備,其中,所述控制單元基于所述用戶的位置變化和所述用戶的狀態(tài),來控制由用戶操作的一個或更多個對象的構(gòu)架或信息密度中的至少一個。
[0285](6)根據(jù)(I)所述的設(shè)備,其中,所述控制單元根據(jù)用戶是否正在觀看顯示單元的顯示屏來控制所述用戶接口。
[0286](7)根據(jù)(6)所述的設(shè)備,其中,當(dāng)用戶正在觀看所述顯示屏?xí)r,所述控制單元選擇自動變換處理來在所述顯示屏上顯示至少一個對象。
[0287](8)根據(jù)⑴所述的設(shè)備,其中,所述控制單元基于所述用戶的位置變化來控制要顯示在顯示單元的顯示屏上的對象的信息密度。
[0288](9)根據(jù)⑴所述的設(shè)備,其中,所述控制單元基于所述用戶的位置是否是所述用戶能夠被個人認(rèn)證的位置來控制對要顯示在顯示單元的顯示屏上的對象的選擇。
[0289](10)根據(jù)(9)所述的設(shè)備,其中,當(dāng)所述用戶的位置是所述用戶能夠被個人認(rèn)證的位置時,所述控制單元使用所識別的所述用戶的信息來控制對要顯示在所述顯示屏上的對象的選擇。
[0290](11)根據(jù)⑴所述的設(shè)備,其中,所述控制單元基于所述用戶的位置變化和所述用戶的狀態(tài)來優(yōu)化所述用戶接口的輸入單元。
[0291](12)根據(jù)(11)所述的設(shè)備,其中,所述輸入單元包括接近傳感器、麥克風(fēng)、觸摸傳感器、攝像機(jī)單元或遙控器中的至少一個。
[0292](13)根據(jù)(I)所述的設(shè)備,其中,所述控制單元根據(jù)所述用戶是否正在觀看顯示單元的顯示屏來優(yōu)化所述用戶接口的輸入單元。
[0293](14)根據(jù)(I)所述的設(shè)備,其中,所述控制單元基于所述用戶的位置變化來優(yōu)化所述用戶接口的輸入單元。
[0294](15)根據(jù)(I)所述的設(shè)備,其中,所述控制單元基于所述用戶的位置是否是用戶能夠被個人認(rèn)證的位置來優(yōu)化所述用戶接口的輸入單元。
[0295](16)根據(jù)⑴所述的設(shè)備,其中,所述控制單元基于檢測到的距離來控制在模式之間進(jìn)行切換的處理,以所述模式來檢測從顯示單元的顯示屏到所述用戶的距離。
[0296](17)根據(jù)(I)所述的設(shè)備,其中,所述控制單元確定相對于顯示單元的所述用戶的位置變化。
[0297](18)根據(jù)⑴所述的設(shè)備,其中,所述用戶的狀態(tài)基于所述用戶的位置變化來確定。
[0298](19) 一種信息處理方法,包括:
[0299]由處理器通過檢測從信息處理設(shè)備的外部輸入至所述信息處理設(shè)備的至少一個信息信號,基于對于(i)用戶的位置變化以及(ii)用戶的狀態(tài)的確定來控制用戶接口。
[0300](20) 一種記錄有能夠由計算機(jī)執(zhí)行的程序的非暫態(tài)記錄介質(zhì),所述程序包括:
[0301]通過檢測從信息處理設(shè)備的外部輸入至所述信息處理設(shè)備的至少一個信息信號,基于對于(i)用戶的位置變化以及(ii)用戶的狀態(tài)的確定來控制用戶接口。
[0302](101) 一種信息處理設(shè)備,包括:
[0303]顯示單元;
[0304]用戶檢測單元,檢測存在于所述顯示單元周圍的用戶;以及
[0305]操作單元,當(dāng)所述用戶檢測單元檢測到用戶時,對要顯示在所述顯示單元上的對象進(jìn)行處理。
[0306](102)根據(jù)(101)所述的信息處理設(shè)備,其中,所述用戶檢測單元包括接近傳感器,所述接近傳感器布置在所述顯示單元的屏幕的四個側(cè)面邊緣的每一個中,并且檢測出現(xiàn)在相應(yīng)側(cè)面邊緣附近中的用戶。
[0307](103)根據(jù)(101)所述的信息處理設(shè)備,其中,所述操作單元取決于由所述用戶檢測單元檢測的用戶的布置來在所述顯示單元的屏幕上設(shè)置每個所檢測到的用戶的用戶占用區(qū)域和由用戶共享的共用區(qū)域。
[0308](104)根據(jù)(103)所述的信息處理設(shè)備,其中,所述操作單元在所述顯示單元的屏幕上顯示要由用戶操作的一個或更多個對象。
[0309](105)根據(jù)(104)所述的信息處理設(shè)備,其中,所述操作單元對要在所述用戶占用區(qū)域中操作的對象進(jìn)行優(yōu)化。
[0310](106)根據(jù)(104)所述的信息處理設(shè)備,其中,所述操作單元對要在所述用戶占用區(qū)域中操作的對象進(jìn)行旋轉(zhuǎn),以便正好面對相應(yīng)用戶。
[0311](107)根據(jù)(104)所述的信息處理設(shè)備,其中,所述操作單元對從所述共用區(qū)域或另外的用戶占用區(qū)域移動到相應(yīng)用戶占用區(qū)域的對象進(jìn)行旋轉(zhuǎn),以便正好面對相應(yīng)用戶。
[0312](108)根據(jù)(107)所述的信息處理設(shè)備,其中,當(dāng)用戶在區(qū)域之間拖動和移動對象時,所述操作單元控制要操作的對象基于用戶相對于對象的重心位置的操作位置被旋轉(zhuǎn)的旋轉(zhuǎn)方向。
[0313](109)根據(jù)(103)所述的信息處理設(shè)備,其中,當(dāng)在所述顯示單元的屏幕中設(shè)置由所述用戶檢測單元新檢測到的用戶的用戶占用區(qū)域時,所述操作單元顯示表示新檢測到用戶的檢測指示符。
[0314](110)根據(jù)(104)所述的信息處理設(shè)備,還包括:
[0315]數(shù)據(jù)發(fā)送和接收單元,向由用戶攜帶的終端發(fā)送數(shù)據(jù)以及從用戶攜帶的終端接收數(shù)據(jù)。
[0316](111)根據(jù)(110)所述的信息處理設(shè)備,其中,所述數(shù)據(jù)發(fā)送和接收單元執(zhí)行與由通過所述用戶檢測單元檢測到的用戶攜帶的終端的數(shù)據(jù)發(fā)送和接收處理,并且所述操作單元使與從由用戶攜帶的終端接收的數(shù)據(jù)對應(yīng)的對象出現(xiàn)在相應(yīng)用戶占用區(qū)域中。
[0317](112)根據(jù)(104)所述的信息處理設(shè)備,其中,當(dāng)在用戶的用戶占用區(qū)域之間移動對象時,所述操作單元將對象拷貝或劃分到作為目的地的用戶占用區(qū)域。
[0318](113)根據(jù)(112)所述的信息處理設(shè)備,其中,所述操作單元在作為目的地的用戶占用區(qū)域中顯示準(zhǔn)備為獨(dú)立數(shù)據(jù)的對象的拷貝。
[0319](114)根據(jù)(112)所述的信息處理設(shè)備,其中,所述操作單元在作為目的地的用戶占用區(qū)域中顯示對象的拷貝,所述對象是能夠由用戶協(xié)同操作的應(yīng)用程序的另外的窗口。
[0320](115) 一種信息處理方法,包括:
[0321]檢測周圍存在的用戶;以及
[0322]當(dāng)在檢測用戶中檢測到用戶時對要顯示的對象進(jìn)行處理。
[0323](116) 一種計算機(jī)可讀計算機(jī)程序,所述計算機(jī)程序使計算機(jī)用作:
[0324]顯示單元;
[0325]用戶檢測單元,檢測所述顯示單元周圍存在的用戶;以及
[0326]操作單元,當(dāng)所述用戶檢測單元檢測到用戶時對要顯示在所述顯示單元上的對象進(jìn)行處理。
[0327](201) —種信息處理設(shè)備,包括:
[0328]顯示單元;
[0329]用戶位置檢測單元,其檢測相對于所述顯示單元的用戶的位置;
[0330]用戶狀態(tài)檢測單元,其檢測相對于所述顯示單元的顯示屏的用戶狀態(tài);以及
[0331]操作單元,其基于由所述用戶位置檢測單元檢測的用戶位置以及由所述用戶狀態(tài)檢測單元檢測的用戶狀態(tài),來控制要顯示在所述顯示單元上的GUI。
[0332](202)根據(jù)(201)所述的信息處理設(shè)備,其中,所述操作單元基于所述用戶位置和所述用戶狀態(tài),來控制要顯示在所述顯示單元的顯示屏上并且被用戶操作的一個或更多個對象的構(gòu)架或信息密度。
[0333](203)根據(jù)(201)所述的信息處理設(shè)備,其中,所述操作單元取決于所述用戶是否正在觀看所述顯示單元的顯示屏來控制要顯示在所述顯示屏上的對象的構(gòu)架。
[0334](204)根據(jù)(201)所述的信息處理設(shè)備,其中,所述操作單元基于所述用戶的位置來控制要顯示在所述顯示單元的顯示屏上的信息密度。
[0335](205)根據(jù)(201)所述的信息處理設(shè)備,其中,所述操作單元取決于所述用戶是否位于所述用戶能夠被個人認(rèn)證的位置,來控制對要顯示在所述顯示單元的顯示屏上的對象的選擇。
[0336](206)根據(jù)(201)所述的信息處理設(shè)備,還包括允許用戶操作要顯示在所述顯示單元的顯示屏上的對象的一個或更多個輸入單元,其中,所述操作單元取決于所述用戶是否正在通過使用所述輸入單元操作對象,來控制要顯示在所述顯示屏上的對象的構(gòu)架。
[0337](207) —種信息處理設(shè)備,包括:
[0338]顯示單元;
[0339]一個或更多個輸入單元,其允許用戶操作要顯示在所述顯示單元的顯示屏上的對象;
[0340]用戶位置檢測單元,其檢測關(guān)于所述顯示單元的用戶位置;[0341]用戶狀態(tài)檢測單元,其檢測關(guān)于所述顯示單元的顯示屏的用戶狀態(tài);以及
[0342]操作單元,其基于由所述用戶位置檢測單元檢測的用戶位置以及由所述用戶狀態(tài)檢測單元檢測的用戶狀態(tài)來優(yōu)化所述輸入單元。
[0343](208)根據(jù)(207)所述的信息處理設(shè)備,其中,所述操作單元取決于所述用戶是否正在觀看所述顯示單元的顯示屏來控制所述輸入單元的優(yōu)化。
[0344](209)根據(jù)(207)所述的信息處理設(shè)備,其中,所述操作單元在所述用戶正在觀看所述顯示單元的顯示屏的狀態(tài)下,基于由所述用戶位置檢測單元檢測的用戶位置來優(yōu)化所述輸入單元。
[0345](210) 一種信息處理設(shè)備,包括:
[0346]顯示單元;
[0347]用戶位置檢測單元,其檢測關(guān)于所述顯示單元的用戶位置;
[0348]檢測從所述顯示單元的顯示屏到用戶的距離的多個距離檢測模式;以及
[0349]操作單元,其基于由所述用戶位置檢測單元檢測的用戶位置來控制在所述距離檢測模式之間的切換。
[0350](211)根據(jù)(210)所述的信息處理設(shè)備,其中,所述操作單元一般開啟檢測距位于很遠(yuǎn)的用戶的距離的距離檢測模式。
[0351](212)根據(jù)(210)所述的信息處理設(shè)備,其中,所述操作單元開啟以下距離檢測模式:檢測距位于附近的用戶的距離,并且僅在獲得足夠的識別精確度的距離范圍內(nèi)執(zhí)行識別處理。
[0352](213) —種信息處理方法,包括:
[0353]檢測關(guān)于顯示屏的用戶位置;
[0354]檢測關(guān)于所述顯示屏的用戶狀態(tài);以及
[0355]基于在檢測用戶位置中所檢測的用戶位置以及在檢測用戶狀態(tài)中所檢測的用戶狀態(tài),來控制要顯示在所述顯示屏上的GUI。
[0356](214) 一種信息處理方法,包括:
[0357]檢測關(guān)于顯示屏的用戶位置;
[0358]檢測關(guān)于所述顯示屏的用戶狀態(tài);以及
[0359]基于在檢測用戶位置中所檢測的用戶位置以及在檢測用戶狀態(tài)中所檢測的用戶狀態(tài),來優(yōu)化允許用戶操作顯示在所述顯示屏上的對象的一個或更多個輸入單元。
[0360](215) 一種信息處理方法,包括:
[0361]檢測關(guān)于顯示屏的用戶位置;以及
[0362]基于在檢測用戶位置中所檢測的用戶位置,來控制對從所述顯示單元的顯示屏到用戶的距離進(jìn)行檢測的多個距離檢測模式之間的切換。
[0363](216) 一種計算機(jī)可讀計算機(jī)程序,所述計算機(jī)程序使計算機(jī)用作為:
[0364]顯示單元;
[0365]用戶位置檢測單元,其檢測關(guān)于所述顯示單元的用戶位置;
[0366]用戶狀態(tài)檢測單元,其檢測關(guān)于所述顯示單元的顯示屏的用戶狀態(tài);以及
[0367]操作單元,其基于由所述用戶位置檢測單元檢測的用戶位置以及由所述用戶狀態(tài)檢測單元檢測的用戶狀態(tài),來控制要顯示在所述顯示單元上的GUI。[0368](217) 一種計算機(jī)可讀計算機(jī)程序,所述計算機(jī)程序使計算機(jī)用作為:
[0369]顯示單元;
[0370]一個或更多個輸入單元,其允許用戶操作要顯示在所述顯示單元的顯示屏上的對象;
[0371]用戶位置檢測單元,其檢測關(guān)于所述顯示單元的用戶位置;
[0372]用戶狀態(tài)檢測單元,其檢測關(guān)于所述顯示單元的顯示屏的用戶狀態(tài);以及
[0373]操作單元,其基于由所述用戶位置檢測單元檢測的用戶位置以及由所述用戶狀態(tài)檢測單元檢測的用戶狀態(tài)來優(yōu)化所述輸入單元。
[0374](218) 一種計算機(jī)可讀計算機(jī)程序,所述計算機(jī)程序使計算機(jī)用作為:
[0375]顯示單元;
[0376]用戶位置檢測單元,其檢測關(guān)于所述顯示單元的用戶位置;
[0377]檢測從所述顯示單元的顯示屏到用戶的距離的多個距離檢測模式;以及
[0378]操作單元,其基于由所述用戶位置檢測單元檢測的用戶位置來控制在所述距離檢測模式之間的切換。 [0379](301) —種信息處理設(shè)備,包括:
[0380]顯示單元;
[0381]對象圖像獲取單元,其獲取要顯示在所述顯示單元的屏幕上的對象的圖像;
[0382]實(shí)際尺寸獲取單元,其獲取與要顯示在所述顯示單元的屏幕上的對象的實(shí)際尺寸有關(guān)的?目息;以及
[0383]操作單元,其基于由所述實(shí)際尺寸獲取單元獲取的對象的實(shí)際尺寸來處理對象的圖像。
[0384](302)根據(jù)(301)所述的信息處理設(shè)備,還包括顯示性能獲取單元,所述顯示性能獲取單元獲取與包括所述顯示單元的屏幕的尺寸和分辨率的顯示性能有關(guān)的信息,其中,所述操作單元基于由所述實(shí)際尺寸獲取單元獲取的對象的實(shí)際尺寸以及由所述顯示性能獲取單元獲取的顯示性能,來處理要以實(shí)際尺寸顯示在所述顯示單元的屏幕上的對象的圖像。
[0385](303)根據(jù)(301)所述的信息處理設(shè)備,其中,當(dāng)在所述顯示單元的屏幕上同時顯示由所述對象圖像獲取單元獲取的多個對象的圖像時,所述操作單元對所述多個對象的圖像進(jìn)行處理,以便正確地顯示所述多個對象的圖像的相互尺寸關(guān)系。
[0386](304)根據(jù)(301)所述的信息處理設(shè)備,還包括:
[0387]攝像機(jī)單元;以及
[0388]實(shí)際尺寸估計單元,其對所述攝像機(jī)單元捕捉的圖像中所包括的對象的實(shí)際尺寸進(jìn)行估計。
[0389](305)根據(jù)(301)所述的信息處理設(shè)備,還包括:
[0390]攝像機(jī)單元;
[0391]圖像識別單元,其對所述攝像機(jī)單元捕捉的圖像中所包括的用戶的面部進(jìn)行識另Ij,并且獲取面部數(shù)據(jù);
[0392]距離檢測單元,其檢測到用戶的距離;以及
[0393]實(shí)際尺寸估計單元,其基于用戶的面部數(shù)據(jù)以及到用戶的距離來估計用戶的面部的實(shí)際尺寸。
[0394](306) 一種信息處理方法,包括:
[0395]獲取要顯示在屏幕上的對象的圖像;
[0396]獲取與要顯示在所述屏幕上的對象的實(shí)際尺寸有關(guān)的信息;以及
[0397]基于在獲取與對象的實(shí)際尺寸有關(guān)的信息中所獲取的對象的實(shí)際尺寸來處理對象的圖像。
[0398](307) 一種計算機(jī)可讀計算機(jī)程序,所述計算機(jī)程序使計算機(jī)用作為:
[0399]顯示單元;
[0400]對象圖像獲取單元,其獲取要顯示在所述顯示單元的屏幕上的對象的圖像;
[0401]實(shí)際尺寸獲取單元,其獲取與要顯示在所述顯示單元的屏幕上的對象的實(shí)際尺寸有關(guān)的?目息;以及
[0402]操作單元,其基于由所述實(shí)際尺寸獲取單元獲取的對象的實(shí)際尺寸來處理對象的圖像。
[0403](401) 一種信 息處理設(shè)備,包括:
[0404]攝像機(jī)單元;
[0405]顯示單元;以及
[0406]操作單元,當(dāng)在所述顯示單元的屏幕上顯示用戶的圖像時,其對由所述攝像機(jī)單元捕捉的用戶的圖像進(jìn)行歸一化。
[0407](402)根據(jù)(401)所述的信息處理設(shè)備,還包括:
[0408]對象圖像獲取單元,其獲取要顯示在所述顯示單元的屏幕上的對象的圖像;以及
[0409]并列或重疊模式獲取單元,其獲取在所述顯示單元的屏幕上以并列或重疊方式顯示用戶的圖像和對象的圖像的并列或重疊模式,其中,所述操作單元對用戶的圖像和對象進(jìn)行歸一化,以便對用戶的圖像與對象的尺寸關(guān)系和位置進(jìn)行校正,并且基于所獲取的并列或重疊模式以并列或重疊方式來顯示經(jīng)歸一化的用戶的圖像以及經(jīng)歸一化的對象。
[0410](403)根據(jù)(402)所述的信息處理設(shè)備,其中,所述操作單元控制所述攝像機(jī)單元來對由所述攝像機(jī)單元捕捉的用戶的圖像進(jìn)行歸一化。
[0411](404)根據(jù)(401)所述的信息處理設(shè)備,還包括:
[0412]用戶面部數(shù)據(jù)獲取單元,其獲取由所述攝像機(jī)單元成像的用戶的面部數(shù)據(jù);以及
[0413]對象內(nèi)面部數(shù)據(jù)獲取單元,其獲取要顯示在所述顯示單元的屏幕上的對象中的面部數(shù)據(jù),
[0414]其中,所述操作單元執(zhí)行歸一化處理,以便對用戶的面部數(shù)據(jù)和對象內(nèi)面部數(shù)據(jù)的尺寸關(guān)系和位置進(jìn)行校正。
[0415](405)根據(jù)(404)所述的信息處理設(shè)備,其中,所述操作單元控制所述攝像機(jī)單元來對由所述攝像機(jī)單元捕捉的用戶的圖像進(jìn)行歸一化。
[0416](406) 一種信息處理方法,包括:
[0417]獲取要顯示在屏幕上的對象的圖像;
[0418]獲取在所述顯示單元的屏幕上以并列或重疊方式顯示由所述攝像機(jī)單元捕捉的用戶的圖像和對象的圖像的并列或重疊模式,對用戶的圖像和對象進(jìn)行歸一化,以便對用戶的圖像和對象的尺寸關(guān)系和位置進(jìn)行校正;以及[0419]基于所獲取的并列或重疊模式以并列或重疊方式對經(jīng)歸一化的用戶的圖像以及經(jīng)歸一化的對象進(jìn)行處理。
[0420](407) 一種信息處理方法,包括:
[0421]獲取由攝像機(jī)單元成像的用戶的面部數(shù)據(jù);
[0422]獲取要顯示在屏幕上的對象中的面部數(shù)據(jù);
[0423]執(zhí)行歸一化處理,以便對用戶的面部數(shù)據(jù)和對象內(nèi)面部數(shù)據(jù)的尺寸關(guān)系和位置進(jìn)行校正。
[0424](408) 一種計算機(jī)可讀計算機(jī)程序,所述計算機(jī)程序使計算機(jī)用作為:
[0425]攝像機(jī)單元;
[0426]顯示單元;以及
[0427]操作單元,當(dāng)在所述顯示單元的屏幕上顯示用戶的圖像時,其對由所述攝像機(jī)單元捕捉的用戶的圖像進(jìn)行歸一化。
[0428](501) 一種信息處理設(shè)備,包括:
[0429]顯示單元,其在屏幕上顯示圖像內(nèi)容;
[0430]旋轉(zhuǎn)角度檢測單元,其檢測所述屏幕的旋轉(zhuǎn)角度;
[0431]顯示形式確定單元,其確定在所述屏幕的任何旋轉(zhuǎn)角度或在其轉(zhuǎn)變過程中的圖像內(nèi)容的顯示形式;以及
[0432]圖像處理單元,其基于由所述顯示形式確定單元確定的顯示形式對圖像內(nèi)容進(jìn)行處理,以便適合于以所述旋轉(zhuǎn)角度檢測單元所檢測的旋轉(zhuǎn)角度傾斜的屏幕。
[0433](502)根據(jù)(501)所述的信息處理設(shè)備,其中,所述顯示形式確定單元從包括以下三個顯示形式的多個顯示形式中確定顯示形式:在任何旋轉(zhuǎn)角度都不覆蓋圖像內(nèi)容的顯示形式、在任何旋轉(zhuǎn)角度將圖像內(nèi)容中的感興趣內(nèi)容最大化的顯示形式、以及旋轉(zhuǎn)圖像內(nèi)容以便不產(chǎn)生無效區(qū)域的顯示形式。
[0434](503)根據(jù)(501)所述的信息處理設(shè)備,其中,所述顯示形式確定單元基于圖像內(nèi)容的屬性信息來確定在所述屏幕的任何旋轉(zhuǎn)角度或在其轉(zhuǎn)變過程中的顯示形式。
[0435](504)根據(jù)(501)所述的信息處理設(shè)備,其中,所述顯示形式確定單元對于受保護(hù)圖像內(nèi)容確定在任何旋轉(zhuǎn)角度都不覆蓋圖像內(nèi)容的顯示形式。
[0436](505) 一種信息處理方法,包括:
[0437]檢測顯示圖像內(nèi)容的屏幕的旋轉(zhuǎn)角度;
[0438]確定在所述屏幕的任何旋轉(zhuǎn)角度或在其轉(zhuǎn)變過程中的圖像內(nèi)容的顯示形式;以及
[0439]基于在確定顯示形式中所確定的顯示形式來處理圖像內(nèi)容,以便適合于以在檢測旋轉(zhuǎn)角度中所檢測的旋轉(zhuǎn)角度傾斜的屏幕。
[0440](506) 一種計算機(jī)可讀計算機(jī)程序,所述計算機(jī)程序使計算機(jī)用作為:
[0441]顯示單元,其在屏幕上顯示圖像內(nèi)容;
[0442]旋轉(zhuǎn)角度檢測單元,其檢測屏幕的旋轉(zhuǎn)角度;
[0443]顯示形式確定單元,其確定在所述屏幕的任何旋轉(zhuǎn)角度或在其轉(zhuǎn)變過程中的圖像內(nèi)容的顯示形式;以及
[0444]圖像處理單元,其基于由所述顯示形式確定單元確定的顯示形式來處理圖像內(nèi)容,以便適合于以所述旋轉(zhuǎn)角度檢測單元所檢測的旋轉(zhuǎn)角度傾斜的屏幕。[0445]工業(yè)實(shí)用性
[0446]已經(jīng)參照【具體實(shí)施方式】描述了本公開內(nèi)容。然而,對本【技術(shù)領(lǐng)域】普通技術(shù)人員來說明顯的是,在不偏離本公開內(nèi)容的概念的情況下,可以修改或替換實(shí)施方式。
[0447]在該說明書中,將具有大屏幕的電視接收機(jī)舉例為本公開內(nèi)容所應(yīng)用于的信息處理設(shè)備100,但本公開內(nèi)容的概念不限于該示例。本公開內(nèi)容可以類似地應(yīng)用于除了電視接收機(jī)之外的諸如個人計算機(jī)或平板終端的信息處理設(shè)備,或具有小屏幕尺寸的信息處理設(shè)備。
[0448]盡管已經(jīng)參照上面提到的示例描述了本公開內(nèi)容,但是不應(yīng)當(dāng)以限制性方式分析本公開內(nèi)容的描述。應(yīng)當(dāng)參照所附權(quán)利要求來確定本公開內(nèi)容的概念。
[0449]本領(lǐng)域的技術(shù)人員應(yīng)該理解,取決于設(shè)計要求和其他因素,可以出現(xiàn)各種修改、組合、子組合及替換,只要它們在所附權(quán)利要求或者權(quán)利要求的等同方案的范圍內(nèi)。
[0450]附圖標(biāo)記列表
[0451]100:信息處理設(shè)備
[0452]110:輸入接口單元
[0453]120:操作單元
[0454]130:輸出接口單元
[0455]140:存儲單元
[0456]150:通信單元
[0457]160:電源單元
[0458]170:電視調(diào)諧器單元
[0459]180:旋轉(zhuǎn)和附接機(jī)制單元
[0460]501:遙控器接收單元
[0461]502:信號分析單元
[0462]503:攝像機(jī)單元
[0463]504:圖像識別單元
[0464]505:麥克風(fēng)單元
[0465]506:語音識別單元
[0466]507:距離傳感器
[0467]508:信號分析單元
[0468]509:觸摸傳感器
[0469]510:信號分析單元
[0470]511:接近傳感器
[0471]512:信號分析單元
[0472]513:極近距離通信單元
[0473]514:信號分析單元
[0474]515:三軸傳感器單兀
[0475]516:GPS 接收單元
[0476]517:信號分析單元
[0477]520:輸入接口集成單元[0478]601:內(nèi)容顯示單元
[0479]602 KUI顯示單元
[0480]603:顯示單元
[0481]604:揚(yáng)聲器單元
[0482]605:照明顯示單元
[0483]606:照明單元
[0484]710:監(jiān)視器區(qū)域劃分單元
[0485]711:裝置數(shù)據(jù)庫
[0486]712:區(qū)域劃分模式數(shù)據(jù)庫
[0487]720:對象優(yōu)化單元
[0488]721:優(yōu)化算法
[0489]730:裝置交互數(shù)據(jù)發(fā)送和接收單元731:發(fā)送和接收算法
[0490]2310:顯示⑶I優(yōu)化單元
[0491]2320:輸入單元優(yōu)化單元
[0492]2330:距離檢測模式切換單元
[0493]3210:實(shí)際尺寸顯示單元
[0494]3220:實(shí)際尺寸估計單元
[0495]3230:實(shí)際尺寸擴(kuò)展單元
[0496]4110:圖像間歸一化單元
[0497]4120:面部歸一化單元
[0498]4130:實(shí)際尺寸擴(kuò)展單元
[0499]4710:顯示形式確定單元
[0500]4720:旋轉(zhuǎn)位置輸入單元
[0501]4730:圖像處理單元
【權(quán)利要求】
1.一種信息處理設(shè)備,包括: 控制單元,通過檢測從所述設(shè)備的外部輸入至所述設(shè)備的至少一個信息信號,基于對于⑴用戶的位置變化以及(ii)用戶的狀態(tài)的確定來控制用戶接口。
2.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述用戶接口包括要顯示在顯示單元上的圖形用戶接口。
3.根據(jù)權(quán)利要求2所述的設(shè)備,其中,所述設(shè)備包括所述顯示單元。
4.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元基于所述用戶的位置變化和所述用戶的狀態(tài),來控制要顯示在顯示單元的顯示屏上并且由用戶操作的一個或更多個對象的構(gòu)架或信息密度中的至少一個。
5.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元基于所述用戶的位置變化和所述用戶的狀態(tài),來控制由用戶操作的一個或更多個對象的構(gòu)架或信息密度中的至少一個。
6.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元根據(jù)用戶是否正在觀看顯示單元的顯示屏來控制所述用戶接口。
7.根據(jù)權(quán)利要求6所述的設(shè)備,其中,當(dāng)所述用戶正在觀看所述顯示屏?xí)r,所述控制單元選擇自動變換處理來在所述顯示屏上顯示至少一個對象。
8.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元基于所述用戶的位置變化來控制要顯示在顯示單元的顯示屏上的對象的信息密度。
9.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元基于所述用戶的位置是否是所述用戶能夠被個人認(rèn)證的位置來控制對要顯示在顯示單元的顯示屏上的對象的選擇。
10.根據(jù)權(quán)利要求9所述的設(shè)備,其中,當(dāng)所述用戶的位置是所述用戶能夠被個人認(rèn)證的位置時,所述控制單元使用所識別的所述用戶的信息來控制對要顯示在所述顯示屏上的所述對象的選擇。
11.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元基于所述用戶的位置變化和所述用戶的狀態(tài)來優(yōu)化所述用戶接口的輸入單元。
12.根據(jù)權(quán)利要求11所述的設(shè)備,其中,所述輸入單元包括接近傳感器、麥克風(fēng)、觸摸傳感器、攝像機(jī)單元或遙控器中的至少一個。
13.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元根據(jù)所述用戶是否正在觀看顯示單元的顯示屏來優(yōu)化所述用戶接口的輸入單元。
14.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元基于所述用戶的位置變化來優(yōu)化所述用戶接口的輸入單元。
15.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元基于所述用戶的位置是否是用戶能夠被個人認(rèn)證的位置來優(yōu)化所述用戶接口的輸入單元。
16.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元基于檢測到的距離來控制在模式之間進(jìn)行切換的處理,以所述模式來檢測從顯示單元的顯示屏到所述用戶的距離。
17.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述控制單元確定相對于顯示單元的所述用戶的位置變化。
18.根據(jù)權(quán)利要求1所述的設(shè)備,其中,所述用戶的狀態(tài)基于所述用戶的位置變化來確定。
19.一種信息處理方法,包括:由處理器通過檢測從信息處理設(shè)備的外部輸入至所述信息處理設(shè)備的至少一個信息信號,基于對于(i)用戶的位置變化以及(ii)用戶的狀態(tài)的確定來控制用戶接口。
20.一種記錄有能夠被計算機(jī)執(zhí)行的程序的非暫態(tài)記錄介質(zhì),所述程序包括: 通過檢測從信息處理設(shè)備的外部輸入至所述信息處理設(shè)備的至少一個信息信號,基于對于(i)用戶的位置變 化以及(ii)用戶的狀態(tài)的確定來控制用戶接口。
【文檔編號】G06F3/0488GK104040474SQ201380004826
【公開日】2014年9月10日 申請日期:2013年1月9日 優(yōu)先權(quán)日:2012年1月13日
【發(fā)明者】阪井祐介 申請人:索尼公司