本發(fā)明涉及多媒體及智能家居領(lǐng)域,更具體地,涉及一種使用狀態(tài)下監(jiān)測周圍環(huán)境的終端。
背景技術(shù):
近年來,由于虛擬現(xiàn)實技術(shù)其逼真實時的內(nèi)容展現(xiàn)形式,很多熱門行業(yè)例如游戲、電影等公司紛紛大力開發(fā)虛擬現(xiàn)實世界。作為虛擬現(xiàn)實走入市場的關(guān)鍵驅(qū)動力,便捷、符合人類交互特征的人機(jī)交互體驗成為新的關(guān)注領(lǐng)域。
在虛擬現(xiàn)實系統(tǒng)中,通常要求用戶佩戴虛擬現(xiàn)實眼鏡,利用手持式遙控器或者是位于人體各個部位的傳感器來跟蹤用戶的運(yùn)動,最后將人體的這種運(yùn)動同步至虛擬現(xiàn)實場景之中,以達(dá)到提升用戶沉浸感的目的。人的感官分別是形、聲、色、味、觸,人體在自然界中得到感官反饋越實時、越真實,在虛擬世界里的沉浸感就會更逼真。
此外,在看書、玩游戲、觀看視頻或者聽音樂時,容易忽視外界信息,包括周圍人的語音;有些語音包含關(guān)鍵信息,包括命令、提醒甚至憤怒的情緒。如果不注意到這些信息,會導(dǎo)致真實環(huán)境和沉浸環(huán)境下的脫離,這種脫離往往是不期望的。當(dāng)然,如果所有信息都進(jìn)入到沉浸環(huán)境,會嚴(yán)重破壞沉浸環(huán)境。
技術(shù)實現(xiàn)要素:
為了解決現(xiàn)有技術(shù)中一個或多個技術(shù)問題,本發(fā)明提供了一種使用狀態(tài)下監(jiān)測周圍環(huán)境的終端,包括:設(shè)置單元,監(jiān)測單元,處理單元,控制單元和一個或多個輸出單元;
所述設(shè)置單元被配置于設(shè)置是否在終端使用狀態(tài)下來監(jiān)測周圍環(huán)境,當(dāng)設(shè)置為在終端使用狀態(tài)下監(jiān)測周圍環(huán)境時,發(fā)送第一設(shè)置消息給所述監(jiān)視單元;
所述監(jiān)測單元被配置于根據(jù)所述第一設(shè)置消息對周圍環(huán)境進(jìn)行監(jiān)測并將監(jiān)測結(jié)果發(fā)送給所述處理單元;
所述處理單元對所述監(jiān)測結(jié)果進(jìn)行處理,并根據(jù)處理結(jié)果判斷是否需要中斷所述使用狀態(tài);當(dāng)判斷需要中斷所述使用狀態(tài)時,將第一中斷消息發(fā)送給所述控制單元;
所述控制單元根據(jù)所述第一中斷消息,發(fā)送第一控制消息給一個輸出單元;
所述輸出單元根據(jù)第一控制消息進(jìn)行輸出。
進(jìn)一步地,所述終端為手機(jī)或者虛擬現(xiàn)實裝置,所述使用狀態(tài)為游戲、音樂、視頻和閱讀中的一種。
進(jìn)一步地,當(dāng)使用狀態(tài)發(fā)生不中斷使用地切換時,自動將所述設(shè)置單元設(shè)置為之前的設(shè)置狀態(tài)。
進(jìn)一步地,所述監(jiān)視單元還包括計時單元、錄音單元和體感檢測單元。
進(jìn)一步地,所述處理單元包括音頻情緒識別單元。
進(jìn)一步地,所述設(shè)置單元還能夠設(shè)置控制單元的控制邏輯和輸出單元的選擇邏輯;所述控制單元根據(jù)所述控制邏輯來生成第一控制消息,并根據(jù)所述選擇邏輯來將第一控制消息發(fā)送給所述輸出單元。
進(jìn)一步地,所述輸出單元為LED顯示屏。
進(jìn)一步地,所述輸出單元為喇叭或耳機(jī)。
進(jìn)一步地,所述輸出單元為手機(jī)屏幕。
通過本發(fā)明的方法,能夠?qū)崿F(xiàn)如下一個或多個優(yōu)點:
1)即使在沉浸環(huán)境下,都能夠在不破壞沉浸環(huán)境時獲知外界關(guān)鍵信息。
2)可以在沉浸環(huán)境下和外界進(jìn)行有效溝通。
附圖說明
下面結(jié)合附圖和具體實施方式對本發(fā)明作進(jìn)一步詳細(xì)的說明:
圖1是現(xiàn)有技術(shù)中的一種虛擬現(xiàn)實裝置。
圖2是現(xiàn)有技術(shù)中的一種移動終端
圖3是本發(fā)明的一種終端。
具體實施方式
下面將結(jié)合本發(fā)明實施例中的附圖,對本發(fā)明實施例中的技術(shù)方案進(jìn)行清楚、完整地描述,顯然,所描述的實施例僅僅是本發(fā)明一部分實施例,而不是全部的實施例?;诒景l(fā)明中的實施例,本領(lǐng)域普通技術(shù)人員在沒有做出創(chuàng)造性勞動前提下所獲得的所有其他實施例,都屬于本發(fā)明保護(hù)的范圍。
圖1是一種虛擬現(xiàn)實裝置。如圖1所示,一種基于虛擬現(xiàn)實技術(shù)的人機(jī)交互系統(tǒng),包括虛擬現(xiàn)實眼鏡101;虛擬現(xiàn)實眼鏡101包括眼鏡外殼、立體視鏡、顯示屏幕插口101a、顯示屏303和頭帶304;顯示屏303通過顯示屏幕插口101a與虛擬現(xiàn)實眼鏡101連接;立體視鏡設(shè)置在用戶眼部與顯示屏幕之間;還包括眼鏡控制單元102和觸摸傳感器103;眼鏡控制單元102包括慣性傳感器102a、第一數(shù)據(jù)處理單元102b、第一供電單元102c、第一數(shù)據(jù)傳輸單元102d和控制按鍵102e;慣性傳感器102a用于感測用戶頭部的位置變化和姿態(tài)變化,包括加速度、角速度和磁通量;第一數(shù)據(jù)處理單元102b用于將慣性傳感器感測到的原始數(shù)據(jù)轉(zhuǎn)換為用戶頭部運(yùn)動時的位置信息和姿態(tài)信息;慣性傳感器102a為加速度傳感器和或角速度傳感器;慣性傳感器102a還包括地磁計;當(dāng)慣性傳感器102a感測到角速度傳感器得數(shù)據(jù)時,可以得到用戶頭部在空間中的三軸角增量信息,因為采樣時間相同,所以在時間維度上對所測得的角增量進(jìn)行積分,即得到每一軸的轉(zhuǎn)動角度,也就到用戶頭部在轉(zhuǎn)動時的姿態(tài)角變化;當(dāng)慣性傳感器102a感測到加速度傳感器的數(shù)據(jù)時,可以得到用戶頭部在空間中的三軸瞬時加速度信息,結(jié)合重力信息,利用三角函數(shù)可以求得各軸與重力分量的夾角,與角速度傳感器得到的角度進(jìn)行對比矯正;當(dāng)慣性傳感器102a感測到地磁計的數(shù)據(jù)時,磁力計感測到的磁通量信息對角速度傳感器進(jìn)行偏移校正;控制按鍵102e包括上、下、左、右的方向控制和選擇、切換、返回命令控制;第一供電單元102c為提供顯示屏幕提供電能。
圖2是現(xiàn)有技術(shù)的一種移動終端。參照圖2,移動多媒體便攜終端設(shè)備包括:電源系統(tǒng)110、存儲器120、中央處理器130、通信單元140、輸入單元150和輸出單元160。所述中央處理器130連接所述電源系統(tǒng)110、所述存儲器120、所述通信單元140、所述輸入單元150和所述輸出單元160。
所述電源系統(tǒng)110至少包括電池111、市電適配器112和車載適配器113的其中之一,以及電源管理模塊114。使用所述電池111提供電源,以滿足該終端的移動和便攜功能;使用市電配合所述市電適配器112來提供電源,以提供該終端的使用場合和環(huán)境的靈活性;而使用所述車載適配器113,通過汽車的電源系統(tǒng)來提供電源,更是豐富了該終端的車載應(yīng)用。
所述存儲器120采用的存儲介質(zhì)種類繁多,比如,硬盤、為DDR/DDR2/SDRAM的內(nèi)存、SD存儲卡、CF存儲卡、FLASH以及通過USB接口的外接存儲設(shè)備。該終端可以根據(jù)實際使用或應(yīng)用需要,采用一種或同時采用多種存儲介質(zhì)的搭配使用,在此不再詳敘。
所述輸入單元150至少包括:USB接口、USB外接設(shè)備,比如鍵盤和鼠標(biāo)、麥克風(fēng)、觸摸屏、遙控器、攝像頭的其中之一。
所述輸出單元160至少包括:音頻解編碼模塊161、連接在所述音頻解編碼模塊161輸出端的音頻輸出模塊162和音頻輸出接口163;以及視頻解編碼模塊164、連接在所述視頻解編碼模塊164輸出端的視頻輸出模塊165和視頻輸出接口166。其中,所述音頻輸出模塊162為喇叭、或耳機(jī)等音頻輸出設(shè)備,能夠?qū)⑺鲆纛l解編碼模塊161輸出的音頻信號放大并輸出聲音;而所述音頻輸出接口163用于與外接的音頻設(shè)備連接,比如,通過所述音頻輸出接口163,將所述音頻解編碼模塊161輸出的音頻信號輸出至外接的音箱。所述視頻輸出模塊165為顯示模塊,比如,LCD顯示模塊;而所述視頻輸出接口166則用于將所述視頻解編碼模塊164輸出的視頻信號傳至外接視頻設(shè)備,比如,傳送至電視機(jī)、電腦等。
而所述通信單元140與所述中央處理器130連接,能至少與數(shù)字電視網(wǎng)絡(luò)、GPRS網(wǎng)絡(luò)、藍(lán)牙網(wǎng)絡(luò)、國際互聯(lián)網(wǎng)絡(luò)、GPS網(wǎng)絡(luò)和音頻廣播網(wǎng)絡(luò)其中之二進(jìn)行通信,至少包括數(shù)字電視接收處理模塊141、GPRS模塊142、藍(lán)牙模塊143、WI-FI模塊144、FM模塊145和GPS模塊146的其中之二。
圖3是本發(fā)明的一種終端。參見圖3,一種使用狀態(tài)下監(jiān)測周圍環(huán)境的終端,包括:設(shè)置單元,監(jiān)測單元,處理單元,控制單元和一個或多個輸出單元;
所述設(shè)置單元被配置于設(shè)置是否在終端使用狀態(tài)下來監(jiān)測周圍環(huán)境,當(dāng)設(shè)置為在終端使用狀態(tài)下監(jiān)測周圍環(huán)境時,發(fā)送第一設(shè)置消息給所述監(jiān)視單元;
所述監(jiān)測單元被配置于根據(jù)所述第一設(shè)置消息對周圍環(huán)境進(jìn)行監(jiān)測并將監(jiān)測結(jié)果發(fā)送給所述處理單元;
所述處理單元對所述監(jiān)測結(jié)果進(jìn)行處理,并根據(jù)處理結(jié)果判斷是否需要中斷所述使用狀態(tài);當(dāng)判斷需要中斷所述使用狀態(tài)時,將第一中斷消息發(fā)送給所述控制單元;
所述控制單元根據(jù)所述第一中斷消息,發(fā)送第一控制消息給一個輸出單元;
所述輸出單元根據(jù)第一控制消息進(jìn)行輸出。
進(jìn)一步地,所述終端為手機(jī)或者虛擬現(xiàn)實裝置,所述使用狀態(tài)為游戲、音樂、視頻和閱讀中的一種。
進(jìn)一步地,當(dāng)使用狀態(tài)發(fā)生不中斷使用地切換時,自動將所述設(shè)置單元設(shè)置為之前的設(shè)置狀態(tài)。所述不中斷使用指的是,從閱讀或看書直接切換到游戲中,而沒有任何中斷。所述中斷可以設(shè)置為不超過10s;當(dāng)超過10s時,認(rèn)為存在中斷,則需要重新設(shè)置。所述設(shè)置包括是否開啟使用狀態(tài)下的外界信息提醒;提醒級別可以設(shè)定為高、中或低。低提醒級別為任何信息都進(jìn)入使用狀態(tài)提醒;而高提醒級別為只有重要信息進(jìn)入使用狀態(tài)提醒;中提醒級別介于高和低之間。特別地,高提醒級別包括當(dāng)預(yù)設(shè)的人進(jìn)入某個范圍內(nèi)時進(jìn)行提醒。另一個實施例中,高提醒級別包括檢測到特定人的特定情緒,如興奮、憤怒等。
進(jìn)一步地,所述監(jiān)視單元還包括計時單元、錄音單元和體感檢測單元。所述錄音單元濾除周圍的背景噪聲,錄制周圍環(huán)境的音頻信號。所述音頻信號主要是語音信號。所述體感檢測單元檢測使用狀態(tài)下使用人的沉浸狀態(tài)。當(dāng)處于深度沉浸時,即使設(shè)置為低提醒級別,也僅僅進(jìn)行高提醒級別的提醒;這樣能夠提升裝置的智能化水平。
進(jìn)一步地,所述處理單元包括音頻情緒識別單元。所述音頻情緒識別單元能夠識別是否為一個人說話,還是多個人交談。具體地,可以通過識別不同的聲紋來實現(xiàn)。當(dāng)識別為一個人說話時,通過識別語音角度、用詞和語氣來得出說話的情緒。當(dāng)所述識別出來的情緒為興奮時,發(fā)送添加了“興奮情緒”標(biāo)記的中斷消息給控制單元。在一個實施例中,所述控制單元,發(fā)送添加了“暖色系顯示顏色”標(biāo)記或“輕柔提醒”的控制消息給輸出單元。當(dāng)輸出單元為手機(jī)終端的屏幕時,在屏幕上顯示暖色系的語音識別結(jié)果。當(dāng)輸出單元為耳機(jī)為,通過輕柔語音輸出語音識別結(jié)果。當(dāng)識別結(jié)果為“憤怒”時,提醒用戶退出使用狀態(tài),退出時間設(shè)定超過10s,并提醒用戶調(diào)整自身情緒。另一個實施例中,控制單元輸出包含“用戶處于沉浸狀態(tài)”的控制消息給輸出單元,所述輸出單元為指向性麥克風(fēng),所述指向性麥克風(fēng)向語音來源方向輸出“用戶處于沉浸狀態(tài),請等待10s”等類似的提示。這樣能夠防止用戶突然退出沉浸狀態(tài)對用戶造成的損傷。
進(jìn)一步地,所述設(shè)置單元還能夠設(shè)置控制單元的控制邏輯和輸出單元的選擇邏輯;所述控制單元根據(jù)所述控制邏輯來生成第一控制消息,并根據(jù)所述選擇邏輯來將第一控制消息發(fā)送給所述輸出單元。
進(jìn)一步地,所述輸出單元為LED顯示屏。
進(jìn)一步地,所述輸出單元為喇叭或耳機(jī)。
進(jìn)一步地,所述輸出單元為手機(jī)屏幕。
本發(fā)明的終端可以外接于圖1或圖2的虛擬現(xiàn)實裝置或手機(jī)終端,也可以內(nèi)置于圖1或圖2的虛擬現(xiàn)實裝置或手機(jī)終端。當(dāng)外接時,本發(fā)明終端中的各個單元通過實際硬件來實現(xiàn);當(dāng)內(nèi)置時,本發(fā)明終端中的各個單元可以使用虛擬現(xiàn)實裝置或手機(jī)終端中的硬件來實現(xiàn)其功能。
本發(fā)明終端可以應(yīng)用到智能家居系統(tǒng)中。如用戶在沉浸狀態(tài)時,感知是否有預(yù)設(shè)成員回到家中,并同時提醒沉浸狀態(tài)的用戶和所述預(yù)設(shè)成員,以使能夠提升終端的智能化水平。
以上所述,僅為本發(fā)明的具體實施方式,本發(fā)明還可以應(yīng)用在其它設(shè)備中;以上描述中的尺寸和數(shù)量均僅為參考性的,本領(lǐng)域技術(shù)人員可根據(jù)實際需要選擇適當(dāng)?shù)膽?yīng)用尺寸,而不脫離本發(fā)明的范圍。本發(fā)明的保護(hù)范圍并不局限于此,任何熟悉本技術(shù)領(lǐng)域的技術(shù)人員在本發(fā)明揭露的技術(shù)范圍內(nèi),可輕易想到的變化或替換,都應(yīng)涵蓋在本發(fā)明的保護(hù)范圍之內(nèi)。因此,本發(fā)明的保護(hù)范圍應(yīng)該以權(quán)利要求所界定的保護(hù)范圍為準(zhǔn)。