專利名稱：利用視線識別的圖像錄像系統(tǒng)及其控制方法
技術領域：
本發(fā)明涉及一種圖像的錄像，尤其涉及一種在廣播中的圖像錄像及重現時，利用視線識別自動進行錄像、停止或者重現的利用視線識別的圖像錄像系統(tǒng)及其控制方法。
背景技術：
個人用錄像機(Personal Video Recorder以下簡稱PVR)作為一種能夠把數字廣播在硬盤中進行錄像的設備，不僅具有錄像的基本功能，而且能夠提供時間移動(time-shift)、在視聽中的瞬間重現(instant replay)及其他各種特技游戲功能，同時比現有的盒式錄像機VCR具有更多的功能。
特別是，個人用錄像機具有對高清晰度(HD)級高畫面質量的數字廣播，在任何時候都可以錄到硬盤之后再視聽的長處和各種附加服務功能。這種個人用錄像機所具有的功能對用戶而言有很強的吸引力。
并且，近年來隨著存儲技術的發(fā)展，在個人用錄像機中安裝硬盤的容量正在非常迅速地增加。隨著其容量的增加，在個人用錄像機中能夠錄制節(jié)目的份量也在迅速增加。
當前的個人用錄像機正在從獨立的使用到與機頂盒相結合起來使用的方向發(fā)展，因此能夠對當前廣播中的數字廣播自由地進行錄像及重現。
這種個人用錄像機具有現有電視機(TV)不可能具有的功能。
其中重要的功能是時間移動(time shifter)功能。這種功能是用戶在接收的廣播信號流中，只選擇用戶希望的信號流，并將選擇的信號在電視機(TV)內部或在外部的存儲器即硬盤(HDD)中進行存儲，并且在用戶希望看的時間重現存儲的廣播信號。另外，如果用戶需要離開視聽節(jié)目現場，則可將離開時間內廣播的內容存儲到存儲器中；如果用戶回來，則從存儲的內容到當前廣播的內容為止連接起來進行視聽。
除此之外，作為其他功能有快進&倒帶(Fast Forward & Rewind)功能、慢速動作(Slow Motion)功能、書簽(Bookmark)功能(選擇再想看的位置)、剪輯錄像(Clip Recording){在時間移動(time shift)中只錄像希望的區(qū)間}功能、返回當前廣播位置(Return to Live)功能等。
參照附圖，以下對傳統(tǒng)技術個人用錄像機進行說明。
圖1是傳統(tǒng)技術個人用錄像機的構成方框圖。
傳統(tǒng)技術個人用錄像機如圖1所示，是由下述部分構成為了選擇用戶希望的頻道而設置的調諧器；對通過被選擇的頻道輸入的廣播信號，為了以傳送流形態(tài)進行譯碼而設置的由頻道譯碼器構成的頻道段10；為了能夠把以傳送流形態(tài)譯碼的數據進行重現及存儲，對已譯碼的數據進行編碼或譯碼的數據處理部20；對數據處理部20中被處理的數據進行顯示的顯示部30；對數據處理部20中被處理的數據進行存儲的存儲部40；對包括數據處理部20的視頻錄像機全面進行控制的中央處理器50。
如上所述，傳統(tǒng)技術的個人用錄像機，對頻道段10中接收的廣播信號，在數據處理部20中通過顯示部30(例如，數字電視機TV)進行輸出；或存儲在存儲部(例如，硬盤HDD)40中；或者將存儲部40中存儲的圖像重現之后進行視聽。
但是，這種傳統(tǒng)技術個人用錄像機存在如下問題
第一，用戶通過個人用錄像機在實時廣播或者在視聽存儲部中存儲圖像的過程中，如果出現需要辦的事情(例如，來電話、正在用煤氣做的食品沸騰、門鈴響了等)，則對這些事情用手動進行錄像或停止，特別是對實時時間廣播不能進行錄像的情況，就不能夠進行視聽。
第二，如果司機在車輛中安裝了個人用錄像機，并在實時視聽廣播中的節(jié)目，則車輛在停上狀態(tài)下通常不會產生特殊問題，但車輛在運行中由于重現畫面是自動進行，因此存在對這種情況下用手動進行錄像或不能視聽等問題。如果司機一定要視聽該節(jié)目，不希望放棄對該節(jié)目的視聽，則會因為精力集中，對開車產生不利影響。

發(fā)明內容
本發(fā)明是為了解決上述技術存在問題而開發(fā)的，其目的是提供利用視線識別，對正在廣播中的圖像自動進行錄像、停止或重現的利用視線識別的圖像錄像系統(tǒng)及其控制方法。
為達到上述目的本發(fā)明利用視線識別的圖像錄像系統(tǒng)是由下述部分構成檢測用戶視線的視線檢測攝像機；對視線檢測攝像機檢測的用戶視線坐標進行計算的視線坐標檢測器；根據視線坐標檢測器檢測的視聽用戶坐標計算結果，對輸出中的圖像的錄像、停止或重現自動地進行控制的個人用錄像機。
所述的個人用錄像機由下述部分構成選擇視聽用戶希望的頻道，并對通過被選擇頻道輸入的廣播信號，以傳送流的形態(tài)進行譯碼的頻道段；對以傳送流的形態(tài)已譯碼的廣播數據，為使其能夠重現及存儲而進行編碼或譯碼的數據處理部；對數據處理部中已處理的數據進行顯示的顯示部；對數據處理部中已處理的數據進行存儲的存儲部；對個人用錄像機全面進行控制，并根據視線坐標檢測部檢測的視線坐標，對當前顯不部輸出中的圖像的錄像、停止或重現進行自動控制的個人用錄像機。
為達到上述目的利用視線識別的圖像錄像系統(tǒng)的控制方法是由下述階段組成將已譯碼的圖像正在輸出到顯示部的狀態(tài)下，對正在視聽中的用戶的視線通過視線檢測攝像機及視線坐標檢測器進行檢測，如果視聽用戶的視線在顯示部中移動，則自動停止圖像輸出，或根據時間移動對輸出中的圖像，在個人用錄像機中進行的錄像階段；在視線檢測攝像機及視線坐標檢測器中，檢測出視聽用戶的視線在顯示部中被固定，則將自動停止的圖像自動進行重現，或在個人用錄像機中被錄像的圖像以時間移動功能進行的重現的階段。
所述的將輸出中的圖像進行錄像的階段是，如果視聽用戶的視線移動被檢測到，則對其立即進行錄像；如果經過了設定的時間，則多采用錄像方法中的一種對其立即進行錄像，并且，包括以時間移動進行重現之后，對已被錄像的圖像進行自動刪除的階段。
如果所述的個人用圖像錄像系統(tǒng)在車輛中被安裝，并且視聽用戶為司機，則此時個人用錄像系統(tǒng)是由下述階段組成對車輛移動進行的檢測階段；如果檢測出車輛移動，則停止圖像輸出到顯示部，并根據時間移動對圖像進行的存儲階段；對車輛的停車和司機的視線是否集中在顯示部中進行判斷，并且多包括根據判斷結果將存儲圖像進行的重現的階段。
如上所述，本發(fā)明利用視線識別的圖像錄像系統(tǒng)其控制方法具有如下效果第一，由于對廣播能夠自動進行錄像及重現，因此利用個人用錄像機能夠容易地視聽廣播，特別是產生緊急事情時能安全地進行對策。
第二，對個人用錄像機(PVR)安裝在車輛的情況，由于可以進行對廣播的自動錄像及重現，因此提高了司機的安全性。


圖1是傳統(tǒng)技術個人用錄像機的構成方框圖。
圖2是本發(fā)明利用視線識別的圖像錄像系統(tǒng)構成方框圖。
圖3是本發(fā)明第1實例利用視線識別的圖像錄像系統(tǒng)的控制方法流程圖。
圖4是本發(fā)明第2實例利用視線識別的圖像錄像系統(tǒng)的控制方法流程圖。
圖中，100個人用錄像機(PVR)110頻道段120數據處理部 130顯示部140存儲部 150中央處理器(CPU)200視線檢測攝像機 300視線坐標檢測器具體實施方式
參照附圖，以下對本發(fā)明利用視線識別的圖像錄像系統(tǒng)及其控制方法進行說明。
圖2是本發(fā)明利用視線識別的圖像錄像系統(tǒng)構成方框圖。
本發(fā)明利用視線識別的圖像錄像系統(tǒng)如圖2所示，是由下述部分構成對視聽顯示部{例如，數字電視機(TV)(以下簡稱DTV)}所輸出圖像上的視聽用戶視線進行檢測的視線檢測攝像機200；對視線檢測攝像機200檢測的用戶視線坐標進行計算的視線坐標檢測器300；根據視線坐標檢測器300檢測的視聽用戶坐標計算結果，對所輸出圖像的錄像、停止或重現自動進行控制的個人用錄像機(PVR)100。
所述的個人用錄像機是由下述部分構成為了用戶選擇所希望的頻道而設置的調諧器；為了對通過被選擇頻道輸入的廣播信號以傳送流形態(tài)進行譯碼而設置的由頻道譯碼器構成的頻道段110；為使以傳送流形態(tài)已譯碼的數據能夠進行重現及存儲，對已譯碼的數據進行編碼或譯碼的數據處理部120；將數據處理部120中被處理的數據進行顯示的顯示部(例如，數字電視機DTV)130；將數據處理部120中被處理的數據進行存儲的存儲部、(例如，硬盤HDD)140；對個人用錄像機(PVR)100的進行全面的控制，并根據視線坐標檢測器300中檢測的視線坐標，對當前顯示部130中輸出圖像的錄像、停止或重現進行控制的中央處理器(CPU)150。
本發(fā)明是以對視聽用戶視線進行檢測的視線檢測攝像機200和從視線檢測攝像機200輸入的信號為基礎，以視聽用戶的瞳孔位置為基準來計算出視聽用戶的視線坐標。在視線坐標檢測器300中，將計算出的視線坐標傳送到個人用錄像機100的中央處理器(CPU)150。如果視聽用戶的視線在顯示部130中不存在，則將當前正在顯示的圖像自動存儲到存儲部140；如果視聽用戶的視線集中在顯示部130中，則將已錄像的圖像自動進行重現；當然，對這種情況應通過快速檢索功能將錄像的圖像進行重現。并且，如果被再現的圖像是在存儲部140中的輸出圖像，則不是自動存儲，而是在自動暫停(pause)動作之后，根據視聽用戶的視線是否集中來進行重現。
此時，音頻(Audio)信號也在一起進行錄像。只是音頻與音頻存儲不同，音頻將繼續(xù)進行輸出，或者根據視聽用戶的選擇，經過一定時間之后關閉揚聲器(speaker out)。
圖3是本發(fā)明第1實例利用視線識別的圖像錄像系統(tǒng)控制方法流程圖。
本發(fā)明第1實例圖像錄像系統(tǒng)的圖像自動錄像及重現方法。如果視聽用戶通過遙控器或個人用錄像機100的前面按鍵(Front key)，選擇視線識別時間移動(Time shifter)功能的動作(S10)，則個人用錄像機100的中央處理器(CPU)150將根據視聽用戶的視線及視聽用戶設定的實時時間，對音頻的接通與關閉進行檢測(S20)。
在這里，對視聽用戶的視線是否固定在畫面上進行判斷(S30)，即，視線檢測攝像機200對視聽用戶的視線進行檢測，并將檢測的結果傳送到視線坐標檢測器300。在視線坐標檢測器300中計算視線坐標，并將計算結果傳送到個人用錄像機100的中央處理器(CPU)150。根據計算出的視線坐標，中央處理器(CPU)150將對顯示部130輸出的圖像是否在設定范圍內進行判斷。這種判斷通常利用一般的視線識別技術。
如果判斷結果(S30)是視聽用戶的視線沒有移動，則繼續(xù)對存儲部140中是否存在以前的錄像部分進行判斷(S40)。
如果判斷結果是以前的錄像部分不存在，則對當前頻道段110中接收的并在數據處理部120中已處理的廣播信號進行輸出，同時使視聽用戶視聽到正常的畫面(S50)；或者將存儲部140中存儲的圖像，在數據處理部120中經過處理之后進行視聽欣賞的畫面。
但是，如果判斷結果(S30)是視聽用戶的視線移動了，則對是否經過了設定時間進行判斷(S60)。
如果判斷結果(S60)是視線的移動經過了設定時間，則根據實時時間音頻接通/關閉的檢測(S20)結果，對揚聲器的音頻輸出進行關閉(speaker out)(S70)。當然，如果實時時間音頻接通，則與廣播錄像無關，可以繼續(xù)視聽音頻。
在這里，根據時間移動功能，將當前數據處理部120處理的廣播數據(圖像及音頻)在存儲部140中進行存儲(錄像)(S80)。此時，如果將已錄像的廣播數據進行重現時，是以快速重現動作進行，則有可能不需要音頻錄像，因此根據是否需要，也可能對音頻不進行存儲。
但是，如果判斷結果(S60)是視聽用戶的視線在設定的時間以內移動，則對視聽用戶的視線是否同定在畫面上進行判斷(S30)。即，如果視聽用戶只是在短暫地時間內(例如，1-5秒之間)移動視線，而此時揚聲器正處在輸出音頻的狀態(tài)，因此即使只在設定時間內視聽用戶沒有視聽廣播，也不會特別擔心對廣播內容的視聽。這種情況可以防止對廣播經常進行不必要的錄像(S80)。當然，可以根據需要省略對是否經過設定時間進行的判斷階段(S60)，直接以時間移動功能來進行廣播錄像(option)。
接著，如果視聽用戶視線再次在畫面上固定(S30)，則對以前的錄像部分是否存在進行判斷(S40)。如果判斷結果是存在以前的錄像部分，則以時間移動功能對廣播進行重現(S90)。
其次，在存儲部存儲的數據中，刪除相應于重現部分大小的數據(S100)。
當然，如果視聽用戶對廣播內容希望以正常速度視聽，則為了以正常速度重現，可通過操作遙控器或個人用錄像機的前面按鍵，使數據處理部120處理的數據繼續(xù)在存儲部140中進行存儲作業(yè)，并使存儲的內容以正常速度通過顯示部130和揚聲器進行輸出。
圖4是本發(fā)明第2實例利用視線識別的圖像錄像系統(tǒng)的控制方法流程圖。
本發(fā)明第2實例利用視線識別的圖像錄像系統(tǒng)的控制方法主要是適用于車輛司機的圖像錄像系統(tǒng)及其控制方法。
所述的第2實例利用視線識別的圖像錄像系統(tǒng)的控制方法是如果司機通過操作遙控器或個人用錄像機100前面按鍵(Front key)選擇視線識別時間移動(time shifter)功能的動作(S110)，則個人用錄像機100的中央處理器(CPU)150將對在司機設定的實時時間內音頻是否接通/關閉進行檢測(S120)。
接著，對司機的視線是否固定在畫面上進行判斷(S130)。即，視線檢測攝像機200對視聽用戶的視線進行檢測，并且，如果檢測的視聽用戶視線被傳送到視線坐標檢測器300，則視線坐標檢測器300對視線坐標進行計算之后，將計算出的視線坐標傳送到個人用錄像機100的中央處理器(CPU)150。中央處理器(CPU)150則對其是否在司機的設定范圍以內還是以外進行判斷。
如果判斷結果(S130)是司機的視線沒有移動，則繼續(xù)對車輛是否在正常行駛中還是在設定速度以下(例如，5km/H以下)進行判斷(S140)。即，對車輛是否正常行駛進行判斷。
如果判斷結果(S140)是車輛當前幾乎不在行駛狀態(tài)，則對在存儲部140中以前的錄像部分是否存在進行判斷(S150)。如果判斷結果是以前的錄像部分不存在，則將當前頻道段110中接收的并在數據處理部120中經過處理的數據進行輸出，從而使視聽用戶可以視聽到正常的畫面(S160)。
但是，如果判斷結果(S130)是視聽用戶的視線被移動，則繼續(xù)對車輛是否在行駛中或是否在設定速度以下(例如5km/H以下)進行判斷(S170)。
如果判斷結果是車輛不行駛，則繼續(xù)對是否經過了設定時間進行判斷(S180)。
如果判斷結果(S180)是視聽用戶的視線移動經過了設定時間，則根據實時時間音頻是否接通/關閉的檢測(S120)結果，對揚產器的音頻輸出進行關閉(speaker out)(S190)。當然，也可以存在根據實時時間音頻是否接通/關閉的檢測(S120)的結果，對揚聲器音頻輸出繼續(xù)維持接通狀態(tài)。
接著，以時間移動功能，對當前數據處理部120中處理的廣播數據(圖像及音頻)在存儲部140中進行存儲(S200)。此時，如果被錄像的廣播數據以快速動作進行重現，則有可能不需要對音頻進行錄像，因此根據需要，也可對音頻不進行存儲。
其次，如果確認了車輛停止(S210)，則司機的視線是否在畫面上被固定(S130)、確認車輛行駛(S140)之后，如果司機的視線固定在畫面上，并且車輛不是正常行駛，則根據以前的錄像部分是否存在，以時間移動功能對廣播進行重現(S220)，并在存儲部140中刪除相應于重現部分大小的存儲數據(S230)。當然，對錄像的圖像進行重現時也要對車輛是否行駛進行判斷。
此時，與本發(fā)明第1實例分析方法相同，如果司機視線的畫面移動沒有經過設定的時間，則對視聽用戶的視線是否在畫面上被固定再進行判斷(S130)。即，如果視聽用戶只是在短時間(例如，1-5秒之間)間內移動視線，則由于揚聲器此時正處在輸出音頻的狀態(tài)，因此即使只在視聽用戶設定的時間內沒有視聽廣播，也不會特別擔心對廣播內容不能視聽。當然，根據需要可以省略對是否經過設定時間所進行的判斷階段(S180)，而直接用時間移動功能來進行廣播錄像(option)。
并且，在對車輛行駛進行判斷的階段(S140)(S170)，如果所有車輛行駛都被確認，則立即以時間移動功能對廣播進行錄像(S200)。此時，如果判斷為車輛行駛持續(xù)了1km以上，則對司機或步行者均能提高其安全性。
本發(fā)明第2實例主要是對司機的適用，而第1實例主要是對家庭、車輛的前后座位乘客的適用。
權利要求
1.利用視線識別的圖像錄像系統(tǒng)，其特征在于所述的個人用圖像錄像系統(tǒng)是由下述部分構成檢測用戶視線的視線檢測攝像機；對視線檢測攝像機檢測的用戶視線坐標進行計算的視線坐標檢測器；根據視線坐標檢測器檢測的視聽用戶坐標的計算結果，對輸出中的圖像的錄像、停止或重現自動進行控制的個人用錄像機。
2.根據權利要求1所述的利用視線識別的圖像錄像系統(tǒng)，其特征在于所述的個人用錄像機是由下述部分構成選擇視聽用戶希望的頻道，并對通過被選擇頻道輸入的廣播信號，以傳送流的形態(tài)進行譯碼的頻道段；對以傳送流的形態(tài)已譯碼的廣播數據，為使其能夠重現及存儲而進行編碼或譯碼的數據處理部；對數據處理部中已處理的數據進行顯示的顯示部；對數據處理部中已處理的數據進行存儲的存儲部；對個人用錄像機全面進行控制，并根據視線坐標檢測部檢測的視線坐標，對當前顯示部中輸出圖像的錄像、停止或重現進行控制的中央處理器。
3.利用視線識別的圖像錄像系統(tǒng)的控制方法，其特征在于所述控制方法是由下述階段組成將已譯碼的圖像正在輸出到顯示部的狀態(tài)下，對正在視聽中的用戶的視線通過視線檢測攝像機及視線坐標檢測器進行檢測，如果視聽用戶的視線在顯示部中移動，則自動停止圖像輸出，或根據時間移動對輸出中的圖像，在個人用錄像機中進行的錄像階段；在視線檢測攝像機及視線坐標檢測器中，檢測出視聽用戶的視線在顯示部中被固定，則將自動停止的圖像自動進行重現，或在個人用錄像機中被錄像的圖像以時間移動功能進行的重現的階段。
4.根據權利要求3所述的利用視線識別的個人用圖像錄像系統(tǒng)的控制方法，其特征在于所述的將輸出中的圖像進行錄像階段是如果視聽用戶的視線移動被檢測到，則對其立即進行錄像；如果經過了設定的時間，則多采用錄像方法中的一種對其立即進行錄像；并且，包括以時間移動進行重現之后，對已被錄像的圖像進行自動刪除的階段。
5.根據權利要求3所述的利用視線識別的個人用圖像錄像系統(tǒng)的控制方法，其特征在于所述的如果個人用錄像系統(tǒng)在車輛中被安裝，并且視聽用戶為司機，則此時個人用圖像錄像系統(tǒng)是由下述階段組成對車輛移動進行的檢測階段；如果檢測出車輛移動，則停止圖像輸出到顯示部，并根據時間移動對圖像進行的存儲階段；對車輛的停車和司機的視線是否集中在顯示部中進行判斷，并且多包括根據判斷結果將存儲圖像進行的重現的階段。
全文摘要
本發(fā)明涉及一種圖像的錄像，尤其涉及一種在廣播中的圖像錄像及重現時，利用視線識別自動進行錄像、停止或者重現的利用視線識別的圖像錄像及其控制方法。為達到上述目的本發(fā)明利用視線識別的個人用圖像錄像系統(tǒng)是由下述部分構成視線檢測攝像機；視線坐標檢測器；個人用錄像機(PVR)。其控制方法是由下述階段組成在圖像輸出到顯示部時，對用戶視線進行檢測，若視線移動，則停止圖像輸出或進行錄像的階段；若視線固定，則重現停止的圖像，或對錄像的圖像進行重現的階段。本發(fā)明不僅能夠利用個人用錄像機(PVR)容易地視聽廣播，特別是產生緊急事情時能安全地進行對策，而且對其安裝在車輛的情況，提高了司機的安全性。
文檔編號G11B19/02GK1856063SQ20051004629
公開日2006年11月1日 申請日期2005年4月20日 優(yōu)先權日2005年4月20日
發(fā)明者李在晟 申請人:樂金電子(沈陽)有限公司