欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

時(shí)移視頻通信的制作方法

文檔序號(hào):7913496閱讀:129來(lái)源:國(guó)知局
專利名稱:時(shí)移視頻通信的制作方法
技術(shù)領(lǐng)域
本發(fā)明涉及一種提供兩個(gè)或更多個(gè)地點(diǎn)之間的實(shí)時(shí)視頻通信鏈接的視頻通信系統(tǒng),并且更具體地涉及一種自動(dòng)化方法,該方法用于檢測(cè)和表征本地環(huán)境中的活動(dòng),然后根據(jù)表征的圖像的可接受性和遠(yuǎn)程觀看系統(tǒng)處的用戶的狀態(tài)來(lái)發(fā)送或記錄視頻圖像,分別用于在遠(yuǎn)程地點(diǎn)中直播或時(shí)移觀看。
背景技術(shù)
目前,視頻通信仍是新興領(lǐng)域,具有包括提供部分解決方案或瞄準(zhǔn)機(jī)會(huì)的市場(chǎng)解決方案的網(wǎng)絡(luò)攝像頭、手機(jī)、遠(yuǎn)程會(huì)議或遠(yuǎn)程呈現(xiàn)系統(tǒng)的各種示例。在1964年紐約世界博覽會(huì)上貝爾實(shí)驗(yàn)室展示了第一個(gè)工作視頻電話系統(tǒng)。AT&T 公司隨后以Pictur印hone(圖像電話)的商標(biāo)名用各種形式將該系統(tǒng)商業(yè)化。然而, Pictur印hone具有非常有限的商業(yè)成功。包括低分辨率、彩色成像的缺乏以及差的音頻-視頻同步的技術(shù)問(wèn)題影響了性能并限制了吸引力。此外,Pictur印hone使非常受限的視場(chǎng)成像,基本上得到參與者的肖像格式圖像??梢詮腤. Rea的美國(guó)專利3,495,908更好地理解這一點(diǎn),該專利描述了一種用于對(duì)準(zhǔn)Pictur印hone攝像機(jī)的有限捕獲視場(chǎng)內(nèi)的用戶的裝置。因此,圖像被捕獲為具有很少的背景信息或者沒(méi)有背景信息,從而導(dǎo)致上下文的損失。此外,Pictur印hone的維護(hù)用戶隱私的僅有調(diào)節(jié)是關(guān)閉視頻發(fā)送的選項(xiàng)。作為少為人知的替選方案,“媒體空間(Media space) ”是有前途的另一種示例性視頻通信技術(shù)?!懊襟w空間”名義上為兩個(gè)地點(diǎn)之間的“總是開(kāi)啟”或“幾乎總是開(kāi)啟”的視頻連接,其通常用在工作環(huán)境中。美國(guó)加利福尼亞的帕洛阿爾托的Xerox Palo Alto研究中心在80年代研發(fā)了媒體空間的第一個(gè)這樣的示例,并且該媒體空間提供辦公室-辦公室、總是開(kāi)啟的、實(shí)時(shí)音頻和視頻連接(參見(jiàn)書(shū)“Media Space :20+years of Mediated Life, "Ed. Steve Harrison, Springer-Verlag, London,2009)。作為相關(guān)示例,Robert S. Fish、Robert E. Kraut 禾口 Barbara L. Chalfonte 在 1990 年的關(guān)于計(jì)算機(jī)支持協(xié)作工作的ACM會(huì)議的會(huì)議錄中的文章“The Video Window System in Informal Communications”中描述的“視頻窗口(Video Window) ”為全雙工遠(yuǎn)程會(huì)議提供了大屏幕,試圖鼓勵(lì)職業(yè)同事之間的非正式協(xié)作通信。雖然與會(huì)議室環(huán)境相比,這樣的系統(tǒng)使得能夠?qū)崿F(xiàn)非正式通信,但是開(kāi)發(fā)這些系統(tǒng)用于工作用途,而不是住宅環(huán)境中的個(gè)人用途,由此沒(méi)有預(yù)期住宅關(guān)注和情形。此外,視頻窗口中的連接是相互的,這意味著如果一個(gè)客戶端正在傳輸,則另一個(gè)客戶端也正在傳輸,并且如果一個(gè)客戶端斷開(kāi),則另一個(gè)客戶端也斷開(kāi)。雖然相互性在工作環(huán)境中會(huì)是期望的,但是對(duì)于家庭環(huán)境之間的通信而言,相互性不會(huì)是期望的。具體地, 可以優(yōu)選的是,允許每個(gè)用戶站點(diǎn)確定他們的側(cè)何時(shí)捕獲和傳輸,以給予對(duì)他們自己的空間和流出的視頻材料的各家庭的完全控制。視頻窗口還使用大電視尺寸的顯示器。這樣的顯示器尺寸是否會(huì)適用于家庭是有疑問(wèn)的。另一個(gè)相關(guān)的媒體空間示例是Marilyn Μ. Mantei等人在1991年的關(guān)于計(jì)算系統(tǒng)中的人為因素的ACM會(huì)議的會(huì)議錄中的文章“Experiences in the Use of a Media Space” 中描述的“CAVECAT (計(jì)算機(jī)音頻視頻增強(qiáng)協(xié)作和遠(yuǎn)程呈現(xiàn))”。利用CAVECAT,合作者在他們的辦公室運(yùn)行媒體空間的客戶端,然后能夠看見(jiàn)類似地正運(yùn)行媒體空間客戶端的其它合作者的辦公室。以網(wǎng)格呈現(xiàn)來(lái)自所有連接的辦公室的視頻。因此,系統(tǒng)被公開(kāi)地設(shè)計(jì)成共享多個(gè)地點(diǎn)之間的直播視頻。這與不會(huì)期望連接和共享多個(gè)家庭之間的視頻的家庭環(huán)境形成對(duì)照。反而,家人可能希望僅與另一單個(gè)家庭連接。與人群相對(duì)比,CAVECAT還意圖捕獲固定地點(diǎn)中的辦公室內(nèi)的個(gè)人。像這樣,系統(tǒng)被設(shè)置成提供單個(gè)用戶的近景,并且不允許移動(dòng)系統(tǒng)。這還與如下家庭環(huán)境形成對(duì)照其中如果視頻通信系統(tǒng)放置在家的公共區(qū)域中,則多個(gè)人可以使用或經(jīng)受視頻通信系統(tǒng)。類似地,家人可能希望根據(jù)他們希望與遠(yuǎn)程家庭成員共享什么活動(dòng)來(lái)物理地移動(dòng)視頻通信客戶端。研究人員大多失敗于尋求將媒體空間概念從工作環(huán)境轉(zhuǎn)變到家庭環(huán)境。雖然針對(duì)于家庭的媒體空間具有很大的潛力來(lái)連接處于一定距離的家人,但是與隱私關(guān)注有關(guān)的假定約束和網(wǎng)絡(luò)帶寬問(wèn)題限制了對(duì)此應(yīng)用的關(guān)注。結(jié)果,研究人員反而將他們的注意力引向用于連接家人的其它工具,這些工具可以使用抽象表示(例如,內(nèi)置于數(shù)字圖像幀的狀態(tài)指示符、接通以指示遠(yuǎn)程家庭中的存在的燈)來(lái)提供健康和活動(dòng)的意識(shí)。盡管進(jìn)行該極簡(jiǎn)的研究,但是許多人現(xiàn)在轉(zhuǎn)向用于與相隔距離的家人連接的視頻通信系統(tǒng)。這通過(guò)諸如Skype、Google Talk或Windows Live Messenger的提供視頻通信通道的即時(shí)消息系統(tǒng)的受歡迎的目前使用來(lái)證明。因此,會(huì)有利的是,相對(duì)于可變的用戶年齡和技術(shù)水平,開(kāi)發(fā)針對(duì)與家有關(guān)的特殊問(wèn)題(包括用戶隱私和易用性)而特別優(yōu)化的視頻通信系統(tǒng)。同樣地,相對(duì)于用戶或觀看者的存在而可以在視頻通信期間捕獲的用戶活動(dòng)的可變范圍、參與的本地用戶的數(shù)目和身份、或者通信事件期間的用戶活動(dòng)的變化本性全部可以影響系統(tǒng)設(shè)計(jì)。Garman Neustaedter和Saul Greenberg在關(guān)于普適計(jì)算的第五次國(guó)際會(huì)議 (2003)的 1 中的t$“The Design of a Context-Aware Home Media Space for Balancing Privacy and Awareness”中描述了在住宅環(huán)境中已被測(cè)試的一種示例性原型媒體空間。該系統(tǒng)仍強(qiáng)調(diào)工作,如其描述了使用系統(tǒng)以協(xié)助遠(yuǎn)程辦公者(telecommuter)與在辦公室的同事之間的通信。作者認(rèn)識(shí)到,對(duì)于家庭用戶而言,與基于辦公室的媒體空間的用戶相比個(gè)人隱私關(guān)注更成問(wèn)題。當(dāng)家庭用戶忘記系統(tǒng)開(kāi)啟或者其他個(gè)人不經(jīng)意跑到存在于家庭辦公環(huán)境內(nèi)的系統(tǒng)的視場(chǎng)中時(shí),可能出現(xiàn)隱私侵犯情形。所描述的系統(tǒng)使用包括隔離家庭辦公地點(diǎn)、人物計(jì)數(shù)、物理控制和手勢(shì)識(shí)別、以及視覺(jué)和音頻反饋機(jī)構(gòu)的多種方法來(lái)減小這些風(fēng)險(xiǎn)。然而,雖然該系統(tǒng)位于家中,但是其并非旨在用于由居民進(jìn)行的個(gè)人通信。像這樣,其并沒(méi)有描述可以適合于一個(gè)或更多個(gè)人的個(gè)人活動(dòng)、同時(shí)幫助這些個(gè)人維護(hù)他們的隱私的住宅通信系統(tǒng)。多種系統(tǒng)已被開(kāi)發(fā)成具有如下能力用于記錄視頻并在稍后時(shí)間處回放視頻。作為示例,Scott L. Minneman和Meve R. Harrison在1993年的關(guān)于多媒體的ACM國(guó)際會(huì)議的會(huì)議錄中的文章"Where Were We :making and using near-synchronous,pre-narrative video ”中描述了 W3系統(tǒng)(我們?cè)谀睦?Where Were We))。在Chiu等人的美國(guó)專利 6,239,801、Moram等人的美國(guó)專利5,717,879和Goldberg等人的美國(guó)專利5,692,213中還描述了 W3系統(tǒng)的部件。W3系統(tǒng)使用視頻和音頻兩者記錄會(huì)議活動(dòng),包括個(gè)人之間的交談和白板上的手寫(xiě)筆記。這些包括諸如在白板上書(shū)寫(xiě)的隱含用戶動(dòng)作以及通過(guò)用戶接口在記錄的內(nèi)容中創(chuàng)建索引的清楚動(dòng)作。會(huì)議參與者然后可以使用索引實(shí)時(shí)查看先前在會(huì)議期間已經(jīng)記錄了什么?;胤藕筒榭纯梢园l(fā)生在連接到系統(tǒng)的任何數(shù)目的計(jì)算機(jī)上。雖然該系統(tǒng)在概念上與媒體空間相似,但是它被設(shè)計(jì)用于通常為持續(xù)時(shí)間短(例如,小于75分鐘)的演講的會(huì)議,而不是用于可以繼續(xù)擴(kuò)展時(shí)間段(例如,一整天)的視頻通信系統(tǒng)或媒體空間。 W3還假定所有內(nèi)容值得記錄。作為另一示例,Michael Nunes等人在2007年的關(guān)于計(jì)算機(jī)支持協(xié)作工作的歐洲會(huì)議的會(huì)議錄中的文章"What did I Miss ? Visualizing the Past through Video Traces"中描述了被稱作“Video Trace (視頻跟蹤),,的系統(tǒng)。Video Trace記錄來(lái)自總是開(kāi)啟的攝像機(jī)的視頻并將其可視化用于稍后查看。從每個(gè)視頻幀取出像素列,并將該像素列與來(lái)自相鄰視頻幀的列連接。在一段時(shí)間內(nèi)(例如,一小時(shí)、一天、一周等),一長(zhǎng)串像素列構(gòu)建并提供已經(jīng)發(fā)生的過(guò)去的活動(dòng)的概述。用戶可以與該視頻時(shí)間線交互以查看視頻。 點(diǎn)擊時(shí)間線內(nèi)的像素列回放此時(shí)記錄的完整視頻。該系統(tǒng)提出了一種用于可視化大量視頻數(shù)據(jù)并允許用戶快速查看它的方法。連接的像素列提供了記錄的視頻的高級(jí)別概述。然而, 該系統(tǒng)沒(méi)有提供使得系統(tǒng)作為獨(dú)立客戶端而不是視頻通信系統(tǒng)的、兩個(gè)站點(diǎn)或客戶端之間的網(wǎng)絡(luò)化支持。因此,不可以使用該系統(tǒng)查看來(lái)自多個(gè)連接的客戶端的記錄的視頻。此外, 所有內(nèi)容(活動(dòng)是否發(fā)生在成像區(qū)域中)被假定為值得記錄,并如此在時(shí)間線內(nèi)顯示。家庭背景內(nèi)的視頻通信系統(tǒng)或媒體空間不一定總是包含相關(guān)或感興趣的視頻以發(fā)送和/或記錄。此外,發(fā)送或記錄不必要的視頻對(duì)網(wǎng)絡(luò)帶寬強(qiáng)加了額外的約束。至今,仍需要暫時(shí)管理視頻的記錄和回放的、用于住宅用途的媒體空間的例子。我們將這種類型的系統(tǒng)稱作時(shí)移媒體空間或時(shí)移視頻通信系統(tǒng),這是因?yàn)槠湓试S用戶改變他們觀看由系統(tǒng)記錄的視頻的時(shí)間。用于家庭的時(shí)移媒體空間或視頻通信系統(tǒng)必須特別關(guān)注系統(tǒng)在家中的放置連同所有家庭成員的隱私關(guān)注、系統(tǒng)捕獲(或沒(méi)有捕獲)的活動(dòng)、以及遠(yuǎn)程觀看者的可得性(或缺乏遠(yuǎn)程觀看者)??傊?,開(kāi)發(fā)用于從家庭的社交、技術(shù)和隱私約束的環(huán)境視頻捕獲用于視頻通信的實(shí)時(shí)的非手寫(xiě)事件的系統(tǒng)是一種仍未實(shí)現(xiàn)的需要。具體地,許多常用的視頻通信系統(tǒng)和經(jīng)典的媒體空間的挑戰(zhàn)是其沒(méi)有被設(shè)計(jì)成容易地適合于家庭日常生活和住所背景。也就是, 它們的失敗在于著手解決家庭需要它們以在其內(nèi)工作的情形和背景。反而,將它們的設(shè)計(jì)從工作環(huán)境轉(zhuǎn)移,在工作環(huán)境中,它們通常被設(shè)計(jì)用于會(huì)或不會(huì)位于家中的容易訪問(wèn)的位置的臺(tái)式計(jì)算機(jī)。它們還會(huì)需要家庭成員在開(kāi)始通信之前登錄計(jì)算機(jī)或啟動(dòng)應(yīng)用程序。現(xiàn)有技術(shù)的媒體空間和視頻通信解決方案通常還廣播或流出所有內(nèi)容,而與活動(dòng)或用戶存在無(wú)關(guān)。總之,這些要求使得家人更難以開(kāi)始并使用這樣的技術(shù)用于日常通信。因此,家人可以得益于使用簡(jiǎn)單且提供進(jìn)入和使用的較少障礙的、容易訪問(wèn)的視頻通信系統(tǒng)。

發(fā)明內(nèi)容
本發(fā)明描述了一種用于使用視頻通信系統(tǒng)向遠(yuǎn)程觀看者提供視頻圖像的方法,該方法包括操作視頻通信系統(tǒng),該視頻通信系統(tǒng)包括經(jīng)由通信網(wǎng)絡(luò)連接到遠(yuǎn)程觀看環(huán)境中的遠(yuǎn)程觀看客戶端的本地環(huán)境中的視頻通信客戶端,其中該視頻通信客戶端包括視頻捕獲裝置、圖像顯示器、以及具有視頻分析部件的計(jì)算機(jī);在通信事件期間,使用視頻捕獲裝置捕獲本地環(huán)境的視頻圖像;利用視頻分析部件分析捕獲的視頻圖像,以檢測(cè)本地環(huán)境內(nèi)的正在進(jìn)行的活動(dòng);關(guān)于表示遠(yuǎn)程觀看者興趣的屬性,表征視頻圖像內(nèi)的檢測(cè)的活動(dòng);響應(yīng)于表征的活動(dòng)和定義的本地用戶許可,確定可接受的視頻圖像是否可用;接收遠(yuǎn)程觀看客戶端連接還是斷開(kāi)的指示;以及如果遠(yuǎn)程觀看客戶端連接,則向遠(yuǎn)程觀看客戶端發(fā)送正在進(jìn)行的活動(dòng)的可接受的視頻圖像,或者替選地,如果遠(yuǎn)程觀看客戶端斷開(kāi),則將可接受的視頻圖像記錄到存儲(chǔ)器, 并且在接收到遠(yuǎn)程觀看客戶端連接的指示的稍后時(shí)間處向遠(yuǎn)程觀看客戶端發(fā)送記錄的視頻圖像。本發(fā)明的優(yōu)點(diǎn)在于提供了使用家庭環(huán)境中的視頻通信系統(tǒng)的解決方案,其中用戶可以根據(jù)在家庭環(huán)境中什么別的活動(dòng)正在進(jìn)行來(lái)連接(engage)或斷開(kāi)(disengage)以觀看視頻通信系統(tǒng)。其具有如下的額外優(yōu)點(diǎn)當(dāng)遠(yuǎn)程用戶沒(méi)有連接以觀看視頻圖像時(shí),視頻圖像可以被記錄用于稍后觀看。其還具有如下的另一優(yōu)點(diǎn)其提供了用于視頻圖像的發(fā)送者和接收者指定用戶偏好設(shè)置來(lái)實(shí)現(xiàn)期望的隱私規(guī)則的機(jī)構(gòu)。


圖1是描繪了視頻通信系統(tǒng)的整體系統(tǒng)圖,該視頻通信系統(tǒng)包括經(jīng)由網(wǎng)絡(luò)鏈接在本地環(huán)境和遠(yuǎn)程環(huán)境之間的視頻通信客戶端裝置;圖2描繪了在本地環(huán)境的背景中操作的視頻通信客戶端;圖3A提供了視頻通信客戶端裝置的操作元件的圖示;圖;3B更詳細(xì)地描繪了視頻通信客戶端裝置的一個(gè)實(shí)施例的操作元件;圖4描繪了圖示根據(jù)本發(fā)明的方法的視頻通信系統(tǒng)的操作方法的流程圖;圖5是給出在視頻通信系統(tǒng)中會(huì)遇到的各種條件、連同相應(yīng)期望的結(jié)果的示例的表格;以及圖6描繪了通過(guò)攝像機(jī)捕獲的事件或活動(dòng)的時(shí)序、連同相關(guān)聯(lián)的視頻操作狀態(tài)和用于確定視頻操作狀態(tài)的相關(guān)聯(lián)的概率。
具體實(shí)施例方式本發(fā)明包括這里描述的實(shí)施例的組合。提到的“特定實(shí)施例”等是指在本發(fā)明的至少一個(gè)實(shí)施例中存在的特征。分別提到的“實(shí)施例”或“特定實(shí)施例”等不一定是指一個(gè)或更多個(gè)相同的實(shí)施例,然而,這樣的實(shí)施例并不是彼此排他的,除非這樣說(shuō)明的或如本領(lǐng)域的技術(shù)人員容易清楚的。提到“一種方法”或“多種方法”等時(shí)的單數(shù)或復(fù)數(shù)的使用不受限制。應(yīng)注意,除非上下文另有明確標(biāo)明或需要,在本公開(kāi)中以非排他的意義使用字“或”。家人特別是當(dāng)他們分開(kāi)一定距離時(shí)會(huì)有保持聯(lián)系的實(shí)際需要和期望。例如,他們可能生活在不同的城市、或者甚至不同的國(guó)家。因?yàn)槿藗兾锢砩喜槐舜丝拷?,所以該距離障礙會(huì)使得溝通、見(jiàn)到愛(ài)人、或分享活動(dòng)變得更加困難。當(dāng)今,家人通常通過(guò)使用諸如電話、電子郵件、即時(shí)消息或視頻會(huì)議的技術(shù)來(lái)克服該距離障礙。在所有這些技術(shù)之中,視頻是提供與面對(duì)面情景最相似的環(huán)境的技術(shù),其是人們的優(yōu)選交互模式。像這樣,一直回溯到AT&T Picturephone的第一化身,視頻已被認(rèn)為是用于相隔距離的家人的有潛力的通信工具。本發(fā)明提供了利用視頻通信客戶端300或305 (見(jiàn)圖3A和3B)的網(wǎng)絡(luò)化視頻通信系統(tǒng)四0 (見(jiàn)圖1),視頻通信客戶端300或305使用圖像捕獲裝置120捕獲視頻圖像并且使用視頻管理處理500(見(jiàn)圖4)而操作,以提供在包括一個(gè)或更多個(gè)視頻場(chǎng)景620(見(jiàn)圖2 和6)的直播或記錄的視頻通信事件600期間參與他們的活動(dòng)的用戶10的視頻圖像。具體地,本發(fā)明提供了具體被設(shè)置成專門(mén)用于家庭用途的總是開(kāi)啟(或幾乎總是開(kāi)啟)的視頻通信系統(tǒng)或媒體空間的解決方案。在每個(gè)站點(diǎn),系統(tǒng)可以在諸如數(shù)碼相框或信息電器的專用裝置中運(yùn)行,這使得易于使裝置位于有益于視頻通信的家庭中的任何位置。其還可以作為多用途裝置的功能而提供,諸如膝上型計(jì)算機(jī)或數(shù)字電視。在任一情況下,在按下單個(gè)按鈕時(shí)在該裝置上能夠訪問(wèn)視頻通信系統(tǒng),并且視頻通信系統(tǒng)還提供用以在從家庭捕獲和廣播直播視頻的環(huán)境下減輕隱私關(guān)注的特征。該系統(tǒng)還被設(shè)計(jì)成在擴(kuò)展的持續(xù)時(shí)間(小時(shí)或天)內(nèi)捕獲和廣播視頻,若家庭成員期望的話。因此,系統(tǒng)可以保持為總是開(kāi)啟、或幾乎總是開(kāi)啟,類似于工作場(chǎng)所的媒體空間。這可以允許遠(yuǎn)程家庭觀看典型的每日活動(dòng)(諸如孩子玩?;蜻M(jìn)餐時(shí)間)以更好地幫助分布式家庭感覺(jué)聯(lián)系得更多。雖然系統(tǒng)也可以以與典型電話使用相似的方式用于有目的的實(shí)時(shí)視頻通信,但是該媒體空間系統(tǒng)的非正式的擴(kuò)展操作是相對(duì)于電話用途的非典型的模式。在認(rèn)識(shí)到將媒體空間的概念適用于家庭環(huán)境(特別是當(dāng)在擴(kuò)展的持續(xù)時(shí)間內(nèi)使用它時(shí))時(shí)仍存在若干挑戰(zhàn)的情況下,研發(fā)了本發(fā)明。首先,帶寬仍是一個(gè)問(wèn)題。在擴(kuò)展的持續(xù)時(shí)間內(nèi)在兩個(gè)或更多個(gè)家庭之間連續(xù)地廣播視頻需要大量網(wǎng)絡(luò)帶寬并且會(huì)經(jīng)受潛在問(wèn)題。因此,會(huì)期望減少正發(fā)送的視頻量,同時(shí)仍為家庭提供這樣的媒體空間的可能益處。因此,作為本發(fā)明的一個(gè)實(shí)現(xiàn)特征,提供了一種用以在住宅媒體空間或視頻通信系統(tǒng)前面感測(cè)用戶活動(dòng)和存在的技術(shù)。于是,該系統(tǒng)可以相應(yīng)地調(diào)節(jié)其操作設(shè)置。其次,認(rèn)識(shí)到可以觀看捕獲和發(fā)送的內(nèi)容的個(gè)人或家庭成員不會(huì)總是存在或可用,并且由此會(huì)容易地錯(cuò)過(guò)觀看可能對(duì)他們而言相關(guān)的要看的內(nèi)容。例如,他們可能在白天的不同時(shí)間在家或可能生活在沒(méi)有與視頻通信系統(tǒng)的使用對(duì)準(zhǔn)的不同時(shí)區(qū)。因此,本發(fā)明提供了一種用以記錄可能錯(cuò)過(guò)的內(nèi)容的方法,并且然后當(dāng)觀看者希望或存在于視頻通信系統(tǒng)前面時(shí)使得該內(nèi)容能夠回放。再者,該方法依賴于確定用戶(觀看者)存在和可用性,以基于確定的遠(yuǎn)程系統(tǒng)或觀看者的狀態(tài)(連接或斷開(kāi))來(lái)調(diào)節(jié)記錄和回放控制。因此,本發(fā)明的視頻通信系統(tǒng)利用視頻管理處理來(lái)提供兩種捕獲和記錄的模式直播模式(提供當(dāng)前活動(dòng)的正在進(jìn)行的視頻)以及時(shí)移模式(預(yù)先記錄了內(nèi)容,并且稍后當(dāng)用戶可用以觀看該內(nèi)容時(shí)重播該內(nèi)容)。像這樣,雖然本發(fā)明的媒體空間或視頻通信客戶端可以在擴(kuò)展的時(shí)間段內(nèi)連續(xù)操作,但是在本地媒體空間或視頻通信客戶端處的實(shí)時(shí)事件(活動(dòng))的視頻的實(shí)際發(fā)送或記錄取決于活動(dòng)感測(cè)和表征的組合、以及相對(duì)于遠(yuǎn)程鏈接的媒體空間或視頻通信客戶端的狀態(tài)確定。通過(guò)圖1的框圖可以更好地理解這一點(diǎn),圖1示出了具有位于本地站點(diǎn)362處的本地視頻通信客戶端300(或媒體空間客戶端)和在遠(yuǎn)程站點(diǎn)364處的相似遠(yuǎn)程視頻通信客戶端305 (或媒體空間客戶端或遠(yuǎn)程觀看客戶端)的網(wǎng)絡(luò)化視頻通信系統(tǒng)290 (或媒體空間)的一個(gè)實(shí)施例。在圖示的實(shí)施例中,視頻通信客戶端300和305均具有電子成像裝置 100,用于本地站點(diǎn)362處的本地用戶10a(觀看者/被攝對(duì)象)與遠(yuǎn)程站點(diǎn)364處的遠(yuǎn)程用戶IOb (觀看者/被攝對(duì)象)之間的通信。每個(gè)視頻通信客戶端300和305還具有計(jì)算機(jī);340(中央處理單元(CPU))、圖像處理器320和系統(tǒng)控制器330,以管理在通信網(wǎng)絡(luò)360 上的視頻圖像的捕獲、處理、發(fā)送或接收,進(jìn)行握手協(xié)議、保密協(xié)議和帶寬約束。通信控制器 355用作與諸如無(wú)線或有線網(wǎng)絡(luò)通道的通信通道的接口,用于將圖像和其它數(shù)據(jù)從一個(gè)站點(diǎn)傳送到另一站點(diǎn)。通信網(wǎng)絡(luò)360可以由遠(yuǎn)程服務(wù)器(未示出)支持,這是因?yàn)樗B接本地站點(diǎn)362和遠(yuǎn)程站點(diǎn)364。如圖1所示,每個(gè)電子成像裝置100包括顯示器110、一個(gè)或更多個(gè)圖像捕獲裝置 120、以及一個(gè)或更多個(gè)環(huán)境傳感器130。計(jì)算機(jī)340協(xié)調(diào)圖像處理器320和提供顯示驅(qū)動(dòng)器和圖像捕獲控制功能的系統(tǒng)控制器330的控制。圖像處理器320、系統(tǒng)控制器330、或圖像處理器320和系統(tǒng)控制器330兩者可以可選地集成到計(jì)算機(jī)340中。視頻通信客戶端300 的計(jì)算機(jī)340名義上位于本地站點(diǎn)362處,但是其功能的一部分可以遠(yuǎn)程地位于網(wǎng)絡(luò)化視頻通信系統(tǒng)四0內(nèi)的遠(yuǎn)程服務(wù)器處(例如,服務(wù)供應(yīng)商處)、或遠(yuǎn)程站點(diǎn)364處的遠(yuǎn)程視頻通信客戶端305處。在本發(fā)明的一個(gè)實(shí)施例中,系統(tǒng)控制器330向圖像捕獲裝置120提供命令,從而控制攝像機(jī)的視角、焦點(diǎn)、或其它圖像捕獲特性。圖1的網(wǎng)絡(luò)化媒體空間或視頻通信系統(tǒng)290有利地支持特別是從一個(gè)住宅地點(diǎn)到另一個(gè)住宅地點(diǎn)的視頻會(huì)議或視頻電話。在視頻通信事件(包括一個(gè)或更多個(gè)視頻場(chǎng)景)期間,本地站點(diǎn)362處的視頻通信客戶端300可以將本地視頻和音頻信號(hào)兩者發(fā)送到遠(yuǎn)程站點(diǎn)364,并且還可以從遠(yuǎn)程站點(diǎn)364接收遠(yuǎn)程視頻和遠(yuǎn)程音頻信號(hào)。如將會(huì)期望的, 本地站點(diǎn)362處的本地用戶IOa能夠看到作為本地顯示在顯示器110上的圖像的遠(yuǎn)程用戶 IOb (位于遠(yuǎn)程站點(diǎn)364處),從而增強(qiáng)了人的交互。圖像處理器320可以提供多個(gè)功能以協(xié)助雙向通信,包括改進(jìn)本地站點(diǎn)362處的圖像捕獲的質(zhì)量、改進(jìn)顯示在本地顯示器110處的圖像的質(zhì)量、以及處理遠(yuǎn)程通信的數(shù)據(jù)(通過(guò)數(shù)據(jù)壓縮、加密等)。應(yīng)注意,圖1示出了用于特定實(shí)施例的部件的通常布置。在本發(fā)明的范圍內(nèi)也可以使用其它布置。例如,圖像捕獲裝置120和顯示器110可以被組裝成單個(gè)殼體,諸如框架 (未示出),作為視頻通信客戶端300或305的整體的部分。該裝置殼體還可以包括視頻通信客戶端300或305的其它部件,諸如圖像處理器320、通信控制器355、計(jì)算機(jī)340、或系統(tǒng)控制器330。圖2描繪了用戶10操作本地站點(diǎn)處的他/她的本地環(huán)境415內(nèi)的本地視頻通信客戶端300。在此示例性圖示中,用戶10被示出為參與廚房中的活動(dòng),這在通信事件600內(nèi)的一個(gè)或更多個(gè)視頻場(chǎng)景620或時(shí)間事件期間發(fā)生。用戶10是用可以可選地包括來(lái)自紅外(IR)光源135的紅外光的環(huán)境光200照明的,同時(shí)還與安裝在家庭結(jié)構(gòu)上的本地視頻通信客戶端300交互。視頻通信客戶端300利用圖像捕獲裝置120和麥克風(fēng)144(此圖中也未示出)以從角寬(全角Θ)的圖像視場(chǎng)(FOV) 420和音頻視場(chǎng)430獲取數(shù)據(jù),如在用戶10 處總體指示的,用虛線示出了角寬的圖像視場(chǎng)420和音頻視場(chǎng)430。圖3A和;3B然后示出了視頻通信客戶端300或305的一個(gè)實(shí)施例的其它細(xì)節(jié)。每個(gè)視頻通信客戶端300或305是這樣的裝置或設(shè)備,其包括可以以變化的方式組合或集成的電子成像裝置100、圖像捕獲裝置120、計(jì)算機(jī)340、存儲(chǔ)器345、以及包括視頻分析部件 380的多個(gè)其它部件。圖3A具體地詳述了電子成像裝置100的構(gòu)造,電子成像裝置100被示出為包括圖像捕獲裝置120和具有顯示屏幕115的圖像顯示裝置(顯示器110)。計(jì)算機(jī) 340以及系統(tǒng)控制器330、存儲(chǔ)器345(數(shù)據(jù)存儲(chǔ))和用于與通信網(wǎng)絡(luò)360通信的通信控制器355可以被組裝在電子成像裝置100的殼體146內(nèi),或替選地可以單獨(dú)地定位并可以無(wú)線地或經(jīng)由線路連接到電子成像裝置100。電子成像裝置100還包括至少一個(gè)麥克風(fēng)144 和至少一個(gè)揚(yáng)聲器125(音頻發(fā)射器)。顯示器110具有畫(huà)中畫(huà)(picture-in-picture)顯示能力,使得分區(qū)屏幕圖像160可以顯示在屏幕115的一部分上。分區(qū)屏幕圖像160有時(shí)被稱為部分屏幕圖像或畫(huà)中畫(huà)圖像。顯示器110可以是液晶顯示器(IXD)裝置、有機(jī)發(fā)光二極管(OLED)裝置、CRT、投影顯示器、光導(dǎo)顯示器、或適于該任務(wù)的任何其它類型的電子圖像顯示裝置。顯示屏幕115 的尺寸不需要約束,并且可以至少?gòu)南ド闲统叽缙聊换蚋〕叽绲钠聊桓淖?,直到大家庭活?dòng)室顯示器。多個(gè)網(wǎng)絡(luò)化顯示屏幕115或視頻通信客戶端300還可以在住宅或本地環(huán)境 415內(nèi)使用。電子成像裝置100可以包括作為可以在電子成像裝置100的殼體146內(nèi)集成的獨(dú)立裝置的其它部件,諸如各種環(huán)境傳感器130、運(yùn)動(dòng)檢測(cè)器142、光檢測(cè)器140、或紅外(IR) 敏感攝像機(jī)。光檢測(cè)器140可以檢測(cè)環(huán)境可見(jiàn)光(λ)、或紅外光。光感測(cè)功能還可以直接由圖像捕獲裝置120支持,而不具有獨(dú)立的專用環(huán)境光檢測(cè)器140。每個(gè)圖像捕獲裝置120名義上為具有成像透鏡和圖像傳感器(未示出)的電子或數(shù)字?jǐn)z像機(jī),其可以捕獲靜止圖像、以及視頻圖像。圖像傳感器可以是如本領(lǐng)域中通常使用的CCD或CMOS器件。圖像捕獲裝置120還可以利用自動(dòng)或人工光學(xué)或電子平搖、俯仰或縮放能力而可調(diào)節(jié),以改變或控制來(lái)自圖像視場(chǎng)(FOV)420的圖像捕獲。在交疊或沒(méi)有交疊圖像視場(chǎng)420的情況下,也可以使用多個(gè)圖像捕獲裝置120。這些圖像捕獲裝置120可以集成在殼體146內(nèi),如圖3A所示,或如圖:3B所示位于殼體146的外部。在圖像捕獲裝置120集成在殼體146內(nèi)的情況下,它們可以位于顯示屏幕115的周圍或嵌入顯示屏幕115的后面。 嵌入的攝像機(jī)然后通過(guò)它自己的屏幕捕獲用戶10和他們的本地環(huán)境415的圖像,這可以改進(jìn)用戶與觀看者之間的眼睛接觸的感知。注意,圖像捕獲裝置120和麥克風(fēng)144可以支持運(yùn)動(dòng)檢測(cè)功能,而不具有獨(dú)立的專用運(yùn)動(dòng)檢測(cè)器142。圖3A還圖示了電子成像裝置100可以具有集成到殼體146內(nèi)的用戶接口控制190。這些用戶接口控制190可以使用按鈕、調(diào)節(jié)控制盤(pán)、觸摸屏、無(wú)線控制、或它們的組合、或者其它接口部件。如圖3A和;3B進(jìn)一步圖示的,視頻通信客戶端300還包括音頻系統(tǒng)315,音頻系統(tǒng) 315包括連接到音頻系統(tǒng)處理器325的麥克風(fēng)144和揚(yáng)聲器125,音頻系統(tǒng)處理器325進(jìn)而連接到計(jì)算機(jī)340。音頻系統(tǒng)處理器325連接到至少一個(gè)麥克風(fēng)144,諸如全向性或方向性麥克風(fēng)、或可以執(zhí)行將聲能轉(zhuǎn)換成如下形式的功能的其它裝置該形式可以由音頻系統(tǒng)處理器325轉(zhuǎn)換成可由計(jì)算機(jī)340使用的信號(hào)。它還可以包括音頻通信領(lǐng)域的技術(shù)人員已知的任何其它音頻通信部件和其它支持部件。揚(yáng)聲器125可以包括揚(yáng)聲器或能夠響應(yīng)于由音頻處理器生成的信號(hào)而生成聲能的已知的任何形式的裝置,并且還可以包括音頻通信領(lǐng)域的技術(shù)人員已知的任何其它音頻通信部件和其它支持部件。音頻系統(tǒng)處理器325可以適于接收來(lái)自計(jì)算機(jī)340的信號(hào),并且若需要的話,將這些信號(hào)轉(zhuǎn)換成能夠使揚(yáng)聲器125生成聲音的信號(hào)。將理解,麥克風(fēng)144、揚(yáng)聲器125、音頻系統(tǒng)處理器325或計(jì)算機(jī)340中的任一個(gè)或全部可以單獨(dú)地或結(jié)合地使用以提供捕獲的音頻信號(hào)或發(fā)出的音頻信號(hào)的增強(qiáng),包括放大、過(guò)濾、調(diào)制或任何其它已知的增強(qiáng)。圖;3B詳述了視頻通信客戶端300的系統(tǒng)電子部分的設(shè)計(jì)。其中一個(gè)子系統(tǒng)是圖像捕獲系統(tǒng)310,其包括圖像捕獲裝置120和圖像處理器320。另一子系統(tǒng)是音頻系統(tǒng)315, 其包括麥克風(fēng)144、揚(yáng)聲器125和音頻系統(tǒng)處理器325。計(jì)算機(jī)340可操作地鏈接到圖像捕獲系統(tǒng)310、圖像處理器320、音頻系統(tǒng)處理器325、系統(tǒng)控制器330、以及視頻分析部件380, 如用虛線示出的。任何二級(jí)環(huán)境傳感器130可以根據(jù)需要由計(jì)算機(jī)340或由它們自己的專用數(shù)據(jù)處理器(未示出)來(lái)支持。雖然虛線表示視頻通信客戶端300內(nèi)的多種其它重要互連(有線或無(wú)線),但是互連的圖示僅是代表性的,并且將需要未示出的多個(gè)互連來(lái)支持各個(gè)電力引線、內(nèi)部信號(hào)、和數(shù)據(jù)路徑。存儲(chǔ)器345可以是一個(gè)或更多個(gè)裝置,包括隨機(jī)存取存儲(chǔ)器(RAM)裝置、計(jì)算機(jī)硬驅(qū)動(dòng)器或閃存驅(qū)動(dòng)器,并且可以包含幀緩沖器347以保持流視頻的多個(gè)視頻幀的序列,從而支持正在進(jìn)行的視頻圖像數(shù)據(jù)分析和調(diào)節(jié)。計(jì)算機(jī)340還訪問(wèn)或鏈接到包括用戶接口控制190的用戶接口。用戶接口可以包括許多部件,包括鍵盤(pán)、操縱桿、鼠標(biāo)、觸摸屏、按鈕、或圖形用戶界面。屏幕115還可以具有觸摸屏能力并且可以用作用戶接口控制190。從圖像捕獲裝置120捕獲的視頻內(nèi)容可以由視頻分析部件380連續(xù)地分析以確定視頻通信客戶端300是否應(yīng)該處理視頻用于發(fā)送或記錄,或者替選地允許視頻從幀緩沖器 347消失。類似地,從其它遠(yuǎn)程視頻通信客戶端305(圖1)接收的信號(hào)或視頻可以由視頻分析部件380連續(xù)地分析以確定本地捕獲的視頻是應(yīng)該立即發(fā)送還是記錄用于稍后發(fā)送和回放、以及從遠(yuǎn)程客戶端接收的任何視頻是應(yīng)該本地播放還是保存用于稍后觀看。注意,可以在本地視頻通信客戶端300或遠(yuǎn)程視頻通信客戶端305處記錄或存儲(chǔ)利用本地視頻通信客戶端300捕獲的視頻。圖4示出了操作視頻管理處理500的一個(gè)實(shí)施例,該處理由視頻通信客戶端300 使用以確定在實(shí)時(shí)視頻流中正發(fā)生的時(shí)間事件是要利用(發(fā)送或記錄)的通信事件600或視頻場(chǎng)景620還是要?jiǎng)h掉(從幀緩沖器347中刪除)的非事件或無(wú)活動(dòng)。視頻管理處理 500包括正在進(jìn)行的視頻捕獲的視頻分析以檢測(cè)(或量化)活動(dòng),之后是視頻表征以確定檢測(cè)的活動(dòng)是否可接受(用于視頻發(fā)送或視頻記錄)。視頻管理處理500的視頻分析由包括用于分析捕獲的視頻的一個(gè)或更多個(gè)算法或程序的視頻分析部件380來(lái)提供。例如,如圖 3B所示,視頻分析部件380可以包括運(yùn)動(dòng)分析部件382、視頻內(nèi)容表征部件384、以及視頻分割部件386。如果每次在圖4的可接受性測(cè)試520,視頻內(nèi)容被認(rèn)為是可接受的,則會(huì)發(fā)生一系列判定步驟,以確定遠(yuǎn)程視頻通信客戶端305(或遠(yuǎn)程觀看客戶端)處的用戶10是被認(rèn)為是連接(可用以觀看正在進(jìn)行的活動(dòng)的直播視頻)還是斷開(kāi)(不可用以觀看直播視頻)。在前一情況下,視頻被直播發(fā)送(參見(jiàn)發(fā)送直播視頻步驟陽(yáng)0)到遠(yuǎn)程視頻通信客戶端305。在后一情況下,一系列步驟(參見(jiàn)記錄視頻步驟555、表征記錄的視頻步驟560、施加隱私約束步驟565、視頻處理步驟570和發(fā)送記錄的視頻步驟57 可以在發(fā)送用于時(shí)移觀看之前接著記錄、表征和處理視頻。關(guān)于視頻管理處理500更詳細(xì)地,視頻分析部件380首先使用檢測(cè)活動(dòng)步驟510 檢測(cè)視頻通信客戶端300前面的活動(dòng),以分析利用捕獲視頻步驟505捕獲的視頻。視頻分析部件380特別依賴于由圖像捕獲裝置120收集的且由圖像處理器320處理的視頻數(shù)據(jù), 該視頻數(shù)據(jù)通過(guò)幀緩沖器347??梢酝ㄟ^(guò)使用本領(lǐng)域已知的各種圖像處理和分析技術(shù)(包括用以尋找在當(dāng)前幀與先前幀之間發(fā)生的圖像差的視頻幀比較)的檢測(cè)活動(dòng)步驟510來(lái)感測(cè)活動(dòng)。如果存在實(shí)質(zhì)改變,則可能活動(dòng)正在發(fā)生??梢允褂门c各種特性相關(guān)的度量來(lái)量化地測(cè)量活動(dòng)級(jí)別,這些特性包括速度(m/s)、加速度(m/s2)、范圍(米)、幾何結(jié)構(gòu)或面積 (m2)、或運(yùn)動(dòng)方向(在徑向坐標(biāo)或幾何坐標(biāo)中)、以及涉及的參與者(用戶或動(dòng)物)數(shù)目。最簡(jiǎn)單地,會(huì)需要特定量的檢測(cè)到的活動(dòng)來(lái)表示一些事正在發(fā)生,針對(duì)此可以捕獲視頻。作為另一示例,簡(jiǎn)單的運(yùn)動(dòng)或活動(dòng)分析可以區(qū)分場(chǎng)景變化,并且根據(jù)以常見(jiàn)的移動(dòng)的無(wú)生命物體的運(yùn)動(dòng)為典型的運(yùn)動(dòng)度量提供指示生命體存在的度量。例如,運(yùn)動(dòng)頻率分析可以用于檢測(cè)人類的存在。如先前陳述的,視頻通信客戶端300還可以使用從包括紅外運(yùn)動(dòng)檢測(cè)器、生物電場(chǎng)檢測(cè)傳感器、麥克風(fēng)144或接近度傳感器的其它環(huán)境傳感器130收集的數(shù)據(jù)。在紅外運(yùn)動(dòng)檢測(cè)器的情況下,如果檢測(cè)到紅外區(qū)段中的運(yùn)動(dòng),則可能活動(dòng)正在發(fā)生。在接近度傳感器的情況下,如果傳感器前面的對(duì)象的距離的改變發(fā)生,則可能活動(dòng)正在發(fā)生。雖然運(yùn)動(dòng)分析部件382可以包括視頻運(yùn)動(dòng)分析程序或算法,但是可以提供適當(dāng)?shù)厥褂闷渌愋偷母袦y(cè)的數(shù)據(jù)(包括音頻、接近度、超聲波、或生物電場(chǎng))的其它運(yùn)動(dòng)分析技術(shù)。根據(jù)使用的各種環(huán)境傳感器和它們收集的數(shù)據(jù)的類型,視頻通信客戶端300可以在事件在視頻流中變得可見(jiàn)之前,接收可能有興趣的時(shí)間事件可能發(fā)生的初步通告或警告。這些警告可以將視頻通信客戶端300觸發(fā)到視頻分析算法被更積極地使用的更高的監(jiān)視或分析狀態(tài)。替選地,可以分析這些其它類型的感測(cè)的數(shù)據(jù)以提供可能視頻事件實(shí)際上正在發(fā)生的驗(yàn)證。例如,如P. Fry 等人的名稱為“Detection of animate or inanimate objects”的美國(guó)專利申請(qǐng)序列號(hào) 12/406,186中描述的,來(lái)自生物電場(chǎng)傳感器和攝像機(jī)的信號(hào)可以聯(lián)合使用以將生命(活著的)對(duì)象與無(wú)生命(非生命)對(duì)象區(qū)分開(kāi)。可能地,視頻通信客戶端300可以從給定通信事件600的活動(dòng)的視頻變得可用之前的時(shí)間點(diǎn)發(fā)送或記錄該事件的音頻。然而,一般地,一旦視頻通信客戶端300開(kāi)啟,視頻分析部件380就使用捕獲視頻步驟505連續(xù)地捕獲視頻,在此期間其然后尋求使用檢測(cè)活動(dòng)步驟510檢測(cè)視頻流中的活動(dòng)。如果檢測(cè)到活動(dòng),則視頻分析部件380接著使用視頻內(nèi)容表征部件384的算法或程序來(lái)應(yīng)用表征活動(dòng)步驟515,以確定捕獲的視頻內(nèi)容是否可接受為發(fā)送或記錄、或發(fā)送和記錄兩者。這些算法或程序例如基于面部檢測(cè)、頭形或皮膚區(qū)域檢測(cè)、眼睛檢測(cè)、體形檢測(cè)、衣服檢測(cè)、或關(guān)節(jié)肢體檢測(cè)來(lái)表征視頻內(nèi)容。優(yōu)選地,視頻內(nèi)容表征部件384由此能夠根據(jù)其它偶然運(yùn)動(dòng)或活動(dòng)來(lái)確定視頻中的動(dòng)物或人(用戶10)的存在,然后進(jìn)一步將人的存在與動(dòng)物的存在區(qū)分開(kāi)。在人存在的情況下,視頻內(nèi)容表征部件384還可以可選地以活動(dòng)類型 (諸如吃、跳、或拍手)來(lái)表征正在進(jìn)行的活動(dòng),或使用面部或語(yǔ)音識(shí)別算法來(lái)確定人類身份。此外,視頻內(nèi)容表征部件384可以與運(yùn)動(dòng)分析部件382協(xié)作來(lái)量化地分析活動(dòng)級(jí)別以確定何時(shí)活動(dòng)級(jí)別改變。例如,使用視頻內(nèi)容表征部件384內(nèi)的眼睛或面部檢測(cè)算法,視頻分析部件380可以確定人是否在由圖像捕獲裝置120捕獲的場(chǎng)景中。在人的頭部姿勢(shì)轉(zhuǎn)向側(cè)面或他們的頭部模糊并且面部檢測(cè)不能夠準(zhǔn)確地確定人是否在視頻場(chǎng)景中的情況下,諸如頭形或體形檢測(cè)的其它算法可以提供確定。替選地,運(yùn)動(dòng)追蹤、或基于關(guān)節(jié)肢體的運(yùn)動(dòng)分析、或在檢測(cè)到面部的最后已知時(shí)間使用的概率追蹤算法連同概率分析可以確定人仍在視頻場(chǎng)景中,即使他們的頭部姿勢(shì)已經(jīng)改變(這會(huì)使得面部或眼睛檢測(cè)更困難)。一旦通過(guò)檢測(cè)活動(dòng)步驟510在視頻圖像中檢測(cè)到活動(dòng)并且然后通過(guò)表征活動(dòng)步驟515對(duì)活動(dòng)進(jìn)行表征,視頻通信客戶端300接著使用可接受性測(cè)試520確定視頻內(nèi)容是否可接受用于視頻發(fā)送或記錄??山邮苄钥梢酝ㄟ^(guò)由視頻通信客戶端300的本地用戶提供的用戶偏好設(shè)置或通過(guò)由遠(yuǎn)程觀看者提供的用戶偏好設(shè)置來(lái)確定。通常,這些用戶偏好設(shè)置先前已由用戶10經(jīng)由用戶接口控制190而建立。還可以由視頻通信客戶端300提供和使用默認(rèn)偏好設(shè)置,除非它們被本地或遠(yuǎn)程用戶否決。通常,本地用戶和遠(yuǎn)程用戶兩者可以確定他們認(rèn)為是可接受的視頻內(nèi)容的類型, 以關(guān)于他們自己的視頻通信客戶端300發(fā)送或接收。也就是,用戶10可以確定他們認(rèn)為哪種類型的視頻內(nèi)容可接受為由他們的視頻通信客戶端300發(fā)送以與遠(yuǎn)程視頻通信客戶端 305共享、以及他們認(rèn)為哪種類型的視頻可接受為從其它遠(yuǎn)程視頻通信客戶端305接收。通常,本地用戶的偏好設(shè)置或許可在確定什么內(nèi)容可用于從他們的本地站點(diǎn)發(fā)送、任何特定遠(yuǎn)程用戶是否希望觀看的方面優(yōu)先。然而,遠(yuǎn)程用戶然后在確定是否將可用內(nèi)容接受到他們的遠(yuǎn)程視頻通信客戶端305的方面優(yōu)先。如果用戶10無(wú)法提供偏好或許可設(shè)置,則可以使用默認(rèn)偏好設(shè)置??山邮苄钥梢匀Q于多種屬性,包括個(gè)人偏好、文化或宗教影響、活動(dòng)類型、或當(dāng)日時(shí)間。正在進(jìn)行的內(nèi)容的可接受性還可以取決于接受者是誰(shuí)或內(nèi)容是直播發(fā)送還是被記錄用于時(shí)移觀看。例如,用戶可以選擇一種或更多種類型的視頻內(nèi)容以發(fā)送或記錄,諸如具有人的視頻、具有寵物的視頻、或照明變化的視頻。例如,如果攝像機(jī)捕獲包含窗戶或窗戶附近的區(qū)域,則通常會(huì)被認(rèn)為是平常的、具有照明變化的視頻可以指示外面天氣的變化,或者它可以指示表示晚上睡覺(jué)或早晨醒來(lái)的家中的人工照明的使用的變化。還可以利用例如具有諸如平??山邮招?4)的中間等級(jí)的、從最高可接受性(10)到完全不可接受(1)的相關(guān)聯(lián)的等級(jí)來(lái)定義可接受性。然后,該信息可以發(fā)送到遠(yuǎn)程視頻通信客戶端305以指示可用的視頻的類型。還可以提供其它特征數(shù)據(jù),特別是描述活動(dòng)或相關(guān)聯(lián)的屬性(包括人、動(dòng)物、身份、或活動(dòng)類型)的語(yǔ)義數(shù)據(jù)。用戶10還可以在他們使用視頻通信客戶端300期間根據(jù)需要更新該列表。任何更新可以發(fā)送到任一或全部指定的遠(yuǎn)程視頻通信客戶端305,并且視頻分析部件380然后使用用于選擇可接受內(nèi)容的新的偏好設(shè)置??山邮苄詼y(cè)試520可以通過(guò)將經(jīng)由表征出現(xiàn)在捕獲的視頻內(nèi)容中的活動(dòng)或其屬性所獲得的結(jié)果或值與如由視頻通信客戶端300和305的本地或遠(yuǎn)程用戶提供的這樣的屬性或活動(dòng)的預(yù)定可接受內(nèi)容標(biāo)準(zhǔn)進(jìn)行比較而操作。如果活動(dòng)不可接受,則不將視頻實(shí)時(shí)發(fā)送到各個(gè)遠(yuǎn)程視頻通信客戶端305,也不記錄該視頻用于未來(lái)發(fā)送和回放。在這種情況下, 刪除視頻步驟525從幀緩沖器347中刪除視頻。正在進(jìn)行的視頻捕獲和監(jiān)視(捕獲視頻步驟505和檢測(cè)活動(dòng)步驟510)于是會(huì)繼續(xù)。作為可選的替選方案,本地用戶偏好會(huì)啟動(dòng)記錄用于本地使用的視頻步驟557,在步驟557的過(guò)程中,自動(dòng)記錄本地環(huán)境中的活動(dòng)的可接受視頻圖像內(nèi)容,而與生成的記錄的視頻到底是否發(fā)送給遠(yuǎn)程站點(diǎn)364無(wú)關(guān)。以與被記錄用于發(fā)送的時(shí)移視頻相似的方式,該生成的記錄的視頻可以被表征,進(jìn)行隱私約束,并且被處理。然而,如果可接受性測(cè)試520確定活動(dòng)是可接受的,則視頻分析部件380然后可以使用確定遠(yuǎn)程狀態(tài)步驟530來(lái)確定同時(shí)連接到用戶的視頻通信客戶端300的任何遠(yuǎn)程視頻通信客戶端305(或遠(yuǎn)程觀看客戶端)的狀態(tài)。圖4的示例性實(shí)施例將確定遠(yuǎn)程狀態(tài)步驟 530示出為執(zhí)行一系列測(cè)試(遠(yuǎn)程系統(tǒng)開(kāi)啟測(cè)試535、遠(yuǎn)程觀看者存在測(cè)試M0、以及遠(yuǎn)程觀看者觀看測(cè)試討幻以確定遠(yuǎn)程視頻通信客戶端305或遠(yuǎn)程用戶10的狀態(tài)為連接還是斷開(kāi)。視頻通信客戶端300可以向經(jīng)由通信網(wǎng)絡(luò)360與其鏈接的任一或全部其它遠(yuǎn)程視頻通信客戶端305通知當(dāng)前正在進(jìn)行的活動(dòng)的直播視頻內(nèi)容可用。遠(yuǎn)程視頻通信客戶端305然后可以確定遠(yuǎn)程站點(diǎn)364處的觀看狀態(tài)并將各狀態(tài)指示符發(fā)送回本地的、內(nèi)容來(lái)源的視頻通信客戶端300。確定遠(yuǎn)程狀態(tài)步驟530然后可以執(zhí)行各種測(cè)試以評(píng)定任何接收的狀態(tài)指示符的意義。遠(yuǎn)程系統(tǒng)開(kāi)啟測(cè)試535可以確定遠(yuǎn)程系統(tǒng)處于“開(kāi)啟”狀態(tài)還是“關(guān)閉”狀態(tài)。最簡(jiǎn)單地,如果遠(yuǎn)程視頻通信客戶端305關(guān)閉,則會(huì)生成可以觸發(fā)在本地站點(diǎn)處記錄視頻的記錄視頻步驟555的“斷開(kāi)”狀態(tài)。(在本地視頻客戶端在通信網(wǎng)絡(luò)360上同時(shí)與多個(gè)遠(yuǎn)程視頻通信客戶端305交互的示例中,混合的狀態(tài)指示符會(huì)導(dǎo)致同一視頻場(chǎng)景620的直播視頻發(fā)送和時(shí)移視頻記錄兩者。)當(dāng)遠(yuǎn)程系統(tǒng)開(kāi)啟測(cè)試535確定遠(yuǎn)程視頻通信客戶端305開(kāi)啟時(shí),則需要更多個(gè)遠(yuǎn)程狀態(tài)信息。接著,使用遠(yuǎn)程觀看者存在測(cè)試540來(lái)確定一個(gè)或更多個(gè)遠(yuǎn)程用戶是否存在于遠(yuǎn)程視頻通信客戶端305的站點(diǎn)處。例如,遠(yuǎn)程觀看者存在測(cè)試540可以應(yīng)用音頻感測(cè)、 運(yùn)動(dòng)感測(cè)、體形、頭部姿勢(shì)、或面部識(shí)別算法來(lái)確定遠(yuǎn)程用戶是否存在。最簡(jiǎn)單地,如果沒(méi)有人存在于遠(yuǎn)程視頻通信客戶端305的前面,則會(huì)再次生成可以觸發(fā)在本地站點(diǎn)362處記錄視頻的記錄視頻步驟陽(yáng)5的“斷開(kāi)”狀態(tài)指示符。僅存在潛在用戶10不可以指示用戶可用性,這是因?yàn)橛脩舻淖⒁饬赡軟](méi)用于觀看來(lái)自本地視頻通信客戶端300的視頻內(nèi)容。遠(yuǎn)程觀看者觀看測(cè)試545試圖解決該問(wèn)題。 作為一種方法,遠(yuǎn)程視頻通信客戶端305可以通過(guò)經(jīng)由在顯示器110前面監(jiān)視用戶10的眼睛注視而確定一個(gè)或更多個(gè)遠(yuǎn)程觀看者實(shí)際上何時(shí)看他們的顯示器110,來(lái)評(píng)定遠(yuǎn)程觀看者注意力。遠(yuǎn)程視頻通信客戶端305還可以使用面部識(shí)別算法來(lái)估計(jì)遠(yuǎn)程觀看者是否正在觀看如果識(shí)別到面部,則人的面部必須在顯示器110的完整視界中并且存在用戶10正觀看顯示器110的高可能性。類似地,如果遠(yuǎn)程用戶10同時(shí)與遠(yuǎn)程視頻通信客戶端305交互 (例如通過(guò)按下用戶接口控制190上的按鈕),則視頻通信客戶端300會(huì)以高可能性判定用戶正觀看顯示器110。在這樣的示例中,遠(yuǎn)程觀看者觀看測(cè)試545可以提供會(huì)觸發(fā)發(fā)送直播視頻步驟550的“連接”狀態(tài)指示符,從而使得能夠從本地站點(diǎn)362進(jìn)行視頻發(fā)送。如果遠(yuǎn)程觀看者觀看測(cè)試545提供“斷開(kāi)”狀態(tài)指示符,則觸發(fā)記錄視頻步驟555以在本地站點(diǎn)處記錄視頻。當(dāng)然,還可能的是遠(yuǎn)程用戶可以存在并觀看顯示器110,但是用于除了觀看經(jīng)由通信網(wǎng)絡(luò)360從本地視頻通信客戶端300發(fā)送的直播視頻內(nèi)容之外的其它目的。因此,遠(yuǎn)程視頻通信客戶端305可以經(jīng)由警告遠(yuǎn)程用戶步驟552從一個(gè)或更多個(gè)網(wǎng)絡(luò)化視頻通信客戶端300向遠(yuǎn)程用戶提供警告(音頻或視覺(jué))以指示實(shí)時(shí)內(nèi)容對(duì)他們而言是可用的。描述活動(dòng)(諸如動(dòng)物或人的存在)或活動(dòng)類型的語(yǔ)義元數(shù)據(jù)也可以提供給遠(yuǎn)程用戶以幫助他們確定是否他們有興趣觀看視頻。該語(yǔ)義數(shù)據(jù)還可以幫助遠(yuǎn)程通信客戶端305自動(dòng)將可觀看的內(nèi)容鏈接到觀看者身份,使得可以將內(nèi)容提供給特別感興趣的可能觀看者。還可以在短時(shí)間段內(nèi)提供實(shí)時(shí)視頻饋入以查看是否可以激發(fā)觀看者的興趣。遠(yuǎn)程用戶10然后可以簡(jiǎn)單地就位以觀看視頻,在該點(diǎn)處遠(yuǎn)程觀看者觀看測(cè)試545可以提供“連接”狀態(tài),并且本地視頻通信客戶端300可以激活發(fā)送直播視頻步驟550。替選地,使用他們的用戶接口控制 190,遠(yuǎn)程用戶可以指示用以觀看來(lái)自一個(gè)或更多個(gè)網(wǎng)絡(luò)化遠(yuǎn)程視頻通信客戶端305的實(shí)時(shí)視頻內(nèi)容的他們的意愿。該意愿或缺乏該意愿可以作為狀態(tài)指示符信號(hào)提供給遠(yuǎn)程觀看者觀看測(cè)試M5。在遠(yuǎn)程觀看者觀看測(cè)試545確定連接的遠(yuǎn)程觀看者存在的示例中,可以使用發(fā)送直播視頻步驟550開(kāi)始直播視頻發(fā)送。然而,當(dāng)遠(yuǎn)程視頻通信客戶端305或遠(yuǎn)程用戶10的狀態(tài)被判定為斷開(kāi)時(shí),則使用記錄視頻步驟555開(kāi)始視頻記錄。一旦視頻被記錄,則它可以使用表征記錄的視頻步驟560而被語(yǔ)義地表征。例如,表征記錄的視頻步驟560可以利用視頻內(nèi)容表征部件384來(lái)標(biāo)識(shí)活動(dòng)(活動(dòng)類型)和其中捕獲的用戶或動(dòng)物。表征記錄的視頻步驟560還可以包括使用視頻分割部件386的時(shí)間分割,以確定通信事件600的記錄的視頻的適當(dāng)持續(xù)時(shí)間。另外,可以通過(guò)施加隱私約束步驟565來(lái)參考和施加任何隱私約束。 根據(jù)表征和隱私約束,可以使用視頻處理步驟570可選地處理記錄的視頻。例如,記錄的視頻可以通過(guò)混淆過(guò)濾器來(lái)縮短長(zhǎng)度、再構(gòu)造、或修改。發(fā)送記錄的視頻步驟575然后可以用于將記錄的視頻與伴隨的描述視頻(諸如活動(dòng)、涉及的人、持續(xù)時(shí)間、當(dāng)日時(shí)間、位置等)的元數(shù)據(jù)一起發(fā)送到許可的遠(yuǎn)程視頻通信客戶端305。如果記錄的視頻的長(zhǎng)度超過(guò)時(shí)間閾值, 則可以在發(fā)送之前通過(guò)視頻通信客戶端300將記錄的視頻分割成多個(gè)視頻剪輯??梢曰谌缬梢曨l分析部分380檢測(cè)的活動(dòng)的改變和用于數(shù)據(jù)發(fā)送的適當(dāng)?shù)囊曨l長(zhǎng)度的組合來(lái)進(jìn)行分割。當(dāng)不再滿足發(fā)送或記錄的條件時(shí),直播視頻發(fā)送或用于時(shí)移觀看的視頻記錄停止。 本地視頻通信客戶端300然后可以回到捕獲視頻和檢測(cè)活動(dòng)步驟505和510。如剛才描述的,示例性視頻管理處理500使用一系列步驟和測(cè)試來(lái)確定如何管理可用視頻內(nèi)容。圖5圖示了一個(gè)表格,其示出了會(huì)導(dǎo)致直播視頻發(fā)送、用于時(shí)移觀看的視頻記錄、或刪除視頻(即,不發(fā)送且不記錄)的各種條件的另一視圖。在第一示例(第一行) 中,可接受性測(cè)試520使用表征的視頻內(nèi)容屬性和與所確定的視頻內(nèi)容屬性有關(guān)的用戶偏好的比較,來(lái)確定可用視頻內(nèi)容不可接受用于發(fā)送(例如,等級(jí)=1)。結(jié)果是,將不會(huì)發(fā)送或記錄視頻內(nèi)容,而與遠(yuǎn)程觀看者或遠(yuǎn)程客戶端狀態(tài)無(wú)關(guān)。在第二示例(圖5中的表格的第二行)中,可接受性測(cè)試520確定可用視頻內(nèi)容具有可接受內(nèi)容,但是被認(rèn)為是平常的或不確定有興趣(例如,等級(jí)=3- 。例如,平常內(nèi)容可以包括僅有貓的視頻。在該示例中,遠(yuǎn)程系統(tǒng)開(kāi)啟測(cè)試535確定遠(yuǎn)程視頻通信客戶端 305開(kāi)啟并且遠(yuǎn)程觀看者存在測(cè)試540確定遠(yuǎn)程用戶10存在。如果遠(yuǎn)程用戶10希望觀看平?;蚺R界感興趣的內(nèi)容,則觀看者被認(rèn)為是連接的,并且(使用發(fā)送直播視頻步驟550) 發(fā)送正在進(jìn)行的平?;顒?dòng)的直播視頻內(nèi)容。另一方面,如果遠(yuǎn)程觀看者對(duì)觀看作為直播視頻的平常內(nèi)容沒(méi)有興趣,則“斷開(kāi)”類別可以啟動(dòng)記錄視頻步驟陽(yáng)5,除非用戶偏好設(shè)置指示不應(yīng)記錄具有平常內(nèi)容可接受性類別的視頻。在此情況下,可以經(jīng)由刪除平常視頻步驟526 停止任何正在進(jìn)行的視頻記錄或發(fā)送。在第三示例(圖5中的表格的第三行)中,可接受性測(cè)試520確定可用視頻內(nèi)容具有可接受內(nèi)容,能夠通過(guò)將視頻分類成中等可接受到高度可接受(例如,等級(jí)=6或更高) 的視頻分析部件380來(lái)實(shí)現(xiàn)。如果確定遠(yuǎn)程狀態(tài)步驟530返回?cái)嚅_(kāi)的狀態(tài)(指示遠(yuǎn)程系統(tǒng)關(guān)閉或遠(yuǎn)程觀看者沒(méi)有觀看),則直播視頻將不會(huì)發(fā)送,但是預(yù)計(jì)到未來(lái)的時(shí)移發(fā)送和回放將記錄該視頻。在第四示例(圖5中的表格的第四行)中,可接受性測(cè)試520確定可用視頻內(nèi)容具有可接受內(nèi)容并且將視頻分類成中等可接受至高度可接受(例如,等級(jí)=6或更高),如第三示例中那樣。然而,在該情況下,確定遠(yuǎn)程狀態(tài)步驟530返回連接的狀態(tài)(指示遠(yuǎn)程系統(tǒng)開(kāi)啟并且遠(yuǎn)程觀看者正在觀看)。因此,以直播模式發(fā)送由正在進(jìn)行的活動(dòng)的圖像捕獲裝置120捕獲的視頻并在遠(yuǎn)程視頻通信客戶端305上將其播放??蛇x地,還可以記錄視頻內(nèi)容用于在稍后時(shí)間處時(shí)移觀看(例如,在發(fā)現(xiàn)第二遠(yuǎn)程系統(tǒng)斷開(kāi)或遠(yuǎn)程觀看者已請(qǐng)求直播視頻發(fā)送和視頻記錄兩者的情況下)。雖然圖5圖示了可以確定視頻發(fā)送、視頻記錄或視頻內(nèi)容刪除的數(shù)個(gè)基本情形, 但是情形可以是動(dòng)態(tài)的并且可以改變當(dāng)前視頻狀態(tài)。具體地,如通過(guò)遠(yuǎn)程觀看者環(huán)境的視頻分析或通過(guò)響應(yīng)于視頻可用警告使用用戶接口而初始確定的遠(yuǎn)程觀看者興趣可以改變。 作為一個(gè)示例,在沒(méi)有用戶存在的情況下開(kāi)啟的遠(yuǎn)程視頻通信客戶端305可以發(fā)送可能觀看者現(xiàn)在存在的信號(hào)。在此情況下,監(jiān)視遠(yuǎn)程狀態(tài)步驟580(圖4)可以有助于動(dòng)態(tài)系統(tǒng)響應(yīng)。作為示例,本地視頻通信客戶端300可以提供指示“進(jìn)展中”視頻可用的信號(hào)??梢允褂猛ㄟ^(guò)音頻或視覺(jué)警告實(shí)現(xiàn)的提供“進(jìn)展中”視頻步驟585以將要在遠(yuǎn)程視頻通信客戶端 305上觀看的直播視頻發(fā)送提供給遠(yuǎn)程用戶10。如果遠(yuǎn)程用戶然后作為觀看者成為“連接的”,則可以(使用發(fā)送直播視頻步驟陽(yáng)0)發(fā)送“進(jìn)展中”視頻的正在進(jìn)行的部分,雖然仍可以(使用記錄視頻步驟陽(yáng)幻記錄整個(gè)通信事件600。替選地,遠(yuǎn)程用戶可以在他們的遠(yuǎn)程通信客戶端305上開(kāi)始觀看來(lái)自本地視頻通信客戶端300的直播視頻,但是然后失去興趣或可用性。如果遠(yuǎn)程用戶開(kāi)始觀看直播視頻饋入,但是注意到他們?cè)谝曨l事件結(jié)束之前會(huì)注意力分散或轉(zhuǎn)移,則遠(yuǎn)程用戶10可以請(qǐng)求同時(shí)直播視頻發(fā)送和視頻記錄。遠(yuǎn)程用戶還可以請(qǐng)求視頻記錄開(kāi)始于正直播發(fā)送而未記錄的正在進(jìn)行的“進(jìn)展中”視頻事件。在已經(jīng)本地記錄了視頻用于時(shí)移發(fā)送和回放的情況下,遠(yuǎn)程視頻通信客戶端305 可以被動(dòng)地或主動(dòng)地提供記錄的視頻用于遠(yuǎn)程用戶10觀看。例如,在被動(dòng)模式下,圖標(biāo)可以指示視頻可用于觀看。遠(yuǎn)程用戶然后可以激活圖標(biāo)以獲悉關(guān)于視頻內(nèi)容的更多細(xì)節(jié)(如通過(guò)表征記錄的視頻步驟560確定的),并且可能決定觀看它。在主動(dòng)模式下,本地視頻通信客戶端300可以接收指示遠(yuǎn)程視頻通信客戶端305開(kāi)啟以及遠(yuǎn)程用戶存在且正與遠(yuǎn)程視頻通信客戶端305交互的信號(hào)。在此情況下,可以提醒遠(yuǎn)程用戶開(kāi)始時(shí)移視頻的回放。遠(yuǎn)程用戶可以通過(guò)使用用戶接口控制190做出適當(dāng)?shù)倪x擇來(lái)選擇此時(shí)回放它或等待并稍后觀看它。替選地,根據(jù)用戶偏好設(shè)置,如果遠(yuǎn)程用戶被確定為在遠(yuǎn)程視頻通信客戶端305前面存在了指定時(shí)長(zhǎng),則會(huì)自動(dòng)播放時(shí)移視頻以提供被動(dòng)觀看體驗(yàn)。當(dāng)然,可以使用各種警告通知器,包括縮略圖或關(guān)鍵幀圖像、圖標(biāo)、音調(diào)、視頻短片、圖形視頻活動(dòng)時(shí)間線、或視頻活動(dòng)列表。警告通知并非固有地限制于輸送到遠(yuǎn)程視頻通信客戶端305,作為觀看也可以通過(guò)手機(jī)、無(wú)線連接裝置或其它連接裝置傳送的直播或記錄的視頻的機(jī)會(huì)。在先前的示例中,接收視頻客戶端可以向可能的遠(yuǎn)程觀看者被動(dòng)地或主動(dòng)地提供來(lái)自發(fā)送視頻客戶端的視頻內(nèi)容可用的警告。替選地,遠(yuǎn)程視頻通信客戶端305可以建議可用于后續(xù)觀看的錄像或記錄的視頻剪輯的列表,其中視頻錄像的列表通過(guò)與錄像的背景相關(guān)的語(yǔ)義信息(包括特定事件、當(dāng)事人、活動(dòng)、涉及的參與者、或時(shí)間順序信息)來(lái)概述。 可以提供概述列表用于使用事件或故事的名稱、語(yǔ)義描述、關(guān)鍵視頻幀、或短視頻摘錄進(jìn)行預(yù)覽和選擇。遠(yuǎn)程觀看者然后可以選擇期望的預(yù)先記錄的信息用于觀看。此時(shí),可以發(fā)送所選的視頻事件。替選地,如果已經(jīng)發(fā)送了預(yù)先記錄的視頻的整個(gè)列表,則可以顯示所選的材料用于觀看,并且可以自動(dòng)存檔或刪除其余材料。在另一實(shí)施例中,遠(yuǎn)程視頻通信客戶端305可以基于在本地站點(diǎn)362或遠(yuǎn)程站點(diǎn) 364處已收集的各種語(yǔ)義信息來(lái)建議錄像的優(yōu)先的隊(duì)列或列表。經(jīng)由用戶接口、使用適當(dāng)?shù)姆治鏊惴ǖ囊曨l和音頻分析或其它方法,可以獲取關(guān)于遠(yuǎn)程觀看者或本地用戶的語(yǔ)義、語(yǔ)境和其它類型的信息。該語(yǔ)義信息還可以包括關(guān)于遠(yuǎn)程觀看者特征(身份、性別、年齡、人口數(shù)據(jù))的數(shù)據(jù)、遠(yuǎn)程觀看者與本地用戶的關(guān)系、心理信息、日歷數(shù)據(jù)(關(guān)于假期、生日或其它事件)、以及觀看給定的視頻捕獲的活動(dòng)的適當(dāng)性。視頻通信客戶端還可以編譯和分析語(yǔ)義數(shù)據(jù),該語(yǔ)義數(shù)據(jù)配置(profile)觀看行為的歷史、先前或常規(guī)地選擇用于觀看的視頻捕獲的材料的類型、或其它標(biāo)準(zhǔn)?;谠谶h(yuǎn)程觀看者站點(diǎn)處的相互記錄和觀看,關(guān)于遠(yuǎn)程觀看者的該類型的信息可以容易地用于視頻客戶端,如在雙向視頻通信的歷史期間完成的。例如,如果遠(yuǎn)程觀看者是具有優(yōu)先觀看涉及她的孫子的直播發(fā)送或記錄的視頻的模式的祖母,則遠(yuǎn)程視頻通信客戶端可以使視頻剪輯按優(yōu)先序排列并提供視頻剪輯,用于觀看哪個(gè)視頻剪輯在其中有她的孫子。作為另一示例,如果遠(yuǎn)程觀看者是與他兒子一樣喜愛(ài)觀看電視機(jī)上的相同體育活動(dòng)的父親,則遠(yuǎn)程視頻客戶端可以為父親提供觀看體育活動(dòng)本身以及觀看相同體育活動(dòng)的他的兒子的正在進(jìn)行的視頻的機(jī)會(huì)。系統(tǒng)還可以自動(dòng)警告觀看者可能感興趣的實(shí)時(shí)記錄正在發(fā)生,因此然后可以建立實(shí)時(shí)視頻通信并且雙方可以享受同步共享體驗(yàn),諸如聚會(huì)、聚餐或看電影。最后,可以使用面部表情識(shí)別算法、音頻分析方法或其它方法,通過(guò)遠(yuǎn)程視頻客戶端記錄遠(yuǎn)程觀看者的情緒反應(yīng)以獲悉例如什么特定事件、 內(nèi)容或用戶和觀看者的關(guān)系是特別感興趣的,使得可用視頻錄像相應(yīng)地可以被發(fā)送、存檔、 通過(guò)警告而突出、或優(yōu)先用于觀看。遠(yuǎn)程用戶10還可以借助用戶接口控制190,通過(guò)選擇視頻剪輯和選擇播放它們來(lái)訪問(wèn)任何預(yù)先記錄的視頻。當(dāng)觀看記錄的視頻內(nèi)容時(shí),用戶可以通過(guò)執(zhí)行諸如暫停、停止、 播放、快進(jìn)或后退的各種操作來(lái)控制視頻回放。用戶接口控制190可以呈現(xiàn)圖形時(shí)間線,其顯示在提供了視頻的視頻通信客戶端300處在整個(gè)給定時(shí)間段內(nèi)(例如,天、周、月等)的活動(dòng)的級(jí)別、包括該顯示時(shí)間段內(nèi)的一個(gè)或更多個(gè)視頻通信事件600的記錄的視頻剪輯的位置、以及用戶觀看直播或記錄的視頻的特定時(shí)間點(diǎn)。這有助于用戶了解視頻剪輯如何適合于給定時(shí)間段。使用通過(guò)視頻內(nèi)容表征部件384得到的值,針對(duì)時(shí)間線確定活動(dòng)級(jí)別。預(yù)期本地用戶10將會(huì)想要各種機(jī)構(gòu)以保持他們的隱私并控制使得從他們的視頻通信客戶端300可得的視頻內(nèi)容。例如,用戶10可以使用他們的用戶接口控制190以人工停止他們的視頻通信客戶端300捕獲、記錄或發(fā)送視頻。該操作會(huì)導(dǎo)致直播視頻發(fā)送以及用于時(shí)移回放的視頻記錄停止。類似地,在圖像捕獲裝置120關(guān)閉的情況下沒(méi)有視頻被捕獲或發(fā)送,雖然仍然可以基于先前描述的標(biāo)準(zhǔn)發(fā)送預(yù)先記錄的視頻。用戶10還能夠人工開(kāi)始和停止用于時(shí)移觀看的、在他們的本地視頻通信客戶端300上的視頻的記錄。因此,可以特意記錄直播視頻用于稍后重放。以這種方式,用戶可以對(duì)記錄完全控制,若期望的話,可以記錄諸如孩子玩?;蜻~出她的第一步的特定的視頻片段。這些然后可以通過(guò)本地視頻通信客戶端300發(fā)送到遠(yuǎn)程視頻通信客戶端305用于時(shí)間延遲觀看。通過(guò)本發(fā)明的視頻通信系統(tǒng)290還可以提供各種其它隱私特征。例如,用戶接口控制190可以使得用戶10能夠通過(guò)用戶隱私控制器390(圖3B)選擇許多隱私過(guò)濾器,所述隱私過(guò)濾器可以節(jié)省地、充足地、或利用內(nèi)容相關(guān)性而應(yīng)用。用戶10能夠通過(guò)從任何數(shù)目的視頻混淆過(guò)濾器(諸如模糊過(guò)濾、像素化過(guò)濾、與真實(shí)世界的百葉窗類似的隱私過(guò)濾技術(shù))、連同確定多少視頻被模糊或掩蔽的混淆的相關(guān)值進(jìn)行選擇而在用戶接口控制190內(nèi)設(shè)置這些隱私期望。在模糊過(guò)濾的情況下,應(yīng)用本領(lǐng)域已知的圖像處理技術(shù),以使用卷積核使圖像模糊。在“百葉窗”的情況下,與人們“遮擋”真實(shí)世界的百葉窗的部分的方式類似, 可以遮擋且不發(fā)送像素行。還可以選擇或定制其它過(guò)濾器,諸如僅有音頻、僅有視頻圖像、 或僅有間歇性靜止圖像。遮蔽隱私過(guò)濾器的應(yīng)用還可以取決于視頻內(nèi)容或語(yǔ)義因素,包括人或動(dòng)物的存在、身份、活動(dòng)、或當(dāng)日時(shí)間。同樣地,隱私過(guò)濾器可以確定許可僅直播視頻發(fā)送、僅記錄的視頻捕獲、或直播視頻發(fā)送和記錄的視頻捕獲兩者的情形。在視頻被確定為適合于發(fā)送的每種情況下,用戶隱私控制器390可以在其發(fā)送之前對(duì)視頻施加隱私約束。這是針對(duì)發(fā)送直播視頻步驟550(圖4)以及發(fā)送記錄的視頻步驟575兩者完成的。用戶10還可以使用他們的用戶接口控制190以具體地設(shè)置隱私選項(xiàng)用于他們的時(shí)移記錄視頻的觀看,這然后通過(guò)隱私控制器390來(lái)管理。例如,用戶10可以針對(duì)他們連接到的每個(gè)遠(yuǎn)程視頻通信客戶端305設(shè)置這些選項(xiàng)。默認(rèn)值被施加到其連接的新的遠(yuǎn)程視頻通信客戶端305,雖然用戶10可以更新這些。用戶10還可以選擇可以觀看記錄的內(nèi)容多少次以及記錄的內(nèi)容的預(yù)期使用期限兩者。例如,用戶10由于他們不想重復(fù)觀看可能敏感的活動(dòng)的隱私原因而可以選擇僅可以觀看記錄的內(nèi)容一次。相比之下,他們還可以選擇允許觀看視頻多次,使得多個(gè)家庭成員可以在并非所有人同時(shí)在他們的視頻通信客戶端300 周圍的情況下看到視頻。為了節(jié)省計(jì)算機(jī)上的數(shù)據(jù)存儲(chǔ)空間,用戶10還可以選擇記錄的視頻在他們的計(jì)算機(jī)上保留多長(zhǎng)時(shí)間。在設(shè)定的時(shí)間跨度之后,可以自動(dòng)刪除記錄的視頻??梢灶A(yù)料到一些用戶10會(huì)想要將他們的內(nèi)容的觀看(無(wú)論是作為直播視頻還是記錄的視頻被傳送)限制成僅由某些指定用戶10觀看。可以通過(guò)各種方式(包括面部識(shí)另IJ、語(yǔ)音識(shí)別、或其它生物特征標(biāo)記、以及密碼或電子密鑰)驗(yàn)證用戶身份。對(duì)于圖1所示的、具有本地視頻通信客戶端300和第二網(wǎng)絡(luò)化遠(yuǎn)程視頻通信客戶端305的視頻通信系統(tǒng)四0,發(fā)送機(jī)和接收機(jī)的作用名義上是相互的,其中任一客戶端可以發(fā)送或接收直播或時(shí)移視頻。還如先前描述的,來(lái)自本地環(huán)境415的視頻內(nèi)容是通過(guò)本地站點(diǎn)362處的本地視頻通信客戶端300記錄的,而不是通過(guò)遠(yuǎn)程站點(diǎn)364處的遠(yuǎn)程視頻通信客戶端305記錄的。像這樣,本地用戶10能夠更好地控制他們的內(nèi)容的隱私。然而,可以存在以下情況其中本地用戶10希望允許來(lái)自他們自己的本地站點(diǎn)362的直播事件的視頻記錄遠(yuǎn)程地而非本地地發(fā)生。因此,在本發(fā)明的替選實(shí)施例中,可以實(shí)現(xiàn)從第一本地站點(diǎn)362到第二遠(yuǎn)程站點(diǎn)364處的遠(yuǎn)程視頻通信客戶端305中的存儲(chǔ)器345的視頻的記錄。 在這樣的示例中,可以使用遠(yuǎn)程站點(diǎn)364處的活動(dòng)的狀態(tài)指示符來(lái)對(duì)遠(yuǎn)程視頻通信客戶端 305執(zhí)行確定遠(yuǎn)程狀態(tài)步驟530內(nèi)的測(cè)試。作為又一替選,還應(yīng)理解,可以在以下情況下開(kāi)始視頻管理處理500 其中對(duì)遠(yuǎn)程視頻通信客戶端305執(zhí)行確定遠(yuǎn)程狀態(tài)步驟530,并且視頻首先被記錄到本地視頻通信客戶端300的存儲(chǔ)器345上。如可以看到的,這些替選操作實(shí)施例不一定是相互的。還應(yīng)注意,還可以提供各種其它用戶特征。本地用戶10可以影響警告,使用警告遠(yuǎn)程用戶步驟552提供該警告以獲得遠(yuǎn)程用戶的關(guān)注,用于觀看直播或記錄的視頻。例如, 可以使得本地用戶10能夠選擇在遠(yuǎn)程位置處播放聲音來(lái)得到遠(yuǎn)程用戶的注意。每個(gè)視頻通信客戶端300處的用戶可以選擇當(dāng)遠(yuǎn)程用戶按下他們的視頻通信客戶端300中的通知按鈕時(shí)什么聲音鏈接到該功能并被播放。當(dāng)正以直播模式發(fā)送視頻時(shí),與視頻一起實(shí)時(shí)播放聲音通知。當(dāng)視頻被記錄為時(shí)移模式的部分時(shí),可以按照它們發(fā)生的相同時(shí)序,與視頻一起記錄和回放通知聲音。作為用戶接口控制190的其它選項(xiàng),視頻通信客戶端300還可以配備有各種用戶接口形態(tài),諸如用于觸針交互顯示器的觸針、用于觸摸敏感顯示器的手指、或使用常規(guī)CRT、 LCD或投影顯示器的鼠標(biāo)。用戶10可以利用這些特征以便為遠(yuǎn)程觀看者留下手寫(xiě)消息或繪圖。用戶10還可以擦除消息并改變他們書(shū)寫(xiě)的顏色。在直播模式下,實(shí)時(shí)發(fā)送這些消息。 在時(shí)移模式下,消息按照它們被繪制的相同時(shí)序被記錄并且然后回放。這讓觀看者了解消息在什么時(shí)間點(diǎn)被書(shū)寫(xiě)。用戶10還可以使用一個(gè)或更多個(gè)交互形態(tài)開(kāi)啟在視頻通信客戶端300之間發(fā)送音頻的可選音頻鏈接,諸如通過(guò)按下并保持按鈕、或按下開(kāi)/關(guān)按鈕用于更久的音頻發(fā)送。 如果視頻通信客戶端300處于直播模式,則實(shí)時(shí)發(fā)送音頻。如果視頻通信客戶端300處于時(shí)移模式,則與視頻一起記錄音頻,并且當(dāng)回放發(fā)生時(shí),按照音頻被原始捕獲的相同時(shí)序回放音頻。圖6描繪了媒體空間或視頻通信客戶端300的示例性使用,涉及包括一連串可能的視頻場(chǎng)景620的通信事件600。如用“事件”標(biāo)記的圖6的頂部所示,在時(shí)間段、到t8內(nèi)發(fā)生具有相關(guān)聯(lián)的視頻場(chǎng)景620的一連串順序的時(shí)間事件。視頻場(chǎng)景620是連續(xù)的,但不一定具有相等的持續(xù)時(shí)間。通信事件600名義上包括可以作為直播視頻、記錄的視頻或直播視頻與記錄的視頻兩者在本地用戶與遠(yuǎn)程觀看者之間共享的、一系列連續(xù)的或時(shí)間相鄰的視頻場(chǎng)景620。標(biāo)記有“視頻”的圖6的中間部分然后圖示了視頻通信客戶端300可以與不同時(shí)間事件(時(shí)間段和視頻場(chǎng)景620)相關(guān)聯(lián)地提供的一系列視頻捕獲動(dòng)作。在該示例中,本地用戶IOa調(diào)整了他們的用戶偏好設(shè)置以允許涉及人或動(dòng)物的直播或記錄的視頻的發(fā)送,但是遠(yuǎn)程用戶IOb調(diào)整了他的用戶偏好設(shè)置以觀看包含人的內(nèi)容,而不是僅包含動(dòng)物的內(nèi)容。在時(shí)間段、期間,本地站點(diǎn)362處的本地視頻通信客戶端300檢測(cè)到在相關(guān)聯(lián)的視頻場(chǎng)景620中不存在活動(dòng),并且選擇不將直播或記錄的視頻發(fā)送到遠(yuǎn)程站點(diǎn)364處的遠(yuǎn)程視頻通信客戶端305。因此,通信事件600可能不包括與時(shí)間段A相關(guān)聯(lián)的視頻場(chǎng)景620, 雖然在發(fā)送或記錄針對(duì)與時(shí)間段t2相關(guān)聯(lián)的視頻場(chǎng)景捕獲的視頻的情況下會(huì)包括時(shí)間段 、的鄰近時(shí)間段t2的部分??蛇x地,用戶可以調(diào)節(jié)他們的用戶偏好設(shè)置以指定在遠(yuǎn)程用戶IOb位于他們的遠(yuǎn)程視頻通信客戶端305附近并且可以瞥看它以查看第一網(wǎng)絡(luò)化遠(yuǎn)程視頻通信客戶端305的位置處的活動(dòng)狀態(tài)的情況下,本地視頻通信客戶端300應(yīng)發(fā)送偶然靜止中貞(occasional still frame)。在時(shí)間段t2期間,由本地視頻通信客戶端300的視頻分析部件380檢測(cè)活動(dòng),并且確定動(dòng)物15而不是人(本地用戶IOa)存在。本地視頻通信客戶端300可以發(fā)送、記錄或刪除該視頻內(nèi)容,但是由于人不存在并且遠(yuǎn)程視頻通信客戶端305指示對(duì)僅有動(dòng)物的內(nèi)容沒(méi)有興趣,所以刪除該內(nèi)容(不發(fā)送或記錄視頻)。在該示例中,與時(shí)間段、相關(guān)聯(lián)的視頻場(chǎng)景620不會(huì)成為通信事件600的部分。如以前一樣,可以根據(jù)用戶偏好設(shè)置可選地發(fā)送偶然靜止圖像。在時(shí)間段t3期間,兩個(gè)孩子(本地用戶IOa)進(jìn)入本地環(huán)境415和圖像捕獲裝置 120的視場(chǎng)420,并且本地視頻通信客戶端300使用視頻分析部件380檢測(cè)該活動(dòng)并識(shí)別到在視頻場(chǎng)景620中有兩個(gè)人。如果遠(yuǎn)程視頻通信客戶端305開(kāi)啟并且至少一個(gè)遠(yuǎn)程用戶IOb 存在并觀看遠(yuǎn)程視頻通信客戶端305 ( 一個(gè)或更多個(gè)遠(yuǎn)程用戶被連接),則通信事件600開(kāi)始,其中活動(dòng)的直播視頻被發(fā)送并在遠(yuǎn)程站點(diǎn)364處被播放。然而,如果遠(yuǎn)程客戶端沒(méi)有開(kāi)啟,或者至少一個(gè)觀看者沒(méi)有存在和觀看,則記錄該視頻用于稍后發(fā)送和回放。在時(shí)間段t4期間,動(dòng)物15現(xiàn)在出現(xiàn)在視頻場(chǎng)景620中。會(huì)發(fā)生多種情況,包括動(dòng)物和孩子存在于視頻內(nèi)容中,僅動(dòng)物存在于視頻中同時(shí)在音頻中仍然檢測(cè)到孩子,或者僅動(dòng)物存在。例如,在第一種情況下,通信事件600經(jīng)由視頻發(fā)送或記錄而繼續(xù)。在僅動(dòng)物存在的情況下,直播視頻發(fā)送或視頻記錄可以繼續(xù),直到清楚在時(shí)間閾值過(guò)去之前在視頻中孩子將不會(huì)再出現(xiàn)或者其他人出現(xiàn)為止。在直播視頻發(fā)送的情況下,一旦時(shí)間閾值過(guò)去了, 發(fā)送和通信事件600就會(huì)結(jié)束。當(dāng)然,關(guān)于記錄的視頻,如果例如孩子沒(méi)有再出現(xiàn),則隨后的視頻分析(表征記錄的視頻步驟560和視頻處理步驟570)可以在將視頻發(fā)送到遠(yuǎn)程視頻通信客戶端305之前移除僅涉及動(dòng)物的該預(yù)先記錄的視頻。在孩子可能存在(僅有音頻) 的示例性中間情況下,繼續(xù)視頻的概率會(huì)逐漸減小。然而,孩子的再現(xiàn)(在時(shí)間段t5內(nèi))會(huì)使得優(yōu)選地提供連續(xù)的視頻流。繼續(xù)圖6的示例,發(fā)生跨越了、和t6時(shí)間段的部分的活動(dòng)的暫停,其中視頻發(fā)送或記錄會(huì)停止,從而結(jié)束通信事件600。然而,成人(本地用戶IOa)在時(shí)間段、期間進(jìn)入場(chǎng)景并且視頻發(fā)送或記錄重新開(kāi)始,潛在地開(kāi)始新的通信事件600。在時(shí)間段〖7期間,成人離開(kāi)并且在沒(méi)有檢測(cè)到活動(dòng)的時(shí)間閾值之后,本地視頻通信客戶端300停止發(fā)送或記錄視頻(或可選地返回到僅發(fā)送偶然靜止幀)。然后,在時(shí)間段、期間,可能有問(wèn)題的內(nèi)容出現(xiàn)在捕獲的視頻內(nèi)容中,在該示例中通過(guò)具有其上繪制的笑臉的氣球(對(duì)象40)來(lái)表示。本地視頻通信客戶端300將需要確定是否發(fā)送或記錄該內(nèi)容。由于基于面部或眼睛檢測(cè)的視頻內(nèi)容分析會(huì)錯(cuò)誤地給出“人存在”確定的肯定答案,所以諸如組合分析或概率分析的其它技術(shù)會(huì)是有用的,以確定實(shí)際上沒(méi)有人存在于場(chǎng)景中。假定視頻內(nèi)容分析適當(dāng)?shù)卮_定沒(méi)有人或動(dòng)物存在,活動(dòng)可以被分類為“其它”并且本地視頻通信客戶端300不會(huì)發(fā)送或記錄視頻(但是可以可選地發(fā)送偶然靜止幀)。如以上討論所指示的,適當(dāng)?shù)囊曨l響應(yīng)(發(fā)送、記錄或刪除)的確定可以取決于本地用戶偏好設(shè)置和遠(yuǎn)程用戶偏好設(shè)置、以及存在于非手寫(xiě)的直播事件中的固有的不確定性。標(biāo)記有“概率”的圖6的下部描繪了由視頻分析部件380確定的、表示根據(jù)先前描述的系列示例性事件發(fā)送或記錄視頻的概率的概率或置信值。因此,描繪了視頻捕獲的概率為低的時(shí)間段(諸如、)、以及視頻捕獲的概率為高的其它時(shí)間段(諸如t3和t5)。還存在視頻捕獲的概率處于中間或不確定值的時(shí)間段(諸如t2、t4和t8)。在先前的討論中,關(guān)于操作處理描述了視頻通信客戶端300和它們的圖像捕獲裝置120和視頻分析部件380,該操作處理依賴于運(yùn)動(dòng)分析部件382和視頻內(nèi)容表征部件384 以提供用于檢測(cè)和表征直播或記錄的視頻中的用戶活動(dòng)的支持功能。雖然運(yùn)動(dòng)檢測(cè)、活動(dòng)檢測(cè)和活動(dòng)表征可以使用非視頻數(shù)據(jù),非視頻數(shù)據(jù)包括由麥克風(fēng)144收集的音頻或來(lái)自其它二級(jí)環(huán)境傳感器130(包括生物電場(chǎng)傳感器)的數(shù)據(jù),但是視頻和圖像數(shù)據(jù)的使用是本發(fā)明所特別關(guān)注的。在檢測(cè)活動(dòng)步驟510的情況下,可以將時(shí)間上靠近或相鄰的視頻幀相互比較以尋求表示運(yùn)動(dòng)或活動(dòng)的差別。可以使用前景或背景分割技術(shù)、以及圖像相關(guān)性和交互信息計(jì)算的比較圖像差別分析可以是足夠穩(wěn)健和快速的以實(shí)時(shí)操作。然而,圖像表征 (例如,檢測(cè)活動(dòng)步驟510或表征記錄的視頻步驟560)需要其它技術(shù)或知識(shí)以將一種類型的移動(dòng)對(duì)象或生命體與其它移動(dòng)對(duì)象或生命體區(qū)分開(kāi)。在檢測(cè)活動(dòng)步驟510實(shí)時(shí)地發(fā)生的同時(shí),表征記錄的圖像步驟560被用于表征時(shí)移的預(yù)先記錄的視頻,并且分析時(shí)間不如該情況下那樣嚴(yán)格??捎梢曨l通信客戶端300使用的、用于表征來(lái)自視頻或靜止圖像的活動(dòng)的各種方法包括頭部、面部或眼睛檢測(cè)分析、運(yùn)動(dòng)分析、體形分析、框中人(person-in-box) 分析UR成像、或它們的組合。如所描述的,視頻通信客戶端300和305以各種方式使用語(yǔ)義數(shù)據(jù),包括表征直播 (正在進(jìn)行的)或記錄的視頻(例如,在表征活動(dòng)步驟515或表征記錄的視頻步驟560中)、 描述到本地或遠(yuǎn)程用戶的可用視頻內(nèi)容、以及有利于關(guān)于視頻內(nèi)容的隱私管理決定。視頻分析部件380原理上負(fù)責(zé)分析視頻內(nèi)容以確定與捕獲的活動(dòng)相關(guān)聯(lián)的適當(dāng)?shù)恼Z(yǔ)義數(shù)據(jù)。該語(yǔ)義數(shù)據(jù)或元數(shù)據(jù)可以包括表征生命對(duì)象或無(wú)生命對(duì)象的運(yùn)動(dòng)或活動(dòng)的運(yùn)動(dòng)分析的量化度量。關(guān)于與每個(gè)通信事件600相關(guān)聯(lián)的視頻捕獲的活動(dòng)的時(shí)間、日期和持續(xù)時(shí)間的數(shù)據(jù)還可以被提供為語(yǔ)義元數(shù)據(jù)、或包括在活動(dòng)時(shí)間線中。語(yǔ)義數(shù)據(jù)還可以描述活動(dòng)或相關(guān)聯(lián)的屬性(包括人、動(dòng)物、身份、或活動(dòng)類型),并且包括可接受性等級(jí)(包括低興趣、平常內(nèi)容、中度興趣、或高度興趣)或概率分析結(jié)果??梢员惶峁檎Z(yǔ)義數(shù)據(jù)的描述性屬性的示例包括·對(duì)于人而言,指示成人、孩子、年齡、身高、性別、民族、衣服風(fēng)格·對(duì)于動(dòng)物而言,指示物種(諸如貓或狗)、品種、大小、顏色·對(duì)于活動(dòng)而言,指示吃、煮飯、玩游戲、笑、跳當(dāng)然,由于視頻分析部件380檢查圖像以尋找人,因此以面部或頭部為目標(biāo)的算法通常提供最直接的值。面部模型關(guān)鍵在于通過(guò)面部點(diǎn)、向量或模板描述的面部特征。支持快速面部檢測(cè)程序的簡(jiǎn)化的面部模型適合于本發(fā)明的實(shí)施例。實(shí)踐中,許多面部檢測(cè)程序可以快速搜索重要的面部特征,諸如眼睛、鼻子和嘴,而無(wú)需首先依賴于身體位置搜索。 在歷史上,第一個(gè)提出的面部識(shí)別模型是M. Turk和A. Pentland在文章“Eigenfaces for Recognition,,(Journal of Cognitive Neuroscience, Vol 3, No. 1. 71-86,1991)中描述的“Pentland(潘特蘭德)”模型。Pentland模型是旨在評(píng)定正前的面部圖像的二維QD) 模型。該模型拋掉大多數(shù)面部數(shù)據(jù)并保留表示眼睛、嘴和一些其它特征在哪里的數(shù)據(jù)。通過(guò)紋理分析來(lái)定位這些特征。從該數(shù)據(jù)提取與模擬面部的一組定義的面部點(diǎn)(諸如眼睛、 嘴、鼻子)相關(guān)的本征向量(方向和范圍)。由于Pentland模型需要?dú)w一化的準(zhǔn)確的眼睛位置,因此其對(duì)于姿勢(shì)和照明變化是敏感的。此外,基本面部模型可能傾向于錯(cuò)誤的肯定, 例如將時(shí)鐘或紋理墻表面的部分識(shí)別為具有尋求的面部特征。雖然Pentland模型起作用, 但是解決其限制的更新的模型對(duì)此有很大的改進(jìn)。
作為一個(gè)這樣的示例,可以使用如由Τ. Ε. Cootes、C. J. Taylor、D. Cooper和 J. Graham 在文章"Active Shape Models-Their Training and Application,,(Computer Vision and Image Understanding 61. pp. 38-59,Jan. 1995)中描述的主動(dòng)形狀模型 (ASM)。面部特定的ASM提供了包括82個(gè)面部特征點(diǎn)的面部模型。可以通過(guò)特定特征點(diǎn)之間的距離或通過(guò)連接特定特征點(diǎn)的組的線形成的角度、或者描述面部外觀的可變性的將特征點(diǎn)投影到主要部件的系數(shù)來(lái)描述局域化面部特征。這些弧長(zhǎng)特征通過(guò)眼間距離被分割以在不同面部尺寸上歸一化。此擴(kuò)展的主動(dòng)形狀模型比Pentland模型更穩(wěn)健,因?yàn)樗梢蕴幚碚彰鞯囊恍┳兓?、以及從法線開(kāi)始范圍達(dá)到15度姿勢(shì)傾斜的姿勢(shì)變化。其它選項(xiàng)包括主動(dòng)外觀模型(AAM)和三維(3D)復(fù)合模型。使用紋理數(shù)據(jù)(諸如皺紋、頭發(fā)和陰影)的主動(dòng)外觀模型是更穩(wěn)健的,特別是對(duì)于標(biāo)識(shí)和識(shí)別任務(wù)而言。使用3D幾何結(jié)構(gòu)來(lái)映射面部和頭部的3D復(fù)合模型對(duì)于可變姿勢(shì)識(shí)別任務(wù)是特別有用的。然而,這些模型比Pentland或ASM 方法稍微更計(jì)算加強(qiáng)的。使用直接眼睛檢測(cè)方法,還可以將人臉定位于圖像中。作為一個(gè)示例,可以使用眼睛特定的可形變模板來(lái)定位眼睛,諸如由A. L. Yuille, P. W. Hallinan和David S. Cohen在文章"Feature extraction from faces using deformable templates,,(International Journal of Computer Vision,Vol. 8,pp. 99-111,1992)中提到的??尚巫兡0蹇梢悦枋鲅劬Φ囊话慊笮 ⑿螤詈烷g距。另一示例性針對(duì)眼睛的模板搜索與眼睛-鼻子-眼睛幾何結(jié)構(gòu)相關(guān)聯(lián)的陰影-高亮-陰影圖案的圖像。然而,單獨(dú)的眼睛檢測(cè)通常是搜索整個(gè)圖像以可靠地定位人或其它生命對(duì)象的差的方式。因此,最好可以與其它特征分析技術(shù)(例如, 身體、頭發(fā)、頭部、面部檢測(cè))組合地使用眼睛檢測(cè)方法以驗(yàn)證人或動(dòng)物存在的初步分類。如可看到的,還可以通過(guò)分析圖像以定位頭部或身體特征來(lái)改進(jìn)定位圖像中的人或動(dòng)物的穩(wěn)健度或速度。作為一個(gè)示例,人類面部可以通過(guò)搜索名義上圓形的膚色區(qū)域的圖像來(lái)定位。作為示例,S. D. Cotton 的文章“Developing a predictive model of human skin colouring” (Proc. SPIE. Vol. 2708, pages 814-825,1996)描述了在種族和民族上不敏感的膚色模型。使用這種類型的膚色模型,可以針對(duì)對(duì)所有族群的膚色通用的顏色數(shù)據(jù)來(lái)分析圖像,從而減少種族、民族或行為因素的統(tǒng)計(jì)混亂。雖然該分析技術(shù)會(huì)是快速的,但是頭部姿勢(shì)的方向變化(包括頭發(fā)所控制的姿勢(shì))會(huì)使分析復(fù)雜。另外,該技術(shù)無(wú)法幫助動(dòng)物。作為體形圖像分析的示例,D. Forsyth等人的文章“Finding People and Animals by Guided Assembly,,(Proceedings of the Conference on Image Processing, Vol. 3, PP. 5-8,1997)描述了一種用于使用基本幾何結(jié)構(gòu)形狀(圓柱體)識(shí)別關(guān)節(jié)形式的、基于體平面或分組規(guī)則找到人和動(dòng)物的方法。身體圖像被分割成一系列交互的幾何結(jié)構(gòu)形狀,并且這些形狀的布置可以與已知體平面相關(guān)。體形分析可以通過(guò)分析各種關(guān)節(jié)肢體的移動(dòng)特征、頻率和方向來(lái)增強(qiáng),以與期望類型的運(yùn)動(dòng)進(jìn)行比較,從而將頭部與其它肢體區(qū)分開(kāi)。還可以通過(guò)使用一系列預(yù)定義的體形或頭形模板,在圖像中定位人或動(dòng)物的體形和頭形。該技術(shù)還可以在分析時(shí)使用以將活動(dòng)表征為活動(dòng)類型。在此情況下,一系列模板可以用于呈現(xiàn)大量通用的身體姿勢(shì)或定向。類似地,視頻通信客戶端300還可以使用本領(lǐng)域已知的身高和年齡估計(jì)算法而在成人與孩子之間進(jìn)行區(qū)分。作為另一示例,頂成像可以用于體形和面部特征成像,雖然在也不是頂光源135的情況下視頻通信客戶端300將會(huì)需要頂敏感圖像捕獲裝置120。Dowdall等人的文章 "Face detection in the near-IR spectrum" (Proc. SPIE, vol. 5074, pp. 745-756, 2003) 描述了使用兩個(gè)頂攝像機(jī)以及下(0. 8-1. 4 μ m) IR帶和上(1. 4-2. 4 μ m) IR帶的面部檢測(cè)系統(tǒng)。他們的系統(tǒng)采用皮膚檢測(cè)程序來(lái)使圖像分析居于化,接著是以眉毛和眼睛為關(guān)鍵部分的基于特征的面部檢測(cè)程序。重要的是,注意到人類和動(dòng)物的外觀當(dāng)在近頂⑴頂)光觀看時(shí)改變。例如,根據(jù)波段,關(guān)鍵的人類面部特征(例如頭發(fā)、皮膚和眼睛)看起來(lái)與實(shí)際生活中不同(較暗或較亮等)。作為示例,在1.4μπι以下的NIR中,皮膚最小地吸收,并且很好地透射和反射光,并且與其它特征相比會(huì)傾向于看起來(lái)明亮。減少皮膚圖像的表面紋理,給予皮膚類似陶瓷質(zhì)量的外觀。然而,在1.4μπι以上,皮膚高度吸收,并且與其它特征相比傾向于會(huì)看起來(lái)暗淡。作為另一示例,一些眼睛在紅外光中非常好地拍攝,而其它會(huì)是非??鄲赖?。與深藍(lán)色天空相似,深藍(lán)色眼睛傾向于是非常暗淡的,或者甚至是黑色的。毛皮動(dòng)物15(諸如貓或狗)的頂成像還可以利用使用的譜帶而改變。因此,這些成像差別會(huì)幫助或弄亂身體特征檢測(cè)努力??梢匀菀椎厥褂庙敵上駚?lái)勾勒體形、定位面部或眼睛、或幫助理解弄亂的視覺(jué)圖像。然而,IR圖像解釋會(huì)需要其它特定知識(shí)。作為最后的示例,如果眼睛可見(jiàn)性通過(guò)“特定”情形而增強(qiáng),則有時(shí)可以在圖像中非??焖俚囟ㄎ谎劬?。其一個(gè)示例是紅眼效應(yīng),其中當(dāng)在閃光拍攝期間從正前(或者幾乎這樣)成像時(shí),人眼具有增強(qiáng)的可視性。作為不需要閃光拍攝的另一特別情況,許多常見(jiàn)動(dòng)物的眼睛由于“眼睛閃爍”而具有增強(qiáng)的可視性。常見(jiàn)的夜間有利的動(dòng)物(諸如狗和貓)由于眼睛背部中的內(nèi)部高度反射薄膜層而具有較好的低光視覺(jué),被稱作“脈絡(luò)膜層(tapetum lucidum) ”。它用于從視網(wǎng)膜的背部向后反射光,從而給予動(dòng)物吸收和看到該光的機(jī)會(huì),而且還產(chǎn)生眼睛表現(xiàn)為發(fā)亮的眼睛閃爍。雖然比人類的紅眼效應(yīng)更頻繁地感知到動(dòng)物的眼睛閃爍,但它也是角度敏感效應(yīng)(僅可在眼睛法線的 15度內(nèi)檢測(cè))。然而,由于眼睛閃爍的眼睛相對(duì)于環(huán)境的高亮度或高對(duì)比度,所以找到呈現(xiàn)眼睛閃爍的眼睛比首先搜索動(dòng)物的頭部或身體的圖像會(huì)更容易且更快速。由于繼續(xù)開(kāi)發(fā)和改進(jìn)用以定位或識(shí)別圖像中的人或動(dòng)物的這些和其它圖像分析技術(shù),所以目前不需要鑒別如通過(guò)本發(fā)明的網(wǎng)絡(luò)化視頻通信系統(tǒng)四0的視頻分析部件380 應(yīng)用的、用于提供活動(dòng)檢測(cè)或圖像表征的最好方法。然而,存在值得進(jìn)一步考慮的、關(guān)于本發(fā)明應(yīng)用的這樣的方法的微妙之處。再者,關(guān)于圖6,在時(shí)間、期間,狗(動(dòng)物1 存在。 優(yōu)選地,視頻通信客戶端300首先檢測(cè)活動(dòng)(使用檢測(cè)活動(dòng)步驟510),并且然后基于表征活動(dòng)步驟515的結(jié)果來(lái)適當(dāng)?shù)卮_定(使用可接受性測(cè)試520)僅有動(dòng)物的活動(dòng)被認(rèn)為是“可接受”還是直播發(fā)送或記錄。圖6的下部描繪了各個(gè)時(shí)間段內(nèi)的視頻捕獲(發(fā)送或記錄) 的概率。在時(shí)間段、的情況下,用實(shí)線示出了中等概率。如果視頻分析部件380和視頻內(nèi)容表征部件384在確定動(dòng)物15存在或者僅動(dòng)物15存在的方面有問(wèn)題,則中等結(jié)果會(huì)發(fā)生。 例如,如果中等結(jié)果僅基于面部或頭部檢測(cè)圖像分析方法而發(fā)生,則會(huì)需要更耗時(shí)的體形或身體運(yùn)動(dòng)檢測(cè)圖像分析方法。在獲得了更確定的結(jié)果之后,概率會(huì)增加或降低(虛線)。 概率還可以取決于可接受性等級(jí),這是由于僅有動(dòng)物的內(nèi)容可以被發(fā)送者(本地視頻通信客戶端300)認(rèn)為是平常的,但是作為觀看者(遠(yuǎn)程視頻通信客戶端30 所期望的內(nèi)容??梢允褂弥眯胖祦?lái)量化正確視頻捕獲的概率或不確定性以測(cè)定分配到屬性值的置信,其可以由計(jì)算機(jī)340計(jì)算。置信值通常被表達(dá)為百分比(0-100%)或概率(0-1)??紤]到圖6中的概率圖,可以使用置信閾值。一些用戶10可能需要通過(guò)他們的視頻通信客戶端300僅可以發(fā)送或記錄具有正確分析的高置信(P > 0. 85)和高可接受性(8或更大的等級(jí))的內(nèi)容。其它用戶可能更寬容。例如,在置信值大于給定置信閾值450(例如0.7)的情況下,假定內(nèi)容也可以被認(rèn)為是可接受的,可以如先前所述發(fā)送或記錄視頻,直到后續(xù)的視頻分析澄清內(nèi)容為止。然而,在置信值小于用于發(fā)送或記錄視頻所需的置信閾值450,還大于不會(huì)丟掉不確定內(nèi)容的下置信閾值460(例如0. 3)的情況下,可以暫時(shí)緩沖或記錄視頻。在給定時(shí)間段之后,如果置信值仍在閾值邊界或降到閾值邊界以下,則可以清空緩沖器或存儲(chǔ)器并且不發(fā)送或記錄視頻。然而,如果置信值增加到第一閾值以上,則根據(jù)需要發(fā)送或記錄緩沖的內(nèi)容。因此,發(fā)送或記錄的視頻可以包含在具有高置信度視頻(包含較低置信度的視頻)的部分的周圍的其它連續(xù)鏡頭(footage)。指示視頻圖像內(nèi)容實(shí)際上正確或可接受的置信值的概率可以作為伴隨元數(shù)據(jù)與視頻一起提供。圖6還描繪了在時(shí)間段、期間存在有疑問(wèn)的內(nèi)容(用作為具有面部的氣球的對(duì)象 40來(lái)表示)的情況。在該示例中,視頻分析部件380會(huì)具有確定人實(shí)際上不存在的特定問(wèn)題(特別是實(shí)時(shí)地)。從其它環(huán)境傳感器130(諸如麥克風(fēng)144或生物電場(chǎng)傳感器)收集的數(shù)據(jù)的潛在數(shù)據(jù)分析可以例如通過(guò)正確地區(qū)分相關(guān)的生命對(duì)象(本地用戶IOa或動(dòng)物15) 與無(wú)生命對(duì)象40來(lái)提供澄清。其它圖像分析技術(shù)(包括用以識(shí)別諸如時(shí)鐘表面的常見(jiàn)的混亂對(duì)象的圖像分析技術(shù))也可以提供澄清。然而,圖像分析可以得出未解決的明顯的矛盾,其中檢測(cè)到面部,但是未檢測(cè)到身體。在這種情況下,視頻捕獲管理可以再次取決于與置信閾值450和460或可接受性等級(jí)有關(guān)的用戶偏好設(shè)置。如先前討論的,可接受性可以取決于各種因素,包括個(gè)人偏好、文化或宗教影響、 活動(dòng)類型、人或動(dòng)物的存在、或當(dāng)日時(shí)間、以及接受者是誰(shuí)、或內(nèi)容是否直播發(fā)送或記錄用于時(shí)移觀看。作為示例,視頻通信客戶端300還可以使用面部識(shí)別以辨別哪個(gè)家庭成員或家中房客存在于捕獲的圖像中。類似地,視頻捕獲還可以是基于身份的。作為另一示例,用戶可以選擇內(nèi)容可接受為發(fā)送或記錄的當(dāng)日時(shí)間和相關(guān)聯(lián)的星期幾。例如,用戶可以決定僅允許在工作日的上午9時(shí)與下午9時(shí)之間發(fā)送內(nèi)容,這是因?yàn)樵谠摃r(shí)間范圍之外他們可能不會(huì)裝扮成用于遠(yuǎn)程觀看者觀看他們的適當(dāng)狀態(tài)。類似地,由于周末活動(dòng)和睡眠方式的改變,用戶10可以決定周末的內(nèi)容僅可在上午11時(shí)與下午11時(shí)之間觀看。捕獲時(shí)間是通過(guò)分析由計(jì)算機(jī)340提供的系統(tǒng)時(shí)間而由視頻通信客戶端300檢測(cè)的。同樣地,用戶可以基于照明水平來(lái)選擇發(fā)送內(nèi)容。例如,用戶可以將他們的視頻通信客戶端300置于餐廳,并決定當(dāng)通過(guò)自然照明或人工照明照亮餐廳時(shí)其僅可接受為發(fā)送或記錄視頻。這可以意味著家庭進(jìn)餐時(shí)間被捕獲或記錄用于發(fā)送。還可以與當(dāng)日時(shí)間組合地使用照明水平的改變。例如,用戶可以設(shè)置他們的偏好,以便在燈當(dāng)天首次照明之后的30 分鐘開(kāi)始發(fā)送或錄制視頻。燈首次照明的時(shí)間點(diǎn)可以表示有人早晨醒來(lái)。在該時(shí)間點(diǎn)之后的三十分鐘可以給出他們時(shí)間以使他們的外觀適合于由視頻通信系統(tǒng)捕獲或記錄的適當(dāng)?shù)姆绞?例如,梳頭發(fā)、換掉睡衣)??梢岳霉鈾z測(cè)器140或捕獲的視頻圖像的圖像分析來(lái)檢測(cè)如以上示例中所述的照明水平的改變。結(jié)合上述用戶偏好,視頻通信客戶端300可以在可接受性測(cè)試520期間使用判定樹(shù)算法以判定捕獲的視頻是否可接受用于發(fā)送或記錄。如果視頻包含用戶選擇為不可接受用于發(fā)送或記錄的任何內(nèi)容,則這些系統(tǒng)動(dòng)作將不被許可。另一方面,如果視頻僅包含與要發(fā)送或記錄的可接受內(nèi)容的用戶的選擇匹配的內(nèi)容,則這些系統(tǒng)動(dòng)作被許可。例如,用戶可以指定,可以在上午9時(shí)到下午9時(shí)期間發(fā)送僅包含人而沒(méi)有動(dòng)物的視頻。此外,他們可以指定,如果視頻發(fā)生在下午5時(shí)到下午9時(shí)之間(該時(shí)間段是他們從公司回家并與他們的孩子進(jìn)行家庭活動(dòng)的時(shí)間),則視頻僅可以被記錄用于時(shí)移。在上午9時(shí)與下午9時(shí)之間, 如果視頻僅包含人而沒(méi)有動(dòng)物,則發(fā)送視頻。然而,如果遠(yuǎn)程觀看者沒(méi)有連接,則視頻不會(huì)被記錄用于稍后觀看,這是因?yàn)闂l件不滿足用戶設(shè)置的用于記錄的偏好。同樣地,用戶可以預(yù)先確定在判定處理期間會(huì)使用的可接受性等級(jí)或置信閾值450和460以處理不確定內(nèi)容。還應(yīng)理解,相對(duì)于除了用戶偏好、圖像分析表征穩(wěn)健度和語(yǔ)義內(nèi)容定義之外的其它因素,可以確定圖像可接受性。具體地,觀看者的圖像的可接受性還可以取決于圖像質(zhì)量屬性,包括圖像焦點(diǎn)、顏色和對(duì)比度。視頻通信客戶端300的視頻分析部件380還可以包括用以相對(duì)于這種屬性主動(dòng)管理視頻場(chǎng)景620的視頻捕獲的算法或程序。類似地,如果圖像捕獲裝置120具有平搖、俯仰和縮放能力,則還可以自動(dòng)調(diào)節(jié)圖像裁剪或成幀以改進(jìn)觀看者體驗(yàn),甚至當(dāng)觀看直播未書(shū)寫(xiě)的通信事件600時(shí)。Kurtz等人在2009年3月23日提交的、名稱為“Automated Videography Based Communications”的、共同受讓的美國(guó)專利申請(qǐng)序列號(hào)12/408,898中描述了可以完成此的方法。還注意到,記錄的視頻還可以具有與它一起存儲(chǔ)的附加元數(shù)據(jù),用戶可以讀取或觀看附加元數(shù)據(jù)以確定記錄的視頻是否是他們希望實(shí)際觀看的事情以及他們希望以什么方式觀看記錄的視頻(例如,被動(dòng)觀看相對(duì)于主動(dòng)觀看)。該語(yǔ)義元數(shù)據(jù)可以由視頻分析部件380提供,以作為表征記錄的視頻步驟560的結(jié)果。當(dāng)然,可以提供關(guān)于活動(dòng)、參與者、當(dāng)日時(shí)間和持續(xù)時(shí)間的信息。另外,元數(shù)據(jù)可以包括通過(guò)先前所述分析視頻獲得的置信值。然后可以將該信息與使置信值相關(guān)聯(lián)的視頻序列中的時(shí)間的指示一起向用戶顯示。例如,高置信區(qū)域可以表明觀看者應(yīng)觀看的重要區(qū)域。較少置信的區(qū)域可以表明較不重要的區(qū)域。 視頻內(nèi)的每個(gè)幀或幀組的活動(dòng)水平還可以存儲(chǔ)為附加元數(shù)據(jù),該附加元數(shù)據(jù)可以與記錄的視頻一起可視化,所以用戶可以在其觀看之前或期間再次評(píng)定內(nèi)容。更普遍地,如圖6所表明的,活動(dòng)時(shí)間線可以與記錄捕獲的視頻內(nèi)容的伴隨語(yǔ)義元數(shù)據(jù)一起提供給本地或遠(yuǎn)程用戶。另外,認(rèn)識(shí)到由視頻通信客戶端300產(chǎn)生的用于時(shí)移觀看的記錄的視頻可以由圖像處理器320來(lái)處理(在視頻處理步驟570期間)以改變記錄的視頻的外表或外觀。 這些改變可以包括對(duì)焦點(diǎn)、顏色、對(duì)比度或圖像裁剪的改變。作為一個(gè)示例,Vronay等人的美國(guó)專利申請(qǐng)公開(kāi)第2006/0251384號(hào)中或Kim等人的文章“Cinematized Reality Cinematographic 3D Video System for Daily Life Using Multiple Outer/Inner Cameras,,(IEEE Computer Vision and Pattern Recognition Workshop, 2006)中描述的用以改變預(yù)先記錄的視頻使其具有更電影化的外觀的構(gòu)思可以應(yīng)用或適用于當(dāng)前目的。例如,Vronay等人描述了一種主要用于處理由一個(gè)或更多個(gè)攝像機(jī)收集的預(yù)先記錄的視頻流的自動(dòng)視頻編輯器(AVE),以產(chǎn)生具有更專業(yè)(和戲劇性)的視覺(jué)影響的視頻。還通過(guò)場(chǎng)景解析模塊來(lái)分析每個(gè)場(chǎng)景以辨別對(duì)象、人或可以影響最終鏡頭選擇的其它線索。最佳鏡頭選擇模塊應(yīng)用鏡頭解析數(shù)據(jù)、關(guān)于鏡頭選擇和鏡頭序列的電影規(guī)則來(lái)選擇場(chǎng)景的每個(gè)部分的最好鏡頭。最后,AVE基于針對(duì)每個(gè)視頻流所確定的最佳鏡頭選擇來(lái)構(gòu)建最終視頻和每個(gè)鏡頭。視頻通信客戶端300還可以同時(shí)連接到多于一個(gè)的遠(yuǎn)程視頻通信客戶端305。在這些多方情況下,每個(gè)視頻通信客戶端300與經(jīng)由作為網(wǎng)絡(luò)化視頻通信系統(tǒng)四0的一部分的通信網(wǎng)絡(luò)360連接的另外的遠(yuǎn)程視頻通信客戶端305中的每一個(gè)直接連接。使用用戶接口控制190,對(duì)于每個(gè)連接,用戶10能夠創(chuàng)建什么內(nèi)容可接受用于發(fā)送或記錄以及將什么隱私約束施加到每個(gè)發(fā)送或記錄的視頻流的特定偏好。例如,如果用戶10將他們的本地視頻通信客戶端300與四個(gè)遠(yuǎn)程視頻通信客戶端305連接,則用戶10可以設(shè)置可接受內(nèi)容的偏好四次,如被認(rèn)為適當(dāng)?shù)?,針?duì)每個(gè)遠(yuǎn)程視頻通信客戶端305設(shè)置一次。當(dāng)然,用戶還可以將所有偏好設(shè)置成每個(gè)客戶端相同。在每個(gè)客戶端的基礎(chǔ)上,評(píng)定與每個(gè)遠(yuǎn)程視頻通信客戶端305的遠(yuǎn)程用戶連接。例如,假想連接到兩個(gè)遠(yuǎn)程視頻通信客戶端B和C的本地視頻通信客戶端A。在A處捕獲的視頻被認(rèn)為是可接受為發(fā)送到B和C兩者。如果B處的用戶在視頻通信系統(tǒng)中連接而C處的用戶沒(méi)有連接,則A會(huì)將內(nèi)容發(fā)送到B,并且可以記錄內(nèi)容用于稍后發(fā)送到C和時(shí)間延遲回放。換個(gè)角度說(shuō),在先前的討論中,視頻通信系統(tǒng)290被描述為連接具有相似的(若不完全相同的話)能力的至少兩個(gè)視頻通信客戶端(300和30 。然而,雖然該配置在許多情況下是有利的,但是該必要的相互能力不是一個(gè)要求。例如,遠(yuǎn)程視頻通信客戶端305(遠(yuǎn)程觀看客戶端)可以具有圖像顯示器110,但是缺少圖像捕獲裝置120(暫時(shí)或永久地)。 像這樣,遠(yuǎn)程視頻通信客戶端305可以接收和顯示從本地視頻通信客戶端300發(fā)送的視頻, 但是無(wú)法捕獲遠(yuǎn)程環(huán)境處的視頻或靜止圖像或活動(dòng)以發(fā)送回本地視頻通信客戶端300。然而,在遠(yuǎn)程站點(diǎn)處仍可以使用非攝像機(jī)環(huán)境傳感器130或用戶接口 190來(lái)收集關(guān)于遠(yuǎn)程觀看者狀態(tài)或遠(yuǎn)程觀看客戶端狀態(tài)的數(shù)據(jù),然后將該數(shù)據(jù)提供回視頻發(fā)送通信客戶端。作為其它考慮,注意由 S. Conversy、W. Mackay、M. Beaudouin Lafon 禾口 N. Roussel 白勺“Video Probe :Sharing Pictures of Everyday Life" (Proceedings of the 15th French-speaking Conference on Human-Computer Interaction, pp. 228-231,2003)中描述的Video ftObe (視頻探針)系統(tǒng)與本發(fā)明的系統(tǒng)具有一些共性。Video Probe由攝像機(jī)和顯示器構(gòu)成,其優(yōu)選地處于家中或安裝到墻壁上。在攝像機(jī)檢測(cè)其前方的移動(dòng)之后,如果物體或人靜止停留三秒鐘,則攝像機(jī)將捕獲靜止圖像。生成的靜止圖像然后可以發(fā)送到連接的Video Probe客戶端,其中用戶能夠觀看它們、刪除它們、或存儲(chǔ)它們用于稍后觀看。 本發(fā)明中的記錄特征與Video Probe的圖像捕獲相似,但是本發(fā)明發(fā)送或記錄視頻圖像作為視頻序列(與單個(gè)圖像相對(duì)比),并且在后一情況下,視頻序列被后處理并分割成適當(dāng)?shù)囊曨l序列。本發(fā)明還提供用于基于活動(dòng)的特征(包括人檢測(cè)、動(dòng)物檢測(cè)或活動(dòng)類型)以及由本地和遠(yuǎn)程用戶提供的可接受性標(biāo)準(zhǔn)、隱私標(biāo)準(zhǔn)或其它偏好來(lái)選擇適當(dāng)?shù)膬?nèi)容的更復(fù)雜的標(biāo)準(zhǔn)。此外,本發(fā)明的視頻通信客戶端300可以基于遠(yuǎn)程視頻通信客戶端305和遠(yuǎn)程用戶10的狀態(tài)(如連接或斷開(kāi))來(lái)確定何時(shí)發(fā)送、記錄、回放或忽略可用視頻內(nèi)容。Video Probe沒(méi)有考慮關(guān)于接收客戶端處的可用性或可接受性的狀態(tài)或偏好。還應(yīng)理解,實(shí)現(xiàn)視頻通信客戶端300以及相關(guān)聯(lián)的視頻管理處理500的程序和算法可以提供給具有構(gòu)成部件(包括計(jì)算機(jī)340和存儲(chǔ)器34 的硬件系統(tǒng)以支持本發(fā)明的功能。本發(fā)明想到的其它實(shí)施例(其中有形地實(shí)施或攜帶機(jī)器或處理器可讀的指令或算法的程序的計(jì)算機(jī)可讀介質(zhì)和程序存儲(chǔ)裝置)可以將使能指令或算法提供給硬件系統(tǒng),該硬件系統(tǒng)然后可以執(zhí)行其上存儲(chǔ)的指令或數(shù)據(jù)結(jié)構(gòu)。這樣的計(jì)算機(jī)可讀介質(zhì)可以是可由通用或?qū)S糜?jì)算機(jī)訪問(wèn)的任何可用介質(zhì)。例如,這樣的計(jì)算機(jī)可讀介質(zhì)可以包括物理計(jì)算機(jī)可讀介質(zhì),諸如RAM、ROM、EEPROM、CD-ROM、DVD、或其它光盤(pán)存儲(chǔ)、磁盤(pán)存儲(chǔ)或其它磁存儲(chǔ)裝置。 在本發(fā)明的范圍內(nèi),考慮可以用于攜帶或存儲(chǔ)可由通用或?qū)S糜?jì)算機(jī)訪問(wèn)的軟件程序的任何其它介質(zhì)。 雖然具體關(guān)于本發(fā)明的一些優(yōu)選實(shí)施例詳細(xì)描述了本發(fā)明,但是將理解,可以在本發(fā)明的精神和范圍內(nèi)實(shí)施改變和變化。要強(qiáng)調(diào)的是,可以使用各種類型的支持硬件和軟件,在多種不同類型的系統(tǒng)中實(shí)施這里描述的裝置或方法。還應(yīng)指出,附圖不是按比例繪制的,而是圖示了這些實(shí)施例中使用的關(guān)鍵部件和原理。
0121]部件列表0122]10用戶0123]IOa本地用戶0124]IOb遠(yuǎn)程用戶0125]15動(dòng)物0126]40物體0127]100電子成像裝置0128]110顯不器0129]115屏幕0130]120圖像捕獲裝置0131]125揚(yáng)聲器0132]130環(huán)境傳感器0133]135頂光源0134]140光檢測(cè)器0135]142運(yùn)動(dòng)檢測(cè)器0136]144麥克風(fēng)0137]146殼體0138]160分區(qū)屏幕圖像0139]190用戶接口控制0140]200環(huán)境光0141]290網(wǎng)絡(luò)化視頻通信系統(tǒng)0142]300視頻通信客戶端0143]305遠(yuǎn)程視頻通信客戶端0144]310圖像捕獲系統(tǒng)0145]315音頻系統(tǒng)0146]320圖像處理器0147]325音頻系統(tǒng)處理器0148]330系統(tǒng)控制器0149]340計(jì)算機(jī)說(shuō)
345存儲(chǔ)器
347幀緩沖器
355通信控制器
360通信網(wǎng)絡(luò)
362本地站點(diǎn)
364遠(yuǎn)程站點(diǎn)
380視頻分析部件
382運(yùn)動(dòng)分析部件
384視頻內(nèi)容表征部件
386視頻分割部件
390用戶隱私控制器
415本地環(huán)境
420圖像視場(chǎng)
430音頻視場(chǎng)
450置信閾值
460下置信閾值
500視頻管理處理
505捕獲視頻步驟
510檢測(cè)活動(dòng)步驟
515表征活動(dòng)步驟
520可接受性測(cè)試
525刪除視頻步驟
526刪除平常視頻步驟
530確定遠(yuǎn)程狀態(tài)步驟
535遠(yuǎn)程系統(tǒng)開(kāi)啟測(cè)試
540遠(yuǎn)程觀看者存在測(cè)試
545遠(yuǎn)程觀看者觀看測(cè)試
550發(fā)送直播視頻步驟
552警告遠(yuǎn)程用戶步驟
555記錄視頻步驟
557記錄本地使用的視頻步驟
560表征記錄的視頻步驟
565施加隱私約束步驟
570視頻處理步驟
575發(fā)送記錄的視頻步驟
580監(jiān)視遠(yuǎn)程狀態(tài)步驟
585提供“進(jìn)展中”視頻步驟
590表格
600通信事件
620 視頻場(chǎng)景
權(quán)利要求
1.一種用于使用視頻通信系統(tǒng)向遠(yuǎn)程觀看者提供視頻圖像的方法,包括操作視頻通信系統(tǒng),所述視頻通信系統(tǒng)包括經(jīng)由通信網(wǎng)絡(luò)連接到遠(yuǎn)程觀看環(huán)境中的遠(yuǎn)程觀看客戶端的本地環(huán)境中的視頻通信客戶端,其中所述視頻通信客戶端包括視頻捕獲裝置、圖像顯示器、以及具有視頻分析部件的計(jì)算機(jī);在通信事件期間,使用所述視頻捕獲裝置捕獲所述本地環(huán)境的視頻圖像;利用所述視頻分析部件分析所述捕獲的視頻圖像,以檢測(cè)所述本地環(huán)境內(nèi)的正在進(jìn)行的活動(dòng);關(guān)于表示遠(yuǎn)程觀看者興趣的屬性,表征所述視頻圖像內(nèi)的所述檢測(cè)的活動(dòng);響應(yīng)于所述表征的活動(dòng)和定義的本地用戶許可,確定可接受的視頻圖像是否可用;接收所述遠(yuǎn)程觀看客戶端連接還是斷開(kāi)的指示;以及如果所述遠(yuǎn)程觀看客戶端連接,則向所述遠(yuǎn)程觀看客戶端發(fā)送所述正在進(jìn)行的活動(dòng)的所述可接受的視頻圖像,或者替選地,如果所述遠(yuǎn)程觀看客戶端斷開(kāi),則將所述可接受的視頻圖像記錄到存儲(chǔ)器,并且在接收到所述遠(yuǎn)程觀看客戶端連接的指示的稍后時(shí)間處向所述遠(yuǎn)程觀看客戶端發(fā)送所述記錄的視頻圖像。
2.根據(jù)權(quán)利要求1所述的方法,其中,當(dāng)所述視頻圖像被確定為不可接受時(shí),不發(fā)送或記錄所述視頻圖像,并將其從存儲(chǔ)器刪除。
3.根據(jù)權(quán)利要求1所述的方法,其中,當(dāng)所述視頻圖像被確定為不可接受時(shí),在通信事件的部分期間將由所述視頻捕獲裝置捕獲的至少一個(gè)靜止圖像發(fā)送給所述遠(yuǎn)程觀看客戶端。
4.根據(jù)權(quán)利要求1所述的方法,其中,當(dāng)所述遠(yuǎn)程觀看客戶端開(kāi)啟、遠(yuǎn)程觀看者存在于所述遠(yuǎn)程觀看環(huán)境中并且所述遠(yuǎn)程觀看者正觀看所述遠(yuǎn)程觀看客戶端時(shí),從所述遠(yuǎn)程觀看客戶端接收所述遠(yuǎn)程觀看客戶端連接的指示。
5.根據(jù)權(quán)利要求1所述的方法,其中,當(dāng)所述遠(yuǎn)程觀看客戶端關(guān)閉、或遠(yuǎn)程觀看者不存在于所述遠(yuǎn)程觀看環(huán)境中、或所述遠(yuǎn)程觀看者沒(méi)有觀看所述遠(yuǎn)程觀看客戶端時(shí),從所述遠(yuǎn)程觀看客戶端接收所述遠(yuǎn)程觀看客戶端斷開(kāi)的指示。
6.根據(jù)權(quán)利要求1所述的方法,還包括在接收了所述先前指示之后,接收所述遠(yuǎn)程觀看客戶端的狀態(tài)為連接或斷開(kāi)的后續(xù)指示。
7.根據(jù)權(quán)利要求6所述的方法,其中,響應(yīng)于所述遠(yuǎn)程觀看客戶端的狀態(tài)改變?yōu)檫B接或斷開(kāi),相對(duì)于視頻發(fā)送或視頻記錄改變所述視頻通信客戶端的行為。
8.根據(jù)權(quán)利要求1所述的方法,其中,將所述捕獲的視頻圖像的所述表征的活動(dòng)或所述確定的可接受性的指示提供給所述遠(yuǎn)程觀看客戶端。
9.根據(jù)權(quán)利要求1所述的方法,其中,所述檢測(cè)的活動(dòng)是基于根據(jù)運(yùn)動(dòng)分析得到的定量度量而表征的。
10.根據(jù)權(quán)利要求1所述的方法,其中,所述檢測(cè)的活動(dòng)是基于語(yǔ)義屬性而表征的,所述語(yǔ)義屬性包括人的存在或身份、動(dòng)物的存在或身份、活動(dòng)類型、或當(dāng)日時(shí)間。
11.根據(jù)權(quán)利要求1所述的方法,其中,使用與所述圖像內(nèi)容中的人、動(dòng)物或特定活動(dòng)的存在有關(guān)的標(biāo)準(zhǔn)來(lái)確定所述視頻圖像內(nèi)容的可接受性。
12.根據(jù)權(quán)利要求1所述的方法,其中,用概率值表征所述可用視頻圖像內(nèi)容的可接受性。
13.根據(jù)權(quán)利要求12所述的方法,其中,在捕獲視頻圖像的同時(shí)確定更新后的概率值, 并且響應(yīng)于所述概率值的改變,改變所述視頻通信客戶端的行為。
14.根據(jù)權(quán)利要求13所述的方法,其中,通過(guò)改變所述捕獲的視頻圖像被發(fā)送給所述遠(yuǎn)程觀看客戶端、被記錄用于稍后發(fā)送、還是從所述存儲(chǔ)器刪除,來(lái)改變所述視頻通信客戶端的行為。
15.根據(jù)權(quán)利要求1所述的方法,其中,用可接受性等級(jí)表征所述視頻圖像的可接受性,所述可接受性等級(jí)包括將所述視頻圖像的內(nèi)容分類為不可接受、平?;蚩山邮艿目山邮苄缘燃?jí)。
16.根據(jù)權(quán)利要求1所述的方法,其中,所述定義的本地用戶許可包括以下方面的限制能夠記錄或發(fā)送哪些類型的視頻圖像內(nèi)容、允許誰(shuí)觀看所述視頻圖像、能夠觀看記錄的視頻圖像多少次、或能夠在所述遠(yuǎn)程觀看客戶端保留記錄的視頻多久。
17.根據(jù)權(quán)利要求1所述的方法,其中,所述視頻通信客戶端向所述遠(yuǎn)程觀看客戶端提供正在進(jìn)行的活動(dòng)的視頻圖像或記錄的視頻圖像能夠用于觀看的警告。
18.根據(jù)權(quán)利要求1所述的方法,其中,相對(duì)于各種標(biāo)準(zhǔn)來(lái)表征所述記錄的視頻圖像, 所述標(biāo)準(zhǔn)包括人的存在或身份、動(dòng)物的存在或身份、活動(dòng)類型、當(dāng)日時(shí)間、或記錄的視頻的持續(xù)時(shí)間。
19.根據(jù)權(quán)利要求1所述的方法,其中,所述檢測(cè)活動(dòng)分析或所述視頻圖像表征包括圖像差別分析、運(yùn)動(dòng)分析、面部檢測(cè)、眼睛檢測(cè)、體形檢測(cè)、膚色分析、或它們的組合。
20.根據(jù)權(quán)利要求1所述的方法,其中,所述視頻通信客戶端和所述遠(yuǎn)程觀看客戶端均提供用戶接口,通過(guò)所述用戶接口,遠(yuǎn)程用戶或本地用戶定義他們的視頻觀看、發(fā)送、記錄、 或隱私偏好。
21.根據(jù)權(quán)利要求20所述的方法,其中,針對(duì)來(lái)自一個(gè)或更多個(gè)視頻通信事件的所述可接受的視頻圖像確定活動(dòng)時(shí)間線,并且在所述視頻通信客戶端或所述遠(yuǎn)程觀看客戶端的用戶接口上提供所述活動(dòng)時(shí)間線。
22.根據(jù)權(quán)利要求1所述的方法,其中,正在進(jìn)行的活動(dòng)的視頻圖像被記錄在與所述視頻通信客戶端相關(guān)聯(lián)的存儲(chǔ)器中。
23.根據(jù)權(quán)利要求1所述的方法,其中,所述記錄的視頻圖像被記錄在與所述遠(yuǎn)程觀看客戶端相關(guān)聯(lián)的存儲(chǔ)器中。
24.根據(jù)權(quán)利要求1所述的方法,其中,所述視頻通信客戶端經(jīng)由通信網(wǎng)絡(luò)連接到多個(gè)遠(yuǎn)程觀看客戶端,并且響應(yīng)于給定遠(yuǎn)程觀看客戶端連接還是斷開(kāi),向所述遠(yuǎn)程觀看客戶端發(fā)送正在進(jìn)行的活動(dòng)的視頻圖像或者記錄的視頻圖像。
25.根據(jù)權(quán)利要求M所述的方法,其中,能夠針對(duì)每個(gè)遠(yuǎn)程觀看客戶端定義本地用戶許可或遠(yuǎn)程用戶偏好。
26.根據(jù)權(quán)利要求1所述的方法,其中,所述視頻通信客戶端還包括一個(gè)或更多個(gè)環(huán)境傳感器,其中所述環(huán)境傳感器之一是運(yùn)動(dòng)檢測(cè)器、光檢測(cè)器、紅外敏感攝像機(jī)、生物電場(chǎng)檢測(cè)傳感器、接近度傳感器、或麥克風(fēng)。
27.一種用于使用視頻通信系統(tǒng)向遠(yuǎn)程觀看者提供視頻圖像的方法,包括操作經(jīng)由通信網(wǎng)絡(luò)連接到遠(yuǎn)程觀看環(huán)境中的遠(yuǎn)程觀看系統(tǒng)的本地環(huán)境中的視頻通信系統(tǒng),其中所述視頻通信系統(tǒng)包括視頻捕獲裝置、圖像顯示器、以及具有視頻分析部件的計(jì)算機(jī);使用所述視頻捕獲裝置捕獲所述本地環(huán)境的視頻圖像;使用所述視頻分析部件分析所述捕獲的視頻圖像,以檢測(cè)所述本地環(huán)境內(nèi)的正在進(jìn)行的活動(dòng);關(guān)于表示遠(yuǎn)程觀看者興趣的屬性,表征所述視頻圖像內(nèi)的所述檢測(cè)的活動(dòng); 響應(yīng)于所述表征的活動(dòng)和定義的本地用戶許可,確定可接受的視頻圖像是否可用; 接收遠(yuǎn)程觀看者是否連接以觀看所述遠(yuǎn)程觀看系統(tǒng)的指示;以及如果遠(yuǎn)程觀看者連接以觀看所述遠(yuǎn)程觀看系統(tǒng),則向所述遠(yuǎn)程觀看系統(tǒng)提供所述可接受的視頻圖像內(nèi)容。
28.一種用于使用視頻通信系統(tǒng)向遠(yuǎn)程觀看者提供視頻圖像的方法,包括操作經(jīng)由通信網(wǎng)絡(luò)連接到遠(yuǎn)程觀看環(huán)境中的遠(yuǎn)程觀看系統(tǒng)的本地環(huán)境中的視頻通信系統(tǒng),其中所述視頻通信系統(tǒng)包括視頻捕獲裝置、圖像顯示器、以及具有視頻分析部件的計(jì)算機(jī);使用所述視頻捕獲裝置捕獲所述本地環(huán)境的視頻圖像;使用所述視頻分析部件分析所述捕獲的視頻圖像以檢測(cè)所述本地環(huán)境內(nèi)的活動(dòng); 關(guān)于表示遠(yuǎn)程觀看者興趣的屬性,表征所述視頻圖像內(nèi)的所述檢測(cè)的活動(dòng); 響應(yīng)于所述表征的活動(dòng)和定義的本地用戶許可,確定可接受的視頻圖像是否可用; 接收觀看者是否連接以觀看所述遠(yuǎn)程觀看系統(tǒng)的指示;以及如果觀看者沒(méi)有連接以觀看所述遠(yuǎn)程觀看系統(tǒng),則記錄所述可接受的視頻圖像。
29.根據(jù)權(quán)利要求觀所述的方法,還包括在接收到觀看者連接以觀看所述遠(yuǎn)程觀看系統(tǒng)的指示的稍后時(shí)間處向所述遠(yuǎn)程觀看系統(tǒng)發(fā)送所述記錄的視頻圖像。
30.根據(jù)權(quán)利要求觀所述的方法,其中,使用所述遠(yuǎn)程觀看者環(huán)境和所述遠(yuǎn)程觀看者自己的視頻圖像來(lái)確定遠(yuǎn)程觀看者興趣,所述遠(yuǎn)程觀看者環(huán)境和所述遠(yuǎn)程觀看者自己的所述視頻圖像通過(guò)所述遠(yuǎn)程觀看客戶端被捕獲和分析,以確定表示遠(yuǎn)程觀看者興趣的、包括身份、活動(dòng)、注意力、或情緒反應(yīng)的觀看者屬性。
31.根據(jù)權(quán)利要求觀所述的方法,其中,使用關(guān)于所述觀看者的語(yǔ)義數(shù)據(jù)來(lái)確定遠(yuǎn)程觀看者興趣,所述語(yǔ)義數(shù)據(jù)包括日歷數(shù)據(jù)、描述所述遠(yuǎn)程觀看者與所述本地用戶的關(guān)系的數(shù)據(jù)、或描述觀看行為或觀看偏好的歷史數(shù)據(jù)。
32.根據(jù)權(quán)利要求觀所述的方法,其中,相對(duì)于所述可用記錄的視頻圖像,通過(guò)所述遠(yuǎn)程觀看客戶端將遠(yuǎn)程觀看者興趣按優(yōu)先序排列,然后基于所述確定的按優(yōu)先序排列的觀看者興趣,將所述可用視頻圖像提供給遠(yuǎn)程觀看者用于觀看。
33.一種用于使用視頻通信系統(tǒng)向遠(yuǎn)程觀看者提供視頻圖像的方法,包括操作視頻通信系統(tǒng),所述視頻通信系統(tǒng)包括經(jīng)由通信網(wǎng)絡(luò)連接到遠(yuǎn)程觀看環(huán)境中的遠(yuǎn)程觀看客戶端的本地環(huán)境中的視頻通信客戶端,其中所述視頻通信客戶端包括視頻捕獲裝置、圖像顯示器、以及具有視頻分析部件的計(jì)算機(jī);在通信事件期間,使用所述視頻捕獲裝置捕獲所述本地環(huán)境的視頻圖像; 利用所述視頻分析部件分析所述捕獲的視頻圖像,以檢測(cè)所述本地環(huán)境內(nèi)的正在進(jìn)行的活動(dòng);關(guān)于表示遠(yuǎn)程觀看者興趣的屬性,表征所述視頻圖像內(nèi)的所述檢測(cè)的活動(dòng);響應(yīng)于所述表征的活動(dòng)和定義的本地用戶許可,確定可接受的視頻圖像是否可用; 確定遠(yuǎn)程觀看者是否連接以觀看所述遠(yuǎn)程觀看客戶端;以及如果所述遠(yuǎn)程觀看者連接,則向所述遠(yuǎn)程觀看客戶端發(fā)送所述正在進(jìn)行的活動(dòng)的所述可接受的視頻圖像,或者替選地,如果所述遠(yuǎn)程觀看者斷開(kāi),則將所述可接受的視頻圖像記錄到所述本地視頻通信客戶端處的存儲(chǔ)器或者所述遠(yuǎn)程觀看客戶端處的存儲(chǔ)器中。
34.根據(jù)權(quán)利要求33所述的方法,其中,所述本地用戶許可確定所述記錄的視頻圖像被記錄到所述本地視頻通信客戶端處的所述存儲(chǔ)器還是所述遠(yuǎn)程觀看客戶端處的所述存儲(chǔ)器。
35.根據(jù)權(quán)利要求33所述的方法,其中,在所述本地視頻通信客戶端處或所述遠(yuǎn)程觀看客戶端處完成所述遠(yuǎn)程觀看者狀態(tài)為連接或斷開(kāi)的所述確定。
36.一種視頻通信系統(tǒng),包括本地視頻通信客戶端,包括適于捕獲本地環(huán)境的視頻圖像的視頻捕獲裝置; 經(jīng)由通信網(wǎng)絡(luò)連接到所述本地視頻通信客戶端的遠(yuǎn)程觀看環(huán)境中的遠(yuǎn)程觀看客戶端;用于控制所述視頻通信客戶端的計(jì)算機(jī);以及存儲(chǔ)器系統(tǒng),其以操作的方式鏈接到所述計(jì)算機(jī)并存儲(chǔ)指令,所述指令被配置成使得使用所述視頻捕獲裝置捕獲所述本地環(huán)境的視頻圖像;分析所述捕獲的視頻圖像以檢測(cè)所述本地環(huán)境內(nèi)的活動(dòng);關(guān)于表示遠(yuǎn)程觀看者興趣的屬性,表征所述視頻圖像內(nèi)的所述檢測(cè)的活動(dòng);響應(yīng)于所述表征的活動(dòng)和定義的本地用戶許可,確定可接受的視頻圖像是否可用;接收所述遠(yuǎn)程觀看客戶端連接還是斷開(kāi)的指示;以及如果所述遠(yuǎn)程觀看客戶端連接,則向所述遠(yuǎn)程觀看客戶端提供所述可接受的視頻圖像,或者替選地,如果所述遠(yuǎn)程觀看客戶端斷開(kāi),則將所述可接受的視頻圖像記錄到存儲(chǔ)器,并且在接收到所述遠(yuǎn)程觀看客戶端連接的指示的稍后時(shí)間處向所述遠(yuǎn)程觀看客戶端提供所述記錄的視頻圖像。
37.根據(jù)權(quán)利要求36所述的系統(tǒng),其中,所述視頻通信客戶端還包括一個(gè)或更多個(gè)環(huán)境傳感器,其中所述環(huán)境傳感器之一是運(yùn)動(dòng)檢測(cè)器、光檢測(cè)器、紅外敏感攝像機(jī)、生物電場(chǎng)檢測(cè)傳感器、接近度傳感器、或麥克風(fēng)。
38.根據(jù)權(quán)利要求36所述的系統(tǒng),其中,所述視頻捕獲裝置具有能夠被控制為改變所述捕獲的視頻圖像的視場(chǎng)的平搖、俯仰或縮放能力。
全文摘要
一種用于使用視頻通信系統(tǒng)向遠(yuǎn)程觀看者提供視頻圖像的方法,包括操作經(jīng)由通信網(wǎng)絡(luò)連接到遠(yuǎn)程觀看環(huán)境中的遠(yuǎn)程觀看客戶端的本地環(huán)境中的視頻通信客戶端;捕獲本地環(huán)境的視頻圖像;利用視頻分析部件分析捕獲的視頻圖像,以檢測(cè)本地環(huán)境內(nèi)的正在進(jìn)行的活動(dòng);關(guān)于表示遠(yuǎn)程觀看者興趣的屬性,表征視頻圖像內(nèi)的檢測(cè)的活動(dòng);確定可接受的視頻圖像是否可用;接收遠(yuǎn)程觀看客戶端連接還是斷開(kāi)的指示;以及如果遠(yuǎn)程觀看客戶端連接,則向遠(yuǎn)程觀看客戶端發(fā)送正在進(jìn)行的活動(dòng)的可接受的視頻圖像,或者替選地,如果遠(yuǎn)程觀看客戶端斷開(kāi),則將可接受的視頻圖像記錄到存儲(chǔ)器。
文檔編號(hào)H04L12/18GK102577367SQ201080040258
公開(kāi)日2012年7月11日 申請(qǐng)日期2010年9月1日 優(yōu)先權(quán)日2009年9月11日
發(fā)明者卡爾梅·格拉爾德·諾伊施塔特, 埃琳娜·A·費(fèi)多羅夫斯卡亞, 安德魯·弗雷德里克·庫(kù)爾茨, 特金德·考爾·朱奇 申請(qǐng)人:伊斯曼柯達(dá)公司
網(wǎng)友詢問(wèn)留言 已有0條留言
  • 還沒(méi)有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
1
呈贡县| 阿坝县| 辽阳县| 加查县| 中西区| 墨玉县| 阳朔县| 三门峡市| 佛冈县| 县级市| 大英县| 尚义县| 江山市| 涞水县| 鄂托克旗| 安徽省| 门头沟区| 青冈县| 天门市| 措勤县| 九台市| 镇宁| 嘉禾县| 井冈山市| 虎林市| 隆尧县| 上蔡县| 上犹县| 平邑县| 囊谦县| 肥东县| 鄂伦春自治旗| 天津市| 读书| 瑞丽市| 错那县| 绿春县| 金阳县| 淮滨县| 连南| 舒兰市|