優(yōu)先權(quán)聲明
該專利申請要求2014年12月23日提交的美國專利申請序列號14/581,548的優(yōu)先權(quán)的權(quán)益,其通過引用全部合并于此。
本文描述的實施例大體涉及視頻內(nèi)容的捕捉和顯示,并且特別涉及視頻內(nèi)容經(jīng)由移動設(shè)備的交互式顯示。
背景技術(shù):
光學(xué)雙目鏡和單目鏡通過觀察大批觀眾以及其他場景(其中觀看的人位于離演出很大距離處)中的人而得到廣泛使用。例如,歌劇或戲劇觀眾可能使用雙目鏡或其他光學(xué)望遠(yuǎn)鏡來獲得關(guān)于所觀察的表演舞臺的特殊表達(dá)或細(xì)節(jié)的較近視圖。采用相似方式,體育賽事觀眾可能使用光學(xué)雙目鏡來獲得體育運動員或比賽的較近視圖。光學(xué)雙目鏡的另一個用途是在戶外視點-例如其中參觀者使用投幣式操作的三腳架安裝的雙目鏡來觀看風(fēng)景中的細(xì)節(jié)的這樣的地方。然而,在光學(xué)雙目鏡的這些和其他使用中,觀眾被迫使他或她的目光通過雙目鏡聚焦并且從而在透過雙目鏡鏡頭查看時脫離較寬圖景。
因此,已開發(fā)有限機(jī)構(gòu)來提供備選顯示器并且增強(qiáng)觀眾視角。例如,在體育場館和大型音樂或舞蹈演出中,舞臺或比賽場地通常通過顯示表演者的變焦拉近(zoomed-in)視頻的一個或多個視頻屏幕而增強(qiáng)。然而,觀眾并未控制視頻場景并且因為顯示的視頻依賴于導(dǎo)演或視頻制作者的選擇而通常不能觀看期望的人或?qū)ο蟆?/p>
附圖說明
在圖(其不必按比例繪制)中,類似的數(shù)字可以描述不同視圖中的相似部件。具有不同字母后綴的類似數(shù)字可以代表相似部件的不同實例。一些實施例通過示例而非限制的方式在附圖的圖中圖示,其中:
圖1圖示根據(jù)示例對于用移動設(shè)備顯示的交互式虛擬雙目鏡視頻輸出的使用案例;
圖2圖示根據(jù)示例對于交互式虛擬雙目鏡視頻輸出的視頻捕捉、處理、傳送和輸出設(shè)備的綜覽;
圖3圖示根據(jù)示例對于在表演區(qū)中提供的交互式虛擬雙目鏡視頻輸出的視頻捕捉和網(wǎng)絡(luò)傳送位點的圖;
圖4圖示根據(jù)示例對于交互式虛擬雙目鏡視頻輸出的視頻和信息數(shù)據(jù)的數(shù)據(jù)傳送圖;
圖5圖示根據(jù)示例用于在移動設(shè)備處回放虛擬雙目鏡視頻輸出的方法的流程圖;
圖6圖示根據(jù)示例用于在視頻處理服務(wù)器處流播虛擬雙目鏡視頻輸出的方法的流程圖;
圖7圖示根據(jù)示例對于交互式虛擬雙目鏡視頻輸出的系統(tǒng)的部件的框圖;以及
圖8圖示根據(jù)示例的示例機(jī)器的框圖,本文論述的技術(shù)(例如,操作、過程、方法和方法論)中的任一個或多個可在該機(jī)器上執(zhí)行。
具體實施方式
在下列描述中,公開系統(tǒng)、方法和機(jī)器可讀介質(zhì)(其包括指令),其提供用于回放和控制“虛擬雙目鏡”視頻的功能性,這允許事件的觀眾選擇和觀看人類可感知事件、風(fēng)景或其他場景的特定增強(qiáng)(例如,變焦拉近和搖攝(panned))部分。該虛擬雙目鏡視角隨移動設(shè)備的使用而提供,例如智能電話或平板,其配置成接收和處理期望場景的詳細(xì)(例如,高質(zhì)量、高清晰度)視頻饋送。如本文描述的,用戶可以使用他或她的移動設(shè)備經(jīng)由視頻回放控制輸出期望場景的詳細(xì)、增強(qiáng)視頻視角,從而允許用戶將捕捉的視頻顯示選擇和指向為(例如,搖攝、變焦(zoom)或?qū)ζ鋺?yīng)用另一個增強(qiáng))期望場景的特別部分。
下列技術(shù)描述用于關(guān)于該虛擬雙目鏡視頻顯示捕捉、處理、流播和顯示視頻輸出的機(jī)構(gòu)。在下文進(jìn)一步描述的一個示例配置中,安裝在待觀看區(qū)后方(例如在音樂廳后方、在體育場地側(cè)面、定位在觀看區(qū)中或觀看區(qū)前臺附近)的許多高清晰度拍攝裝置配置成對期望場景捕捉和流播高分辨率視頻??梢詮囊粋€或多個角度(包括靜態(tài)或者可再定位位置)定位這些高清晰度拍攝裝置。高清晰度拍攝裝置則對中央服務(wù)器提供相應(yīng)視頻流,該中央服務(wù)器接收視頻并且對于虛擬雙目鏡觀眾將視頻處理為不同的流。位點識別技術(shù)則可以用于使特定視頻流與特定移動設(shè)備相關(guān)。該視頻流則可以進(jìn)一步處理、增強(qiáng)(搖攝、裁剪、變焦拉近)和精細(xì)化用于在移動設(shè)備上輸出。
本文描述的用于提供和控制虛擬雙目鏡視頻顯示的技術(shù)可以隨使用額外處理和顯示技術(shù)而增強(qiáng)。例如,增強(qiáng)現(xiàn)實內(nèi)容可以作為層添加在待由移動設(shè)備顯示的虛擬雙目鏡視頻上。各種位點和活動檢測機(jī)構(gòu)可以用于提供有用覆蓋、廣告、宣傳和類似信息連同虛擬雙目鏡視頻顯示。作為另一個示例,可以從視頻流饋送的使用收集用戶反饋和數(shù)據(jù)并且由管理員監(jiān)測以用于改進(jìn)視頻饋送或視頻操作。另外,使用信息可以發(fā)送給藝術(shù)家或演出運營商來促成基礎(chǔ)表演改變。
用于從觀眾提供變焦拉近聚焦顯示的現(xiàn)有技術(shù)一般局限于使用光學(xué)和電子變焦機(jī)構(gòu)。例如,一些現(xiàn)有智能電話和平板移動設(shè)備提供有限光學(xué)鏡頭用于直接在移動設(shè)備上變焦和數(shù)字變焦增強(qiáng)。然而,這樣的設(shè)備的光學(xué)變焦能力典型地是非常有限的(例如,不到5x),并且從移動設(shè)備捕捉的視頻或圖片的質(zhì)量可大大減小,特別在弱光環(huán)境中。如之前論述的,光學(xué)望遠(yuǎn)鏡(例如雙目鏡或單目鏡望遠(yuǎn)鏡)的使用可以對用戶提供期望場景的一部分的變焦拉近且詳細(xì)的視角。然而,這樣的雙目鏡或單目鏡必須由用戶單獨攜帶并且必須靠近用戶眼睛放置。從而,光學(xué)設(shè)備的個人使用需要用戶選擇是在變焦推遠(yuǎn)(zoomed-out)視角感知整個場景還是專門在變焦拉近視角感知場景的部分。
本文描述的數(shù)字視頻處理、傳送和顯示技術(shù)克服與相關(guān)視頻源的選擇和輸出關(guān)聯(lián)的這些和其他技術(shù)問題。另外,本文描述的虛擬雙目鏡視頻顯示技術(shù)的使用可能夠提供從用戶視角不可能的額外視角和視圖。例如,如果場景的部分被位于用戶前面的障礙物或觀眾所隱藏,從重定位的拍攝裝置獲得的視角可以允許有對場景的無障礙視角和視頻輸出。通過目前描述的虛擬雙目鏡視頻顯示提供的視頻輸出可以提供這樣的增強(qiáng)或無障礙的視圖同時為了更現(xiàn)實和準(zhǔn)確的輸出還利用基于位點的信息的益處。
圖1提供根據(jù)本文描述的示例技術(shù)提供的交互式虛擬雙目鏡視頻輸出的使用案例的圖示100。圖1中的視頻輸出提供顯示器,其具有風(fēng)景的一部分(如圖示的,金門大橋(goldengatebridge)的一部分)的特寫鏡頭視角(close-upperspective)。在該示例中,視頻輸出與在眺望風(fēng)景的視點所采取的視頻捕捉相協(xié)調(diào)。
如示出的,用戶110在用戶的視場內(nèi)操作移動設(shè)備120(例如,智能電話),例如通過使設(shè)備保持在用戶110前面(在用戶110與感興趣區(qū)之間)。例如,假設(shè)用戶希望觀看場景中的視頻拍攝的對象140的一部分,在這里是橋的一部分。通過在移動設(shè)備120上輸出的直播視頻顯示內(nèi)感興趣區(qū)的放大部分的輸出,視頻顯示器130提供視頻拍攝的對象140(橋)的一部分的增強(qiáng)變焦拉近視角。
對于圖1中描繪的虛擬雙目鏡視頻顯示的使用案例可以牽涉一個或多個拍攝裝置,以在遠(yuǎn)離移動設(shè)備120和朝向場景內(nèi)的感興趣區(qū)的觀看方向上捕捉場景。例如,一個拍攝裝置可以在中心位點定位在相對于多個觀眾的視點,并且來自該視點的視頻可以配置成向相應(yīng)移動設(shè)備提供數(shù)字視頻內(nèi)容的一個或多個流。在另一個示例中,多個拍攝裝置可以在視點定位在相對于多個觀眾的不同位點。(例如,多個拍攝裝置可以遍及不同位置位于視點,以允許有不同拍攝裝置視圖和視角,這取決于觀看者相對于視頻拍攝的對象140的角度,或取決于觀看者所面對的更精確方向)。為了部署多個拍攝裝置,本文進(jìn)一步論述的位點確定技術(shù)可以用于確定選擇和傳送哪個拍攝裝置視圖(和哪個拍攝裝置視角)以供在虛擬雙目鏡視頻顯示中使用。本文進(jìn)一步論述的位點確定和圖像識別技術(shù)還可以用于提供移動設(shè)備120相對于視頻拍攝的對象140的位置和取向的交互式控制和匹配,這可以牽涉選擇不同拍攝裝置視圖;裁剪、比例縮放(scaling)、變焦、旋轉(zhuǎn)、搖攝或另外增強(qiáng)(或改變)從拍攝裝置視圖捕捉的視頻輸出;或從用戶110與移動設(shè)備120的交互模仿雙目鏡的使用的其他技術(shù)。
圖2圖示根據(jù)示例描繪與交互式虛擬雙目鏡視頻輸出的視頻捕捉、處理、傳送和輸出一起使用的各種電子設(shè)備的系統(tǒng)圖200。如示出的,由相應(yīng)人類用戶操作的許多數(shù)字移動設(shè)備210a、210b、210c(例如,智能電話)建立電子連接以接收從流播服務(wù)器230提供的視頻。如圖示的,該電子連接經(jīng)由wi-fi廣播接入點240a、240b、240c(例如,對于遵循ieee802.11標(biāo)準(zhǔn)(例如ieee802.11a/b/g/n/ac/ad/af或?qū)eee802.11標(biāo)準(zhǔn)的后續(xù)修改)操作無線局域網(wǎng)的wi-fi接入點)提供有無線網(wǎng)絡(luò)連接。
流播服務(wù)器230操作成提供從相應(yīng)超高清(uhd)拍攝裝置220a、220b、220c獲得的視頻的相應(yīng)流,例如配置成捕捉采用4kuhd(例如,4096像素x2160行)或8kuhd(例如,7680像素x4320行)格式的視頻的拍攝裝置。在一些示例中,流播服務(wù)器230經(jīng)由接入點240a、240b、240c在每個wi-fi網(wǎng)絡(luò)提供共同視頻流,并且操作成將相應(yīng)視頻流從特定拍攝裝置組播到相應(yīng)wi-fi接入點上(或?qū)τ诙鄠€wi-fi接入點)的多個連接設(shè)備。在其他示例中,流播服務(wù)器230操作成提供個體視頻流,其中個體視頻流中的內(nèi)容對個體連接設(shè)備定制。將理解流播服務(wù)器230可以關(guān)于視頻流到移動設(shè)備210a、210b、210c的無線傳送利用流播、播送和視頻服務(wù)技術(shù)的任何組合。
如在圖2中進(jìn)一步示出的,流播服務(wù)器230進(jìn)一步連接到管理站,其識別為監(jiān)測和增強(qiáng)現(xiàn)實站250。例如,監(jiān)測和增強(qiáng)現(xiàn)實站250可以用于從uhd拍攝裝置220a、220b、220c獲得的視頻流和視頻內(nèi)容的人工輔助或自動監(jiān)測和控制,包括來自拍攝裝置的視頻饋送的切換、增強(qiáng)和終止或恢復(fù)。監(jiān)測和增強(qiáng)現(xiàn)實站250還可以連同增強(qiáng)現(xiàn)實內(nèi)容的人工輔助或自動生成及其到視頻流上的覆蓋一起使用。
在另外的示例中,連同監(jiān)測和增強(qiáng)現(xiàn)實站250一起供應(yīng)的增強(qiáng)現(xiàn)實內(nèi)容可以包括額外內(nèi)容、信息或元數(shù)據(jù)。例如,這樣的內(nèi)容可以包括表演者(例如音樂家或運動員的姓名)或?qū)ο蟮淖R別,其作為字幕覆蓋在視頻輸出上。在移動設(shè)備210a、210b、210c上的虛擬雙目鏡視頻顯示內(nèi)可以自動應(yīng)用(或隨使用人工控制(管理員或最終用戶)而應(yīng)用)允許基于人、對象、標(biāo)記及類似物的識別來添加和呈現(xiàn)內(nèi)容的任意數(shù)量的增強(qiáng)現(xiàn)實技術(shù)。
例如,增強(qiáng)現(xiàn)實內(nèi)容可以根據(jù)用戶在虛擬雙目鏡視頻顯示中應(yīng)用的特定變焦級別來定制和顯示。在這樣的示例中,某些增強(qiáng)現(xiàn)實內(nèi)容可以僅在對特定特征變焦拉近(或特定特征在移動視頻屏幕內(nèi)明顯可見)時添加和顯示,以提供關(guān)于某些特征的更多信息,因為這些特征在視頻顯示中變得更突出。采用相似方式,這樣的增強(qiáng)現(xiàn)實內(nèi)容可以在變焦推遠(yuǎn)視頻流中的對象或搖攝到視頻流中的對象時被移除或切換。
在另外的示例中,相應(yīng)設(shè)備210a、210b、210c處的虛擬雙目鏡視頻輸出可以根據(jù)觀眾的位點以及觀眾的移動設(shè)備210a、210b、210c的位點和取向來定制。觀眾的移動設(shè)備210a、210b、210c的大致位點可以通過到例如已知接入點布局中的特定wi-fi接入點240a、240b、240c的連接來推導(dǎo)。在其他示例中,觀眾的移動設(shè)備210a、210b、210c的大致位點可以通過相對于一個或多個接入點的信號強(qiáng)度或?qū)τ趶亩鄠€wi-fi接入點240a、240b、240c接收的信號或信息的比較而應(yīng)用的三角測量或三邊測量技術(shù)來推導(dǎo)。在其他示例中,觀眾的大致位點可以連同低能量藍(lán)牙(bluetoothlowenergy)信標(biāo)、rfid標(biāo)簽或其他臨時或永久位點標(biāo)記來確定。
在另外的示例中,觀眾相對于所捕捉的場景的位點可以連同位點確定(例如,從wi-fi接入點240a、240b、240c)的組合以及從移動設(shè)備直接在觀眾的位點處捕捉的視頻或靜態(tài)圖像中所觀察的位點標(biāo)記的檢測而確定。例如定位在觀眾遠(yuǎn)處的移動設(shè)備210a、210b、210c(例如移動設(shè)備210a、210b、210c位于觀眾與待觀察的對象之間)的拍攝裝置可以捕捉視場的圖像。該圖像可以捕捉若干位點標(biāo)記,例如放置在舞臺上、特定表演者附近、體育場地的限定區(qū)處及類似物的標(biāo)記。然后可以檢測標(biāo)記并且在使觀眾的特定視角與視場中(以及觀眾的限定觀察區(qū)內(nèi))的感興趣區(qū)相關(guān)方面使用它們??梢姌?biāo)記的數(shù)字圖像可以在一定時間間隔、在設(shè)備的每個移動后(或在設(shè)備的一系列移動后)及類似物期間被連續(xù)捕捉并且處理。標(biāo)記數(shù)字圖像的處理和位點協(xié)調(diào)可以在移動設(shè)備210a、210b、210c處或在服務(wù)器處的位點處理部件處執(zhí)行。
圖3提供根據(jù)示例對表演區(qū)的視頻所提供的交互式虛擬雙目鏡視頻輸出的視頻捕捉和網(wǎng)絡(luò)傳送位點的系統(tǒng)圖300的圖示。在系統(tǒng)圖300內(nèi),表演區(qū)310(例如,音樂、戲劇或其他表演的舞臺)用定位在例如舞臺角落的多個舞臺標(biāo)記311、312、313、314來識別。
在表演區(qū)310前面,對觀眾這樣的受眾限定三個座位區(qū)350、360、370。這三個座位區(qū)350、360、370分別對應(yīng)于位于座位區(qū)內(nèi)或靠近座位區(qū)(例如,在后面、上面)的三個uhd視頻拍攝裝置320a、320b、320c。uhd視頻拍攝裝置320a、320b、320c例如可以定位在指向表演區(qū)310的視線內(nèi)而在三個座位區(qū)350、360、370內(nèi)的觀眾這樣的受眾沒有遭遇障礙。
多個wi-fi接入點進(jìn)一步位于三個座位區(qū)350、360、370中的每個內(nèi)。例如,座位區(qū)350包括wi-fi接入點351、352、353;座位區(qū)360包括wi-fi接入點361、362、363;座位區(qū)370包括wi-fi接入點371、372、373。相應(yīng)wi-fi接入點可以具有重疊覆蓋范圍,但一般定位成向與uhd視頻拍攝裝置關(guān)聯(lián)的特定座位區(qū)內(nèi)的用戶提供最強(qiáng)信號(以及最大可能的覆蓋和網(wǎng)絡(luò)連接)。如此,特定移動設(shè)備的位點可以基于移動設(shè)備到位于已知座位區(qū)中的已知wi-fi接入點的連接來確定。
流播服務(wù)器330配置成基于座位區(qū)350、360或370內(nèi)觀眾的移動設(shè)備的位點以及觀眾的移動設(shè)備到相應(yīng)wi-fi接入點的連接從相應(yīng)視頻拍攝裝置向連接到各種wi-fi接入點的觀眾提供視頻。wi-fi接入點名稱或服務(wù)集標(biāo)識符例如與移動設(shè)備位點的相關(guān)性可以用于選擇定位在wi-fi接入點的覆蓋區(qū)內(nèi)或鄰近該覆蓋區(qū)定位的相關(guān)拍攝裝置(例如對應(yīng)于座位或觀看區(qū)的拍攝裝置)。因此,移動設(shè)備所接入的特定wi-fi接入點可以提供觀眾位點的粗略近似,并且從而,可以用于從uhd視頻拍攝裝置選擇合適的視頻饋送來流播到移動設(shè)備。在一些示例中,特定uhd視頻拍攝裝置和高清晰度視頻流可以根據(jù)相應(yīng)wi-fi接入點的連接而自動確定和開始。
如示出的,表演區(qū)310包括位于舞臺周圍的一系列紅外(ir)標(biāo)記311、312、313、314(例如,紅外光)。這些標(biāo)記311、312、313、314可以連同虛擬雙目鏡視頻顯示的另外的位點和重定位一起使用,來匹配觀眾期望的相對于移動設(shè)備的位置和三維取向的視頻搖攝和變焦級別。例如,標(biāo)記可以由移動設(shè)備檢測以基于相對于觀眾的視場和移動設(shè)備(例如,在空中、保持在觀眾前面)的特定取向(例如,姿勢)自動搖攝或變焦高清晰度視頻流。因此,高清晰度視頻流的自動搖攝和變焦可以用于有效仿效“雙目鏡”效應(yīng),其匹配或接近類似于觀眾的視場和人類感知環(huán)境。
在另外的示例中,標(biāo)記311、312、313、314不需要使用ir但可以牽涉其他彩色標(biāo)記、條形碼或qr碼,或移動設(shè)備可識別的其他人類或機(jī)器可檢測標(biāo)記或?qū)ο?。因此,對于視頻流可以自動出現(xiàn)(或為了輔助手動控制而出現(xiàn))各種重定位、變焦、搖攝和視頻增強(qiáng)或修改技術(shù)。在其他示例中,其他機(jī)器到機(jī)器通信和對象檢測技術(shù)(其包括面部檢測)可以用于協(xié)調(diào)移動設(shè)備相對于期望視頻輸出的取向以及對視頻流的對應(yīng)變焦、搖攝和其他修改。例如,移動設(shè)備可以使用人類輪廓或面部檢測技術(shù)來識別該人(例如,特定音樂家)位于場景內(nèi),伴隨的高清晰度視頻流可以變焦并且集中在該特定人上。
在一些示例中,uhd視頻拍攝裝置320a、320b、320c位于臨時或永久固定位置處,以允許多個用戶訪問通常放置的視頻饋送。在其他示例中,一個或多個uhd視頻拍攝裝置320a、320b、320c可以由于管理員命令或連同觀眾反饋或控制而重定位。例如,uhd視頻拍攝裝置320a、320b、320c的定位可以基于移動設(shè)備對表演區(qū)310的相對位點、位于受眾觀看區(qū)的不同區(qū)內(nèi)的觀眾數(shù)量、觀看或選擇視頻流部分的用戶活動及類似物而改變。在重定位uhd視頻拍攝裝置320a、320b、320c的情況下可以出現(xiàn)自適應(yīng)處理來修改視頻流以及視頻在移動設(shè)備上的顯示。
在另外的示例中,虛擬雙目鏡視頻輸出進(jìn)一步基于觀眾活動以及與觀眾的移動設(shè)備的交互而可定制。例如,虛擬雙目鏡視頻輸出可以對變焦觀眾所請求的變焦因子來定制。因此,觀眾可以用移動設(shè)備獲得虛擬變焦體驗同時能夠同步感知實時事件。例如,在其他示例中,用戶可希望將感興趣區(qū)的視角從其他位點切換以從另一個觀眾角度或座位區(qū)側(cè)觀看感興趣區(qū)??梢韵蛴^眾呈現(xiàn)各種用戶界面命令以允許在不同uhd視頻拍攝裝置和視角之中的饋送之間切換。在一些示例中,在移動設(shè)備上執(zhí)行視頻的變焦、搖攝、裁剪或其他顯示修改以對向多個用戶廣播的視頻流執(zhí)行顯示修改。在其他示例中,在服務(wù)器側(cè)上執(zhí)行視頻的變焦、搖攝、裁剪或其他顯示修改以對一個或有限數(shù)量的用戶所定制的視頻流執(zhí)行顯示修改。
圖4圖示根據(jù)示例對于交互式虛擬雙目鏡視頻輸出的視頻和信息數(shù)據(jù)的數(shù)據(jù)傳送圖400。如示出的,移動設(shè)備410可以連接到wi-fi接入點430來接收音頻/視頻數(shù)據(jù)流432(例如,使用在上文參考圖3描述的wi-fi視頻流播技術(shù))。在一些示例中,音頻/視頻數(shù)據(jù)流432專門提供沒有音頻內(nèi)容的基于視頻或圖像的內(nèi)容。
音頻/視頻數(shù)據(jù)流432到相應(yīng)移動設(shè)備的傳送可以關(guān)于個體數(shù)據(jù)連接、到用戶組的數(shù)據(jù)連接、視頻數(shù)據(jù)流的組播和廣播及類似物來進(jìn)行。音頻/視頻數(shù)據(jù)流432可以伴隨著接收內(nèi)容信息數(shù)據(jù)424,例如增強(qiáng)現(xiàn)實信息內(nèi)容、促銷和廣告信息或從內(nèi)部服務(wù)器或從基于互聯(lián)網(wǎng)的源獲得的類似信息。移動設(shè)備410然后可以輸出音頻/視頻數(shù)據(jù)流432和內(nèi)容信息數(shù)據(jù)424(其包括在增強(qiáng)現(xiàn)實視角中內(nèi)容信息數(shù)據(jù)424的覆蓋)。
音頻/視頻數(shù)據(jù)流432還可以伴隨著接收位點數(shù)據(jù)422。位點數(shù)據(jù)422可以提供在顯示或控制音頻/視頻數(shù)據(jù)流432的輸出中使用的特定信息,其包括使用數(shù)據(jù)來提供改變移動設(shè)備410上輸出的視頻內(nèi)容的視角的選項。另外,位點數(shù)據(jù)442還可以連同低能量藍(lán)牙(blf)信標(biāo)440或像近場通信(nfc)設(shè)備一起提供。例如,來自這樣的信標(biāo)/nfc設(shè)備的信息可以與位點服務(wù)(本地或遠(yuǎn)程操作)一起使用以用于協(xié)調(diào)標(biāo)識符與特定位點,在控制或影響移動設(shè)備410上顯示的視頻流中使用。關(guān)于信標(biāo)440的信息例如可以用于對特定移動設(shè)備識別特定視頻饋送或視頻視角。
在圖4中描繪的示例中,可以接收音頻/視頻內(nèi)容流連同組播音頻/視頻數(shù)據(jù)流426。例如,組播音頻/視頻數(shù)據(jù)流426可以從經(jīng)由無線廣域網(wǎng)420(例如長期演進(jìn)(lte)或另一個3g/4g蜂窩數(shù)據(jù)網(wǎng)絡(luò))向多個移動設(shè)備用戶廣播的內(nèi)容的多用戶廣播技術(shù)來提供。如在圖4中進(jìn)一步示出的,移動設(shè)備410還可以接收內(nèi)容信息數(shù)據(jù)424和位點數(shù)據(jù)422連同無線廣域網(wǎng)420。例如,由移動設(shè)備410經(jīng)由互聯(lián)網(wǎng)連接通過無線廣域網(wǎng)420獲得的信息可以用于補(bǔ)充來自wi-fi接入點430的視頻流的顯示和回放。
關(guān)于視頻流顯示使用的數(shù)據(jù)處理可以牽涉客戶端側(cè)和服務(wù)器側(cè)處理的許多可能性。例如,在成千上萬用戶可試圖使用虛擬雙目鏡視頻顯示的大型環(huán)境中,這些用戶中的每個將數(shù)據(jù)(例如,位點標(biāo)識符,或來自拍攝裝置的靜態(tài)圖像,其包括標(biāo)記)傳遞回到服務(wù)器以用于處理,這可能不可行。在這樣的環(huán)境中,每個個體設(shè)備可以配置成確定用戶的位點,并且然后執(zhí)行移動設(shè)備位點與合適的變焦、搖攝和視角增強(qiáng)之間的協(xié)調(diào)以應(yīng)用于高清晰度視頻流。
作為另外的示例,為了減少上傳到服務(wù)器的數(shù)據(jù)量,高質(zhì)量、高分辨率視頻流可以在單一時間廣播和組播到大的用戶組(或甚至所有用戶)。位點信息與視頻顯示參數(shù)的協(xié)調(diào)可以在客戶端側(cè)出現(xiàn),其中個體設(shè)備確定特定視角以用虛擬雙目鏡視頻顯示來渲染。例如,圖像捕捉和識別(其包括位點標(biāo)記、某些對象或人的識別)可以用于使大的視頻流的顯示重新取向至僅選擇的視頻流的增強(qiáng)部分(例如,搖攝和變焦拉近)。
虛擬雙目鏡視頻顯示的使用可以連同專用軟件、硬件和外設(shè)提供。例如,與虛擬雙目鏡視頻顯示關(guān)聯(lián)的功能性可以連同專用軟件應(yīng)用(例如,移動app)使用,該專用軟件應(yīng)用可以在主題表演之前或期間安裝在移動設(shè)備上。該軟件應(yīng)用可以用于協(xié)調(diào)視頻流并且就視角信息來訪問拍攝裝置。與虛擬雙目鏡視頻顯示關(guān)聯(lián)的功能性還可以合并為通信程序的部分,例如即時消息、聊天或視頻會議程序。在其他示例中,與虛擬雙目鏡視頻顯示關(guān)聯(lián)的功能性可以集成到移動設(shè)備的操作系統(tǒng)功能性內(nèi)。
圖5圖示根據(jù)示例對于移動設(shè)備處的虛擬雙目鏡視頻輸出的回放方法的流程圖500。該方法操作可以包括基于位點的操作,用于確定移動設(shè)備的位點(操作510),并且使移動設(shè)備的位點與特定視頻流相關(guān)(操作520)。例如,基于位點的操作可以連同特定wi-fi接入點的識別或信標(biāo)或rfid標(biāo)簽標(biāo)識符對遠(yuǎn)程服務(wù)器的提供來執(zhí)行。位點信息可以用于請求與從感興趣位點或區(qū)的視角相關(guān)的特定視頻流。響應(yīng)于該請求,特定視頻流可以無線傳送到移動設(shè)備(并且在其處接收)(操作530)。
來自視頻流的視頻輸出的定位和搖攝、變焦和重新取向以匹配從移動設(shè)備的視角可以連同位點識別、圖像匹配或使移動設(shè)備位點(和用戶視角)與視頻流的一部分相關(guān)的其他技術(shù)來進(jìn)行。例如,移動設(shè)備可以執(zhí)行操作來識別感興趣對象或區(qū)附近可見的特定標(biāo)記(操作540),并且使檢測的感興趣對象或區(qū)與視頻流的選擇部分相關(guān)(操作550)。檢測的感興趣對象或區(qū)可以用于集中、搖攝、變焦或另外修改視頻流的顯示輸出,例如在移動設(shè)備上僅顯示視頻流的選擇部分(操作560)。
如在流程圖500中進(jìn)一步圖示的,可以向移動設(shè)備提供例如信息覆蓋(例如,增強(qiáng)現(xiàn)實內(nèi)容的)等額外信息并且將其顯示(操作570)。例如,該信息覆蓋可以放置在變焦拉近且搖攝到特定人、對象或場景的視頻顯示的選擇部分上。
圖6圖示關(guān)于虛擬雙目鏡視頻輸出流播視頻的方法的流程圖600,該方法用在視頻處理服務(wù)器處執(zhí)行的操作來執(zhí)行。將理解,流程圖600的操作可以在單個服務(wù)器處、基于云的或分布式服務(wù)器處或通過對視頻處理功能性協(xié)調(diào)多個計算設(shè)備或平臺而進(jìn)行。
如圖示的,方法操作包括對于特定視頻流選擇的基于位點的操作。該選擇可以從隨接收對視頻流請求(操作610)和接收移動設(shè)備的位點信息(操作620)而獲得的數(shù)據(jù)執(zhí)行?;谖稽c信息,可以確定移動設(shè)備的位點并且使其與選擇視頻流相關(guān)(操作630),該選擇視頻流定位在移動設(shè)備位點處的用戶的視場中。選擇視頻流然后可以傳送到移動設(shè)備用于輸出(操作640)。
另外,信息覆蓋可以連同視頻流來生成和產(chǎn)生。例如,服務(wù)器可以接收與視頻流的選擇部分有關(guān)的額外位點或視覺信息(例如,來自位點標(biāo)記的標(biāo)識符)(操作650),例如選擇視頻流的增強(qiáng)變焦拉近、搖攝部分。從該位點信息可以對顯示的視頻流的選擇部分生成信息覆蓋,例如增強(qiáng)現(xiàn)實標(biāo)簽、識別信息及類似物(操作660)。該信息覆蓋可以傳送到移動設(shè)備(操作670)以作為例如顯示的視頻流上方的層而在移動設(shè)備上輸出。
圖7圖示根據(jù)示例對于交互式虛擬雙目鏡視頻輸出的電子系統(tǒng)的部件的框圖。如示出的,電子系統(tǒng)圖示為移動計算設(shè)備710,其通過無線接入點的集和聯(lián)網(wǎng)設(shè)備740電子連接到視頻流播服務(wù)器730。視頻流播服務(wù)器730可以與拍攝裝置控制服務(wù)器750、管理設(shè)備760和拍攝裝置視頻源770電子通信。電子系統(tǒng)還可以包括位點標(biāo)記780或與之一起操作。將理解電子系統(tǒng)的操作可以包括額外計算設(shè)備、服務(wù)器和聯(lián)網(wǎng)設(shè)備,以及在電子系統(tǒng)中操作的部件之間的備選聯(lián)網(wǎng)連接。
如示出的,移動計算設(shè)備710(例如,智能電話或平板)包括用于執(zhí)行經(jīng)由無線接入點和聯(lián)網(wǎng)設(shè)備740中的一個或多個從視頻流播服務(wù)器730接收的視頻流的處理的一系列模塊(例如,軟件、硬件或軟件配置的硬件)。移動計算設(shè)備的模塊可以包括用戶交互模塊712、視頻處理模塊716、運動處理模塊718、顯示模塊720和無線聯(lián)網(wǎng)模塊722。移動計算設(shè)備710可以進(jìn)一步包括拍攝裝置714和關(guān)聯(lián)的拍攝裝置圖像捕捉模塊,以及顯示屏,例如配置成接收手勢的觸控顯示屏。
用戶交互模塊712可以配置成接收用戶命令來選擇、開始或停止在移動計算設(shè)備710上的視頻顯示輸出中提供的交互式視頻饋送。用戶交互模塊712可以包括用于接收交互和命令來控制顯示模塊720上的視頻顯示輸出的特征,這些交互和命令可以包括對于以下的交互和命令:搖攝和變焦視頻(其包括通過使用觸屏手勢)、提供分屏查看、鎖定或凍結(jié)關(guān)于特定人或?qū)ο蟮囊曨l顯示及類似物。
顯示模塊720可以配置成用于顯示移動計算設(shè)備指向或面對的視場中的特定部分的視頻。例如,視場中的該特定部分可以連同使用拍攝裝置714(用于從移動計算設(shè)備710的視角捕捉本地拍攝裝置圖像)并且連同本地拍攝裝置圖像與視頻流的相關(guān)性來確定。
視頻處理模塊716可以配置成用于接收視頻流、確定與本地拍攝裝置圖像的相關(guān)性、對視頻實現(xiàn)變焦、搖攝和其他增強(qiáng)效果以及提供對于顯示模塊720的輸出。運動處理模塊718可以配置成用于適配變焦/搖攝視頻的顯示,其包括處理移動計算設(shè)備相對于所觀察的位點標(biāo)記的移動和運動輸入和處理如由加速計和陀螺儀檢測的移動計算設(shè)備的移動以及其他機(jī)制。運動處理模塊718可以連同視頻處理模塊716和顯示模塊720一起操作以在移動計算設(shè)備移動并且被用戶重定位時實現(xiàn)對視頻顯示的交互式改變。
為了經(jīng)由無線網(wǎng)絡(luò)接收視頻流,移動計算設(shè)備710的無線聯(lián)網(wǎng)模塊722可以包括建立和管理與無線網(wǎng)絡(luò)的連接的功能性。例如通過報告接收的wi-fi信號的設(shè)置和質(zhì)量,或通過向服務(wù)器提供原始數(shù)據(jù)(或拍攝裝置圖像)來計算移動計算設(shè)備的大致位點,無線聯(lián)網(wǎng)模塊722還可以提供功能性來指示觀看或座位區(qū)中移動計算設(shè)備710的大致位點。
如示出的,視頻流播服務(wù)器730包括用于執(zhí)行視頻流的處理和對相應(yīng)移動計算設(shè)備的視頻流供應(yīng)的一系列模塊(例如,軟件、硬件或軟件配置的硬件)。視頻流播服務(wù)器730的模塊可以包括視頻處理模塊732、位點處理模塊734、視頻內(nèi)容模塊736和視頻流傳送模塊738。視頻流播服務(wù)器730從視頻源770接收不同的視頻流,并且將最合適的流分配給移動計算設(shè)備中的每個(基于移動計算設(shè)備的位點和移動計算設(shè)備的觀看角度)。
視頻處理模塊732可以用于接收和處理多個視頻流,并且根據(jù)移動計算設(shè)備710的位點、設(shè)備特性或交互來分配最合適的視頻流。視頻處理模塊732可以連同位點處理模塊734一起操作。位點處理模塊734可以用于獲得映射或已知環(huán)境中特定移動計算設(shè)備(或多個設(shè)備)的位點并且使其與特定視頻饋送相關(guān)。位點處理模塊734還可以用于對移動計算設(shè)備710提供通用位點信息,或?qū)τ谔囟ㄒ曨l饋送的位點依賴型顯示設(shè)定值。
視頻內(nèi)容模塊736可以關(guān)于增強(qiáng)現(xiàn)實或其他內(nèi)容覆蓋技術(shù)提供額外內(nèi)容。例如,視頻內(nèi)容模塊736可以用于提供在視頻饋送中描繪的對象和人的額外元數(shù)據(jù)層。這些元數(shù)據(jù)層可以包括例如字幕、歌詞、表演者或運動員信息及類似物等信息。
視頻流傳送模塊738可以適于采用一個或多個流播格式和編解碼器提供相應(yīng)視頻流(和伴隨的對于視頻的廣播技術(shù))和伴隨的增廣視頻信息。視頻流傳送模塊738還可以收集對于由藝術(shù)家、演出運營商及類似物待處理和使用的視頻饋送的使用信息。
在另外的示例中,視頻流播服務(wù)器730可以用于提供對于特定設(shè)備或用戶的已支付或受控訪問內(nèi)容。視頻流播服務(wù)器730還可以與虛擬雙目鏡視頻輸出的基于服務(wù)的提供的預(yù)訂特征和記賬一起集成。另外,視頻流播服務(wù)器730可以提供加密視頻饋送,其中預(yù)訂用戶使用解密密鑰來訪問廣播視頻流。
無線接入點和聯(lián)網(wǎng)設(shè)備740可以包括配置成建立與相應(yīng)移動設(shè)備的無線聯(lián)網(wǎng)連接的各種wi-fi傳送裝備和多個設(shè)備。在一些示例中,無線接入點可以設(shè)置在多個位點中使得所有觀眾設(shè)備在至少一個接入點的范圍內(nèi),并且確保約20mbps的下載流播的信號質(zhì)量。
系統(tǒng)的其他部件允許進(jìn)一步控制和定制由視頻流播服務(wù)器730傳送的視頻輸出。例如,拍攝裝置控制服務(wù)器750可以包括對于視頻源770的管理員、表演者或外部控制(其包括重定位)的額外功能性。管理設(shè)備760可以包括對于系統(tǒng)使用和操作的管理員監(jiān)測和控制的功能性。在另外的示例中,可以包括對于視頻流的特定控制覆蓋內(nèi)容并且通過使用管理設(shè)備760來修改它。
視頻源770可以包括一個或多個視頻拍攝裝置,例如uhd視頻拍攝裝置。視頻源可以設(shè)置成從演出或表演空間的深遠(yuǎn)背景捕捉視頻,并且將視頻流傳送到視頻流播服務(wù)器730。視頻源的數(shù)量可以取決于劇院大小,因為增加拍攝裝置和拍攝裝置視角的數(shù)量可以使觀眾體驗更加真實。然而在例如戶外視點等一些環(huán)境中,一個拍攝裝置可以用于生成視頻流。在一些示例中,例如在向具有較低分辨率、帶寬或處理能力的顯示設(shè)備提供視頻時,可以使用標(biāo)準(zhǔn)清晰度或次hd視頻拍攝裝置。
位點標(biāo)記780可以實現(xiàn)為紅外標(biāo)記、電子信標(biāo)、人類或機(jī)器可讀標(biāo)識符或其他類型的可檢測對象。例如,紅外標(biāo)記集可以定位在舞臺或表演區(qū)周圍,從而產(chǎn)生對人眼不可見但對所有智能電話拍攝裝置可見的光。如同樣在上文論述的,位點標(biāo)記780的使用可以被移動計算設(shè)備710的操作所替代或補(bǔ)充以在內(nèi)部拍攝裝置的圖像與廣播視頻之間相關(guān),并且使圖示的圖像對準(zhǔn)。
盡管本文描述的示例中的許多指的是在音樂會、體育賽事和類似表演中使用移動設(shè)備、拍攝裝置和視頻流播操作,將理解,這些視頻技術(shù)的可適用性可以應(yīng)用于任意數(shù)量的設(shè)定,其中遠(yuǎn)距離對象的拍攝裝置視角可以傳遞給用戶人員。盡管示例中的許多在本文參考移動設(shè)備(例如智能電話)提供,將理解虛擬雙目鏡技術(shù)可以與其他類型的計算機(jī)、平板、可穿戴設(shè)備(例如,智能眼鏡)以及具有顯示功能性的設(shè)備一起使用。此外,本文描述的位點和無線網(wǎng)絡(luò)傳送技術(shù)不限于使用無線局域網(wǎng)(例如ieee802.11網(wǎng)絡(luò)),而可以隨使用任意數(shù)量的短域、局域和廣域無線通信技術(shù)而進(jìn)一步應(yīng)用。
用于促進(jìn)和執(zhí)行本文描述的技術(shù)的實施例可以在硬件、固件和軟件中的一個或組合中實現(xiàn)。實施例還可以實現(xiàn)為存儲在至少一個機(jī)器可讀存儲設(shè)備上的指令,其可以由至少一個處理器讀取和執(zhí)行來執(zhí)行本文描述的操作。機(jī)器可讀存儲設(shè)備可以包括用于采用機(jī)器(例如,計算機(jī))可讀形式存儲信息的任何非暫時性機(jī)構(gòu)。例如,機(jī)器可讀存儲設(shè)備可以包括只讀存儲器(rom)、隨機(jī)存取存儲器(ram)、磁盤存儲介質(zhì)、光存儲介質(zhì)、閃速存儲器設(shè)備以及其他存儲設(shè)備和介質(zhì)。
如本文描述的示例可以包括邏輯或許多部件、模塊或機(jī)構(gòu)或可以在它們上操作。模塊可以是通信地耦合于一個或多個處理器以便實施本文描述的操作的硬件、軟件或固件。模塊可以是硬件模塊,并且如此模塊可以被認(rèn)為是能夠執(zhí)行規(guī)定操作的有形實體并且可以采用某一方式配置或設(shè)置。在示例中,電路可以采用規(guī)定方式設(shè)置(例如,在內(nèi)部或關(guān)于外部實體,例如其他電路)為模塊。在示例中,一個或多個計算機(jī)系統(tǒng)(例如,獨立、客戶端或服務(wù)器計算機(jī)系統(tǒng))或一個或多個硬件處理器的整體或部分可以由固件或軟件(例如,指令、應(yīng)用部分或應(yīng)用)配置為操作成執(zhí)行規(guī)定操作的模塊。在示例中,軟件可以駐存在機(jī)器可讀介質(zhì)上。在示例中,軟件在由模塊的底層硬件執(zhí)行時促使硬件執(zhí)行規(guī)定操作。因此,術(shù)語硬件模塊理解成包含有形實體,即物理構(gòu)造、專門配置(例如,硬接線)或暫時(例如,短暫)配置(例如,被編程)成采用規(guī)定方式操作或執(zhí)行本文描述的任何操作的部分或全部的實體。考慮到其中暫時配置模塊的示例,這些模塊中的每個不需要在任一時刻被例示。例如,在模塊包括使用軟件配置的通用硬件處理器的情況下;通用硬件處理器可以在不同時間配置為相應(yīng)的不同模塊。軟件因此可以配置硬件處理器例如以便在一個時間實例構(gòu)成特定模塊并且在不同時間實例構(gòu)成不同模塊。模塊也可以是軟件或固件模塊,其操作成執(zhí)行本文描述的方法論。
圖8是圖示根據(jù)示例實施例采用計算機(jī)系統(tǒng)800的示例形式的機(jī)器的框圖,指令集或序列可以在該計算機(jī)系統(tǒng)800內(nèi)執(zhí)行以促使該機(jī)器執(zhí)行本文論述的方法論中的任一個。計算機(jī)系統(tǒng)機(jī)器800可以由移動設(shè)備120、210、410、710、流播服務(wù)器230、330、監(jiān)測和增強(qiáng)現(xiàn)實站250、視頻拍攝裝置的部件、無線網(wǎng)絡(luò)接入點、信標(biāo)和位點設(shè)備以及無線廣播硬件或本文描述或提及的任何其他電子處理或計算平臺體現(xiàn)。此外,本文描述的機(jī)動車輛中包括的先進(jìn)駕駛員輔助系統(tǒng)子系統(tǒng)可以包括與下面描述的計算機(jī)系統(tǒng)大致相似地運作的處理系統(tǒng)。
在備選實施例中,機(jī)器作為獨立設(shè)備操作或可以連接(例如,聯(lián)網(wǎng))到其他機(jī)器。在聯(lián)網(wǎng)部署中,機(jī)器可以在服務(wù)器-客戶端網(wǎng)絡(luò)環(huán)境中以服務(wù)器或客戶端機(jī)器的身份操作,或它可以充當(dāng)對等(或分布式)網(wǎng)絡(luò)環(huán)境中的對等機(jī)器。機(jī)器可以是車載系統(tǒng)、可穿戴設(shè)備、個人計算機(jī)(pc)、平板pc、混合平板、個人數(shù)字助理(pda)、移動電話或能夠執(zhí)行規(guī)定該機(jī)器待采取的動作的指令(相繼或用別的方式)的任何機(jī)器。此外,盡管僅圖示單個機(jī)器,術(shù)語“機(jī)器”還應(yīng)被認(rèn)為包括獨立或聯(lián)合執(zhí)行指令集(或多個集)來執(zhí)行本文論述的方法論中的任一個或多個的機(jī)器的任何集合。相似地,術(shù)語“基于處理器的系統(tǒng)”應(yīng)被認(rèn)為包括由處理器(例如,計算機(jī))控制或操作來獨立或聯(lián)合執(zhí)行指令以執(zhí)行本文論述的方法論中的任一個或多個的一個或多個機(jī)器的任何集。
示例計算機(jī)系統(tǒng)800包括至少一個處理器802(例如,中央處理單元(cpu)、圖形處理單元(gpu)或兩者兼而有之、處理器核、計算節(jié)點,等)、主存儲器804和靜態(tài)存儲器806,其經(jīng)由互連808(例如,鏈路、總線等)而彼此通信。計算機(jī)系統(tǒng)800可以進(jìn)一步包括視頻顯示單元810、字母數(shù)字輸入設(shè)備812(例如,鍵盤)和用戶界面(ui)導(dǎo)航設(shè)備814(例如,鼠標(biāo))。在一個實施例中,視頻顯示單元810、輸入設(shè)備812和用戶界面(ui)導(dǎo)航設(shè)備814并入觸屏顯示器。計算機(jī)系統(tǒng)800可以另外包括存儲設(shè)備816(例如,驅(qū)動單元)、信號生成設(shè)備818(例如,揚聲器)、輸出控制器832、功率管理控制器834、網(wǎng)絡(luò)接口設(shè)備820(其可以包括以下或可操作地與之通信:一個或多個天線830、收發(fā)器或其他無線通信硬件)和一個或多個傳感器826,例如全球定位系統(tǒng)(gps)傳感器、羅盤、加速計、位點傳感器或其他傳感器。
存儲設(shè)備816包括機(jī)器可讀介質(zhì)822,在其上存儲數(shù)據(jù)結(jié)構(gòu)和指令824(例如,軟件)的一個或多個集,這些數(shù)據(jù)結(jié)構(gòu)和指令體現(xiàn)本文論述的方法論或功能中的一個或多個或由其所使用。指令824在由計算機(jī)系統(tǒng)800執(zhí)行期間還可以駐存(完全或至少部分)在主存儲器804、靜態(tài)存儲器806內(nèi)和/或處理器802內(nèi),其中主存儲器804、靜態(tài)存儲器806和處理器802也構(gòu)成機(jī)器可讀介質(zhì)。
盡管機(jī)器可讀介質(zhì)822在示例實施例中圖示為單個介質(zhì),術(shù)語“機(jī)器可讀介質(zhì)”可以包括存儲一個或多個指令824的單個介質(zhì)或多個介質(zhì)(例如,集中式或分布式數(shù)據(jù)庫,和/或關(guān)聯(lián)的高速緩存和服務(wù)器)。術(shù)語“機(jī)器可讀介質(zhì)”還應(yīng)被認(rèn)為包括能夠存儲、編碼或承載指令以供機(jī)器執(zhí)行并且促使機(jī)器執(zhí)行本公開的方法論中的任一個或多個或能夠存儲、編碼或承載由這樣的指令所使用或與之關(guān)聯(lián)的數(shù)據(jù)結(jié)構(gòu)的任何有形介質(zhì)。術(shù)語“機(jī)器可讀介質(zhì)”因此應(yīng)被認(rèn)為包括但不限于固態(tài)存儲器,以及光和磁介質(zhì)。機(jī)器可讀介質(zhì)的特定示例包括非暫時性存儲器,其通過示例包括但不限于:半導(dǎo)體存儲器設(shè)備(例如,電可編程只讀存儲器(eprom)、電可擦除可編程只讀存儲器(eeprom))和閃速存儲器設(shè)備;磁盤,例如內(nèi)部硬盤和可移除盤;磁光盤;以及cd-rom和dvd-rom盤。
指令824可以進(jìn)一步通過通信網(wǎng)絡(luò)828使用傳送介質(zhì)經(jīng)由網(wǎng)絡(luò)接口設(shè)備820使用許多眾所周知的傳輸協(xié)議(例如,http)中的任一個來傳送或接收。通信網(wǎng)絡(luò)的示例包括局域網(wǎng)(lan)、廣域網(wǎng)(wan)、因特網(wǎng)、移動電話網(wǎng)絡(luò)、普通老式電話(pots)網(wǎng)絡(luò)和無線數(shù)據(jù)網(wǎng)絡(luò)(例如,wi-fi、3g和4glte/lte-a或wimax網(wǎng)絡(luò))。術(shù)語“傳送介質(zhì)”應(yīng)被認(rèn)為包括能夠存儲指令、對其編碼或承載指令以供機(jī)器執(zhí)行的任何無形介質(zhì),并且包括數(shù)字或模擬通信信號或其他無形介質(zhì)用于促進(jìn)這樣的軟件的通信。
目前描述的方法、系統(tǒng)和設(shè)備實施例中的額外示例包括下面的非限制性配置。下面的非限制性示例的每個可以獨立存在,或可以以任何排列或組合與在下文或在整個本公開中提供的其他示例中的任何一個或多個組合。
示例1包括用于提供虛擬雙目鏡視頻顯示的移動計算設(shè)備的主旨(例如由設(shè)備、裝置、機(jī)器或機(jī)器可讀介質(zhì)體現(xiàn)),該移動計算設(shè)備包括:處理器;無線聯(lián)網(wǎng)模塊,用于與該處理器一起操作,該無線聯(lián)網(wǎng)模塊經(jīng)由無線網(wǎng)絡(luò)從視頻流播服務(wù)器接收選擇的視頻數(shù)據(jù)的流;視頻處理模塊,用于與處理器一起操作,該視頻處理模塊處理來自視頻數(shù)據(jù)流的視頻內(nèi)容,其中選擇的視頻數(shù)據(jù)流基于位于視頻數(shù)據(jù)中捕捉的場景附近的觀看區(qū)中移動計算設(shè)備的位點來選擇;和顯示模塊,用于與處理器一起操作,該顯示模塊在移動計算設(shè)備的顯示屏上輸出視頻內(nèi)容的選擇增強(qiáng)部分,該選擇增強(qiáng)部分基于移動計算設(shè)備相對于視頻數(shù)據(jù)中捕捉的場景的取向來確定。
在示例2中,示例1的主旨可以包括:經(jīng)由處理器實現(xiàn)的用戶交互模塊,該用戶交互模塊接收用戶命令來實行顯示屏上視頻內(nèi)容的選擇增強(qiáng)部分的輸出的控制,其中視頻內(nèi)容的選擇增強(qiáng)部分提供來自視頻數(shù)據(jù)流的視頻內(nèi)容的變焦和搖攝的部分。
在示例3中,示例1至2中的任一個的主旨可以包括,經(jīng)由處理器實現(xiàn)的運動處理模塊,該運動處理模塊基于移動計算設(shè)備所檢測的至少一個運動輸入來改變顯示屏上視頻內(nèi)容的選擇增強(qiáng)部分。
在示例4中,示例1至3中的任一個的主旨可以包括,其中無線聯(lián)網(wǎng)模塊經(jīng)由無線網(wǎng)絡(luò)根據(jù)ieee802.11無線網(wǎng)絡(luò)協(xié)議的操作接收視頻數(shù)據(jù)流,其中選擇的視頻數(shù)據(jù)的流基于移動計算設(shè)備相對于位于觀看區(qū)內(nèi)的無線網(wǎng)絡(luò)的至少一個接入點的位點來選擇,并且其中移動計算設(shè)備相對于無線網(wǎng)絡(luò)的接入點的位點的識別傳遞到視頻流播服務(wù)器來指示移動計算設(shè)備的位點。
在示例5中,示例1至4中的任一個的主旨可以包括,其中視頻處理模塊使在視頻內(nèi)容中檢測的至少一個指標(biāo)與移動計算設(shè)備相對于視頻數(shù)據(jù)中捕捉的場景的取向相關(guān)。
在示例6中,示例1至5中的任一個的主旨可以包括拍攝裝置,該拍攝裝置捕捉場景中包括至少一個指標(biāo)的至少一部分的圖像,其中視頻處理模塊使場景中包括至少一個指標(biāo)的至少該部分的圖像與視頻內(nèi)容的選擇增強(qiáng)部分相關(guān)。
在示例7中,示例1至6中的任一個的主旨可以包括,其中視頻處理模塊進(jìn)一步將拍攝裝置捕捉的場景的至少該部分的圖像與視頻數(shù)據(jù)中捕捉的場景的圖像比較并且使它們匹配,來確定移動計算設(shè)備相對于場景的取向。
示例8包括用于在移動設(shè)備處顯示流播視頻的主旨(例如方法、用于執(zhí)行動作的部件、機(jī)器可讀介質(zhì)或用于執(zhí)行的裝置,該機(jī)器可讀介質(zhì)包括指令,這些指令在由機(jī)器執(zhí)行時促使該機(jī)器執(zhí)行動作),由用該移動設(shè)備處的硬件部件執(zhí)行的操作所實現(xiàn),這些操作包括:在移動設(shè)備處訪問選擇的高清晰度視頻流,該高清晰度視頻流提供在遠(yuǎn)離移動設(shè)備并且朝向場景的感興趣區(qū)的觀看方向上捕捉的場景的高清晰度視頻;使移動設(shè)備相對于感興趣區(qū)的取向與場景的高清晰度視頻的特定變焦部分相關(guān);以及在移動設(shè)備上顯示場景的高清晰度視頻的特定變焦部分。
在示例9中,示例8的主旨可以包括,使場景的高清晰度視頻搖攝到高清晰度視頻的特定變焦部分,搖攝使用移動設(shè)備相對于感興趣區(qū)的取向來執(zhí)行;以及使場景的高清晰度視頻變焦到高清晰度視頻的特定變焦部分,變焦使用移動設(shè)備相對于感興趣區(qū)的取向來執(zhí)行。
在示例10中,示例8至9中的任一個的主旨可以包括:向遠(yuǎn)程服務(wù)器提供移動設(shè)備的位點信息,該位點信息指示在鄰近場景的觀察區(qū)中移動設(shè)備的位點;以及從多個高清晰度視頻流中的一個接收高清晰度視頻流,該高清晰度視頻流由遠(yuǎn)程服務(wù)器基于移動設(shè)備的位點信息來選擇。
在示例11中,示例8至10中的任一個的主旨可以包括,用移動設(shè)備捕捉場景的數(shù)字圖像;用移動設(shè)備檢測場景的數(shù)字圖像中的標(biāo)記;以及基于由移動設(shè)備在場景的高清晰度視頻內(nèi)檢測的標(biāo)記的位置來選擇高清晰度視頻的特定變焦部分,高清晰度視頻的特定變焦部分提供較大高清晰度視頻的子集。
在示例12中,示例8至11中的任一個的主旨可以包括,其中使移動設(shè)備的取向與高清晰度視頻的特定變焦部分相關(guān)包括使場景的數(shù)字圖像中的標(biāo)記與場景的高清晰度視頻的圖像中的標(biāo)記匹配,以在選擇高清晰度視頻的特定變焦部分中模擬從移動設(shè)備的場景的視角。
在示例13中,示例8至12中的任一個的主旨可以包括,其中標(biāo)記由定位在場景中的至少一個紅外光提供。
在示例14中,示例8至13中的任一個的主旨可以包括,其中標(biāo)記是定位在場景中的機(jī)器可讀對象,該機(jī)器可讀對象提供與相對于場景的位點關(guān)聯(lián)的標(biāo)識符。
在示例15中,示例8至14中的任一個的主旨可以包括,用移動設(shè)備捕捉場景的數(shù)字圖像;執(zhí)行場景的數(shù)字圖像中至少一個對象的圖像識別;以及基于移動設(shè)備的取向與高清晰度視頻的特定變焦部分的相關(guān)性來選擇高清晰度視頻的特定變焦部分,高清晰度視頻的該特定變焦部分提供較大高清晰度視頻的子集。
在示例16中,示例8至15中的任一個的主旨可以包括,在高清晰度視頻的特定變焦部分上顯示信息覆蓋,該信息覆蓋提供關(guān)于在高清晰度視頻的特定變焦部分中描繪的至少一個現(xiàn)實世界項的信息。
在示例17中,示例8至16中的任一個的主旨可以包括,處理關(guān)于對于移動設(shè)備的圖形用戶界面輸出所接收的至少一個用戶輸入,該至少一個用戶輸入用于:從多個高清晰度視頻流之中選擇高清晰度視頻流;執(zhí)行到場景的另一個感興趣區(qū)的場景的高清晰度視頻的搖攝;或執(zhí)行場景的高清晰度視頻的變焦來生成場景的感興趣區(qū)的另一個部分的變焦顯示。
示例18包括用于在移動計算設(shè)備上輸出視頻顯示的主旨(例如由設(shè)備、裝置、機(jī)器或機(jī)器可讀介質(zhì)體現(xiàn)),用指令實現(xiàn),這些指令在執(zhí)行時促使移動計算設(shè)備:建立與無線網(wǎng)絡(luò)的連接;使用位于移動計算設(shè)備的第一側(cè)上的拍攝裝置從移動計算設(shè)備的第一側(cè)的視角捕捉數(shù)字圖像;處理感興趣區(qū)的高清晰度視頻流,該高清晰度視頻流經(jīng)由與無線網(wǎng)絡(luò)的連接而接收;確定移動計算設(shè)備相對于在高清晰度視頻流中提供的視頻場景的取向的視角;以及在位于移動計算設(shè)備的第二側(cè)上的顯示屏上輸出數(shù)字視頻,其中該第二側(cè)與第一側(cè)相對,其中數(shù)字視頻的輸出包括被變焦和搖攝以類似于移動計算設(shè)備的視角的高清晰度視頻流的視頻場景的一部分。
在示例19中,示例18的主旨可以包括,進(jìn)一步促使移動計算設(shè)備:處理用拍攝裝置捕捉的感興趣區(qū)的圖像;檢測感興趣區(qū)的圖像中的標(biāo)記;以及使感興趣區(qū)中的標(biāo)記與視頻場景的部分的取向相關(guān)。
在示例20中,示例18至19中的任一個的主旨可以包括,其中標(biāo)記是機(jī)器可檢測標(biāo)記,該機(jī)器可檢測標(biāo)記包括紅外光或機(jī)器可檢測對象。
在示例21中,示例18至20中的任一個的主旨可以包括,進(jìn)一步促使移動計算設(shè)備:將移動計算設(shè)備的位點信息傳送到遠(yuǎn)程視頻服務(wù)器;以及響應(yīng)于位點信息從遠(yuǎn)程視頻服務(wù)器接收高清晰度視頻流,該高清晰度視頻流從多個高清晰度視頻流選擇。
在示例22中,示例18至21中的任一個的主旨可以包括,其中移動計算設(shè)備的位點信息包括無線網(wǎng)絡(luò)信息,該無線網(wǎng)絡(luò)信息包括對于無線網(wǎng)絡(luò)的無線接入點的ssid。
在示例23中,示例18至22中的任一個的主旨可以包括,其中移動計算設(shè)備的位點信息包括由移動計算設(shè)備從qr碼、rfid標(biāo)簽或低能量藍(lán)牙信標(biāo)讀取的標(biāo)識符。
在示例24中,示例18至23中的任一個的主旨可以包括,其中指令在執(zhí)行時進(jìn)一步促使移動計算設(shè)備:檢測和處理對移動計算設(shè)備的用戶手勢輸入;以及基于該用戶手勢輸入改變高清晰度視頻流的視頻場景的顯示部分。
示例25包括用于虛擬雙目鏡視頻顯示的輸出的主旨(例如方法、用于執(zhí)行動作的部件、機(jī)器可讀介質(zhì)或用于執(zhí)行的裝置,該機(jī)器可讀介質(zhì)包括指令,這些指令在由機(jī)器執(zhí)行時促使該機(jī)器執(zhí)行動作),用移動計算設(shè)備的處理器和存儲器的操作所執(zhí)行,所述方法包括:經(jīng)由無線網(wǎng)絡(luò)從視頻流播服務(wù)器接收選擇的視頻數(shù)據(jù)流,處理來自視頻數(shù)據(jù)流的視頻內(nèi)容,其中選擇的視頻數(shù)據(jù)流基于位于視頻數(shù)據(jù)中捕捉的場景附近的觀看區(qū)中移動計算設(shè)備的位點來選擇;以及輸出視頻內(nèi)容的選擇增強(qiáng)部分,該選擇增強(qiáng)部分基于移動計算設(shè)備相對于視頻數(shù)據(jù)中捕捉的場景的取向來確定。
在示例26中,示例25的主旨可以包括,接收用戶命令來實行對視頻內(nèi)容的選擇部分的輸出的控制。
在示例27中,示例25至26中的任一個的主旨可以包括,基于由移動計算設(shè)備檢測的至少一個運動輸入來改變待顯示的視頻內(nèi)容的選擇部分。
在示例28中,示例25至27中的任一個的主旨可以包括,經(jīng)由無線網(wǎng)絡(luò)根據(jù)ieee802.11無線網(wǎng)絡(luò)協(xié)議的操作接收視頻數(shù)據(jù)的流,其中該視頻數(shù)據(jù)的流基于移動計算設(shè)備相對于場景的位點來選擇,并且其中移動計算設(shè)備相對于無線網(wǎng)絡(luò)的接入點的位點的識別傳遞到視頻流播服務(wù)器來指示移動計算設(shè)備的位點。
在示例29中,示例25至28中的任一個的主旨可以包括,使在視頻內(nèi)容檢測中的至少一個指標(biāo)與移動計算設(shè)備相對于視頻數(shù)據(jù)中捕捉的場景的取向相關(guān)。
在示例30中,示例25至29中的任一個的主旨可以包括,捕捉場景中包括至少一個指標(biāo)的至少一部分的圖像;處理場景中包括對于視頻內(nèi)容的選擇部分的至少一個指標(biāo)的至少該部分的圖像;使拍攝裝置捕捉的場景的至少該部分的圖像與視頻數(shù)據(jù)中捕捉的場景的圖像相匹配,來確定移動計算設(shè)備相對于場景的取向。
示例31包括至少一個機(jī)器可讀存儲介質(zhì),其包括用于在移動計算設(shè)備處流播視頻的指令,這些指令在由機(jī)器執(zhí)行時促使該機(jī)器執(zhí)行示例25-30中的任一個。
示例32包括一種裝置,其包括用于執(zhí)行示例25-30中的任一個的部件。
示例33包括主旨(例如設(shè)備、裝置或機(jī)器),其包括:用于經(jīng)由無線網(wǎng)絡(luò)從視頻流播服務(wù)器接收視頻數(shù)據(jù)流的部件;用于處理來自視頻數(shù)據(jù)流的視頻內(nèi)容的部件,其中選擇的視頻數(shù)據(jù)流基于在位于視頻數(shù)據(jù)中捕捉的場景附近的觀看區(qū)中移動計算設(shè)備的位點來選擇;以及用于輸出視頻內(nèi)容的選擇增強(qiáng)部分的部件,選擇增強(qiáng)部分基于移動計算設(shè)備相對于視頻數(shù)據(jù)中捕捉的場景的取向來確定。
在示例34中,示例33的主旨可以包括,用于接收用戶命令來實行對顯示屏上視頻內(nèi)容的選擇增強(qiáng)部分的輸出的控制的部件,其中視頻內(nèi)容的選擇增強(qiáng)部分提供來自視頻數(shù)據(jù)流的視頻內(nèi)容的變焦和搖攝的部分。
在示例35中,示例33至34中的任一個的主旨可以包括,用于基于由移動計算設(shè)備檢測的至少一個運動輸入來改變顯示屏上的視頻內(nèi)容的選擇增強(qiáng)部分的部件。
在示例36中,示例33至35中的任一個的主旨可以包括,經(jīng)由無線網(wǎng)絡(luò)根據(jù)ieee802.11無線網(wǎng)絡(luò)協(xié)議的操作接收視頻數(shù)據(jù)的流,其中選擇的視頻數(shù)據(jù)的流基于移動計算設(shè)備相對于位于觀看區(qū)內(nèi)的無線網(wǎng)絡(luò)的至少一個接入點的位點來選擇,并且并且其中移動計算設(shè)備相對于無線網(wǎng)絡(luò)的接入點的位點的識別傳遞到視頻流播服務(wù)器來指示移動計算設(shè)備的位點。
在示例37中,示例33至36中的任一個的主旨可以包括,用于使在視頻內(nèi)容中檢測的至少一個指標(biāo)與移動計算設(shè)備相對于視頻數(shù)據(jù)中捕捉的場景的取向相關(guān)的部件;用于捕捉場景中包括至少一個指標(biāo)的至少一部分的圖像的部件;用于處理包括對于視頻內(nèi)容的選擇部分的至少一個指標(biāo)的場景中至少該部分的圖像的部件;以及用于使由拍攝裝置捕捉的場景的至少該部分的圖像與視頻數(shù)據(jù)中捕捉的場景的圖像相匹配來確定移動計算設(shè)備相對于場景的取向的部件。
示例38包括用于移動設(shè)備的主旨(例如設(shè)備、裝置或機(jī)器),該移動設(shè)備包括至少一個處理器用于執(zhí)行操作,其中:訪問選擇的高清晰度視頻流,該高清晰度視頻流提供在遠(yuǎn)離移動設(shè)備并且朝向場景的感興趣區(qū)的觀看方向上捕捉的場景的高清晰度視頻;使移動設(shè)備相對于感興趣區(qū)的取向與場景的高清晰度視頻的特定變焦部分相關(guān);以及在移動設(shè)備上顯示場景的高清晰度視頻的特定變焦部分。
在示例39中,示例38的主旨可以包括,至少一個處理器,用于進(jìn)一步執(zhí)行操作,其中:使場景的高清晰度視頻搖攝到高清晰度視頻的特定變焦部分,搖攝使用移動設(shè)備相對于感興趣區(qū)的取向來執(zhí)行;以及使場景的高清晰度視頻變焦到高清晰度視頻的特定變焦部分,變焦使用移動設(shè)備相對于感興趣區(qū)的取向來執(zhí)行。
在示例40中,示例38至39中的任一個的主旨可以包括至少一個處理器,用于進(jìn)一步執(zhí)行操作,其中:向遠(yuǎn)程服務(wù)器提供移動設(shè)備的位點信息,該位點信息指示在鄰近場景的觀察區(qū)中移動設(shè)備的位點;以及從多個高清晰度視頻流中的一個接收高清晰度視頻流,該高清晰度視頻流由遠(yuǎn)程服務(wù)器基于移動設(shè)備的位點信息來選擇。
在示例41中,示例38至40中的任一個的主旨可以包括至少一個處理器,用于進(jìn)一步執(zhí)行操作,其中:用移動設(shè)備捕捉場景的數(shù)字圖像;用移動設(shè)備檢測場景的數(shù)字圖像中的標(biāo)記;以及基于由移動設(shè)備在場景的高清晰度視頻內(nèi)檢測的標(biāo)記的位置來選擇高清晰度視頻的特定變焦部分,高清晰度視頻的該特定變焦部分提供較大高清晰度視頻的子集。
在示例42中,示例38至41中的任一個的主旨可以包括至少一個處理器,用于進(jìn)一步執(zhí)行操作,其中:使移動設(shè)備的取向與高清晰度視頻的特定變焦部分相關(guān),包括,使場景的數(shù)字圖像中的標(biāo)記與場景的高清晰度視頻的圖像中的標(biāo)記匹配,以在選擇高清晰度視頻的特定變焦部分中模擬從移動設(shè)備的場景的視角。
在示例43中,示例38至42中的任一個的主旨可以包括,其中標(biāo)記由定位在場景中的至少一個紅外光提供。
在示例44中,示例38至43中的任一個的主旨可以包括,其中標(biāo)記是定位在場景中的機(jī)器可讀對象,該機(jī)器可讀對象提供與相對于場景的位點關(guān)聯(lián)的標(biāo)識符。
在示例45中,示例38至44中的任一個的主旨可以包括至少一個處理器,用于進(jìn)一步執(zhí)行操作,其中:用移動設(shè)備捕捉場景的數(shù)字圖像;執(zhí)行場景的數(shù)字圖像中至少一個對象的圖像識別;以及基于移動設(shè)備的取向與高清晰度視頻的特定變焦部分的相關(guān)性來選擇高清晰度視頻的特定變焦部分,高清晰度視頻的該特定變焦部分提供較大高清晰度視頻的子集。
在示例46中,示例38至45中的任一個的主旨可以包括至少一個處理器,用于進(jìn)一步執(zhí)行操作,其中:在高清晰度視頻的特定變焦部分上顯示信息覆蓋,該信息覆蓋提供關(guān)于在高清晰度視頻的特定變焦部分中描繪的至少一個現(xiàn)實世界項的信息。
在示例47中,示例38至46中的任一個的主旨可以包括至少一個處理器,用于進(jìn)一步執(zhí)行操作,其中:處理關(guān)于對于移動設(shè)備的圖形用戶界面輸出所接收的至少一個用戶輸入,該至少一個用戶輸入用于:從多個高清晰度視頻流之中選擇高清晰度視頻流;執(zhí)行場景的高清晰度視頻搖攝到場景的另一個感興趣區(qū);或執(zhí)行場景的高清晰度視頻的變焦來生成場景的感興趣區(qū)的另一個部分的變焦顯示。
示例48包括至少一個機(jī)器可讀存儲介質(zhì),其包括用于在移動設(shè)備處流播視頻的指令,這些指令在由機(jī)器執(zhí)行時促使該機(jī)器執(zhí)行示例8-17中的任一個。
示例49包括一種裝置,其包括用于執(zhí)行示例8-17中的任一個的部件。
示例50包括主旨(例如設(shè)備、裝置或機(jī)器),其包括:用于在移動設(shè)備處訪問選擇的高清晰度視頻流的部件,該高清晰度視頻流提供在遠(yuǎn)離移動設(shè)備并且朝向場景的感興趣區(qū)的觀看方向上捕捉的場景的高清晰度視頻;用于使移動設(shè)備相對于感興趣區(qū)的取向與場景的高清晰度視頻的特定變焦部分相關(guān)的部件;以及用于在移動設(shè)備上顯示場景的高清晰度視頻的特定變焦部分的部件。
在示例51中,示例50的主旨可以包括,進(jìn)一步包括:用于使場景的高清晰度視頻搖攝到高清晰度視頻的特定變焦部分的部件,搖攝使用移動設(shè)備相對于感興趣區(qū)的取向來執(zhí)行;以及用于使場景的高清晰度視頻變焦到高清晰度視頻的特定變焦部分的部件,變焦使用移動設(shè)備相對于感興趣區(qū)的取向來執(zhí)行。
在示例52中,示例50至51中的任一個的主旨可以包括,進(jìn)一步包括:用于向遠(yuǎn)程服務(wù)器提供移動設(shè)備的位點信息的部件,該位點信息指示在鄰近場景的觀察區(qū)中移動設(shè)備的位點;以及用于從多個高清晰度視頻流中的一個接收高清晰度視頻流的部件,該高清晰度視頻流由遠(yuǎn)程服務(wù)器基于移動設(shè)備的位點信息來選擇。
在示例53中,示例50至52中的任一個的主旨可以包括,進(jìn)一步包括:用于捕捉場景的數(shù)字圖像的部件;用于檢測場景的數(shù)字圖像中的標(biāo)記的部件;以及用于基于由移動設(shè)備在場景的高清晰度視頻內(nèi)檢測的標(biāo)記的位置來選擇高清晰度視頻的特定變焦部分的部件,高清晰度視頻的該特定變焦部分提供較大高清晰度視頻的子集。
在示例54中,示例50至53中的任一個的主旨可以包括,進(jìn)一步包括:用于使移動設(shè)備的取向與高清晰度視頻的特定變焦部分相關(guān)的部件,包括使場景的數(shù)字圖像中的標(biāo)記與場景的高清晰度視頻的圖像中的標(biāo)記匹配,以在選擇高清晰度視頻的特定變焦部分中模擬從移動設(shè)備的場景的視角。
在示例55中,示例50至54中的任一個的主旨可以包括,進(jìn)一步包括:用于檢測由定位在場景中的至少一個紅外光提供的標(biāo)記的部件。
在示例56中,示例50至55中的任一個的主旨可以包括,進(jìn)一步包括:用于檢測是定位在場景中的機(jī)器可讀對象的標(biāo)記的部件,該機(jī)器可讀對象提供與相對于場景的位點關(guān)聯(lián)的標(biāo)識符。
在示例57中,示例50至56中的任一個的主旨可以包括,進(jìn)一步包括:用于捕捉場景的數(shù)字圖像的部件;用于執(zhí)行場景的數(shù)字圖像中至少一個對象的圖像識別的部件;以及用于基于移動設(shè)備的取向與高清晰度視頻的特定變焦部分的相關(guān)性來選擇高清晰度視頻的特定變焦部分的部件,高清晰度視頻的該特定變焦部分提供較大高清晰度視頻的子集。
示例58包括主旨(例如方法、用于執(zhí)行動作的部件、機(jī)器可讀介質(zhì)或用于執(zhí)行的裝置,該機(jī)器可讀介質(zhì)包括指令,這些指令在由機(jī)器執(zhí)行時促使該機(jī)器執(zhí)行動作),由移動計算設(shè)備的至少一個處理器執(zhí)行,主旨包括:建立與無線網(wǎng)絡(luò)的連接;用位于移動計算設(shè)備的第一側(cè)上的拍攝裝置捕捉數(shù)字圖像,該數(shù)字圖像從第一側(cè)的視角捕捉;處理感興趣區(qū)的高清晰度視頻流,該高清晰度視頻流經(jīng)由與無線網(wǎng)絡(luò)的連接而接收;確定移動計算設(shè)備相對于在高清晰度視頻流中提供的視頻場景的取向的視角;以及在位于移動計算設(shè)備的第二側(cè)上的顯示屏上輸出數(shù)字視頻,其中該第二側(cè)與第一側(cè)相對,輸出包括用顯示屏輸出高清晰度視頻流的較低分辨率部分,高清晰度視頻流的視頻場景被變焦和搖攝到該較低分辨率部分以類似于移動計算設(shè)備的視角。
在示例59中,示例58的主旨可以包括,進(jìn)一步包括:處理用拍攝裝置捕捉的感興趣區(qū)的圖像;檢測感興趣區(qū)的圖像中的標(biāo)記;以及使感興趣區(qū)中的標(biāo)記與視頻場景的部分的取向相關(guān)。
在示例60中,示例58至59中的任一個的主旨可以包括,其中標(biāo)記是機(jī)器可檢測標(biāo)記,該機(jī)器可檢測標(biāo)記包括紅外光或機(jī)器可檢測對象。
在示例61中,示例58至60中的任一個的主旨可以包括,進(jìn)一步包括:將移動計算設(shè)備的位點信息傳送到遠(yuǎn)程視頻服務(wù)器;以及響應(yīng)于位點信息從遠(yuǎn)程視頻服務(wù)器接收高清晰度視頻流,該高清晰度視頻流從多個高清晰度視頻流選擇。
在示例62中,示例58至61中的任一個的主旨可以包括,其中移動計算設(shè)備的位點信息包括無線網(wǎng)絡(luò)信息,該無線網(wǎng)絡(luò)信息包括對于無線網(wǎng)絡(luò)的無線接入點的ssid。
在示例63中,示例58至62中的任一個的主旨可以包括,其中移動計算設(shè)備的位點信息包括由移動計算設(shè)備從qr碼、rfid標(biāo)簽或低能量藍(lán)牙信標(biāo)讀取的標(biāo)識符。
在示例64中,示例58至63中的任一個的主旨可以包括,進(jìn)一步包括:檢測和處理對移動計算設(shè)備的用戶手勢輸入;以及基于該用戶手勢輸入改變高清晰度視頻流的視頻場景的顯示部分。
示例65包括一種裝置,其包括用于執(zhí)行示例58-64中的任一個的部件。
示例66包括用于移動計算設(shè)備的主旨(例如設(shè)備、裝置或機(jī)器),該移動計算設(shè)備包括:至少一個處理器;無線收發(fā)器,該無線收發(fā)器建立與至少一個無線網(wǎng)絡(luò)的連接;位于移動計算設(shè)備的第一側(cè)上的拍攝裝置,該拍攝裝置從第一側(cè)的視角捕捉數(shù)字圖像;位于移動計算設(shè)備的第二側(cè)上的顯示屏,該顯示屏輸出數(shù)字視頻,其中第二側(cè)與第一側(cè)相對;以及至少一個存儲器,其包括指令,這些指令可操作成用于用至少一個處理器執(zhí)行,并且指令在執(zhí)行時促使移動計算設(shè)備:處理感興趣區(qū)的高清晰度視頻流,該高清晰度視頻流經(jīng)由無線收發(fā)器接收;確定移動計算設(shè)備相對于在高清晰度視頻流中提供的視頻場景的取向的視角;以及用顯示屏輸出高清晰度視頻流的較低分辨率部分,高清晰度視頻流的視頻場景被變焦和搖攝到較低分辨率部分以類似于移動計算設(shè)備的視角。
在示例67中,示例66的主旨可以包括,存儲器進(jìn)一步包括指令,其在執(zhí)行時促使移動計算設(shè)備:處理用拍攝裝置捕捉的感興趣區(qū)的圖像;檢測感興趣區(qū)的圖像中的標(biāo)記;以及使感興趣區(qū)中的標(biāo)記與視頻場景的部分的取向相關(guān)。
在示例68中,示例66至67中的任一個的主旨可以包括,其中標(biāo)記是機(jī)器可檢測標(biāo)記,該機(jī)器可檢測標(biāo)記包括紅外光或機(jī)器可檢測對象。
在示例69中,示例66至68中的任一個的主旨可以包括,存儲器進(jìn)一步包括指令,其在執(zhí)行時促使移動計算設(shè)備:將移動計算設(shè)備的位點信息傳送到遠(yuǎn)程視頻服務(wù)器;以及響應(yīng)于位點信息從遠(yuǎn)程視頻服務(wù)器接收高清晰度視頻流,該高清晰度視頻流從多個高清晰度視頻流選擇。
在示例70中,示例66至69中的任一個的主旨可以包括,其中移動計算設(shè)備的位點信息包括來自無線收發(fā)器的無線網(wǎng)絡(luò)信息,該無線網(wǎng)絡(luò)信息包括無線接入點的ssid。
在示例71中,示例66至70中的任一個的主旨可以包括,其中移動計算設(shè)備的位點信息包括由移動計算設(shè)備從qr碼、rfid標(biāo)簽或低能量藍(lán)牙信標(biāo)讀取的標(biāo)識符。
在示例72中,示例66至71中的任一個的主旨可以包括,存儲器進(jìn)一步指令,其在執(zhí)行時促使移動計算設(shè)備:檢測和處理對移動計算設(shè)備的用戶手勢輸入;以及基于該用戶手勢輸入改變高清晰度視頻流的視頻場景的顯示部分。
示例73包括用于向移動計算設(shè)備供應(yīng)視頻內(nèi)容的視頻流播服務(wù)器的主旨(例如設(shè)備、裝置或機(jī)器),該視頻流播服務(wù)器包括:視頻處理模塊,用于從多個高清晰度視頻拍攝裝置獲得視頻;位點處理模塊,用于獲得移動計算設(shè)備相對于多個高清晰度視頻拍攝裝置的位點;視頻內(nèi)容模塊,用于處理來自多個高清晰度視頻拍攝裝置的視頻內(nèi)容;以及視頻流傳送模塊,用于向相應(yīng)移動計算設(shè)備提供多個視頻流,該多個視頻流包括向移動計算設(shè)備提供的高清晰度視頻流。
在示例74中,示例73的主旨可以包括,其中視頻流播服務(wù)器經(jīng)由無線接入點傳送多個視頻流,這些無線接入點根據(jù)ieee802.11標(biāo)準(zhǔn)協(xié)議來通信。
在示例75中,示例73至74中的任一個的主旨可以包括,其中視頻流播服務(wù)器與拍攝裝置控制服務(wù)器通信,該拍攝裝置控制服務(wù)器提供多個高清晰度視頻拍攝裝置的相應(yīng)拍攝裝置的重定位和控制。
在示例76中,示例73至75中的任一個的主旨可以包括,其中視頻流播服務(wù)器與管理設(shè)備通信,該管理設(shè)備提供視頻流播使用和視頻流播服務(wù)器操作的監(jiān)測和控制。
示例77包括用于將視頻從流播服務(wù)器流播到移動計算設(shè)備的方法的主旨(例如方法、用于執(zhí)行動作的部件、機(jī)器可讀介質(zhì)或用于執(zhí)行的裝置,該機(jī)器可讀介質(zhì)包括指令,這些指令在由機(jī)器執(zhí)行時促使該機(jī)器執(zhí)行動作),該方法包括:處理從多個高清晰度視頻拍攝裝置獲得的感興趣區(qū)的視頻內(nèi)容;獲得移動計算設(shè)備相對于多個高清晰度視頻拍攝裝置中的至少一個和感興趣區(qū)的位點;以及將視頻內(nèi)容的高清晰度視頻流經(jīng)由無線網(wǎng)絡(luò)傳送到移動計算設(shè)備;其中視頻內(nèi)容的顯示在移動計算設(shè)備處基于靠近拍攝裝置和靠近感興趣區(qū)的所定義觀察區(qū)內(nèi)移動計算設(shè)備的位點來定制。
在示例78中,示例77的主旨可以包括,進(jìn)一步包括:重定位和控制多個高清晰度視頻拍攝裝置的相應(yīng)拍攝裝置。
在示例79中,示例77至78中的任一個的主旨可以包括,其中視頻內(nèi)容的高清晰度視頻流傳送到移動計算設(shè)備,作為高清晰度視頻內(nèi)容到多個移動計算設(shè)備的組播的部分,其中移動計算設(shè)備中的每個基于相應(yīng)移動計算設(shè)備相對于感興趣區(qū)的位點提供高清晰度視頻流的顯示的自定義視角。
在示例80中,示例77至79中的任一個的主旨可以包括,進(jìn)一步包括:對高清晰度視頻流監(jiān)測視頻流播使用和視頻流播服務(wù)器操作。
示例81包括至少一個機(jī)器可讀存儲介質(zhì),其包括用于向移動計算設(shè)備供應(yīng)移動視頻內(nèi)容的指令,這些指令在由機(jī)器執(zhí)行時促使該機(jī)器執(zhí)行示例77-80中的任一個。
示例82包括一種裝置,其包括用于執(zhí)行示例77-80中的任一個的部件。
示例83包括主旨(例如設(shè)備、裝置或機(jī)器),其包括:用于處理從多個高清晰度視頻拍攝裝置獲得的感興趣區(qū)的視頻內(nèi)容的部件;用于獲得移動計算設(shè)備相對于多個高清晰度視頻拍攝裝置中的至少一個和感興趣區(qū)的位點的部件;以及用于將視頻內(nèi)容的高清晰度視頻流經(jīng)由無線網(wǎng)絡(luò)傳送到移動計算設(shè)備的部件;其中視頻內(nèi)容的顯示在移動計算設(shè)備處基于靠近高清晰度視頻拍攝裝置和靠近感興趣區(qū)的所定義觀察區(qū)內(nèi)移動計算設(shè)備的位點來定制。
在示例84中,示例83的主旨可以包括,用于重定位和控制多個高清晰度視頻拍攝裝置的相應(yīng)拍攝裝置的部件。
在示例85中,示例83至84中的任一個的主旨可以包括,進(jìn)一步包括:用于將視頻內(nèi)容的高清晰度視頻流傳送到移動計算設(shè)備作為高清晰度視頻內(nèi)容到多個移動計算設(shè)備的組播的部分的部件,其中移動計算設(shè)備中的每個基于相應(yīng)移動計算設(shè)備相對于感興趣區(qū)的位點提供高清晰度視頻流的顯示的自定義視角。
在示例86中,示例83至85中的任一個的主旨可以包括,進(jìn)一步包括:用于監(jiān)測視頻流播使用和視頻流播服務(wù)器操作的部件。
示例87包括主旨(例如設(shè)備、裝置或機(jī)器),其包括:多個高清晰度視頻拍攝裝置;視頻流播服務(wù)器,該視頻流播服務(wù)器從多個高清晰度視頻拍攝裝置提供高清晰度視頻的相應(yīng)流;和多個接入點,其對無線網(wǎng)絡(luò)建立覆蓋區(qū),該多個接入點無線傳送對于多個高清晰度視頻拍攝裝置相對于無線網(wǎng)絡(luò)覆蓋區(qū)內(nèi)相應(yīng)移動設(shè)備的位點的流的數(shù)據(jù)。
在示例88中,示例87的主旨可以包括,進(jìn)一步包括:多個標(biāo)記,其中該多個標(biāo)記由相應(yīng)移動設(shè)備可檢測來確定移動設(shè)備相對于多個高清晰度視頻拍攝裝置所捕捉的感興趣區(qū)的位點。
在示例89中,示例87至88中的任一個的主旨可以包括,其中多個標(biāo)記是紅外標(biāo)記,其中這些紅外標(biāo)記對相應(yīng)移動設(shè)備提供指示,用于基于紅外標(biāo)記對移動設(shè)備的可見性能夠選擇多個高清晰度視頻拍攝裝置的特定流。
在示例90中,示例87至89中的任一個的主旨可以包括,進(jìn)一步包括:相應(yīng)移動設(shè)備,移動設(shè)備輸出多個高清晰度視頻拍攝裝置相對于紅外標(biāo)記和移動設(shè)備的位點的相應(yīng)流的選擇部分。
在示例91中,紅示例87至90中的任一個的主旨可以包括,其中多個接入點用ieee802.11無線網(wǎng)絡(luò)標(biāo)準(zhǔn)操作。
在示例92中,示例8的主旨可以包括,確定移動設(shè)備相對于場景的高清晰度視頻的取向的視角;以及對移動設(shè)備的顯示屏生成數(shù)字視頻輸出,其中該數(shù)字視頻輸出包括被變焦和搖攝以類似于移動設(shè)備的視角的場景的高清晰度視頻的特定部分。
在示例93中,示例8或92中的任一個的主旨可以包括,使用位于移動設(shè)備的第一側(cè)上的拍攝裝置從移動設(shè)備的第一側(cè)的視角捕捉數(shù)字圖像,其中移動設(shè)備的該第一側(cè)與移動設(shè)備的第二側(cè)相對,并且其中顯示屏位于移動設(shè)備的第二側(cè)上;處理用拍攝裝置捕捉的感興趣區(qū)的圖像;檢測感興趣區(qū)的圖像中的標(biāo)記;以及使感興趣區(qū)中的標(biāo)記與視頻場景部分的取向相關(guān)。
在示例94中,示例8或92至93中的任一個的主旨可以包括,其中標(biāo)記是機(jī)器可檢測標(biāo)記,該機(jī)器可檢測標(biāo)記包括紅外光或機(jī)器可檢測對象。
在示例95中,示例8或92至94中的任一個的主旨可以包括,建立與無線網(wǎng)絡(luò)的連接;經(jīng)由與無線網(wǎng)絡(luò)的連接將移動設(shè)備的位點信息傳送到遠(yuǎn)程視頻服務(wù)器;以及響應(yīng)于位點信息經(jīng)由與無線網(wǎng)絡(luò)的連接從遠(yuǎn)程視頻服務(wù)器接收高清晰度視頻流,該高清晰度視頻流從多個高清晰度視頻流選擇。
在示例96中,示例8或92至95中的任一個的主旨可以包括,其中移動設(shè)備的位點信息包括無線網(wǎng)絡(luò)信息,該無線網(wǎng)絡(luò)信息包括對于無線網(wǎng)絡(luò)的無線接入點的ssid。
在示例97中,示例8或92至96中的任一個的主旨可以包括,其中移動設(shè)備的位點信息包括由移動設(shè)備從qr碼、rfid標(biāo)簽或低能量藍(lán)牙信標(biāo)讀取的標(biāo)識符。
在示例98中,主旨可以包括至少一個機(jī)器可讀存儲介質(zhì),其包括指令,這些指令在由機(jī)器執(zhí)行時促使該機(jī)器執(zhí)行示例92-97中的任一個。
在示例99中,主旨可以包括裝置,其包括用于執(zhí)行示例92-97中的任一個的部件。
上文的詳細(xì)描述包括對附圖(其形成詳細(xì)描述的一部分)的參考。圖通過圖示的方式示出可以實踐的特定實施例。這些實施例在本文也稱為“示例”。這樣的示例可以包括除示出或描述的那些以外的元件。然而,還預(yù)想包括示出或描述的元件的示例。此外,還預(yù)想使用示出或描述的那些元件的任何組合或排列(或其一個或多個方面)、或關(guān)于特定示例(或其一個或多個方面)或關(guān)于本文示出或描述的其他示例(或其一個或多個方面)的示例。
在該文獻(xiàn)中,如在專利文獻(xiàn)中常見的,使用術(shù)語“一”,來包括一個或超過一個,其獨立于“至少一個”或“一個或多個”的任何其他實例或使用。在該文獻(xiàn)中,術(shù)語“或”用于指非排他性,或使得“a或b”包括“a但不是b”、“b但不是a”以及“a和b”,除非另外指出。在附上的權(quán)利要求中,術(shù)語“包含”和“在…中”用作相應(yīng)術(shù)語“包括”和“其中”的簡明語言等同物。同樣,在下列權(quán)利要求中,術(shù)語“包含”和“包括”是開放式的,即,包括除在權(quán)利要求中這樣的術(shù)語后列出的那些以外的元件的系統(tǒng)、設(shè)備、物品或過程仍被認(rèn)為落在該權(quán)利要求的范圍內(nèi)。此外,在下列權(quán)利要求中,術(shù)語“第一”、“第二”和“第三”等僅僅用作標(biāo)簽,并且不意在啟示對它們的對象的數(shù)值順序。
上文的描述意在為說明性,而非限制性的。例如,上文描述的示例(或其一個或多個方面)可以與其他結(jié)合使用??梢岳缬杀绢I(lǐng)域內(nèi)普通技術(shù)人員在回顧上文的描述時使用其他實施例。提供摘要來允許讀者快速弄清本技術(shù)公開的本質(zhì)并且提交摘要要理解為將不用于解釋或限制權(quán)利要求的范圍或含義。同樣,在上文的詳細(xì)描述中,各種特征可以聚集在一起來使本公開通順。然而,權(quán)利要求可未闡述本文公開的每個特征,因為實施例可以以所述特征的子集為特征。此外,實施例可包括比特定示例中公開的那些還少的特征。從而,下列權(quán)利要求由此并入詳細(xì)描述中,其中每個權(quán)利要求立足于它自身作為獨立的實施例。本文公開的實施例的范圍要參考附上的權(quán)利要求連同這樣的權(quán)利要求所擁有的等同物的全范圍來確定。