選擇性地組合多個視頻饋送以用于群通信會話的制作方法
【專利摘要】在一實施例中，通信設(shè)備(170；200；400)從多個視頻捕捉設(shè)備接收(615A；620A；625A；600D；600E；605E；610E；920，925，930)提供給定的感興趣的視覺主題的不同透視的多個視頻輸入饋送。該通信設(shè)備針對所接收到的多個視頻輸入饋送中的每一個視頻輸入饋送接收(615A；620A；625A；600D；600E；605E；610E；920，925，930)對(i)相關(guān)聯(lián)的視頻捕捉設(shè)備的位置、(ii)相關(guān)聯(lián)的視頻捕捉設(shè)備的朝向以及(iii)所接收到的視頻輸入饋送的格式的指示。通信設(shè)備選擇(630A；605D；630E；820A；820B；820C；935)所接收到的多個視頻輸入饋送的集合，將選定的視頻輸入饋送交織(635A；600B；605B；600C；605C；610D；620E；625E；630E；830A；835B；830C；940)成符合目標(biāo)格式的視頻輸出饋送，并將該視頻輸出饋送傳送(640A；615D；635E；640E；645E；945)給目標(biāo)視頻呈現(xiàn)設(shè)備集。通信設(shè)備可對應(yīng)于屬于該多個視頻捕捉設(shè)備或與之通信的遠(yuǎn)程服務(wù)器(170；400)或用戶裝備(UE)(200；400)。
【專利說明】選擇性地組合多個視頻饋送以用于群通信會話
[0001]發(fā)明背景發(fā)明領(lǐng)域
[0002]各實施例涉及選擇性地組合多個視頻饋送以用于群通信會話。
[0003]2.相關(guān)技術(shù)描述
[0004]無線通信系統(tǒng)已經(jīng)經(jīng)歷了數(shù)代的發(fā)展，包括第一代模擬無線電話服務(wù)(IG)、第二代(2G)數(shù)字無線電話服務(wù)(包括過渡的2.5G和2.75G網(wǎng)絡(luò))、以及第三代(3G)高速數(shù)據(jù)、具有因特網(wǎng)能力的無線服務(wù)。目前在用的有許多不同類型的無線通信系統(tǒng)，包括蜂窩以及個人通信服務(wù)(PCS)系統(tǒng)。已知蜂窩系統(tǒng)的示例包括蜂窩模擬高級移動電話系統(tǒng)(AMPS)，以及基于碼分多址(CDMA)、頻分多址(FDMA)、時分多址(TDMA)、TDMA的全球移動接入系統(tǒng)(GSM)變型的數(shù)字蜂窩系統(tǒng)，以及使用TDMA和CDMA技術(shù)兩者的更新的混合數(shù)字通信系統(tǒng)。
[0005]用于提供CDMA移動通信的方法在美國由電信行業(yè)協(xié)會/電子行業(yè)協(xié)會在題為“Mobile Stat1n-Base Stat1n Compatibility Standard for Dual-Mode WidebandSpread Spectrum Cellular System(用于雙模寬帶擴(kuò)頻蜂窩系統(tǒng)的移動站-基站兼容性標(biāo)準(zhǔn))”的TIA/EIA/IS-95-A(在本文中稱為IS-95)中被標(biāo)準(zhǔn)化。組合的AMPS及CDMA系統(tǒng)在TIA/EIA標(biāo)準(zhǔn)IS-98中描述。在涵蓋了被稱為寬帶CDMA(W-CDMA)、CDMA2000 (諸如舉例而言CDMA2000IxEV-DO標(biāo)準(zhǔn))或TD-SCDMA的MT-2000/UM、或即國際移動電信系統(tǒng)2000/通用移動電信系統(tǒng)標(biāo)準(zhǔn)中描述了其他通信系統(tǒng)。
[0006]無線通信系統(tǒng)內(nèi)的性能可在物理層或空中接口上，并且還在這些系統(tǒng)的回程部分內(nèi)的有線連接上被阻礙。
[0007]概述
[0008]在一實施例中，通信設(shè)備從多個視頻捕捉設(shè)備接收提供給定的感興趣的視覺主題的不同透視的多個視頻輸入饋送。該通信設(shè)備針對所接收到的多個視頻輸入饋送中的每一視頻輸入饋送接收對(i)相關(guān)聯(lián)的視頻捕捉設(shè)備的位置、(ii)相關(guān)聯(lián)的視頻捕捉設(shè)備的朝向、以及(iii)所接收到的視頻輸入饋送的格式的指示。通信設(shè)備選擇所接收到的多個視頻輸入饋送的集合，將選定的視頻輸入饋送交織成符合目標(biāo)格式的視頻輸出饋送，并將該視頻輸出饋送傳送給目標(biāo)視頻呈現(xiàn)設(shè)備集合。通信設(shè)備可對應(yīng)于屬于該多個視頻捕捉設(shè)備或與之通信的遠(yuǎn)程服務(wù)器或用戶裝備(UE)。
[0009]附圖簡述
[0010]對本發(fā)明的實施例及其許多伴隨優(yōu)點(diǎn)的更完整領(lǐng)會將因其在參考結(jié)合附圖考慮的以下詳細(xì)描述時變得更好理解而易于獲得，附圖僅出于解說目的被給出而不對本發(fā)明構(gòu)成任何限定，且其中:
[0011]圖1是根據(jù)本發(fā)明的至少一個實施例的支持接入終端和接入網(wǎng)的無線網(wǎng)絡(luò)架構(gòu)的示圖。
[0012]圖2解說了根據(jù)本發(fā)明的一實施例的核心網(wǎng)。
[0013]圖3A是根據(jù)本發(fā)明的至少一個實施例的用戶裝備(UE)的解說。
[0014]圖3B解說了根據(jù)本發(fā)明的另一實施例的UE的軟件和/或硬件模塊。
[0015]圖4解說了包括被配置成執(zhí)行功能性的邏輯的通信設(shè)備。
[0016]圖5解說了當(dāng)由視頻捕捉UE集合捕捉時共享與感興趣的視覺主題有關(guān)的視頻的常規(guī)過程。
[0017]圖6A解說了根據(jù)本發(fā)明的一實施例的用于選擇性地組合來自多個視頻捕捉設(shè)備的多個視頻輸入饋送以形成符合目標(biāo)格式的視頻輸出饋送的過程。
[0018]圖6B解說了根據(jù)本發(fā)明的一實施例的在圖6A的一部分期間的視頻輸入饋送交織操作的示例實現(xiàn)。
[0019]圖6C解說了根據(jù)本發(fā)明的另一實施例的在圖6A的一部分期間的視頻輸入饋送交織操作的示例實現(xiàn)。
[0020]圖6D解說了根據(jù)本發(fā)明的一實施例的圖6A的過程的延續(xù)。
[0021]圖6E解說了根據(jù)本發(fā)明的另一實施例的圖6A的過程的延續(xù)。
[0022]圖7A解說了根據(jù)本發(fā)明的一實施例的在城市天際線附近的視頻捕捉UE的示例。
[0023]圖7B解說了根據(jù)本發(fā)明的一實施例的在體育館附近的視頻捕捉UE的示例。
[0024]圖8A解說了根據(jù)本發(fā)明的一實施例的交織視頻輸入饋送以達(dá)成全景圖的示例。
[0025]圖SB解說了根據(jù)本發(fā)明的一實施例的交織視頻輸入饋送以達(dá)成多個不同透視圖的示例。
[0026]圖SC解說了根據(jù)本發(fā)明的一實施例的交織視頻輸入饋送以達(dá)成3D視圖的示例。
[0027]圖9解說了根據(jù)本發(fā)明的實施例的用于給定UE在本地群通信會話期間選擇性地組合來自多個視頻捕捉設(shè)備的多個視頻輸入饋送以形成符合目標(biāo)格式的視頻輸出饋送的過程。
[0028]詳細(xì)描述
[0029]本發(fā)明的各方面在以下針對本發(fā)明具體實施例的描述和有關(guān)附圖中被公開?？梢栽O(shè)計替換實施例而不會脫離本發(fā)明的范圍。另外，本發(fā)明中眾所周知的元素將不被詳細(xì)描述或?qū)⒈皇∪ヒ悦怃螞]本發(fā)明的相關(guān)細(xì)節(jié)。
[0030]措辭“示例性”在本文中用于表示“用作示例、實例或解說”。本文中描述為“示例性”的任何實施例并不必然被解釋為優(yōu)于或勝過其他實施例。同樣，術(shù)語“本發(fā)明的實施例”并不要求本發(fā)明的所有實施例都包括所討論的特征、優(yōu)點(diǎn)、或工作模式。
[0031 ] 本文中所使用的術(shù)語僅出于描述特定實施例的目的，而并不旨在限定本發(fā)明的實施例。如本文所使用的，單數(shù)形式的“一”、“一個”和“該”旨在也包括復(fù)數(shù)形式，除非上下文另有明確指示并非如此。還將理解，術(shù)語“包括”、“具有”、“包含”和/或“含有”在本文中使用時指定所陳述的特征、整數(shù)、步驟、操作、要素、和/或組件的存在，但并不排除一個或多個其他特征、整數(shù)、步驟、操作、要素、組件和/或其群組的存在或添加。
[0032]此外，許多實施例是根據(jù)將由例如計算設(shè)備的元件執(zhí)行的動作序列來描述的。將認(rèn)識到，本文描述的各種動作能由專用電路(例如，專用集成電路(ASIC))、由正被一個或多個處理器執(zhí)行的程序指令、或由這兩者的組合來執(zhí)行。另外，本文描述的這些動作序列可被認(rèn)為是完全體現(xiàn)在任何形式的計算機(jī)可讀存儲介質(zhì)內(nèi)，其內(nèi)存儲有一經(jīng)執(zhí)行就將使相關(guān)聯(lián)的處理器執(zhí)行本文所描述的功能性的相應(yīng)計算機(jī)指令集。因此，本發(fā)明的各種方面可以用數(shù)種不同形式來體現(xiàn)，所有這些形式都已被構(gòu)想落在所要求保護(hù)的主題內(nèi)容的范圍內(nèi)。另外，對于本文描述的每個實施例，任何此類實施例的對應(yīng)形式可在本文被描述為例如被配置成執(zhí)行所描述的動作的邏輯摂。
[0033]在本文被稱為用戶裝備(UE)的高數(shù)據(jù)率(HDR)訂戶站可以是移動的或駐定的，并且可與一個或多個可被稱為B節(jié)點(diǎn)的接入點(diǎn)(AP)通信。UE通過這些B節(jié)點(diǎn)中的一個或多個B節(jié)點(diǎn)向無線電網(wǎng)絡(luò)控制器(RNC)傳送和從其接收數(shù)據(jù)分組。B節(jié)點(diǎn)和RNC是被稱為無線電接入網(wǎng)(RAN)的網(wǎng)絡(luò)的部分。無線電接入網(wǎng)可在多個接入終端之間傳輸語音和數(shù)據(jù)分組。
[0034]無線電接入網(wǎng)可進(jìn)一步連接至該無線電接入網(wǎng)外部的附加網(wǎng)絡(luò)并且可在每個UE與此類網(wǎng)絡(luò)之間傳輸語音和數(shù)據(jù)分組，此類核心網(wǎng)絡(luò)包括特定承運(yùn)商相關(guān)的服務(wù)器和設(shè)備以及至其他網(wǎng)絡(luò)(諸如企業(yè)內(nèi)聯(lián)網(wǎng)、因特網(wǎng)、公共交換電話網(wǎng)(PSTN)、服務(wù)通用分組無線電服務(wù)(GPRS)支持節(jié)點(diǎn)(SGSN)、網(wǎng)關(guān)GPRS支持節(jié)點(diǎn)(GGSN))的連通性。已與一個或多個B節(jié)點(diǎn)建立活躍話務(wù)信道連接的UE可被稱為活躍UE，并且可被稱為處于話務(wù)狀態(tài)。處在與一個或多個B節(jié)點(diǎn)建立活躍話務(wù)信道(TCH)連接的過程中的UE可被稱為處于連接建立狀態(tài)。UE可以是通過無線信道或通過有線信道進(jìn)行通信的任何數(shù)據(jù)設(shè)備。UE還可以是數(shù)種類型設(shè)備中的任何設(shè)備，包括但不限于PC卡、致密閃存設(shè)備、外置或內(nèi)置調(diào)制解調(diào)器、或者無線或有線電話。UE藉以向(諸)B節(jié)點(diǎn)發(fā)送信號的通信鏈路被稱為上行鏈路信道(例如，反向話務(wù)信道、控制信道、接入信道等)。(諸)B節(jié)點(diǎn)藉以向UE發(fā)送信號的通信鏈路被稱為下行鏈路信道(例如，尋呼信道、控制信道、廣播信道、前向話務(wù)信道等)。如本文所使用的，術(shù)語話務(wù)信道(TCH)可以指上行鏈路/反向或下行鏈路/前向話務(wù)信道。
[0035]如本文所使用的，術(shù)語“如關(guān)于多個視頻饋送的交織、經(jīng)交織或進(jìn)行交織”對應(yīng)于按產(chǎn)生包括多個視頻饋送的至少幾部分的視頻輸出饋送以形成例如全景圖、合成圖像等的方式來拼接或組裝圖像或視頻。
[0036]圖1解說了根據(jù)本發(fā)明至少一個實施例的無線通信系統(tǒng)100的一個示例性實施例的框圖。系統(tǒng)100可包含跨空中接口 104與接入網(wǎng)或無線電接入網(wǎng)(RAN) 120進(jìn)行通信的UE (諸如蜂窩電話102)，接入網(wǎng)或無線電接入網(wǎng)(RAN) 120能將UE 102連接至提供分組交換數(shù)據(jù)網(wǎng)(例如，內(nèi)聯(lián)網(wǎng)、因特網(wǎng)、和/或核心網(wǎng)126)與UE 102、108、110、112之間的數(shù)據(jù)連通性的網(wǎng)絡(luò)裝備。如此處所示，UE可以是蜂窩電話102、個人數(shù)字助理或平板計算機(jī)108、在此處示為雙向文本尋呼機(jī)的尋呼機(jī)或膝上型計算機(jī)110、或者甚至是具有無線通信口的分開的計算機(jī)平臺112。因此，本發(fā)明的各實施例能在任何形式的包括無線通信門戶或具有無線通信能力的UE上實現(xiàn)，包括但不限于無線調(diào)制解調(diào)器、PCMCIA卡、個人計算機(jī)、電話、或者其任何組合或子組合。此外，如本文所使用的，術(shù)語“UE”在其他通信協(xié)議(即，除W-CDMA以外的其他通信協(xié)議)中可被互換地稱為“接入終端”、“AT”、“無線設(shè)備”、“客戶端設(shè)備”、“移動終端”、“移動站”及其變型。
[0037]參照回到圖1，無線通信系統(tǒng)100的組件以及本發(fā)明示例性實施例的元件的相互關(guān)系不限于所解說的配置。系統(tǒng)100僅僅是示例性的并且可包括允許遠(yuǎn)程UE (諸如無線客戶端計算設(shè)備102、108、110、112)通過空中在彼此之間或當(dāng)中通信和/或在經(jīng)由空中接口104和RAN 120連接的組件(包括但不限于核心網(wǎng)126、因特網(wǎng)、PSTN、SGSN、GGSN和/或其他遠(yuǎn)程服務(wù)器)之間和當(dāng)中通信的任何系統(tǒng)。
[0038]RAN 120控制向RNC 122發(fā)送的消息(通常是作為數(shù)據(jù)分組發(fā)送的消息)。RNC122負(fù)責(zé)信令通知、建立、以及拆除服務(wù)通用分組無線電服務(wù)(GPRS)支持節(jié)點(diǎn)(SGSN)與UE102/108/110/112之間的承載信道(B卩，數(shù)據(jù)信道)。如果啟用了鏈路層加密，則RNC 122還在通過空中接口 104轉(zhuǎn)發(fā)內(nèi)容之前對該內(nèi)容進(jìn)行加密。RNC 122的功能在本領(lǐng)域是公知的且出于簡明起見將不作進(jìn)一步討論。核心網(wǎng)126可通過網(wǎng)絡(luò)、因特網(wǎng)和/或公共交換電話網(wǎng)(PSTN)與RNC 122通信。替換地，RNC 122可直接連接到因特網(wǎng)或外部網(wǎng)絡(luò)。通常，核心網(wǎng)126與RNC 122之間的網(wǎng)絡(luò)或因特網(wǎng)連接傳遞數(shù)據(jù)，而PSTN傳遞語音信息。RNC 122可連接到多個B節(jié)點(diǎn)124。以與核心網(wǎng)126相似的方式，RNC 122通常通過網(wǎng)絡(luò)、因特網(wǎng)和/或PSTN連接到B節(jié)點(diǎn)124以用于數(shù)據(jù)傳遞和/或語音信息。B節(jié)點(diǎn)124可無線地向UE (諸如蜂窩電話102)廣播數(shù)據(jù)消息。如本領(lǐng)域已知的，RNC 122及其它組件可形成RAN 120。然而，替換配置也可被使用并且本發(fā)明不限于所解說的配置。例如，在另一實施例中，RNC 122以及一個或多個B節(jié)點(diǎn)124的功能性可被折疊到具有RNC 122和(諸)B節(jié)點(diǎn)124兩者的功能性的單個混合摂模塊中。
[0039]圖2更詳細(xì)地解說了圖1的無線通信系統(tǒng)100的示例。具體而言，參照圖2，UE I...N被示為在由不同分組數(shù)據(jù)網(wǎng)端點(diǎn)服務(wù)的位置處連接至RAN 120。圖2的解說針對W-CDMA系統(tǒng)和術(shù)語，但是將領(lǐng)會圖2可如何被修改以遵循各種其他無線通信協(xié)議(例如，LTE、EV-DO、UMTS等)，并且各種實施例不限于所解說的系統(tǒng)或元件。
[0040]UE I和UE 2在由126a所標(biāo)示的核心網(wǎng)的包括第一分組數(shù)據(jù)網(wǎng)端點(diǎn)162的部分(例如，其可對應(yīng)于SGSN、GGSN、PDSN、歸屬代理(HA)、區(qū)外代理(FA)、LTE中的PGW/SGW等)服務(wù)的一部分處連接至RAN 120。第一分組數(shù)據(jù)網(wǎng)端點(diǎn)162進(jìn)而連接至因特網(wǎng)175a，并且通過因特網(wǎng)175a連接至第一應(yīng)用服務(wù)器170和路由單元205。UE 3和5...N在由126b所標(biāo)示的核心網(wǎng)的包括第二分組數(shù)據(jù)網(wǎng)端點(diǎn)164的另一部分(例如，其可對應(yīng)于SGSN、GGSN、PDSN、FA、HA等)處連接至RAN 120。類似于第一分組數(shù)據(jù)網(wǎng)端點(diǎn)162，第二分組數(shù)據(jù)網(wǎng)端點(diǎn)164進(jìn)而連接至因特網(wǎng)175b，并且通過因特網(wǎng)175b連接至第二應(yīng)用服務(wù)器172和路由單元205。核心網(wǎng)126a和126b至少經(jīng)由路由單元205來耦合。UE 4直接連接至核心網(wǎng)126a內(nèi)的因特網(wǎng)175(例如，經(jīng)由有線以太網(wǎng)連接、經(jīng)由WiFi熱點(diǎn)或802.1lb連接等，由此WiFi接入點(diǎn)或其它因特網(wǎng)橋接機(jī)制可被認(rèn)為是至RAN 120的替換接入網(wǎng))，并且通過因特網(wǎng)175可隨后連接至以上描述的任何系統(tǒng)組件。
[0041]參照圖2，UE 1、2和3被解說為無線蜂窩電話，UE 4被解說為臺式計算機(jī)而UE5...N被解說為無線平板PC和/或膝上型PC。然而，在其他實施例中，將領(lǐng)會，無線通信系統(tǒng)100可連接至任何類型的UE，并且在圖2中解說的示例并非旨在限制該系統(tǒng)內(nèi)可實現(xiàn)的UE的類型。
[0042]參照圖3A，諸如蜂窩電話之類的UE 200 (這里為無線設(shè)備)具有平臺202，該平臺202能接收并執(zhí)行傳送自RAN 120的可能最終是來自核心網(wǎng)126、因特網(wǎng)、和/或其他遠(yuǎn)程服務(wù)器及網(wǎng)絡(luò)的軟件應(yīng)用、數(shù)據(jù)和/或命令。平臺202可包括收發(fā)機(jī)206，收發(fā)機(jī)206可操作地耦合到專用集成電路(“ASIC”208)或其他處理器、微處理器、邏輯電路、或其他數(shù)據(jù)處理設(shè)備。ASIC 208或其他處理器執(zhí)行與無線設(shè)備的存儲器212中的任何駐留程序?qū)拥膽?yīng)用編程接口( “API”)210層。存儲器212可包括只讀或隨機(jī)存取存儲器(ROM和RAM)、EEPR0M、閃存卡、或計算機(jī)平臺常用的任何存儲器。平臺202還可包括能保持未在存儲器212中活躍地使用的應(yīng)用的本地數(shù)據(jù)庫214。本地數(shù)據(jù)庫214通常為閃存單元，但也可以是本領(lǐng)域已知的任何輔助存儲設(shè)備，諸如磁介質(zhì)、EEPROM、光學(xué)介質(zhì)、帶、軟盤或硬盤、或諸如此類。內(nèi)部平臺202組件也可以可操作地耦合到外部設(shè)備，諸如天線222、顯示器224、即按即講按鈕228和按鍵板226以及其他組件，如本領(lǐng)域中已知的。
[0043]相應(yīng)地，本發(fā)明的實施例可包括有能力執(zhí)行本文描述的功能的UE。如將由本領(lǐng)域技術(shù)人員領(lǐng)會的，各種邏輯元件可實施在在分立元件、在處理器上執(zhí)行的軟件模塊、或軟件與硬件的任何組合中以達(dá)成本文公開的功能性。例如，ASIC 208、存儲器212、API 210和本地數(shù)據(jù)庫214可以全部協(xié)作地用來加載、存儲和執(zhí)行本文所公開的各種功能，且用于執(zhí)行這些功能的邏輯由此可分布在各種元件上。替換地，該功能性可被納入到一個分立的組件中。因此，圖3A中的UE 200的特征將僅被視為解說性的，且本發(fā)明不被限定于所解說的特征或安排。
[0044]UE 102或200與RAN 120之間的無線通信可以基于不同的技術(shù)，諸如碼分多址(CDMA)、W-CDMA、時分多址(TDMA)、頻分多址(FDMA)、正交頻分復(fù)用(OFDM)、全球移動通信系統(tǒng)(GSM)、3GPP長期演進(jìn)(LTE)、或可在無線通信網(wǎng)絡(luò)或數(shù)據(jù)通信網(wǎng)絡(luò)中使用的其他協(xié)議。因此，本文提供的解說并非意圖限定本發(fā)明的實施例，而僅僅是幫助描述本發(fā)明的實施例的各方面。
[0045]圖3B解說了根據(jù)本發(fā)明的另一實施例的UE 200的軟件和/或硬件模塊。參照圖3B，UE 200包括多媒體客戶端300B、無線廣域網(wǎng)(WffAN)無線電和調(diào)制解調(diào)器310B以及于無線局域網(wǎng)(WLAN)無線電和調(diào)制解調(diào)器315B。
[0046]參照圖3B，多媒體客戶端300B對應(yīng)于在UE 200上執(zhí)行以支持RAN 120上的由應(yīng)用服務(wù)器170或172仲裁的通信會話(例如，VoIP會話、PTT會話、PTX會話等)的客戶端，由此以上關(guān)于圖1到2描述的RAN 120形成WffAN的一部分。多媒體客戶端300B被配置成經(jīng)由WLAN無線電和調(diào)制解調(diào)器315B來支持個域網(wǎng)(PAN)和/或WLAN上的通信會話。
[0047]參照圖3B，WffAN無線電和調(diào)制解調(diào)器310B對應(yīng)于UE 200的被用于建立與RAN120 (諸如無線基站或蜂窩塔)的無線通信鏈路的硬件。在一示例中，當(dāng)UE 200能建立與應(yīng)用服務(wù)器170的良好連接時，能部分或完全依賴于應(yīng)用服務(wù)器170來仲裁UE 200的通信會話，從而多媒體客戶端300B能與WffAN無線電調(diào)制解調(diào)器310B交互(以經(jīng)由RAN 120連接至應(yīng)用服務(wù)器170)以參與該通信會話。
[0048]WLAN無線電和調(diào)制解調(diào)器315B對應(yīng)于UE 200的被用于建立直接與其它本地UE的無線通信鏈路以形成PAN(例如，經(jīng)由藍(lán)牙、WiFi等)，或者替換地經(jīng)由本地接入點(diǎn)(AP)(例如，WLAN AP或路由器、WiFi熱點(diǎn)等)連接至其它本地UE的硬件。在一示例中，當(dāng)UE200不能建立與應(yīng)用服務(wù)器170的可接受連接時(例如，由于較差的物理層和/或回程連接)，不能依賴于應(yīng)用服務(wù)器170來完全仲裁UE 200的通信會話。在這一情形中，多媒體客戶端300B能嘗試(至少部分地)使用WLAN協(xié)議(例如，以僅客戶端模式或以仲裁模式)經(jīng)由PAN來支持給定的通信會話。
[0049]圖4解說了包括被配置成執(zhí)行功能性的邏輯的通信設(shè)備400。通信設(shè)備400可對應(yīng)于上述通信設(shè)備中的任一者，包括但不限于UE 102、108、110、112或200，B節(jié)點(diǎn)或基站120，RNC或基站控制器122，分組數(shù)據(jù)網(wǎng)端點(diǎn)(例如，SGSN、GGSN、長期演進(jìn)(LTE)中的移動性管理實體(MME)等)，服務(wù)器170到172中的任一者等。因此，通信設(shè)備400可對應(yīng)于被配置成通過網(wǎng)絡(luò)與一個或多個其它實體通信(或促成與一個或多個其它實體的通信)的任何電子設(shè)備。
[0050]參照圖4，通信設(shè)備400包括配置成接收和/或傳送信息的邏輯405。在一示例中，如果通信設(shè)備400對應(yīng)于無線通信設(shè)備(例如，UE 200、B節(jié)點(diǎn)124等)，則配置成接收和/或傳送信息的邏輯405可包括無線通信接口(例如，藍(lán)牙、WiF1、2G、3G等)，諸如無線收發(fā)機(jī)和相關(guān)聯(lián)的硬件(例如，RF天線、調(diào)制解調(diào)器、調(diào)制器和/或解調(diào)器等)。在另一示例中，配置成接收和/或傳送信息的邏輯405可對應(yīng)于有線通信接口(例如，串行連接、USB或火線連接、能用來接入因特網(wǎng)175a或175b的以太網(wǎng)連接等)。因此，如果通信設(shè)備400對應(yīng)于某種類型的基于網(wǎng)絡(luò)的服務(wù)器(例如，SGSN、GGSN、應(yīng)用服務(wù)器170或172等)，則配置成接收和/或傳送信息的邏輯405在一示例中可對應(yīng)于以太網(wǎng)卡，該以太網(wǎng)卡經(jīng)由以太網(wǎng)協(xié)議將基于網(wǎng)絡(luò)的服務(wù)器連接至其它通信實體。在進(jìn)一步示例中，配置成接收和/或傳送信息的邏輯405可包括傳感或測量硬件(例如，加速計、溫度傳感器、光傳感器、用于監(jiān)視本地RF信號的天線等)，通信設(shè)備400可藉由該傳感或測量硬件來監(jiān)視其本地環(huán)境。配置成接收和/或傳送信息的邏輯405還可包括在被執(zhí)行時允許配置成接收和/或傳送信息的邏輯405的相關(guān)聯(lián)硬件執(zhí)行其接收和/或傳送功能的軟件。然而，配置成接收和/或傳送信息的邏輯405不單單對應(yīng)于軟件，并且配置成接收和/或傳送信息的邏輯405至少部分地依賴于硬件來實現(xiàn)其功能性。
[0051]參照圖4，通信設(shè)備400進(jìn)一步包括配置成處理信息的邏輯410。在一示例中，配置成處理信息的邏輯410可至少包括處理器?？捎膳渲贸商幚硇畔⒌倪壿?10執(zhí)行的處理類型的示例實現(xiàn)包括但不限于執(zhí)行確定、建立連接、在不同信息選項之間作出選擇、執(zhí)行與數(shù)據(jù)有關(guān)的評價、與耦合至通信設(shè)備400的傳感器交互以執(zhí)行測量操作、將信息從一種格式轉(zhuǎn)換為另一種格式(例如，在不同協(xié)議之間轉(zhuǎn)換(諸如，.wmv到.avi等))，等等。例如，包括在配置成處理信息的邏輯410中的處理器可對應(yīng)于被設(shè)計成執(zhí)行本文所描述功能的通用處理器、數(shù)字信號處理器(DSP)、專用集成電路(ASIC)、現(xiàn)場可編程門陣列(FPGA)或其他可編程邏輯器件、分立的門或晶體管邏輯、分立的硬件組件、或其任何組合。通用處理器可以是微處理器，但在替換方案中，該處理器可以是任何常規(guī)的處理器、控制器、微控制器、或狀態(tài)機(jī)。處理器還可以被實現(xiàn)為計算設(shè)備的組合，例如DSP與微處理器的組合、多個微處理器、與DSP核心協(xié)同的一個或多個微處理器或任何其它此類配置。配置成處理信息的邏輯410還可包括在被執(zhí)行時允許配置成處理信息的邏輯410的相關(guān)聯(lián)硬件執(zhí)行其處理功能的軟件。然而，配置成處理信息的邏輯410不單單對應(yīng)于軟件，并且配置成處理信息的邏輯410至少部分地依賴于硬件來實現(xiàn)其功能性。
[0052]參照圖4，通信設(shè)備400進(jìn)一步包括配置成存儲信息的邏輯415。在一示例中，配置成存儲信息的邏輯415可至少包括非瞬態(tài)存儲器和相關(guān)聯(lián)的硬件(例如，存儲器控制器等)。例如，包括在配置成存儲信息的邏輯415中的非瞬態(tài)存儲器可對應(yīng)于RAM存儲器、閃存、ROM存儲器、EPROM存儲器、EEPROM存儲器、寄存器、硬盤、可移動盤、CD-ROM、或本領(lǐng)域中已知的任何其他形式的存儲介質(zhì)。配置成存儲信息的邏輯415還可包括在被執(zhí)行時允許配置成存儲信息的邏輯415的相關(guān)聯(lián)硬件執(zhí)行其存儲功能的軟件。然而，配置成存儲信息的邏輯415不單單對應(yīng)于軟件，并且配置成存儲信息的邏輯415至少部分地依賴于硬件來實現(xiàn)其功能性。
[0053]參照圖4，通信設(shè)備400進(jìn)一步可任選地包括配置成呈現(xiàn)信息的邏輯420。在一示例中，配置成呈現(xiàn)信息的邏輯420可至少包括輸出設(shè)備和相關(guān)聯(lián)的硬件。例如，輸出設(shè)備可包括視頻輸出設(shè)備(例如，顯示屏、能承載視頻信息的端口，諸如USB、HDMI等)、音頻輸出設(shè)備(例如，揚(yáng)聲器、能承載音頻信息的端口，諸如話筒插孔、USB、HDMI等)、振動設(shè)備和/或信息可藉以被格式化以供輸出或?qū)嶋H上由通信設(shè)備400的用戶或操作者輸出的任何其它設(shè)備。例如，如果通信設(shè)備400對應(yīng)于如圖3A中示出的UE 200，則配置成呈現(xiàn)信息的邏輯420可包括顯示器224。在進(jìn)一步示例中，對于某些通信設(shè)備，諸如不具有本地用戶的網(wǎng)絡(luò)通信設(shè)備(例如，網(wǎng)絡(luò)交換機(jī)或路由器、遠(yuǎn)程服務(wù)器等)而言，配置成呈現(xiàn)信息的邏輯420可被省略。配置成呈現(xiàn)信息的邏輯420還可包括在被執(zhí)行時允許配置成呈現(xiàn)信息的邏輯420的相關(guān)聯(lián)硬件執(zhí)行其呈現(xiàn)功能的軟件。然而，配置成呈現(xiàn)信息的邏輯420不單單對應(yīng)于軟件，并且配置成呈現(xiàn)信息的邏輯420至少部分地依賴于硬件來實現(xiàn)其功能性。
[0054]參照圖4，通信設(shè)備400進(jìn)一步可任選地包括配置成接收本地用戶輸入的邏輯425。在一示例中，配置成接收本地用戶輸入的邏輯425可至少包括用戶輸入設(shè)備和相關(guān)聯(lián)的硬件。例如，用戶輸入設(shè)備可包括按鈕、觸摸屏顯示器、鍵盤、相機(jī)、音頻輸入設(shè)備(例如，話筒或可承載音頻信息的端口，諸如話筒插孔等)、和/或可用來從通信設(shè)備400的用戶或操作者接收信息的任何其它設(shè)備。例如，如果通信設(shè)備400對應(yīng)于如圖3A中示出的UE 200，則配置成接收本地用戶輸入的邏輯425可包括顯示器224 (若實現(xiàn)為觸摸屏)、按鍵板226等。在進(jìn)一步示例中，對于某些通信設(shè)備，諸如不具有本地用戶的網(wǎng)絡(luò)通信設(shè)備(例如，網(wǎng)絡(luò)交換機(jī)或路由器、遠(yuǎn)程服務(wù)器等)而言，配置成接收本地用戶輸入的邏輯425可被省略。配置成接收本地用戶輸入的邏輯425還可包括在被執(zhí)行時允許配置成接收本地用戶輸入的邏輯425的相關(guān)聯(lián)硬件執(zhí)行其輸入接收功能的軟件。然而，配置成接收本地用戶輸入的邏輯425不單單對應(yīng)于軟件，并且配置成接收本地用戶輸入的邏輯425至少部分地依賴于硬件來實現(xiàn)其功能性。
[0055]參照圖4，盡管被配置的邏輯405到425在圖4中被示出為分開或相異的塊，但將領(lǐng)會，相應(yīng)各個被配置的邏輯用來執(zhí)行其功能性的硬件和/或軟件可部分交迭。例如，用于促成被配置的邏輯405到425的功能性的任何軟件可被存儲在與配置成存儲信息的邏輯415相關(guān)聯(lián)的非瞬態(tài)存儲器中，從而被配置的邏輯405到425各自部分地基于由配置成存儲信息的邏輯415所存儲的軟件的操作來執(zhí)行其功能性(即，在這一情形中為軟件執(zhí)行)。同樣，直接與被配置的邏輯中的一個相關(guān)聯(lián)的硬件可不時地被其它被配置的邏輯借用或使用。例如，配置成處理信息的邏輯410的處理器可在數(shù)據(jù)由配置成接收和/或傳送信息的邏輯405傳送之前將此數(shù)據(jù)格式化為適當(dāng)格式，從而配置成接收和/或傳送信息的邏輯405部分地基于與配置成處理信息的邏輯410相關(guān)聯(lián)的硬件(即，處理器)的操作來執(zhí)行其功能性(即，在這一情形中為數(shù)據(jù)傳輸)。
[0056]將理解，各個框中的配置邏輯或配置成“…的邏輯”并不限于具體的邏輯門或元件，而是一般地指代執(zhí)行本文描述的功能性的能力(經(jīng)由硬件或硬件和軟件的組合)。因此，盡管共享措詞“邏輯”，但如各個框中解說的配置邏輯或“配置成…的邏輯”不必被實現(xiàn)為邏輯門或邏輯元件。從以下更詳細(xì)地描述的各實施例的概覽中，各個框中的邏輯之間的其它交互或協(xié)作將對本領(lǐng)域普通技術(shù)人員而言變得清楚。
[0057]多個視頻捕捉設(shè)備可以鑒于特定的感興趣的視覺主題(例如，體育比賽、城市、天空中的星座、火山噴發(fā)等)。例如，對于體育比賽中的許多觀眾而言，在其各自相應(yīng)的視頻捕捉設(shè)備上捕捉比賽的一些或全部是常見的。將領(lǐng)會，每一個相應(yīng)的視頻捕捉設(shè)備具有提供感興趣的視覺主題上的唯一性透視的位置和朝向的不同組合。例如，兩個視頻捕捉設(shè)備可能彼此非?？拷?即，基本上同一位置)，但朝向(或指向)不同方向(例如，分別關(guān)注于籃球場的不同側(cè))。在另一示例中，兩個視頻捕捉設(shè)備可以彼此遠(yuǎn)離但朝向(指向或成角度于)同一方向，由此導(dǎo)致感興趣的視覺主題的不同透視。在又一示例中，即使從基本上同一位置和朝向捕捉視頻的兩個視頻捕捉設(shè)備在其相應(yīng)捕捉到的視頻中也將具有細(xì)微不同。能導(dǎo)致在相應(yīng)視頻捕捉設(shè)備處捕捉到的視頻中的發(fā)散度的附加因素是視頻被捕捉的格式(例如，捕捉到的視頻的分辨率和/或縱橫比、在相應(yīng)視頻捕捉設(shè)備上的透鏡的照明靈敏度和/或?qū)埂⒐鈱W(xué)和/或數(shù)字縮放的程度、捕捉到的視頻的壓縮、捕捉到的視頻中的顏色分辨率，捕捉到的視頻是彩色還是黑白的，等等)。
[0058]在進(jìn)一步方面，視頻捕捉設(shè)備實施在無線通信設(shè)備或UE內(nèi)現(xiàn)在是常見的。因此，在體育比賽示例中，體育比賽的數(shù)百甚至數(shù)千個觀眾能在體育場中其相應(yīng)座位處捕捉視頻，其中每一個捕捉到的視頻供應(yīng)該體育比賽的不同透視。
[0059]圖5解說了當(dāng)由視頻捕捉UE集合捕捉時共享與感興趣的視覺主題有關(guān)的視頻的常規(guī)過程。參照圖5，假定UE L...3各自設(shè)置有視頻捕捉設(shè)備并且各自連接至RAN 120(未在圖5中顯式示出)，UE L...3能通過RAN 120向應(yīng)用服務(wù)器170上傳相應(yīng)視頻饋送以供傳播至目標(biāo)UE 4…N。謹(jǐn)記這些假定，UE I從第一位置、朝向和/或格式捕捉與感興趣的給定視覺主題相關(guān)聯(lián)的視頻(500)，UE 2從第二位置、朝向和/或格式捕捉與感興趣的給定視覺主題相關(guān)聯(lián)的視頻(505)，而UE 3從第三位置、朝向和/或格式捕捉與感興趣的給定視覺主題相關(guān)聯(lián)的視頻(510)。如上所提及的，與在500到510處由UE Ρ..3捕捉到的視頻相關(guān)聯(lián)的位置、朝向和/或格式中的一者或多者可以是相同或基本上是相同的，但是位置、朝向和格式的相應(yīng)組合將至少在其相應(yīng)捕捉到的視頻方面具有可辨識的細(xì)微差異。UE I傳送其捕捉到的視頻作為至應(yīng)用服務(wù)器170的第一視頻輸入饋送(515)，UE 2傳送其捕捉到的視頻作為至應(yīng)用服務(wù)器170的第二視頻輸入饋送(520)，而UE 3傳送其捕捉到的視頻作為至應(yīng)用服務(wù)器170的第三視頻輸入饋送(525)。盡管未在圖5中顯式示出，但是來自UE L...3的視頻饋送可伴隨有補(bǔ)充信息(諸如，音頻饋送、字幕或描述性信息，等等)。
[0060]參照圖5，應(yīng)用服務(wù)器170從UE L...3接收視頻輸入饋送并選擇其中一個視頻饋送以供傳輸至UE 4…Ν(530)。530處的選擇可基于相應(yīng)UE I…3的優(yōu)先級來發(fā)生，或者基于應(yīng)用服務(wù)器170的操作者檢查每一視頻輸入饋送并嘗試推斷哪個視頻饋送將最流行或與目標(biāo)UE 4...N最相關(guān)來手動發(fā)生。應(yīng)用服務(wù)器170隨后將選定的視頻輸入饋送轉(zhuǎn)發(fā)給UE 4…N作為視頻輸出饋送(535)。UE 4…N接收并呈現(xiàn)視頻輸出饋送(540)。
[0061]如將由本領(lǐng)域普通技術(shù)人員所領(lǐng)會的，圖5中的應(yīng)用服務(wù)器170能嘗試從UE1...3中選擇其中一個視頻輸入饋送以與通信群的其余部分共享。然而，在應(yīng)用服務(wù)器170選擇單個視頻輸入饋送的情形中，其它視頻輸入饋送被忽略并且不被傳達(dá)給目標(biāo)UE 4…N。同樣，如果應(yīng)用服務(wù)器170選擇并且轉(zhuǎn)發(fā)了多個視頻輸入饋送并且并行地將這些多個視頻輸入饋送發(fā)送給目標(biāo)UE 4…N，則將領(lǐng)會，分配給視頻輸出饋送的帶寬量將需要用選定的視頻輸入饋送的數(shù)量來縮放，這可能是不實際的并且可能使承運(yùn)商網(wǎng)絡(luò)以及目標(biāo)UE本身兩者竭盡全力以解碼所有視頻數(shù)據(jù)。因此，本發(fā)明的各實施例涉及根據(jù)節(jié)省帶寬的目標(biāo)格式來選擇性地組合多個視頻輸入饋送，同時增強(qiáng)任何特定視頻輸入饋送上的視頻輸出幀中的視頻息。
[0062]圖6A解說了根據(jù)本發(fā)明的一實施例的用于選擇性地組合來自多個視頻捕捉設(shè)備的多個視頻輸入饋送以形成符合目標(biāo)格式的視頻輸出饋送的過程。
[0063]參照圖6A，假定UE I...3各自設(shè)置有視頻捕捉設(shè)備并且各自連接至RAN 120 (未在圖5中顯式示出)或另一類型的接入網(wǎng)(例如，WiFi熱點(diǎn)、直接或有線因特網(wǎng)連接等)，UE Ρ..3能通過RAN 120或另一類型的接入網(wǎng)向應(yīng)用服務(wù)器170上傳相應(yīng)視頻饋送以供傳播至目標(biāo)UE 4…N中的一者或多者。謹(jǐn)記這些假定，UE I從第一位置、朝向和/或格式捕捉與感興趣的給定視覺主題相關(guān)聯(lián)的視頻^OOA)，UE 2從第二位置、朝向和/或格式捕捉與感興趣的給定視覺主題相關(guān)聯(lián)的視頻(605Α)，而UE 3從第三位置、朝向和/或格式捕捉與感興趣的給定視覺主題相關(guān)聯(lián)的視頻^lOA)。如上所提及的，與在600Α到610Α處由UE1...3捕捉到的視頻相關(guān)聯(lián)的位置、朝向和/或格式中的一者或多者可以是相同或基本上是相同的，但是位置、朝向和格式的相應(yīng)組合將至少在其相應(yīng)捕捉到的視頻方面具有可辨識的細(xì)微差異。
[0064]與圖5不同，在圖6Α中，假定除了在600Α到610Α處在UE 1...3處捕捉視頻之外，UE 1...3還檢測其捕捉到的視頻的相應(yīng)位置、朝向和格式。例如，UE I可以使用衛(wèi)星定位系統(tǒng)(SPS)(諸如全球定位系統(tǒng)(GPS))來檢測其位置，UE I可以經(jīng)由陀螺儀結(jié)合傾斜傳感器來檢測其朝向，并且UE I可以經(jīng)由其當(dāng)前的視頻捕捉設(shè)置來檢測其格式(例如，UE I可以檢測當(dāng)前視頻以480ρ的顏色被捕捉并且經(jīng)由H.264以2χ?jǐn)?shù)字縮放和2.5χ光學(xué)縮放來編碼)。在另一示例中，UE 2可以經(jīng)由地面定位技術(shù)來確定其位置，而UE 3可以經(jīng)由本地?zé)o線環(huán)境或射頻(RF)指紋來檢測其位置(例如，通過識別本地藍(lán)牙連接、WiFi熱點(diǎn)、蜂窩基站等)。在另一示例中，UE 2可以報告固定位置，諸如特定體育場的區(qū)域#22中的座位#4F。
[0065]在另一不例中，相應(yīng)的UE可以報告其相對于其它向應(yīng)用服務(wù)器170提供視頻輸入饋送的UE的位置。在這一情形中，提供視頻輸入饋送的不同UE之間的P2P距離和朝向可被繪制，即使在一個或多個不同UE的絕對位置未知的實例中亦是如此。此舉可以給予呈現(xiàn)設(shè)備(即，圖6A中的應(yīng)用服務(wù)器170)更為容易地確定各個UE之間的關(guān)系的能力。各設(shè)備之間的相對距離和角度將允許3D呈現(xiàn)器(即，圖6A中的應(yīng)用服務(wù)器170)確定單個設(shè)備何時移動其位置(相對于大群，它將是不出相對于多個其它設(shè)備的變化的一個)。
[0066]因此，存在UE 1...3在視頻捕捉期間藉由其確定其當(dāng)前位置、朝向和/或格式的各種機(jī)制。
[0067]簡要轉(zhuǎn)向圖7Α-7Β，提供了在600Α到610Α的視頻捕捉期間的UE L...3的位置和朝向的示例。參照圖7Α，感興趣的視覺主題是城市天際線700Α，而UE Ρ..3位于城市天際線700Α附近的位置705Α、710Α和715Α。UE I…3的朝向由視頻捕捉葉(lobe) 720A、725A和730A來表示?；旧?，嵌入或附連至UE L...3的視頻捕捉設(shè)備指向城市天際線700A以便沿相應(yīng)視頻捕捉葉(或視線)來捕捉光?；赨E I...3上的相應(yīng)視頻捕捉設(shè)備的各種格式設(shè)置(例如，縮放的程度、聚焦等)，UE I…3正捕捉由視頻捕捉區(qū)735A、740A和745A表示的城市天際線700A的各部分。
[0068]參照圖7B，UE I…3各自是在體育館處具有與球場或運(yùn)動場705B相對應(yīng)的感興趣的視覺主題的觀眾，并且UE I…3位于球場或運(yùn)動場705B附近的位置710B、715B和720B(例如，在看臺或露天看臺中的其相應(yīng)座位處)。UE I…3的朝向由視頻捕捉葉725B、730B和735B來表示?；旧希度牖蚋竭B至UE L...3的視頻捕捉設(shè)備指向球場或運(yùn)動場705B以便沿相應(yīng)視頻捕捉葉(或視線)來捕捉光。
[0069]返回至圖6A，在群通信會話期間，UE I傳送其捕捉到的視頻連同第一位置、朝向和/或格式的指示作為至應(yīng)用服務(wù)器170的第一視頻輸入饋送(615A)，UE 2傳送其捕捉到的視頻連同第二位置、朝向和/或格式的指示作為至應(yīng)用服務(wù)器170的第二視頻輸入饋送(620A)，而UE 3傳送其捕捉到的視頻連同第三位置、朝向和/或格式的指示作為至應(yīng)用服務(wù)器170的第三視頻輸入饋送(625A)。盡管未在圖6A中顯式示出，但是來自UE Ρ..3的視頻饋送可伴隨有補(bǔ)充信息(諸如，音頻饋送、字幕或描述性信息，等等)。
[0070]參照圖6Α，應(yīng)用服務(wù)器170從UE L...3接收視頻輸入饋送并選擇多于一個視頻輸入饋送的視頻輸入饋送集合以供傳輸至UE 4…N中的一者或多者^30Α)。具體而言，該選擇選取相對于結(jié)果所得的視頻輸出饋送中要達(dá)成的特定目標(biāo)格式的“非冗余”視頻輸入饋送集合。例如，如果目標(biāo)格式對應(yīng)于城市天際線的全景圖，則顯示視頻輸入饋送的顯著交迭部分的視頻輸入饋送是冗余的，因為視頻輸入饋送的經(jīng)交織版本將不會擴(kuò)展超過個體視頻輸入饋送很多。另一方面，捕捉城市天際線的非交迭部分的視頻輸入饋送是用于全景圖選擇的良好候選，因為非交迭部分是非冗余的。類似地，如果目標(biāo)格式正向目標(biāo)UE提供城市天際線的大量不同的透視圖，則集中在城市天際線的相同部分的視頻輸入饋送也是冗余的。在另一示例中，如果目標(biāo)格式對應(yīng)于3D視圖，則要求視頻輸入饋送集中在城市天際線的相同部分，因為形成城市天際線的完全不同和不相關(guān)部分的3D視圖將是困難的。然而，在3D視圖的上下文中，具有相同朝向或角度的視頻輸入饋送被認(rèn)為是冗余的，因為要求朝向多樣性以形成3D視圖。因此，使得視頻輸入饋送“冗余”或“不冗余”的定義能隨要達(dá)成的特定目標(biāo)格式而變化。在630Α處通過選取適當(dāng)?shù)?即，非冗余的)視頻輸入饋送，可以改善達(dá)成目標(biāo)格式和/或目標(biāo)格式的質(zhì)量的成功率。
[0071]在非冗余視頻輸入饋送檢測和選擇的又一示例中，以上描述的相對P2P關(guān)系信息(例如，相應(yīng)P2P UE之間代替或除了其絕對位置以外的距離和朝向或角度)可被用于使冗余的視頻輸入饋送不合格或受抑制。在3D視圖情境中，例如，P2P設(shè)備之間的相對P2P關(guān)系可被用于檢測缺少用于適當(dāng)?shù)?D圖像的足夠角度多樣性的視頻輸入饋送。
[0072]盡管未在圖6Α中顯式示出，但是如果本地P2P UE變得知曉它們共享靠近位置以及相似的有利位置(例如，相似角度或朝向)，則本地P2P UE能彼此協(xié)商以便本地P2P UE中的僅一個P2P UE在615Α到625Α傳送視頻輸入饋送(例如，具有較高帶寬的P2P UE等)。因此，在一些實施例中，冗余視頻輸入饋送可經(jīng)由視頻捕捉UE間的P2P協(xié)商來減少，這能簡化630Α處針對目標(biāo)格式轉(zhuǎn)換而對視頻輸入饋送的后續(xù)選擇。
[0073]在選擇特定目標(biāo)格式的非冗余視頻輸入饋送集合之后，應(yīng)用服務(wù)器170隨后同步來自630Α的選定的非冗余視頻輸入饋送并將其交織成符合目標(biāo)格式的視頻輸出饋送(635Α)。在同步相應(yīng)的視頻輸入饋送方面，應(yīng)用服務(wù)器170能簡單地依賴于指示何時捕捉、傳送和/或接收到相應(yīng)的視頻輸入饋送中的幀的時間戳。然而，在另一實施例中，基于事件的同步可由應(yīng)用服務(wù)器170使用相應(yīng)的視頻輸入饋送內(nèi)的一個或多個共同可跟蹤對象來實現(xiàn)。例如，如果共同的感興趣的視覺主題是籃球比賽并且選定的非冗余視頻輸入饋送是從體育場中的不同座位捕捉籃球比賽，則對于基于事件的同步，應(yīng)用服務(wù)器170將嘗試“鎖定”或關(guān)注的共同可跟蹤對象可包括籃球、籃球場上的線、裁判員的運(yùn)動衫、運(yùn)動員中的一個或多個的運(yùn)動衫等。在特定示例中，如果籃球運(yùn)動員在比賽中的特定點(diǎn)處投籃，則應(yīng)用服務(wù)器170可以在籃球被示為離開籃球運(yùn)動員的手時在各自相應(yīng)的視頻輸入饋送中嘗試同步以達(dá)成基于事件的同步。作為一般事件，針對要用于基于事件的同步的共同可跟蹤對象的良好候選包括固定的高對比度對象集和靜止的高對比度對象集(每一類型中的至少一個被使用)。提供視頻輸入饋送之一的每一 UE可被要求在每幀基礎(chǔ)或其它某個周期性基礎(chǔ)上向共同可跟蹤對象集報告參數(shù)，諸如其距離和角度(即，朝向或度數(shù))。在應(yīng)用服務(wù)器170處，至特定共同跟蹤對象的距離和角度信息準(zhǔn)許應(yīng)用服務(wù)器170在相應(yīng)的視頻輸入饋送之間同步。一旦共同跟蹤對象被跟蹤，可以在多個不同的視頻輸入饋送(例如，籃球運(yùn)球或投入籃筐)處檢測與該共同跟蹤對象相關(guān)聯(lián)的事件，并且這些事件可隨后變?yōu)橛糜谠谝曨l輸入饋送之間進(jìn)行同步的基礎(chǔ)。在這些共同跟蹤對象事件之間，不同的視頻輸入饋送可經(jīng)由其它手段來同步，諸如以上提及的時間戳。
[0074]630A到635A處的視頻輸入饋送的選擇和交織可用數(shù)種方式來實現(xiàn)，如現(xiàn)在將描述的。
[0075]在630A和635A的示例實現(xiàn)中，假定針對經(jīng)交織的視頻輸入饋送的目標(biāo)格式是由多個視頻輸入饋送構(gòu)成的感興趣的視覺主題的全景圖。圖8A內(nèi)解說了交織個體視頻輸入饋送以達(dá)成視頻輸出饋送中的全景圖的示例。參照圖8A，假定感興趣的視覺主題是城市天際線800A，其類似于圖7A中的城市天際線700A。來自UE I…3的視頻輸入饋送分別傳達(dá)各部分(或視頻捕捉區(qū))805A、810A和815A處的城市天際線800A的視頻。為了形成全景圖，應(yīng)用服務(wù)器170通過選擇毗鄰或毗連來選擇非冗余的視頻輸入饋送，從而全景圖將不具有任何顯眼的間隙。在這一情形中，來自UE I和2的視頻輸入饋送是全景圖候選(即，非冗余和相關(guān)的)，但UE 3的視頻輸入饋送正捕捉城市天際線800A的將不容易與來自UEI或2的視頻輸入饋送交織的遠(yuǎn)程部分(即，非冗余但也不與這一實例中的全景圖相關(guān))。因此，來自UE I和2的視頻輸入饋送被選擇用于全景圖形成。接著，來自UE I和2的視頻輸入饋送的相關(guān)部分被選擇(820A)。例如，UE 2的視頻輸入饋送與UE I的視頻輸入饋送不同地傾斜。應(yīng)用服務(wù)器170可以嘗試形成劃出(carve out)與目標(biāo)呈現(xiàn)設(shè)備處的可查看縱橫比兼容的“平坦”或矩形視圖的全景圖，如在825A處所示。接著，來自825A的任何交迭部分可被平滑或集成(830A)，以便來自835A的結(jié)果所得的全景圖對應(yīng)于全景視頻輸出饋送。盡管未在圖8A中顯式示出，然而多個視頻饋送可按某種方式來交織以產(chǎn)生用于全景圖的視頻輸出饋送，與多個視頻饋送之一相關(guān)聯(lián)的單個代表性音頻饋送可與視頻輸出饋送相關(guān)聯(lián)并發(fā)送給(諸)目標(biāo)UE。在一示例中，與最接近共同的感興趣的視覺主題的視頻輸入饋送相關(guān)聯(lián)的音頻饋送可被選擇(例如，圖7A中的UE 1，因為UE I比UE 2更靠近城市天際線700A)。替換地，應(yīng)用服務(wù)器170可以嘗試生成合并來自提供視頻輸入饋送的不同UE的兩個或更多個音頻饋送的3D音頻形式。例如，來自物理上靠近共同的感興趣的視覺主題但在其不同側(cè)上的UE的音頻饋送可被選擇以形成3D音頻輸出饋送(例如，以達(dá)成環(huán)繞立體聲類型效果，從而一個音頻饋送變?yōu)樽笄胺綋P(yáng)聲器輸出而另一音頻饋送變?yōu)橛液蠓綋P(yáng)聲器輸出，等等)。
[0076]在630A和635A的另一示例實現(xiàn)中，假定針對經(jīng)交織的視頻輸入饋送的目標(biāo)格式是反映多個視頻輸入饋送的感興趣的視覺主題的多個不同透視圖。圖8B內(nèi)解說了交織個體視頻輸入饋送以達(dá)成視頻輸出饋送中的多個不同透視圖的示例。參照圖8B，假定感興趣的視覺主題是城市天際線800B，其類似于圖7A中的城市天際線700A。來自UE Ρ..3的視頻輸入饋送分別傳達(dá)各部分(或視頻捕捉區(qū))805Β、810Β和815Β處的城市天際線800Β的視頻。為了選擇視頻輸入饋送以填充視頻輸出饋送中的多個不同透視圖，應(yīng)用服務(wù)器170選擇示出城市天際線800Β的不同部分的視頻輸入饋送(例如，以便目標(biāo)UE的用戶能滾動各個透視圖直至達(dá)到城市天際線800Β的期望或較佳視圖)。在這一情形中，來自UE I和2的視頻輸入饋送805Β和810Β在一定程度上交迭并且不供應(yīng)太多的透視圖種類，由此視頻輸入饋送815Β示出了城市天際線800Β的不同部分。因此，在820Β，假定應(yīng)用服務(wù)器170選擇來自UE 2和3的視頻輸入饋送，這由825Β和830Β來表示。接著，代替簡單地將選定的視頻輸入饋送發(fā)送給目標(biāo)UE作為視頻輸出饋送，應(yīng)用服務(wù)器170壓縮來自UE 2和3的視頻輸入饋送以便達(dá)成目標(biāo)大小格式(835Β)。例如，無論被封裝為視頻輸出饋送的透視圖的數(shù)量如何，目標(biāo)大小格式可以是恒定的。例如，如果目標(biāo)大小格式被標(biāo)示為X (例如，每秒X等)并且透視圖的數(shù)量被標(biāo)示為Y，則在835Β處分配給每個選定的視頻輸入饋送的數(shù)據(jù)部分可由Χ/Υ來表達(dá)。盡管未在圖SB中顯式示出，然而多個視頻饋送可按某種方式來交織以產(chǎn)生用于不同透視圖的視頻輸出饋送，與多個視頻饋送之一相關(guān)聯(lián)的單個代表性音頻饋送可與視頻輸出饋送相關(guān)聯(lián)并發(fā)送給(諸)目標(biāo)UE。在一示例中，與最接近共同的感興趣的視覺主題的視頻輸入饋送相關(guān)聯(lián)的音頻饋送可被選擇(例如，圖7Α中的UE 1，因為UE I比UE 2更為靠近城市天際線700Α)，或者與最突出顯示在目標(biāo)UE處的當(dāng)前透視圖相關(guān)聯(lián)的音頻饋送可被選擇。替換地，應(yīng)用服務(wù)器170可以嘗試生成合并來自提供視頻輸入饋送的不同UE的兩個或更多個音頻饋送的3D音頻形式。例如，來自物理上靠近共同的感興趣的視覺主題但在其不同側(cè)上的UE的音頻饋送可被選擇以形成3D音頻輸出饋送(例如，以達(dá)成環(huán)繞立體聲類型效果，從而一個音頻饋送變?yōu)樽笄胺綋P(yáng)聲器輸出而另一音頻饋送變?yōu)橛液蠓綋P(yáng)聲器輸出，等等)。
[0077]在630Α和635Α的又一示例實現(xiàn)中，假定針對經(jīng)交織的視頻輸入饋送的目標(biāo)格式是由多個視頻輸入饋送構(gòu)成的感興趣的視覺主題的3D視圖。圖SC內(nèi)解說了交織個體視頻輸入饋送以達(dá)成視頻輸出饋送中的3D視圖的示例。參照圖SC，假定感興趣的視覺主題是城市天際線800C，其類似于圖7Α中的城市天際線700Α。來自UE I…3的視頻輸入饋送分別傳達(dá)各部分(或視頻捕捉區(qū))805C、810C和815C處的城市天際線800C的視頻。為了形成3D視圖，應(yīng)用服務(wù)器170選擇交迭的視頻輸入饋送以便3D視圖包括城市天際線800C的基本上相同部分的不同透視。在這一情形中，來自UE I和2的視頻輸入饋送是3D視圖候選，但UE 3的視頻輸入饋送正捕捉城市天際線800C的將不容易與來自UE I或2的視頻輸入饋送交織成3D視圖的遠(yuǎn)程部分。因此，來自UE I和2的視頻輸入饋送被選擇用于3D示圖形成。接著，來自UE I和2的視頻輸入饋送的相關(guān)部分被選擇(820C)(例如，UE I和2的視頻捕捉區(qū)的交迭部分，以便相同城市天際線部分的不同透視可被用于產(chǎn)生經(jīng)組合視頻中的3D效果)。825C示出了 UE I和2的視頻捕捉區(qū)的可被用于引入3D效果的交迭部分。接著，UE I和2的視頻捕捉區(qū)的交迭部分被交織以便引入3D效果(830C)。關(guān)于實際的3D形成，數(shù)種現(xiàn)成的2D-3D轉(zhuǎn)換引擎可用于實現(xiàn)3D形成。這些現(xiàn)成的2D到3D轉(zhuǎn)換引擎(例如，F(xiàn)aceworx等)依賴于個體2D饋送的詳細(xì)信息并且還具有關(guān)于可接受的用于該引擎的2D輸入的要求。在這一實施例中，由UE捕捉設(shè)備提供的位置、朝向和/或格式信息準(zhǔn)許在630A處選擇的適合于3D形成的視頻輸入饋送(例如，通過排除將不與3D形成兼容的視頻輸入饋送，諸如冗余朝向等等)。此外，盡管未在圖8C中顯式示出，然而多個視頻饋送可按某種方式來交織以產(chǎn)生用于3D視圖的視頻輸出饋送，與多個視頻饋送之一相關(guān)聯(lián)的單個代表性音頻饋送可與視頻輸出饋送相關(guān)聯(lián)并發(fā)送給(諸)目標(biāo)UE。在一示例中，與最接近共同的感興趣的視覺主題的視頻輸入饋送相關(guān)聯(lián)的音頻饋送可被選擇(例如，圖7A中的UE1，因為UE I比UE 2更為靠近城市天際線700A)，或者與最突出顯示在目標(biāo)UE處的當(dāng)前透視圖相關(guān)聯(lián)的音頻饋送可被選擇。替換地，應(yīng)用服務(wù)器170可以嘗試生成合并來自提供視頻輸入饋送的不同UE的兩個或更多個音頻饋送的3D音頻形式。例如，來自物理上靠近共同的感興趣的視覺主題但在其不同側(cè)上的UE的音頻饋送可被選擇以形成3D音頻輸出饋送(例如，以達(dá)成環(huán)繞立體聲類型效果，從而一個音頻饋送變?yōu)樽笄胺綋P(yáng)聲器輸出而另一音頻饋送變?yōu)橛液蠓綋P(yáng)聲器輸出，等等)。
[0078]回到圖6A，在選定的視頻輸入饋送被交織以便產(chǎn)生符合目標(biāo)格式(例如，具有目標(biāo)聚集文件大小或數(shù)據(jù)率的多個透視圖、全景圖、3D視圖等)的視頻輸出饋送之后，視頻輸出饋送根據(jù)目標(biāo)格式被傳送給目標(biāo)UE 4…N(640A)。UE 4…N接收并呈現(xiàn)視頻輸出饋送(645A)。
[0079]圖6B和6C解說了根據(jù)本發(fā)明的實施例的在圖6A的635A的視頻輸入饋送交織操作的替換實現(xiàn)。參照圖6B，每個選定的視頻輸入饋送首先被轉(zhuǎn)換為共同格式(600B)。例如，如果共同格式是720p并且以1080p流送一些視頻輸入饋送，則600B可包括將1080p的(諸)饋送下轉(zhuǎn)換為720p。在600B的轉(zhuǎn)換之后，經(jīng)轉(zhuǎn)換的視頻輸入饋送的各部分被組合以產(chǎn)生視頻輸出饋送^05B)。在一示例中，600B和605B的轉(zhuǎn)換和組合操作可結(jié)合關(guān)于圖8A-8C描述的情境中的任一者來實現(xiàn)。例如，在圖8A中，一旦在820A處選擇要被交織成全景圖的各部分，則可應(yīng)用600B的轉(zhuǎn)換。
[0080]參照圖6C，每一選定的視頻輸入饋送的各部分首先按如在應(yīng)用服務(wù)器170處收到的其相應(yīng)格式被組合^OOC)。在600C的組合之后，結(jié)果所得的經(jīng)組合視頻輸入饋送被選擇性地壓縮以產(chǎn)生視頻輸出饋送^05C)。在一示例中，600C和605C的組合和轉(zhuǎn)換操作可結(jié)合關(guān)于圖8A-8C描述的情境中的任一者來實現(xiàn)。例如，在圖8A中，如果UE I的視頻輸入饋送是720p而UE 2的視頻輸入饋送是1080p,則選定視頻輸入饋送的非交迭部分可首先如在825A中所示地被組合，以便由UE I貢獻(xiàn)的各部分是720p而由UE 2貢獻(xiàn)的各部分是1SOp0此時，假定目標(biāo)格式是720p，則經(jīng)組合的視頻輸入饋送中處于1SOp的任何部分被壓縮，以使得視頻輸出饋送全部與720p兼容。
[0081]圖6D解說了根據(jù)本發(fā)明的一實施例的圖6A的過程的延續(xù)。參照圖6D，假定UEI…3繼續(xù)傳送其相應(yīng)視頻輸入饋送并繼續(xù)指示其相應(yīng)視頻輸入饋送的相應(yīng)位置、朝向、或格式^OOD)。在某個時間點(diǎn)，應(yīng)用服務(wù)器170選擇不同的視頻輸入饋送集合以組合成視頻輸出饋送(605D)。例如，UE I的用戶可能已經(jīng)改變了朝向，以便給定的感興趣的視覺主題不再被捕捉，或者UE 2的用戶可能已經(jīng)移至離開給定的感興趣的視覺主題太遠(yuǎn)的位置。因此，應(yīng)用服務(wù)器170將來自60?的選定的視頻輸入饋送交織成符合目標(biāo)格式的新視頻輸出饋送(610D)，并根據(jù)目標(biāo)格式將該視頻輸出饋送傳送給目標(biāo)UE 4...N(615D)。UE 4...N接收并呈現(xiàn)視頻輸出饋送^20D)。
[0082]盡管圖6D解說了視頻輸出饋送中的作貢獻(xiàn)的視頻輸入饋送如何能在群通信會話期間改變的示例，但圖6E解說了個體視頻輸入饋送如何被用于填充視頻輸出饋送或者甚至目標(biāo)格式本身如何能被選擇性地改變以用于某些目標(biāo)UE (例如，從全景圖到3D視圖等)的示例。相關(guān)視頻輸入饋送還可針對每一不同的目標(biāo)格式而變化(例如，選擇用于全景圖的視頻輸入饋送可能與選擇成提供各種代表性透視圖或3D視圖的視頻輸入饋送不同)。
[0083]因此，圖6E解說了根據(jù)本發(fā)明的另一實施例的圖6A的過程的延續(xù)。參照圖6E，假定UE L...3繼續(xù)傳送其相應(yīng)視頻輸入饋送并繼續(xù)指示其相應(yīng)視頻輸入饋送的相應(yīng)位置、朝向、或格式^OOE)。在群通信會話期間的某個時間點(diǎn)處，UE 4指示對應(yīng)用服務(wù)器170將其視頻輸出饋送從當(dāng)前目標(biāo)格式(“第一目標(biāo)格式”)改變?yōu)椴煌哪繕?biāo)格式(“第二目標(biāo)格式”)的請求^05E)。例如，第一目標(biāo)格式可以對應(yīng)于給定的感興趣的視覺主題的多個低分辨率透視圖(例如，如在圖8B中)，而UE 4的用戶可以決定他/她希望觀看較高分辨率3D中的一個特定透視圖(例如，如在圖SC中)，從而所請求的第二目標(biāo)格式是特定的一個或多個視頻輸入饋送的3D視圖。此外，在群通信會話期間的某個時間點(diǎn)處，UE 5指示對應(yīng)用服務(wù)器170改變用于填充其視頻輸出饋送的視頻輸入饋送集合的請求^lOE)。例如，第一目標(biāo)格式可以對應(yīng)于給定的感興趣的視覺主題的多個低分辨率透視圖(例如，如在圖8B中)，而UE 5的用戶可以決定他/她希望查看透視圖的較小子集，其中每個透視圖處于較高分辨率。因此，610E中對視頻輸入饋送的不同集合的請求可以或可以不改變目標(biāo)格式，并且如在605E中對不同目標(biāo)格式的請求可以或可以不改變視頻輸出饋送中作貢獻(xiàn)的視頻輸入饋送。同樣，在圖6E中，假定UE 6…N不請求其相應(yīng)視頻輸出饋送的改變(615E)。
[0084]參照圖6E，應(yīng)用服務(wù)器170繼續(xù)交織視頻輸入饋送的相同集合以根據(jù)第一(或先前建立的)目標(biāo)格式來產(chǎn)生第一視頻輸出饋送，類似于圖6A的635A，620E。應(yīng)用服務(wù)器170還選擇并隨后交織視頻輸入饋送集合(其可以是來自620E的相同視頻輸入饋送集合或不同集合)，以便基于來自605E的UE 4的請求根據(jù)第二目標(biāo)格式來產(chǎn)生第二視頻輸出饋送(625E)。應(yīng)用服務(wù)器170還選擇并隨后交織另一視頻輸入饋送集合(不同于來自620E的視頻輸入饋送集合)，以便根據(jù)適合來自610E的UE 5的請求的目標(biāo)格式來產(chǎn)生第三視頻輸出饋送^30E)。在產(chǎn)生第一到第三視頻輸出饋送后，應(yīng)用服務(wù)器170將第一視頻輸出饋送傳送給UE 6…N (635E)，應(yīng)用服務(wù)器170將第二視頻輸出饋送傳送給UE 4 (640E)，并且應(yīng)用服務(wù)器170將第三視頻輸出饋送傳送給UE 5^45E)。UE 4…N中的每一者隨后分別在650E、655E和660E處呈現(xiàn)其相應(yīng)的視頻輸出饋送。
[0085]盡管由此已經(jīng)關(guān)于由服務(wù)器仲裁的群通信會話描述了圖6A到SC的各實施例，但其它實施例涉及至少部分地由一個或多個UE在PAN上仲裁的對等(P2P)或自組織會話。因此，圖9解說了根據(jù)本發(fā)明的實施例的用于給定UE在基于PAN的群通信會話期間選擇性地組合來自多個視頻捕捉設(shè)備的多個視頻輸入饋送以形成符合目標(biāo)格式的視頻輸出饋送的過程。
[0086]參照圖9，UE I…N建立本地群通信會話(900)。該本地群通信會話可在P2P連接或PAN上建立，從而該本地群通信會話不要求服務(wù)器仲裁，盡管在本地群通信會話期間交換的一些或所有視頻可稍后在應(yīng)用服務(wù)器170處被上傳或存檔。例如，UE I…N可位于體育事件附近并且可以使用在相應(yīng)UE之間共享的視頻來獲得體育比賽的延伸其自身的觀看體驗的視圖或透視(例如，位于運(yùn)動場或球場的西側(cè)上的UE能將其視頻饋送流送至位于運(yùn)動場或球場的東側(cè)上的UE，或者甚至流送至不在運(yùn)動場或球場視場中的UE)。因此，支持UEI…N之間的本地群通信會話的連接至少足以支持視頻數(shù)據(jù)的交換。
[0087]參照圖9，類似于圖6A的600A到610A，UE I從第一位置、朝向和/或格式捕捉與感興趣的給定視覺主題相關(guān)聯(lián)的視頻(905)，UE 2從第二位置、朝向和/或格式捕捉與感興趣的給定視覺主題相關(guān)聯(lián)的視頻(910)，而UE 3從第三位置、朝向和/或格式捕捉與感興趣的給定視覺主題相關(guān)聯(lián)的視頻(915)。與圖6A不同，代替將其相應(yīng)捕捉到的視頻上傳至應(yīng)用服務(wù)器170以供傳播至目標(biāo)UE, UE I…3各自在920、925和930處分別將其相應(yīng)捕捉到的視頻連同相關(guān)聯(lián)的位置、朝向和格式的指示傳送給指定的仲裁者或“主管"UE ( S卩，在這一情形中，UE 4)。接著，除了在UE 4而非應(yīng)用服務(wù)器170處執(zhí)行之外，935到945基本上對應(yīng)于圖6A的630A到640A，其出于簡潔起見將不再作進(jìn)一步討論。在UE 4在945處將視頻輸出饋送傳送給UE 5…N后，UE 5…N各自呈現(xiàn)視頻輸出饋送(950)。
[0088]盡管圖9被解說為使得單個UE被指定為主管并負(fù)責(zé)生成單個視頻輸出饋送，但將領(lǐng)會，還可以在本地群通信會話上實現(xiàn)圖6D和/或6E的變形，從而UE 4能產(chǎn)生針對不同的目標(biāo)UE或UE群的多個不同的視頻輸出饋送。替換地，可在本地群通信內(nèi)指定多個主管UE，不同的視頻輸出饋送由不同的主管UE來生成。
[0089]此外，盡管以上描述了圖5-9，由此(諸)視頻輸出饋送被實時或與視頻捕捉UE提供視頻媒體同時期地發(fā)送給目標(biāo)UE，但將領(lǐng)會，在本發(fā)明的其它實施例中，視頻輸入饋送可被存檔，從而(諸)視頻輸出饋送可在視頻捕捉UE不再捕捉給定的感興趣的視覺主題之后的稍后時間點(diǎn)生成。替換地，視頻輸出饋送集合而非“原始”視頻輸入饋送可被存檔。替換地，在視頻捕捉UE仍在捕捉并傳遞其相應(yīng)的視頻輸入饋送時，稍后加入的UE可以訪問視頻輸入饋送和/或視頻輸出饋送的存檔部分。
[0090]本領(lǐng)域技術(shù)人員將領(lǐng)會，信息和信號可使用各種不同技術(shù)和技藝中的任何一種來表示。例如，以上描述通篇可能引述的數(shù)據(jù)、指令、命令、信息、信號、位(比特)、碼元、和碼片可由電壓、電流、電磁波、磁場或磁粒子、光場或光學(xué)粒子、或其任何組合來表示。
[0091]此外，本領(lǐng)域技術(shù)人員將領(lǐng)會，結(jié)合本文中公開的實施例描述的各種解說性邏輯塊、模塊、電路、和算法步驟可被實現(xiàn)為電子硬件、計算機(jī)軟件、或兩者的組合。為清楚地解說硬件與軟件的這一可互換性，各種解說性組件、塊、模塊、電路、和步驟在上面是以其功能性的形式作一般化描述的。此類功能性是被實現(xiàn)為硬件還是軟件取決于具體應(yīng)用和施加于整體系統(tǒng)的設(shè)計約束。技術(shù)人員對于每種特定應(yīng)用可用不同的方式來實現(xiàn)所描述的功能性，但這樣的實現(xiàn)決策不應(yīng)被解讀成導(dǎo)致脫離了本發(fā)明的范圍。
[0092]結(jié)合本文所公開的實施例描述的各種解說性邏輯框、模塊、以及電路可用通用處理器、數(shù)字信號處理器(DSP)、專用集成電路(ASIC)、現(xiàn)場可編程門陣列(FPGA)或其它可編程邏輯器件、分立的門或晶體管邏輯、分立的硬件組件、或其設(shè)計成執(zhí)行本文中描述的功能的任何組合來實現(xiàn)或執(zhí)行。通用處理器可以是微處理器，但在替換方案中，該處理器可以是任何常規(guī)的處理器、控制器、微控制器、或狀態(tài)機(jī)。處理器還可以被實現(xiàn)為計算設(shè)備的組合，例如DSP與微處理器的組合、多個微處理器、與DSP核心協(xié)同的一個或多個微處理器或任何其它此類配置。
[0093]結(jié)合本文中公開的實施例描述的方法、序列和/或算法可直接在硬件中、在由處理器執(zhí)行的軟件模塊中、或在這兩者的組合中體現(xiàn)。軟件模塊可駐留在RAM存儲器、閃存、ROM存儲器、EPROM存儲器、EEPROM存儲器、寄存器、硬盤、可移動盤、CD-ROM、或本領(lǐng)域中所知的任何其他形式的存儲介質(zhì)中。示例性存儲介質(zhì)耦合到處理器以使得該處理器能從/向該存儲介質(zhì)讀寫信息。替換地，存儲介質(zhì)可以被整合到處理器。處理器和存儲介質(zhì)可駐留在ASIC中。ASIC可駐留在用戶終端(例如，UE)中。替換地，處理器和存儲介質(zhì)可作為分立組件駐留在用戶終端中。
[0094]在一個或多個示例性實施例中，所描述的功能可在硬件、軟件、固件或其任何組合中實現(xiàn)。如果在軟件中實現(xiàn)，則各功能可以作為一條或多條指令或代碼存儲在計算機(jī)可讀介質(zhì)上或藉其進(jìn)行傳送。計算機(jī)可讀介質(zhì)包括計算機(jī)存儲介質(zhì)和通信介質(zhì)兩者，包括促成計算機(jī)程序從一地向另一地轉(zhuǎn)移的任何介質(zhì)。存儲介質(zhì)可以是能被計算機(jī)訪問的任何可用介質(zhì)。作為示例而非限定，這樣的計算機(jī)可讀介質(zhì)可包括RAM、ROM、EEPROM、CD-ROM或其它光盤存儲、磁盤存儲或其它磁存儲設(shè)備、或能被用來攜帶或存儲指令或數(shù)據(jù)結(jié)構(gòu)形式的期望程序代碼且能被計算機(jī)訪問的任何其它介質(zhì)。任何連接也被正當(dāng)?shù)胤Q為計算機(jī)可讀介質(zhì)。例如，如果軟件是使用同軸電纜、光纖電纜、雙絞線、數(shù)字訂戶線(DSL)、或諸如紅外、無線電、以及微波之類的無線技術(shù)從web網(wǎng)站、服務(wù)器、或其它遠(yuǎn)程源傳送而來，則該同軸電纜、光纖電纜、雙絞線、DSL、或諸如紅外、無線電、以及微波之類的無線技術(shù)就被包括在介質(zhì)的定義之中。如本文中所使用的盤(disk)和碟(disc)包括壓縮碟(CD)、激光碟、光碟、數(shù)字多用碟(DVD)、軟盤和藍(lán)光碟，其中盤(disk)往往以磁的方式再現(xiàn)數(shù)據(jù)，而碟(disc)用激光以光學(xué)方式再現(xiàn)數(shù)據(jù)。上述組合應(yīng)當(dāng)也被包括在計算機(jī)可讀介質(zhì)的范圍內(nèi)。
[0095]盡管上述公開示出了本發(fā)明的解說性實施例，但是應(yīng)當(dāng)注意到，在其中可作出各種更換和改動而不會脫離如所附權(quán)利要求定義的本發(fā)明的范圍。根據(jù)本文中所描述的本發(fā)明實施例的方法權(quán)利要求的功能、步驟和/或動作不必按任何特定次序來執(zhí)行。此外，盡管本發(fā)明的要素可能是以單數(shù)來描述或主張權(quán)利的，但是復(fù)數(shù)也是已料想了的，除非顯式地聲明了限定于單數(shù)。
【權(quán)利要求】
1.一種用于在通信設(shè)備(170 ；200 ；400)處選擇性地組合視頻數(shù)據(jù)的方法，包括: 從多個視頻捕捉設(shè)備接收(615A ；620A ；625A ；600D ；600E ；605E ；610E ；920,925,930)多個視頻輸入饋送，所接收到的多個視頻輸入饋送中的每一個視頻輸入饋送提供給定的感興趣的視覺主題的不同透視； 針對所接收到的多個視頻輸入饋送中的每一個視頻輸入饋送，接收(615A ；620A ；625A ；600D ；600E ；605E ；610E ;920，925，930)對(i)相關(guān)聯(lián)的視頻捕捉設(shè)備的位置、(ii)所述相關(guān)聯(lián)的視頻捕捉設(shè)備的朝向以及(iii)所接收到的視頻輸入饋送的格式的指示； 選擇(630A ；605D ；630E ；820A ；820B ；820C ；935)所接收到的多個視頻輸入饋送的集合； 將選定的視頻輸入饋送交織(635A ；600B ；605B ；600C ；605C ；610D ；620E ；625E ；630E ；830A ；835B ；830C ；90)成符合目標(biāo)格式的視頻輸出饋送；以及 將所述視頻輸出饋送傳送^40A ；615D ；635E ；640E ；645E ；945)給目標(biāo)視頻呈現(xiàn)設(shè)備隹A
口 O
2.如權(quán)利要求1所述的方法，其特征在于， 所述選定的視頻輸入饋送各自是二維(2D)的， 其中所述目標(biāo)格式對應(yīng)于通過交織所述選定的視頻輸入饋送的各部分所形成的所述給定的感興趣的視覺主題的三維(3D)視圖。
3.如權(quán)利要求1所述的方法，其特征在于，所述目標(biāo)格式對應(yīng)于通過交織所述選定的視頻輸入饋送的非交迭部分所形成的所述給定的感興趣的視覺主題的全景圖。
4.如權(quán)利要求1所述的方法，其特征在于， 所述目標(biāo)格式對應(yīng)于針對所述視頻輸出饋送的聚集大小格式，所述方法進(jìn)一步包括:壓縮所述選定的視頻輸入饋送中的一個或多個視頻輸入饋送，以使得所述視頻輸出饋送在所述交織之后達(dá)成所述聚集大小格式。
5.如權(quán)利要求1所述的方法，其特征在于，所述通信設(shè)備對應(yīng)于遠(yuǎn)離所述多個視頻捕捉設(shè)備和所述目標(biāo)視頻呈現(xiàn)設(shè)備集合的服務(wù)器。
6.如權(quán)利要求1所述的方法，其特征在于， 所述多個視頻捕捉設(shè)備和所述目標(biāo)視頻呈現(xiàn)設(shè)備集合各自對應(yīng)于參與本地群通信會話的用戶裝備(UE)，并且 其中所述通信設(shè)備對應(yīng)于也參與所述群通信會話的給定UE。
7.如權(quán)利要求1所述的方法，其特征在于，進(jìn)一步包括: 選擇所接收到的多個視頻輸入饋送的不同集合； 將所述選定的不同視頻輸入饋送交織成符合給定的目標(biāo)格式的不同視頻輸出饋送；以及 將所述不同的視頻輸出饋送傳送給目標(biāo)視頻呈現(xiàn)設(shè)備的不同集合。
8.如權(quán)利要求1所述的方法，其特征在于，進(jìn)一步包括: 選擇所接收到的多個視頻輸入饋送的給定集合； 將所述選定的給定視頻輸入饋送交織成符合不同的目標(biāo)格式的不同視頻輸出饋送；以及 將所述不同的視頻輸出饋送傳送給目標(biāo)視頻呈現(xiàn)設(shè)備的不同集合。
9.如權(quán)利要求1所述的方法，其特征在于，所接收到的對位置的指示包括(i)所述多個視頻捕捉設(shè)備中的至少一個視頻捕捉設(shè)備的絕對位置的指示，和/或(ii)所述多個視頻捕捉設(shè)備中的兩個或更多個視頻捕捉設(shè)備之間的相對位置的指示。
10.如權(quán)利要求1所述的方法，其特征在于，進(jìn)一步包括: 以基于事件的方式來同步所述選定的視頻輸入饋送， 其中所述交織是針對經(jīng)同步的視頻輸入饋送來執(zhí)行的。
11.如權(quán)利要求10所述的方法，其特征在于，所述同步包括: 標(biāo)識所述選定的視頻輸入饋送內(nèi)的共同跟蹤對象集合； 檢測與所述共同跟蹤對象集合相關(guān)聯(lián)的在所述選定的視頻輸入饋送中的每一個視頻輸入饋送中可見的事件；以及 基于檢測到的事件來同步所述選定的視頻輸入饋送。
12.如權(quán)利要求1所述的方法，其特征在于，所述選擇包括: 將所接收到的多個視頻輸入饋送中的每一個視頻輸入饋送表征為(i)針對所述目標(biāo)格式關(guān)于所接收到的多個視頻輸入饋送中的至少一個其它視頻輸入饋送冗余，或者(ii)不冗余； 通過(i)包括來自所接收到的多個視頻輸入饋送的被表征為非冗余的的一個或多個視頻輸入饋送，和/或(ii)包括關(guān)于來自所接收到的多個視頻輸入饋送中的被表征為冗余的每一個視頻輸入饋送集合的單個代表性視頻輸入饋送來形成非冗余視頻輸入饋送集合，其中所述選定的視頻輸入饋送對應(yīng)于所述非冗余視頻輸入饋送集合。
13.—種配置成選擇性地組合視頻數(shù)據(jù)的通信設(shè)備(170 ；200 ;400)，包括: 配置成從多個視頻捕捉設(shè)備接收(615A ；620A ；625A ；600D ；600E ；605E ；610E ；920,925,930)多個視頻輸入饋送的邏輯(405)，所接收到的多個視頻輸入饋送中的每一個視頻輸入饋送提供給定的感興趣的視覺主題的不同透視； 配置成針對所接收到的多個視頻輸入饋送中的每一個視頻輸入饋送，接收(615A;620A ；625A ；600D ；600E ；605E ；610E ;920，925，930)對(i)相關(guān)聯(lián)的視頻捕捉設(shè)備的位置、(ii)所述相關(guān)聯(lián)的視頻捕捉設(shè)備的朝向以及(iii)所接收到的視頻輸入饋送的格式的指示的邏輯(405)； 配置成選擇^30A ；605D ；630E ；820A ；820B ；820C ；935)所接收到的多個視頻輸入饋送的集合的邏輯(410)； 配置成將選定的視頻輸入饋送交織(635A ；600B ；605B ；600C ；605C ；610D ；620E ；625E ；630E ；830A ；835B ；830C ；90)成符合目標(biāo)格式的視頻輸出饋送的邏輯(410);以及 配置成將所述視頻輸出饋送傳送^40A ；615D ；635E ；640E ；645E ；945)給目標(biāo)視頻呈現(xiàn)設(shè)備集合的邏輯(405)。
14.一種包括用于執(zhí)行根據(jù)權(quán)利要求1到12中任一項所述的方法的裝置的設(shè)備(170 ；200 ；400)。
15.一種包括至少一條指令的計算機(jī)可讀介質(zhì)，所述至少一條指令用于使得計算機(jī)(170 ；200 ；400)或處理器(208 ；410)執(zhí)行根據(jù)權(quán)利要求1到12中任一項所述的方法。
【文檔編號】H04N13/02GK104272730SQ201380023970
【公開日】2015年1月7日 申請日期:2013年5月3日 優(yōu)先權(quán)日:2012年5月10日
【發(fā)明者】R·W·蘭克福德, M·A·林德納, S·R·德維恩, D·S·阿普拉納普, D·S·孫, A·P·斯通費(fèi)爾德 申請人:高通股份有限公司