本發(fā)明涉及虛擬現(xiàn)實(shí)技術(shù)，尤其涉及一種應(yīng)用于虛擬現(xiàn)實(shí)的內(nèi)容傳輸方法和設(shè)備。

背景技術(shù)：

虛擬現(xiàn)實(shí)(virtualreality，簡稱vr)技術(shù)是利用計(jì)算機(jī)模擬產(chǎn)生一個(gè)三維空間的虛擬世界，提供使用者關(guān)于視覺、聽覺、觸覺等感官的模擬，讓使用者如同身歷其境一般，可以及時(shí)、沒有限制地觀察三度空間內(nèi)的事物。該項(xiàng)技術(shù)是多種技術(shù)的綜合體，涉及實(shí)時(shí)三維計(jì)算機(jī)圖形技術(shù)，廣角(寬視野)立體顯示技術(shù)，對觀察者頭、眼和手的跟蹤技術(shù)，以及觸覺、力覺反饋、立體聲、網(wǎng)絡(luò)傳輸、語音輸入輸出技術(shù)等。

簡單來說，虛擬現(xiàn)實(shí)技術(shù)就是一種可以創(chuàng)建和體驗(yàn)虛擬世界的計(jì)算機(jī)仿真系統(tǒng)，使用戶有一種置身于虛擬境界之中的感覺。它利用頭盔式顯示器或其它設(shè)備，把參與者的視覺、聽覺和其它感覺封閉起來，并提供一個(gè)新的、虛擬的感覺空間，并利用位置跟蹤器、數(shù)據(jù)手套、其它手控輸入設(shè)備、聲音等使得參與者產(chǎn)生一種身在虛擬環(huán)境中、并能全心投入和沉浸其中的感覺，該類的產(chǎn)品包括基于頭盔式顯示器的系統(tǒng)、投影式虛擬現(xiàn)實(shí)系統(tǒng)和遠(yuǎn)程存在系統(tǒng)等。

目前，隨著長期演進(jìn)(longtermevolution,lte)技術(shù)的普及和發(fā)展，已開始出現(xiàn)將全景攝像機(jī)與vr眼鏡通過lte網(wǎng)絡(luò)連接，實(shí)時(shí)體驗(yàn)全景視頻的應(yīng)用，使得佩戴vr眼鏡的使用者可以實(shí)時(shí)體驗(yàn)遠(yuǎn)端全景攝像機(jī)拍攝的視頻，感覺自己如同就在遠(yuǎn)方攝像機(jī)所在的地方進(jìn)行“現(xiàn)場”游覽，身臨其境一般。攝像機(jī)會(huì)實(shí)時(shí)通過lte網(wǎng)絡(luò)傳輸每個(gè)攝像頭拍攝的視頻畫面給vr眼鏡。為 了保證vr眼鏡使用者的身臨其境感覺，每一路視頻都采用高清甚至更高分辨率的方式來傳輸畫面。但是使用者在佩戴vr眼鏡時(shí)，使用者的視野僅能看一定角度的視頻，其他角度的視頻，使用者在不轉(zhuǎn)頭時(shí)是看不見的，因此，當(dāng)前這種應(yīng)用的不足在于整個(gè)全景視頻畫面都采用高質(zhì)量的方式來傳輸，浪費(fèi)了傳輸帶寬。

技術(shù)實(shí)現(xiàn)要素：

有鑒于此，提供一種應(yīng)用于虛擬現(xiàn)實(shí)技術(shù)的內(nèi)容傳輸方法和設(shè)備，可以減少視頻內(nèi)容傳輸時(shí)的帶寬消耗。

第一方面，提供一種應(yīng)用于虛擬現(xiàn)實(shí)技術(shù)的內(nèi)容傳輸方法，該方法中，虛擬現(xiàn)實(shí)終端與視頻系統(tǒng)建立網(wǎng)絡(luò)連接，該虛擬現(xiàn)實(shí)終端檢測使用者視角信息，將該使用者的視角信息發(fā)送給視頻系統(tǒng)，并接收視頻系統(tǒng)基于該視角信息返回的全景視頻內(nèi)容，該視頻內(nèi)容中包含與主視角對應(yīng)的第一畫面以及與非主視角對應(yīng)的第二畫面，第一畫面的視頻質(zhì)量高于第二畫面的視頻質(zhì)量。該方法中，全景視頻內(nèi)容可以是360度全景，也可以是180全景等其他維度的全景。

視頻系統(tǒng)對使用者當(dāng)前視野范圍內(nèi)的視頻內(nèi)容采用高質(zhì)量的方式傳輸，而對非使用者視野范圍內(nèi)的視頻內(nèi)容采用較低質(zhì)量的方式傳輸，降低了網(wǎng)絡(luò)傳輸資源的消耗。

結(jié)合第一方面的第一實(shí)施方式中，第一畫面的視頻質(zhì)量高于第二畫面的視頻質(zhì)量包括：所述第一畫面的分辨率高于所述第二畫面的分辨率，或者，所述第一畫面的幀頻高于所述第二畫面的幀頻。

結(jié)合第一方面或第一方面的一實(shí)施方式的第二實(shí)施方式中，視頻系統(tǒng)采用可伸縮編碼(svc)技術(shù)編碼，向虛擬現(xiàn)實(shí)終端發(fā)送的第一畫面包括基本層圖層和增強(qiáng)層圖層，可選的，增強(qiáng)層圖層可以為多個(gè)，第一畫面可以傳輸多個(gè)增強(qiáng)層圖層，第二畫面可以也可以傳輸增強(qiáng)層圖層，視頻系統(tǒng)可以根據(jù)網(wǎng)絡(luò)狀態(tài) 對于第一畫面和第二畫面靈活選擇一個(gè)或多個(gè)增強(qiáng)圖層進(jìn)行傳輸。該方法使得視頻系統(tǒng)可根據(jù)網(wǎng)絡(luò)狀況調(diào)整視頻內(nèi)容傳輸方式，進(jìn)一步提升網(wǎng)絡(luò)資源的使用效率，并保障用戶體驗(yàn)。

結(jié)合第一方面或第一方面第一實(shí)施方式或第一方面第二實(shí)施方式的第三實(shí)施方式中，虛擬現(xiàn)實(shí)終端在檢測到使用者的視角信息發(fā)生變化后，將變化后的使用者視角信息同步給該視頻系統(tǒng)。該方式使得系統(tǒng)系統(tǒng)在使用者視角沒發(fā)生變化之前，持續(xù)以上述方式向虛擬現(xiàn)實(shí)終端傳輸視頻內(nèi)容，保持業(yè)務(wù)的連續(xù)性。

第二方面，提供一種應(yīng)用于虛擬現(xiàn)實(shí)技術(shù)的內(nèi)容傳輸方法，該方法包括：視頻系統(tǒng)接收虛擬現(xiàn)實(shí)終端發(fā)送的使用者視角信息，該視頻系統(tǒng)根據(jù)所述使用者視角信息向所述虛擬現(xiàn)實(shí)終端發(fā)送全景視頻內(nèi)容，所述全景視頻內(nèi)容包括與所述使用者主視角對應(yīng)的第一畫面和非主視角對應(yīng)的第二畫面，所述第一畫面的視頻質(zhì)量高于所述第二畫面的視頻質(zhì)量。

結(jié)合第二方面的第一實(shí)施方式中，所述第一畫面的視頻質(zhì)量高于所述第二畫面的視頻質(zhì)量是指所述第一畫面的分辨率高于所述第二畫面的分辨率，或者，所述第一畫面的幀頻高于所述第二畫面的幀頻。

結(jié)合第二方面或第二方面第一實(shí)施方式的第二實(shí)施方式中，所述視頻內(nèi)容采用可伸縮編碼(svc)，所述第一畫面包括基本層圖層和增強(qiáng)層圖層，所述第二畫面包括基本層圖層；可選的，增強(qiáng)層圖層可是是多層，視頻系統(tǒng)可以根據(jù)網(wǎng)絡(luò)狀況靈活選擇一個(gè)或多個(gè)增強(qiáng)層。

結(jié)合第二方面或者第二方面的第一實(shí)施方式，或第一方面第二實(shí)施方式的第三實(shí)施方式中，視頻系統(tǒng)在向所述虛擬現(xiàn)實(shí)終端發(fā)送全景視頻前，還包括：根據(jù)所述視角信息確定主視角和非主視角，具體的可以根據(jù)所述使用者的視角信息，確定使用者當(dāng)前的視野為使用者的主視角，確定非使用者當(dāng)前的視野為非主視角。

結(jié)合第二方面第三實(shí)施方式的第四實(shí)施方式中，所述視頻系統(tǒng)還根據(jù)全景視頻的畫面內(nèi)容確定主視角，具體的，是將所述全景視頻內(nèi)容中出現(xiàn)突發(fā)視頻或突發(fā)音頻的區(qū)域確定為主視角。該方法中，視頻系統(tǒng)根據(jù)畫面內(nèi)容預(yù)測使用 者的主視角，保證用戶能夠在突發(fā)視頻或突發(fā)音頻情況下，及時(shí)體驗(yàn)到高質(zhì)量的視頻內(nèi)容。

結(jié)合第二方面的第五實(shí)施方式中，所述視頻系統(tǒng)在向所述虛擬現(xiàn)實(shí)終端發(fā)送全景視頻前，還包括：確定所述主視角對應(yīng)的第一畫面和所述非主視角對應(yīng)的第二畫面。

可選的，可以先確定所述主視角對應(yīng)的一個(gè)或多個(gè)攝像頭，將所述一個(gè)或多個(gè)攝像頭拍攝的畫面確定為所述第一畫面，將其他一個(gè)或多個(gè)攝像頭拍攝的畫面確定為第二畫面；

可選的，將所述全景視頻劃分為多個(gè)子畫面，將所述主視角對應(yīng)的一個(gè)或多個(gè)子畫面確定為第一畫面，將其他一個(gè)或多個(gè)子畫面確定為第二畫面。該方式中，各個(gè)子畫面可以采用svc方式編碼，屬于第一畫面的子畫面可以采用基本層圖層和增強(qiáng)層圖層方式傳輸，屬于第二畫面的子畫面采用基本層圖層方式傳輸，保證傳輸方式的靈活性和準(zhǔn)確性。

結(jié)合第二方面第五實(shí)施方式的第六實(shí)施方式中，可以根據(jù)所述子畫面與所述主視角的匹配程度，將與所述主視角匹配度符合匹配閾值的一個(gè)或多個(gè)子畫面確定為第一畫面，將與所述主視角匹配度不符合匹配閾值一個(gè)或多個(gè)子畫面確定為第二畫面。該方式根據(jù)畫面與視角的匹配程度確定傳輸?shù)牡谝缓偷诙嬅?，進(jìn)一步提升帶寬的利用率。

第三方面，提供一種虛擬現(xiàn)實(shí)終端，該終端包括：檢測單元、發(fā)送單元以及接收單元，檢測單元，用于實(shí)時(shí)檢測使用者的視角信息；發(fā)送單元，用于將所述使用者的視角信息同步給視頻系統(tǒng)；接收單元，用于接收所述視頻系統(tǒng)基于所述使用者主視角返回的全景視頻內(nèi)容，所述全景視頻內(nèi)容包括與所述使用者主視角對應(yīng)的第一畫面和非主視角對應(yīng)的第二畫面，所述第一畫面的視頻質(zhì)量高于所述第二畫面的視頻質(zhì)量。該虛擬現(xiàn)實(shí)終端可以用于實(shí)現(xiàn)如上所述的內(nèi)容傳輸方法。

第四方面，提供另外一種虛擬現(xiàn)實(shí)終端，該終端包括：主控單元、存儲(chǔ)單 元、通信單元、圖像處理單元、音頻處理單元、姿態(tài)傳感器單元，主控單元用于執(zhí)行指令，管理各個(gè)功能模塊的配置以及傳感器數(shù)據(jù)的采集工作；存儲(chǔ)單元用于存儲(chǔ)程序指令或者數(shù)據(jù)供主控單元執(zhí)行；通信單元用于對無線信號(hào)進(jìn)行收發(fā)處理；圖像處理單元用于對圖像信號(hào)進(jìn)行處理，音頻處理單元用于對音頻信號(hào)進(jìn)行處理，姿態(tài)傳感器單元用于感測用戶運(yùn)動(dòng)姿態(tài)。該虛擬現(xiàn)實(shí)終端可以用于實(shí)現(xiàn)如上所述的內(nèi)容傳輸方法。

第五方面，提供一種視頻系統(tǒng)，該視頻系統(tǒng)包括：接收單元，用于接收虛擬現(xiàn)實(shí)終端同步的使用者視角信息；處理單元，用于根據(jù)所述使用者視角信息確定向所述虛擬現(xiàn)實(shí)終端發(fā)送的全景視頻內(nèi)容，所述全景視頻內(nèi)容包括與所述使用者主視角對應(yīng)的第一畫面和非主視角對應(yīng)的第二畫面，所述第一畫面的視頻質(zhì)量高于所述第二畫面的視頻質(zhì)量；發(fā)送單元，用于將所述全景視頻內(nèi)容發(fā)送給所述虛擬現(xiàn)實(shí)終端。該視頻系統(tǒng)可以用于實(shí)現(xiàn)如上所述的內(nèi)容傳輸方法。

第六方面，提供另外一種視頻系統(tǒng)，該視頻系統(tǒng)包括：處理單元、存儲(chǔ)單元、通信單元、圖像采集單元、音頻采集單元，其中處理單元用于執(zhí)行程序指令，存儲(chǔ)單元用于存儲(chǔ)程序指令或數(shù)據(jù)供處理單元執(zhí)行，通信單元用于對無線信號(hào)進(jìn)行收發(fā)處理；圖像采集單元用于采集圖像信號(hào)，音頻單元用于采集音頻信號(hào)。該視頻系統(tǒng)可以用于實(shí)現(xiàn)如上所述的內(nèi)容傳輸方法。

第七方面，提供了一種虛擬現(xiàn)實(shí)終端，該虛擬現(xiàn)實(shí)終端具有實(shí)現(xiàn)上述方法實(shí)際中虛擬現(xiàn)實(shí)終端執(zhí)行的功能。所述功能可以通過硬件實(shí)現(xiàn)，也可以通過硬件執(zhí)行相應(yīng)的軟件實(shí)現(xiàn)。所述硬件或軟件包括一個(gè)或多個(gè)與上述功能相對應(yīng)的模塊。

在一個(gè)可能的設(shè)計(jì)中，虛擬現(xiàn)實(shí)終端的結(jié)構(gòu)中包括處理器和存儲(chǔ)器，所述存儲(chǔ)器用于存儲(chǔ)支持虛擬現(xiàn)實(shí)終端執(zhí)行上述方法的應(yīng)用程序代碼，所述處理器被配置為用于執(zhí)行所述存儲(chǔ)器中存儲(chǔ)的應(yīng)用程序。所述虛擬現(xiàn)實(shí)終端還可以包括通信接口，用于與其他設(shè)備或通信網(wǎng)絡(luò)通信。

第八方面，本發(fā)明實(shí)施例提供了一種計(jì)算機(jī)存儲(chǔ)介質(zhì)，用于儲(chǔ)存為上述虛擬現(xiàn)實(shí)終端所用的計(jì)算機(jī)軟件指令，其包含用于執(zhí)行上述方面為虛擬現(xiàn)實(shí)終端 所設(shè)計(jì)的程序。

第九方面，本發(fā)明實(shí)施例還提供一種視頻系統(tǒng)，該視頻系統(tǒng)具有實(shí)現(xiàn)上述方法實(shí)際中視頻系統(tǒng)執(zhí)行的功能。所述功能可以通過硬件實(shí)現(xiàn)，也可以通過硬件執(zhí)行相應(yīng)的軟件實(shí)現(xiàn)。所述硬件或軟件包括一個(gè)或多個(gè)與上述功能相對應(yīng)的模塊。

在一個(gè)可能的設(shè)計(jì)中，視頻系統(tǒng)的結(jié)構(gòu)中包括處理器和存儲(chǔ)器，所述存儲(chǔ)器用于存儲(chǔ)支持視頻系統(tǒng)執(zhí)行上述方法的應(yīng)用程序代碼，所述處理器被配置為用于執(zhí)行所述存儲(chǔ)器中存儲(chǔ)的應(yīng)用程序。所述視頻系統(tǒng)還可以包括通信接口，用于與其他設(shè)備或通信網(wǎng)絡(luò)通信。

第十方面，本發(fā)明實(shí)施例提供了一種計(jì)算機(jī)存儲(chǔ)介質(zhì)，用于儲(chǔ)存為上述視頻系統(tǒng)所用的計(jì)算機(jī)軟件指令，其包含用于執(zhí)行上述方面為視頻系統(tǒng)所設(shè)計(jì)的程序。

第十一方面，提供一種虛擬現(xiàn)實(shí)系統(tǒng)，包括如第三、四、第七或第八方面所述的虛擬現(xiàn)實(shí)終端以及如第五或六、第九或第十方面所述的視頻系統(tǒng)。

該虛擬現(xiàn)實(shí)系統(tǒng)可用于實(shí)現(xiàn)如上所述的內(nèi)容傳輸方法。

采用本發(fā)明實(shí)施例的內(nèi)容傳輸方法，用戶視角范圍內(nèi)的視頻內(nèi)容采用高質(zhì)量的視頻傳輸方式，非視角范圍內(nèi)的視頻內(nèi)容采用較低質(zhì)量的視頻傳輸方式，大幅降低了虛擬現(xiàn)實(shí)體驗(yàn)的網(wǎng)絡(luò)傳輸帶寬，提升了網(wǎng)絡(luò)資源的利用效率。

附圖說明

圖1是本發(fā)明一實(shí)施例應(yīng)用場景示意圖；

圖2是本發(fā)明一實(shí)施例的虛擬現(xiàn)實(shí)終端電路系統(tǒng)結(jié)構(gòu)示意圖；

圖3是本發(fā)明一實(shí)施例的視頻系統(tǒng)結(jié)構(gòu)示意圖；

圖4是本發(fā)明一實(shí)施例的內(nèi)容傳輸方法的流程圖；

圖5是本發(fā)明一實(shí)施例的視頻系統(tǒng)內(nèi)容處理流程圖

圖6-8為本發(fā)明實(shí)施例中確定視角對應(yīng)的視頻內(nèi)容的方法示意圖。

具體實(shí)施方式

下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行描述。

圖1是本發(fā)明實(shí)施例的應(yīng)用場景圖。

如圖1所示，該應(yīng)用場景中，虛擬現(xiàn)實(shí)終端100通過網(wǎng)絡(luò)系統(tǒng)(如：lte網(wǎng)絡(luò))與遠(yuǎn)程的視頻系統(tǒng)200相連。視頻系統(tǒng)200可以集成全景攝像機(jī)，可以進(jìn)一步包括獨(dú)立的視頻服務(wù)器，或者集成的視頻存儲(chǔ)系統(tǒng)。將拍攝的全景視頻通過無線網(wǎng)絡(luò)系統(tǒng)發(fā)送給虛擬現(xiàn)實(shí)終端100，這樣虛擬現(xiàn)實(shí)終端使用者可以實(shí)時(shí)體驗(yàn)遠(yuǎn)端全景攝像機(jī)拍攝的視頻，感覺自己如同就在遠(yuǎn)方攝像機(jī)所在的地方進(jìn)行“現(xiàn)場”游覽，身臨其境一般?；谶@個(gè)應(yīng)用場景，很多事情都可以結(jié)合虛擬現(xiàn)實(shí)終端和遠(yuǎn)程視頻系統(tǒng)，教育工作者可以允許學(xué)生在中國長城看到他們想看到的任何地方。攝影師可以通過無人機(jī)在大峽谷日落時(shí)捕捉完美的雜志封面拍攝。無人機(jī)比賽愛好者可以猶如親自坐在駕駛座上比賽。煉油廠檢查員可以不離開他們的辦公桌去檢查油塔的每一個(gè)角落和縫隙。需要注意的是，本發(fā)明實(shí)施例不僅僅限于如上所述的使用場景，這些使用場景僅是示例說明，所述網(wǎng)絡(luò)系統(tǒng)不限于是lte等無線網(wǎng)絡(luò)系統(tǒng)，也可以是有線網(wǎng)絡(luò)。

圖2是本發(fā)明一實(shí)施例的虛擬現(xiàn)實(shí)終端結(jié)構(gòu)示意圖。

虛擬現(xiàn)實(shí)終端100(如虛擬現(xiàn)實(shí)頭盔)包括光學(xué)系統(tǒng)以及電路系統(tǒng)，光學(xué)系統(tǒng)主要包括光學(xué)鏡片，例如為凸?fàn)钔哥R等鏡片和鏡片位置調(diào)節(jié)裝置，鏡片包括左眼鏡片、右眼鏡片。其中，左眼鏡片和右眼鏡片設(shè)置于顯示屏的前方，即位于用戶的眼睛和顯示屏之間。左眼鏡片和右眼鏡片可以更換，鏡片位置調(diào)節(jié)裝置可以調(diào)整左眼鏡片和右眼鏡片的位置以調(diào)節(jié)鏡片和顯示屏之間的距離，使虛擬現(xiàn)實(shí)終端100適用于不同視力的用戶。參考圖2，虛擬現(xiàn)實(shí)頭盔100的電路系統(tǒng)包括主控單元101、存儲(chǔ)單元102、通信單元103、圖像處理單元104、音頻處理單元105、mhl/hdml接收單元106、顯示屏107、電聲轉(zhuǎn)換單元108、麥克風(fēng)單元109、姿態(tài)傳感器單元110。在另外一種虛擬現(xiàn)實(shí)頭盔中，也可以僅 包含光學(xué)系統(tǒng)，電路系統(tǒng)可以由智能終端設(shè)備(如：手機(jī)、平板電腦、游戲機(jī)、高清播放器等音視頻設(shè)備)代替。

主控單元101用于執(zhí)行指令，管理各個(gè)功能模塊的配置以及傳感器數(shù)據(jù)的采集工作，可以是單核或者多核處理器(cpu)；存儲(chǔ)單元102用于存儲(chǔ)程序指令或者數(shù)據(jù)供主控單元101執(zhí)行；通信單元103用于接入不同的無線網(wǎng)絡(luò)系統(tǒng)(如：lte網(wǎng)絡(luò))，對無線信號(hào)進(jìn)行收發(fā)處理，可以是集成射頻芯片的基帶芯片。圖像處理單元104可以是圖形處理器(graphicsprocessingunit，gpu)，用于對圖像信號(hào)進(jìn)行處理；音頻處理單元105可以包括音頻解碼模塊和音頻編碼模塊，兩個(gè)模塊可以是分開的兩個(gè)芯片，也可以是集成的一個(gè)芯片。mhl/hdmi接收單元106可以是集成了移動(dòng)終端高清影音標(biāo)準(zhǔn)接口(mobilehigh-definitionlink，mhl)接口和高清晰度多媒體接口(highdefinitionmultimediainterface，hdmi)的數(shù)據(jù)接口。這種數(shù)據(jù)接口能夠?qū)⑵渌K端的mhl/hdmi節(jié)目的視頻信號(hào)與音頻信號(hào)同時(shí)傳輸?shù)教摂M現(xiàn)實(shí)頭盔上，對于用戶來說非常便利；mhl/hdmi接收單元106可以包括mhl/hdmi接收器、音頻輸出接口、以及視頻輸出接口；顯示屏107用于顯示圖像，可以是采用超高分辨率、高刷新率、以及更高響應(yīng)時(shí)間的lcd顯示屏，配合光學(xué)成像系統(tǒng)帶來高清的畫質(zhì)，以及更為流暢的顯示效果。電聲轉(zhuǎn)換單元108可以是揚(yáng)聲器或者受話器；麥克風(fēng)單元109用于采集用戶聲音信號(hào)；姿態(tài)傳感器單元110可以為九軸姿態(tài)傳感器，包括三軸陀螺儀、三軸加速度傳感器、和三軸磁感應(yīng)傳感器，用于感測用戶運(yùn)動(dòng)姿態(tài)。

在一種可選的方式中，主控單元101、存儲(chǔ)單元102、通信單元103、圖像處理單元104、音頻處理單元105和姿態(tài)傳感器單元110可以集成到一個(gè)片上系統(tǒng)(systemonchip，soc)中。

通信單元103接收來自視頻系統(tǒng)200的音視頻信號(hào)，將音視頻信號(hào)發(fā)送給主控單元101處理后將其中的視頻信號(hào)輸出至圖像處理單元104進(jìn)行處理，圖像處理單元104輸出處理后的視頻信號(hào)至顯示屏107進(jìn)行顯示；以及將其中的音頻信號(hào)輸出至音頻處理單元105進(jìn)行解碼，音頻處理單元105輸出解碼后的 音頻節(jié)目信號(hào)至電聲轉(zhuǎn)換單元108進(jìn)行播放。

mhl/hdmi接收單元106也可通過mhl/hdmi數(shù)據(jù)線接收其他智能終端傳輸?shù)墓?jié)目信號(hào)，將節(jié)目信號(hào)中的視頻節(jié)目信號(hào)輸出至圖像處理單元104進(jìn)行處理，圖像處理單元104輸出處理后的視頻節(jié)目信號(hào)至顯示屏107進(jìn)行顯示；以及將其中的音頻節(jié)目信號(hào)輸出至音頻解碼模塊105進(jìn)行解碼，音頻信號(hào)處理單元105輸出解碼后的音頻節(jié)目信號(hào)至電聲轉(zhuǎn)換單元108進(jìn)行播放。

姿態(tài)傳感器單元110用于檢測用戶視角信息，將檢測到的視角信息發(fā)送至主控單元101，主控單元101通過通信單元103將使用者視角信息同步給視頻系統(tǒng)200，視頻系統(tǒng)200根據(jù)視角信息調(diào)整發(fā)送給虛擬現(xiàn)實(shí)終端的視頻內(nèi)容的傳輸方式，將用戶主視角范圍內(nèi)的視頻內(nèi)容采用高質(zhì)量的方式進(jìn)行傳輸，而對用戶主視角范圍外的視頻內(nèi)容采用較低質(zhì)量的方式傳輸，從而節(jié)省網(wǎng)絡(luò)資源。通過內(nèi)置的姿態(tài)傳感器單元110，對用戶的視角信息進(jìn)行實(shí)時(shí)追蹤，將視角信息通過通信單元103與遠(yuǎn)程視頻系統(tǒng)200進(jìn)行實(shí)時(shí)通訊，遠(yuǎn)程視頻系統(tǒng)可以根據(jù)使用者的視角信息對視頻場景進(jìn)行實(shí)時(shí)更新，使用戶的視角與視頻場景變化完全同步，獲得逼真的虛擬現(xiàn)實(shí)體驗(yàn)，達(dá)到增強(qiáng)現(xiàn)實(shí)的功能。

在另外一種實(shí)現(xiàn)方式中，該虛擬現(xiàn)實(shí)終端具有實(shí)現(xiàn)如圖4或5所述內(nèi)容傳輸方法實(shí)際中虛擬現(xiàn)實(shí)終端執(zhí)行的功能。所述功能可以通過硬件實(shí)現(xiàn)，也可以通過硬件執(zhí)行相應(yīng)的軟件實(shí)現(xiàn)。所述硬件或軟件包括一個(gè)或多個(gè)與上述功能相對應(yīng)的模塊。虛擬現(xiàn)實(shí)終端的結(jié)構(gòu)中包括處理器和存儲(chǔ)器，所述存儲(chǔ)器用于存儲(chǔ)支持虛擬現(xiàn)實(shí)設(shè)備執(zhí)行如圖4內(nèi)容傳輸方法的應(yīng)用程序代碼。所述處理器被配置為用于執(zhí)行所述存儲(chǔ)器中存儲(chǔ)的應(yīng)用程序。所述虛擬現(xiàn)實(shí)終端還可以包括通信接口，用于與其他設(shè)備或通信網(wǎng)絡(luò)通信。

如圖3所示，為本發(fā)明實(shí)施例中的視頻系統(tǒng)結(jié)構(gòu)示意圖，該視頻系統(tǒng)200包括：處理單元201、存儲(chǔ)單元202、通信單元203、圖像采集單元204、音頻采集單元205。處理單元201可以是一個(gè)通用中央處理器(cpu)，微處理器，特定應(yīng)用集成電路(application-specificintegratedcircuit，asic)，或一個(gè)或多個(gè)用于控制本發(fā)明方案程序執(zhí)行的集成電路。存儲(chǔ)單元202可以是只讀存儲(chǔ)器 (read-onlymemory，rom)或可存儲(chǔ)靜態(tài)信息和指令的其他類型的靜態(tài)存儲(chǔ)設(shè)備，隨機(jī)存取存儲(chǔ)器(randomaccessmemory，ram)或者可存儲(chǔ)信息和指令的其他類型的動(dòng)態(tài)存儲(chǔ)設(shè)備，也可以是電可擦可編程只讀存儲(chǔ)器(electricallyerasableprogrammableread-onlymemory，eeprom)、只讀光盤(compactdiscread-onlymemory，cd-rom)或其他光盤存儲(chǔ)、光碟存儲(chǔ)(包括壓縮光碟、激光碟、光碟、數(shù)字通用光碟、藍(lán)光光碟等)、磁盤存儲(chǔ)介質(zhì)或者其他磁存儲(chǔ)設(shè)備、或者能夠用于攜帶或存儲(chǔ)具有指令或數(shù)據(jù)結(jié)構(gòu)形式的期望的程序代碼并能夠由計(jì)算機(jī)存取的任何其他介質(zhì)，但不限于此。存儲(chǔ)器可以是獨(dú)立存在，通過總線與處理器相連接。存儲(chǔ)器也可以和處理器集成在一起。通信單元203，可以是使用任何收發(fā)器一類的裝置，或集成射頻芯片的基帶芯片，用于與其他設(shè)備或通信網(wǎng)絡(luò)通信，如以太網(wǎng)，無線接入網(wǎng)(ran)，無線局域網(wǎng)(wirelesslocalareanetworks，wlan)等。圖像采集單元204可以是全景攝像裝置，包含一個(gè)或多個(gè)攝像頭，用于采集圖像信號(hào)。音頻采集單元205可以是麥克風(fēng)，用于采集聲音信號(hào)。

在具體實(shí)現(xiàn)中，作為一種實(shí)施例，視頻系統(tǒng)200還可以包括專用的圖像處理單元206和音頻處理單元207，用于分別對圖像采集單元204和音頻采集單元205采集的圖像和聲音信號(hào)進(jìn)行處理。當(dāng)然圖像處理單元206與音頻處理單元207也可以集成到處理單元201中。

視頻系統(tǒng)200可以通過通信單元203基于無線網(wǎng)絡(luò)(如lte網(wǎng)絡(luò))與虛擬現(xiàn)實(shí)終端100建立無線鏈接。將圖像采集單元204和音頻采集單元205采集的圖像和聲音信號(hào)處理后，通過無線網(wǎng)絡(luò)向虛擬現(xiàn)實(shí)終端100發(fā)送音視頻信號(hào)。視頻系統(tǒng)200還可以接收虛擬現(xiàn)實(shí)終端100實(shí)時(shí)同步的使用者的視角信息，視頻系統(tǒng)可以根據(jù)使用者的視角信息對視頻場景進(jìn)行實(shí)時(shí)更新，使用戶的視角信息與視頻場景變化完全同步。

本發(fā)明實(shí)施例中的無線網(wǎng)絡(luò)不限于lte網(wǎng)絡(luò)，可以是以太網(wǎng)，無線接入網(wǎng)(ran)，無線局域網(wǎng)(wirelesslocalareanetworks，wlan)等通信網(wǎng)絡(luò)。

在另外一種實(shí)現(xiàn)方式中，視頻系統(tǒng)具有實(shí)現(xiàn)如圖4或5所述內(nèi)容傳輸方法 實(shí)際中視頻系統(tǒng)執(zhí)行的功能。所述功能可以通過硬件實(shí)現(xiàn)，也可以通過硬件執(zhí)行相應(yīng)的軟件實(shí)現(xiàn)。所述硬件或軟件包括一個(gè)或多個(gè)與下述功能相對應(yīng)的模塊。

在一個(gè)可能的設(shè)計(jì)中，視頻系統(tǒng)的結(jié)構(gòu)中包括處理器和存儲(chǔ)器，所述存儲(chǔ)器用于存儲(chǔ)支持視頻系統(tǒng)執(zhí)行下述內(nèi)容傳輸方法的應(yīng)用程序代碼，所述處理器被配置為用于執(zhí)行所述存儲(chǔ)器中存儲(chǔ)的應(yīng)用程序。所述視頻系統(tǒng)還可以包括通信接口，用于與其他設(shè)備或通信網(wǎng)絡(luò)通信。

下面結(jié)合圖4對本發(fā)明實(shí)施例做進(jìn)一步說明。

本發(fā)明實(shí)施例的內(nèi)容傳輸方法中，虛擬現(xiàn)實(shí)終端通過姿態(tài)傳感器實(shí)時(shí)檢測用戶的頭部姿態(tài)變化，確定用戶的視角信息，并將用戶的視角信息通過網(wǎng)絡(luò)同步給遠(yuǎn)程的視頻系統(tǒng)，視頻系統(tǒng)根據(jù)用戶的視角信息調(diào)整視頻內(nèi)容的傳輸方式，將用戶主視角范圍內(nèi)的視頻內(nèi)容采用高質(zhì)量的方式進(jìn)行傳輸，而對用戶主視角范圍外的視頻內(nèi)容采用較低質(zhì)量的方式傳輸，從而節(jié)省網(wǎng)絡(luò)資源。

需要注意的是，本實(shí)施例中的高質(zhì)量與低質(zhì)量只是一個(gè)相對概念，高質(zhì)量是指主視角范圍內(nèi)的視頻內(nèi)容的質(zhì)量比主視角范圍外的視頻內(nèi)容的質(zhì)量高?？梢詮姆直媛屎蛶l兩個(gè)維度進(jìn)行理解。也即主視角范圍內(nèi)的視頻內(nèi)容的分辨率或者幀頻比主視角范圍外的視頻內(nèi)容的分辨率或者幀頻要高。比如：主視角范圍內(nèi)的視頻內(nèi)容可以用4k甚至8k等超高清分辨率來作為高質(zhì)量視頻傳輸，而主視角范圍外的視頻內(nèi)容采用1080p等高清作為低質(zhì)量傳輸?；蛘咧饕暯欠秶鷥?nèi)的視頻內(nèi)容可以用120幀頻等刷新率較高的幀率來進(jìn)行高質(zhì)量視頻傳輸，而主視角范圍外的視頻內(nèi)容采用90幀頻等刷新率相對“低”的幀率來進(jìn)行相對低質(zhì)量視頻傳輸。

視角信息是指使用者視野范圍信息。另外，本發(fā)明實(shí)施例中所稱的“主視角”是視頻系統(tǒng)確定的使用者可能看到的視野范圍，包括使用者當(dāng)前視野范圍和/預(yù)測的使用者可能的視野范圍。

如圖4所示，本發(fā)明實(shí)施例的內(nèi)容傳輸方法，包括：

401、虛擬現(xiàn)實(shí)終端實(shí)時(shí)檢測使用者的視角信息，將所述使用者的視角信息同步給視頻系統(tǒng)。

具體的，虛擬現(xiàn)實(shí)終端通過內(nèi)置的姿態(tài)傳感器實(shí)時(shí)檢測使用者的頭部姿態(tài)，根據(jù)頭部姿態(tài)的變化，計(jì)算使用者的視角。比如：姿態(tài)傳感器根據(jù)測量到的頭部運(yùn)動(dòng)的速度、加速度信息計(jì)算頭部將要達(dá)到的位置，然后根據(jù)預(yù)測到的頭部方位確定與頭部方位對應(yīng)的用戶視角。本方案中的用戶視角，是指用戶眼睛的視野，視野是指人的頭部和眼球固定不動(dòng)的情況下，眼睛觀看正前方物體時(shí)所能看得見的空間范圍，稱為靜視野，眼睛轉(zhuǎn)動(dòng)所看到空間范圍稱為動(dòng)視野，常用角度來表示。然后虛擬現(xiàn)實(shí)終端將使用者的視角信息通過無線網(wǎng)絡(luò)傳遞給視頻系統(tǒng)。

402、視頻系統(tǒng)根據(jù)接收的使用者的視角信息確定向虛擬現(xiàn)實(shí)終端返回的全景視頻內(nèi)容，全景視頻內(nèi)容包括與使用者主視角對應(yīng)的第一畫面和非主視角對應(yīng)的第二畫面，所述第一畫面的視頻質(zhì)量高于所述第二畫面的視頻質(zhì)量。

具體的，視頻系統(tǒng)在收到虛擬現(xiàn)實(shí)終端同步的使用者視角信息后，需要根據(jù)使用者視角信息確定使用者的主視角和非主視角。將使用者當(dāng)前的視野確定為使用者的主視角，將非使用者當(dāng)前的視野確定為使用者的非主視角。然后根據(jù)使用者的主視角和非主視角將視頻內(nèi)容劃分為主視角范圍內(nèi)的視頻內(nèi)容和非主視角范圍的視頻內(nèi)容。簡單的說，就是將全景視頻內(nèi)容分為使用者能夠看到的視野范圍內(nèi)的視頻畫面和暫時(shí)看不到的視頻畫面。然后將主視角范圍內(nèi)的視頻內(nèi)容采用高質(zhì)量的方式進(jìn)行傳輸，對非主視角范圍內(nèi)的視頻內(nèi)容采用較低質(zhì)量的方式進(jìn)行傳輸。本實(shí)施例中的高質(zhì)量與低質(zhì)量是一個(gè)相對概念，上文中已有說明，在此不再贅述。

可選的，視頻系統(tǒng)也可以將這個(gè)范圍進(jìn)行進(jìn)一步細(xì)化，分成更多的等級(jí)，從而更好的提升用戶的感知。比如可以進(jìn)一步將非主視角再進(jìn)行級(jí)別劃分，劃分為次主視角和完全非主視角，其中次主視角為挨著主視角的視角，在主視角的周圍，完全非主視角為挨著次主視角的視角，距離主視角較遠(yuǎn)。

在一種可能的實(shí)施方式中，主視角范圍內(nèi)的視頻內(nèi)容可以傳輸基本層圖層加增強(qiáng)層圖層，而非主視角范圍內(nèi)的視頻內(nèi)容僅傳輸基本層圖層。此處的基本層圖層和增強(qiáng)層圖層涉及到可伸縮視頻編解碼(scalablevideocoding，svc) 技術(shù)。svc技術(shù)是一種能將視頻分割為多個(gè)分辨率、質(zhì)量和幀速率層的技術(shù)，把視頻信號(hào)編碼成分層的形式，當(dāng)帶寬不足時(shí)只對基本層的碼流進(jìn)行傳輸和解碼，但這時(shí)解碼的視頻質(zhì)量不高。當(dāng)帶寬慢慢變大時(shí)，可以傳輸增強(qiáng)層的碼流來提高視頻的解碼質(zhì)量。所謂分層編碼，就是在時(shí)間，空間，質(zhì)量上進(jìn)行劃分，輸出多層碼流(包括基本層和增強(qiáng)層)，其中基本層的數(shù)據(jù)可以使解碼器完全正常的解碼出基本視頻內(nèi)容，但是基本層的數(shù)據(jù)獲得的視頻圖像可能幀率較低，分辨率較低，或者質(zhì)量較低。在信道受限或信道環(huán)境復(fù)雜時(shí)，可以保證解碼端能夠接收到可以觀看的流暢視頻圖像。當(dāng)信道環(huán)境良好或信道資源豐富時(shí)，可以傳遞增強(qiáng)層數(shù)據(jù)(增強(qiáng)層也可以為多層)，以提高幀率，或分辨率，或視頻質(zhì)量。

可選的，增強(qiáng)層圖層可能為多層，主視角范圍內(nèi)的視頻內(nèi)容可以傳輸基本層圖層加多個(gè)增強(qiáng)層圖層，而非主視角范圍內(nèi)的視頻內(nèi)容傳輸基本層圖層加少部分增強(qiáng)層圖層。增強(qiáng)層圖層的多少可根據(jù)實(shí)際網(wǎng)絡(luò)狀態(tài)靈活選擇。

視頻系統(tǒng)具體如何使用svc技術(shù)進(jìn)行編碼可進(jìn)一步參考圖6-8實(shí)施例中的說明。

可選的，視頻系統(tǒng)在檢測或收到使用者視角變化前，可以持續(xù)的按照上述方式向虛擬現(xiàn)實(shí)終端發(fā)送視頻內(nèi)容，一旦檢測或收到新的使用者視角信息，從新對視頻內(nèi)容進(jìn)行劃分，然后按照上述方法傳輸。

403、視頻系統(tǒng)將確定的全景視頻內(nèi)容返回給所述虛擬現(xiàn)實(shí)終端。

虛擬現(xiàn)實(shí)終端將接收的全景視頻內(nèi)容進(jìn)行解碼播放，采用本發(fā)明實(shí)施例的內(nèi)容傳輸方法，用戶主視角范圍內(nèi)的視頻內(nèi)容采用高質(zhì)量的視頻傳輸方式，非主視角范圍內(nèi)的視頻內(nèi)容采用較低質(zhì)量的視頻傳輸方式，大幅降低了虛擬現(xiàn)實(shí)體驗(yàn)的網(wǎng)絡(luò)傳輸帶寬，提升了網(wǎng)絡(luò)資源的利用效率。

下面以圖5為例，對本發(fā)明另一實(shí)施例的內(nèi)容傳輸方法進(jìn)行說明。

如圖5所示，該傳輸方法包括：

501、虛擬現(xiàn)實(shí)終端實(shí)時(shí)檢測使用者的視角信息，將所述使用者的視角信息同步給視頻系統(tǒng)。

該步驟具體實(shí)現(xiàn)方式可參考圖4步驟401的說明。

502、視頻系統(tǒng)根據(jù)視頻的畫面內(nèi)容確定主視角。

從使用者在真實(shí)環(huán)境中的習(xí)慣來看，如果某一個(gè)方向有突發(fā)的視頻(突然有物體竄出來)或者音頻(喊叫、汽笛聲等)，使用者一般都會(huì)馬上被這些事件吸引，并將頭快速的移動(dòng)過去來感知到底發(fā)生了什么，對于vr應(yīng)用同樣適用，即如果全景視頻畫面中出現(xiàn)了突發(fā)視頻，或者有突發(fā)的音頻，使用者肯定會(huì)移動(dòng)頭部來快速的捕捉這些發(fā)生的畫面和場景。那么就需要將這些位置也設(shè)置成主視角，或者次主視角，以保證使用者能夠快速的高質(zhì)量的感知這些視角范圍內(nèi)的視頻畫面。

具體的，對于突發(fā)視頻和突發(fā)音頻兩種場景，視頻系統(tǒng)確定主視角的方法如下：

場景1：出現(xiàn)突發(fā)視頻

視頻系統(tǒng)確定突發(fā)視頻的位置，將以該位置中心為中心點(diǎn)的周圍n(n>＝0)度角都設(shè)置為主視角。其中突發(fā)視頻的確定方法不限于，視頻畫面中物體快速移動(dòng)、畫面形狀和顏色發(fā)生突變等。

場景2：出現(xiàn)突發(fā)音頻

視頻系統(tǒng)定位突發(fā)音頻的位置，將以該位置中心為中心點(diǎn)的周圍n(n>＝0)度角都設(shè)置為主視角。其中突發(fā)音頻的確定方法不限于，該空間位置音頻聲音強(qiáng)度突然增大，或者該空間位置音頻的頻率發(fā)生突然變化，或者該空間位置的聲音強(qiáng)度突然增大并且頻率發(fā)生變化。

以上由視頻系統(tǒng)基于突發(fā)音頻或者突發(fā)視頻決定的主視角可能同時(shí)有多個(gè)(同時(shí)有多個(gè)突發(fā)音頻，或者多個(gè)突發(fā)視頻)，那么可以將這些主視角疊加形成最后實(shí)際的主視角。

可選的，視頻系統(tǒng)進(jìn)一步還可以基于使用者視角信息，將使用者視野范圍也確定為主視角，避免預(yù)測的主視角不準(zhǔn)確，保證用戶當(dāng)前的視野范圍采用高質(zhì)量視頻的傳輸方式。

503、視頻系統(tǒng)確定主視角范圍以及非主視角范圍各自對應(yīng)的視頻內(nèi)容。

504、視頻系統(tǒng)將主視角范圍的視頻內(nèi)容采用高質(zhì)量的方式傳輸給虛擬現(xiàn)實(shí)終端，非主視角的視頻內(nèi)容采用較低質(zhì)量的方式傳輸給虛擬現(xiàn)實(shí)終端。

具體實(shí)現(xiàn)可參考圖4步驟402的說明。

上述實(shí)施例的內(nèi)容傳輸方法，可由圖1-2所示的虛擬現(xiàn)實(shí)終端和視頻系統(tǒng)配合實(shí)施。

如上的內(nèi)容傳輸方法，可以由視頻系統(tǒng)根據(jù)具體的視頻畫面預(yù)測使用者的主視角，將主視角的內(nèi)容使用高質(zhì)量的方式進(jìn)行傳輸，保證使用者可以體驗(yàn)到高質(zhì)量的視頻內(nèi)容，提升用戶體驗(yàn)，還能降低網(wǎng)絡(luò)傳輸資源的消耗。

下面介紹本發(fā)明實(shí)施例中視頻系統(tǒng)確定主視角范圍內(nèi)的視頻內(nèi)容的具體實(shí)現(xiàn)方式。

其中，一種可選的方式是基于攝像頭信息來確定主視角范圍內(nèi)的視頻內(nèi)容。

視頻系統(tǒng)的全景攝像頭拍攝的畫面由多個(gè)攝像頭采集而成。在實(shí)際傳輸這些視頻畫面時(shí)，可以針對每個(gè)攝像頭采集的內(nèi)容單獨(dú)編碼壓縮傳送。那么視頻系統(tǒng)可以根據(jù)主視角與全景攝像頭的位置對應(yīng)關(guān)系，將一個(gè)或多個(gè)攝像頭拍攝的畫面作為主視角范圍的內(nèi)容，將該一個(gè)或多個(gè)攝像頭拍攝的內(nèi)容采用高質(zhì)量的方式傳輸給虛擬現(xiàn)實(shí)終端，然后由虛擬現(xiàn)實(shí)終端采用全景視頻算法將多路視頻流合成一個(gè)全景視頻。

如果是分多級(jí)視角(主視角，次主視角等)，那么次主視角的確定類似，即確定完主視角后，剩下的攝像頭拍攝的畫面中只要有次主視角內(nèi)容出現(xiàn)的范圍，那么該攝像頭拍攝的畫面就全部是次主視角對應(yīng)的視頻內(nèi)容。依次類推，直到剩下的攝像頭拍攝的內(nèi)容全部是非主視角和次主視角對應(yīng)的視頻內(nèi)容。

另一種可選的方式中，可以基于全景視頻畫面來確定主視角范圍對應(yīng)的視頻內(nèi)容，以圖6-8為例。

如圖6所示，視頻系統(tǒng)將多個(gè)攝像頭拍攝后的視頻拼接成一個(gè)全景視頻，拼接后形成一幅完整的360度(或者180度等其他角度)全景畫面。具體視頻拼接計(jì)算方式可參考現(xiàn)有技術(shù)。然后將這個(gè)拼接后的全景畫面，分成n*m個(gè)視頻子畫面，每個(gè)子畫面均采用svc方式進(jìn)行編碼,n與m可以是任何正整數(shù)。當(dāng)視頻 系統(tǒng)確定主視角、次主視角和完全非主視角三個(gè)范圍后?？蛇M(jìn)一步根據(jù)確定的主視角、次主視角以及完全非主視角確定視角對應(yīng)的傳輸子畫面。

需要注意的，圖6-8將用戶視角劃分為主視角、次主視角以及完全非主視角，這僅為方便說明，不構(gòu)成對本發(fā)明方案的范圍限制，在另外一種實(shí)施方式中，也可以僅劃分為主視角和非主視角，或者其他多級(jí)視角的方式。

比如，n和m均是6，則整幅全景畫面被分割成36個(gè)子畫面，每個(gè)畫面都可以單獨(dú)采用svc方式編碼并傳輸。如圖中所示，在畫面中主視角和次主視角范圍對應(yīng)的視頻畫面分別由淺灰色和深灰色色塊進(jìn)行表示。由于有些子畫面是跨視角范圍的(一部分在主視角范圍內(nèi)，一部分在非主視角范圍內(nèi))，因此可以簡單的認(rèn)為每個(gè)子畫面都是一個(gè)單獨(dú)的攝像頭拍攝的，即可用與上述基于攝像頭確定視頻內(nèi)容的方式來確定最終的視角信息對應(yīng)的視頻內(nèi)容，即只要與主視角相關(guān)的畫面，都可以設(shè)置成主視角。如圖7所示，此時(shí)相關(guān)的視角范圍如下：

1)主視角對應(yīng)的子畫面：(n2/m2)，(n2/m3)，(n2/m4)，(n2/m5)，(n3/m2)，(n3/m3)，(n3/m4)，(n3/m5)，(n4/m2)，(n4/m3)，(n4/m4)，(n4/m5)，(n5/m2)，(n5/m3)，(n5/m4)，(n5/m5)，共16個(gè)子畫面；

2)次主視角對應(yīng)的子畫面：(n1/m2)，(n1/m3)，(n1/m4)，(n1/m5)，(n2/m1)，(n2/m6)，(n3/m1)，(n3/m6)，(n4/m1)，(n4/m6)，(n5/m1)，(n5/m6)，(n6/m2)，(n6/m3)，(n6/m4)，(n6/m5)共16個(gè)子畫面。

3)非主視角和次主視角對應(yīng)的子畫面：剩下的其他子畫面,(n1/m1)，(n1/m6),(n6/m1),(n6/m6)共4個(gè)子畫面。

如圖7中所示，存在幾個(gè)子畫面涉及的主視角范圍實(shí)際很小，比如(n2/m2)，該子畫面涉及的主視角范圍不超過1％，也被設(shè)置成了主視角，這實(shí)際上是浪費(fèi)了傳輸帶寬，因?yàn)檫@對最終的視頻體驗(yàn)影響不大，所以可以不用設(shè)置成主視角。

參考圖8，可進(jìn)一步考慮設(shè)置比例，比如該子畫面與當(dāng)前主視角匹配程度超過x％，則該子畫面設(shè)置成主視角范圍。另外，次主視角是體驗(yàn)者當(dāng)前看不到的視角，確定次非主視角時(shí)，這個(gè)匹配比例可以適當(dāng)調(diào)高，假如為y％。即該子畫面與當(dāng)前次主視角匹配程度超過y％，則該子畫面設(shè)置成次非主視角。此時(shí)的各 視角范圍對應(yīng)的子畫面如圖8所示(例如：其中x＝5，y＝40)

1)主視角對應(yīng)的子畫面：(n2/m3)，(n2/m4)，(n3/m2)，(n3/m3)，(n3/m4)，(n3/m5)，(n4/m2)，(n4/m3)，(n4/m4),(n4/m5),(n5/m3)，(n5/m4)共12個(gè)子畫面；

2)次主視角對應(yīng)的子畫面：(n1/m3)，(n1/m4)，(n2/m2),(n2/m5)，(n3/m1)，(n3/m6)，(n4/m1),(n4/m6)，(n5/m2)，(n5/m5)，(n6/m3)，(n6/m4)共12個(gè)子畫面。

3)非主視角和次主視角對應(yīng)的子畫面：剩下的其他子畫面，共12個(gè)子畫面。

以上所述，僅為本發(fā)明的具體實(shí)施方式，但本發(fā)明的保護(hù)范圍并不局限于此，任何熟悉本技術(shù)領(lǐng)域的技術(shù)人員在本發(fā)明揭露的技術(shù)范圍內(nèi)，可輕易想到各種等效的修改或替換，這些修改或替換都應(yīng)涵蓋在本發(fā)明的保護(hù)范圍之內(nèi)。因此，本發(fā)明的保護(hù)范圍應(yīng)以權(quán)利要求的保護(hù)范圍為準(zhǔn)。