取的視頻數(shù)據(jù)進(jìn)行處理,包括:
[0103]將所述視頻數(shù)據(jù)輸入至FPGA ;
[0104]通過(guò)所述FPGA對(duì)所述視頻數(shù)據(jù)進(jìn)行處理,并將處理后的全景視頻數(shù)據(jù)輸出至APU,所述處理包括投影、圖形對(duì)齊拼接和畸變校正,或者,所述處理包括投影和圖形對(duì)齊拼接,所述投影包括柱面投影和球面投影;
[0105]通過(guò)所述APU對(duì)輸入的全景視頻數(shù)據(jù)進(jìn)行H.264編碼。
[0106]優(yōu)選地,所述將所述視頻數(shù)據(jù)輸入至FPGA,包括:
[0107]通過(guò)并行YUV數(shù)據(jù)接口將所述視頻數(shù)據(jù)傳輸至所述FPGA ;或者,
[0108]攝像頭視頻通過(guò)MIPI數(shù)據(jù)接口輸出,通過(guò)MIPI轉(zhuǎn)并行YUV數(shù)據(jù)格式接口芯片輸入至FPGA。
[0109]優(yōu)選地,所述通過(guò)所述FPGA對(duì)所述視頻數(shù)據(jù)進(jìn)行處理,并將處理后的全景視頻數(shù)據(jù)輸出至APU,所述處理包括投影、圖形對(duì)齊拼接和畸變校正,或者,所述處理包括投影和圖形對(duì)齊拼接,所述投影包括柱面投影和球面投影,包括:
[0110]接收輸入的YUV數(shù)據(jù)格式的視頻數(shù)據(jù);
[0111]經(jīng)過(guò)信號(hào)格式檢測(cè)模塊檢測(cè)所述視頻數(shù)據(jù)的格式,所述格式包括分辨率、像素時(shí)鐘、行頻和場(chǎng)頻信息;
[0112]將檢測(cè)后的所述視頻數(shù)據(jù)輸入至DDR存儲(chǔ)單元中,將所述視頻數(shù)據(jù)進(jìn)行處理,并將處理后的全景視頻數(shù)據(jù)輸入APU,所述處理包括投影、圖形對(duì)齊拼接和畸變校正,或者,所述處理包括投影和圖形對(duì)齊拼接,所述投影包括柱面投影和球面投影。
[0113]具體的,參考圖8,圖8是本發(fā)明實(shí)施例提供的一種錄制視頻數(shù)據(jù)的系統(tǒng)的結(jié)構(gòu)示意圖。
[0114]本發(fā)明采用FPGA、APU及若干外圍芯片實(shí)現(xiàn),系統(tǒng)框圖如8所示,三路廣角攝像頭數(shù)據(jù)可以以?xún)煞N方式輸入到FPGA,方式1:以并行YUV數(shù)據(jù)FPGA,方式2:三路廣角攝像頭輸出MIPI格式數(shù)據(jù),通過(guò)MIPI轉(zhuǎn)并行YUV數(shù)據(jù)格式接口芯片輸入到FPGA。三路視頻數(shù)據(jù)在FPGA中經(jīng)過(guò)畸變校正、柱面投影、圖形對(duì)齊拼接后輸出到APU,在APU經(jīng)過(guò)H.264編碼后,以四種方式輸出:1)存儲(chǔ)到本地的SD Card ;2)通過(guò)wifi發(fā)送;3)通過(guò)HDMI輸出;4)通過(guò)USB3.0 輸出。
[0115]步驟603,將處理后的全景視頻數(shù)據(jù)通過(guò)本地存儲(chǔ)或者無(wú)線方式或者有線方式發(fā)送給移動(dòng)終端。
[0116]優(yōu)選地,所述將處理后的全景視頻數(shù)據(jù)通過(guò)本地存儲(chǔ)或者無(wú)線方式或者有線方式發(fā)送給移動(dòng)終端,包括:
[0117]將處理后的全景視頻數(shù)據(jù)存儲(chǔ)到本地SD card,或者通過(guò)WIFI發(fā)送給無(wú)線路由設(shè)備,或者通過(guò)HDMI輸出給智能設(shè)備,或者通過(guò)USB輸出給移動(dòng)終端。
[0118]本發(fā)明實(shí)施例通過(guò)N個(gè)攝像頭獲取360度全景視頻數(shù)據(jù),所述N大于等于1,所述攝像頭拍攝的視頻數(shù)據(jù)的水平角度為360° /N的水平角度,所述攝像頭拍攝的視頻數(shù)據(jù)的垂直角度為360° /N的垂直角度;通過(guò)預(yù)先設(shè)置算法對(duì)各個(gè)攝像頭獲取的視頻數(shù)據(jù)進(jìn)行處理;將處理后的全景視頻數(shù)據(jù)通過(guò)本地存儲(chǔ)或者無(wú)線方式或者有線方式發(fā)送給移動(dòng)終端,從而實(shí)現(xiàn)較為方便的實(shí)現(xiàn)360度全景視頻數(shù)據(jù)錄制及播放的目的。
[0119]以上結(jié)合具體實(shí)施例描述了本發(fā)明實(shí)施例的技術(shù)原理。這些描述只是為了解釋本發(fā)明實(shí)施例的原理,而不能以任何方式解釋為對(duì)本發(fā)明實(shí)施例保護(hù)范圍的限制?;诖颂幍慕忉?zhuān)绢I(lǐng)域的技術(shù)人員不需要付出創(chuàng)造性的勞動(dòng)即可聯(lián)想到本發(fā)明實(shí)施例的其它【具體實(shí)施方式】,這些方式都將落入本發(fā)明實(shí)施例的保護(hù)范圍之內(nèi)。
【主權(quán)項(xiàng)】
1.一種錄制全景視頻的設(shè)備,其特征在于,所述設(shè)備包括N個(gè)攝像頭、FPGA、第一DDR存儲(chǔ)單元、第二 DDR存儲(chǔ)單元、APU,所述N個(gè)攝像頭通過(guò)預(yù)設(shè)線路與所述FPGA連接,所述FPGA分別與所述第一 DDR存儲(chǔ)單元和所述APU連接,所述APU連接所述第二 DDR存儲(chǔ)單元、無(wú)線接口和有線接口,使得所述設(shè)備通過(guò)無(wú)線接口和有線接口與移動(dòng)終端傳輸數(shù)據(jù); 所述N個(gè)攝像頭,用于獲取360度全景視頻數(shù)據(jù),所述N大于等于1,所述攝像頭拍攝的視頻數(shù)據(jù)的水平角度為360° /N的水平角度,所述攝像頭拍攝的視頻數(shù)據(jù)的垂直角度為360° /N的垂直角度; 所述FPGA,用于通過(guò)預(yù)先設(shè)置算法對(duì)各個(gè)攝像頭獲取的視頻數(shù)據(jù)進(jìn)行處理; 所述第一 DDR存儲(chǔ)單元,用于存儲(chǔ)處理后的全景視頻數(shù)據(jù); 所述APU,用于對(duì)處理后的所述全景視頻數(shù)據(jù)進(jìn)行編碼; 所述第二 DDR存儲(chǔ)單元,用于存儲(chǔ)編碼后的所述全景視頻數(shù)據(jù); 所述無(wú)線接口,用于連接無(wú)線設(shè)備; 所述有線接口,用于連接有線設(shè)備。2.根據(jù)權(quán)利要求1所述的錄制全景視頻的設(shè)備,其特征在于,所述設(shè)備包括第一連接單元和第二連接單元; 所述第一連接單元,用于所述N個(gè)攝像頭通過(guò)并行YUV數(shù)據(jù)接口與所述FPGA連接; 所述第二連接單元,用于所述N個(gè)攝像頭通過(guò)MIPI轉(zhuǎn)并行YUV數(shù)據(jù)接口與所述FPGA連接。3.根據(jù)權(quán)利要求1所述的錄制全景視頻的設(shè)備,其特征在于,所述FPGA,包括: 處理模塊,用于通過(guò)所述FPGA對(duì)所述視頻數(shù)據(jù)進(jìn)行處理,并將處理后的全景視頻數(shù)據(jù)輸出至APU,所述處理包括投影、圖形對(duì)齊拼接和畸變校正,或者,所述處理包括投影和圖形對(duì)齊拼接,所述投影包括柱面投影和球面投影。4.根據(jù)權(quán)利要求3所述的錄制全景視頻的設(shè)備,其特征在于,所述處理模塊,包括: 接收單元,用于接收輸入的YUV數(shù)據(jù)格式的視頻數(shù)據(jù); 檢測(cè)單元,用于經(jīng)過(guò)信號(hào)格式檢測(cè)模塊檢測(cè)所述視頻數(shù)據(jù)的格式,所述格式包括分辨率、像素時(shí)鐘、行頻和場(chǎng)頻信息; 輸入單元,用于將檢測(cè)后的所述視頻數(shù)據(jù)輸入至第一 DDR存儲(chǔ)單元中,將所述視頻數(shù)據(jù)進(jìn)行處理,并將處理后的全景視頻數(shù)據(jù)輸入APU,所述處理包括投影、圖形對(duì)齊拼接和畸變校正,或者,所述處理包括投影和圖形對(duì)齊拼接,所述投影包括柱面投影和球面投影。5.根據(jù)權(quán)利要求1所述的錄制全景視頻的設(shè)備,其特征在于,所述APU包括: 編碼模塊,用于通過(guò)所述APU對(duì)輸入的全景視頻數(shù)據(jù)進(jìn)行H.264編碼。6.根據(jù)權(quán)利要求1至5任意一項(xiàng)所述的設(shè)備,其特征在于,所述APU連接所述第二DDR存儲(chǔ)單元、無(wú)線接口和有線接口,使得所述設(shè)備通過(guò)無(wú)線接口和有線接口與移動(dòng)終端傳輸數(shù)據(jù),包括: 所述APU連接所述第二 DDR存儲(chǔ)單元、USB、HDMI接口、SD Card和WIFI,以使得所述設(shè)備通過(guò)所述第二 DDR存儲(chǔ)單元、所述USB、所述HDMI接口、所述SD Card和所述WIFI與移動(dòng)終端連接; 所述USB用于連接移動(dòng)終端,所述HDMI接口用于連接智能設(shè)備,所述WIFI用于連接無(wú)線路由設(shè)備和智能設(shè)備。7.一種錄制全景視頻的方法,其特征在于,所述方法包括: 通過(guò)N個(gè)攝像頭獲取360度全景視頻數(shù)據(jù),所述N大于等于1,所述攝像頭拍攝的視頻數(shù)據(jù)的水平角度為360° /N的水平角度,所述攝像頭拍攝的視頻數(shù)據(jù)的垂直角度為360° /N的垂直角度; 通過(guò)預(yù)先設(shè)置算法對(duì)各個(gè)攝像頭獲取的視頻數(shù)據(jù)進(jìn)行處理; 將處理后的全景視頻數(shù)據(jù)通過(guò)本地存儲(chǔ)或者無(wú)線方式或者有線方式發(fā)送給移動(dòng)終端。8.根據(jù)權(quán)利要求7所述的方法,所述通過(guò)預(yù)先設(shè)置算法對(duì)各個(gè)攝像頭獲取的視頻數(shù)據(jù)進(jìn)行處理,包括: 將所述視頻數(shù)據(jù)輸入至FPGA ; 通過(guò)所述FPGA對(duì)所述視頻數(shù)據(jù)進(jìn)行處理,將處理后的全景視頻數(shù)據(jù)輸出至APU,所述處理包括投影、圖形對(duì)齊拼接和畸變校正,或者,所述處理包括投影和圖形對(duì)齊拼接,所述投影包括柱面投影和球面投影; 通過(guò)所述APU對(duì)輸入的全景視頻數(shù)據(jù)進(jìn)行H.264編碼。9.根據(jù)權(quán)利要求8所述的方法,其特征在于,所述將所述視頻數(shù)據(jù)輸入至FPGA,包括: 通過(guò)并行YUV數(shù)據(jù)接口將所述視頻數(shù)據(jù)傳輸至所述FPGA ;或者, 攝像頭視頻通過(guò)MIPI數(shù)據(jù)接口輸出,通過(guò)MIPI轉(zhuǎn)并行YUV數(shù)據(jù)格式接口芯片輸入至FPGA010.根據(jù)權(quán)利要求8所述的方法,其特征在于,所述通過(guò)所述FPGA對(duì)所述視頻數(shù)據(jù)進(jìn)行處理,將處理后的全景視頻數(shù)據(jù)輸出至APU,所述處理包括投影、圖形對(duì)齊拼接和畸變校正,或者,所述處理包括投影和圖形對(duì)齊拼接,所述投影包括柱面投影和球面投影,包括: 接收輸入的YUV數(shù)據(jù)格式的視頻數(shù)據(jù); 經(jīng)過(guò)信號(hào)格式檢測(cè)模塊檢測(cè)所述視頻數(shù)據(jù)的格式,所述格式包括分辨率、像素時(shí)鐘、行頻和場(chǎng)頻信息; 將檢測(cè)后的所述視頻數(shù)據(jù)輸入至所述DDR存儲(chǔ)單元中,將所述視頻數(shù)據(jù)進(jìn)行處理,并將處理后的全景視頻數(shù)據(jù)輸入APU,所述處理包括投影、圖形對(duì)齊拼接和畸變校正,或者,所述處理包括投影和圖形對(duì)齊拼接,所述投影包括柱面投影和球面投影。11.根據(jù)權(quán)利要求7至10任意一項(xiàng)所述的方法,其特征在于,所述將處理后的全景視頻數(shù)據(jù)通過(guò)本地存儲(chǔ)或者無(wú)線方式或者有線方式發(fā)送給移動(dòng)終端,包括: 將處理后的全景視頻數(shù)據(jù)存儲(chǔ)到本地SD card,或者通過(guò)WIFI發(fā)送給無(wú)線路由設(shè)備,或者通過(guò)HDMI輸出給智能設(shè)備,或者通過(guò)USB輸出給移動(dòng)終端。
【專(zhuān)利摘要】本發(fā)明實(shí)施例公開(kāi)了一種錄制全景視頻的設(shè)備及方法,所述設(shè)備包括N個(gè)攝像頭、FPGA、第一DDR存儲(chǔ)單元、第二DDR存儲(chǔ)單元、APU,所述N個(gè)攝像頭通過(guò)預(yù)設(shè)線路與所述FPGA連接,所述FPGA分別與所述第一DDR存儲(chǔ)單元和所述APU連接,所述APU連接所述第二DDR存儲(chǔ)單元、無(wú)線接口和有線接口,使得所述設(shè)備通過(guò)無(wú)線接口和有線接口與移動(dòng)終端傳輸數(shù)據(jù);從而實(shí)現(xiàn)較為方便的實(shí)現(xiàn)360度全景視頻數(shù)據(jù)錄制及播放的目的。
【IPC分類(lèi)】H04N5/76, H04N9/04, H04N5/232
【公開(kāi)號(hào)】CN105120193
【申請(qǐng)?zhí)枴緾N201510477504
【發(fā)明人】陳志豪, 蔡衛(wèi)東, 羅虎, 徐慶華, 吳伯仲, 陳鵬
【申請(qǐng)人】佛山六滴電子科技有限公司, 深圳六滴科技有限公司
【公開(kāi)日】2015年12月2日
【申請(qǐng)日】2015年8月6日