解碼模塊組成以支持語音通信業(yè)務(wù)。媒體通信處理部分由視頻/圖形采集模塊、視頻/圖形編解碼模塊組成，解碼后的圖像交由圖形用戶界面展現(xiàn)。控制模塊將數(shù)據(jù)合路輪詢所有的數(shù)據(jù)源，并組裝數(shù)據(jù)包交給通信模塊發(fā)送。控制模塊合路功能按照一定的順序遍歷所有的數(shù)據(jù)源。每次獲取數(shù)據(jù)的過程，都是對某個共用緩沖區(qū)的訪問過程，都進(jìn)行了對互斥鎖的加鎖和解鎖的操作;每個數(shù)據(jù)包的發(fā)送過程，也是將數(shù)據(jù)包寫入一個共用緩沖區(qū)，也進(jìn)行互斥鎖的加鎖和解鎖的操作?？刂颇K數(shù)據(jù)分路負(fù)責(zé)解析數(shù)據(jù)包，將接收到的數(shù)據(jù)分發(fā)到各個功能處理模塊中去。控制模塊分路功能將數(shù)據(jù)從字節(jié)流中分離出來，并根據(jù)荷載標(biāo)識將數(shù)據(jù)分發(fā)到各功能處理模塊中去。媒體處理部分利用雙核處理器建立實時多任務(wù)系統(tǒng)。另外在終端中引入了可重構(gòu)通信模塊，能夠統(tǒng)一對終端設(shè)備的通信處理資源進(jìn)行管理，分配通過自帶的網(wǎng)口連接到網(wǎng)絡(luò)或通過增加設(shè)置以太網(wǎng)控制器芯片DSP擴(kuò)展其它網(wǎng)絡(luò)適配接口。本實用新型的工作流程實現(xiàn)包括以下特性:
[0098]I)工作流程的綜合性:終端借助于可重構(gòu)嵌入式系統(tǒng)，網(wǎng)絡(luò)融合的主要服務(wù)(如語音、文體/圖像、視頻資源等)提供業(yè)務(wù)應(yīng)用的承載和控制。
[0099]2)工作流程的交互性:終端借助于可重構(gòu)嵌入式應(yīng)用軟件，采用相應(yīng)的適配硬件接口，可提供終端與基于網(wǎng)絡(luò)應(yīng)用環(huán)境的服務(wù)交互能力和用戶業(yè)務(wù)應(yīng)用功能接口。
[0100]3)工作流程的同步性:終端借助可重構(gòu)于嵌入式集成技術(shù)，可支持終端上顯示的多媒體圖像、聲音、文檔以同步方式工作，實現(xiàn)鍵盤、屏觸與遙控操作的同步，將語音、數(shù)據(jù)、視頻的同步處理功能融為一體。
[0101]本實用新型的系統(tǒng)設(shè)計指標(biāo)
[0102]硬件配置:
[0103]I )DSP芯片:集成Samsung公司的ARM9內(nèi)核芯片S3C2410A處理器
[0104]2)FPGA芯片:TI公司的TMS320C6211 DSP芯片處理器
[0105]3)內(nèi)置RAM存儲器:256 DDR(最大512M)
[0106]4)內(nèi)置ROM存儲器:1G_8G Nand Flash(標(biāo)準(zhǔn))，最大可支持2G
[0107]5)顯示:TFT-LCD真彩觸摸屏，屏幕尺寸:5_8寸(可選)，分辨率:800x480
[0108]6)網(wǎng)絡(luò):TCP/IP 可以選擇 LAN、DSL、CabieMorden(可選)
[0109]7)WiFi/3G/4G無線網(wǎng):RT2870 Wireless Adaptor(802.llb)/EVD0 3G/4G(可選)
[0110]8)接口:USB 2.0可與電腦同步拷貝文件，USB OTG可駁接移動硬盤
[0111]9)按鍵:主菜單鍵、功能鍵，返回，電源鍵、可外接
[0112]10)音效:3.5mm標(biāo)準(zhǔn)耳機(jī)接口、立體聲喇叭接口
[0113]11)TF卡:TF Card卡槽，最大可支持16GB
[0114]12)電源:外接220V采用適配器
[0115]軟件配置:
[0116]I)操作系統(tǒng):Android4.0 以上
[0117]2)系統(tǒng)程序:S3C2410A、TMS320C6211處理器帶SDK開發(fā)包和接口驅(qū)動damo程序;設(shè)備驅(qū)動采用DAX驅(qū)動程序作為管理設(shè)備的軟件模塊；
[0118]3)訪問界面:嵌入式瀏覽器；
[0119]4)擴(kuò)展方式:可重構(gòu)嵌入式系統(tǒng)的模塊動態(tài)加載程序
[0120]5)升級方式:USB、SD CARD、連網(wǎng)遠(yuǎn)程升級
[0121]6)配置方式:USB、RS232接口
[0122]7)工作流程:軟件采用Java語言編寫代碼實現(xiàn)各個功能模塊，配置完成后，通過軟件運行流程實現(xiàn)整個系統(tǒng)功能。
[0123]①終端的應(yīng)用流程一一實現(xiàn)用戶層的鍵盤撥號/屏幕觸控、業(yè)務(wù)呼叫、電話接聽/掛斷、接口等應(yīng)用操作。
[0124]②接口的運行流程一一完成接口層的兩個功能:作為應(yīng)用層和傳輸層的接口一建立套接字(SOCKET)、擁有調(diào)用模塊層各個模塊的接口函數(shù)。
[0125]③模塊的配置流程一一支持系統(tǒng)的核心層應(yīng)用包括:通信模塊、數(shù)據(jù)傳輸模塊、語音和音視頻編解碼模塊等。其中:通信模塊實現(xiàn)DTMF與OSIP協(xié)議棧的3個模塊:解析器、有限狀態(tài)機(jī)和工具模塊。數(shù)據(jù)傳輸模塊使用UDP協(xié)議，用RTP/RTCP進(jìn)行實時傳輸和控制、語音模塊和音視頻模塊分別完成語音和音視頻的采集與編解碼。
[0126]8)流程管理:
[0127]①日志:軟件工作流程自動跟蹤終端系統(tǒng)的功能執(zhí)行和性能，提供應(yīng)用記錄日志；
[0128]②監(jiān)控:軟件工作流程能夠發(fā)現(xiàn)出現(xiàn)的問題和異常情況，并且快速進(jìn)行調(diào)整和優(yōu)化；
[0129]③版本控制:軟件工作流程識別升級請求，使用轉(zhuǎn)換規(guī)則把終端系統(tǒng)自動迀移到新版本中。
[0130]④異常管理:軟件工作流程啟動后，提供跟蹤和處理終端系統(tǒng)出現(xiàn)的異常的能力。
[0131]系統(tǒng)功能:
[0132]視頻編解碼:支持H.264、Η.263/mp4,3gp，avi ,f lv,mkv,mov[0?33]音頻編解碼:支持 mp3, ogg, wav,mid
[0134]語音編解碼:支持6.711&、6.71111、6.729[0? 35]圖像格式:支持 jpeg，gif，png，bmp
[0136]操作界面:支持?jǐn)?shù)字/中英文/符號鍵盤輸入，屏幕觸控參數(shù)設(shè)置/調(diào)用
[0137]網(wǎng)絡(luò)協(xié)議:支持TCP，UDP，RTP，RTSP/DVB-C/DHT-P2P。
[0138]支持功能:
[0139]I)網(wǎng)絡(luò)通信:
[0140]①DTMF通信——支持PSTN電話
[0141]②SIP通信——SIP2.0(含MENU號碼翻譯)
[0142]③P2P通信一一支持P2P語音/視頻電話/消息分發(fā)
[0143]2)網(wǎng)絡(luò)媒體:
[0144]①IPTV:支持EPG交互IPTV流媒體的解碼/播放
[0145]②DVB-C+IPTV:支持EPG交互DVB-C與IPTV的解碼、播放
[0146]③PUSHTV:支持EPG引導(dǎo)音視頻流媒體的解碼，播放
[0147]④視頻播放:制式自動，25-30楨/S、分辨率:D1/720P、視頻碼率768k?3Mbps無抖動。
[0148]接口功能
[0149]I)音視頻接口:HDMI高清音視頻、視頻接口、3.5mm耳機(jī)立體聲音頻接口
[0150]2)USB接口:支持USB2.0/USB高速數(shù)據(jù)接口
[0151]3)SD接口:支持外接SD卡/硬盤接口
[0152]4)網(wǎng)絡(luò)接口:
[0153]①提供10M自適應(yīng)(LAN、PC)RJ45X2、WIF1、RJ11
[0154]②提供RF(10-100MFEC)、1M自適應(yīng)(LAN、PC)RJ45
[0155]?提供101自適應(yīng)(1^、？0耵45\2、、耵11
[0156]5)本機(jī)接口:電話手柄/HOMERF子機(jī)接口、300萬攝像頭、7寸TFT觸控彩屏
[0157]6)撥號鍵盤:16位鍵盤(開關(guān)鍵、靜音/音量、菜單鍵和域標(biāo)識控制等功能鍵)。
[0158]處理功能
[0159]I)易用性:軟件易安裝、用戶界面友好、符合使用習(xí)慣，提供聯(lián)機(jī)幫助，軟件操作方便
[0160]2)可靠性:自啟動/恢復(fù):支持終端設(shè)備即插即用/斷電重啟，能屏蔽用戶操作錯誤[0161 ]3)管理/升級:密碼與權(quán)限管理;采用遠(yuǎn)程注冊驗證模式:支持軟件自動刷新
[0162]4)穩(wěn)定性:支持網(wǎng)絡(luò)有效性檢查、診斷/QoS自適應(yīng)、系統(tǒng)狀態(tài)查詢/自動糾錯
[0163]5)可擴(kuò)展性:預(yù)留開放式接口，可對終端系統(tǒng)功能進(jìn)行擴(kuò)充、定制
[0164]6)符合性:有效性、安全可靠性指標(biāo)合乎國家/國際和行業(yè)相關(guān)標(biāo)準(zhǔn)。
【主權(quán)項】
1.可重構(gòu)網(wǎng)絡(luò)媒體話機(jī)終端，所述終端嵌入式系統(tǒng)基于嵌入式雙處理器為核心的基礎(chǔ)上進(jìn)行擴(kuò)展，嵌入式雙處理器包括DSP核與ARM微處理器核，ARM微處理器核包括ARM核微處理器作為主控制器，以FPGA芯片處理器即DSP核作為重構(gòu)控制器，與嵌入式雙處理器連接的是總線、存儲器、串口、網(wǎng)絡(luò)1口、視頻輸入/輸出單元、視頻編解碼器、語音輸入/輸出單元、語音編解碼器、延時單元、系統(tǒng)控制單元、多媒體數(shù)據(jù)復(fù)用/解復(fù)用單元和網(wǎng)絡(luò)接口單元。2.根據(jù)權(quán)利要求1所述的可重構(gòu)網(wǎng)絡(luò)媒體話機(jī)終端，其特征是，所述視頻輸入/輸出單元、視頻編解碼器、語音輸入/輸出單元、語音編解碼器、延時單元、系統(tǒng)控制單元、多媒體數(shù)據(jù)復(fù)用/解復(fù)用單元和網(wǎng)絡(luò)接口單元與外圍器件連接，外圍器件包括AV、觸摸屏/鍵盤、SD、USB、RS232、LCD、CCD 器件。3.根據(jù)權(quán)利要求1所述的可重構(gòu)網(wǎng)絡(luò)媒體話機(jī)終端，其特征是，嵌入式雙處理器采用Samsung公司的ARM9內(nèi)核芯片S3C2410A處理器和TI公司的TMS320C6211 DSP芯片。
【專利摘要】可重構(gòu)網(wǎng)絡(luò)媒體話機(jī)終端，所述終端嵌入式系統(tǒng)基于嵌入式雙處理器為核心的基礎(chǔ)上進(jìn)行擴(kuò)展，嵌入式雙處理器包括DSP核與ARM微處理器核，ARM微處理器核包括ARM核微處理器作為主控制器，以FPGA芯片處理器即DSP核作為重構(gòu)控制器，與嵌入式雙處理器連接的是總線、存儲器、串口、網(wǎng)絡(luò)IO口、視頻輸入/輸出單元、視頻編解碼器、語音輸入/輸出單元、語音編解碼器、延時單元、系統(tǒng)控制單元、多媒體數(shù)據(jù)復(fù)用/解復(fù)用單元和網(wǎng)絡(luò)接口單元。所述終端在軟件的驅(qū)動下，對FPGA芯片處理器的全部或部分邏輯資源重新進(jìn)行動態(tài)配置，并匹配相應(yīng)的應(yīng)用中間件及配置操作提升性能，實現(xiàn)硬件時分復(fù)用、最大限度支持終端具備高實用性和可擴(kuò)展性。
【IPC分類】H04N7/14, H04M11/06, H04M1/253, H04N5/44
【公開號】CN205212923
【申請?zhí)枴緾N201520864926
【發(fā)明人】沈逸林
【申請人】上海唐舜電信科技有限公司
【公開日】2016年5月4日
【申請日】2015年11月2日