專利名稱：遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法。
背景技術(shù)：
市場經(jīng)濟(jì)競爭的加劇，企業(yè)生產(chǎn)經(jīng)營逐漸融入全國性、全球性的競爭范圍。高效便捷的信息交流、靈活的培訓(xùn)體系，以及強(qiáng)大的工作協(xié)同需要，成為大中型企業(yè)信息化建設(shè)的首要需求。隨著通訊技術(shù)的發(fā)展，現(xiàn)在人們能實(shí)現(xiàn)視頻聊天和視頻會議等。但是，該些技術(shù)僅局限于單方圖像顯示，即實(shí)時顯示對方的視頻圖像。然而，隨著三維虛擬仿真技術(shù)的發(fā)展，上述的技術(shù)已經(jīng)永遠(yuǎn)無法滿足用戶的需求。

發(fā)明內(nèi)容
本發(fā)明的目的是提供一種遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，能實(shí)現(xiàn)將各點(diǎn)遠(yuǎn)程的人與虛擬背景融合。本發(fā)明采用以下方案實(shí)現(xiàn)一種遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于，包括以下步驟
步驟I :提供一虛擬三維背景；
步驟2 :提供一第一攝像頭和第二攝像頭，各自捕捉該攝像頭視角范圍內(nèi)的景象，所述景象的背景采用單一純色的背景；
步驟3:摳取所述景象內(nèi)的人物圖像，并將摳取的人物圖像與所述虛擬三維背景進(jìn)行合成；
步驟4 :提供一配合第一攝像頭使用的第一拾音器和一配合第二攝像頭使用的第二拾音器，所述拾音器采集攝像頭前方的音頻；
步驟5 :提供一第一顯示裝置和一第二顯示裝置，將所述第一拾音器采集的音頻與所述合成的圖像發(fā)送到所述第二顯示裝置進(jìn)行實(shí)時同步播放，將所述第二拾音器采集的音頻與所述合成的圖像發(fā)送到所述第一顯示裝置進(jìn)行實(shí)時同步播放。在本發(fā)明一實(shí)施例中，所述虛擬三維背景是由一服務(wù)器提供，該服務(wù)器負(fù)責(zé)所述的合成任務(wù)以及合成后的數(shù)據(jù)存儲與發(fā)送。在本發(fā)明一實(shí)施例中，所述的第一攝像頭、第一拾音器和第一顯示裝置組成一第一客戶端，所述的第二攝像頭、第二拾音器和第二顯示裝置組成第二客戶端，該第一客戶端與該第二客戶端經(jīng)網(wǎng)絡(luò)與所述服務(wù)器連接。在本發(fā)明一實(shí)施例中，所述第一客戶端和第二客戶端的用戶通過各自賬號登陸，由所述服務(wù)器進(jìn)行驗(yàn)證，驗(yàn)證成功后進(jìn)行聯(lián)網(wǎng)對接。在本發(fā)明一實(shí)施例中，所述的第一客戶端和第二客戶端是一配有拾音器和攝像頭的計算機(jī)。在本發(fā)明一實(shí)施例中，所述的數(shù)據(jù)包括圖像數(shù)據(jù)和視頻數(shù)據(jù)。在本發(fā)明一實(shí)施例中，所述虛擬三維背景存儲于該服務(wù)器中，其能供用戶自由選擇。在本發(fā)明一實(shí)施例中，所述虛擬三維背景是由所述第一攝像頭或第二攝像頭采集的現(xiàn)場景象。在本發(fā)明一實(shí)施例中，所述顯示裝置顯示的合成視頻圖像中的人物可選，當(dāng)用戶選擇對應(yīng)的人物時，該顯示裝置僅播放該人物所用客戶端采集的音頻，實(shí)現(xiàn)點(diǎn)對點(diǎn)或一點(diǎn)對多點(diǎn)的融合應(yīng)用和自由交流。在本發(fā)明一實(shí)施例中，所述的顯示裝置具備畫中畫顯示或多對話框顯示，系統(tǒng)根據(jù)用戶指令，能將多人交流場景中，以畫中畫或多對話框的形式顯示和播放指定人物的視 頻，可以實(shí)現(xiàn)遠(yuǎn)程虛擬合成錄像，方便參會者的記錄和查看會議資料，實(shí)現(xiàn)會議與視頻的全程存儲。本發(fā)明通過圖像摳取虛擬合成，然后顯示給用戶，該方法適合遠(yuǎn)程視頻會議，與親人見面或一切因故參加無法現(xiàn)場直播，虛擬到位參與等方面的應(yīng)用，為用戶提供親臨現(xiàn)場的感覺，提高了人與人之間的遠(yuǎn)程互動性，具有較好的實(shí)用價值。


圖I是本發(fā)明方法的流程示意圖。圖2是本發(fā)明系統(tǒng)架構(gòu)原理示意圖。
具體實(shí)施例方式下面結(jié)合附圖及實(shí)施例對本發(fā)明做進(jìn)一步說明。請參見圖1，圖I是本發(fā)明方法的流程示意圖。本實(shí)施例提供一種遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其包括以下步驟
步驟I :提供一虛擬三維背景，該虛擬三維背景可以具有圖層結(jié)構(gòu)，以利系統(tǒng)摳圖；步驟2 :提供一第一攝像頭和第二攝像頭，各自捕捉該攝像頭視角范圍內(nèi)的景象，所述景象的背景采用單一純色的背景；
步驟3 :摳取所述景象內(nèi)的人物圖像，并將摳取的人物圖像與所述虛擬三維背景進(jìn)行合成；
步驟4 :提供一配合第一攝像頭使用的第一拾音器和一配合第二攝像頭使用的第二拾音器，所述拾音器采集攝像頭前方的音頻；
步驟5 :提供一第一顯示裝置和一第二顯示裝置，將所述第一拾音器采集的音頻與所述合成的圖像發(fā)送到所述第二顯示裝置進(jìn)行實(shí)時同步播放，將所述第二拾音器采集的音頻與所述合成的圖像發(fā)送到所述第一顯示裝置進(jìn)行實(shí)時同步播放。根據(jù)上述步驟，本發(fā)明將兩個攝像頭采集的人像合成到一虛擬背景中，然后通過顯示裝置進(jìn)行播放，即使通信的雙方相隔很遠(yuǎn)，都會帶來共聚一處的感覺，增強(qiáng)了互動性。下面為了讓一般技術(shù)人員更好的理解本發(fā)明，我們對該方法做進(jìn)一步說明。本實(shí)施例中，為了更好的施行該方法，所述的虛擬三維背景可由一服務(wù)器提供，該服務(wù)器主要負(fù)責(zé)所述的合成任務(wù)以及合成后的數(shù)據(jù)存儲與發(fā)送。請參照圖2，圖中，該第一攝像頭2、第一拾音器和第一顯示裝置I組成一第一客戶端，所述的第二攝像頭6、第二拾音器和第二顯示裝置7組成第二客戶端，該第一客戶端與該第二客戶端經(jīng)網(wǎng)絡(luò)與所述服務(wù)器連接。圖中，攝像頭視角范圍內(nèi)的背景3我們采用單一純色的背景，這樣攝像頭采集到圖片信息后，傳輸給服務(wù)器，服務(wù)器能根據(jù)圖像的顏色進(jìn)行高效摳圖，并把摳取后的人像與所述的虛擬背景融合。較佳的，所述的第一客戶端和第二客戶端可以是配有拾音器和攝像頭的計算機(jī)，該計算機(jī)可以使臺式電腦或手提電腦，這樣用戶通過各自賬號登陸，由所述服務(wù)器進(jìn)行驗(yàn)證，驗(yàn)證成功后進(jìn)行聯(lián)網(wǎng)對接。用戶通過計算機(jī)發(fā)送指令，可調(diào)取服務(wù)器存儲的數(shù)據(jù)，該數(shù)據(jù)包括圖像數(shù)據(jù)和視頻數(shù)據(jù)。這樣用戶可以實(shí)現(xiàn)遠(yuǎn)程虛擬合影，如果是視頻會議，還可以在事后，通過指令向服務(wù)器對該虛擬會議進(jìn)行調(diào)取播放。值得一提的是，本發(fā)明所述的虛擬三維背景存儲于該服務(wù)器中，其能根據(jù)用戶的需求自由選擇。較 佳的，用戶還可以自行上傳由所述第一攝像頭或第二攝像頭采集的現(xiàn)場景象作為虛擬背景。例如，兩個公司開遠(yuǎn)程會議，其中一個客戶端采集其中一個會議室的場景上傳到服務(wù)器，服務(wù)器會將摳取的人像與該會議室場景進(jìn)行融合，然后配合拾音器采集的音頻數(shù)據(jù)在雙方的一顯示器上實(shí)時播放，本發(fā)明改變了以往會議只能看到對方或者只能語音通訊的缺點(diǎn)，更為真實(shí)的模擬了現(xiàn)場會議。本發(fā)明這里僅以兩個客戶為例，根據(jù)本發(fā)明的方法，其還可以多個用戶同時進(jìn)行使用，即摳取多個客戶的人像，在同一背景里進(jìn)行合成，再實(shí)時顯示。為了讓方法更為人性化，我們采用的顯示裝置顯示的合成視頻圖像中的人物可選，如果顯示屏是觸摸顯示頻，則用戶可通過觸摸選擇對應(yīng)的人物，如果是鼠標(biāo)或遙控器操控的，則可通過該鼠標(biāo)或遙控器進(jìn)行選擇，選中后該顯示裝置僅播放該人物所用客戶端采集的音頻，實(shí)現(xiàn)點(diǎn)對點(diǎn)或一點(diǎn)對多點(diǎn)的融合應(yīng)用和自由交流。在本發(fā)明另一實(shí)施例中，我們還以利用顯示裝置的功能，即具備畫中畫顯示或多對話框顯示，系統(tǒng)根據(jù)用戶指令，能將多人交流場景中，以畫中畫或多對話框的的形式顯示和播放指定人物的視頻。為了方便采集圖像，本實(shí)施例中，所述的攝像頭我們采用云臺攝像機(jī)，這樣用戶可以方便的進(jìn)行聯(lián)動控制，例如，一方客戶想觀察會議的某個角落，可以根據(jù)指令控制對方的云臺攝像機(jī)轉(zhuǎn)動到相應(yīng)的位置進(jìn)行采集。此外，本發(fā)明的方法還可以用于與親人見面或一切因故參加無法現(xiàn)場直播，虛擬到位參與等方面。本發(fā)明利用于會議系統(tǒng)，可以落實(shí)貫徹各種精神，完成上傳下達(dá)、提高現(xiàn)有辦公效率，成為該行業(yè)信息化建設(shè)的任務(wù)重點(diǎn)。作為企業(yè)的最寶貴財富，員工業(yè)務(wù)能力不斷提高是企業(yè)成長的前提，內(nèi)部培訓(xùn)的重要性也為企業(yè)所重視。通過系統(tǒng)可以隨時隨地的進(jìn)行異地培訓(xùn)，無需地點(diǎn)和場地的限制，通過系統(tǒng)強(qiáng)大的音視頻和數(shù)據(jù)共享功能，完全滿足遠(yuǎn)程培訓(xùn)的各種課件共享、投票、互動問答等需求，并可以通過錄制保存培訓(xùn)資料，以備新學(xué)員隨時學(xué)習(xí)。另外，企業(yè)人力資源部門的人才招聘同樣可以利用系統(tǒng)來進(jìn)行，招聘方和面試者在異地通過音視頻的通話互動，完全模擬真實(shí)招聘現(xiàn)場，便捷整個招聘過程。以上所述僅為本發(fā)明的較佳實(shí)施例，凡依本發(fā)明申請專利范圍所做的均等變化與修飾，皆應(yīng)屬本發(fā)明的涵蓋范圍。
權(quán)利要求
1.一種遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于，包括以下步驟 步驟I:提供一虛擬三維背景； 步驟2 :提供一第一攝像頭和第二攝像頭，各自捕捉該攝像頭視角范圍內(nèi)的景象，所述景象的背景采用單一純色的背景； 步驟3 :摳取所述景象內(nèi)的人物圖像，并將摳取的人物圖像與所述虛擬三維背景進(jìn)行合成； 步驟4 :提供一配合第一攝像頭使用的第一拾音器和一配合第二攝像頭使用的第二拾音器，所述拾音器采集攝像頭前方的音頻； 步驟5 :提供一第一顯示裝置和一第二顯示裝置，將所述第一拾音器采集的音頻與所述合成的圖像發(fā)送到所述第二顯示裝置進(jìn)行實(shí)時同步播放，將所述第二拾音器采集的音頻與所述合成的圖像發(fā)送到所述第一顯示裝置進(jìn)行實(shí)時同步播放。
2.根據(jù)權(quán)利要求I所述的遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于所述虛擬三維背景是由一服務(wù)器提供，該服務(wù)器負(fù)責(zé)所述的合成后的數(shù)據(jù)存儲與發(fā)送。
3.根據(jù)權(quán)利要求2所述的遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于所述的第一攝像頭、第一拾音器和第一顯示裝置組成一第一客戶端，所述的第二攝像頭、第二拾音器和第二顯示裝置組成第二客戶端，該第一客戶端與該第二客戶端經(jīng)網(wǎng)絡(luò)與所述服務(wù)器連接。
4.根據(jù)權(quán)利要求3所述的遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于所述第一客戶端和第二客戶端的用戶通過各自賬號登陸，由所述服務(wù)器進(jìn)行驗(yàn)證，驗(yàn)證成功后進(jìn)行聯(lián)網(wǎng)對接。
5.根據(jù)權(quán)利要求3所述的遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于所述的第一客戶端和第二客戶端是一配有拾音器和攝像頭的計算機(jī)。
6.根據(jù)權(quán)利要求2所述的遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于所述的數(shù)據(jù)包括圖像數(shù)據(jù)和視頻數(shù)據(jù)。
7.根據(jù)權(quán)利要求2所述的遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于所述虛擬三維背景存儲于該服務(wù)器中，其能供用戶自由選擇。
8.根據(jù)權(quán)利要求I所述的遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于所述的攝像頭是云臺攝像機(jī)，以實(shí)現(xiàn)遠(yuǎn)程聯(lián)動控制。
9.根據(jù)權(quán)利要求I所述的遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于所述顯示裝置顯示的合成視頻圖像中的人物可選，當(dāng)用戶選擇對應(yīng)的人物時，該顯示裝置僅播放該人物所用客戶端采集的音頻，實(shí)現(xiàn)點(diǎn)對點(diǎn)或一點(diǎn)對多點(diǎn)的融合應(yīng)用和自由交流。
10.根據(jù)權(quán)利要求I所述的遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其特征在于所述的顯示裝置具備畫中畫顯示或多對話框顯示，系統(tǒng)根據(jù)用戶指令，能將多人交流場景中，以畫中畫或多對話框的形式顯示和播放指定人物的視頻。
全文摘要
本發(fā)明涉及一種遠(yuǎn)程真人三維虛擬仿場景互動的實(shí)現(xiàn)方法，其通過攝像頭采集圖像經(jīng)過摳取人像后與一虛擬三維景象進(jìn)行合成，然后配合采集的音頻，進(jìn)行實(shí)時的播放，本發(fā)明的方法能實(shí)現(xiàn)將各點(diǎn)遠(yuǎn)程的人與虛擬背景融合，適合遠(yuǎn)程視頻會議，與親人見面或一切因故無法參加現(xiàn)場直播，虛擬到位參與互動等多方面的應(yīng)用。
文檔編號H04N5/272GK102625129SQ201210095199
公開日2012年8月1日 申請日期2012年3月31日 優(yōu)先權(quán)日2012年3月31日
發(fā)明者林楊 申請人:福州一點(diǎn)通廣告裝飾有限公司