1.本技術(shù)總體上涉及用于視頻會議的系統(tǒng)和方法。2.
背景技術(shù)：
虛擬會議(如視頻會議)通常在個人辦公室和會議室進行，允許參與者從不同的位置進行虛擬會議。會議系統(tǒng)包括例如顯示器、揚聲器、相機和麥克風，它們允許參與者看到其他參與者并與之交流。虛擬會議中的參與者經(jīng)由顯示器看到其他參與者。gb?2?353?429?a公開了一種布置，用于在家庭位置中以三維設(shè)置顯示來自遠程位置的人的真人大小的實時圖像，同時為遠程位置的人提供家庭位置的對應(yīng)遠程呈現(xiàn)。所述布置包括：用于在黑色或色度鍵(chromakey)背景上顯示人的視頻呈現(xiàn)系統(tǒng)；用于觀看環(huán)境和人的疊加視頻圖像的雙向反射鏡；攝像機或一對相機，其被定位為與人的疊加圖像的眼睛成一直線；以及家庭位置與遠程位置之間的網(wǎng)絡(luò)連接。立體視圖可以與雙向反射鏡和回射表面一起使用，以在3d設(shè)置中顯示來自遠程位置的人的真人大小的自動立體實時圖像。進一步的布置包括允許跟蹤用戶眼睛的設(shè)備。

背景技術(shù)

0、發(fā)明背景

技術(shù)實現(xiàn)思路

1、雖然虛擬會議提供面對面的會議體驗，但傳統(tǒng)虛擬會議設(shè)置中使用的顯示器僅提供二維成像。因此，虛擬會議中的參與者無法感覺到其他參與者的存在，并且可能仍會體驗到與虛擬會議中的其他參與者的社交脫節(jié)。

2、本文描述的實施例涉及一種視頻會議隔間(booth)。所述視頻會議隔間旨在提供一種面對面會議的感覺，可以避免需要眼鏡來提供三維影像，并可以減少或最小化屏幕的反射和障礙。另外，具有全視差的三維系統(tǒng)通常需要復雜的三維場景感測、圖像壓縮算法和圖像重建算法，這需要大量的計算和帶寬需求。本文描述的實施例提供了一種三維視頻會議隔間，所述三維視頻會議隔間可以使用機械部件(如致動器)來匹配參與者之間的視圖。由于部件是基于跟蹤的頭部和/或面部運動進行機械移動的，因此系統(tǒng)可以僅使用立體視頻流，并且計算所需的元數(shù)據(jù)量相對較小。

3、在本公開的一個示例性方面中，提供了一種視頻會議隔間，所述視頻會議隔間包括：跟蹤系統(tǒng)，其被配置為跟蹤第一用戶的位置，立體投影儀；第一致動器，其被配置為沿著至少第一軸線平移所述立體投影儀；圖像傳感器裝置，其包括被配置為生成與遠程視頻會議隔間的第二用戶的左眼相對應(yīng)的視頻流的第一圖像傳感器，以及被配置為生成與所述遠程視頻會議隔間的所述第二用戶的右眼相對應(yīng)的視頻流的第二圖像傳感器；第二致動器，其被配置為沿著至少第二軸線平移所述圖像傳感器裝置；以及控制器，其被配置為：從所述跟蹤系統(tǒng)獲得所述第一用戶的第一位置的第一流，向所述第一致動器傳輸命令以基于所述第一用戶的第一位置的所述第一流沿所述第一軸線調(diào)整所述立體投影儀的位置，將所述第一用戶的第一位置的所述第一流傳輸?shù)剿鲞h程視頻會議隔間，從所述遠程視頻會議隔間接收所述遠程視頻會議隔間的所述第二用戶的第二位置的第二流，向所述第二致動器傳輸命令以基于所述第二用戶的第二位置的所述第二流沿所述第二軸線調(diào)整所述圖像傳感器裝置的位置，從所述遠程視頻會議隔間接收與所述第二用戶的左眼相對應(yīng)的視頻流和與所述第二用戶的右眼相對應(yīng)的視頻流，其中，所接收的所述第二用戶的每個視頻流至少包括基于第一用戶處于第三位置而捕獲的給定幀，至少部分地基于來自所述跟蹤系統(tǒng)的所述第一用戶的第一位置的所述第一流確定所述第一用戶在接收所述視頻流的所述給定幀時位于第四位置，估計所述第一用戶的所述第三位置與所述第一用戶的所述第四位置之間的誤差，并且基于所估計的誤差來調(diào)整與所述第二用戶的左眼相對應(yīng)的所述視頻流和與所述第二用戶的右眼相對應(yīng)的所述視頻流。

4、在本公開的另一個示例性方面中，提供了一種用于操作視頻會議隔間的方法，所述視頻會議隔間包括：跟蹤系統(tǒng)，其被配置為跟蹤第一用戶的位置；立體投影儀；第一致動器，其被配置為沿著至少第一軸線平移所述立體投影儀；圖像傳感器裝置，其包括被配置為生成與所述遠程視頻會議隔間的第二用戶的左眼相對應(yīng)的視頻流的第一圖像傳感器，以及被配置為生成與所述遠程視頻會議隔間的所述第二用戶的右眼相對應(yīng)的視頻流的第二圖像傳感器；以及第二致動器，其被配置為沿著至少第二軸線平移所述圖像傳感器裝置，所述方法包括：從所述跟蹤系統(tǒng)獲得所述第一用戶的第一位置的第一流，向所述第一致動器傳輸命令以基于所述第一用戶的第一位置的所述第一流沿所述第一軸線調(diào)整所述立體投影儀的位置，將所述第一用戶的第一位置的所述第一流傳輸?shù)剿鲞h程視頻會議隔間，從所述遠程視頻會議隔間接收所述遠程視頻會議隔間的所述第二用戶的第二位置的第二流，向所述第二致動器傳輸命令以基于所述第二用戶的第二位置的所述第二流沿所述第二軸線調(diào)整所述圖像傳感器裝置的位置，從所述遠程視頻會議隔間接收與所述第二用戶的左眼相對應(yīng)的視頻流和與所述第二用戶的右眼相對應(yīng)的視頻流，其中，所接收的所述第二用戶的每個視頻流至少包括基于第一用戶處于第三位置而捕獲的給定幀，至少部分地基于來自所述跟蹤系統(tǒng)的所述第一用戶的第一位置的所述第一流確定所述第一用戶在接收所述視頻流的所述給定幀時位于第四位置，估計所述第一用戶的所述第三位置與所述第一用戶的所述第四位置之間的誤差，以及基于所估計的誤差來調(diào)整與所述第二用戶的左眼相對應(yīng)的所述視頻流和與所述第二用戶的右眼相對應(yīng)的所述視頻流。

5、在本公開的另一個示例性方面中，提供了一種存儲指令的非暫態(tài)計算機可讀介質(zhì)，所述指令當由根據(jù)本公開的視頻會議隔間中的投射系統(tǒng)的處理器執(zhí)行時使所述投射系統(tǒng)執(zhí)行操作，所述操作包括以下各項：從所述跟蹤系統(tǒng)獲得所述第一用戶的第一位置的第一流，向所述第一致動器傳輸命令以基于所述第一用戶的第一位置的所述第一流沿所述第一軸線調(diào)整所述立體投影儀的位置，將所述第一用戶的第一位置的所述第一流傳輸?shù)竭h程視頻會議隔間，從所述遠程視頻會議隔間接收所述遠程視頻會議隔間的第二用戶的第二位置的第二流，以及向所述第二致動器傳輸命令以基于所述第二用戶的第二位置的所述第二流沿所述第二軸線調(diào)整所述圖像傳感器裝置的位置。

6、在本公開的另一個示例性方面中，提供了一種視頻會議桌，所述視頻會議桌包括：跟蹤系統(tǒng)，其被配置為跟蹤第一本地用戶和第二本地用戶的位置；第一圖像傳感器裝置，其被配置為捕獲至少所述第一本地用戶；第二圖像傳感器裝置，其被配置為捕獲至少所述第二本地用戶；第一致動器，其被配置為沿著至少第一軸線平移所述第一圖像傳感器裝置；第二致動器，其被配置為沿著至少第二軸線平移所述第二圖像傳感器裝置；以及控制器。所述控制器被配置為接收第一遠程用戶的第一位置的第一流，并且向所述第一致動器傳輸命令以基于所述第一遠程用戶的第一位置的所述第一流沿所述第一軸線調(diào)整所述第一圖像傳感器裝置的位置。所述控制器被配置為接收第二遠程用戶的第二位置的第二流，并且向所述第二致動器傳輸命令以基于所述第二遠程用戶的第二位置的所述第二流沿所述第二軸線調(diào)整所述第二圖像傳感器裝置的位置。所述第一圖像傳感器裝置包括所述第一圖像傳感器裝置的第一圖像傳感器和所述第一圖像傳感器裝置的第二圖像傳感器。所述第一圖像傳感器裝置的所述第一圖像傳感器被配置為生成與遠程視頻會議隔間的用戶的左眼相對應(yīng)的視頻流，并且所述第一圖像傳感器裝置的所述第二圖像傳感器被配置為生成與所述遠程視頻會議隔間的所述用戶的右眼相對應(yīng)的視頻流。所述第二圖像傳感器裝置包括所述第二圖像傳感器裝置的第一圖像傳感器和所述第二圖像傳感器裝置的第二圖像傳感器。所述第二圖像傳感器裝置的所述第一圖像傳感器被配置為生成與所述遠程視頻會議隔間的所述用戶的左眼相對應(yīng)的視頻流，并且所述第二圖像傳感器裝置的所述第二圖像傳感器被配置為生成與所述遠程視頻會議隔間的所述用戶的右眼相對應(yīng)的視頻流。

7、在本公開的另一個示例性方面中，提供了一種用于操作視頻會議桌的方法，所述視頻會議桌包括：跟蹤系統(tǒng)，其被配置為跟蹤第一本地用戶和第二本地用戶的位置；第一圖像傳感器裝置，其被配置為捕獲至少所述第一本地用戶；第二圖像傳感器裝置，其被配置為捕獲至少所述第二本地用戶；第一致動器，其被配置為沿著至少第一軸線平移所述第一圖像傳感器裝置；以及第二致動器，其被配置為沿著至少第二軸線平移所述第二圖像傳感器裝置。所述方法包括接收第一遠程用戶的第一位置的第一流，以及向所述第一致動器傳輸命令以基于所述第一遠程用戶的第一位置的所述第一流沿所述第一軸線調(diào)整所述第一圖像傳感器裝置的位置。所述方法包括接收第二遠程用戶的第二位置的第二流，以及向所述第二致動器傳輸命令以基于所述第二遠程用戶的第二位置的所述第二流沿所述第二軸線調(diào)整所述第二圖像傳感器裝置的位置。所述第一圖像傳感器裝置包括所述第一圖像傳感器裝置的第一圖像傳感器和所述第一圖像傳感器裝置的第二圖像傳感器。所述第一圖像傳感器裝置的所述第一圖像傳感器被配置為生成與遠程視頻會議隔間的用戶的左眼相對應(yīng)的視頻流，并且所述第一圖像傳感器裝置的所述第二圖像傳感器被配置為生成與所述遠程視頻會議隔間的所述用戶的右眼相對應(yīng)的視頻流。所述第二圖像傳感器裝置包括所述第二圖像傳感器裝置的第一圖像傳感器和所述第二圖像傳感器裝置的第二圖像傳感器。所述第二圖像傳感器裝置的所述第一圖像傳感器被配置為生成與所述遠程視頻會議隔間的所述用戶的左眼相對應(yīng)的視頻流，并且所述第二圖像傳感器裝置的所述第二圖像傳感器被配置為生成與所述遠程視頻會議隔間的所述用戶的右眼相對應(yīng)的視頻流。

8、在本公開的另一個示例性方面中，提供了一種視頻會議隔間，所述視頻會議隔間包括：跟蹤系統(tǒng)，其被配置為跟蹤第一用戶的位置；可穿戴立體投影儀；圖像傳感器裝置，其包括被配置為生成與所述遠程視頻會議隔間的第二用戶的左眼相對應(yīng)的視頻流的第一圖像傳感器，以及被配置為生成與所述遠程視頻會議隔間的所述第二用戶的右眼相對應(yīng)的視頻流的第二圖像傳感器；致動器，其被配置為沿著至少第一軸線平移所述圖像傳感器裝置；以及控制器。所述控制器被配置為從所述跟蹤系統(tǒng)獲得所述第一用戶的第一位置的第一流，將所述第一用戶的第一位置的所述第一流傳輸?shù)剿鲞h程視頻會議隔間，從所述遠程視頻會議隔間接收所述遠程視頻會議隔間的所述第二用戶的第二位置的第二流，并且向所述致動器傳輸命令以基于所述第二用戶的第二位置的所述第二流沿所述第一軸線調(diào)整所述圖像傳感器裝置的位置。

9、以這種方式，本公開的各個方面提供了對圖像的捕獲和顯示以及運動跟蹤，并且至少在圖像投射、圖像顯示、運動跟蹤、三維成像等技術(shù)領(lǐng)域中提供了有效改進。