實(shí)施例一提供的第一有效攝像范圍獲取方法的示意圖之二 ；
[0059]圖4為本發(fā)明實(shí)施例二提供的一種視頻圖像處理的方法流程圖；
[0060]圖5為本發(fā)明實(shí)施例三提供的一種視頻圖像處理的裝置示意圖；
[0061]圖6為本發(fā)明實(shí)施例四提供的一種視頻圖像處理的裝置示意圖；
[0062]圖7為本發(fā)明實(shí)施例五提供的一種視頻圖像處理的裝置示意圖；
[0063]圖8為本發(fā)明實(shí)施例六提供的一種視頻圖像處理的實(shí)體裝置示意圖。
[0064]下面通過附圖和實(shí)施例，對(duì)本發(fā)明實(shí)施例的技術(shù)方案做進(jìn)一步的詳細(xì)描述。
【具體實(shí)施方式】
[0065]本發(fā)明實(shí)施例提供的視頻圖像處理的方法和裝置，可以應(yīng)用在各種視頻通信場(chǎng)景中，如視頻會(huì)議，視頻聊天，通過視頻傳輸資料，甚至網(wǎng)絡(luò)拍賣會(huì)等等。
[0066]圖1為本發(fā)明實(shí)施例一提供的視頻圖像處理的方法流程圖。在本實(shí)施例中，本端的視頻圖像處理裝置中應(yīng)用了本發(fā)明的視頻圖像處理的方法，其中，對(duì)端為用戶端，對(duì)端用戶通過對(duì)端的視頻圖像處理裝置(即對(duì)端設(shè)備)來查看本端視頻圖像處理裝置采集的圖像，本端被攝對(duì)象可以是人，也可以是物。
[0067]如圖1所示，本實(shí)施例視頻圖像處理的方法包括如下步驟:
[0068]步驟110，接收對(duì)端設(shè)備發(fā)送的對(duì)端視頻圖像；
[0069]具體的，本端視頻圖像處理裝置接收對(duì)端設(shè)備發(fā)送的對(duì)端視頻圖像，其中，對(duì)端視頻圖像中包括對(duì)端用戶的圖像。
[0070]步驟120，對(duì)所述對(duì)端視頻圖像進(jìn)行處理，得到對(duì)端被攝對(duì)象在對(duì)端視頻圖像中瞳孔區(qū)域的大小，以及所述瞳孔區(qū)域在對(duì)端視頻圖像中的第一位置；
[0071 ] 具體的，對(duì)接收到的對(duì)端用戶的圖像進(jìn)行識(shí)別，優(yōu)選的，接收到的對(duì)端用戶的圖像為經(jīng)過編碼壓縮的圖像，因此在接收?qǐng)D像后需要對(duì)圖像進(jìn)行解碼。通過人臉識(shí)別和人眼瞳孔識(shí)別技術(shù)識(shí)別出對(duì)端視頻圖像瞳孔區(qū)域的大小，以及瞳孔區(qū)域在對(duì)端視頻圖像中的第一位置；
[0072]其中，人臉識(shí)別具體可以采用如OpenCV人臉識(shí)別算法等，通過人臉識(shí)別確定出對(duì)端視頻圖像中的人臉區(qū)域，記為domain_face。
[0073]當(dāng)某些情況下，人臉識(shí)別算法無法決策出domain_faCe區(qū)域的情況，則可以根據(jù)用戶設(shè)定或使用默認(rèn)區(qū)域來指定一個(gè)domain_face區(qū)域。
[0074]人眼瞳孔識(shí)別是在人臉識(shí)別檢測(cè)的區(qū)域domain_faCe之內(nèi)，根據(jù)眼睛相對(duì)于人臉的位置、眼睛的形狀、以及眼睛的顏色與周圍膚色的對(duì)比確定人眼的區(qū)域，由此可以確定人眼的瞳孔區(qū)域。具體可以采用如OpenCV人眼瞳孔定位算法等，確定出一個(gè)人眼的瞳孔區(qū)域，記為 domain_eyes。
[0075]同樣，當(dāng)某些情況下，根據(jù)識(shí)別算法無法決策出domain_eyeS區(qū)域的情況，則可以根據(jù)用戶設(shè)定或使用默認(rèn)區(qū)域來指定一個(gè)domain_eyes區(qū)域。
[0076]第一位置，是指domain_eyes居于圖像中的位置。
[0077]其中，對(duì)對(duì)端視頻圖像解碼信息進(jìn)行處理的處理時(shí)間設(shè)定為每間隔第一時(shí)間處理一次，第一時(shí)間為本端視頻圖像處理裝置的采樣間隔時(shí)間。
[0078]步驟130，獲取本端被攝對(duì)象與本端屏幕之間的第一距離；
[0079]在本端視頻圖像處理裝置上具有一個(gè)用于測(cè)距的光信號(hào)發(fā)生器，第一距離的獲取具體可以通過如下步驟131至步驟134的方法實(shí)現(xiàn)。
[0080]步驟131，發(fā)射第一光信號(hào)；
[0081]第一光信號(hào)由本端視頻圖像處理裝置射向本端的被攝對(duì)象。
[0082]步驟132，通過各所述攝像單元接收所述第一光信號(hào)經(jīng)過所述本端被攝對(duì)象反射后的第二光信號(hào)；
[0083]被攝對(duì)象對(duì)第一光信號(hào)進(jìn)行反射，反射回本端視頻圖像處理裝置的第二光信號(hào)被本端視頻圖像處理裝置所接收。優(yōu)選的，本端視頻圖像處理裝置的屏幕上分布有NXM個(gè)攝像單元陣列，接收平行光信號(hào)。每隔第二時(shí)間，陣列中的NXM個(gè)攝像單元都會(huì)采集一次視頻數(shù)據(jù)，因此本端視頻圖像信息中的圖像是NXM個(gè)攝像單元采集到的多個(gè)攝像單元圖像合成得到的。第二時(shí)間為本端視頻圖像處理裝置的采樣時(shí)間。
[0084]步驟133，根據(jù)所述第一光信號(hào)的發(fā)射時(shí)間和所述各攝像單元對(duì)第二光信號(hào)的接收時(shí)間得到所述各攝像單元圖像的深度信息；
[0085]根據(jù)第一光信號(hào)的發(fā)射時(shí)間與第二光信號(hào)的接收時(shí)間的時(shí)間差值，以及光的傳播速度，可以獲知每一個(gè)攝像單元所對(duì)應(yīng)的部分拍攝對(duì)象與本端視頻圖像處理裝置之間的距離值，該距離值為攝像單元圖像的深度信息。
[0086]步驟134，對(duì)所述各攝像單元圖像的深度信息進(jìn)行加權(quán)處理，得到所述第一距離。
[0087]將全部攝像單元圖像的深度信息進(jìn)行加權(quán)平均，即可得到本端被攝對(duì)象與本端屏幕之間的第一距離。
[0088]步驟140，根據(jù)所述瞳孔區(qū)域的大小、第一位置和第一距離，以及對(duì)端被攝對(duì)象的視角夾角，得到第一有效攝像范圍；
[0089]根據(jù)前述步驟120中獲得的瞳孔區(qū)域的大小、第一位置以及步驟130中獲得的第一距離，以及預(yù)設(shè)的對(duì)端被攝對(duì)象的視角夾角進(jìn)行計(jì)算，可以得到一個(gè)模擬用戶眼睛可視區(qū)域的第一有效攝像范圍。其中預(yù)設(shè)的視角夾角可以采用人單眼的舒適視域60°，也可以是用戶根據(jù)需要自行設(shè)定的一個(gè)值。
[0090]在一個(gè)具體的例子中，圖像中兩個(gè)瞳孔的大小近似為兩個(gè)點(diǎn)，如圖2所示，全部有效攝像徂圍的覽度為Xi。在Iv米樣周期中，得到對(duì)端被攝對(duì)象在對(duì)端視頻圖像中睛孔區(qū)域，其寬度為以及所述瞳孔區(qū)域在對(duì)端視頻圖像中的第一位置。第一距離h為屏幕至本端被攝對(duì)象之間的距離。對(duì)端被攝對(duì)象的視角夾角為a。因此可以得到如圖中所示的第一有效攝像范圍的寬度X2。
[0091]當(dāng)所述瞳孔區(qū)域在對(duì)端視頻圖像中的第一位置滿足瞳孔區(qū)域邊緣至對(duì)端屏幕邊緣的距離不小于 hXtg(a/2)時(shí)，x2=2hXtg(a/2)+X0 ；
[0092]在一種具體的實(shí)現(xiàn)方式中，瞳孔區(qū)域中，左眼瞳孔圖像對(duì)應(yīng)的可視區(qū)域?yàn)橐粓A形區(qū)域，右眼瞳孔圖像對(duì)應(yīng)的可視區(qū)域?yàn)橐粓A形區(qū)域，第一有效攝像范圍是上述兩個(gè)圓形區(qū)域的集合。
[0093]當(dāng)所述瞳孔區(qū)域在對(duì)端視頻圖像中的第一位置滿足瞳孔區(qū)域邊緣至對(duì)端屏幕邊緣的距離小于hXtg(a/2)時(shí)，第一有效攝像范圍中還需要去除瞳孔區(qū)域在對(duì)端視頻圖像中的瞳孔區(qū)域邊緣至對(duì)端屏幕邊緣的這段距離所對(duì)應(yīng)的范圍。
[0094]當(dāng)對(duì)端被攝對(duì)象的用戶與對(duì)端設(shè)備之間的距離發(fā)生變化時(shí)，在本端視頻圖像處理裝置上顯示的瞳孔區(qū)域大小也會(huì)發(fā)生相應(yīng)的變化。
[0095]以對(duì)端用戶靠近了對(duì)端設(shè)備的情況為例，在又一個(gè)采樣周期中，對(duì)端用戶靠近了對(duì)端設(shè)備，如圖3所示，在屏幕上顯示出的瞳孔區(qū)域比圖2中的大，其寬度由Xtl變?yōu)閄tl'圖像中的瞳孔不能再近似為點(diǎn)了。在第一位置和第一距離都不發(fā)生變化的情況下，當(dāng)所述瞳孔區(qū)域在對(duì)端視頻圖像中的第一位置滿足瞳孔區(qū)域邊緣距離對(duì)端屏幕邊緣的距離不小于hXtg (a/2)時(shí)，第一有效攝像范圍的寬度x3=2hXtg (a/2)+X?！?；否則，第一有效攝像范圍中還需要去除瞳孔區(qū)域在對(duì)端視頻圖像中的瞳孔區(qū)域邊緣至對(duì)端屏幕邊緣的這段距離所對(duì)應(yīng)的范圍。
[0096]因此可以看到，隨著對(duì)端被攝對(duì)象的用戶與對(duì)端設(shè)備之間的距離發(fā)生變化時(shí)，第一有效攝像范圍也發(fā)生了改變，其寬度由X2變?yōu)閄3，第一有效攝像范圍比圖2中變得更大了。也就是說，當(dāng)用戶靠近對(duì)端設(shè)備的時(shí)候，第一有效攝像范圍會(huì)隨之變大，反之，當(dāng)用戶遠(yuǎn)離對(duì)端設(shè)備的時(shí)候，第一有效攝像范圍會(huì)隨之變小。
[0097]步驟150，根據(jù)第一有效攝像范圍，得到本端被攝對(duì)象的第一有效本端視頻圖像；
[0098]具體的，第一有效本端視頻圖像的獲取可以如下述步驟151-153所示的方法來實(shí)現(xiàn)。
[0099]步驟151，通過全部攝像單元采集所述本端的被攝對(duì)象的平行光信號(hào)，以獲得第一數(shù)量個(gè)攝像單元圖像；其中，每個(gè)所述攝像單元圖像為本端被攝對(duì)象的一部分影像；所述第一數(shù)量為所述全部攝像單元的數(shù)量
[0100]本端視頻圖像處理裝置對(duì)本端的拍攝對(duì)象進(jìn)行圖像采集，優(yōu)選的，采用NXM個(gè)攝像單元陣列，每隔第一時(shí)間，對(duì)本端的拍攝對(duì)象進(jìn)行拍攝，因此得到NXM個(gè)攝像單元圖像。
[0101]步驟1