本發(fā)明涉及視頻評(píng)估領(lǐng)域,尤其涉及一種影視視頻的數(shù)字化評(píng)估方法。
背景技術(shù):
1、隨著科技的發(fā)展,影音行業(yè)的視頻發(fā)布難度逐漸降低,因此,一些視頻制作經(jīng)驗(yàn)較少的制作者的影視視頻易存在質(zhì)量問題,例如音畫不同步,由此,本領(lǐng)域技術(shù)人員對(duì)應(yīng)常采用影音評(píng)估系統(tǒng)針對(duì)影視視頻進(jìn)行質(zhì)量評(píng)估時(shí),但是,針對(duì)多人員且音源豐富的連續(xù)畫面,音畫質(zhì)量評(píng)估難度較大,難以有效實(shí)現(xiàn)質(zhì)量的準(zhǔn)確評(píng)估,因此,如何針對(duì)多人員且音源豐富的連續(xù)畫面進(jìn)行有效的質(zhì)量評(píng)估,是本領(lǐng)域技術(shù)人員亟待解決的技術(shù)問題。
2、中國專利公開號(hào)cn117012228a公開了一種訓(xùn)練評(píng)估模型、評(píng)估視頻質(zhì)量的方法及裝置,在訓(xùn)練評(píng)估模型的方法中,獲取樣本集,其中包括,音畫同步的第一視頻樣本。對(duì)第一視頻樣本進(jìn)行音畫分離,得到樣本圖像幀序列和對(duì)應(yīng)的樣本音頻幀序列,并將其輸入評(píng)估模型進(jìn)行模型處理,該評(píng)估模型包括第一編碼器和第二編碼器。上述模型處理包括,利用第一編碼器,對(duì)各樣本圖像幀進(jìn)行編碼,得到各樣本圖像表征,以及利用第二編碼器,對(duì)各樣本音頻幀進(jìn)行編碼,得到各樣本音頻表征。以最小化第一損失為目標(biāo),調(diào)整第一編碼器和第二編碼器的參數(shù),該第一損失正相關(guān)于,各樣本圖像表征與對(duì)應(yīng)樣本音頻表征的不同模態(tài)間距離,以及各樣本圖像表征中相鄰樣本圖像表征的同模態(tài)間距離,但是,上述方案中存在以下問題:未考慮到視頻樣本中聲源數(shù)量以及音頻重疊情況對(duì)于音畫同步分析的影響,使得音畫同步情況的確定結(jié)果的準(zhǔn)確性低下。
技術(shù)實(shí)現(xiàn)思路
1、為此,本發(fā)明提供一種影視視頻的數(shù)字化評(píng)估方法,用以克服現(xiàn)有技術(shù)中未能根據(jù)視頻樣本中的人員交流情況以及音頻的重復(fù)情況確定針對(duì)性的音畫同步情況的確定方式,導(dǎo)致對(duì)于音畫同步情況的確定結(jié)果的準(zhǔn)確性低下,進(jìn)而導(dǎo)致后續(xù)針對(duì)視頻的壓縮質(zhì)量低下的問題。
2、為實(shí)現(xiàn)上述目的,本發(fā)明提供一種影視視頻的數(shù)字化評(píng)估方法,包括:
3、針對(duì)目標(biāo)評(píng)估視頻進(jìn)行音畫評(píng)估段落提取,并針對(duì)各音畫評(píng)估段落的交流復(fù)雜系數(shù)以及參考交流重合系數(shù)進(jìn)行檢測;
4、根據(jù)交流復(fù)雜系數(shù)以及參考交流重合系數(shù)確定音畫評(píng)估段落的類別,并根據(jù)各音畫評(píng)估段落的類別確定對(duì)應(yīng)的段落評(píng)估策略;
5、若一音畫評(píng)估段落為一類評(píng)估段落,則采用特征匹配方式確定同步評(píng)估系數(shù),根據(jù)特征匹配段落的數(shù)量確定對(duì)應(yīng)的音畫評(píng)估段落的同步評(píng)估系數(shù);
6、若該音畫評(píng)估段落為二類評(píng)估段落,則采用時(shí)序匹配方式確定同步評(píng)估系數(shù),根據(jù)各語音段落與其對(duì)應(yīng)的視頻段落的時(shí)間差異參考值確定同步評(píng)估系數(shù);
7、評(píng)估完成條件下,根據(jù)各音畫評(píng)估段落的互動(dòng)有效參數(shù)與同步評(píng)估系數(shù)確定段落重點(diǎn)系數(shù),評(píng)估完成條件為目標(biāo)評(píng)估視頻中各音畫評(píng)估段落的同步評(píng)估系數(shù)均確定完成;
8、重點(diǎn)分析完成條件下,根據(jù)重點(diǎn)段落占比確定目標(biāo)評(píng)估視頻的執(zhí)行壓縮策略,執(zhí)行壓縮策略為采用動(dòng)態(tài)執(zhí)行策略或靜態(tài)執(zhí)行策略進(jìn)行目標(biāo)評(píng)估視頻的壓縮,重點(diǎn)分析完成條件為目標(biāo)評(píng)估視頻內(nèi)的重點(diǎn)段落均確定完成。
9、進(jìn)一步地,根據(jù)交流復(fù)雜系數(shù)以及參考交流重合系數(shù)確定音畫評(píng)估段落的類別;
10、若一音畫評(píng)估段落的交流復(fù)雜系數(shù)大于預(yù)設(shè)交流復(fù)雜系數(shù)或參考交流重合系數(shù)大于預(yù)設(shè)交流重合系數(shù),則判定該音畫評(píng)估段落為一類評(píng)估段落;
11、若一音畫評(píng)估段落的交流復(fù)雜系數(shù)小于或等于交流復(fù)雜系數(shù)且參考交流重合系數(shù)小于或等于預(yù)設(shè)交流重合系數(shù),則判定該音畫評(píng)估段落為二類評(píng)估段落;
12、所述交流復(fù)雜系數(shù)根據(jù)音畫評(píng)估段落內(nèi)交流人員的數(shù)量以及參考交流頻率確定。
13、進(jìn)一步地,任意一音畫評(píng)估段落對(duì)應(yīng)的所述參考交流重合系數(shù)為該音畫評(píng)估段落內(nèi)各語音段落的交流重合系數(shù)的平均值;
14、針對(duì)該音畫評(píng)估段落對(duì)應(yīng)時(shí)間的音頻進(jìn)行語音段落分離,以獲取若干語音段落;
15、針對(duì)任意一語音段落,該語音段落的交流重合系數(shù)根據(jù)重合語音段落的數(shù)量以及重合段落占比確定。
16、進(jìn)一步地,根據(jù)各音畫評(píng)估段落的類別確定段落評(píng)估策略;
17、針對(duì)任意一音畫評(píng)估段落,
18、若該音畫評(píng)估段落為一類評(píng)估段落,則采用特征匹配方式確定該音畫評(píng)估段落的同步評(píng)估系數(shù);
19、若該音畫評(píng)估段落為二類評(píng)估段落,則采用時(shí)序匹配方式確定該音畫評(píng)估段落的同步評(píng)估系數(shù),根據(jù)各語音段落與其對(duì)應(yīng)的視頻段落的時(shí)間差異參考值確定同步評(píng)估系數(shù)。
20、進(jìn)一步地,采用特征匹配方式確定任意一音畫評(píng)估段落的同步評(píng)估系數(shù)時(shí),針對(duì)該音畫評(píng)估段落的各語音段落對(duì)應(yīng)的語音持續(xù)周期內(nèi)各視頻段落的階段重合系數(shù)進(jìn)行檢測,并將階段重合系數(shù)大于預(yù)設(shè)階段重合系數(shù)的視頻段落記為對(duì)應(yīng)的語音段落的待評(píng)估視頻段落;
21、針對(duì)各待評(píng)估視頻段落與對(duì)應(yīng)的語音段落的特征匹配系數(shù)進(jìn)行檢測,根據(jù)各待評(píng)估視頻段落的特征匹配系數(shù)確定對(duì)應(yīng)的語音段落的參考特征匹配系數(shù);
22、任意一音畫評(píng)估段落的同步評(píng)估系數(shù)與特征匹配段落的數(shù)量為正相關(guān)關(guān)系,所述特征匹配段落為參考特征匹配系數(shù)大于預(yù)設(shè)參考特征匹配系數(shù)的語音段落,所述參考特征匹配系數(shù)為各待評(píng)估視頻段落的特征匹配系數(shù)的平均值。
23、進(jìn)一步地,任意一待評(píng)估視頻段落與對(duì)應(yīng)的語音段落的特征匹配系數(shù)根據(jù)該待評(píng)估視頻段落與對(duì)應(yīng)的語音段落的輸出速率匹配度以及參考匹配系數(shù)確定;
24、所述特征匹配系數(shù)分別與輸出速率匹配度以及參考匹配系數(shù)為正相關(guān)關(guān)系。
25、進(jìn)一步地,所述輸出速率匹配度根據(jù)待評(píng)估視頻段落的標(biāo)準(zhǔn)匹配差異值確定,標(biāo)準(zhǔn)匹配差異值為負(fù)相關(guān)關(guān)系;
26、所述參考匹配系數(shù)與待評(píng)估視頻段落的各視頻幀的相關(guān)特征間隔時(shí)長的平均值為負(fù)相關(guān)關(guān)系。
27、進(jìn)一步地,評(píng)估完成條件下,針對(duì)目標(biāo)評(píng)估視頻各音畫評(píng)估段落對(duì)應(yīng)的互動(dòng)有效參數(shù)進(jìn)行檢測,并根據(jù)各音畫評(píng)估段落的互動(dòng)有效參數(shù)與同步評(píng)估系數(shù)確定段落重點(diǎn)系數(shù),將段落重點(diǎn)系數(shù)大于預(yù)設(shè)段落重點(diǎn)系數(shù)的音畫評(píng)估段落記為重點(diǎn)段落;
28、所述互動(dòng)有效參數(shù)根據(jù)對(duì)應(yīng)的同步評(píng)估段落的參考互動(dòng)量以及互動(dòng)豐富度確定。
29、進(jìn)一步地,重點(diǎn)分析完成條件下,根據(jù)重點(diǎn)段落占比確定目標(biāo)評(píng)估視頻的執(zhí)行壓縮策略,
30、若重點(diǎn)段落占比大于預(yù)設(shè)重點(diǎn)段落占比,則采用動(dòng)態(tài)執(zhí)行策略進(jìn)行目標(biāo)評(píng)估視頻的壓縮;
31、若重點(diǎn)段落占比小于或等于預(yù)設(shè)重點(diǎn)段落占比,則采用靜態(tài)執(zhí)行策略進(jìn)行目標(biāo)評(píng)估視頻的壓縮。
32、進(jìn)一步地,若采用動(dòng)態(tài)執(zhí)行策略進(jìn)行目標(biāo)評(píng)估視頻的壓縮時(shí),周期性針對(duì)各視頻檢測周期內(nèi)完成壓縮的部分目標(biāo)評(píng)估視頻進(jìn)行視頻體驗(yàn)參數(shù)進(jìn)行檢測,并根據(jù)視頻體驗(yàn)參數(shù)確定是否針對(duì)壓縮參數(shù)進(jìn)行調(diào)節(jié);
33、若視頻體驗(yàn)參數(shù)小于或等于預(yù)設(shè)視頻體驗(yàn)參數(shù),則判定針對(duì)該視頻檢測周期的下一視頻檢測周期的壓縮參數(shù)進(jìn)行調(diào)節(jié);
34、若視頻體驗(yàn)參數(shù)大于預(yù)設(shè)視頻體驗(yàn)參數(shù),則判定不針對(duì)該視頻檢測周期的下一視頻檢測周期的壓縮參數(shù)進(jìn)行調(diào)節(jié)。
35、與現(xiàn)有技術(shù)相比,本發(fā)明的有益效果在于,本發(fā)明技術(shù)方案中,根據(jù)各音畫評(píng)估段落的交流復(fù)雜系數(shù)以及參考交流重合系數(shù)確定各音畫評(píng)估段落的類別,并根據(jù)音畫評(píng)估段落的類別確定段落評(píng)估策略,即根據(jù)音畫評(píng)估段落中交流人員的復(fù)雜情況以及語音段落的重疊情況確定針對(duì)性的音畫同步的評(píng)估方式,使得針對(duì)視頻進(jìn)行音畫同步情況的評(píng)估方式更符合實(shí)際評(píng)估情況,保證了對(duì)于視頻音畫同步情況的判斷結(jié)果的準(zhǔn)確性,進(jìn)而保證了后續(xù)壓縮過程中視頻效果的影響。
36、進(jìn)一步地,本發(fā)明中針對(duì)交流復(fù)雜系數(shù)較大或參考交流重合系數(shù)較大的音畫評(píng)估段落,采用特征匹配方式確定此類音畫評(píng)估段落的同步評(píng)估系數(shù),通過根據(jù)其中所包含的各個(gè)語音段落與其待評(píng)估視頻段落的內(nèi)容輸出速率的匹配情況以及內(nèi)容的匹配情況確定特征匹配系數(shù),進(jìn)而確定同步評(píng)估系數(shù),避免了針對(duì)此類音畫評(píng)估段落的音畫同步情況的判斷結(jié)果受到內(nèi)容重疊的影響,本發(fā)明提高了對(duì)于視頻音畫同步情況的判斷結(jié)果的準(zhǔn)確性。
37、進(jìn)一步地,本發(fā)明中根據(jù)獲取的同步評(píng)估系數(shù)以及互動(dòng)有效參數(shù)確定重點(diǎn)段落,即將音視頻同步效果較差或有效互動(dòng)較多的音畫評(píng)估段落記為重點(diǎn)段落,并根據(jù)重點(diǎn)段落占比確定針對(duì)性的視頻壓縮方式,使得壓縮過程更符合實(shí)際需要,避免了壓縮過程對(duì)于視頻效果造成進(jìn)一步的影響。
38、進(jìn)一步地,本發(fā)明中在重點(diǎn)段落占比較大時(shí),周期性針對(duì)已壓縮完成部分的視頻進(jìn)行壓縮質(zhì)量檢測,并根據(jù)壓縮質(zhì)量檢測結(jié)果針對(duì)當(dāng)前執(zhí)行壓縮過程的參數(shù)進(jìn)行調(diào)節(jié),由于重點(diǎn)段落占比較大,易由于壓縮過程對(duì)音畫同步效果造成影響,因此通過實(shí)時(shí)檢測視頻的壓縮質(zhì)量,并及時(shí)針對(duì)壓縮過程進(jìn)行調(diào)節(jié),能夠有效降低壓縮過程針對(duì)視頻效果造成的影響。