一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法
【專利摘要】本發(fā)明公開了一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法，針對廣告內(nèi)容識別算法的更新測試，采用視頻幀統(tǒng)計值表達(dá)廣告位置的方法，只需要在第一次操作時通過人工將素材文件的廣告的打點位置和視頻總幀數(shù)等數(shù)值記錄到文件A中作為參考值，在往后的算法更新作測試時，通過更新的算法記錄到文件Ax中作為測試值，即可運用計算機腳本自動快速地比對參考值和測試值的現(xiàn)有數(shù)據(jù)并統(tǒng)計正確率，這樣不僅可以節(jié)省大約80％的人力測試的資源成本，還提高了測試效率和正確率，此外，通過直觀的正確率數(shù)據(jù)，人們還可快速地發(fā)現(xiàn)算法版本更新是得到了優(yōu)化還是回退。
【專利說明】
一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法
技術(shù)領(lǐng)域
[0001]本發(fā)明涉及一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法。
【背景技術(shù)】
[0002]當(dāng)前在廣告內(nèi)容識別的技術(shù)領(lǐng)域中，一般是通過識別算法測試廣告的精確定位，但目前已有的算法，如testbed自動輸出算法，在沒有其他方法輔助的前提下，作算法更新測試通常需要花費較多的時間。這主要體現(xiàn)在，每次算法的更新都需要配合一套繁瑣的測試步驟，主要是將新算法應(yīng)用于大量素材中重新測試廣告的定位，并借由人工查看測試出的每一處廣告的精確位置和幀數(shù)誤差，這不僅需要花費較多的時間，而且人力投入也很大，且人為觀察總不免存在誤差和遺漏，為測試結(jié)果帶來不確定性。

【發(fā)明內(nèi)容】

[0003]基于此，有必要提供一種可提高測試效率和正確率，且能節(jié)約大量人力成本的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法。
[0004]根據(jù)本發(fā)明的一方面，提供了一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法，包括如下步驟:
[0005]通過人工抽樣記錄素材文件中所有廣告的視頻位置以及素材文件的總幀數(shù)，并將記錄保存為新建文件A;
[0006]通過更新的廣告識別算法記錄素材文件中所有廣告的視頻位置以及素材文件的總幀數(shù)，并將記錄保存為新建文件Ax;
[0007]將文件A及文件Ax中所記錄的廣告視頻位置及總幀數(shù)分別進(jìn)行比對，并將比對結(jié)果進(jìn)行統(tǒng)計且計算成功率。
[0008]在其中一個實施例中，新建文件A的結(jié)構(gòu)定義為IIDI廣告起點幀I廣告終點幀I文件總幀數(shù)I，其中，ID為素材文件中每一個廣告的順序編號，廣告起點幀為素材文件中對應(yīng)ID的廣告的第一幀所在位置的統(tǒng)計值，廣告終點幀為素材文件中對應(yīng)ID的廣告的最后一幀所在位置的統(tǒng)計值，文件總幀數(shù)為素材文件的所有幀的統(tǒng)計值。
[0009]在其中一個實施例中，當(dāng)素材文件中含有兩個及以上的視頻文件時，新建文件A的結(jié)構(gòu)定義為I ID I文件名I廣告起點幀I廣告終點幀I文件總幀數(shù)I，其中，ID為素材文件中每一個廣告的順序編號，文件名為素材文件中相應(yīng)的視頻文件的文件名稱，廣告起點幀為相應(yīng)視頻文件中對應(yīng)ID的廣告的第一幀所在位置的統(tǒng)計值，廣告終點幀為相應(yīng)視頻文件中對應(yīng)ID的廣告的最后一幀所在位置的統(tǒng)計值，文件總幀數(shù)為對應(yīng)文件名的視頻文件的所有幀的統(tǒng)計值。
[0010]在其中一個實施例中，將文件A及文件Ax中所記錄的廣告視頻位置及總幀數(shù)分別進(jìn)行比對的步驟中，具體為將文件A及文件Ax中每一個ID相應(yīng)的廣告起點幀、廣告終點幀和文件總幀數(shù)的數(shù)值進(jìn)行比對。
[0011]在其中一個實施例中，將比對結(jié)果進(jìn)行統(tǒng)計且計算成功率的步驟中，具體為將文件A和文件Ax的每一個ID進(jìn)行橫向比對并將比對出的結(jié)果進(jìn)行判定，當(dāng)文件A和文件Ax的一個ID相應(yīng)的廣告起點幀、廣告終點幀和文件總幀數(shù)的數(shù)值全部相同時標(biāo)記為通過，當(dāng)文件A和文件Ax的一個ID相應(yīng)的廣告起點幀、廣告終點幀和文件總幀數(shù)的數(shù)值中有任一項不同時標(biāo)記為失敗，將所有ID對應(yīng)的比對結(jié)果進(jìn)行統(tǒng)計，計算成功率。
[0012]這種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法，針對廣告內(nèi)容testbed自動輸出算法的更新測試，采用視頻幀統(tǒng)計值表達(dá)廣告位置的方法，只需要在第一次操作時通過人工將素材文件的廣告的打點位置和視頻總幀數(shù)等數(shù)值結(jié)果精確地記錄到一個自定義結(jié)構(gòu)的新建文件A中作為參考值，在往后的算法更新作測試時，通過更新的testbed自動輸出算法檢測到廣告的打點位置和視頻總幀數(shù)等數(shù)值并記錄到一個新建文件Ax中作為測試值，即可運用計算機腳本自動快速地比對參考值和測試值的現(xiàn)有數(shù)據(jù)并統(tǒng)計正確率，這樣不僅可以節(jié)省大約80%的人力測試的資源成本，還提高了測試效率和正確率，此外，通過直觀的正確率數(shù)據(jù)，人們還可快速地發(fā)現(xiàn)算法版本更新是得到了優(yōu)化還是回退。
【附圖說明】
[0013]圖1為本發(fā)明一實施方式的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法中的廣告于視頻中位置的原理示意圖；
[0014]圖2為本發(fā)明一實施方式的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法中的自定義文件A的保存結(jié)構(gòu)原理示意圖；
[0015]圖3為本發(fā)明一實施方式的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法中將文件A及文件Ax中所記錄的廣告視頻位置及總幀數(shù)分別進(jìn)行比對的邏輯框示意圖；
[0016]圖4為本發(fā)明一實施方式的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法中的文件A及文件Ax的比對結(jié)果統(tǒng)計示意圖；
[0017]圖5為本發(fā)明一實施方式的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法中的多次更新迭代版本的比對結(jié)果統(tǒng)計示意圖。
【具體實施方式】
[0018]為了便于理解本發(fā)明，下面將用具體實施例對本發(fā)明進(jìn)行更全面的描述。但是，本發(fā)明可以以許多不同的形式來實現(xiàn)，并不限于本文所描述的實施例。相反地，提供這實施例的目的是使對本發(fā)明的公開內(nèi)容的理解更加透徹全面。
[0019]本發(fā)明一實施例的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法，包括如下步驟:
[0020]步驟S1、通過人工抽樣記錄素材文件中所有廣告的視頻位置以及素材文件的總幀數(shù)，并將記錄保存為新建文件A;
[0021]步驟S2、通過更新的廣告識別算法記錄素材文件中所有廣告的視頻位置以及素材文件的總幀數(shù)，并將記錄保存為新建文件Ax;
[0022]步驟S3、將文件A及文件Ax中所記錄的廣告視頻位置及總幀數(shù)分別進(jìn)行比對，并將比對結(jié)果進(jìn)行統(tǒng)計且計算成功率。
[0023]具體地，步驟SI中，如圖1所示，首先選擇一個素材文件，假設(shè)該素材文件中包括一視頻a，通過人工抽取視頻a中的廣告樣本，并記錄廣告樣本位于視頻中的位置信息(即精確獲取該廣告的起始幀數(shù)和終點幀數(shù))。
[0024]具體地，在步驟SI中，上述的結(jié)果記錄將保存到一個新建的文本文件A中，保存方式如下(其中記錄的位置信息是幀數(shù)):
[0025]文件A的結(jié)構(gòu)定義:
[0026](I) ID，代表素材文件中每一個廣告的順序編號，這個值是唯一的；
[0027](2)廣告起點幀，代表素材文件中對應(yīng)ID的廣告的第一幀所在位置的統(tǒng)計值，在本實施例中，此處的第一幀定義為視頻從開始播放直至到該廣告畫面的第一幀的總幀數(shù)，可以理解，在其他的一些實施例中，第一幀也可定義為視頻從開始播放直至到該廣告畫面的前一幀的總幀數(shù)；
[0028](3)廣告終點幀，代表素材文件中對應(yīng)ID的廣告的最后一幀所在位置的統(tǒng)計值，在本實施例中，此處的最后一幀定義為視頻從開始播放直至到該廣告畫面的最后一針的總幀數(shù)；
[0029](4)文件總幀數(shù)，代表素材文件的所有幀的統(tǒng)計值。
[0030]可以理解，在其他的一些實施例中，素材文件可能包含多個(兩個及以上)視頻文件，因此，如圖2所示，圖2中顯示出文件A記錄了素材文件中所有廣告的特征值(視頻幀位置)，上述文件A的自定義結(jié)構(gòu)還可進(jìn)一步具體如下:
[0031]文件A的結(jié)構(gòu)定義:
[0032](I) ID，代表素材文件中每一個廣告的順序編號，這個值是唯一的；
[0033](2)文件名，代表素材文件中所包含相應(yīng)的視頻文件的文件名稱，具體為記錄有廣告的原始視頻文件，可以理解，通常情況中，多個廣告可以從同一個原始視頻文件中獲得，因此當(dāng)文件A列表縱向向下展開時，文件名是可以重復(fù)的。如圖2所示，視頻a存在兩個廣告，因此在文件A的記錄中視頻a的文件名重復(fù)了 ；
[0034](3)廣告起點幀，代表相應(yīng)視頻文件中對應(yīng)ID的廣告的第一幀所在位置的統(tǒng)計值，在本實施例中，此處的第一幀定義為該廣告所從屬的視頻從開始播放直至到該廣告畫面的第一幀的總幀數(shù)，如圖2所示，第1000幀是視頻a中第一個廣告的起點?？梢岳斫?，在其他的一些實施例中，第一幀也可定義為該廣告所從屬的視頻從開始播放直至到該廣告畫面的前一幀的總幀數(shù)；
[0035](4)廣告終點幀，代表相應(yīng)視頻文件中對應(yīng)ID的廣告的最后一幀所在位置的統(tǒng)計值，在本實施例中，此處的最后一幀定義為該廣告所從屬的視頻從開始播放直至到該廣告畫面的最后一針的總幀數(shù)，如圖2所示，第2000幀為視頻a中第一個廣告的終點；
[0036](5)文件總幀數(shù)，代表對應(yīng)文件名的視頻文件的所有幀的統(tǒng)計值，如圖2所示，視頻a為含有10000幀的視頻。
[0037]具體地，步驟S2中，同樣使用該同樣的素材文件，采用testbed自動輸出算法進(jìn)行視頻廣告內(nèi)容識別，獲得結(jié)果記錄在新建文件Ax中，記錄方法同前述的步驟SI。
[0038]具體地，步驟S3中，如圖3所示，將文件Ax記錄的測試值與文件A記錄的參考值進(jìn)行比對得到結(jié)果。具體地，將文件A及文件Ax中所記錄的廣告視頻位置及總幀數(shù)分別進(jìn)行比對的步驟中，具體為將文件A及文件Ax中每一個ID相應(yīng)的廣告起點幀、廣告終點幀和文件總幀數(shù)的數(shù)值進(jìn)行比對。
[0039]具體地，步驟S3中，將比對結(jié)果進(jìn)行統(tǒng)計且計算成功率的步驟中，具體為將文件A和文件Ax的每一個ID進(jìn)行橫向比對并將比對出的結(jié)果進(jìn)行判定，當(dāng)文件A和文件Ax的一個ID相應(yīng)的廣告起點幀、廣告終點幀和文件總幀數(shù)的數(shù)值全部相同時標(biāo)記為通過(在本實施例中，如圖3所示，“通過”以“Pass”表示)，當(dāng)文件A和文件Ax的一個ID相應(yīng)的廣告起點幀、廣告終點幀和文件總幀數(shù)的數(shù)值中有任一項不同時標(biāo)記為失敗(在本實施例中，如圖3所示，“失敗”以“Fail”表示)，將所有ID相應(yīng)的比對結(jié)果進(jìn)行統(tǒng)計，計算成功率(如圖3中以B代表成功率)，在本實施例中，成功率的計算方式為成功率= Pass數(shù)+ X，其中X為該素材文件中的廣告數(shù)量，即ID的最大值。
[0040]具體地，在本實施例中，如圖4所示，當(dāng)?shù)玫剿蠭D相應(yīng)的比對結(jié)果后，進(jìn)行趨勢統(tǒng)
i+o
[0041 ]此外，在本實施例中，當(dāng)算法版本多次迭代更新后，根據(jù)每一次更新測試所得的成功率，得到如圖5所示的統(tǒng)計表，可清晰地對每次的更新版本測試結(jié)果有一個更全面細(xì)致的掌握。
[0042]因此，針對每次廣告內(nèi)容識別算法的更新，測試工具都會給出一個樣本統(tǒng)計結(jié)果，這個結(jié)果里面包含了素材文件中所有視頻文件的廣告的位置信息，通過和參考值對比這些廣告位置信息，可以得到當(dāng)前算法版本的正確率和錯誤率，通過比對前后版本的正確率可以得知算法更新是得到了優(yōu)化還是回退。
[0043]綜上，這種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法，針對廣告內(nèi)容testbed自動輸出算法的更新測試，采用視頻幀統(tǒng)計值表達(dá)廣告位置的方法，只需要在第一次操作時通過人工將素材文件的廣告的打點位置和視頻總幀數(shù)等數(shù)值結(jié)果精確地記錄到一個自定義結(jié)構(gòu)的新建文件A中作為參考值，在往后的算法更新作測試時，通過更新的testbed自動輸出算法檢測到廣告的打點位置和視頻總幀數(shù)等數(shù)值并記錄到一個新建文件Ax中作為測試值，即可運用計算機腳本自動快速地比對參考值和測試值的現(xiàn)有數(shù)據(jù)并統(tǒng)計正確率，這樣不僅可以節(jié)省大約80%的人力測試的資源成本，還提高了測試效率和正確率，此外，通過直觀的正確率數(shù)據(jù)，人們還可快速地發(fā)現(xiàn)算法版本更新是得到了優(yōu)化還是回退。
[0044]以上實施例僅表達(dá)了本發(fā)明的個別實施方式，其描述較為具體和詳細(xì)，但并不能因此而理解為對本發(fā)明專利范圍的限制。應(yīng)當(dāng)指出的是，對于本領(lǐng)域的普通技術(shù)人員來說，在不脫離本發(fā)明構(gòu)思的前提下，還可以做出若干變形和改進(jìn)，這些都屬于本發(fā)明的保護(hù)范圍。因此，本發(fā)明專利的保護(hù)范圍應(yīng)以所附權(quán)利要求為準(zhǔn)。
【主權(quán)項】
1.一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法，其特征在于，包括如下步驟: 通過人工抽樣記錄素材文件中所有廣告的視頻位置以及所述素材文件的總幀數(shù)，并將所述記錄保存為新建文件A; 通過更新的廣告識別算法記錄素材文件中所有廣告的視頻位置以及所述素材文件的總幀數(shù)，并將所述記錄保存為新建文件Ax; 將所述文件A及所述文件Ax中所記錄的所述廣告視頻位置及所述總幀數(shù)分別進(jìn)行比對，并將比對結(jié)果進(jìn)行統(tǒng)計且計算成功率。2.根據(jù)權(quán)利要求1所述的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法，其特征在于，所述新建文件A的結(jié)構(gòu)定義為IID I廣告起點幀I廣告終點幀I文件總幀數(shù)I，其中，所述ID為所述素材文件中每一個廣告的順序編號，所述廣告起點幀為所述素材文件中對應(yīng)所述ID的所述廣告的第一幀所在位置的統(tǒng)計值，所述廣告終點幀為所述素材文件中對應(yīng)所述ID的所述廣告的最后一幀所在位置的統(tǒng)計值，所述文件總幀數(shù)為所述素材文件的所有幀的統(tǒng)計值。3.根據(jù)權(quán)利要求2所述的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法，其特征在于，當(dāng)所述素材文件中含有兩個及以上的視頻文件時，所述新建文件A的結(jié)構(gòu)定義為IID I文件名I廣告起點幀I廣告終點幀I文件總幀數(shù)I，其中，所述ID為所述素材文件中每一個廣告的順序編號，所述文件名為所述素材文件中相應(yīng)的所述視頻文件的文件名稱，所述廣告起點幀為相應(yīng)所述視頻文件中對應(yīng)所述ID的所述廣告的第一幀所在位置的統(tǒng)計值，所述廣告終點幀為相應(yīng)所述視頻文件中對應(yīng)所述ID的所述廣告的最后一幀所在位置的統(tǒng)計值，所述文件總幀數(shù)為對應(yīng)所述文件名的所述視頻文件的所有幀的統(tǒng)計值。4.根據(jù)權(quán)利要求2或3所述的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法，其特征在于，所述將所述文件A及所述文件Ax中所記錄的所述廣告視頻位置及所述總幀數(shù)分別進(jìn)行比對的步驟中，具體為將所述文件A及所述文件Ax中每一個所述ID對應(yīng)的所述廣告起點幀、所述廣告終點幀和所述文件總幀數(shù)的數(shù)值進(jìn)行比對。5.根據(jù)權(quán)利要求4所述的一種基于視頻幀數(shù)統(tǒng)計進(jìn)行精確識別廣告內(nèi)容的回歸測試方法，其特征在于，所述將比對結(jié)果進(jìn)行統(tǒng)計且計算成功率的步驟中，具體為將所述文件A和所述文件Ax的每一個所述ID進(jìn)行橫向比對并將比對出的結(jié)果進(jìn)行判定，當(dāng)所述文件A和所述文件Ax的一個所述ID相應(yīng)的所述廣告起點幀、所述廣告終點幀和所述文件總幀數(shù)的數(shù)值全部相同時標(biāo)記為通過，當(dāng)所述文件A和所述文件Ax的一個所述ID相應(yīng)的所述廣告起點幀、所述廣告終點幀和所述文件總幀數(shù)的數(shù)值中有任一項不同時標(biāo)記為失敗，將所有所述ID相應(yīng)的比對結(jié)果進(jìn)行統(tǒng)計，計算成功率。
【文檔編號】G06K9/00GK105975924SQ201610283815
【公開日】2016年9月28日
【申請日】2016年4月29日
【發(fā)明人】柯艷荔, 陳左樂, 葉建華
【申請人】杭州當(dāng)虹科技有限公司