專利名稱:模擬用戶行為的移動流媒體業(yè)務(wù)感知體驗QoE的測評方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種測量和評估移動流媒體業(yè)務(wù)用戶體驗感知QoE (Quality ofExperience)的方法,確切地說,涉及一種模擬用戶的操作行為,并測試用戶對移動流媒體業(yè)務(wù)的感知體驗,再基于指標(biāo)體系采用客觀標(biāo)準(zhǔn)來測量和評估移動流媒體業(yè)務(wù)QoE的方法,屬于移動網(wǎng)絡(luò)服務(wù)質(zhì)量評價的技術(shù)領(lǐng)域。
背景技術(shù):
隨著移動通信技術(shù)的發(fā)展和移動終端性能的提高,移動通信網(wǎng)絡(luò)已經(jīng)能夠提供多種服務(wù),例如語音、彩信、移動流媒體和WAP等業(yè)務(wù)都已經(jīng)成為人們?nèi)粘I钆c工作中不可或缺的內(nèi)容。其中移動流媒體業(yè)務(wù)的應(yīng)用越來越廣泛,已經(jīng)成為主流應(yīng)用之一。但是,在頻譜資源日趨緊張的無線網(wǎng)絡(luò)上提供流媒體業(yè)務(wù)時,用戶所體驗到的移動流媒體的業(yè)務(wù) 質(zhì)量不再只與網(wǎng)絡(luò)傳輸相關(guān),而是由承載網(wǎng)絡(luò)、業(yè)務(wù)網(wǎng)絡(luò)、用戶終端等多個環(huán)節(jié)所共同決定的。然而,目前的移動流媒體業(yè)務(wù)質(zhì)量的測評還是停留于網(wǎng)絡(luò)側(cè)端到端的服務(wù)質(zhì)量QoS(Quality of Service)的測量與管理基礎(chǔ)上,很少有從終端用戶體驗的角度對移動流媒體的業(yè)務(wù)品質(zhì)進行測評。因此,盡管移動流媒體業(yè)務(wù)有著很好的應(yīng)用前景,但是,直至今日,國內(nèi)外都未見有移動流媒體業(yè)務(wù)實現(xiàn)用戶體驗的實時評測的報道或論文,其主要原因就是目前還沒有一套有效、準(zhǔn)確的移動流媒體業(yè)務(wù)質(zhì)量的客觀評價方案及其業(yè)務(wù)體驗感知QoE的指標(biāo)體系。對于網(wǎng)絡(luò)運營商和服務(wù)提供商來說,要想降低成本,提高效益,從而在激烈的市場競爭中獲取成功,必須不斷完善移動流媒體業(yè)務(wù)的質(zhì)量和提高終端用戶的滿意度。因此,如何設(shè)計和提供一套有效、精準(zhǔn)的移動流媒體業(yè)務(wù)質(zhì)量的客觀評價方案,對其業(yè)務(wù)性能及用戶體驗進行測量和評估,進而優(yōu)化網(wǎng)絡(luò)性能,提高服務(wù)質(zhì)量,提升用戶體驗,對于移動通信網(wǎng)的發(fā)展具有非常重要的意義。目前,針對移動流媒體業(yè)務(wù)需要不斷完善的自身需求,已有一些公司和文獻公布了不同的解決方案。下面簡要介紹目前現(xiàn)有的技術(shù)和產(chǎn)品(I)華為 iSEA (intelligent Service Experience Assurance)技術(shù)方案首先建立基于用戶感知的端到端(E2E)業(yè)務(wù)品質(zhì)管理體系,并基于該體系提出了“指標(biāo)一監(jiān)測一定界一優(yōu)化”的E2E移動業(yè)務(wù)品質(zhì)保障服務(wù)模型。該技術(shù)方案的不足之處是僅從語音業(yè)務(wù)和數(shù)據(jù)業(yè)務(wù)兩方面建立移動業(yè)務(wù)品質(zhì)保障服務(wù)模型,并未對數(shù)據(jù)業(yè)務(wù)進行進一步區(qū)分和測評。(2)中國發(fā)明專利申請《流媒體業(yè)務(wù)質(zhì)量監(jiān)測裝置及方法》(公開號CN201010586566. 9)。該專利申請公開的流媒體業(yè)務(wù)質(zhì)量監(jiān)測裝置包括數(shù)個流媒體業(yè)務(wù)性能參數(shù)采集模塊,例如,基本信息采集模塊,信號強度監(jiān)測模塊,管理模塊,統(tǒng)計分析模塊(包括抓包單元和視頻分析單元),其中的抓包單元用于采集空口傳輸數(shù)據(jù),并根據(jù)空口傳輸數(shù)據(jù)獲取無線側(cè)傳輸性能指標(biāo);視頻分析單元用于獲取播放質(zhì)量參數(shù),該播放質(zhì)量參數(shù)包括流媒體的清晰度等。
該專利申請雖然具有比較齊全的流媒體業(yè)務(wù)性能采集模塊,但其不是從用戶感知體驗出發(fā)的,沒有嚴格地剖析流媒體業(yè)務(wù)的全部過程,也并未建立一套系統(tǒng)的質(zhì)量評估方案。(3)中國發(fā)明專利申請《視頻電話和流媒體的用戶感知效果的測試系統(tǒng)和測試方法》(申請?zhí)?00910199119)。該專利申請的測試系統(tǒng)和測試方法應(yīng)用于TD-SCDMA/HSDPA/HSUPA/HSPA+/LTE制式下的視頻業(yè)務(wù),系統(tǒng)組成包括TD_SCDMA制式測試終端,VT視頻測試服務(wù)器,結(jié)果分析服務(wù)器,流媒體測試服務(wù)器,中央數(shù)據(jù)庫,短信應(yīng)用服務(wù)器,在線升級服務(wù)器,Web服務(wù)器和應(yīng)用邏輯服務(wù)器,其中測試終端、中央數(shù)據(jù)庫和各服務(wù)器通過應(yīng)用邏輯服務(wù)器交互數(shù)據(jù)。該專利申請的系統(tǒng)構(gòu)成部件過多,操作復(fù)雜,實用性不好。
(4)中國發(fā)明專利申請《3G網(wǎng)絡(luò)承載流媒體業(yè)務(wù)性能評估系統(tǒng)和方法》(申請?zhí)?00910249744)。該專利申請的系統(tǒng)包括流媒體發(fā)生裝置和流媒體接收裝置。流媒體業(yè)務(wù)發(fā)生裝置接入在核心網(wǎng)分組域中,用于發(fā)送一路或多路流媒體。流媒體接收裝置是在空口接收流媒體發(fā)生裝置發(fā)送的流媒體,根據(jù)接收的流媒體來獲得MDI指標(biāo)以評估網(wǎng)絡(luò)承載流媒體業(yè)務(wù)的性能。該專利申請僅根據(jù)3G網(wǎng)絡(luò)的無線傳輸特性,評估3G網(wǎng)絡(luò)中點播流媒體業(yè)務(wù)的主觀性能和客觀指標(biāo),未從用戶感知體驗角度為3G網(wǎng)絡(luò)質(zhì)量對承載流媒體質(zhì)量的影響情況進行定量分析。總之,現(xiàn)有技術(shù)的多種移動流媒體業(yè)務(wù)質(zhì)量的評估或監(jiān)測方案,都未做到全面而有效的測量和評估移動流媒體業(yè)務(wù),也沒有真正模擬用戶使用移動流媒體業(yè)務(wù)的全部過程,不能客觀地反映用戶對移動流媒體業(yè)務(wù)全過程的體驗。。
發(fā)明內(nèi)容
有鑒于此,本發(fā)明的目的是提供一種模擬用戶行為的移動流媒體業(yè)務(wù)用戶感知體驗Q0E的測評方法,本發(fā)明是客觀地模擬用戶使用流媒體業(yè)務(wù)的感知體驗其服務(wù)質(zhì)量的技術(shù)方案,它是針對目前出現(xiàn)的降低客戶投訴率、提升用戶體驗的需求,在充分考慮現(xiàn)有網(wǎng)絡(luò)可實施的技術(shù)基礎(chǔ)的前提下,設(shè)計和提供的一種客觀地綜合測量和評估移動流媒體業(yè)務(wù)的用戶體驗感知的方案。為了達到上述發(fā)明目的,本發(fā)明提供了一種模擬用戶行為的移動流媒體業(yè)務(wù)用戶感知體驗QoE的測評方法,其特征在于先設(shè)置一套移動流媒體業(yè)務(wù)QoE測評指標(biāo)體系,該測評指標(biāo)體系把移動流媒體業(yè)務(wù)的用戶感知體驗分成業(yè)務(wù)接入,業(yè)務(wù)保持和業(yè)務(wù)完整的三方面體驗參數(shù);然后,利用測試終端模擬用戶使用移動流媒體業(yè)務(wù)的整個過程,分別采集與計算移動流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI(Key Performance Indicator),進而計算其相應(yīng)的移動流媒體業(yè)務(wù)的關(guān)鍵質(zhì)量指標(biāo)KQI (Key Quality Indicator),以及利用心理模型對KQI進行綜合運算,從而獲得相應(yīng)的移動流媒體業(yè)務(wù)的關(guān)鍵體驗指標(biāo)KEI (Key ExperienceIndicator),最后對這些KEI指標(biāo)進行綜合分析,獲得等效于國際標(biāo)準(zhǔn)平均意見分值MOS(Mean Opinion Score)的五分制流媒體業(yè)務(wù)QoE值。所述移動流媒體業(yè)務(wù)QoE測評指標(biāo)體系包括業(yè)務(wù)接入、業(yè)務(wù)保持和業(yè)務(wù)完整三方面性能指標(biāo)參數(shù),其中業(yè)務(wù)接入性能參數(shù)設(shè)有2項取決于接入網(wǎng)絡(luò)時長的接入時延、取決于PDP激活結(jié)束或認證完成或集客專線IP地址獲取三種狀態(tài)之一的接通狀態(tài);業(yè)務(wù)保持性能參數(shù)設(shè)有8項取決于RTSP保持狀態(tài)的視頻流狀態(tài),取決于承載網(wǎng)絡(luò)狀態(tài)的在線狀態(tài),取決于平均傳輸速率的平均速率,取決于速率標(biāo)準(zhǔn)差的速率穩(wěn)定度,取決于信號電平標(biāo)準(zhǔn)差的信號穩(wěn)定度,取決于接入RTSP時延的初始緩沖時延,取決于超流控緩沖累計時長的視頻等待累計時長,以及取決于超流控緩沖次數(shù)的視頻等待次數(shù);業(yè)務(wù)完整性能參數(shù)設(shè)有I項;取決于視頻評價MOS值的視頻質(zhì)量。所述方法包括下述步驟( I)測試終端采集移動流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI :測試終端從媒體服務(wù)器上的媒體資源集中隨機選擇讀取一個可播放的統(tǒng)一資源定位符URL (Uniform ResourceLocator),模擬用戶的視頻點播行為并收集和保存KPI ;(2)根據(jù)移動流媒體業(yè)務(wù)QoE測評指標(biāo)體系中的性能指標(biāo)參數(shù),利用采集到的關(guān)鍵性能指標(biāo)KPI逐步計算其關(guān)鍵質(zhì)量指標(biāo)KQI和關(guān)鍵體驗指標(biāo)KEI,并最終得到測試終端豐旲擬用戶本次使用移動流媒體業(yè)務(wù)的QoE值; (3)返回多次重復(fù)執(zhí)行步驟(I)和(2);并基于該多次測試結(jié)果數(shù)據(jù),統(tǒng)計設(shè)定時間和/或設(shè)定地點的移動流媒體業(yè)務(wù)的用戶體驗質(zhì)量情況。所述步驟(I)中,測試終端采集到的移動流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI包括下述各個參數(shù)接入網(wǎng)絡(luò)時長為網(wǎng)絡(luò)接入完成時刻與其接入開始時刻的差值,所述網(wǎng)絡(luò)包括通用分組無線業(yè)務(wù)GPRS (General Packet Radio Service)網(wǎng)絡(luò)、無線局域網(wǎng)絡(luò)WLAN(Wireless Local Area Networks)和集客專線網(wǎng)絡(luò),單位是秒(s);分組數(shù)據(jù)協(xié)議F1DP (Packet Data Protocol)激活結(jié)束狀態(tài)所述激活是終端傳送數(shù)據(jù)前向系統(tǒng)服務(wù)器申請IP地址資源的過程;對于GPRS網(wǎng)絡(luò),若激活成功,該狀態(tài)數(shù)值為1,否則為0 ;認證完成狀態(tài)所述認證是終端傳送數(shù)據(jù)前通過web頁面連接計費服務(wù)器的過程,對于WLAN網(wǎng)絡(luò),若認證成功,該狀態(tài)數(shù)值為1,否則為0 ;集客專線IP地址獲取狀態(tài)為終端傳送數(shù)據(jù)前向系統(tǒng)服務(wù)器申請IP地址資源的過程,對于集客專線網(wǎng)絡(luò),若IP地址獲取成功,該狀態(tài)數(shù)值為1,否則為0 ;信號標(biāo)準(zhǔn)差為測試時間段內(nèi)信號電平的均方差;單位是分貝毫瓦(dBm);接入實時流傳輸協(xié)議RTSP (Real Time Streaming Protocol)時延為接入RTSP完成時刻與接入RTSP開始時刻的差值,單位是秒(s);RTSP保持狀態(tài)接入RTSP狀態(tài)的數(shù)值為1,否則為0 ;承載網(wǎng)絡(luò)狀態(tài)網(wǎng)絡(luò)處于在線保持狀態(tài)時,該狀態(tài)數(shù)值為1,處于網(wǎng)絡(luò)掉線時,則該狀態(tài)數(shù)值為0 ;平均傳輸速率為測試時間段內(nèi)傳輸速率的平均值,即文件字長與傳輸時長的比值,單位是kb/秒;速率標(biāo)準(zhǔn)差為測試時間段內(nèi)速率的均方差;單位是kb/秒超流控緩沖累計時長為超過設(shè)定閾值的多個單次重緩沖所需耗用的時長的累加和,單位是秒(s);超流控緩沖次數(shù)為每次重緩沖所需耗用的時長超過設(shè)定閾值的重緩沖的總次數(shù);視頻評價MOS值為經(jīng)過網(wǎng)絡(luò)參數(shù)修正后的視頻客觀評價值,即采用下述基于小波變換的無參考視頻質(zhì)量評價方法得到的數(shù)值先依據(jù)基于人眼興趣加權(quán)的運動劇烈程度初步選取關(guān)鍵幀,再通過相關(guān)性分析將初選的關(guān)鍵幀分為場景切換型和非場景切換型,然后對非場景切換型關(guān)鍵幀評價圖像質(zhì)量,并根據(jù)該評價結(jié)果將非場景切換型關(guān)鍵幀細分為內(nèi)容變化型和質(zhì)量變化型;最后利用質(zhì)量變化型關(guān)鍵幀的持續(xù)時間因子和惡化頻率因子對其中每個單幀的圖像質(zhì)量進行加權(quán)求和,計算得到整個視頻序列的質(zhì)量評價結(jié)果。所述步驟(2)包括下列操作內(nèi)容(21)利用測試終端采集到的移動流媒體業(yè)務(wù)KPI分別計算下述各個KQI 接入時延,為接入網(wǎng)絡(luò)時長;接通狀態(tài),為PDP激活結(jié)束、認證完成或集客專線IP地址獲取的三種狀態(tài)中的一種狀態(tài);視頻流狀態(tài),為RTSP保持狀態(tài);在線狀態(tài),為承載網(wǎng)絡(luò)狀態(tài);平均速率,為平均傳輸速率;信號穩(wěn)定度,為信號電平的標(biāo)準(zhǔn)差系數(shù),用于表示單位信號電平均值的偏離度;其
、1姓八n信號電平標(biāo)準(zhǔn)差.
計算公式為穩(wěn)疋度=信號電平均值,速率穩(wěn)定度,為傳輸速率的標(biāo)準(zhǔn)差系數(shù),用于表示單位平均傳輸速率的偏離度;其臟式為獅定度初始緩沖時延,為視頻播放開始時刻與視頻播放請求時刻之差值,其數(shù)值與接入RTSP時延等同;視頻等待累計時長,為超流控緩沖累計時長,即超過設(shè)定閾值的多個單次超流控緩沖時長的累加和;視頻等待次數(shù),為超流控緩沖次數(shù),即單次超流控緩沖時長超過設(shè)定閾值的重緩沖的總次數(shù);視頻質(zhì)量,為視頻評價MOS值,即經(jīng)過網(wǎng)絡(luò)參數(shù)修正的視頻客觀評分值;(22)先將KQI指標(biāo)分為兩類實際數(shù)值越大、網(wǎng)絡(luò)性能越好的正向指標(biāo)和實際數(shù)值越小、網(wǎng)絡(luò)性能越好的反向指標(biāo),其中正向指標(biāo)包括接通狀態(tài)、視頻流狀態(tài)、在線狀態(tài)、平均速率和視頻質(zhì)量,反向指標(biāo)包括接入時延、速率穩(wěn)定度、信號穩(wěn)定度、初始緩沖時延、視頻等待累計時長和視頻等待次數(shù);再將每項KQI指標(biāo)與其期望值相比較,并按照滿意度映射函數(shù)計算每個KQI的滿意度值KQImqs,即等效于MOS
區(qū)間的分值;(23)利用每個KQI的滿意度值KQImqs和層次分析法AHP (Analytic HierarchyProcess),按照公式KEIi= E w 0KQIltlosij 0計算其關(guān)鍵體驗指標(biāo)KEI ;式中,KEIi是由下標(biāo)i區(qū)分的接入性、保持性和完整性的關(guān)鍵體驗指標(biāo);系數(shù)是由下標(biāo)3區(qū)分的各項關(guān)鍵體驗指標(biāo)KEI中的各項關(guān)鍵質(zhì)量指標(biāo)KQI的權(quán)重,《 e是由AHP得到的,且滿足
權(quán)利要求
1.一種模擬用戶行為的移動流媒體業(yè)務(wù)用戶感知體驗QoE的測評方法,其特征在于先設(shè)置一套移動流媒體業(yè)務(wù)QoE測評指標(biāo)體系,該測評指標(biāo)體系把移動流媒體業(yè)務(wù)的用戶感知體驗分成業(yè)務(wù)接入,業(yè)務(wù)保持和業(yè)務(wù)完整的三方面體驗參數(shù);然后,利用測試終端模擬用戶使用移動流媒體業(yè)務(wù)的整個過程,分別采集與計算移動流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI (Key Performance Indicator),進而計算其相應(yīng)的移動流媒體業(yè)務(wù)的關(guān)鍵質(zhì)量指標(biāo)KQI (Key Quality Indicator),以及利用心理模型對KQI進行綜合運算,從而獲得相應(yīng)的移動流媒體業(yè)務(wù)的關(guān)鍵體驗指標(biāo)KEI (Key Experience Indicator),最后對這些KEI指標(biāo)進行綜合分析,獲得等效于國際標(biāo)準(zhǔn)平均意見分值MOS (Mean Opinion Score)的五分制流媒體業(yè)務(wù)QqE值。
2.根據(jù)權(quán)利要求I所述的評測方法,其特征在于所述移動流媒體業(yè)務(wù)QoE測評指標(biāo)體系包括業(yè)務(wù)接入、業(yè)務(wù)保持和業(yè)務(wù)完整三方面性能指標(biāo)參數(shù),其中業(yè)務(wù)接入性能參數(shù)設(shè)有2項取決于接入網(wǎng)絡(luò)時長的接入時延、取決于PDP激活結(jié)束或認證完成或集客專線IP地址獲取三種狀態(tài)之一的接通狀態(tài);業(yè)務(wù)保持性能參數(shù)設(shè)有8項取決于RTSP保持狀態(tài)的視頻流狀態(tài),取決于承載網(wǎng)絡(luò)狀態(tài)的在線狀態(tài),取決于平均傳輸速率的平均速率,取決于速率標(biāo)準(zhǔn)差的速率穩(wěn)定度,取決于彳目號電平標(biāo)準(zhǔn)差的 目號穩(wěn)定度,取決于接入RTSP時延的初始緩沖時延,取決于超流控緩沖累計時長的視頻等待累計時長,以及取決于超流控緩沖次數(shù)的視頻等待次數(shù);業(yè)務(wù)完整性能參數(shù)設(shè)有I項;取決于視頻評價MOS值的視頻質(zhì)量。
3.根據(jù)權(quán)利要求I所述的方法,其特征在于所述方法包括下述步驟 (1)測試終端采集移動流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI:測試終端從媒體服務(wù)器上的媒體資源集中隨機選擇讀取一個可播放的統(tǒng)一資源定位符URL,模擬用戶的視頻點播行為并收集和保存KPI ; (2)根據(jù)移動流媒體業(yè)務(wù)QoE測評指標(biāo)體系中的性能指標(biāo)參數(shù),利用采集到的關(guān)鍵性能指標(biāo)KPI逐步計算其關(guān)鍵質(zhì)量指標(biāo)KQI和關(guān)鍵體驗指標(biāo)KEI,并最終得到測試終端模擬用戶本次使用移動流媒體業(yè)務(wù)的QoE值; (3)返回多次重復(fù)執(zhí)行步驟(I)和(2);并基于該多次測試結(jié)果數(shù)據(jù),統(tǒng)計設(shè)定時間和/或設(shè)定地點的移動流媒體業(yè)務(wù)的用戶體驗質(zhì)量情況。
4.根據(jù)權(quán)利要求3所述的方法,其特征在于所述步驟(I)中,測試終端采集到的移動流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI包括下述各個參數(shù) 接入網(wǎng)絡(luò)時長為網(wǎng)絡(luò)接入完成時刻與其接入開始時刻的差值,所述網(wǎng)絡(luò)包括通用分組無線業(yè)務(wù)GPRS網(wǎng)絡(luò)、無線局域網(wǎng)絡(luò)WLAN和集客專線網(wǎng)絡(luò),單位是秒(S); 分組數(shù)據(jù)協(xié)議PDP激活結(jié)束狀態(tài)所述激活是終端傳送數(shù)據(jù)前向系統(tǒng)服務(wù)器申請IP地址資源的過程;對于GPRS網(wǎng)絡(luò),若激活成功,該狀態(tài)數(shù)值為1,否則為O ; 認證完成狀態(tài)所述認證是終端傳送數(shù)據(jù)前通過web頁面連接計費服務(wù)器的過程,對于WLAN網(wǎng)絡(luò),若認證成功,該狀態(tài)數(shù)值為1,否則為O ; 集客專線IP地址獲取狀態(tài)為終端傳送數(shù)據(jù)前向系統(tǒng)服務(wù)器申請IP地址資源的過程,對于集客專線網(wǎng)絡(luò),若IP地址獲取成功,該狀態(tài)數(shù)值為1,否則為O ; 信號標(biāo)準(zhǔn)差為測試時間段內(nèi)信號電平的均方差;單位是分貝毫瓦(dBm); 接入實時流傳輸協(xié)議RTSP時延為接入RTSP完成時刻與接入RTSP開始時刻的差值,單位是秒(s);RTSP保持狀態(tài)接入RTSP狀態(tài)的數(shù)值為1,否則為O ; 承載網(wǎng)絡(luò)狀態(tài)網(wǎng)絡(luò)處于在線保持狀態(tài)時,該狀態(tài)數(shù)值為1,處于網(wǎng)絡(luò)掉線時,則該狀態(tài)數(shù)值為O ; 平均傳輸速率為測試時間段內(nèi)傳輸速率的平均值,即文件字長與傳輸時長的比值,單位是kb/秒; 速率標(biāo)準(zhǔn)差為測試時間段內(nèi)速率的均方差;單位是kb/秒 超流控緩沖累計時長為超過設(shè)定閾值的多個單次重緩沖所需耗用的時長的累加和,單位是秒(S); 超流控緩沖次數(shù)為每次重緩沖所需耗用的時長超過設(shè)定閾值的重緩沖的總次數(shù); 視頻評價MOS值為經(jīng)過網(wǎng)絡(luò)參數(shù)修正后的視頻客觀評價值,即采用下述基于小波變換的無參考視頻質(zhì)量評價方法得到的數(shù)值先依據(jù)基于人眼興趣加權(quán)的運動劇烈程度初步選取關(guān)鍵幀,再通過相關(guān)性分析將初選的關(guān)鍵幀分為場景切換型和非場景切換型,然后對非場景切換型關(guān)鍵幀評價圖像質(zhì)量,并根據(jù)該評價結(jié)果將非場景切換型關(guān)鍵幀細分為內(nèi)容變化型和質(zhì)量變化型;最后利用質(zhì)量變化型關(guān)鍵幀的持續(xù)時間因子和惡化頻率因子對其中每個單幀的圖像質(zhì)量進行加權(quán)求和,計算得到整個視頻序列的質(zhì)量評價結(jié)果。
5.根據(jù)權(quán)利要求3所述的方法,其特征在于所述步驟(2)包括下列操作內(nèi)容 (21)利用測試終端采集到的移動流媒體業(yè)務(wù)KPI分別計算下述各個KQI 接入時延,為接入網(wǎng)絡(luò)時長; 接通狀態(tài),為PDP激活結(jié)束、認證完成或集客專線IP地址獲取的三種狀態(tài)中的一種狀態(tài); 視頻流狀態(tài),為RTSP保持狀態(tài); 在線狀態(tài),為承載網(wǎng)絡(luò)狀態(tài); 平均速率,為平均傳輸速率; 信號穩(wěn)定度,為信號電平的標(biāo)準(zhǔn)差系數(shù),用于表示單位信號電平均值的偏離度;其計算八卡 ^!蘆中信號電平標(biāo)準(zhǔn)差.公式為穩(wěn)疋度_信號電平均值, 速率穩(wěn)定度,為傳輸速率的標(biāo)準(zhǔn)差系數(shù),用于表示單位平均傳輸速率的偏離度;其計算公式為 速率穩(wěn)定度=速率標(biāo)準(zhǔn)差;Λ、刀.平均傳輸速率 初始緩沖時延,為視頻播放開始時刻與視頻播放請求時刻之差值,其數(shù)值與接入RTSP時延等同; 視頻等待累計時長,為超流控緩沖累計時長,即超過設(shè)定閾值的多個單次超流控緩沖時長的累加和; 視頻等待次數(shù),為超流控緩沖次數(shù),即單次超流控緩沖時長超過設(shè)定閾值的重緩沖的總次數(shù); 視頻質(zhì)量,為視頻評價MOS值,即經(jīng)過網(wǎng)絡(luò)參數(shù)修正的視頻客觀評分值; (22)先將KQI指標(biāo)分為兩類實際數(shù)值越大、網(wǎng)絡(luò)性能越好的正向指標(biāo)和實際值越小、網(wǎng)絡(luò)性能越好的反向指標(biāo),其中正向指標(biāo)包括接通狀態(tài)、視頻流狀態(tài)、在線狀態(tài)、平均速率和視頻質(zhì)量,反向指標(biāo)包括接入時延、速率穩(wěn)定度、信號穩(wěn)定度、初始緩沖時延、視頻等待累計時長和視頻等待次數(shù); 再將每項KQI指標(biāo)與其期望值相比較,并按照滿意度映射函數(shù)計算每個KQI的滿意度值KQImos,即等效于MOS [O, 5]區(qū)間的分值; (23)利用每個KQI的滿意度值KQIsros和層次分析法AHP,按照公式KEIi=Σ ω eKQIsrosi,0計算其關(guān)鍵體驗指標(biāo)KEI ;式中,KEIi是由下標(biāo)i區(qū)分的接入性、保持性和完整性的關(guān)鍵體驗指標(biāo);系數(shù)ω g是由下標(biāo)β區(qū)分的各項關(guān)鍵體驗指標(biāo)KEI中的各項關(guān)鍵質(zhì)量指標(biāo)KQI的權(quán)重,ω0是由AHP得到的,且滿足Σ ω0=1 ;ΚΕΙ的取值區(qū)間為
; (24)按照下述公式計算測試終端模擬用戶每次移動流媒體業(yè)務(wù)的QoE值QoE= Σ (OiKEIi=CO接入性KEI接入性+ ω保持性KEI保持性+ ω完整性KEI完整性;該步驟操作內(nèi)各與步驟(23)相同,即利用AHP方法先構(gòu)造各KEI關(guān)系判斷矩陣,再計算該判斷矩陣的最大特征值與其對應(yīng)的特征向量,并對該特征向量進行歸一化處理,歸一化處理后的向量的每個元素就是各KEI對應(yīng)的權(quán)重Oi,最后進行一致性檢驗;但要說明的是當(dāng)上述三個KEI中任意一個數(shù)值為O時,則其對應(yīng)的QoE即為O。
6.根據(jù)權(quán)利要求5所述的方法,其特征在于所述步驟(22)中,所述期望值是由評估者根據(jù)人的主觀體驗和需求,針對不同類型的應(yīng)用進行差異化設(shè)置的數(shù)值;所述滿意度映射函數(shù)是根據(jù)人的主觀體驗?zāi)P停慈Q于各項KQI實測值與其期望值之比值而確定的下述兩種S型分段曲線的函數(shù)式 正向指標(biāo)滿意度映射函數(shù)式··KQ1 Atos =' -~kQi-A, e (0,100%);或者 反向指標(biāo)滿意度映射函數(shù)式·Μ』Ι'抓=-e(100%,200%);式中,系
全文摘要
一種模擬用戶行為的移動流媒體業(yè)務(wù)用戶感知體驗QoE的測評方法先設(shè)置一套把移動流媒體業(yè)務(wù)的用戶感知體驗分成業(yè)務(wù)接入,業(yè)務(wù)保持和業(yè)務(wù)完整三方面參數(shù)的移動流媒體業(yè)務(wù)QoE測評指標(biāo)體系,再利用測試終端模擬用戶使用移動流媒體業(yè)務(wù)的整個過程,分別采集與計算移動流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI,進而計算其相應(yīng)業(yè)務(wù)的關(guān)鍵質(zhì)量指標(biāo)KQI,以及利用心理模型對KQI進行綜合運算,獲得相應(yīng)業(yè)務(wù)的關(guān)鍵體驗指標(biāo)KEI,最后對這些KEI指標(biāo)進行綜合分析,獲得等效于國際標(biāo)準(zhǔn)平均意見分值MOS的五分制流媒體業(yè)務(wù)QoE值。本發(fā)明方法的測評參數(shù)標(biāo)準(zhǔn)客觀、實用、操作步驟簡單,計算復(fù)雜度低和易于集成,能夠模擬移動流媒體業(yè)務(wù)用戶得到相對客觀、公正的用戶體驗感知質(zhì)量。
文檔編號H04W24/06GK102685790SQ20121015992
公開日2012年9月19日 申請日期2012年5月22日 優(yōu)先權(quán)日2012年5月22日
發(fā)明者亓玉嬌, 劉勇, 葉艷柯, 周小毛, 孟欣欣, 徐靜濤, 李湘平, 杜海清, 王永峰, 胡文, 許克輝 申請人:北京東方文駿軟件科技有限責(zé)任公司, 北京郵電大學(xué)