專利名稱：用于提供語音分析服務的方法和系統(tǒng)及其裝置的制作方法
技術領域：
本發(fā)明涉及一種移動通信服務，尤其涉及用于基于分層語音分析分析處于 通話狀態(tài)的用戶的語音并且提供分析結果的方法和系統(tǒng)。
背景技術：
通常，在聽人的語音時，人類能夠在某種程度上判斷這個人的情緒狀態(tài)。 例如，在人興奮或生氣時，他/她的語音的平均節(jié)距變得高于平常，并且盡管他/ 她說一個由與平常相同的詞構成的句子，句子中的平均節(jié)距變得更快。并且， 因為語音變得更大聲，能量在與平常相同的環(huán)境中變得相對更高并且平均能量 變得相對更快。
基于這個事實，關于用于識別人類語音以理解情緒狀態(tài)的愛的檢測技術的 研究在活躍地進行中。愛的檢測技術包括情緒狀態(tài)識別技術，根據(jù)情緒狀態(tài)識 別的信號處理技術，或者應用技術。涉及愛的檢測技術的現(xiàn)有技術已經(jīng)取得專 利權或者尚在申請中，例如"情緒識別方法以及靈敏性生成方法、裝置和軟件"
(韓國專利申請No.l0-2003-7003615)，"用于根據(jù)手機(mobile)上的感覺提供 聲源以及具體化的方法"(韓國專利申請No.l0-2003-0081299)，"利用小波變換 在語音中的情緒識別"(韓國專利申請No.l0-2002-0026056),"用于表現(xiàn)用戶情 緒的玩偶"(韓國登記(Registration) No.20-0313090-0000 )或"能夠表達人的 情緒的配件"(韓國登記No.20-0301592-0000 )。
最近，有-、件標題為"具有謊言搜索功能的攜帶式電話機及其搜索方法" 的發(fā)明(韓國登記No.lO-0381970-0000)，其通過談話者的語音識別檢測謊言。 該發(fā)明誘導談話者在舒適的氣氛中說話并且判斷談話者的話的真實性。
然而，上述現(xiàn)有技術的情緒分析是通過主觀判斷或用戶設置做出的，并且 因此其分析結果不是客觀的。并且，沒有提出對于愛的檢測結杲的建議或克服 當前狀態(tài)的方案。
同時，隨著移動通信技術的發(fā)展，提供了超出簡單的語音通信功能的各種 附加的服務。換句話說，除了語音通信或短消息服務，移動通信服務供應者開發(fā)了各種附加的服務例如，個人化的回鈴音服務、通話背景聲服務、蜂鳴
(singing)服務或音樂郵件，并且為移動通信訂戶提供所述附加的服務。進一 步地，隨著移動通信技術的發(fā)展，已經(jīng)建立了第三代移動通信網(wǎng)絡(例如， W-CDMA (寬帶碼分多址移動通信系統(tǒng))網(wǎng)絡或HSDPA (高速下行分組接入) 網(wǎng)絡)以便以高速傳送大容量的數(shù)據(jù)，這超出了傳統(tǒng)的語音通信服務并且允許 在主叫用戶和被叫用戶用電話說話的同時直接相互看到他們的臉的視頻通信。 然而，當前采用愛的檢測技術的移動通信附加服務還沒有提供。

發(fā)明內容
本發(fā)明設計成解決現(xiàn)有技術的問題，并且因此本發(fā)明的目的是提供用于提 供語音分析服務的方法和系統(tǒng)，其基于分層語音分析分析處于通話狀態(tài)中的用 戶的語音并且以各種方式提供情緒分析結果，及其裝置。
為了達到上述目的，根據(jù)本發(fā)明的第 一方面用于在通信網(wǎng)絡中提供語音分 析服務的方法，包括根據(jù)主叫終端的通話連接在主叫終端和被叫終端之間建立 通信信道；對通過建立的通信信道從被叫終端傳送到主叫終端的被叫用戶的語 音實時執(zhí)行分層語音分析以提取被叫用戶的情緒狀態(tài)信息；并且將提取的被叫 用戶的情緒狀態(tài)信息實時傳送到主叫終端。
以及，根據(jù)本發(fā)明的第二方面，用于在視頻通信網(wǎng)絡中視頻通信過程中提 供語音分析服務的方法，包括根據(jù)主叫終端的視頻通信通話連接在所述主叫終 端和被叫終端之間建立視頻通信信道；對通過所述建立的視頻通信信道從所述 被叫終端傳送到所述主叫終端的被叫用戶的語音實時執(zhí)行分層語音分析以提取 所述被叫用戶的情緒狀態(tài)信息；將所述提取的所述被叫用戶的情緒狀態(tài)信息轉 換成可視數(shù)據(jù)；并且通過所述視頻通信信道將所述轉換的可視數(shù)據(jù)以及要傳送 給所述主叫終端的所述^^叫用戶的^L頻傳送并且顯示給所迷主叫終端。
以及，根據(jù)本發(fā)明的第三方面用于在通信網(wǎng)絡中提供語音分析服務的方法， 包括接收來自主叫終端的用于所述語音分析服務的通話連接；將所述語音分析
服務的模式信息通知所述主叫終端并且接收響應所述通知的選擇；在主叫用戶 選擇練習模式的情況，將虛擬對方和練習方法通知所述主叫終端并且來自主叫 終端的接收響應所述通知的選擇；根據(jù)由所述主叫用戶選定的所述虛擬對方和 練習方法接收來自所述主叫終端的所述主叫用戶的語音；并且對所述主叫用戶的所述接收的語音執(zhí)行分層語音分析以提取語音分析結果，并且將所述提取的 語音分析結果實時傳送到所述主叫終端。
以及，根據(jù)本發(fā)明的第四方面用于在通信網(wǎng)絡中提供語音分析服務的系統(tǒng)， 包括交換中心，用于從主叫終端接收包括用于所述語音分析服務的特征代碼和
被叫用戶的電話號碼的通話發(fā)源，并且基于所述特征代碼發(fā)送所述通話發(fā)源； 以及分層語音分析服務器，用于接收所述發(fā)送的通話，對應于所述被叫用戶的 電話號碼在所述主叫終端和被叫終端之間建立通信信道，分析通過所述建立的 通信信道傳送到所述主叫終端的所述被叫用戶的語音以實時提取被叫用戶的情 緒狀態(tài)信息，并且將所述提取的情緒狀態(tài)信息實時傳送到所述主叫終端。
以及，根據(jù)本發(fā)明的第五方面用于在移動通信網(wǎng)絡中視頻通信過程中提供 語音分析服務的移動通信裝置，包括服務控制單元，用于根據(jù)來自主叫終端的 視頻通信通話連接信號控制服務操作模式；視頻通信單元，用于在所述服務控 制單元的控制下在所述主叫終端和被叫終端之間建立通信信道以支持視頻通 信；以及語音分析引擎，用于分析在所述服務控制單元的控制下通過所述建立 的通信信道傳送到所述主叫終端的被叫用戶的語音以將所述被叫用戶的情緒狀 態(tài)轉換成可視數(shù)據(jù)。


本發(fā)明優(yōu)選實施例的這些以及其它的特征、方面和優(yōu)點將在下列詳細說明 中，參照附圖更充分地介紹。在附圖中
圖1是根據(jù)本發(fā)明實施例顯示移動通信網(wǎng)絡的語音分析服務系統(tǒng)配置的視圖。
圖2是根據(jù)本發(fā)明實施例顯示圖1的分層的語音分析服務器的框圖。
圖3是根據(jù)本發(fā)明實施例顯示語音分析服務方法的流程圖。
圖4是根據(jù)另一本發(fā)明實施例顯示語音分析服務方法的流程圖。
圖5仍是根據(jù)另一本發(fā)明實施例顯示語音分析服務方法的流程圖。
圖6是根據(jù)本發(fā)明實施例顯示用于在視頻通信過程中提供情緒狀態(tài)分析服
務的移動通信服務器的框圖。
圖7是根據(jù)本發(fā)明另一實施例顯示用于在視頻通信過程中提供情緒狀態(tài)分
析服務的移動通信服務器的框圖。圖8是根據(jù)本發(fā)明實施例顯示用于在視頻通信過程中提供語音分析服務的 系統(tǒng)的流程圖。
圖9是根據(jù)本發(fā)明實施例顯示作為語音分析結果提供的MMS消息的i見圖。 圖IO是根據(jù)本發(fā)明實施例顯示作為愛的檢測結果提供的SMS消息的視圖。
圖11
視圖
圖12是根據(jù)本發(fā)明實施例顯示通過網(wǎng)絡服務提供愛的檢測結果的屏幕的視
圖
圖13是根據(jù)本發(fā)明另一實施例顯示通過網(wǎng)絡服務提供愛的檢測結果的屏幕 的視圖。
圖14是顯示用于使主叫用戶和被叫用戶之間的全部對話與#:叫用戶的語音
分析結果同步的方法的實施例的視圖。
具體實施例方式
在下文中，將參考附圖詳細地介紹本發(fā)明的優(yōu)選實施例。在說明之前，應 當理解用在說明書和附加的權利要求書中的術語不應解釋成限于通常的以及字 典意義，而是以允許發(fā)明人對于最佳解釋適當?shù)叵薅ㄐg語的原理為基礎基于對 應于本發(fā)明的技術特征的含意和概念來解釋。因此，在這里提議的說明不過是 僅為了舉例說明起見的優(yōu)選示例，而非意在限制本發(fā)明的范圍，所以應當理解 其它等價物和修改可在其上做出而不背離本發(fā)明的精神和范圍。
圖1是根據(jù)本發(fā)明實施例顯示移動通信網(wǎng)絡的語音分析服務系統(tǒng)配置的視圖。
參照圖1,根據(jù)本發(fā)明的語音分析服務系統(tǒng)包括移動交換中心(MSC) 120、 標識位置寄存器(HLR )130、分層語音分析服務器140、短消息服務中心(SMSC) 150以及多媒體消息服務中心(MMSC) 160。根據(jù)本發(fā)明的語音分析服務系統(tǒng) 配置不限制在這點上，而該語音分析服務系統(tǒng)可包括所有變型以及上述部件的 結合。
特別地，盡管圖1的這個實施例說到移動通信網(wǎng)絡，分層語音分析服務器 140可連接到能夠語音通信以提供語音分析服務的互聯(lián)網(wǎng)網(wǎng)絡，或者可連接到基 于公共交換電話網(wǎng)絡(PSTN)、綜合服務數(shù)字網(wǎng)絡(ISDN)以及局域網(wǎng)(LAN)
9的通信網(wǎng)絡以提供語音分析服務。
分層語音分析服務器140通過(over) E1/T1與MSC120協(xié)作以運行用于本發(fā)明的語音分析服務的通話處理功能。并且，分層語音分析服務器140利用內部語音分析引擎運行實時在線語音分析或運行事先錄音的聲音文件的離線語音分析。
根據(jù)本發(fā)明用于語音分析的分層語音分析使用語音作為大腦的々某介以產(chǎn)生大腦活動的藍圖并且分析談話者完整的情緒系統(tǒng)，但不集中在對話上，而是集中在從進行對話出現(xiàn)的大腦活動上。換句話說，通常人類大腦對于所有經(jīng)過大腦的"事件"留下"指紋"。根據(jù)本發(fā)明的分層語音分析服務器140不予處理分析對象(主叫用戶或^皮叫用戶)的言語，而僅集中在分析對象的大腦活動上。換句話說，根據(jù)本發(fā)明的語音分析不集中在分析對象說的'內容，，而集中在分析對象說的'方式，。
根據(jù)本發(fā)明的分層語音分析服務可實時分析主叫用戶110或^皮叫用戶170的語音并且提供實時語音分析結果。并且，在通話結束之后，分層語音分析服務可以短消息或多媒體消息的類型或者利用有線或無線互聯(lián)網(wǎng)提供語音分析結果。在這時，主叫用戶110和被叫用戶170使用能夠語音通信的終端，例如手機、筆記本電腦、PDA或者典型的電話。
分層語音分析服務器140存儲處于通話狀態(tài)的主叫用戶110和被叫用戶170之間的對話。并且，分層語音分析服務器140僅將主叫用戶110或被叫用戶170的語音從主叫用戶110和被叫用戶170之間的對話中分離出來，存儲經(jīng)過分離的語音，并且從存儲語音的聲音文件析取預定的語音參數(shù)。在這時，該聲音文件是由6/8/11KHz， 8/16bit單聲ii/立體聲非壓縮的脈沖編碼調制(PCM)格式聲音資源文件形成的。分層語音分析服務器140基于析取的語音參數(shù)最多利用八個語音解析式提取語音分析結果。
這八個語音解析式可包括謊言著重(stress)解析式、興奮等級(level)解析式、關心等級解析式、情緒等級解析式、沖突或抵觸等級解析式、欺詐和欺騙模式結合解析式，或者用于可信賴性評價的附加的公式。
語音分析結果包括表現(xiàn)語音分析對象的興奮程度的興奮等級，以及表現(xiàn)語音分析對象關于他/她的言語的信服程度的信服等級。并且，語音分析結果包括表現(xiàn)知道他/她不能逃脫當前狀況的語音分析對象的著重程度的著重等級，以及
10表現(xiàn)語音分析對象設法尋找響應的程度的思考等級。并且，語音分析結果包括
表現(xiàn)是否語音分析對象逃避對話的s.o.s (說或者停止)等級，以及表現(xiàn)是否語
音分析對象全神貫注于該對話的專心等級。并且，語音分析結果包括表現(xiàn)語音
分析對象對于對方(opponent)的期待程度的期待等級、表現(xiàn)是否語音分析對象是馗尬的尷尬等級，或者表現(xiàn)語音分析對象愛的程度的愛的等級。
一部分或全部語音分析結果是選定的并且一艮據(jù)服務類型提供。或者，語音分析結果可合成以提取和提供另一服務等級。例如，可提供謊言檢測等級。
根據(jù)本發(fā)明實施例，語音分析服務可以實際模式和練習模式提供。實際模式是使得語音分析結果在實際通話過程中傳送到主叫用戶110或被叫用戶170。練習模式是當主叫用戶110用電話與虛擬對方說話時使得其接收他/她的語音分析結果。練習模式使主叫用戶110能夠與虛擬對方做虛擬通話，使得主叫用戶110可減少在與被叫用戶170實際通話過程中可能出現(xiàn)的錯誤或誤解并且判斷是否他/她在適當?shù)乇磉_他/她的情緒。
例如，在主叫用戶110接通用于實際模式的通話時，分層語音分析服務器140在主叫用戶110和被叫用戶170之間建立通信信道，并且分析通過已經(jīng)建立的通信信道傳送到主叫用戶110的被叫用戶170的語音以析取愛的等級。在這時，分層語音分析服務器140分別記錄并存儲主叫用戶110和被叫用戶170之間的對話。同時，分層語音分析服務器140實時通知主叫用戶110通過分析被叫用戶170的語音提取的愛的等級，或者將對應于愛的等級的內容提供給主叫用戶110或被叫用戶170。分層語音分析服務器140可在愛的等級超過預定的臨界值時提供愛的等級，或者分層語音分析服務器140可以預定的時間間隔平均愛的等級并且通知主叫用戶110平均的愛的等級。分層語音分析服務器140可存儲主叫用戶110和^皮叫用戶170之間的對話或通話歷史，并且在通話結束之后，將通過詳細地分析記錄的對話獲得的語音分析結果以及對應于語音分析結果的內容作為短消息或多媒體消息或者通過有線或無線互聯(lián)網(wǎng)提供給主叫用戶110。
對于另一個示例，在主叫用戶110接通用于練習模式的通話時，分層語音分析服務器140接收由主叫用戶110選定的虛擬對方和練習方法以及來自主叫用戶110的言語。虛擬對方可包括母親或父親、兄弟或姐妹、女朋友或男朋友、單相思的對象(interest)或者朋友，而練習方法可包括勸說、安慰或坦白。分層語音分析服務器140分析主叫用戶110的語音，提取愛的等級并且將提取的愛的等級或對應于愛的等級的內容提供給主叫用戶110。以相同的方式作為實際模式，分層語音分析服務器140可在愛的等級超過預定的臨界值時提供愛的等級，或者分層語音分析^^務器140可以預定的時間間隔平均愛的等級并且將平均的愛的等級提供給主叫用戶110。并且，分層語音分析服務器140可存儲主叫用戶IIO的言語和通話歷史，并且在練習模式結束之后，將通過詳細地分析他/
體消息或通過有線或無線互聯(lián)網(wǎng)提供給主叫用戶110。
務器140。換句話說，在用戶將預定的特征代碼(例如"**45")和被叫用戶的電話號碼輸入終端時，MSC120基于包括在從用戶的終端傳送的通話連接請求消息中的特征代碼識別出相應的通話是語音分析^^務通話。MSC120請求分層語音分析服務器140到HLR130的路由選擇信息。MSC120基于來自HLR130的響應將用戶的通話發(fā)送(routing)到分層語音分析服務器140?；蛘?，在用戶輸入被叫用戶的電話號碼和無線互聯(lián)網(wǎng)密鑰(key)(例如，KTF的MagicN密鑰)時，
音分析服務器140。
圖2是才艮據(jù)本發(fā)明實施例顯示圖1的分層語音分析服務器140的框圖。如圖2中所示，根據(jù)本發(fā)明分層語音分析服務器140包括通話設置單元210、記錄單元230、語音分析引擎250和存儲裝置270。并且，語音分析引擎250包括分析對象分離單元251、語音析取單元253以及語音分析單元255，而存儲裝置270包括分析結果存儲單元271和內容存儲單元273。語音分析引擎250作為分層語音分析服務器140的主要部件可由軟件開發(fā)包(kit)形成。然而，語音分析引擎250不限制在這點上。
首先，分層語音分析服務器140的通話設置單元210與移動通信網(wǎng)絡的MSC120、 SMSC150和MMSC160協(xié)作以運行用于本發(fā)明語音分析服務的通話處理。例如，在主叫用戶110以實際模式使用語音分析服務的情況，通話設置單元210在主叫用戶110和被叫用戶170之間建立通信信道以傳送和4妾收主叫用戶IIO和被叫用戶170的語音。以及，在主叫用戶IIO以練習模式使用語音分析服務的情況，通話設置單元210與主叫用戶110建立通信信道以接收主叫用戶110的語音。并且，通話設置單元210將語音分析對象的語音分析結果以及對應于語音分析結果的內容作為短消息或多媒體消息傳送，從而在通話結束之后提供語音分析服務。
記錄單元230記錄由通話設置單元210接收的語音。由記錄單元230記錄的聲音文件由6/8/1 lKHz, 8/16bit單聲道/立體聲非壓縮的脈沖編碼調制(PCM)格式聲音資源文件形成。由記錄單元230記錄的聲音文件存儲在存儲裝置270中。
同時，語音分析引擎250的分析對象分離單元251從通過記錄單元230輸入的聲音文件分離語音分析對象的語音。例如，在主叫用戶110以實際才莫式4吏用語音分析服務的情況，分析對象分離單元251僅從通過記錄單元230輸入的聲音文件分離被叫用戶170的語音。或者，根據(jù)服務類型，在被叫用戶170以實際模式使用語音分析服務的情況，分析對象分離單元251僅從通過記錄單元230輸入的聲音文件分離主叫用戶IIO的語音。
語音析取單元253從由分析對象分離單元251分離的語音分析對象的聲音文件析取預定的語音參數(shù)。
語音分析單元255基于由語音析取單元253析取的語音參數(shù)最多利用八個語音解析式提取語音分析結果。語音分析結果包括興奮等級、信服等級、著重等級、思考等級、S,O.S (說或停止)等級、專心等級、尷尬等級或愛的等級。語音分析單元255根據(jù)服務類型選擇性地提供上述等級的一部分或者全部。并且，語音分析單元255可將上述等級合成以計算另一類型的等級，例如謊言檢測等級。優(yōu)選地，語音分析單元255用數(shù)字或以圖形或文本提供上述等級。
同時，存儲裝置270的分析結果存儲單元271存儲由記錄單元230記錄的主叫用戶110和^皮叫用戶170之間的對話。并且，分析結果存儲單元271存儲由語音分析單元255提取的語音分析對象的語音分析結果。在這時，分析結果存儲單元271將使用語音分析服務的用戶的信息和語音分析服務的日期與語音分析結果和語音分析對象的全部對話一起映射(map)并存儲。并且，存儲裝置
或情緒。因此，存儲在分析結果存儲單元271中的全部對話和語音分析結果以及存儲在內容存儲單元273中的預定的內容通過短消息服務、多媒體消息服務或者有線或無線互聯(lián)網(wǎng)服務提供給用戶。
13圖3是根據(jù)本發(fā)明實施例顯示語音分析服務方法，并且顯示用于分析在在主叫用戶和被叫用戶之間通話過程中被叫用戶的語音并且將語音分析結果提供給主叫用戶的方法的流程圖。
如圖3中所示，為了被叫用戶170的語音分析，首先，主叫用戶110利用終端接通分層語音分析服務器140( S301 )。預定的特征密鑰用于將主叫用戶110接通分層語音分析服務器140。
例如，在主叫用戶110將'*007+被叫用戶的電話號碼，輸入主叫終端時，主叫終端的通話經(jīng)由MSC120發(fā)送到分層語音分析服務器140?；蛘撸鹘杏脩?10可將'被叫用戶的電話號碼+互聯(lián)網(wǎng)接通密鑰，輸入主叫終端以接通分層語音分析服務器140。然而，主叫用戶IIO接通分層語音分析服務器140的方法不限制在這點上，而是可根據(jù)服務類型以不同的方式修改。
在這時，在語音分析服務需要服務預約的情況，分層語音分析服務器140可在主叫用戶110接通通話時運行用戶身份驗證。優(yōu)選地，用戶身份驗證是基于主叫用戶IIO的信息自動做出的，然而本發(fā)明不限制在這點上。
以及，在主叫用戶IIO接通通話時，分層語音分析服務器140可通知主叫用戶110語音分析服務。優(yōu)選地，語音分析服務是以語音通知的類型通知的，并且該通知可包括語音分析服務的簡短說明以及服務收費信息的說明。
因此，在主叫用戶IIO為了被叫用戶170的語音分析接通分層語音分析服務器140時，分層語音分析服務器140基于被叫用戶170的電話號碼接通通話以在主叫用戶IIO和被叫用戶170之間建立通信信道(S303)。
在通信信道建立在主叫用戶IIO和被叫用戶170之間之后，分層語音分析服務器140從主叫用戶IIO和被叫用戶170之間的對話分離被叫用戶170的聲音文件(S305)。在這時，分層語音分析服務器140記錄并且存儲主叫用戶110和被叫用戶170之間的對話，以及然后僅從該對話分離被叫用戶170的聲音文件。
其次，分層語音分析服務器140從分離的被叫用戶170的聲音文件析取預定的語音參數(shù)(S307 )。該聲音文件由6/8/1 lKHz， 8/16bit單聲道/立體聲非壓縮的脈沖編碼調制(PCM)格式聲音資源文件形成。
以及，分層語音分析服務器140基于析取的語音參數(shù)運行語音分析以提取語音分析結果(S309)。語音分析結杲包括興奮等級、信服等級、著重等級、思考等級，s.o.s (說或停止)等級、專心等級、期待等級、尷尬等級或愛的等級。
并且，語音分析結果可包括通過合成上述等級計算的謊言檢測等級(換句話說，可信賴性等級)。在這個示例中，語音分析結果包括愛的等級、專心等級、期待等級和馗搶等級。
由分層語音分析服務器140分析的專心等級在0到100的范圍內提取。0到44的范圍意味著專心等級低或困惑，45到65的范圍意味著普通狀態(tài)，而66到100的范圍意味著專心等級高。專心等級可由百分率表示或根據(jù)預定的標準分類為非常低、低、中、高和非常高，并且可以文本或圖表提供。
以及，期待等級在0到IOO的范圍內提取。0到30的范圍意味著普通狀態(tài)，而31到100的范圍意味著對對方的高期待并且可能提出欺騙的嘗試。期待等級可由百分率表示或者根據(jù)預定的標準分類為低、中和高，并且可以文本或圖表提供。
尷尬等級提取為在0到100范圍內分類的五級。尷尬等級0意味著沒有馗尬，尷搶等級25意味著輕微的尷尬，尷尬等級50意味著普通狀態(tài)，尷尬等級75意味著相當馗尬，而尷尬等級100意味著非常尷尬。尷尬等級可由百分率表示或者根據(jù)預定的標準分類為非常低、低、中、高和非常高，并且可以文本或圖表提供。
最后，愛的等級在-10到50的范圍內提取。根據(jù)愛的4全測結果，-IO到O和1到10的愛的等級意味著未從被叫用戶170檢測到愛。11到50的愛的等級意味著從被叫用戶170檢測到愛。愛的等級可由百分率提供。在愛的等級是-10到O的情況，愛的等級的百分率是通過用相應的愛的等級乘以O計算的，而在愛的等級是1到50的情況，愛的等級的百分率是通過用相應的愛的等級乘以2計算的。
通過分析被叫用戶170的語音提取的語音分析結果是實時提供給處于通話狀態(tài)的主叫用戶110的(S311)。優(yōu)選地，實時傳送到通話中的主叫用戶110的語音分析結果是在上述等級之中由百分率計算的愛的等級。在這時，語音分析結果可以預定的周期(例如，以十秒的時間間隔)提供給通話中的主叫用戶110，或在愛的等級超過預定的臨界值時提供?；蛘?，實時傳送到通話中的主叫用戶110的語音分析結果可為對應于愛的等級的內容。在提供的內容例如是音樂文件的情況，相應的音樂可在主叫用戶IIO和被叫用戶170之間通話過程中作為背景音樂提供。
以及，在通話結束之后，分層語音分析服務器140將通過分析被叫用戶170 語音提取的并且作為短消息或多媒體消息或通過有線或無線互聯(lián)網(wǎng)存儲的語音 分析結果提供給主叫用戶110 (S313)。優(yōu)選地，在通話結束之后作為短消息或 多媒體消息或通過有線或無線互聯(lián)網(wǎng)提供的語音分析結果，包括愛的等級、專 心等級、期待等級以及尷尬等級全體。作為短消息或多媒體消息或通過有線或 無線互聯(lián)網(wǎng)提供的語音分析結果，以不同的方式顯示，例如，以文本或者圖表。 特別地，在語音分析結果是通過有線或無線互聯(lián)網(wǎng)提供的情況，分層語音分析 服務器140僅可提供被叫用戶170的語音分析結果(也就是圖表)或將語音分 析結果與全部對話一起提供。換句話說，在分層語音分析服務器140僅提供#皮
叫用戶170的語音分析結果的情況，主叫用戶110可4企查^皮叫用戶170情緒的 變化，但不能4全查被叫用戶170情緒的變化在對話中出現(xiàn)在何處。因此，分層 語音分析服務器140將被叫用戶170情緒的變化與全部對話一起提供。當重放 全部對話時，分層語音分析服務器140在被叫用戶170的語音開始的時間使全 部對話與語音分析結果同步以便以圖表提供語音分析結果。其詳細方法如下所 述。
語音分析服務可與通話持續(xù)的時間或使用的時間成比例收費。然而，因為 記賬方法可能根據(jù)移動通信服務供應者或提供語音分析服務單獨的服務供應者 而不同，本發(fā)明不限制在這點上。
圖4是根據(jù)本發(fā)明另 一實施例顯示語音分析服務方法的流程圖。
語音分析服務可根據(jù)語音分析對象以實際模式和練習模式提供。實際模式 是使得主叫用戶和被叫用戶的語音在實際通話過程中被分析并且提供語音分析 結果。練習模式是使得用電話與虛擬對方說話的主叫用戶的語音被分析并且將 語音分析結果傳送到相應的主叫用戶。參照圖3介紹練習^f莫式。
為了在練習模式中進行愛的檢測，主叫用戶110通過終端接通分層語音分 析服務器140 (S401)。為了在練習模式中進行愛的檢測，預定的特征密鑰可用 于將主叫用戶IIO接通分層語音分析服務器140。例如，如圖3中所示，主叫用 戶110將"用于語音分析的特征代碼(*007) +被叫用戶的電話"輸入終端。在 這種情況下，分層語音分析服務器140通知主叫用戶110實際模式和練習模式， 并且接收來自主叫用戶110的練習模式的選擇?；蛘撸鹘杏脩鬒IO可直接將
16用于練習模式的特征代碼和被叫用戶的電話號碼輸入終端。在這種情況下，分
層語音分析服務器140可不通知主叫用戶IIO練習模式。進一步地，主叫用戶 110為了在練習模式中進行語音分析，可根據(jù)服務類型以各種方式接通分層語音 分析服務器140。
在這時，在語音分析服務需要服務預約的情況，分層語音分析服務器140 可在主叫用戶110接通通話時運行用戶身份驗證。優(yōu)選地，用戶身傷i^i正是基 于主叫用戶110的信息自動完成的，然而本發(fā)明不限制在這點上。
以及，在主叫用戶110接通通話時，分層語音分析服務器140可通知主叫 用戶110語音分析服務。優(yōu)選地，語音分析服務以語音通知的類型提供，并且 該通知可包括語音分析服務的簡短說明以及服務收費信息。
為了在練習模式中進行語音分析，在主叫用戶110接通分層語音分析服務 器140之后，分層語音分析服務器140接收來自主叫用戶110的用于練習的對 方選擇(S403)。用于練習的對方是選定的使得語音通知提供給主叫用戶110并 且從主叫用戶110 ^:收在其上的響應。例如，用于練習的對方可包4舌母親或父 親、兄弟或姐妹、女朋友或男朋友、單相思的對象，或朋友。
在分層語音分析服務器140接收來自主叫用戶110的用于練習的對方之后， 分層語音分析服務器140接收來自主叫用戶110的適合于用于練習的對方的練 習方法的選擇(S405)。該練習方法是以與用于練習的對方相同的方式選定的。 例如，該練習方法可包括勸說、安慰或坦白。
例如，主叫用戶110選擇單相思的對象作為用于練習的對方并且選擇坦白 作為練習方法。這意味著主叫用戶110有他/她秘密地愛著的人并且想要對單相 思的對象坦白他/她的愛，而主叫用戶110在實際坦白之前打算練習4也/她的愛的 坦白。因此，在主叫用戶110用電話與單相思的對象說r活時，主叫用戶110可 減少可能的錯誤或誤解。
在分層語音分析服務器140接收用于練習的對方和練習方法的選擇之后， 分層語音分析服務器140接收主叫用戶IIO的語音(S407)。優(yōu)選地，當接收主 叫用戶IIO的語音時，分層語音分析服務器140記錄主叫用戶IIO的語音。
其次，分層語音分析服務器140從主叫用戶110的聲音文件析取預定的語 音參數(shù)(S409)。主叫用戶110的聲音文件由6/8/llKHz， 8/16bit單聲ii/立體聲 非壓縮的脈沖編碼調制(PCM)格式聲音資源文件形成。以及，分層語音分析服務器140基于析取的語音參數(shù)運行語音分析以提取 語音分析結果(S411)。在這里，語音分析與參照圖3介紹的語音分析是相同的， 并且因此省略其詳細說明。
通過分析主叫用戶110的語音提取的語音分析結果是實時提供給處于通話 狀態(tài)的主叫用戶110的(S413)。優(yōu)選地，實時傳送給主叫用戶110的語音分沖斤 結果是以百分率計算的愛的等級。在這時，語音分析結果可以預定的周期(例 如，以十秒的時間間隔)提供給通話中的主叫用戶110,或者在愛的等級超過預 定的臨界值時提供?；蛘撸瑢崟r傳送給通話中的主叫用戶110的語音分析結果 可為對應于愛的等級的內容。語音分析結果可根據(jù)服務類型不同地提供。
以及，在通話結束之后，分層語音分析服務器140將通過分析主叫用戶110 的語音提取并且作為短消息或多媒體消息或通過有線或無線互聯(lián)網(wǎng)存儲的語音 分析結果提供給主叫用戶110。優(yōu)選地，在通話結束之后作為短消息或多媒體消 息或通過有線或無線互聯(lián)網(wǎng)提供的語音分析結果，包括愛的等級、專心等級、 期待等級和尷尬等級全體。作為短消息或多媒體消息或通過有線或無線互聯(lián)網(wǎng) 提供的語音分析結果，以不同的方式顯示，例如以文本或圖表。
語音分析服務可與通話持續(xù)的時間或者使用時間成比例收費。然而，因為 記賬方法可能根據(jù)移動通信服務供應者或提供語音分析服務的單獨的服務供應 者是不同的，本發(fā)明不限制在這點上。
同時，在步驟S413之后，在主叫用戶110的通話結束或主叫用戶IIO請求 改變模式的情況，分層語音分析服務器140可對應于用于練習的對方在主叫用 戶IIO和被叫用戶170之間建立通話以在實際模式提供語音分析服務。在步驟 S401中主叫用戶IIO輸入被叫用戶170的電話號碼以接通分層語音分析服務器 140的情況，分層語音分析服務器140僅檢查是否主叫用戶IIO打算以實際模式 使用語音分析服務并且在主叫用戶IIO和被叫用戶170之間建立通話。或者， 在主叫用戶IIO接通分層語音分析服務器140而沒有輸入被叫用戶170的電話 號碼的情況，分層語音分析服務器140接收來自主叫用戶110的凈皮叫用戶170 的選擇并且在主叫用戶IIO和被叫用戶170之間接通通話。
因此，在主叫用戶IIO和被叫用戶170之間建立了通信信道之后，分層語 音分析服務器140執(zhí)行參照圖3介紹的步驟S305到S313。
圖5是根據(jù)本發(fā)明另一實施例顯示語音分析服務方法的流程圖，以及介紹在緊急通話服務中用于檢測虛假報告的方法。將分層語音分析服務器140安裝 在公共機關諸如警察局或消防隊并且分析緊急通話的語音以檢測虛假的報告。
如圖5中所示，首先，打算對公共機關諸如警察局或消防隊進行緊急通話 的主叫用戶110將緊急通話鍵或緊急通話電話號碼輸入終端以進行緊急通話。 主叫用戶110的緊急通話輸入到分層語音分析服務器140中(S501)。
在主叫用戶IIO接通用于緊急通話的分層語音分析服務器140時，分層語 音分析服務器140在話務員和主叫用戶IIO之間建立通信信道(S503 )。
在話務員和主叫用戶110之間建立了通信信道之后，分層語音分析服務器 140從主叫用戶110和話務員之間的對話中分離主叫用戶110的聲音文件 (S505)。在這時，分層語音分析服務器140記錄并存儲主叫用戶IIO和話務員 之間的對話，并且僅從對話中分離主叫用戶110的聲音文件。
其次，分層語音分析服務器140從分離的主叫用戶IIO的聲音文件析取預 定的語音參數(shù)(S507 )。該聲音文件由6/8/1 lKHz， 8/16bit單聲道/立體聲非壓縮 的脈沖編碼調制(PCM)格式聲音資源文件形成。
以及，分層語音分析服務器140基于析取的語音參數(shù)運行語音分析以提取 語音分析結果(S509)。換句話說，分層語音分析服務器140提取興奮等級、信 服等級、著重等級、思考等級、S.O.S (說或停止)等級、專心等級、期待等級、 馗尬等級或愛的等級，并且將上述等級合成以計算謊言檢測等級(換句話說， 可信賴性等級)。
分層語音分析服務器140基于通過分析主叫用戶110的語音提取的語音分 析結果判斷主叫用戶IIO的報告是真實的還是虛假的(S511)。優(yōu)選地，分層語 音分析服務器140在0到100的范圍內提取主叫用戶110的謊言檢測等級，并 且在謊言檢測等級超過50的情況，將報告判斷為是虛假的。
在報告不是虛假的情況，分層語音分析服務器140析取主叫用戶110的信 息，將析取的信息存儲到存儲裝置270中，并且根據(jù)緊急狀況將信息提供給主 叫用戶110 (S513)。該根據(jù)緊急狀況的信息可作為消息提供。主叫用戶110接 收該根據(jù)緊急狀況的信息并且在緊急工作人員或警員到達之前處理緊急狀況。 在這里，優(yōu)選分層語音分析服務器140保持主叫用戶IIO和話務員之間的通話。
同時，在主叫用戶110的報告是虛假的情況，分層語音分析服務器MO析 取主叫用戶110的信息，將析取的信息存儲到存儲裝置270中，并且基于主叫用戶110的信息將反對虛假報告的警告消息傳送給主叫用戶110 (S515)。
在分層語音分析服務器140傳送反對虛假報告的警告消息之后，分層語音 分析服務器140基于主叫用戶IIO的信息判斷主叫用戶110是否是慣犯(S517)。 在主叫用戶UO是慣犯的情況，分層語音分析服務器140進一步將包括虛假的 報告的發(fā)生次數(shù)和大概的法律措施的警告消息傳送給主叫用戶110 (S519)。這 可使虛假的報告者認識到虛假報告并且防止習慣性的虛假報告。
在下文中，參照圖6介紹用于在視頻通信過程中分析和顯示對方情緒狀態(tài) 的方法和裝置的實施例。
圖6是根據(jù)本發(fā)明實施例顯示用于在視頻通信過程中提供情緒狀態(tài)分析服 務的移動通信服務器600的框圖。
參照圖6，用于在視頻通信過程中提供情緒狀態(tài)分析服務的移動通信服務器 600包括通信單元610、服務控制單元620、視頻通信單元630、語音分析引擎 640以及圖像集成單元650。
通信單元610從主叫終端接收請求具有特定特征的通話服務的通話連接請 求信號。在這時，通話連接請求信號包括具有特定特征的特征代碼、接收的電 話號碼以及用于識別視頻通信和音頻通信的標識符。在通信單元610從主叫終 端接收通話連接請求信號之后，通信單元610接通對被叫終端的通話以在主叫 終端和被叫終端之間建立通信信道。移動通信服務器600執(zhí)行用于提供由主叫 用戶請求的具有特定特征的通話服務的一系列操作，并且通過通信單元610將 結果傳送給主叫終端。
具有特定特征的通話服務可包括各種服務，然而本實施例集中在用于在視 頻通信過程中分析和顯示對方情緒狀態(tài)的通話服務。為了簡單的和清楚地說明， 包括在通話連接請求信號中的視頻通信標識符作為'*，表示，而用于分析對方 情緒狀態(tài)并在主叫終端的屏幕上顯示該情緒狀態(tài)的特征代碼表示為'001，。
服務控制單元620根據(jù)包括在從通信單元610接收的通話連接請求信號中 的視頻通信標識符'*，將控制信號傳送到視頻通信單元630。并且，服務控制 單元620根據(jù)包括在通話連接請求信號中的特征代碼'001，將控制信號傳送到 語音分析引擎640。
視頻通信單元630根據(jù)從服務控制單元620傳送的控制信號請求接通被叫 終端的纟見頻通信通話，并且在^L頻通信通話響應該請求而4妄通時，啟動主叫終
20端和被叫終端之間的^L頻通信。在^L頻通信由視頻通信單元630啟動時，語音 分析引擎640析取^皮叫用戶的語音并且分析^皮叫用戶的情緒狀態(tài)。
語音分析引擎640包括分析對象分離單元641、語音析取單元643以及語音 分析單元645。
語音分析引擎640的分析對象分離單元641從主叫用戶和被叫用戶之間的 對話中分離凈皮叫用戶的語音。
語音析取單元643從由分析對象分離單元641分離的語音分析對象的聲音 文件析取預定的語音參數(shù)。
語音分析單元645基于由語音析取單元643的析取語音參數(shù)利用最多八個 語音解析式提取語音分析結果。語音分析結果包括興奮等級、信服等級、著重 等級、思考等級、S.O.S (說或停止)等級、專心等級、期待等級、馗尬等級或 者愛的等級。語音分析單元645根據(jù)服務類型選擇性地提供上述等級的一部分 或者全部。并且，語音分析單元645可將上述等級合成以計算另一種類型的等 級，例如謊言檢測等級。優(yōu)選地，語音分析單元645用數(shù)字或者以圖形或文本 提供上述等級。
以及，語音分析引擎640可進一步包括情緒分析控制單元(未示出)以4更 從視頻通信單元周期性地檢測情緒分析啟動信號或情緒分析停止信號630以在 分析對象分離單元641操作之前控制情緒分析服務。
情緒分析控制單元可按主叫用戶請求停止或者重新啟動語音分^f引擎640 的操作。因此，主叫用戶可在視頻通信過程中選擇性地請求或停止情緒分析服 務。換句話說，情緒分析控制單元從視頻通信單元630周期性地檢測語音分析 引擎640的啟動信號才喿作或停止信號操作以控制語音分析引擎640的操作。
例如，主叫用戶選擇用于情緒分析的視頻通信服務，以及然后按壓'*，鍵 以停止對方的情緒分析而僅使用視頻通信服務。以及，主叫用戶在^L頻通信過 程中按壓'*，鍵以重新啟動已經(jīng)停止了的對方的情緒分析。在這里，'*，鍵與 上述視頻通信標識符不同，而是在視頻通信啟動之后具有切換功能，在語音分 析引擎640操作過程中按壓'*，鍵時，語音分析引擎640的操作停止，而在再 次按壓'*，鍵時，停止了的語音分析引擎640操作重新啟動。
或者，為了控制語音分析引擎640的操作，將語音分析引擎640啟動操作 分配給'1，鍵，將語音分析引擎640操作的停止分配給'2，鍵，而將語音分析引擎640的內容增加分配給'3，鍵，從而實時接收來自主叫用戶的各種服務 請求選擇。
圖像集成單元650將從視頻通信單元630傳送的視頻與從語音分析單元645 傳送的情緒狀態(tài)分析結果(例如，指示各種等級的文本或圖表)以預定的比例 集成并且傳送集成圖像。
進一步地，在沒有圖像集成單元650的情況下，從視頻通信單元630傳送 的視頻和從語音分析單元645傳送的情緒狀態(tài)分析結果(例如，指示各種等級 的文本或圖表)可各自傳送到主叫終端并且顯示在主叫終端分開的屏幕上。對 方的圖像和情緒狀態(tài)分區(qū)地顯示在主叫終端分開的屏幕上。
圖7是根據(jù)本發(fā)明另一實施例顯示用于在視頻通信過程中提供情緒狀態(tài)分 析服務的移動通信服務器700的框圖。在這里，與圖6中的部件具有相同標號 的部件運行相同的功能，并且因此其省略詳細說明。
參照圖7，用于在視頻通信過程中提供情緒狀態(tài)分析服務的移動通信服務器 700進一步包括內容存儲單元760、分析結果存儲單元770以及消息生成單元 780。
內容存儲單元760對應于其語音分析單元645的語音分析結果存儲各種內 容。語音分析單元645 ^^人內容存儲單元760對應語音分析結果選擇內容。該內 容包括各種可視數(shù)據(jù)，使得主叫用戶可容易地識別語音分析結果。
例如，內容存儲單元760存儲有對應于諸如愛的等級或著重等級的語音分 析結果的各種符號、各種表達的具體化(avatar )、由字符組成的圖釋(emoticons ), 閃爍或可動圖像。
因此，語音分析單元645選為預先存儲在內容存儲單元760中的語音分析 結果符號、具體化或多媒體內容，并且根據(jù)環(huán)境適當?shù)厥褂迷摲?、具體化或 多媒體內容。因此，主叫用戶可利用從內容存儲單元760選定的可視數(shù)據(jù)，諸 如圖表、符號或具體化，檢查對方的情緒狀態(tài)。主叫用戶可檢查對方的情緒狀 態(tài)并且對應于該情緒狀態(tài)將可動圖像或多々某體內容傳送給對方。
消息生成單元780準備包括由語音分析單元6"分析的語音分析結果以及 由語音分析單元645從內^"儲單元760選定的內容的多媒體消息(MMS )，并 且將該多媒體消息傳送到主叫終端或被叫終端。
同時，分析結果存儲單元770存儲由語音分析單元645分析的語音分析結果。存儲在分析結果存儲單元770中的語音分析結果利用有線或無線互聯(lián)網(wǎng)通 過網(wǎng)絡服務提供。用戶可通過網(wǎng)絡服務看到語音分析結果。
圖8是根據(jù)本發(fā)明實施例顯示用于在視頻通信過程中提供語音分析服務的 方法的流程圖。
如圖8中所示，首先，主叫用戶對被叫用戶傳送用于視頻通信的通話，并 且移動通信服務器接收從主叫用戶傳送的視頻通信通話(S801)。在這時，從主 叫用戶傳送的通話包括視頻通信標識符'*，以及用于語音分析服務的特征代碼 聰，。
在接收從主叫用戶傳送的視頻通信通話時，移動通信服務器根據(jù)包括在視 頻通信通話中的標識符'*，啟動主叫用戶和被叫用戶之間的視頻通信(S803 )。
在視頻通信啟動時，移動通信服務器基于包括在視頻通信通話中的特征代 碼'100'從主叫用戶和被叫用戶之間的語音通信對話中分離被叫用戶的語音 (S805 )。
其次，移動通信服務器分析經(jīng)過分離的被叫用戶的語音，提取被叫用戶的 情緒狀態(tài)，并且將提取的被叫用戶情緒狀態(tài)轉換成可視數(shù)據(jù)(S807 )。換句話說， 移動通信服務器從被叫用戶的語音析取語音參數(shù)，基于析取的語音參數(shù)運行語 音分析以提取被叫用戶的情緒狀態(tài)結果。以及，移動通信服務器將提取的情緒 狀態(tài)結果轉換成可視數(shù)據(jù)。情緒狀態(tài)結果包括興奮等級、信服等級、著重等級、 思考等級、S.O.S (說或停止)等級、專心等級、期待等級、馗搶等級或愛的等 級。情緒狀態(tài)結果轉換成可視Jt據(jù)，例如百分率圖表。
或者，為了強調情緒狀態(tài)結果的可視方面，移動通信服務器可選擇多^ 某體 內容，例如可動圖像、具體化或符號作為情緒狀態(tài)結果的可視Jt據(jù)。
其次，移動通信服務器將被叫用戶情緒狀態(tài)的可視數(shù)據(jù)與被叫用戶的視頻 以預定的比例集成，并且將集成的圖像傳送給主叫用戶(S809)。
在視頻通信過程中將分析的被叫用戶的情緒狀態(tài)提供給了主叫用戶時，主 叫用戶可停止情緒狀態(tài)分析。主叫用戶將用于停止情緒狀態(tài)分析的鍵:輸入終端。 移動通信服務器讀取從主叫用戶終端接收的4建信號，并且在該4建信號表示情緒 狀態(tài)分析停止的情況，停止正在進行的語音分析。以及，在主叫用戶停止情緒 狀態(tài)分析之后，主叫用戶可再次請求情緒狀態(tài)分析。以相同的方式，主叫用戶 將用于請求情緒狀態(tài)分析的鍵輸入終端。移動通信服務器讀取從主叫用戶終端接收的鍵信號，并且在該鍵信號表示情緒狀態(tài)分析請求的情況，再次執(zhí)行停止 了的情緒狀態(tài)分析并且將情緒狀態(tài)分析結果提供給主叫用戶。
以及，在主叫用戶和被叫用戶之間的視頻通信結束之后，移動通信服務器
可將被叫用戶情緒狀態(tài)分析結果準備為MMS消息，并且將該MMS消息傳送給 主叫用戶。在這時，移動通信服務器對應于被叫用戶的情緒狀態(tài)分析結果對 MMS消息附上多媒體內容，例如具體化、符號或可動圖像，并且將該MMS消 息傳送給主叫用戶。
圖9是根據(jù)本發(fā)明實施例顯示作為語音分析結果提供的MMS消息的視圖。
如圖9中所示，多々某體消息服務包括通話信息900、最后的愛的等級910, 其它檢測等級920以及手互聯(lián)網(wǎng)服務URL930。
通話信息900示意性地顯示主叫用戶和被叫用戶之間語音分析通話的詳細 信息，并且包括被叫用戶的電話號碼，通話日期和通話持續(xù)的時間和可進一步 包括愛的等級的圖像。
最后的愛的等級910可以直方圖并且通過百分率顯示，如圖9中所示。為 了優(yōu)良的明顯度，最后的愛的等級910的直方圖類型可具有心形的閃爍效果或 圖表可視效果，并且可通過預定的范圍以不同的顏色表達。這個可^L效果可才艮 據(jù)移動通信服務供應者或提供語音分析服務的單獨的服務供應者而不同。
其它檢測等級920作為根據(jù)愛的檢測的實時分析結果包括馗搶等級、專心 等級和期待等級。如中圖9所示，這些等級各自表示為預定形狀的表格，并且 具有根據(jù)設置范圍顯示的顏色或圖像。
手機互聯(lián)網(wǎng)服務URL930用作詳細的查詢以及提供最后結果的內容，以及 在用戶輸入通話按鈕(未示出)時，包括在手機中的無線互聯(lián)網(wǎng)瀏覽器接通對 應于URL的服務器以查出詳細的檢測結果。
圖IO是根據(jù)本發(fā)明實施例顯示作為愛的檢測結果提供的SMS消息的視圖。
作為SMS消息提供的愛的檢測結果可以如圖10(a)中所示的基本信息950a 的類型提供，或以如圖10 (b)中所示的詳細信息950b的類型提供。
如圖10 (a)中所示，基本信息類型950a可包括作為語音分析對象的被叫 用戶的電話號碼、相應的被叫用戶對主叫用戶的愛的等級，以^^接通詳細查詢 的示意性的顯示960。
同時，如圖10 (b)中所示，詳細信息類型950b包括由百分率表示的愛的等級，以及以文本表示的尷尬等級、專心等級和期待等級(970)。詳細信息類 型950b提供比在圖10(a)中顯示的基本信息類型950a更詳細的愛的檢測結果。 在主叫用戶需要以可作為基本信息類型950a或詳細信息類型950b提供的 SMS消息的詳細查詢的情況，主叫用戶輸入終端的通話按鈕或互聯(lián)網(wǎng)按鈕980。 于是，主叫用戶接通包括在SMS消息中的回叫URL以接收更詳細的愛的檢測 結果。
視圖，而用戶可接通包括在在通話結束之后提供的SMS消息或MMS消息中的 回叫URL,或者直接接通無線互聯(lián)網(wǎng)。
首先，在主叫用戶將'他/她的電話號碼+預定的特征密鑰，輸入移動終端時， 包括在手機中的無線互聯(lián)網(wǎng)瀏覽器顯示服務屏幕以便接通愛的檢測選單。然后， 主叫用戶選擇用于在顯示在瀏覽器上的預定服務中的愛的檢測服務的 "007通 話"1000,并且移動到次級屏幕。
或者，在主叫用戶選擇在作為愛的4企測結果提供的SMS消息或MMS消息 中的通話連接1050時，主叫用戶的移動終端接通服務器，下載次級屏幕并且對 主叫用戶顯示次級屏幕。
相應的次級選單屏幕包括最近的通話歷史選單1010,愛的排序選單1060， 愛的通話選單或使用向導選單。次級選單可允許主叫用戶沖企查主叫用戶最近幾 天對其通話的被叫用戶的信息和愛的等級。
例如，在主叫用戶選擇最近通話歷史選單1010的情況，最近通話歷史1020 是以預定的方式設置和顯示的。最近通話歷史1020可包括被叫用戶的電話號碼 和愛的等級。同時，在主叫用戶選擇愛的排序選單1060的情況，-故叫用戶1070 的信息是以愛的等級的降序排列設置和顯示的。
以及，在主叫用戶在最近通話歷史1020中選擇任意被叫用戶或被叫用戶的 信息1070時，主叫用戶可檢查該被叫用戶詳細的愛的檢測結果1040。
圖12是根據(jù)本發(fā)明實施例顯示通過網(wǎng)絡服務提供愛的檢測結果的屏幕，并 且顯示在主叫用戶結束愛的檢測通話之后主叫用戶通過網(wǎng)絡接收的結果屏幕的 視圖。
通過有線或無線終端，主叫用戶接通通過網(wǎng)絡提供本發(fā)明愛的檢測服務的 分析結果的網(wǎng)絡服務器。在主叫用戶接通網(wǎng)絡服務器之后，主叫用戶移動到用于檢查分析結果的選單以檢查詳細的分析結果。這個接通步驟與通常的網(wǎng)絡服
務一致，以及因此省略詳細的說明。圖12 (a)顯示在主叫用戶接通網(wǎng)絡服務器 并且選擇最近通話歷史選單時顯示的網(wǎng)頁。
最近通話歷史網(wǎng)頁包括主叫用戶最近幾天對其通話的^皮叫用戶的電話號石馬 1100、通話日期1105、被叫用戶的愛的等級1110、詳細查詢1115以及內容1120。 包括上述列表的最近通話歷史網(wǎng)頁可根據(jù)服務類型而不同。例如，在主叫用戶 利用筆記本電腦通過互聯(lián)網(wǎng)電話檢測被叫用戶的愛的情況，筆記本電腦的IP號 碼和互聯(lián)網(wǎng)電話號碼可顯示在電話號碼1100中。
在通話日期1105中，顯示了主叫用戶和被叫用戶之間通話的日期，并且主 叫用戶總的通話持續(xù)時間可進一步顯示。以及，在愛的等級1110中，對應于電 話號碼1100的被叫用戶的愛的等級可作為預定的圖像或值顯示。同時，在詳細 查詢1115中，顯示了具有超鏈接的文本，并且根據(jù)主叫用戶文本的選擇，文本 的詳細內容顯示為彈出窗口。在內容1120中，鏈接了可根據(jù)服務類型提供的對 話文件，和音樂文件或文本文件。內容1120可根據(jù)內容的存在顯示或不顯示。
在主叫用戶選擇詳細查詢1115時，主叫用戶可通過彈出窗口檢查任意被叫 用戶的愛的等級結果值1125、在通話過程中的情緒變化1130以及愛的等級的變 化1135。
如圖12 (b)中所示顯示詳細查詢屏幕，在愛的等級結果值1125中，愛的 等級、專心等級、期待等級和尷尬等級以圖表或表格1140的類型顯示，而最后 的結果1145以文本或圖像的類型顯示。以圖表或表格1140顯示的愛的等級結 果值1125以及以文本或圖像顯示的最后結果1145可根據(jù)移動通信服務供應者 或提供愛的檢測服務的單獨的服務供應者而以不同的方式顯示，并且因此顯示 方法不限制在這點上。內容1120、在通話過程中情緒的變化1130以及愛的等級 的變化1135參考圖13介紹。
圖13是根據(jù)本發(fā)明另一實施例顯示通過網(wǎng)絡服務提供愛的檢測結果的屏幕 的視圖，而顯示在圖12中的在通話過程中情緒的變化1130,愛的等級的變化 1135以及詳細查詢1115的內容1120參考圖13介紹。
詳細查詢1115的在通話過程中情緒的變化1130根據(jù)時間顯示在主叫用戶和 被叫用戶之間通話的過程中檢測到的愛的等級、專心等級、期待等級和尷尬等 級，以及如圖13 (a)中所示，愛的等級的變化1135根據(jù)周期顯示在預定的周期期間測度到的愛的等級、專心等級、期待等級和尷搶等級。優(yōu)選地，在通話
過程中情緒的變化1130和愛的等級的變化1135以虛線圖表1150顯示，然而本 發(fā)明不限制在這點上。
在通話過程中情緒的變化1130和愛的等級的變化1135根據(jù)時間和預定的 周期分別提供愛的檢測結果，使得主叫用戶可在任意時間或周期容易地檢查愛 的檢測結果。以及，如圖13 (a)中所示，用戶可分別在通話過程中情緒的變化 1130和愛的等級的變化1135中指定任意時間或周期，并且查出結果1155。
同時，在主叫用戶選擇具有超鏈接的內容1120的情況，相應的內容作為彈 出窗口顯示如圖13 (b)中所示。內容1120可包括語音記錄文件1160,其中語 音分析對象的語音是記錄的，或包括對應于分析結果的發(fā)生次數(shù)的檢測1165。 存儲主叫用戶和被叫用戶之間對話的語音記錄文件1160可通過主叫用戶的選擇 清除。優(yōu)選地，可在重放語音記錄文件1160時顯示的圖表可以是作為語音分析 對象的被叫用戶的愛的檢測分析結果。
在被叫用戶的分析結果中，最后的愛的等級可以文本類型顯示，而專心等 級、期待等級、尷尬等級和著重等級可以圖表類型顯示。以及，對應于被叫用 戶的分析結果的內容1120可在語音記錄文件1160重放過程中顯示。內容1120 可根據(jù)服務類型包括建議、氣氛產(chǎn)生方法或者音樂，并且可以超鏈接類型提供。 同時，在檢測的發(fā)生次數(shù)1165中，每個等級的檢測的發(fā)生次數(shù)以及最后的愛的 等級可以直方圖類型顯示，而顯示方法可根據(jù)服務類型而不同。
換句話說，當主叫用戶聽在對話中的被叫用戶的言語時，主叫用戶可查看 在該處相應的被叫用戶的言語愛的等級是高或低的圖表或檢測的發(fā)生次數(shù)，并 且接收相應的內容120。
同時，參考圖13介紹的通過網(wǎng)絡服務提供的語音分析結果僅重》文被叫用戶 的語音并且以圖表類型提供^L叫用戶的語音分析結果。然而，在本實施例中， 主叫用戶可檢查被叫用戶情緒的變化，但是不能檢查被叫用戶的情緒在主叫用 戶的哪句言語處怎樣變化。因此，在另一實施例中，本發(fā)明當重放主叫用戶和 被叫用戶之間的全部對話時，以圖表類型在被叫用戶的語音開始的時間提供4皮 叫用戶的語音分析結果。為此，需要使主叫用戶和被叫用戶之間的對話與被叫 用戶的語音分析結果同步的技術。
圖14是顯示用于使主叫用戶和被叫用戶之間的全部對話與被叫用戶的語音分析結果同步的方法實施例的視圖。
分層語音分析服務器140記錄在主叫用戶和被叫用戶之間的通話過程中的 全部對話，分離^皮叫用戶的語音，以上述方法運行愛的檢測分析，并且存儲愛 的檢測分析結果。圖14 (a)隨著時間軸顯示主叫用戶(A)和被叫用戶(B) 之間的對話，而圖14(b)顯示分離的被叫用戶的語音(B)。分層語音分析服務 器140分析分離的被叫用戶的語音(B )。語音分析是對被叫用戶的語音(B )單 元做出的。如圖14中所示，被叫用戶(B)的對話包括四個語音單元，愛的檢 測分析是對每個語音單元做出的，而四個語音分析結果作為段分區(qū)地存儲(1段、 2段、3段和4段)。
在分層語音分析服務器140在記錄全部對話的同時分離被叫用戶的語音并 且運行語音分析時，分層語音分析服務器140基于通話開始時間檢查被叫用戶 的每個語音的開始時間和結束時間，并且將語音開始時間(計時器指針)和語 音延續(xù)時間(段長)記錄到每個語音分析結果段的時間戳字段(time stamp field) 中。例如，在通話開始時間之后一秒的時間被叫用戶開始反應主叫用戶的問題 以及在通話開始時間之后兩秒的時間完成反應的情況，分層語音分析服務器140 將1作為語音開始時間(時間指針)而1作為語音延續(xù)時間(段長)記錄進祐: 叫用戶相應的語音分析結果段的時間戳字段。
如圖14 (c)中所示，在被叫用戶(B)的第一語音分析結果段的時間戳字 段中，3是作為語音開始時間(時間指針)記錄的，而1是作為語音延續(xù)時間(段 長)記錄的。在被叫用戶(B)的第二語音分析結果段的時間戳字段中，7是作 為語音開始時間(時間指針)記錄的而l是作為語音延續(xù)時間(段長)記錄的。 在被叫用戶(B)的第三語音分析結果段的時間戳字段中，ll是作為語音開始時 間(時間指針)記錄的而3是作為語音延續(xù)時間(段長)記錄的。在被叫用戶 (B)的第四語音分析結果段的時間戳字段中，17是作為語音開始時間(時間指 針)記錄的而2是作為語音延續(xù)時間(段長)記錄的。
無論何時被叫用戶的語音出現(xiàn)，分層語音分析服務器140基于通話開始時 間檢查語音開始時間和語音延續(xù)時間，并且以上述方式將語音開始時間和語音 延續(xù)時間記錄到相應的語音分析結果段的時間戳字段中。因此，分層語音分析 服務器140基于記錄在被叫用戶語音分析結果段的時間戳字段中的時間信息使 全部對話與被叫用戶的語音分析結果同步，并且通過網(wǎng)絡服務提供同步的結果。
28如果主叫用戶在網(wǎng)絡上重放全部對話，分層語音分析服務器140從重放開 始時間檢查時間，并且在到達記錄在被叫用戶的每個語音分析結果段的時間戳 字段中的時間時，以圖表類型提供相應語音分析結果段的愛的檢測結果。因此， 主叫用戶可檢查被叫用戶如何對主叫用戶的某句言語做出反應。
同樣，由于從這個詳細說明對于本領域技術人員在本發(fā)明的精神和范圍內 的各種改變和修改將變得顯而易見，應當理解詳細說明和特定示例，雖然指示 本發(fā)明的優(yōu)選實施例，僅作為舉例說明提供。
如上所述，在主叫用戶和被叫用戶之間的通話過程中，本發(fā)明分析被叫用 戶的情緒狀態(tài)并且將被叫用戶的情緒狀態(tài)實時提供給主叫用戶，從而超出簡單 的語音/視頻通信激起主叫用戶的好奇心。因此，本發(fā)明可顯著地增加飽和語音 通話量，從而增加銷售額。并且，本發(fā)明允許主叫用戶在實際語音通信之前對 虛擬對方說話，使得主叫用戶可實時檢查是否他/她適當?shù)乇磉_他/她的情緒，從 而減少在對實際被叫用戶通話的過程中可能出現(xiàn)的錯誤或誤解。
以上所揭露的僅為本發(fā)明的較佳實施例而已，當然不能以此來限定本發(fā)明 之權利范圍，因此依本發(fā)明權利要求所作的等同變化，仍屬本發(fā)明所涵蓋的范 圍。
權利要求
1. 一種用于在通信網(wǎng)絡中提供語音分析服務的方法，所述方法包括(a)根據(jù)主叫終端的通話連接在所述主叫終端和被叫終端之間建立通信信道；(b)對通過所述建立的通信信道從所述被叫終端傳送到所述主叫終端的被叫用戶的語音實時執(zhí)行分層語音分析以提取所述被叫用戶的情緒狀態(tài)信息；并且(c)將所述提取的所述被叫用戶的情緒狀態(tài)信息實時傳送到所述主叫終端。
2. 如權利要求1所述的用于提供語音分析服務的方法，其特征在于 所述步驟(a)包括從所述主叫終端接收包括用于所述語音分析服務的特征代碼和所述被叫用 戶的電話號碼的通話發(fā)源；基于所述特征代碼激活語音分析4莫式；并且利用所述被叫用戶的電話號碼在所述主叫終端和所述^皮叫終端之間建立所 述通信信道。
3. 如權利要求1或2所述的用于提供語音分析服務的方法，其特征在于 所述情緒狀態(tài)信息是表現(xiàn)所述被叫用戶對主叫用戶愛的程度的愛的等級以及表現(xiàn)所述被叫用戶對所述主叫用戶信賴程度的可信賴性等級中的任何一個。
4. 如權利要求1所述的用于提供語音分析服務的方法，其特征在于所述方 法進一步包括在所述通話結束之后，將所述被叫用戶的所述情緒狀態(tài)信息準備為消息并 且將所述消息傳送給所述主叫終端。
5. 如權利要求1所述的用于提供語音分析服務的方法，其特征在于所述步 驟(b)包括從通過所述通信信道傳送和接收的語音分離所述被叫用戶的語音；從所述被叫用戶的所述分離的語音析取語音分析參數(shù)；利用所迷析取的參數(shù)提取所述被叫用戶的所述情緒狀態(tài)信息。
6. —種用于在視頻通信網(wǎng)絡中視頻通信過程中提供語音分析服務的方法，所 述方法包括(a) 根據(jù)主叫終端的視頻通信通話連接在所述主叫終端和被叫終端之間建 立視頻通信信道；(b) 對通過所述視頻通信信道從所述被叫終端傳送到所述主叫終端的被叫 用戶的語音實時執(zhí)行分層語音分析以提取所述被叫用戶的情緒狀態(tài)信息；(c) 將所述被叫用戶的所述提取的情緒狀態(tài)信息轉換成可視數(shù)據(jù)；并且(d) 通過所述視頻通信信道將所述轉換的可視數(shù)據(jù)以及要傳送給所述主叫 終端的所述被叫用戶的視頻傳送并且顯示給所述主叫終端。
7. 如權利要求6所述的用于提供語音分析服務的方法，其特征在于 在所述步驟(d)中將所述轉換的可視數(shù)據(jù)和所述被叫用戶的視頻集成為一個圖像并且將所述集成的圖像傳送給所述主叫終端。
8. 如權利要求6所述的用于提供語音分析服務的方法，其特征在于 所述步驟(c)對應于所述被叫用戶的所述提取的情緒狀態(tài)信息選擇多媒體內容。
9. 如權利要求6所述的用于提供語音分析服務的方法，其特征在于所述方 法進一步包括在接收來自所述主叫終端的用于停止所述語音分析的鍵信號時，停止所述 語音分析。
10. —種用于在通信網(wǎng)絡中提供語音分析服務的方法，所述方法包括(a) 接收來自主叫終端的用于所述語音分析服務的通話連接；(b) 將所述語音分析服務的模式信息通知所述主叫終端并且接收響應所述通知的選擇；(c) 在主叫用戶選擇練習模式的情況，將虛擬對方和練習方法通知所述主 叫終端并且接收響應所述通知的選擇；(d) 根據(jù)由所述主叫用戶選定的所述虛擬對方和練習方法接收來自所述主 叫終端的所述主叫用戶的語音；并且(e) 對所述主叫用戶的所述接收的語音執(zhí)行分層語音分析以提取語音分析 結果，并且將所述提取的語音分析結果實時傳送到所述主叫終端。
11. 如權利要求IO所述的用于提供語音分析服務的方法，其特征在于所述 方法進一步包括(f) 在所述練習模式結束之后，在所述主叫用戶和對應于所述虛擬對方的 實際的被叫用戶之間建立通信信道；(g) 對通過所述通信信道傳送給所述主叫用戶的所述被叫用戶的語音執(zhí)行 分層語音分析以提取語音分析結果；并且(h) 將所述提取的語音分析結果實時傳送給所述主叫用戶。
12. —種用于在通信網(wǎng)絡中提供語音分析服務的系統(tǒng)，所述系統(tǒng)包括 交換中心，用于從主叫終端接收包括用于所述語音分析服務的特征代碼以及被叫用戶的電話號碼的通話發(fā)源，并且基于所述特征代碼發(fā)送所述通話發(fā)源； 以及分層語音分析服務器，用于接收所述發(fā)送的通話，對應于所述被叫用戶的 電話號碼在所述主叫終端和被叫終端之間建立通信信道，分析通過所述建立的 通信信道傳送給所述主叫終端的所述被叫用戶的語音以實時提取情緒狀態(tài)信 息，并且將所述提取的情緒狀態(tài)信息實時傳送到所述主叫終端。
13. 如權利要求12所述的用于提供語音分析服務的系統(tǒng)，其特征在于'. 所述分層語音分析服務器將對應于所述情緒狀態(tài)信息的多媒體內容傳送給所述主叫終端和所述凈皮叫終端的至少任何一個。
14. 一種用于在移動通信網(wǎng)絡中視頻通信過程中提供語音分析服務的移動通信裝置，所述移動通信裝置包括服務控制單元，用于根據(jù)來自主叫終端的視頻通信通話連接信號控制服務操作模式；視頻通信單元，用于在所述服務控制單元的控制下在所述主叫終端和被叫終端之間建立通信信道以支持視頻通信；以及語音分析引擎，用于分析在所述服務控制單元的控制下通過所述通信信道 傳送到所述主叫終端的被叫用戶的語音以將所述被叫用戶的情緒狀態(tài)轉換成可 視數(shù)據(jù)。
15.如權利要求14所述的用于在移動通信網(wǎng)絡中視頻通信過程中提供語音 分析服務的移動通信裝置，進一步包括圖像集成單元，用于將所述可視數(shù)據(jù)和所述被叫用戶的^見頻集成為一個圖 像并且將所述集成的圖像傳送給所述主叫終端。
全文摘要
本發(fā)明實施例涉及用于提供語音分析服務的系統(tǒng)和方法，及其裝置，以及根據(jù)本發(fā)明用于在通信網(wǎng)絡中提供語音分析服務的方法包括根據(jù)主叫終端的通話連接在主叫終端和被叫終端之間建立通信信道；對通過建立的通信信道從被叫終端傳送到主叫終端的被叫用戶語音實時執(zhí)行分層語音分析以提取被叫用戶的情緒狀態(tài)信息；并且將提取的被叫用戶的情緒狀態(tài)信息實時傳送到主叫終端。
文檔編號H04M3/42GK101485188SQ200780025409
公開日2009年7月15日 申請日期2007年7月6日 優(yōu)先權日2006年7月6日
發(fā)明者安希中, 曹圭錫, 樸時佑 申請人:Ktf電信公司;艾格泰克有限公司