移動(dòng)終端和控制該移動(dòng)終端的方法
【專利摘要】本發(fā)明涉及移動(dòng)終端和控制該移動(dòng)終端的方法。該移動(dòng)終端包括：顯示單元，在其上運(yùn)動(dòng)圖像被輸出；用戶輸入單元，通過(guò)其選擇運(yùn)動(dòng)圖像的運(yùn)動(dòng)圖像片段；以及控制器，該控制器在顯示單元上輸出與從所選擇的運(yùn)動(dòng)圖像片段輸出的音頻信息相對(duì)應(yīng)的視頻信息。控制器將從所選擇的運(yùn)動(dòng)圖像片段輸出的語(yǔ)音信息轉(zhuǎn)換成文本信息并且在顯示單元上輸出文本信息。
【專利說(shuō)明】移動(dòng)終端和控制該移動(dòng)終端的方法

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及一種移動(dòng)終端并且更加具體地涉及一種能夠回放運(yùn)動(dòng)圖像的移動(dòng)終 端和控制該移動(dòng)終端的方法。

【背景技術(shù)】
[0002] 終端可以被劃分成移動(dòng)/便攜式終端和固定終端。而且，移動(dòng)終端可以被分類成 手持式終端和車載終端。
[0003] 移動(dòng)終端能夠被配置成捕獲靜止圖像或者運(yùn)動(dòng)圖像、播放音樂(lè)或視頻文件、玩游 戲、以及接收廣播以用作集成多媒體播放器。對(duì)于移動(dòng)終端的最近的許多改進(jìn)包括對(duì)移動(dòng) 終端的結(jié)構(gòu)組件的變化并且也包括對(duì)支持移動(dòng)終端的功能的軟件變化。
[0004] 另外，經(jīng)由搜索條能夠搜尋運(yùn)動(dòng)圖像中的特定場(chǎng)景，通過(guò)該搜索條能夠調(diào)節(jié)運(yùn)動(dòng) 圖像的回放片段。具體地，通過(guò)將搜索條移動(dòng)到任意的位置能夠僅回放運(yùn)動(dòng)圖像。
[0005] 結(jié)果，難以搜尋所期待的場(chǎng)景，因?yàn)橥ㄟ^(guò)取決于搜索條的移動(dòng)輸出的圖像或者語(yǔ) 音僅能夠搜尋所期待的場(chǎng)景，例如，通常，僅圖像被輸出并且語(yǔ)音沒(méi)有被聽到或者在與在高 速移動(dòng)的搜索條相對(duì)應(yīng)的高速，這是搜尋所期待的場(chǎng)景的困難的原因。


【發(fā)明內(nèi)容】

[0006] 為了解決這些問(wèn)題，根據(jù)本發(fā)明的實(shí)施例，將語(yǔ)音轉(zhuǎn)換成文本信息的語(yǔ)音到文本 (STT)技術(shù)以及音頻縮放技術(shù)被應(yīng)用于移動(dòng)終端。
[0007] 音頻縮放技術(shù)使聲音能夠被記錄在特定的方向中，其中使用方向性麥克風(fēng)或者多 個(gè)麥克風(fēng)從聲源輸出聲音。
[0008] 通常，在聲源之間的選擇性的方向性被用于當(dāng)從用戶看到時(shí)在水平或者垂直軸中 從聲源捕獲聲音。為了提供選擇性的方向性，多個(gè)麥克風(fēng)被布置在移動(dòng)終端的后側(cè)上以相 互垂直或者成為交叉的形式。對(duì)于兩個(gè)麥克風(fēng)，兩個(gè)麥克風(fēng)在縱向或者橫向方向中被布置 成直線，在其間具有間距。
[0009] 具體地，通過(guò)對(duì)通過(guò)多個(gè)麥克風(fēng)捕獲的聲音(例如，語(yǔ)音）執(zhí)行諸如波束形成的信 號(hào)處理確保選擇性的方向性。波束形成機(jī)制，通過(guò)與聲束形成聲音捕獲范圍生成選擇性的 方向性。
[0010] 因此，詳細(xì)描述的一個(gè)方面是為了提供一種用于在運(yùn)動(dòng)圖像中搜索特定場(chǎng)景以提 高用戶便利的移動(dòng)終端和控制該移動(dòng)終端的方法。
[0011] 為了實(shí)現(xiàn)這些和其它的優(yōu)點(diǎn)并且根據(jù)本說(shuō)明書的用途，如在此實(shí)施和廣泛地描述 的，提供一種移動(dòng)終端，包括：例如，顯示單元，在其上運(yùn)動(dòng)圖像被輸出；用戶輸入單元，通 過(guò)其選擇運(yùn)動(dòng)圖像的片段；以及控制器，該控制器在顯示單元上輸出與從所選擇的片段輸 出的音頻信息相對(duì)應(yīng)的視頻信息?？刂破骺梢詫乃x擇的片段輸出的語(yǔ)音信息轉(zhuǎn)換成文 本信息并且在顯示單元上輸出文本信息。
[0012] 取決于選擇運(yùn)動(dòng)圖像的片段的搜索速度，控制器可以不同地輸出與音頻信息相對(duì) 應(yīng)的視頻息。
[0013] 控制器可以以文本信息與發(fā)出音頻信息的說(shuō)話者相鄰的方式在顯示單元上輸出 文本信息。
[0014] 控制器可以以發(fā)出音頻信息的說(shuō)話者被高亮的方式控制顯示單元。
[0015] 控制器可以在顯示單元上輸出在取決于搜索速度選擇的文本信息中的關(guān)鍵字。
[0016] 控制器可以將經(jīng)由用戶輸入單元接收到的拖動(dòng)輸入施加到在顯示單元上輸出的 搜索條并且因此可以進(jìn)入內(nèi)容搜索模式并且可以選擇運(yùn)動(dòng)圖像的片段，并且搜索條的位置 分別可以對(duì)應(yīng)于用于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)。
[0017] 控制器可以將從被選擇的片段輸出的語(yǔ)音信息轉(zhuǎn)換成文本信息并且在對(duì)應(yīng)于用 于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)的搜索條的位置上輸出文本信息，從該時(shí)間點(diǎn)輸出語(yǔ)音信息。
[0018] 控制器可以在對(duì)應(yīng)于用于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)的搜索條的位置上輸出與音 頻信息相對(duì)應(yīng)的視頻信息，從該時(shí)間點(diǎn)輸出音頻信息。
[0019] 顯示單元分別可以顯示與當(dāng)回放運(yùn)動(dòng)圖像時(shí)輸入的多個(gè)音頻信息相對(duì)應(yīng)的多個(gè) 音頻條，并且相對(duì)于音頻條中的每一個(gè)，控制器可以在與用于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)相 對(duì)應(yīng)的音頻條的位置上分別輸出與從用于回放的時(shí)間點(diǎn)輸出的音頻信息的項(xiàng)目相對(duì)應(yīng)的 視頻信息的項(xiàng)目。
[0020] 為了實(shí)現(xiàn)這些和其它的優(yōu)點(diǎn)并且根據(jù)本說(shuō)明書的用途，如在此實(shí)施和廣泛地描述 的，提供一種控制移動(dòng)終端的方法。該方法可以包括，例如，選擇運(yùn)動(dòng)圖像的片段；和在顯示 單元上輸出與從被選擇的片段輸出的音頻信息相對(duì)應(yīng)的視頻信息。視頻信息的輸出可以包 括將從被選擇的片段輸出的語(yǔ)音信息轉(zhuǎn)換成文本信息并且在顯不單兀上輸出文本信息。
[0021] 視頻信息的輸出可以包括，取決于選擇運(yùn)動(dòng)圖像的片段的搜索速度，不同地輸出 與音頻信息相對(duì)應(yīng)的視頻信息。
[0022] 視頻信息的輸出可以包括，以文本信息與說(shuō)出音頻信息的說(shuō)話者相鄰的方式在顯 示單元上輸出文本信息。
[0023] 視頻信息的輸出可以包括，以說(shuō)出音頻信息的說(shuō)話者被高亮的方式控制顯示單 J Li 〇
[0024] 視頻信息的輸出可以包括，在顯示單元上輸出在取決于搜索速度選擇的文本信息 中的關(guān)鍵字。
[0025] 片段的選擇可以包括將拖動(dòng)輸入施加到在顯示單元上輸出的搜索條并且從而進(jìn) 入搜索模式并且選擇運(yùn)動(dòng)圖像的片段。搜索條的位置分別可以對(duì)應(yīng)于運(yùn)動(dòng)圖像的回放的時(shí) 間點(diǎn)。
[0026] 視頻信息的輸出可以包括將從所選擇的片段輸出的語(yǔ)音信息轉(zhuǎn)換成文本信息并 且在對(duì)應(yīng)于用于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)的搜索條的位置上輸出文本信息，從該時(shí)間點(diǎn)輸 出語(yǔ)音信息。
[0027] 視頻信息的輸出可以包括，在對(duì)應(yīng)于用于回放的時(shí)間點(diǎn)的搜索條的位置上輸出與 音頻信息相對(duì)應(yīng)的視頻信息，從該時(shí)間點(diǎn)輸出音頻信息。
[0028] 片段的選擇可以包括，當(dāng)運(yùn)動(dòng)圖像被回放時(shí)，分別輸出與多個(gè)音頻信息輸入相對(duì) 應(yīng)的多個(gè)音頻條。視頻信息的輸出可以包括，相對(duì)于音頻條中的每一個(gè)，在與用于運(yùn)動(dòng)圖像 的回放的時(shí)間點(diǎn)相對(duì)應(yīng)的音頻條的位置上，分別輸出與從用于回放的時(shí)間點(diǎn)輸出的音頻信 息的項(xiàng)目相對(duì)應(yīng)的視頻信息的項(xiàng)目。
[0029] 根據(jù)在下文中給出的詳細(xì)描述，本申請(qǐng)的進(jìn)一步范圍將變得更加顯然。然而，應(yīng)理 解的是，僅通過(guò)說(shuō)明給出指示本發(fā)明的優(yōu)選實(shí)施例的特定示例和詳細(xì)描述，對(duì)本領(lǐng)域的技 術(shù)人員來(lái)說(shuō)本發(fā)明的精神和范圍內(nèi)的各種變化和修改將變得更加顯然。

【專利附圖】

【附圖說(shuō)明】
[0030] 被包括以提供本發(fā)明的進(jìn)一步理解并且被并入到本申請(qǐng)中且組成本申請(qǐng)的一部 分的附圖，圖示示例性實(shí)施例并且連同描述一起用以解釋本發(fā)明的原理。
[0031] 圖1A是圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的音頻縮放功能的圖；
[0032] 圖1B是圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的移動(dòng)終端的框圖；
[0033] 圖2A和圖2B是圖示其中根據(jù)本發(fā)明的移動(dòng)終端能夠操作的電信系統(tǒng)的概述；
[0034] 圖3A是圖示根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端的前透視圖并且圖3B是圖示根據(jù)本 發(fā)明的實(shí)施例的移動(dòng)終端的后透視圖；
[0035] 圖4是圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的控制移動(dòng)終端的方法的流程圖；
[0036] 圖5 (a)_圖7 (d)是圖示用戶接口的實(shí)施例的顯示屏幕，通過(guò)該用戶接口音頻信 息被轉(zhuǎn)換成文本信息并且得到的文本信息被輸出；
[0037] 圖8 (a)_圖9 (d)是圖示用戶接口的實(shí)施例的顯示屏幕，通過(guò)該用戶接口與音頻 信息相對(duì)應(yīng)的視頻信息被輸出；
[0038] 圖10 (a)_圖13 (c)是圖示用戶接口的實(shí)施例的顯示屏幕，通過(guò)該用戶接口與多 個(gè)音頻信息相對(duì)應(yīng)的視頻信息的項(xiàng)目被輸出；以及
[0039] 圖14 (a)_圖15 (c)是圖示用戶接口的實(shí)施例的顯示屏幕，通過(guò)該用戶接口搜尋 包括音頻信息的運(yùn)動(dòng)圖像。

【具體實(shí)施方式】
[0040] 參考附圖，現(xiàn)在詳細(xì)地描述示例性實(shí)施例。為了參考附圖簡(jiǎn)要地描述，相同或者等 效的組件將會(huì)被提供有相同的附圖標(biāo)記，并且其描述將不會(huì)被重復(fù)。被用于在下面的描述 中公開的組成要素的術(shù)語(yǔ)"模塊"和"單元"僅僅用于解釋的方便，并且屬于沒(méi)有將任何特 定的意義或者功能給予被公開的組成要素。在描述本發(fā)明中，如果對(duì)于相關(guān)的已知功能或 者構(gòu)造的詳細(xì)解釋被認(rèn)為沒(méi)有必要地轉(zhuǎn)移本公開的主旨，則省略這樣的解釋，但是本領(lǐng)域 的技術(shù)人員將會(huì)理解。附圖被用于幫助容易地理解本發(fā)明的技術(shù)思想，并且應(yīng)理解本公開 的思想不受附圖限制。
[0041] 例如，在此描述的移動(dòng)終端可以包括蜂窩電話、智能電話、膝上型計(jì)算機(jī)、數(shù)字廣 播終端、個(gè)人數(shù)字助理（PDA)、便攜式多媒體播放器（PMP)、導(dǎo)航儀、平板PC、平板電腦、超級(jí) 本等等。然而，本領(lǐng)域的技術(shù)人員可以容易地理解，根據(jù)本說(shuō)明書的示例性實(shí)施例的配置能 夠被應(yīng)用于例如諸如數(shù)字TV和臺(tái)式計(jì)算機(jī)的固定終端。
[0042] 圖1A是圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的音頻縮放方法的一個(gè)實(shí)施例的圖。如在 圖1A中所圖示，諸如波束形成和降噪的音頻縮放技術(shù)能夠被應(yīng)用于在圖像拍攝期間通過(guò) 多個(gè)麥克風(fēng)122捕獲的音頻信息并且然后與通過(guò)相機(jī)121捕獲的圖像信息相結(jié)合。由被應(yīng) 用的音頻縮放技術(shù)和捕獲到的圖像信息的組合產(chǎn)生的圖像可以被壓縮成預(yù)定的格式并且 將其存儲(chǔ)在存儲(chǔ)器160中。
[0043] 具體地，波束形成處理單元在用于被選擇的拍攝的用戶選擇的主題上自適應(yīng)地形 成聲束，并且設(shè)置聲音捕獲范圍和減震單元，組成控制器180的信號(hào)處理單元。
[0044] 另外，當(dāng)回放圖像時(shí)，由組合產(chǎn)生的圖像被分離成視頻信息和音頻信息。然后，通 過(guò)將音頻縮放技術(shù)應(yīng)用于由分離產(chǎn)生的音頻信息選擇性地捕獲用于拍攝的主題的聲音。通 過(guò)這樣做，執(zhí)行圖像編輯。
[0045] 圖1B是根據(jù)一個(gè)示例性實(shí)施例的移動(dòng)終端100的框圖。如在圖1B中所示，移動(dòng) 終端100可以包括組件，諸如無(wú)線通信單元110、音頻/視頻（A/V)輸入單元120、用戶輸入 單元130、感測(cè)單元140、輸出單元150、存儲(chǔ)器160、接口單元170、控制器180、電源190等 等。圖1B示出具有各種組件的移動(dòng)終端100,但是理解的是，不要求實(shí)現(xiàn)所有的示出的組 件。可以可替換地實(shí)現(xiàn)更多或者更少的組件。
[0046] 在下文中，將會(huì)依次描述各個(gè)組件110至190。無(wú)線通信單元110通常可以包括一 個(gè)或者多個(gè)模塊，它們?cè)试S移動(dòng)終端100和無(wú)線通信系統(tǒng)之間或者移動(dòng)終端100和移動(dòng)終 端100位于的網(wǎng)絡(luò)之間的無(wú)線通信。例如，無(wú)線通信單元110可以包括廣播接收模塊111、 移動(dòng)通信模塊112、無(wú)線互聯(lián)網(wǎng)模塊113、短程通信模塊114、位置信息模塊115等等中的至 少一個(gè)。
[0047] 廣播接收模塊111經(jīng)由廣播信道接收來(lái)自外部廣播管理實(shí)體的廣播信號(hào)和/或廣 播相關(guān)信息。廣播信道可以包括衛(wèi)星信道和地面信道。廣播管理實(shí)體可以指示生成和發(fā)送 廣播信號(hào)和/或廣播相關(guān)信息的服務(wù)器或者接收預(yù)生成的廣播信號(hào)和/或廣播相關(guān)信息并 且將它們發(fā)送到移動(dòng)終端的服務(wù)器。
[0048] 除了別的之外，廣播信號(hào)可以被實(shí)現(xiàn)為TV廣播信號(hào)、無(wú)線電廣播信號(hào)以及數(shù)據(jù)廣 播信號(hào)。廣播信號(hào)可以進(jìn)一步包括與TV或者無(wú)線電廣播信號(hào)組合的數(shù)據(jù)廣播信號(hào)。廣播 相關(guān)信息的示例可以包括與廣播頻道、廣播節(jié)目、廣播服務(wù)提供商等等相關(guān)聯(lián)的信息。廣播 相關(guān)信息可以經(jīng)由移動(dòng)通信網(wǎng)絡(luò)來(lái)提供，并且由移動(dòng)通信模塊112接收。
[0049] 可以按照各種形式來(lái)實(shí)現(xiàn)廣播相關(guān)信息。例如，廣播相關(guān)信息可以包括數(shù)字多媒 體廣播（DMB)的電子節(jié)目指南（EPG)和數(shù)字視頻廣播-手持（DVB-Η)的電子服務(wù)指南（ESG) 等等。
[0050] 廣播接收模塊111可以被配置成接收從各種類型的廣播系統(tǒng)發(fā)送的數(shù)字廣播信 號(hào)。這樣的廣播系統(tǒng)包括數(shù)字多媒體廣播-地面（DMB-T)、數(shù)字多媒體廣播-衛(wèi)星（DMB-S)、 媒體前向鏈路（MediaFLCT )、數(shù)字視頻廣播-手持（DVB-Η)、綜合業(yè)務(wù)數(shù)字廣播-地面 (ISDB-T)等等。廣播接收模塊111可以被配置為適合于發(fā)送廣播信號(hào)的每一種廣播系統(tǒng)以 及數(shù)字廣播系統(tǒng)。經(jīng)由廣播接收模塊111接收到的廣播信號(hào)和/或廣播相關(guān)信息可以被存 儲(chǔ)在諸如存儲(chǔ)器160的適當(dāng)?shù)脑O(shè)備中。
[0051] 移動(dòng)通信模塊112接收來(lái)自移動(dòng)通信網(wǎng)絡(luò)上的網(wǎng)絡(luò)實(shí)體(例如，基站、外部移動(dòng)終 端、服務(wù)器等等)中的至少一個(gè)的無(wú)線信號(hào)/將無(wú)線信號(hào)發(fā)送到移動(dòng)通信網(wǎng)絡(luò)上的網(wǎng)絡(luò)實(shí)體 (例如，基站、外部移動(dòng)終端、服務(wù)器等等)中的至少一個(gè)。在此，無(wú)線信號(hào)可以包括音頻呼叫 信號(hào)、視頻（電話）呼叫信號(hào)，或者根據(jù)文本/多媒體消息的傳輸/接收的各種格式的數(shù)據(jù)。
[0052] 移動(dòng)通信模塊112可以實(shí)現(xiàn)視頻呼叫模式和語(yǔ)音呼叫模式。視頻呼叫模式指示在 觀看被叫方的圖像的情況下進(jìn)行呼叫的狀態(tài)。語(yǔ)音呼叫模式指示在沒(méi)有觀看被叫方的圖像 的情況下呼叫的狀態(tài)。為了實(shí)現(xiàn)視頻呼叫模式和語(yǔ)音呼叫模式，無(wú)線通信模塊112可以發(fā) 送和接收語(yǔ)音和圖像中的至少一個(gè)。
[0053] 無(wú)線互聯(lián)網(wǎng)模塊113支持用于移動(dòng)終端的無(wú)線互聯(lián)網(wǎng)接入。此模塊可以被 內(nèi)部地或者外部地耦合到移動(dòng)終端100。此無(wú)線互聯(lián)網(wǎng)接入的示例可以包括無(wú)線LAN (WLAN) (Wi-Fi)、無(wú)線寬帶（Wibro)、全球微波接入互操作（Wimax)、高速下行鏈路分組接入 (HSDPA)等等。
[0054] 短程通信模塊114表示用于短程通信的模塊。用于實(shí)現(xiàn)此模塊的適當(dāng)?shù)募夹g(shù) 可以包括藍(lán)牙（BLUET00THTM)、射頻識(shí)別（RFID)、紅外數(shù)據(jù)協(xié)會(huì)（IrDA)、超寬帶（UWB)、 ZigBeeTM、近場(chǎng)通信（NFC)等等。
[0055] 位置信息模塊115表示用于檢測(cè)或者計(jì)算移動(dòng)終端的位置的模塊。位置信息模塊 115的示例可以包括全球定位系統(tǒng)（GPS)模塊。
[0056] 繼續(xù)參考圖1B，A/V輸入單元120被配置為將音頻或者視頻信號(hào)輸入提供給移動(dòng) 終端。A/V輸入單元120可以包括相機(jī)121和麥克風(fēng)122。相機(jī)121在視頻呼叫模式或者 拍攝模式下接收并且處理通過(guò)圖像傳感器獲得的視頻或者靜止圖畫的圖像幀。被處理的圖 像中貞可以被顯示在顯示單元151上。
[0057] 通過(guò)相機(jī)121處理的圖像幀可以被存儲(chǔ)在存儲(chǔ)器160中或者經(jīng)由無(wú)線通信單元 110被發(fā)送到外部。而且，可以從通過(guò)相機(jī)121獲取的圖像幀計(jì)算用戶的位置信息等等。根 據(jù)移動(dòng)終端的配置可以提供兩個(gè)或者更多個(gè)相機(jī)121。
[0058] 當(dāng)移動(dòng)終端處于特定模式，諸如電話呼叫模式、記錄模式、語(yǔ)音識(shí)別模式等等時(shí)， 麥克風(fēng)122可以接收外部音頻信號(hào)。該音頻信號(hào)被處理為數(shù)字?jǐn)?shù)據(jù)。在電話呼叫模式下，處 理的數(shù)字?jǐn)?shù)據(jù)被轉(zhuǎn)換為可經(jīng)由移動(dòng)通信模塊112發(fā)送到移動(dòng)通信基站的格式用于輸出。麥 克風(fēng)122可以包括配合的噪聲消除算法以消除在接收外部音頻信號(hào)的過(guò)程中產(chǎn)生的噪聲。 [0059] 用戶輸入單元130可以生成用戶輸入的輸入數(shù)據(jù)以控制移動(dòng)終端的操作。用戶輸 入單元130可以包括鍵盤、薄膜開關(guān)、觸摸板(例如，靜壓/電容)、滾動(dòng)輪、滾動(dòng)開關(guān)等等。
[0060] 感測(cè)單元140提供移動(dòng)終端的各個(gè)方面的狀態(tài)測(cè)量。例如，感測(cè)單元140可以檢 測(cè)移動(dòng)終端的打開/閉合狀態(tài)、移動(dòng)終端100的位置的變化、與移動(dòng)終端100的用戶接觸的 存在或不存在、移動(dòng)終端100的位置、移動(dòng)終端100的加速/減速等等，生成用于控制移動(dòng) 終端100的操作的感測(cè)信號(hào)。例如，關(guān)于滑蓋型移動(dòng)終端，感測(cè)單元140可以感測(cè)移動(dòng)終端 的滑動(dòng)部分是否被打開或者閉合。其它的示例包括感測(cè)功能，諸如感測(cè)單元140感測(cè)由電 源190提供的電力的存在或不存在、接口單元170和外部設(shè)備之間的耦合或者其它連接的 存在或不存在。
[0061] 輸出單元150被配置為輸出音頻信號(hào)、視頻信號(hào)或者報(bào)警信號(hào)。輸出單元150可 以包括顯示單元151、音頻輸出模塊153、報(bào)警單元154以及觸覺(jué)模塊155。
[0062] 顯示單元151可以輸出在移動(dòng)終端100中處理的信息。例如，當(dāng)在電話呼叫模式 下操作移動(dòng)終端時(shí)，顯示單元151將會(huì)提供包括與呼叫相關(guān)聯(lián)的信息的用戶界面（UI)或者 圖形用戶界面（GUI)。作為另一示例，如果移動(dòng)終端是處于視頻呼叫模式或者拍攝模式，那 么顯示單元151可以附加地或者替換地顯示拍攝的和/或接收到的圖像、Π或者GUI。
[0063] 例如，使用液晶顯示器（IXD)、薄膜晶體管液晶顯示器（TFT-IXD)、有機(jī)發(fā)光二極 管（0LED)、柔性顯示器、三維（3D)顯示器、電子墨水顯示器等等可以實(shí)現(xiàn)顯示單元151。
[0064] 這些顯示器151中的一些能夠被實(shí)現(xiàn)為透過(guò)其能夠看到外部的透明型或者透光 型，這被稱為"透明顯示器"。透明顯示器的典型示例可以包括透明OLED (T0LED)等等。顯 示單元151的后表面也可以被實(shí)現(xiàn)為透光。在此配置下，用戶能夠通過(guò)由終端主體的顯示 單元151占據(jù)的區(qū)域?yàn)g覽位于終端主體的后側(cè)的對(duì)象。
[0065] 根據(jù)移動(dòng)終端100的配置的方面在數(shù)目上可以實(shí)現(xiàn)兩個(gè)或者更多個(gè)顯示單元 151。例如，多個(gè)顯示單元151可以被布置在一個(gè)表面上以相互隔開或者集成，或者可以被 布置不同的表面上。
[0066] 顯示單元151也可以被實(shí)現(xiàn)成用于顯示立體圖像的立體顯示單元153。
[0067] 在此，立體圖像可以是三維（3D)立體圖像，并且3D立體圖像是指的是使得觀眾感 到在監(jiān)視器或者屏幕上的對(duì)象的漸進(jìn)深度和逼真度與現(xiàn)實(shí)空間相同的圖像。通過(guò)使用雙眼 差異來(lái)實(shí)現(xiàn)3D立體圖像。雙眼差異指的是由兩眼的位置形成的視差。當(dāng)兩眼觀看不同的 2D圖像時(shí)，圖像通過(guò)視網(wǎng)膜向大腦傳送并且在大腦中組合以提供深度的感知和真實(shí)感覺(jué)。
[0068] 立體顯示單元152可以使用立體顯示方案，諸如立體方案(例如，眼鏡方案)、自動(dòng) 立體方案(例如，無(wú)眼鏡方案)、投影方案(例如，全息方案）等。通常用于家庭電視接收器等 的立體方案包括Wheatstone立體方案等。
[0069]自動(dòng)立體方案例如包括視差屏障方案、透鏡方案或集成成像方案等。投影方案包 括反射全息方案、透射全息方案等。
[0070] 通常，3D立體圖像由左圖像(例如，左眼圖像)和右圖像(例如，右眼圖像)組成。根 據(jù)左和右圖像如何被組合為3D立體圖像，將3D立體成像方法劃分為：上下方法，其中，在一 個(gè)幀中上下地布置左和右圖像；L至R (例如，左至右，并排）方法，其中，在一個(gè)幀中左和右 地布置左和右圖像；棋盤方法，其中，以拼貼的形式布置左和右圖像的分片；隔行方法，其 中，通過(guò)行和列交錯(cuò)地布置左和右圖像；以及，時(shí)間依序(或逐幀）方法，其中，按照時(shí)間交錯(cuò) 地顯示左和右圖像。
[0071] 而且，對(duì)于3D縮略圖圖像，左圖像縮略圖和右圖像縮略圖分別從原始圖像幀的左 圖像和右圖像被生成，并且然后被組合以生成單個(gè)3D縮略圖。通常，縮略圖指的是縮小的 圖像或縮小的靜止圖像。顯示被生成的左圖像縮略圖和右圖像縮略圖，并且按照深度的在 其間的水平距離差對(duì)應(yīng)于在屏幕上的左圖像和右圖像之間的視差，提供了立體空間感覺(jué)。
[0072] 如所圖示的，通過(guò)立體處理單元在立體顯示單元152上顯示用于實(shí)現(xiàn)3D立體圖像 所要求的左圖像和右圖像。立體處理單元可以接收3D圖像并且提取左圖像和右圖像，或者 可以接收2D圖像并且將其改變?yōu)樽髨D像和右圖像。
[0073] 在此，如果顯示單元151和觸摸靈敏傳感器(在下文中觸摸傳感器）其間具有分層 的結(jié)構(gòu)（在下文中觸摸屏)，則顯示單元151可以被用作輸入裝置和輸出裝置。觸摸傳感器 可以被實(shí)現(xiàn)成觸摸膜、觸摸片、觸摸板等等。
[0074] 觸摸傳感器可以被配置為將施加給顯示器151的特定部分的壓力，或者從顯示器 151的特定部分出現(xiàn)的電容的變化轉(zhuǎn)換為電輸入信號(hào)。而且，觸摸傳感器可以被配置為不僅 感測(cè)被觸摸的位置和被觸摸的區(qū)域，而且感測(cè)觸摸壓力。在此，觸摸對(duì)象是將觸摸輸入施加 在觸摸傳感器上的對(duì)象。觸摸對(duì)象的示例可以包括手指、觸摸筆、尖筆、指示器等等。
[0075] 當(dāng)通過(guò)觸摸傳感器感測(cè)觸摸輸入時(shí)，相對(duì)應(yīng)的信號(hào)被發(fā)送到觸摸控制器。觸摸控 制器處理接收到的信號(hào)，并且然后將相對(duì)應(yīng)的數(shù)據(jù)發(fā)送到控制器180。因此，控制器180可 以感測(cè)已經(jīng)觸摸了顯示單元151的哪個(gè)區(qū)域。
[0076] 仍然參考圖1B，接近傳感器141可以被布置在由觸摸屏覆蓋的或者在觸摸屏附近 的移動(dòng)終端1〇〇的內(nèi)部區(qū)域?？梢蕴峁┙咏鼈鞲衅?41作為感測(cè)單元140的示例。接近傳 感器141指示，在沒(méi)有機(jī)械接觸的情況下，通過(guò)使用電磁場(chǎng)或者紅外線，感測(cè)靠近要感測(cè)表 面的對(duì)象或者布置在要感測(cè)表面附近的對(duì)象的存在或不存在。接近傳感器141具有比接觸 傳感器更長(zhǎng)的壽命和更強(qiáng)的實(shí)用性。
[0077] 接近傳感器141可以包括透射型光電傳感器、直接反射型光電傳感器、鏡反射型 光電傳感器、高頻振蕩接近傳感器、電容型接近傳感器、磁型接近傳感器、紅外線接近傳感 器等等。當(dāng)觸摸屏被實(shí)現(xiàn)為電容型時(shí)，通過(guò)電磁場(chǎng)的變化來(lái)感測(cè)指針接近觸摸屏。在這種 情況下，觸摸屏也可以被分類為接近傳感器。
[0078] 在下文中，為了簡(jiǎn)要描述，指針位于接近觸摸屏而沒(méi)有接觸的狀態(tài)將會(huì)被稱為"接 近觸摸"，而指針實(shí)際上接觸觸摸屏的狀態(tài)將會(huì)被稱為"接觸觸摸"。關(guān)于指針的接近觸摸， 指針的位置對(duì)應(yīng)于指針垂直于觸摸屏面向的位置。
[0079] 接近傳感器141感測(cè)接近觸摸和接近觸摸方式(例如，距離、方向、速度、時(shí)間、位 置、移動(dòng)狀態(tài)等等)。與感測(cè)的接近觸摸和感測(cè)的接近觸摸方式有關(guān)的信息可以被輸出到觸 摸屏。
[0080] 當(dāng)將觸摸傳感器以分層方式疊加在立體顯示單元152上時(shí),或者當(dāng)組合立體顯示 單元152和感測(cè)觸摸操作的3D傳感器時(shí)，立體顯示單元152也可以被用作3D輸入設(shè)備。
[0081] 作為3D傳感器的示例，感測(cè)單元140可以包括接近傳感器141、立體觸摸感測(cè)單元 142、超聲波感測(cè)單元143和相機(jī)感測(cè)單元144。
[0082] 接近傳感器141檢測(cè)在沒(méi)有機(jī)械接觸的情況下通過(guò)使用電磁力或紅外線而施加 觸摸的感測(cè)對(duì)象(例如，用戶的手指或尖筆)和檢測(cè)表面之間的距離。通過(guò)使用該距離，終端 識(shí)別已經(jīng)觸摸了立體圖像的哪個(gè)部分。具體地說(shuō)，當(dāng)觸摸屏是靜電觸摸屏?xí)r，基于根據(jù)感測(cè) 對(duì)象的接近的電場(chǎng)的改變來(lái)檢測(cè)感測(cè)對(duì)象的接近程度，并且通過(guò)使用接近程度來(lái)識(shí)別對(duì)于 3D圖像的觸摸。
[0083] 立體觸摸感測(cè)單元142被配置成檢測(cè)向觸摸屏施加的觸摸的強(qiáng)度或持續(xù)時(shí)間。例 如，立體觸摸感測(cè)單元142可以感測(cè)觸摸壓力。當(dāng)壓力強(qiáng)大時(shí)，可以將觸摸視為相對(duì)于朝著 終端的內(nèi)部位于遠(yuǎn)離觸摸屏的對(duì)象的觸摸。
[0084] 超聲波感測(cè)單元143被配置成通過(guò)使用超聲波來(lái)識(shí)別感測(cè)對(duì)象的位置信息。例 如，超聲波感測(cè)單元143可以包括光學(xué)傳感器121和多個(gè)超聲波傳感器。光學(xué)傳感器被配 置成感測(cè)光并且超聲波傳感器可以被配置成感測(cè)超聲波。
[0085] 因?yàn)楣膺h(yuǎn)遠(yuǎn)比超聲波快，所以光到達(dá)光學(xué)傳感器的時(shí)間遠(yuǎn)遠(yuǎn)比超聲波到達(dá)超聲波 傳感器的時(shí)間短。因此，通過(guò)計(jì)算從當(dāng)超聲波大到達(dá)超聲波傳感器時(shí)的時(shí)間和當(dāng)光到達(dá)光 學(xué)傳感器時(shí)的時(shí)間的時(shí)間差使用光作為參考信號(hào)可以計(jì)算波生成源的位置。
[0086] 相機(jī)感測(cè)單元144包括相機(jī)、光電傳感器和激光傳感器中的至少一個(gè)。例如，相機(jī) 和激光傳感器可以被組合以檢測(cè)感測(cè)對(duì)象相對(duì)于3D立體圖像的觸摸。當(dāng)由激光傳感器檢 測(cè)到的距離信息被添加到通過(guò)相機(jī)捕獲的2D圖像時(shí)，能夠獲得3D信息。
[0087] 在另一個(gè)不例中，在顯不設(shè)備上層疊光電傳感器。該光電傳感器被配置成掃描與 觸摸屏接近的感測(cè)對(duì)象的移動(dòng)。詳細(xì)而言，光電傳感器包括在行和列處的光電二極管和晶 體管，以通過(guò)使用根據(jù)所施加的光的數(shù)量改變的電信號(hào)來(lái)掃描在光電傳感器上安裝的內(nèi) 容。即，光電傳感器根據(jù)光的變化來(lái)計(jì)算感測(cè)對(duì)象的坐標(biāo)，以因此獲得感測(cè)對(duì)象的位置信 肩、。
[0088] 音頻輸出模塊153可以在呼叫信號(hào)接收模式、呼叫模式、記錄模式、語(yǔ)音識(shí)別模 式、廣播接收模式等中將從無(wú)線通信單元110接收到的或存儲(chǔ)在存儲(chǔ)器160中的音頻數(shù)據(jù) 轉(zhuǎn)換和輸出為聲音。而且，音頻輸出模塊153可以提供與由移動(dòng)終端100執(zhí)行的特定功能 相關(guān)的可聽輸出（例如，呼叫信號(hào)接收聲音、消息接收聲音等)。音頻輸出模塊153可以包括 揚(yáng)聲器、蜂鳴器等等。
[0089] 報(bào)警單元154輸出通知發(fā)生了來(lái)自移動(dòng)終端100的事件的信號(hào)。從移動(dòng)終端100 發(fā)生的事件可以包括接收到的呼叫、接收到的消息、按鍵信號(hào)輸入、觸摸輸入等等。報(bào)警單 元154不僅可以輸出視頻或者音頻信號(hào)，而且可以輸出其它類型的信號(hào)，諸如以振動(dòng)形式 通知事件發(fā)生的信號(hào)。因?yàn)槟軌蛲ㄟ^(guò)顯示單元151或者音頻輸出模塊153輸出視頻或者音 頻信號(hào)，所以顯示單元151和音頻輸出模塊153可以被分類為報(bào)警單元154的一部分。
[0090] 觸覺(jué)模塊155產(chǎn)生用戶能夠感覺(jué)的各種觸覺(jué)效果。通過(guò)觸覺(jué)模塊155產(chǎn)生的觸覺(jué) 效果的代表性示例包括振動(dòng)。能夠控制觸覺(jué)模塊155的強(qiáng)度和模式。例如，不同的振動(dòng)可 以被組合以被輸出或者被順序地輸出。
[0091] 除了振動(dòng)之外，觸覺(jué)模塊155可以生成各種其他觸覺(jué)效果，諸如通過(guò)相對(duì)于接觸 皮膚垂直移動(dòng)的觸針布置、通過(guò)注入孔或吸收孔的空氣的噴射力或吸收力、在皮膚上的接 觸、電極的接觸、靜電力等的刺激的效果、通過(guò)使用能夠吸收或生成熱量的元件再現(xiàn)冷和熱 感覺(jué)的效果。
[0092] 觸覺(jué)模塊155可以被實(shí)現(xiàn)成允許用戶通過(guò)諸如用戶的手指或手的肌肉感覺(jué)來(lái)感 覺(jué)觸覺(jué)效果，并且通過(guò)直接接觸來(lái)傳送觸覺(jué)效果。可以根據(jù)移動(dòng)終端100的配置來(lái)提供+ 兩個(gè)或更多個(gè)觸覺(jué)模塊155。
[0093] 存儲(chǔ)器160可以存儲(chǔ)用于處理和控制由控制器180執(zhí)行的操作的軟件程序，或者 可以暫時(shí)存儲(chǔ)被輸入或輸出的數(shù)據(jù)(例如，電話簿、消息、靜止圖像、視頻等)。另外，存儲(chǔ)器 160可以存儲(chǔ)關(guān)于當(dāng)向觸摸屏輸入觸摸時(shí)輸出的各種模式的振動(dòng)和音頻信號(hào)的數(shù)據(jù)。
[0094] 存儲(chǔ)器160可以包括至少一種類型的存儲(chǔ)介質(zhì)，包括閃速存儲(chǔ)器、硬盤、微型多 媒體卡、卡型存儲(chǔ)器(例如，SD或XD存儲(chǔ)器等)、隨機(jī)存取存儲(chǔ)器（RAM)、靜態(tài)隨機(jī)存取存 儲(chǔ)器（SRAM)、只讀存儲(chǔ)器（ROM)、電可擦除可編程只讀存儲(chǔ)器（EEPR0M)、可編程只讀存儲(chǔ)器 (PR0M)、磁存儲(chǔ)器、磁盤和光盤。而且，可以與網(wǎng)絡(luò)存儲(chǔ)裝置相關(guān)地操作移動(dòng)終端100,該網(wǎng) 絡(luò)存儲(chǔ)裝置在因特網(wǎng)上執(zhí)行存儲(chǔ)器160的存儲(chǔ)功能。
[0095] 接口單元170用作與和移動(dòng)終端100連接的每一個(gè)外部設(shè)備的接口。例如，外部 設(shè)備可以向外部設(shè)備發(fā)送數(shù)據(jù)，接收和發(fā)送到移動(dòng)終端100的每個(gè)元件的電力，或向外部 設(shè)備發(fā)送移動(dòng)終端100的內(nèi)部數(shù)據(jù)。例如，接口單元170可以包括有線或無(wú)線頭戴耳機(jī)端 口、外部電源端口、有線或無(wú)線數(shù)據(jù)端口、存儲(chǔ)卡端口、用于連接具有標(biāo)識(shí)模塊的設(shè)備的端 口、音頻輸入/輸出（I/O)端口、視頻I/O端口或耳機(jī)端口等。
[0096] 該標(biāo)識(shí)模塊可以是存儲(chǔ)用于驗(yàn)證使用移動(dòng)終端100的權(quán)限的各種信息的芯片，并 且可以包括用戶身份模塊（ΠΜ)、訂戶身份模塊（SM)和通用訂戶身份模塊（USM)等。另 夕卜，具有標(biāo)識(shí)模塊的設(shè)備(下文中稱為"識(shí)別設(shè)備"）可以采取智能卡的形式。因此，識(shí)別設(shè) 備可以經(jīng)由端口單元170與終端100連接。
[0097] 當(dāng)移動(dòng)終端100與外部托架連接時(shí)，接口單元170可以用作用于允許來(lái)自托架的 電力通過(guò)其被供應(yīng)到移動(dòng)終端100的通道，或可以用作用于允許用戶從托架輸入的各種命 令信號(hào)通過(guò)其被發(fā)送到移動(dòng)終端的通道。從托架輸入的各種命令信號(hào)或電力可以操作為用 于識(shí)別移動(dòng)終端被正確地安裝在托架上的信號(hào)。
[0098] 控制器180通?？刂埔苿?dòng)終端100的整體操作。例如，控制器180執(zhí)行與語(yǔ)音呼 口4、數(shù)據(jù)通信和視頻呼叫等相關(guān)聯(lián)的控制和處理。控制器180可以包括用于再現(xiàn)多媒體數(shù) 據(jù)的多媒體模塊181。多媒體模塊181可以被配置在控制器180內(nèi)或可以被配置成與控制 器180分離。
[0099] 控制器180可以執(zhí)行模式識(shí)別處理，以分別將在觸摸屏上執(zhí)行的手寫輸入或繪圖 輸入識(shí)別為字符或圖像。而且，控制器180可以執(zhí)行鎖定狀態(tài)以當(dāng)移動(dòng)終端的狀態(tài)滿足預(yù) 設(shè)條件時(shí)限制用戶輸入用于應(yīng)用的控制命令。
[0100] 此外，控制器180可以在移動(dòng)終端的鎖定狀態(tài)下基于在顯示單元151上感測(cè)到的 觸摸輸入控制在鎖定狀態(tài)下被顯示的鎖定屏幕。電源單元190接收外部電力或內(nèi)部電力， 并且在控制器180的控制下供應(yīng)用于操作各自的元件和組件所需的適當(dāng)電力。
[0101] 可以使用例如軟件、硬件或其任何組合來(lái)在計(jì)算機(jī)可讀介質(zhì)中實(shí)現(xiàn)在此所述的各 個(gè)實(shí)施例。
[0102] 對(duì)于硬件實(shí)施方式，可以通過(guò)使用以下中的至少一種來(lái)實(shí)現(xiàn)在此描述的實(shí)施例： 專用集成電路（ASIC)、數(shù)字信號(hào)處理器（DSP)、數(shù)字信號(hào)處理器件（DSPD)、可編程邏輯器件 (PLD)、現(xiàn)場(chǎng)可編程門陣列（FPGA)、處理器、控制器、微控制器、微處理器、被設(shè)計(jì)用來(lái)執(zhí)行在 此描述的功能的電子單元。在一些情況下，這樣的實(shí)施例也可以由控制器180本身實(shí)現(xiàn)。
[0103] 對(duì)于軟件實(shí)施方式，可以通過(guò)單獨(dú)的軟件模塊來(lái)實(shí)現(xiàn)諸如在此所述的過(guò)程或功能 的實(shí)施例。每一個(gè)軟件模塊可以執(zhí)行在此所述的一個(gè)或多個(gè)功能或操作?？梢酝ㄟ^(guò)以任何 適當(dāng)?shù)木幊陶Z(yǔ)言編寫的軟件應(yīng)用來(lái)實(shí)現(xiàn)軟件代碼。軟件代碼可以存儲(chǔ)在存儲(chǔ)器160中并由 控制器180執(zhí)行。
[0104] 在下文中，將會(huì)描述通過(guò)根據(jù)本發(fā)明的移動(dòng)終端100可操作的通信系統(tǒng)。特別地， 圖2A和圖2B是圖示通過(guò)根據(jù)本發(fā)明的移動(dòng)終端可操作的通信系統(tǒng)的概念圖。
[0105] 首先，參考圖2A，這樣的通信系統(tǒng)利用不同的空中接口和/或物理層。例如，能 夠通過(guò)通信系統(tǒng)使用的這樣的空中接口的示例包括：頻分多址（FDMA)、時(shí)分多址（TDMA)、 碼分多址（CDMA)、通用移動(dòng)電信系統(tǒng)（UMTS)、UMTS的長(zhǎng)期演進(jìn)（LTE)、全球移動(dòng)通信系統(tǒng) (GSM)等。
[0106] 為了便于解釋，下面的描述將會(huì)與CDMA通信系統(tǒng)有關(guān)，但是這樣的教導(dǎo)同等地應(yīng) 用于包括CDMA無(wú)線通信系統(tǒng)的其它系統(tǒng)類型。
[0107] 參考圖2A，示出CDMA無(wú)線通信系統(tǒng)，其具有多個(gè)終端100、多個(gè)基站(在下文中BS) 270、基站控制器（BSC) 275、以及移動(dòng)切換中心(在下文中MSC) 280。MSC280可以被配置成 與傳統(tǒng)的公共交換電話網(wǎng)絡(luò)（PSTN) 290對(duì)接。并且MSC280也可以被配置成與BSC275對(duì) 接。BSC275經(jīng)由回程線被耦合到基站270?？梢愿鶕?jù)包括例如E1/T1、ATM、IP、PPP、幀中 繼、HDSL、ADSL、或者xDSL的數(shù)個(gè)已知的接口中的任何一個(gè)來(lái)配置回程線。因此，系統(tǒng)中能 夠包括多個(gè)BSC275,如在圖2A中圖示的。
[0108] 每個(gè)基站270可以包括一個(gè)或者多個(gè)扇區(qū)，每個(gè)扇區(qū)具有全向天線或者在放射狀 地遠(yuǎn)離基站270的特定方向中指定的天線。可替選地，每個(gè)扇區(qū)可以包括兩個(gè)或者更多個(gè) 不同的天線。每個(gè)基站270可以被配置成支持多種頻率分配，每個(gè)頻率分配具有特定的頻 譜(例如，1. 25MHz、5MHz 等等）。
[0109] 扇區(qū)和頻率分配的交叉可以被稱為CDMA信道?；?70也可以被稱為基站收發(fā) 器子系統(tǒng)（BTS)。在一些情況下，術(shù)語(yǔ)"基站"可以用于統(tǒng)稱為BSC275,以及一個(gè)或多個(gè)基站 270?；疽部梢员槐硎緸?小區(qū)站點(diǎn)"?？商孢x地，用于給定的基站270的單個(gè)扇區(qū)可以被 稱為小區(qū)站點(diǎn)。
[0110] 如在圖2A中所示的，廣播發(fā)送器（Β?295將廣播信號(hào)發(fā)送到在系統(tǒng)內(nèi)操作的移動(dòng) 終端100。廣播接收模塊111 (圖1B)通常被配置在移動(dòng)終端100內(nèi)部以接收由BT295發(fā) 送的廣播信號(hào)。
[0111] 圖2A進(jìn)一步描述數(shù)個(gè)全球定位系統(tǒng)（GPS)衛(wèi)星300。這樣的衛(wèi)星300便于定位 多個(gè)移動(dòng)終端100中的至少一個(gè)的位置。在圖2A中描述了兩個(gè)衛(wèi)星，但是可以通過(guò)比兩個(gè) 衛(wèi)星更多或者更少數(shù)目的衛(wèi)星來(lái)獲得有用的位置信息。位置信息模塊115 (圖1B)通常被 配置成與衛(wèi)星300協(xié)作以獲得想要的位置信息。要理解的是，可以可替選地實(shí)現(xiàn)其他類型 的位置檢測(cè)技術(shù)（即，除了或者替代GPS定位技術(shù)可以使用的定位技術(shù))。必要時(shí)，GPS衛(wèi)星 300中的至少一個(gè)可以被可替選地或者另外配置成提供衛(wèi)星DMB傳輸。
[0112] 在無(wú)線通信系統(tǒng)的典型操作期間，基站270可以從各種移動(dòng)終端100接收反向鏈 路信號(hào)的集合。移動(dòng)終端100進(jìn)行呼叫、短信，并且執(zhí)行其它的通信。在基站270內(nèi)處理 通過(guò)給定的基站270接收到的每個(gè)反向鏈路信號(hào)。得到的數(shù)據(jù)被轉(zhuǎn)發(fā)給相關(guān)聯(lián)的BSC275。 BSC275提供包括基站270之間的軟切換的系統(tǒng)化的移動(dòng)性管理功能和呼叫資源分配。 BSC275也可以將接收到的數(shù)據(jù)路由給MSC280，然后其提供用于對(duì)接PSTN290的附加的路由 服務(wù)。類似地，PSTN290與MSC280對(duì)接，并且MSC280與BSC275對(duì)接，其依次控制基站270 以將前向鏈路信號(hào)發(fā)送到移動(dòng)終端100。
[0113] 在下文中，將會(huì)參考2B描述用于使用無(wú)線保真（WiFi)定位系統(tǒng)（WPS)獲取移動(dòng)終 端的位置信息的方法。
[0114] Wi-Fi定位系統(tǒng)（WPS) 300指的是使用Wi-Fi基于無(wú)線局域網(wǎng)（WLAN)的位置確定 技術(shù)作為用于使用被設(shè)置在用于發(fā)送到Wi-Fi模塊并且從Wi-Fi模塊接收的無(wú)線接入點(diǎn) 320和移動(dòng)終端100中的Wi-Fi模塊跟蹤移動(dòng)終端100的位置的技術(shù)。
[0115] Wi-Fi定位系統(tǒng)300可以包括Wi-Fi位置確定服務(wù)器310、移動(dòng)終端100、被連接到 移動(dòng)終端100的無(wú)線接入點(diǎn)（AP)320、以及被存儲(chǔ)有任何無(wú)線AP信息的數(shù)據(jù)庫(kù)330。Wi-Fi 位置確定服務(wù)器310基于移動(dòng)終端100的位置信息請(qǐng)求消息(或者信號(hào))提取被連接到移動(dòng) 終端100的無(wú)線AP320的信息。
[0116] 無(wú)線AP320的信息可以通過(guò)移動(dòng)終端100被發(fā)送到Wi-Fi位置確定服務(wù)器310或 者從無(wú)線AP320被發(fā)送到Wi-Fi位置確定服務(wù)器310?；谝苿?dòng)終端100的位置信息請(qǐng)求 消息提取的無(wú)線AP的信息可以是MAC地址、SSID、RSSI、信道信息、隱私、網(wǎng)絡(luò)類型、信號(hào)強(qiáng) 度以及噪聲強(qiáng)度中的至少一個(gè)。
[0117] Wi-Fi位置確定服務(wù)器310接收被連接到如上所述的移動(dòng)終端100的無(wú)線AP320 的信息，并且將接收到的無(wú)線AP320信息與被包含在預(yù)先建立的數(shù)據(jù)庫(kù)320中的信息進(jìn)行 比較以提取(或者分析）移動(dòng)終端100的位置信息。
[0118] 另一方面，參考圖2B，作為示例，被連接到移動(dòng)終端100的無(wú)線AP被圖示為第一、 第二、以及第三無(wú)線AP320。然而，根據(jù)其中移動(dòng)終端100位于的無(wú)線通信環(huán)境可以以各種 形式改變被連接到移動(dòng)終端100的無(wú)線AP的數(shù)目。當(dāng)移動(dòng)終端100被連接到無(wú)線AP中的 至少一個(gè)時(shí)，Wi-Fi定位系統(tǒng)300能夠跟蹤移動(dòng)終端100的位置。
[0119] 接下來(lái)，更加詳細(xì)地考慮到被存儲(chǔ)有無(wú)線AP信息的數(shù)據(jù)庫(kù)330,被布置在不同位 置處的任何無(wú)線AP的各種信息可以被存儲(chǔ)在數(shù)據(jù)庫(kù)330中。
[0120] 被存儲(chǔ)在數(shù)據(jù)庫(kù)330中的任何無(wú)線AP的信息可以是諸如MAC地址、SSID、RSSI、信 道信息、隱私、網(wǎng)絡(luò)類型、緯度和經(jīng)度坐標(biāo)、無(wú)線AP位于的建筑物、樓層、詳細(xì)室內(nèi)位置信息 (GPS坐標(biāo)可用）、AP擁有者地址、電話號(hào)碼等等的信息。
[0121] 以這樣的方式，任何無(wú)線AP信息和與任何無(wú)線AP相對(duì)應(yīng)的位置信息可以被一起 存儲(chǔ)在數(shù)據(jù)庫(kù)330中，并且因此Wi-Fi位置確定服務(wù)器310可以從數(shù)據(jù)庫(kù)330檢索與被連 接到移動(dòng)終端100的無(wú)線AP320的信息相對(duì)應(yīng)的無(wú)線AP信息以提取被匹配到搜索到的無(wú) 線AP的位置信息，從而提取移動(dòng)終端100的位置信息。
[0122] 此外，被提取的移動(dòng)終端100的位置信息可以通過(guò)Wi-Fi位置確定服務(wù)器310被 發(fā)送到移動(dòng)終端100,從而獲取移動(dòng)終端100的位置信息。
[0123] 接下來(lái)，圖3A是圖示根據(jù)本發(fā)明的移動(dòng)終端100的實(shí)施例的前透視圖。
[0124] 所公開的移動(dòng)終端200設(shè)有直板式終端主體。然而，本發(fā)明不限于此，但是可以適 用于其中兩個(gè)或更多個(gè)主體以可相對(duì)移動(dòng)的方式彼此組合的手表式、夾耳式、眼鏡式或者 折疊式、翻蓋式、搖擺式、旋轉(zhuǎn)式等等的各種結(jié)構(gòu)。
[0125] 主體包括構(gòu)成終端的外觀的殼體(或外殼、外罩、外蓋等)。在本實(shí)施例中，殼體可 以被劃分成前殼體101和后殼體102。各種電子組件被合并在前殼體101和后殼體102之 間形成的空間中。至少一個(gè)中間外殼可以被附加地布置在前外殼和后外殼101和102之間， 并且用于覆蓋電池191的電池殼103可以被可拆卸地配置在后殼體102處。通過(guò)注入成型 合成樹脂可以形成殼體，或者也可以是由例如，不銹鋼（STS)、鈦（Ti)等等的金屬形成。
[0126] 顯示單元151、第一音頻輸出模塊153a、第一相機(jī)121a、第一操縱單元131等等可 以被布置在終端主體的前表面上，并且麥克風(fēng)122、接口單元170、第二操作操縱單元132等 等可以被設(shè)置在其橫向表面上。
[0127] 顯示單元151可以被配置成顯示(輸出）在移動(dòng)終端100中處理的信息。顯示單 元151可以包括液晶顯示器（IXD)、薄膜晶體管-液晶顯示器（TFT-IXD)、有機(jī)發(fā)光二極管 (0LED)顯示器、柔性顯示器、3維（3D)顯示器、以及電子墨水顯示器。
[0128] 顯示單元151可以包括通過(guò)觸摸方法接收控制命令的觸摸感測(cè)裝置。當(dāng)對(duì)顯示單 元151上的任何一個(gè)地方進(jìn)行觸摸時(shí)，觸摸感測(cè)機(jī)制可以被配置成感測(cè)此觸摸并且鍵入與 被觸摸的地方相對(duì)應(yīng)的內(nèi)容。通過(guò)觸摸方法鍵入的內(nèi)容可以是文本或者數(shù)值，或者能夠在 各種模式下指示或者指定的菜單項(xiàng)目。
[0129] 觸摸感測(cè)機(jī)制可以被形成為透明的以允許看到顯示在顯示單元151上的視覺(jué)信 息，并且包括用于增強(qiáng)在明亮的地方處的觸摸屏的可視性的結(jié)構(gòu)。參考圖3A，顯示單元151 占用包括前殼體101的前表面的大部分的部分。
[0130] 第一音頻輸出單元153a和第一相機(jī)121a被布置在與顯示單元151的兩端中的一 個(gè)相鄰的區(qū)域中，并且第一操縱輸入單元131和麥克風(fēng)122被布置在與其另一端相鄰的區(qū) 域中。第二操縱接口 132(參考圖3B)、接口 170等等可以被布置在終端主體的橫向表面上。
[0131] 第一音頻輸出模塊153a可以以用于將聲音傳輸?shù)接脩舻亩涞慕邮掌骱陀糜谳?出各種報(bào)警聲音或者多媒體再現(xiàn)聲音的喇P八的形式實(shí)現(xiàn)。第一音頻輸出模塊153a可以被 配置成生成沿著結(jié)構(gòu)主體之間的組裝間隙釋放的聲音。在這樣的情況下，在外觀方面可以 被獨(dú)立地形成以輸出聲音的孔可能被視圖隱藏，從而進(jìn)一步簡(jiǎn)化移動(dòng)終端100的外觀。然 而，本發(fā)明不限于此，但是用于釋放聲音的孔可以被形成在窗口上。
[0132] 第一相機(jī)121a處理在視頻呼叫模式或者捕獲模式下通過(guò)圖像傳感器獲得的靜止 或者運(yùn)動(dòng)圖像的視頻幀。被處理的視頻幀可以被顯示在顯示單元151上。
[0133] 另外，用戶輸入單元130被操縱以接收用于控制移動(dòng)終端100的操作的命令。用 戶輸入單元130可以包括第一和第二操縱單元131、132。第一和第二操縱單元131、132可 以被共同地稱為操縱部分，并且可以以允許用戶通過(guò)諸如觸摸、推動(dòng)、滾動(dòng)等等的觸覺(jué)執(zhí)行 操縱的觸覺(jué)方式采用任何方法。
[0134] 繼續(xù)參考圖3A，第一操縱單元131是觸摸鍵，但是本發(fā)明不限于此。例如，第一操 縱單元131可以被配置有機(jī)械鍵、或者觸摸鍵和機(jī)械鍵的組合。
[0135] 通過(guò)第一和/或第二操縱單元131U32接收到的內(nèi)容可以以各種方式設(shè)置。例 如，第一操縱單元131可以被用于接收諸如菜單、歸位鍵、取消、搜索等等的命令，并且第二 操縱單元132可以接收命令，諸如控制從第一音頻輸出模塊153a輸出的音量級(jí)、或者切換 成顯示單元151的觸摸識(shí)別模式。
[0136] 麥克風(fēng)122可以被形成以接收用戶的語(yǔ)音、其它的聲音等等。麥克風(fēng)122可以被 設(shè)置在多個(gè)地方處，并且被配置成接收立體聲音。
[0137] 接口單元170用作允許移動(dòng)終端100與外部設(shè)備交換數(shù)據(jù)的路徑。例如，接口單元 170可以是用于以有線或者無(wú)線方式連接到耳機(jī)的連接端子、用于近場(chǎng)通信(例如，紅外數(shù) 據(jù)協(xié)會(huì)（IrDA)端口、藍(lán)牙端口、無(wú)線LAN端口等等）的端口、以及用于將電力供應(yīng)到移動(dòng)終 端100的電源端子中的至少一個(gè)。接口單元170可以以用于容納諸如用戶識(shí)別模塊（SIM) 或者用戶身份模塊（UIM)、用于信息存儲(chǔ)的存儲(chǔ)卡的外部卡的插槽的形式實(shí)現(xiàn)。
[0138] 接下來(lái)，圖3B是圖示當(dāng)從后面看到時(shí)的圖3A中的移動(dòng)終端100的一個(gè)實(shí)施例的 后透視圖。參考圖3B，第二相機(jī)121b可以被附加地安裝在終端主體的后表面處，S卩，后殼體 102。第二相機(jī)121b具有圖像捕獲方向，其與第一相機(jī)單元121a (參考圖3A)的方向大體 上相對(duì)，并且可以具有不同于第一相機(jī)單元121a的大量像素。
[0139] 例如，優(yōu)選的是，當(dāng)在視頻呼叫等等期間用戶捕獲他的或者她自己的面部并且將 其發(fā)送到另一方時(shí)，第一相機(jī)121a具有不引起困難的少量的像素，并且第二相機(jī)121b具有 相對(duì)大量的像素，因?yàn)橛脩艚?jīng)常捕獲沒(méi)有立即發(fā)送的一般對(duì)象。第一和第二相機(jī)121a、121b 可以以可旋轉(zhuǎn)和彈出的方式被設(shè)置在終端主體中。
[0140] 此外，閃光燈123和鏡子124可以被附加地布置成與第二相機(jī)121b相鄰。當(dāng)通過(guò) 第二相機(jī)121b捕獲對(duì)象時(shí)閃光燈123朝著對(duì)象照亮燈。當(dāng)通過(guò)使用第二相機(jī)121b捕獲他 自己或者她自己(例如，在自我拍攝模式下）鏡子124允許用戶以反射的方式看著他的或者 她自己的面部。
[0141] 第二音頻輸出單元153b可以被附加地布置在終端主體的后表面上。第二音頻輸 出單元153b與第一音頻輸出單元153a (參考圖3A)-起能夠?qū)崿F(xiàn)立體聲功能，并且也可以 被用于在電話呼叫期間實(shí)現(xiàn)揚(yáng)聲器電話模式。
[0142] 除了用于進(jìn)行電話呼叫等等的天線之外用于接收廣播信號(hào)的天線可以被附加地 布置在終端主體的橫向表面處。組成廣播接收模塊111 (參考圖1B)部分的天線可以以可 收回的方式設(shè)置在終端主體中。
[0143] 用于將電力供應(yīng)給移動(dòng)終端100的電源單元190 (參考圖1B)可以被安裝在終端 主體上。電源單元190可以被包含在終端主體中，或者可以包括在終端主體的外部上的以 可拆卸的方式配置的電池191。附圖圖示電池蓋103與后殼體102組合以覆蓋電池191，從 而限制電池191被釋放并且保護(hù)電池191免受外部沖擊和外面物質(zhì)。
[0144] 另外，通過(guò)搜索條能夠搜尋在移動(dòng)終端上播放的運(yùn)動(dòng)圖像的特定場(chǎng)景以調(diào)節(jié)運(yùn)動(dòng) 圖像的回放片段。具體地，不得不通過(guò)將搜索條移動(dòng)到任意位置以搜尋特定場(chǎng)景來(lái)回放運(yùn) 動(dòng)圖像。
[0145] 然而，這對(duì)于用戶來(lái)說(shuō)是困難的，因?yàn)椴坏貌粌H通過(guò)取決于搜索條的移動(dòng)輸出的 語(yǔ)音或者圖像搜尋所期待的場(chǎng)景。例如，通常，僅圖像被輸出并且語(yǔ)音沒(méi)有被聽到或者以高 速聽到同時(shí)以快速移動(dòng)搜索條，使其難以搜尋所期待的場(chǎng)景。
[0146] 因此，下面參考附圖描述用于提高在搜索運(yùn)動(dòng)圖像中的特定場(chǎng)景的用戶便利的移 動(dòng)終端100和控制該移動(dòng)終端100的方法。
[0147] 圖4是圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的控制移動(dòng)終端100的方法的流程圖。參考 圖4，被包括在運(yùn)動(dòng)圖像中的片段被選擇（S110 )。
[0148] 例如，通過(guò)被施加到顯示單元151的觸摸輸入或者通過(guò)物理鍵輸入，可以選擇被 包括在運(yùn)動(dòng)圖像中的片段。然后，從在顯示單元上的所選擇的片段輸出音頻信息相對(duì)應(yīng)的 視頻信息（S120)。
[0149] 具體地，音頻信息的示例包括人聲、來(lái)自除了人類之外的生物或者物體的聲音等 等。視頻信息包括包括人聲被轉(zhuǎn)換成的文本信息的口語(yǔ)氣球、對(duì)應(yīng)于動(dòng)物聲音的圖標(biāo)或者 表情符號(hào)等等。而且，取決于選擇片段所耗費(fèi)的時(shí)間，與音頻信息相對(duì)應(yīng)的視頻信息被不同 地輸出。
[0150] 作為實(shí)施例，如果以比預(yù)定時(shí)間大的速度選擇片段，則從所選擇的片段輸出的音 頻信息的一部分被轉(zhuǎn)換成文本信息并且得到的文本信息被輸出。
[0151] 更加詳細(xì)地，圖5 (a)_圖7 (d)是圖示用戶接口的實(shí)施例的顯示屏幕，通過(guò)該用 戶接口音頻信息被轉(zhuǎn)換成文本信息并且得到的文本信息被輸出。參考圖5(a)，通過(guò)被施加 到搜索條510的拖動(dòng)輸入選擇被包括在運(yùn)動(dòng)圖像中的片段，并且從所選擇的片段輸出的音 頻信息被轉(zhuǎn)換成文本信息520并且得到的文本信息520被輸出。
[0152] 具體地，當(dāng)拖動(dòng)輸入被施加到搜索條510時(shí)，移動(dòng)終端100自動(dòng)地切換成運(yùn)動(dòng)圖像 搜索模式。另外，搜索條510的位置分別對(duì)應(yīng)于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)。用戶通過(guò)將拖 動(dòng)輸入施加到開始運(yùn)動(dòng)圖像的時(shí)間點(diǎn)，或者通過(guò)拖動(dòng)輸入直接地施加到用于運(yùn)動(dòng)圖像的回 放的任意的時(shí)間點(diǎn)，選擇被包括在運(yùn)動(dòng)圖像中的片段。
[0153] 隨后，從對(duì)應(yīng)于搜索條510的位置的用于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)輸出的音頻信 息，被轉(zhuǎn)換成文本信息520,并且然后得到的文本信息520以得到的文本信息520與說(shuō)出音 頻信息的說(shuō)話者相鄰的方式被輸出。
[0154] 作為實(shí)施例，從所選擇的片段輸出的通過(guò)說(shuō)話者530發(fā)出的聲音被轉(zhuǎn)換成文本信 息，并且然后以面向說(shuō)話者530的方式輸出包括文本信息的口語(yǔ)氣球520。
[0155] 另外，以被高亮的方式輸出說(shuō)話者530的圖像。作為實(shí)施例，通過(guò)背景中的模糊的 圖像效果，說(shuō)話者530的圖像可以被清楚地輸出。另外，可以輸出比在運(yùn)動(dòng)圖像中輸出的其 它人的圖像大的說(shuō)話者的圖像，或者以不同于其它人的顏色的顏色輸出。
[0156] 作為實(shí)施例，音頻信息可以與視頻信息一起輸出。即，通過(guò)說(shuō)話者說(shuō)出的聲音被轉(zhuǎn) 換成的文本信息可以與說(shuō)話者說(shuō)出的聲音一起被輸出。
[0157] 盡管用戶結(jié)束拖動(dòng)輸入，如果觸摸被保持在搜索條上，則例如，運(yùn)動(dòng)圖像可以被連 續(xù)地回放。在這一點(diǎn)上，運(yùn)動(dòng)圖像可以以比正?；胤潘俣雀旎蛘吒乃俣然胤拧?br> [0158] 參考圖5(b)，從所選擇的片段輸出的音頻信息被轉(zhuǎn)換成文本信息520以及在對(duì)應(yīng) 于用于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)的搜索條的位置512上輸出文本信息520,在該運(yùn)動(dòng)圖像 上音頻信息被輸出。
[0159] 具體地，從所選擇的片段輸出的說(shuō)話者說(shuō)出的語(yǔ)音被轉(zhuǎn)換成文本信息，并且然后 在對(duì)應(yīng)于輸出聲音的時(shí)間點(diǎn)的搜索條512的位置上輸出包括文本信息的口頭氣球520。
[0160] 如上所述，以被強(qiáng)調(diào)的方式輸出揚(yáng)聲器530的圖像。例如，說(shuō)話者530的圖像被顯 示為比其它人的圖像大，或者與指示說(shuō)話者530的指示符一起被輸出。
[0161] 參考圖5 (c)，如果在所選擇的片段中存在多個(gè)說(shuō)話者530和540,則通過(guò)說(shuō)話者 530和540中的每一個(gè)說(shuō)出的聲音被轉(zhuǎn)換成文本信息，并且包括文本信息的項(xiàng)目的多個(gè)口 語(yǔ)氣球532和542分別以面向多個(gè)說(shuō)話者530和540的方式被輸出。即，輸出場(chǎng)景，其中多 個(gè)揚(yáng)聲器530和540具有對(duì)話。
[0162] 參考圖5 (a)_圖5 (c)，通過(guò)由轉(zhuǎn)換產(chǎn)生的文本信息的使用，用戶能夠搜索運(yùn)動(dòng) 圖像以找到他或者她想要的場(chǎng)景。另外，在基于選擇片段所耗費(fèi)的時(shí)間選擇的文本信息中 的關(guān)鍵字被作為視頻信息輸出。
[0163] 參考圖6 (a)，當(dāng)用戶將拖動(dòng)輸入施加到搜索條610時(shí)，以用戶預(yù)定的速度或者更 少的速度，輸出的整個(gè)聲音被轉(zhuǎn)換成文本信息620并且得到的文本信息620被輸出。因此， 用戶能夠具體地搜索從運(yùn)動(dòng)圖像輸出的聲音的整個(gè)內(nèi)容。
[0164] 參考圖6 (b)，當(dāng)用戶將拖動(dòng)輸入施加到搜索條610時(shí)，以用戶預(yù)定的速度或者更 大，被輸出的整個(gè)聲音被轉(zhuǎn)換成文本信息。隨后，從由轉(zhuǎn)換產(chǎn)生的文本信息選擇關(guān)鍵字并且 以被高亮的方式輸出文本信息622。例如，所選擇的關(guān)鍵字被顯示為比其它的文本信息大或 者以不同于其它文本信息的顏色或者字體輸出。另外，以下劃線的方式輸出所選擇的關(guān)鍵 字。
[0165] 參考圖6 (c)，當(dāng)用戶將拖動(dòng)輸入施加到搜索條610時(shí)，以用戶預(yù)定的速度或者更 多，被輸出的聲音的一部分被轉(zhuǎn)換成文本信息624并且得到的文本信息624被輸出。
[0166] 繼續(xù)參考圖6 (c)，當(dāng)用戶將拖動(dòng)輸入施加到搜索條610時(shí)，以用戶預(yù)定的速度或 者更多，僅從運(yùn)動(dòng)圖像頻繁地輸出的聲音被轉(zhuǎn)換成文本信息624并且得到的文本信息624 被輸出。另外，從被輸出的聲音中選擇關(guān)鍵字，即，核心內(nèi)容，并且僅可以輸出所選擇的關(guān)鍵 字624。由轉(zhuǎn)換產(chǎn)生的文本信息以相對(duì)大的字體，或者以引入注目的顏色被輸出。
[0167] S卩，參考圖6 (b)和圖6 (c)，當(dāng)以快速搜索運(yùn)動(dòng)圖像時(shí)增加對(duì)于用戶的可讀性。 例如，通過(guò)比較以施加拖動(dòng)輸入的速度與被輸出的聲音的數(shù)量，整個(gè)聲音或者聲音的一部 分被轉(zhuǎn)換成文本信息并且得到的文本信息被輸出。具體地，如果用戶施加快速拖動(dòng)輸入，但 是輸出的聲音的數(shù)量小，則整個(gè)聲音被轉(zhuǎn)換成文本信息，并且得到的文本信息被輸出。
[0168] 另外，取決于輸出的聲音的特性不同地輸出包括聲音被轉(zhuǎn)換成的文本信息的口語(yǔ) 氣球。具體地，取決于發(fā)出被輸出的聲音的說(shuō)話者、聲音的數(shù)量、聲調(diào)等等不同地輸出口語(yǔ) 氣球的形狀、顏色、或者大小。
[0169] 參考圖7(a)，使用不同的口語(yǔ)氣球712和722分別輸出用于揚(yáng)聲器710的聲音輸 出的文本信息和用于說(shuō)話者B的聲音輸出的文本信息。
[0170] 參考圖7(b)，如果說(shuō)話者710更加大聲地或者以預(yù)定的分貝或者更高的分貝水平 講話，則在運(yùn)動(dòng)圖像的先前的場(chǎng)景中，隨著其大小被增加輸出口語(yǔ)氣球714。另外，隨著其大 小被增加可以輸出被包括在口語(yǔ)氣球中的文本信息，
[0171] 參考圖7 (c)，如果說(shuō)話者710以不同于在運(yùn)動(dòng)圖像中的先前的場(chǎng)景中的聲調(diào)，或 者以預(yù)定的聲調(diào)講話時(shí)，則隨著其顏色被改變輸出口語(yǔ)氣球716。另外，發(fā)出聲音的說(shuō)話者、 聲音的數(shù)量以及聲調(diào)被同時(shí)考慮。
[0172] 參考圖7 (d)，如果說(shuō)話者710以生氣的聲調(diào)大聲地講話，則在形狀上不同于現(xiàn)有 的口語(yǔ)氣球的口語(yǔ)氣球718被輸出。即，沒(méi)有攜帶具體意義的人聲和從除了人類之外的生 物和物體產(chǎn)生的音頻信息被轉(zhuǎn)換成視頻信息，并且得到的視頻信息被輸出。例如，嬰兒的哭 喊聲、動(dòng)物發(fā)出的聲音、雨聲、下降物體的聲音等等可以被轉(zhuǎn)換成相對(duì)應(yīng)的視頻信息，并且 得到的視頻信息被輸出。
[0173] 作為實(shí)施例，表情符號(hào)可以作為與音頻信息相對(duì)應(yīng)的視頻信息被輸出。另外，取決 于音頻信息的特性輸出不同的富于表情的表情符號(hào)。
[0174] 接下來(lái)，圖8 (a)-圖9 (d)是圖示用戶界面的實(shí)施例的顯示屏幕，通過(guò)該用戶界 面輸出與音頻信息相對(duì)應(yīng)的視頻信息。參考圖8(a)，與小狗810的吠叫聲相對(duì)應(yīng)的視頻信 息820被輸出使得視頻信息820被布置為與小狗810相鄰。例如，與通過(guò)小狗810發(fā)出的 吠叫聲相對(duì)應(yīng)的視頻信息作為表不小狗的表情符號(hào)820被輸出。
[0175] 另外，取決于小狗發(fā)出的聲音的特性不同地輸出在表情符號(hào)820中的小狗的表 達(dá)。例如，當(dāng)小狗生氣地和大聲地吠叫時(shí)并且當(dāng)小狗柔和地吠叫時(shí)，分別輸出不同的表達(dá)， 以便于幫助用戶直觀地理解聲音的特性。
[0176] 參考圖8 (b)，在與用于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)相對(duì)應(yīng)的搜索條830的位置832 和834上輸出與音頻信息的項(xiàng)目相對(duì)應(yīng)的視頻信息840和850的項(xiàng)目，在運(yùn)動(dòng)圖像處輸出 音頻信息的項(xiàng)目。具體地，當(dāng)用戶將拖動(dòng)輸入施加到搜索條830時(shí)，在搜索條的位置832和 834上分別輸出小狗表情符號(hào)840和850,在其上輸出音頻信息的項(xiàng)目。通過(guò)這樣做，用戶 能夠容易地掌握運(yùn)動(dòng)圖像的片段，從該運(yùn)動(dòng)圖像的片段輸出音頻信息。
[0177] 另外，如上所述，通過(guò)分析由小狗發(fā)出的聲音的分貝水平或者聲音的模式輸出描 述各種表達(dá)的表情符號(hào)840和850。例如，如果小狗激烈地吠叫，則描寫激烈的表達(dá)的小狗 表情符號(hào)840被輸出。另外，如果在它的主人旁邊小狗愉快地吠叫，則描寫微笑的表達(dá)的小 狗表情符號(hào)被輸出。
[0178] 例如，與音頻信息相對(duì)應(yīng)的視頻信息僅可以被輸出到搜索條同時(shí)拖動(dòng)輸入被施加 到搜索條上的相對(duì)應(yīng)的位置。因此，僅可以輸出描寫激烈的表達(dá)的小狗表情符號(hào)840同時(shí) 在與描寫激烈的表達(dá)的輸出相對(duì)應(yīng)的搜索條上的分段內(nèi)存在用戶拖動(dòng)輸入。
[0179] 參考圖9(a)，輸出表情符號(hào)912,其對(duì)應(yīng)于嬰兒910發(fā)出的聲音。如上所述，通過(guò) 分析嬰兒發(fā)出的聲音輸出描寫包括叫喊表達(dá)和微笑表達(dá)的各種表達(dá)的表情符號(hào)。
[0180] 參考圖9 (b)，與貓920發(fā)出的聲音相對(duì)應(yīng)的表情符號(hào)922被輸出。如上所述，通 過(guò)分析貓發(fā)出的聲音的分貝水平或者聲音的模式輸出描寫各種表達(dá)的表情符號(hào)。參考圖9 (c)，如果歌曲被輸出，則與歌曲相對(duì)應(yīng)的視頻信息930被輸出。具體地，取決于拖動(dòng)輸入被 施加到的分段，歌曲的單詞930被輸出。
[0181] 另外，在屏幕151的邊緣部分輸出歌曲的歌詞930,以便于最小化被輸出的歌曲的 歌詞930隱藏的區(qū)域。另外，如果指示歌曲的歌詞的存在的圖標(biāo)940被觸摸，則輸出歌曲的 歌詞。
[0182] 作為實(shí)施例，如果一起輸出歌手的圖像，則包含歌曲的歌詞的口語(yǔ)氣球被輸出使 得面向歌手的圖像。另外，指示歌手的圖標(biāo)與歌手的圖像一起輸出。作為另一實(shí)施例，諸如 歌曲標(biāo)題、歌曲作家、作曲家以及歌手名稱的信息可以被一起輸出。
[0183] 參考圖9(d)，如果在運(yùn)動(dòng)圖像中不存在說(shuō)話者并且敘述存在，則劇本950被輸出。 如在圖9(c)中所圖示，在其上在屏幕151上輸出的對(duì)象不存在或者比較小的區(qū)域上輸出劇 本950,以便于最小化劇本950隱藏的區(qū)域。另外，如果用戶在指示劇本的存在的圖標(biāo)960 上觸摸，則劇本950被輸出。
[0184] 此外，輸出多個(gè)音頻條，其分別對(duì)應(yīng)于當(dāng)回放運(yùn)動(dòng)圖像時(shí)輸出的音頻信息的多個(gè) 項(xiàng)目。作為實(shí)施例，可以輸出對(duì)應(yīng)于說(shuō)話者的音頻條。因此，用戶能夠搜尋通過(guò)他或者她想 要查看的說(shuō)話者發(fā)出的聲音。
[0185] 另外，相對(duì)于音頻條中的每一個(gè)，分別在與用于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)相對(duì)應(yīng) 的音頻條的位置上輸出與從用于回放的時(shí)間點(diǎn)輸出的音頻信息的項(xiàng)目相對(duì)應(yīng)的視頻信息 的項(xiàng)目。多個(gè)麥克風(fēng)被設(shè)置在移動(dòng)終端100中以記錄音頻信息的項(xiàng)目并且根據(jù)相對(duì)應(yīng)的音 頻源在音頻信息的項(xiàng)目之間區(qū)別。
[0186] 接下來(lái)，圖10 (a)-圖13 (c)是圖示用戶界面的實(shí)施例的顯示屏幕，通過(guò)該用戶 界面分別輸出與多個(gè)音頻信息相對(duì)應(yīng)的視頻信息的項(xiàng)目。參考圖10 (a)，如果從多個(gè)說(shuō)話 者1010、1020、以及1030輸入音頻信息，則分別輸出音頻條1012、1022、以及1032,通過(guò)其搜 尋說(shuō)話者的聲音，作為與被輸出的多個(gè)說(shuō)話者1010、1020、以及1030相對(duì)應(yīng)的音頻信息的 結(jié)果。
[0187] 具體地，在音頻條1012、1022、1032上分別輸出表示說(shuō)話者1010、1020、1030的對(duì) 象1014、1024、以及1034,通過(guò)其搜尋說(shuō)話者1010、1020、1030和說(shuō)話者的聲音。例如，在音 頻條1012上一起輸出指示說(shuō)話者A (即，說(shuō)話者1010)的圖標(biāo)1014,作為通過(guò)被搜尋的說(shuō) 話者A發(fā)出的聲音的結(jié)果。
[0188] 在這一點(diǎn)上，按照被輸出的聲音的分貝水平的增加順序選擇與被輸出的各自的音 頻條相對(duì)應(yīng)的多個(gè)說(shuō)話者，或者選擇用戶事先設(shè)置的說(shuō)話者。另外，選擇以預(yù)定的分貝水平 或者更高的分貝發(fā)出聲音的說(shuō)話者。
[0189] 例如，在其上最小化要通過(guò)音頻條隱藏的對(duì)象(例如，說(shuō)話者）的一部分的區(qū)域上 可以輸出每個(gè)音頻條。另外，輸出具有模糊的圖像作用的音頻條，以便于一起識(shí)別運(yùn)動(dòng)圖像 中的圖像和音頻條。
[0190] 參考圖10 (b)，當(dāng)用戶將拖動(dòng)輸入施加到音頻條1012、1022、以及1032中的每一 個(gè)時(shí)，基于說(shuō)話者輸出的聲音被轉(zhuǎn)換成文本信息并且得到的文本信息被輸出。具體地，用戶 能夠通過(guò)將拖動(dòng)輸入單獨(dú)地施加到音頻條1012和1032中的至少一個(gè)或者多個(gè)或者同時(shí)搜 尋被聲音轉(zhuǎn)換的文本信息1016和1036的項(xiàng)目。
[0191] 另外，以被高亮的方式輸出施加拖動(dòng)輸入的分別與音頻條1012和1032相對(duì)應(yīng)的 說(shuō)話者1010和1030的圖像。例如，以與包括文本信息的口語(yǔ)氣球1016和1036的相同的 顏色輸出發(fā)出聲音的說(shuō)話者1010和1030的圖像。作為另一實(shí)施例，可以以不同的顏色和 大小輸出分別從施加拖動(dòng)輸入的音頻條1012和1032輸出的說(shuō)話者1010和1030的圖像。
[0192] 參考圖10 (c)，以與包括文本信息的口語(yǔ)氣球1016和1036的相同的形狀輸出分 別表示說(shuō)話者的對(duì)象1014和1034。例如，可以以被強(qiáng)調(diào)的方式輸出分別表示說(shuō)話者的對(duì)象 1014和1034。即，用于分別表示說(shuō)話者的圖標(biāo)1014和1034的輸出的被強(qiáng)調(diào)的方式可以被 較大、或者被強(qiáng)調(diào)的、不同顏色的方式輸出。
[0193] 參考圖11 (a)，僅輸出與所選擇的說(shuō)話者有關(guān)的音頻條。具體地，當(dāng)為了選擇觸 摸說(shuō)話者A和B (S卩，說(shuō)話者1110和1120)的圖像時(shí)，僅輸出與說(shuō)話者A和B有關(guān)的音頻條 1112和1122。作為另一實(shí)施例，在諸如擠出輸入的輸入被施加到屏幕151以擴(kuò)大屏幕之后， 為了選擇可以觸摸說(shuō)話者的圖像。
[0194] 參考圖11 (b)，選擇特定的音頻條以使特定的音頻條消失。具體地，通過(guò)從屏幕 151的內(nèi)部將拖動(dòng)輸入向外施加到用于說(shuō)話者A的音頻條1112,用于說(shuō)話者A的音頻條 1112或者通過(guò)將拖動(dòng)輸入垂直地施加到音頻條1112使用于說(shuō)話者A的音頻條1112從屏幕 151消失。另外，例如，可以觸摸用于說(shuō)話者A的音頻條1112,以使音頻條1112從屏幕151 消失。
[0195] 參考圖12(a)，當(dāng)拖動(dòng)輸入被施加到音頻條1212時(shí)，通過(guò)該音頻條1212能夠搜尋 說(shuō)話者A (S卩，說(shuō)話者1210)發(fā)出的聲音，通過(guò)說(shuō)話者A發(fā)出的聲音被轉(zhuǎn)換成文本信息1214 并且得到的文本信息1214被輸出。同樣地，當(dāng)拖動(dòng)輸入被施加到音頻條1222時(shí)，通過(guò)該音 頻條1222能夠搜尋通過(guò)說(shuō)話者A (S卩，說(shuō)話者1220)發(fā)出的聲音，通過(guò)說(shuō)話者B發(fā)出的聲音 被轉(zhuǎn)換成文本信息1224,并且得到的文本信息1224被輸出。拖動(dòng)輸入同時(shí)或者單獨(dú)地施加 到音頻條1212和1222。
[0196] 參考圖12 (b)和圖12 (c)，通過(guò)將組合的拖動(dòng)輸入分別施加到與說(shuō)話者A和B相 對(duì)應(yīng)的音頻條1212和1222輸出音頻條1212和1222作為一個(gè)音頻條1240。以相同的方 式，通過(guò)將分離的拖動(dòng)輸入施加到音頻條1240從組合產(chǎn)生的音頻條1240被分離成多個(gè)音 頻條1212和1222。S卩，圖12 (c)中的狀態(tài)返回到圖12 (b)中的狀態(tài)。
[0197] 作為另一實(shí)施例，其中能夠編輯音頻條的編輯模式能夠被鍵入，并且為了選擇可 以觸摸打算被組合的多個(gè)音頻條。因此，輸出對(duì)應(yīng)于所選擇的多個(gè)音頻條的一個(gè)音頻條。
[0198] 作為具體的實(shí)施例，當(dāng)用戶在編輯模式下觸摸用于說(shuō)話者B的音頻條1222和用于 說(shuō)話者C的音頻條1232時(shí)，用于說(shuō)話者B的音頻條1222和用于說(shuō)話者C的音頻條1232可 以作為一個(gè)音頻條被輸出。在這一點(diǎn)上，用戶能夠?qū)蓚€(gè)或者多個(gè)音頻條組得到一個(gè)音頻 條。
[0199] 參考圖12 (d)，當(dāng)拖動(dòng)輸入被施加到如在圖12 (c)中所圖示的由組合產(chǎn)生的音 頻條1240時(shí)，分別被輸出到音頻條的文本信息1214和1224的項(xiàng)目，如在圖12 (a)中所圖 示，被輸出到一個(gè)音頻條。作為實(shí)施例，均指示說(shuō)話者的對(duì)象1216和1226可以與文本信息 1214和1224的項(xiàng)目一起顯示。
[0200] 作為另一實(shí)施例，僅可以輸出聲音，其對(duì)應(yīng)于與由組合產(chǎn)生的音頻條相對(duì)應(yīng)的聲 音的最大分貝。另外，僅輸出文本信息，對(duì)應(yīng)于用戶選擇的聲音。
[0201] 參考圖13 (a)，輸出與分別檢測(cè)到的多個(gè)聲音相對(duì)應(yīng)的音頻條1310、1320、1330、 以及1340。在這一點(diǎn)上，用戶能夠通過(guò)靜音在搜索期間他或者她不想要使用的音頻條 1310、1330、以及1340能夠僅搜尋所期待的聲音。例如，在編輯模式中，用戶能夠觸摸和選 擇他或者她想要靜音的音頻條1310、1330、以及1340。
[0202] 參考圖13 (b)，僅輸出被選擇為用戶沒(méi)有靜音的音頻條1320,并且用戶能夠?qū)⑼?動(dòng)輸入施加到所選擇的音頻條1320。因此，在音頻條1320上輸出與所選擇的音頻信息相對(duì) 應(yīng)的文本信息1322。
[0203] 參考圖13(c)，一起輸出文本信息1322和與文本信息1322相對(duì)應(yīng)的聲音。在這一 點(diǎn)上，用戶能夠通過(guò)將擠出輸入施加到包括文本信息的口語(yǔ)氣球1322增加口語(yǔ)氣球1322 的大小。另外，隨著口語(yǔ)氣球1332的大小被增加，被包括在口語(yǔ)氣球1332中的文本信息的 字母的大小被增加。因此，要被輸出的聲音的數(shù)量被增加。用戶也能夠輸入與音頻信息相 對(duì)應(yīng)的視頻信息，由此他或者她想要搜索，并且從而能夠檢測(cè)包括這樣的音頻信息的移動(dòng) 圖的列表。
[0204] 接下來(lái)，圖14 (a)_圖15 (c)是圖示用戶接口的實(shí)施例的圖，通過(guò)該用戶接口搜 尋包括音頻信息的運(yùn)動(dòng)圖像。參考圖14 (a)，當(dāng)輸入要被搜尋的聲音作為文本信息1410 時(shí)，以縮略圖的形式輸出包括作為聲音被輸入的文本信息1410的運(yùn)動(dòng)圖像的列表。
[0205] 具體地，在運(yùn)動(dòng)圖像的列表中的每一個(gè)上輸出均包括被輸入的文本信息1410的 整個(gè)場(chǎng)景1420和1430。另外，當(dāng)用戶在運(yùn)動(dòng)圖像的縮略圖1440上觸摸時(shí)，回放包括在相對(duì) 應(yīng)的運(yùn)動(dòng)圖像中存在的文本信息的片段。另外，當(dāng)用戶在音頻按鈕1450上觸摸時(shí)，輸出在 包括文本信息的運(yùn)動(dòng)圖像中存在的聲音。
[0206] 參考圖14(b)，當(dāng)輸入要被搜尋的表情符號(hào)時(shí)，以縮略圖的形式輸出包括與被輸入 的表情符號(hào)相對(duì)應(yīng)的音頻信息的運(yùn)動(dòng)圖像的列表。例如，當(dāng)用戶輸入描寫微笑表達(dá)的表情 符號(hào)1460時(shí)，以縮略圖的形式輸出包括笑聲的運(yùn)動(dòng)圖像的列表。與圖14 (a)相類似，當(dāng)用 戶在運(yùn)動(dòng)圖像的縮略圖1470上觸摸時(shí)，以包括笑聲的片段開始回放相對(duì)應(yīng)的運(yùn)動(dòng)圖像。另 夕卜，當(dāng)用戶在音頻按鈕1480上觸摸時(shí)，僅事先聽到被包括在相對(duì)應(yīng)的運(yùn)動(dòng)圖像中的笑聲。
[0207] 例如，如果均包括與輸入的文本信息相對(duì)應(yīng)的音頻信息，或者與表情符號(hào)相對(duì)應(yīng) 的音頻信息的片段的數(shù)目在運(yùn)動(dòng)圖像中是兩個(gè)或者更多個(gè)，則分別輸出對(duì)應(yīng)于片段的文本 信息的多個(gè)項(xiàng)目或者多個(gè)表情符號(hào)。因此，如在圖14 (b)中所示，在運(yùn)動(dòng)圖像的列表上輸 出分別對(duì)應(yīng)于兩個(gè)片段的多個(gè)表情符號(hào)1490,在其中的每一個(gè)中笑聲存在。
[0208] 參考圖15 (a)，一起輸入與要被搜尋的聲音相對(duì)應(yīng)的文本信息1510和表情符號(hào) 1520。因此，以縮略圖的形式輸出包括與被輸入的文本信息1510和表情符號(hào)1520相對(duì)應(yīng) 的聲音的運(yùn)動(dòng)圖像的列表。
[0209] 參考圖15 (b)，當(dāng)在圖15 (a)中，用戶在被輸出的縮略圖的一個(gè)縮略圖1530上觸 摸以選擇被觸摸的一個(gè)縮略圖1530時(shí)，輸出搜索條1540,其對(duì)應(yīng)于用于與所選擇的一個(gè)縮 略圖1530相對(duì)應(yīng)的運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)。
[0210] 具體地，在音頻條1540的位置上輸出文本信息1510和表情符號(hào)1520,其對(duì)應(yīng)于 用于運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)，從該時(shí)間點(diǎn)分別輸出與輸入的文本信息1510和表情符號(hào) 1520相對(duì)應(yīng)的聲音。在這一點(diǎn)上，用于與文本信息1510和表情符號(hào)1520中的每一個(gè)相對(duì) 應(yīng)的運(yùn)動(dòng)圖像的回放的時(shí)間與音頻條1540 -起被顯示。
[0211] 參考圖15 (c)，當(dāng)在圖15 (b)中用戶在文本信息的相對(duì)應(yīng)的項(xiàng)目的文本信息1550 的至少一個(gè)項(xiàng)目上觸摸時(shí)，輸出包括相對(duì)應(yīng)的文本信息的運(yùn)動(dòng)圖像中的整個(gè)句子1560。另 夕卜，當(dāng)再次觸摸整個(gè)句子1560時(shí)，以從其輸出整個(gè)句子1560的片段開始回放運(yùn)動(dòng)圖像。
[0212] 根據(jù)本發(fā)明的實(shí)施例，輸出作為文本信息的運(yùn)動(dòng)圖像中的語(yǔ)音，并且從而快速地 和精確地搜尋所期待的場(chǎng)景。另外，當(dāng)說(shuō)出語(yǔ)音轉(zhuǎn)換的文本信息的說(shuō)話者被聚焦和輸出時(shí)， 或者當(dāng)速度快時(shí)，以該速度觸摸輸入被施加到搜索條，僅語(yǔ)音轉(zhuǎn)換的文本信息中的關(guān)鍵字 被提供。因此，能夠提高運(yùn)動(dòng)圖像中的場(chǎng)景的視覺(jué)識(shí)別。
[0213] 然后，在沒(méi)有回放運(yùn)動(dòng)圖像的情況下能夠快速地和簡(jiǎn)單地搜尋所期待的場(chǎng)景，并 且基于語(yǔ)音的運(yùn)動(dòng)圖像搜索是可能的，其中僅選擇和搜尋在多個(gè)語(yǔ)音當(dāng)中的所期待的語(yǔ) 音。結(jié)果，能夠提高用戶便利。
[0214] 另外，根據(jù)在本說(shuō)明書中公開的一個(gè)實(shí)施例，通過(guò)作為處理器可讀的代碼存儲(chǔ)在 存儲(chǔ)程序的介質(zhì)上可以實(shí)現(xiàn)上述方法。ROM、RAM、⑶-ROM、磁帶、軟盤、光數(shù)據(jù)存儲(chǔ)裝置等等 是處理器可讀介質(zhì)的示例，并且處理器可讀介質(zhì)可以以載波(例如，在因特網(wǎng)上的傳輸）的 形式實(shí)現(xiàn)。
[0215] 前述實(shí)施例和優(yōu)點(diǎn)僅是示例性的并且沒(méi)有被認(rèn)為是限制本公開。本教導(dǎo)能夠被容 易地應(yīng)用于其它類型的裝置。此描述旨在是說(shuō)明性的，并且沒(méi)有限制權(quán)利要求的范圍。許 多替代、修改以及變化對(duì)于本領(lǐng)域的技術(shù)人員來(lái)說(shuō)將會(huì)是顯然的。可以以各種方式組合在 此描述的示例性實(shí)施例的特征、結(jié)構(gòu)、方法以及其它特性以獲得附加的和/或替代的示例 性實(shí)施例。
[0216] 當(dāng)在沒(méi)有脫離其特性的情況下以多種形式實(shí)施本特征時(shí)，也應(yīng)理解的是，上述實(shí) 施例不受前面描述的任何詳情的限制，除非另有規(guī)定，而是應(yīng)在隨附的權(quán)利要求中定義的 范圍內(nèi)廣泛地解釋，并且因此落入權(quán)利要求的范圍和界限或者這種范圍和界限的等同物內(nèi) 的所有變化和修改旨在由隨附的權(quán)利要求涵蓋。
【權(quán)利要求】
1. 一種移動(dòng)終端，包括： 顯示單元，所述顯示單元被配置成顯示運(yùn)動(dòng)圖像； 用戶輸入單元，所述用戶輸入單元被配置成選擇所述運(yùn)動(dòng)圖像的運(yùn)動(dòng)圖像片段；以及 控制器，所述控制器被配置成： 在所述顯示單元上顯示與從所述被選擇的運(yùn)動(dòng)圖像片段輸出的音頻信息相對(duì)應(yīng)的視 頻信息， 將從所述被選擇的運(yùn)動(dòng)圖像片段輸出的語(yǔ)音信息轉(zhuǎn)換成文本信息；以及 在所述顯示單元上顯示所述文本信息。
2. 根據(jù)權(quán)利要求1所述的移動(dòng)終端，其中，所述控制器進(jìn)一步被配置成，取決于所述運(yùn) 動(dòng)圖像的片段被選擇的搜索速度，不同地顯示與所述音頻信息相對(duì)應(yīng)的視頻信息。
3. 根據(jù)權(quán)利要求1所述的移動(dòng)終端，其中，所述控制器進(jìn)一步被配置成，在所述顯示單 元上顯示所述文本信息，使得所述文本信息與產(chǎn)生所述音頻信息的說(shuō)話者相鄰。
4. 根據(jù)權(quán)利要求3所述的移動(dòng)終端，其中，所述控制器進(jìn)一步被配置成高亮產(chǎn)生所述 音頻信息的說(shuō)話者。
5. 根據(jù)權(quán)利要求2所述的移動(dòng)終端，其中，所述控制器進(jìn)一步被配置成，在所述顯示單 元上取決于所述搜索速度顯示與所述被轉(zhuǎn)換的文本信息相對(duì)應(yīng)的所述文本信息中的關(guān)鍵 字。
6. 根據(jù)權(quán)利要求1所述的移動(dòng)終端，其中，所述用戶輸入單元包括搜索條，所述搜索條 被顯示在所述顯示單元上， 其中，所述控制器進(jìn)一步被配置成，基于被施加到所述搜索條的拖動(dòng)輸入進(jìn)入內(nèi)容搜 索模式并且選擇所述運(yùn)動(dòng)圖像的片段，并且 其中，所述搜索條的位置分別對(duì)應(yīng)于用于所述運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)。
7. 根據(jù)權(quán)利要求6所述的移動(dòng)終端，其中，所述控制器進(jìn)一步被配置成，將從所述被選 擇的片段輸出的所述語(yǔ)音信息轉(zhuǎn)換成所述文本信息并且在對(duì)應(yīng)于所述運(yùn)動(dòng)圖像的回放的 時(shí)間點(diǎn)的所述搜索條的位置上顯示所述文本信息，從所述時(shí)間點(diǎn)輸出所述語(yǔ)音信息。
8. 根據(jù)權(quán)利要求6所述的移動(dòng)終端，其中，所述控制器進(jìn)一步被配置成，在對(duì)應(yīng)于用于 所述運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)的所述搜索條的位置上顯示與所述音頻信息相對(duì)應(yīng)的視頻 信息，從所述時(shí)間點(diǎn)輸出所述音頻信息。
9. 根據(jù)權(quán)利要求1所述的移動(dòng)終端，其中，所述控制器進(jìn)一步被配置成，當(dāng)回放的所述 運(yùn)動(dòng)圖像分別被輸出時(shí)，顯示與輸入的多個(gè)音頻信息相對(duì)應(yīng)的多個(gè)音頻條，并且 其中，相對(duì)于所述音頻條中的每個(gè)，所述控制器在與用于回放的時(shí)間點(diǎn)相對(duì)應(yīng)的音頻 條的位置上分別輸出與從用于所述運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)輸出的所述音頻信息的項(xiàng)目 相對(duì)應(yīng)的視頻信息的項(xiàng)目。
10. -種控制移動(dòng)終端的方法，包括： 選擇運(yùn)動(dòng)圖像的片段；和 在顯示單元上輸出與從所述被選擇的片段輸出的音頻信息相對(duì)應(yīng)的視頻信息， 其中，所述視頻信息的輸出包括將從所述被選擇的片段輸出的語(yǔ)音信息轉(zhuǎn)換成文本信 息并且在所述顯示單元上輸出所述文本信息。
11. 根據(jù)權(quán)利要求10所述的方法，其中，所述視頻信息的輸出包括，取決于選擇所述運(yùn) 動(dòng)圖像的片段的搜索速度，不同地輸出與所述音頻信息相對(duì)應(yīng)的視頻信息。
12. 根據(jù)權(quán)利要求10所述的方法，其中，所述視頻信息的輸出包括，以所述文本信息與 說(shuō)出所述音頻信息的說(shuō)話者相鄰的方式在所述顯示單元上輸出所述文本信息。
13. 根據(jù)權(quán)利要求12所述的方法，其中，所述視頻信息的輸出包括，控制所述顯示單元 以高亮說(shuō)出所述音頻信息的說(shuō)話者。
14. 根據(jù)權(quán)利要求11所述的方法，其中，所述視頻信息的輸出包括，在所述顯示單元上 取決于所述搜索速度輸出與所述被轉(zhuǎn)換的文本信息相對(duì)應(yīng)的所述文本信息中的關(guān)鍵字。
15. 根據(jù)權(quán)利要求10所述的方法，其中，所述片段的選擇包括將拖動(dòng)輸入施加到在所 述顯示單元上輸出的搜索條， 其中，作為所述運(yùn)動(dòng)圖像的片段被選擇的結(jié)果，進(jìn)入內(nèi)容搜索模式，并且 其中，所述搜索條的位置分別對(duì)應(yīng)于所述運(yùn)動(dòng)圖像的回放的時(shí)間點(diǎn)。
16. 根據(jù)權(quán)利要求15所述的方法，其中，所述視頻信息的輸出包括，將從所述被選擇的 片段輸出的所述語(yǔ)音信息轉(zhuǎn)換成所述文本信息，并且在對(duì)應(yīng)于用于所述運(yùn)動(dòng)圖像的回放的 時(shí)間點(diǎn)的搜索條的位置上輸出所述文本信息，從所述時(shí)間點(diǎn)輸出所述語(yǔ)音信息。
17. 根據(jù)權(quán)利要求15所述的方法，其中，所述視頻信息的輸出包括，在對(duì)應(yīng)于用于所述 回放的時(shí)間點(diǎn)的搜索條的位置上輸出與所述音頻信息相對(duì)應(yīng)的視頻信息，從所述時(shí)間點(diǎn)輸 出所述音頻信息。
18. 根據(jù)權(quán)利要求10所述的方法，其中，所述片段的選擇包括，分別輸出與當(dāng)回放所述 運(yùn)動(dòng)圖像時(shí)輸入的所述多個(gè)音頻信息相對(duì)應(yīng)的多個(gè)音頻條，并且 其中，所述視頻信息的輸出包括，相對(duì)于所述音頻條中的每一個(gè)，在與用于所述運(yùn)動(dòng)圖 像的回放的時(shí)間點(diǎn)相對(duì)應(yīng)的音頻條的位置上，分別輸出與從用于所述回放的時(shí)間點(diǎn)輸出的 音頻信息的項(xiàng)目相對(duì)應(yīng)的視頻信息的項(xiàng)目。
19. 一種移動(dòng)終端，包括： 顯示單元，在所述顯示單元上輸出運(yùn)動(dòng)圖像；和 控制器，所述控制器被配置成： 搜索所述運(yùn)動(dòng)圖像的多個(gè)片段以選擇在所述運(yùn)動(dòng)圖像的被選擇的片段中的包括與多 個(gè)說(shuō)話者相對(duì)應(yīng)的至少一個(gè)音頻源的片段， 從所述被選擇的片段中識(shí)別與所述至少一個(gè)音頻源相對(duì)應(yīng)的至少一個(gè)語(yǔ)音信息， 將從所述被選擇的片段中識(shí)別的所述至少一個(gè)語(yǔ)音信息轉(zhuǎn)換成至少一個(gè)文本信息，以 及 輸出都與所述至少一個(gè)音頻源相對(duì)應(yīng)的所述至少一個(gè)文本信息和所述至少一個(gè)語(yǔ)音 信息，同時(shí)輸出所述被選擇的運(yùn)動(dòng)圖像的片段。
20. 根據(jù)權(quán)利要求19所述的移動(dòng)終端，其中，所述控制器進(jìn)一步被配置成取決于所述 搜索速度將從所述被選擇的片段中識(shí)別的所述至少一個(gè)語(yǔ)音信息轉(zhuǎn)換成所述至少一個(gè)文 本信息。
【文檔編號(hào)】H04N21/41GK104284219SQ201410095403
【公開日】2015年1月14日 申請(qǐng)日期:2014年3月14日 優(yōu)先權(quán)日:2013年7月11日
【發(fā)明者】李靜彬, 韓美蘭, 李瑟兒, 李晶允 申請(qǐng)人:Lg電子株式會(huì)社