文字輸入用方法和系統(tǒng)的制作方法
【專(zhuān)利摘要】本發(fā)明涉及文字輸入用方法和系統(tǒng)，提供一種用于提高文字輸入系統(tǒng)的輸入預(yù)測(cè)的精度及便利性的技術(shù)。文字輸入系統(tǒng)(1)在向用于處理圖像的應(yīng)用(AP)進(jìn)行文字輸入時(shí)，識(shí)別該圖像所包含的對(duì)象(人物、字符串物體等)，并將與所識(shí)別出的對(duì)象關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到輸入預(yù)測(cè)的語(yǔ)句的候選組中。
【專(zhuān)利說(shuō)明】文字輸入用方法和系統(tǒng)

【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及支援電子設(shè)備的文字輸入的技術(shù)，特別地，涉及輸入預(yù)測(cè)功能的改良。

【背景技術(shù)】
[0002]在對(duì)電子設(shè)備進(jìn)行文字輸入時(shí)，通常利用被稱(chēng)作文字輸入系統(tǒng)(還稱(chēng)作輸入法(IM))的軟件。最近，搭載了用于輔助用戶(hù)的輸入操作的“輸入預(yù)測(cè)”功能的文字輸入系統(tǒng)也很多。輸入預(yù)測(cè)是指如下的功能:預(yù)測(cè)用戶(hù)輸入的語(yǔ)句并提示多個(gè)候選，通過(guò)使用戶(hù)能夠從這些多個(gè)候選中選擇目的語(yǔ)句，來(lái)實(shí)現(xiàn)文字輸入(在提示候選時(shí)還一同進(jìn)行假名(日語(yǔ)音節(jié)文字)漢字變換等文字變換，因而稱(chēng)作“預(yù)測(cè)變換”)。通過(guò)利用輸入預(yù)測(cè)功能，能夠大幅減少擊鍵(key-stroke)并且能夠避免輸入失誤，因而在如手機(jī)那樣用較少的按鍵進(jìn)行文字輸入的情況及如智能手機(jī)或平板式終端那樣利用觸摸屏上的軟鍵盤(pán)進(jìn)行文字輸入的情況等下特別有用。
[0003]在一般的輸入預(yù)測(cè)中，基于預(yù)先登錄的預(yù)測(cè)詞典和用戶(hù)的輸入歷史記錄，以使使用頻度高的語(yǔ)句位于上方位置的方式，決定提示的候選組。該方法在大多情況下能夠得到良好的結(jié)果，但是還會(huì)出現(xiàn)不少在候選組中沒(méi)有出現(xiàn)用戶(hù)打算輸入的語(yǔ)句(或者，顯示在下方位置)的情況。因此，希望進(jìn)行用于提高輸入預(yù)測(cè)精度的改良。
[0004]例如，在專(zhuān)利文獻(xiàn)I中提出了如下的方法:在利用照相機(jī)或圖像編輯軟件來(lái)將文字信息添加到圖像上時(shí)，在文字變換候選的上方位置，提示與拍攝圖像的位置及圖像的情景關(guān)聯(lián)的語(yǔ)句。但是，該方法不能應(yīng)用到未記錄有拍攝位置的信息的圖像上(限定于具有位置記錄功能的照相機(jī))，因而具有缺乏通用性的缺點(diǎn)。另外，通過(guò)情景分析得到的信息僅限于山的照片、人物照片、夜景這樣的概要的信息，因而不能提示與被攝體固有的屬性關(guān)聯(lián)的語(yǔ)句(例如，人物的姓名等)來(lái)作為預(yù)測(cè)候選。
[0005]現(xiàn)有技術(shù)文獻(xiàn)
[0006]專(zhuān)利文獻(xiàn)
[0007]專(zhuān)利文獻(xiàn)1:日本特開(kāi)2010-152608號(hào)公報(bào)


【發(fā)明內(nèi)容】

[0008]本發(fā)明是鑒于上述實(shí)際情況而作出的，本發(fā)明的目的在于，提供一種用于提高文字輸入系統(tǒng)中的輸入預(yù)測(cè)的精度及便利性的技術(shù)。
[0009]為了達(dá)成上述目的，在本發(fā)明中采用如下結(jié)構(gòu):在向用于處理圖像的應(yīng)用(applicat1n)進(jìn)行文字輸入時(shí)，識(shí)別該圖像所包含的對(duì)象(人物、字符串、物體等)，并將與識(shí)別出的對(duì)象關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到輸入預(yù)測(cè)的語(yǔ)句的候選組中。
[0010]具體地，本發(fā)明的第一技術(shù)方案是一種文字輸入用方法，其具有輸入預(yù)測(cè)功能，所述輸入預(yù)測(cè)功能用于向用戶(hù)提示預(yù)測(cè)用戶(hù)會(huì)輸入的語(yǔ)句的候選組，所述文字輸入用方法包括:圖像識(shí)別步驟，在對(duì)處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)，通過(guò)圖像識(shí)別來(lái)識(shí)別所述圖像所包含的人物；候選追加步驟，將與從所述圖像中識(shí)別出的人物關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到在對(duì)所述處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)所提示的語(yǔ)句的候選組中。
[0011]輸入預(yù)測(cè)功能可以?xún)H提供對(duì)用戶(hù)的輸入進(jìn)行補(bǔ)充的功能，除了補(bǔ)充輸入之外，還可以提供假名漢字變換等文字變換功能(所謂的預(yù)測(cè)變換功能)。另外，輸入預(yù)測(cè)功能可以基于正在輸入的文字(確定之前的文字)來(lái)創(chuàng)建并提示候選組，還可以基于剛剛輸入的(已確定的)語(yǔ)句及用戶(hù)剛剛進(jìn)行的操作等來(lái)創(chuàng)建并提示候選組。
[0012]用于處理圖像的應(yīng)用是指，具有添加、插入、顯示或編輯圖像的功能等的應(yīng)用，例如，郵件軟件、SNS(社會(huì)性網(wǎng)絡(luò)服務(wù))瀏覽器(browser)、Web (網(wǎng)頁(yè))瀏覽器(browser)、文字處理軟件、表格計(jì)算軟件、圖像瀏覽器(viewer)、圖像編輯軟件等應(yīng)用。
[0013]圖像識(shí)別是指識(shí)別并確定圖像中包含的對(duì)象的處理。即，在圖像識(shí)別步驟中，不停留在從圖像中檢測(cè)出對(duì)象(人物等)的級(jí)別，還識(shí)別并確定所檢測(cè)出的該對(duì)象是誰(shuí)。
[0014]此外，在本說(shuō)明書(shū)中沒(méi)有特別說(shuō)明的情況下，“文字”這樣的術(shù)語(yǔ)表示“一個(gè)以上的文字”的意思，“文字”還包含英文字母、數(shù)字、平假名、片假名、漢字、其他的特殊文字等所有類(lèi)型的文字。另外，“字符串”和“語(yǔ)句”這樣的術(shù)語(yǔ)均表示“由一個(gè)以上的文字構(gòu)成的文字的集合”的意思，將從圖像中得到的文字信息稱(chēng)作“字符串”，將文字輸入或預(yù)測(cè)候選的單位稱(chēng)作“語(yǔ)句”，由此來(lái)區(qū)分兩者。
[0015]根據(jù)如上所述的第一技術(shù)方案的方法，在用戶(hù)進(jìn)行文字輸入時(shí)，提示與圖像中的人物關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句來(lái)作為輸入預(yù)測(cè)的候選。由此，在用戶(hù)要輸入與圖像中的人物關(guān)聯(lián)的文章的情況下，能夠提高能夠提示與用戶(hù)打算輸入的語(yǔ)句一致的候選的可能性，從而能夠提高輸入預(yù)測(cè)的精度及便利性。
[0016]本發(fā)明的第二技術(shù)方案是一種文字輸入用方法，其具有輸入預(yù)測(cè)功能，所述輸入預(yù)測(cè)功能用于向用戶(hù)提示預(yù)測(cè)用戶(hù)會(huì)輸入的語(yǔ)句的候選組，所述文字輸入用方法包括:圖像識(shí)別步驟，在對(duì)處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)，通過(guò)圖像識(shí)別來(lái)識(shí)別所述圖像所包含的字符串；候選追加步驟，將與從所述圖像中識(shí)別出的字符串關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到在對(duì)所述處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)所提示的語(yǔ)句的候選組中。
[0017]根據(jù)該第二技術(shù)方案的方法，在用戶(hù)進(jìn)行文字輸入時(shí)，提示與圖像中的字符串關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句(字符串自身也是關(guān)聯(lián)語(yǔ)句之一)來(lái)作為輸入預(yù)測(cè)的候選。由此，在用戶(hù)要輸入圖像中的字符串自身或與該字符串關(guān)聯(lián)的文章的情況下，能夠提高能夠提示與用戶(hù)打算輸入的語(yǔ)句一致的候選的可能性，從而能夠提高輸入預(yù)測(cè)的精度及便利性。
[0018]在圖像識(shí)別步驟中，可以通過(guò)圖像識(shí)別來(lái)識(shí)別圖像所包含的人物和字符串雙方，在候選追加步驟中，可以將從圖像中識(shí)別出的人物和字符串各自的關(guān)聯(lián)語(yǔ)句追加到候選組中。進(jìn)而，在圖像識(shí)別步驟中，還可以通過(guò)圖像識(shí)別來(lái)識(shí)別圖像所包含的特定物體，在候選追加步驟中，可以將與從圖像中識(shí)別出的特定物體關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到候選組中?！疤囟ㄎ矬w”是指，人物和字符串以外的物體中能夠通過(guò)本方法識(shí)別出的物體。此外，在對(duì)不同類(lèi)型的對(duì)象(例如，人物和字符串、人物和特定物體、字符串和特定物體、人物和字符串和特定物體)進(jìn)行識(shí)別處理的情況下，可以同時(shí)(并列地)對(duì)各對(duì)象執(zhí)行識(shí)別處理，也可以依次(循序地)執(zhí)行識(shí)別處理。另外，在各對(duì)象的識(shí)別處理中，可以使用相同的程序模塊，也可以對(duì)每個(gè)對(duì)象使用不同的程序模塊。
[0019]在候選追加步驟中，可以參照數(shù)據(jù)庫(kù)，獲取與從所述圖像中識(shí)別出的對(duì)象關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句，所述數(shù)據(jù)庫(kù)針對(duì)能夠通過(guò)圖像識(shí)別來(lái)識(shí)別出的每個(gè)對(duì)象預(yù)先登錄有一個(gè)以上的關(guān)聯(lián)語(yǔ)句。通過(guò)利用這樣的數(shù)據(jù)庫(kù)，能夠簡(jiǎn)單地實(shí)現(xiàn)關(guān)聯(lián)語(yǔ)句的預(yù)測(cè)處理，并且能夠?qū)崿F(xiàn)高速的處理。
[0020]在圖像識(shí)別步驟中識(shí)別出多個(gè)對(duì)象的情況下，可以在所述候選追加步驟中，將識(shí)別出的所述多個(gè)對(duì)象的各自的關(guān)聯(lián)語(yǔ)句追加到所述候選組中?！白R(shí)別出多個(gè)對(duì)象”的情況包括從一個(gè)圖像中識(shí)別出多個(gè)對(duì)象的情況和從多個(gè)圖像中識(shí)別出多個(gè)對(duì)象的情況雙方。另外，“多個(gè)對(duì)象”可以是相同類(lèi)型的多個(gè)對(duì)象(例如，多個(gè)人物、多個(gè)字符串等)，也可以是不同類(lèi)型的多個(gè)對(duì)象(例如，人物和字符串、人物和字符串和特定物體等)。像這樣，在識(shí)別出多個(gè)對(duì)象的情況下，通過(guò)將這些所有的關(guān)聯(lián)語(yǔ)句追加到候選組中，能夠提高能夠提示用戶(hù)打算輸入的語(yǔ)句的可能性。
[0021]在候選追加步驟中，可以以與僅與一個(gè)對(duì)象關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句相比優(yōu)先提示與多個(gè)對(duì)象關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句的方式，決定追加到所述候選組中的關(guān)聯(lián)語(yǔ)句的順序。由于認(rèn)為和多個(gè)對(duì)象關(guān)聯(lián)的語(yǔ)句與用戶(hù)打算輸入的語(yǔ)句一致的可能性高，所以通過(guò)以上述方式調(diào)整提示順序或縮小提示的候選，能夠期待輸入預(yù)測(cè)的精度及便利性的提高。
[0022]此外，本發(fā)明還能夠提供一種具有上述處理的至少一部分的文字輸入用方法，或者提供一種存儲(chǔ)有該方法的計(jì)算機(jī)能夠讀取的記錄介質(zhì)。另外，本發(fā)明還能夠提供一種電子設(shè)備(或者內(nèi)置于電子設(shè)備中的計(jì)算機(jī))，該電子設(shè)備具有:存儲(chǔ)裝置，其存儲(chǔ)具有上述處理的至少一部分的文字輸入用方法的程序；處理器，其從該存儲(chǔ)裝置中讀取程序并執(zhí)行該程序。進(jìn)而，本發(fā)明還能夠提供一種通過(guò)上述電子設(shè)備等執(zhí)行文字輸入用方法來(lái)實(shí)現(xiàn)的文字輸入系統(tǒng)，或者還提供一種文字輸入支援方法。上述電子設(shè)備例如包括個(gè)人計(jì)算機(jī)、手機(jī)、智能手機(jī)、平板式終端(板(slate)式終端)、便攜式信息終端、游戲裝置、電視裝置、拍攝裝置等。只要在技術(shù)上不產(chǎn)生矛盾的情況下，能夠通過(guò)組合上述各結(jié)構(gòu)及各處理來(lái)構(gòu)成本發(fā)明。
[0023]根據(jù)本發(fā)明，能夠提高文字輸入系統(tǒng)的輸入預(yù)測(cè)的精度及便利性。

【專(zhuān)利附圖】

【附圖說(shuō)明】
[0024]圖1是示意性示出了第一實(shí)施方式的文字輸入系統(tǒng)的功能結(jié)構(gòu)的圖。
[0025]圖2是特征量數(shù)據(jù)庫(kù)和關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)的數(shù)據(jù)結(jié)構(gòu)的例子。
[0026]圖3是追加新登錄者的情況的用戶(hù)界面的例子。
[0027]圖4是第一實(shí)施方式的文字輸入系統(tǒng)的流程圖。
[0028]圖5是第一實(shí)施方式的文字輸入系統(tǒng)的動(dòng)作例。
[0029]圖6是第二實(shí)施方式的文字輸入系統(tǒng)的動(dòng)作例。
[0030]圖7是第四實(shí)施方式的文字輸入系統(tǒng)的動(dòng)作例。
[0031]其中，附圖標(biāo)記的說(shuō)明如下:
[0032]I文字輸入系統(tǒng)，
[0033]10輸入接受部，
[0034]11 詞典，
[0035]12候選創(chuàng)建部，
[0036]13候選顯示部，
[0037]14輸入語(yǔ)句確定部，
[0038]15圖像獲取部，
[0039]16圖像識(shí)別部，
[0040]17關(guān)聯(lián)語(yǔ)句提取部，
[0041]18特征量數(shù)據(jù)庫(kù)，
[0042]19關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)。

【具體實(shí)施方式】
[0043]下面，參照附圖，說(shuō)明本發(fā)明的優(yōu)選的實(shí)施方式。在下面的實(shí)施方式中，例舉了如下的情況:將本發(fā)明的文字輸入用方法應(yīng)用到電子設(shè)備(具體地，是智能手機(jī))的文字輸入系統(tǒng)(輸入方法)中，向在智能手機(jī)中動(dòng)作的應(yīng)用程序之一的郵件軟件輸入日語(yǔ)。但是，這表示本發(fā)明的應(yīng)用例之一，按照本發(fā)明的方法進(jìn)行動(dòng)作的電子設(shè)備的類(lèi)型、成為文字輸入對(duì)象的應(yīng)用程序的類(lèi)型沒(méi)有特別的限定。另外，并不限定于日語(yǔ)輸入，還能夠?qū)⒈景l(fā)明應(yīng)用于任何語(yǔ)言的文字輸入。
[0044]<第一實(shí)施方式>
[0045](系統(tǒng)結(jié)構(gòu))
[0046]圖1是示意性示出了本發(fā)明的第一實(shí)施方式的文字輸入系統(tǒng)的功能結(jié)構(gòu)的圖。該文字輸入系統(tǒng)I用于向在智能手機(jī)上動(dòng)作的各種應(yīng)用程序AP(還簡(jiǎn)稱(chēng)為應(yīng)用)輸入文字，包括輸入接受部10、詞典11、候選創(chuàng)建部12、候選顯示部13、輸入語(yǔ)句確定部14、圖像獲取部15、圖像識(shí)別部16、關(guān)聯(lián)語(yǔ)句提取部17、特征量數(shù)據(jù)庫(kù)18、關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19等。通過(guò)由處理器按照保存在智能手機(jī)的存儲(chǔ)器(存儲(chǔ)裝置)中的文字輸入用方法執(zhí)行處理，來(lái)實(shí)現(xiàn)這些功能。詞典11、特征量數(shù)據(jù)庫(kù)18及關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19可以構(gòu)建在智能手機(jī)所具備的非易失性存儲(chǔ)裝置中，也可以將三者中的一部分或全部的數(shù)據(jù)置于外部的(LAN上或云端上的)計(jì)算機(jī)或存儲(chǔ)裝置。在采用后者的結(jié)構(gòu)的情況下，文字輸入系統(tǒng)I根據(jù)需要，經(jīng)由網(wǎng)絡(luò)獲取或參照詞典11及數(shù)據(jù)庫(kù)18、19的信息。
[0047]輸入接受部10發(fā)揮接受來(lái)自用戶(hù)的輸入操作的功能。作為輸入操作，列舉有輸入文字、改變所輸入的文字種類(lèi)、刪除文字、從通過(guò)輸入預(yù)測(cè)來(lái)提示的候選組中選擇語(yǔ)句等。用戶(hù)例如能夠通過(guò)利用手指或觸控筆等對(duì)觸摸屏顯示器進(jìn)行點(diǎn)擊(tap)、輕彈(flick)、拖動(dòng)(drag)等，來(lái)實(shí)現(xiàn)這些輸入操作。候選創(chuàng)建部12發(fā)揮基于由用戶(hù)輸入的文字來(lái)創(chuàng)建變換候選或預(yù)測(cè)候選等的語(yǔ)句的候選組的功能，候選顯示部13發(fā)揮向用戶(hù)提示語(yǔ)句的候選組的功能。輸入語(yǔ)句確定部14發(fā)揮確定輸入語(yǔ)句的功能。
[0048]詞典11是具有在進(jìn)行文字的輸入、變換及預(yù)測(cè)時(shí)所參照的各種詞典數(shù)據(jù)(詞典文件)的數(shù)據(jù)庫(kù)。詞典11例如包括:
[0049]用于進(jìn)行假名漢字變換的變換詞典、存儲(chǔ)與用戶(hù)的輸入歷史記錄相對(duì)應(yīng)的語(yǔ)句的優(yōu)先度的學(xué)習(xí)詞典、存儲(chǔ)由用戶(hù)登錄的語(yǔ)句的用戶(hù)詞典、用于提取輸入預(yù)測(cè)的候選的預(yù)測(cè)詞典等。在預(yù)測(cè)詞典中，例如，與讀法(平假名書(shū)寫(xiě))對(duì)應(yīng)關(guān)聯(lián)地登錄有大量的語(yǔ)句。
[0050]圖像獲取部15發(fā)揮從智能手機(jī)的存儲(chǔ)裝置或外部(LAN上或云端上)的裝置讀取圖像數(shù)據(jù)的功能。另外，圖像獲取部15能夠直接獲取利用內(nèi)置攝像頭拍攝的圖像數(shù)據(jù)。圖像識(shí)別部16發(fā)揮對(duì)由圖像獲取部15讀取的圖像數(shù)據(jù)進(jìn)行圖像識(shí)別處理，來(lái)識(shí)別出圖像中所包含的人物的功能。關(guān)于人物識(shí)別處理提出了多種方法，在本實(shí)施方式中可以利用任意的方法。例如，在基于臉部特征進(jìn)行的人物識(shí)別中，在對(duì)原始圖像進(jìn)行必要的前置處理之后，檢測(cè)臉部區(qū)域，并從所檢測(cè)出的臉部區(qū)域中提取Haar-Like (類(lèi)哈爾)特征量等的特征量。然后，通過(guò)對(duì)從圖像中提取出的特征量和預(yù)先登錄在特征量數(shù)據(jù)庫(kù)18中的各登錄者的特征量之間的相似度進(jìn)行評(píng)價(jià)，來(lái)判斷圖像中所包含的臉部與哪個(gè)登錄者的臉部一致。若發(fā)現(xiàn)有一致的登錄者，則能夠識(shí)別出(確定)圖像中的人物是誰(shuí)。關(guān)聯(lián)語(yǔ)句提取部17發(fā)揮從關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19中提取與所識(shí)別出的人物相關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句的功能。
[0051]圖2示意性示出了特征量數(shù)據(jù)庫(kù)18和關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19的數(shù)據(jù)結(jié)構(gòu)的一個(gè)例子。特征量數(shù)據(jù)庫(kù)18是用于圖像識(shí)別的數(shù)據(jù)庫(kù)，與關(guān)鍵詞相對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)有多個(gè)登錄者各自的特征量。另外，關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19是基于圖像識(shí)別進(jìn)行的輸入預(yù)測(cè)所利用的數(shù)據(jù)庫(kù)，其存儲(chǔ)有關(guān)鍵詞和與該關(guān)鍵詞相對(duì)應(yīng)的一個(gè)以上的關(guān)聯(lián)語(yǔ)句。各關(guān)聯(lián)語(yǔ)句與關(guān)聯(lián)語(yǔ)句的平假名書(shū)寫(xiě)即“讀法”建立了關(guān)聯(lián)，該“讀法”為附帶信息。能夠由用戶(hù)自身對(duì)特征量數(shù)據(jù)庫(kù)18和關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19進(jìn)行數(shù)據(jù)的追加、編輯、刪除。
[0052]圖3示出了追加新登錄者的情況的用戶(hù)界面的一個(gè)例子。若利用智能手機(jī)的內(nèi)置攝像頭拍攝新的登錄者，則從拍攝得到的拍攝圖像中檢測(cè)臉部及提取特征量。若按照畫(huà)面上的指示，輸入與登錄者對(duì)應(yīng)關(guān)聯(lián)的關(guān)鍵詞和一個(gè)以上的關(guān)聯(lián)語(yǔ)句，并點(diǎn)擊登錄按鈕，則將特征量和關(guān)鍵詞的數(shù)據(jù)新登錄到特征量數(shù)據(jù)庫(kù)18中，以及將關(guān)鍵詞和關(guān)聯(lián)語(yǔ)句的數(shù)據(jù)新登錄到關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19中。此外，關(guān)鍵詞是用于鏈接人物(登錄者)和關(guān)聯(lián)語(yǔ)句的信息。
[0053](文字輸入處理)
[0054]接著，參照?qǐng)D4及圖5，說(shuō)明向作為應(yīng)用程序AP之一的郵件軟件進(jìn)行文字輸入的情況的動(dòng)作例。圖4是由文字輸入系統(tǒng)I執(zhí)行的處理的流程圖，圖5是用于說(shuō)明動(dòng)作例的圖。
[0055]在圖5的例子中假定了如下場(chǎng)景:用戶(hù)將拍攝電影海報(bào)而得到的圖像50 (文件名為image, jpg)添加到新郵件51中，并以文字輸入關(guān)于電影的感想的情況。假設(shè)圖像50中映現(xiàn)有電影中出現(xiàn)的演員的照片、電影的標(biāo)題及標(biāo)語(yǔ)、演員名等。
[0056]當(dāng)用戶(hù)點(diǎn)擊郵件51的文字輸入窗口 52時(shí)，激活文字輸入系統(tǒng)1，在觸摸屏顯示器上顯示軟鍵盤(pán)53(步驟S40)。在圖5的顯示例中，在畫(huà)面下端顯示有十鍵(ten key)鍵盤(pán)形式的軟鍵盤(pán)53。此外，文字輸入的界面并不限定于圖5的例子，可以采用整字鍵盤(pán)或手寫(xiě)輸入等任何界面。
[0057]在郵件51中添加有圖像的情況下，將該圖像50的信息從郵件軟件傳遞至文字輸入系統(tǒng)1(步驟S41)。圖像的信息是用于確定圖像數(shù)據(jù)的獲取源的信息(例如，若是保存在本地的圖像數(shù)據(jù)則是保存地址的路徑和文件名，若是網(wǎng)絡(luò)上的圖像數(shù)據(jù)則是URI等)。在郵件51中添加有多個(gè)圖像的情況下，將各圖像的信息傳遞至文字輸入系統(tǒng)I。
[0058]在接收到圖像的信息的情況下(步驟S41 是”)，圖像獲取部15讀取圖像數(shù)據(jù)(步驟S42)。然后，圖像識(shí)別部16對(duì)各圖像應(yīng)用圖像識(shí)別處理，嘗試識(shí)別各圖像中所包含的人物(步驟S43)。圖像識(shí)別部16在識(shí)別人物成功時(shí)(S卩，在判斷為圖像中的人物與登錄在特征量數(shù)據(jù)庫(kù)18中的某一個(gè)登錄者一致時(shí))，將與該人物對(duì)應(yīng)關(guān)聯(lián)的關(guān)鍵詞傳遞至關(guān)聯(lián)語(yǔ)句提取部17。關(guān)聯(lián)語(yǔ)句提取部17從關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19中，提取與關(guān)鍵詞對(duì)應(yīng)關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句(步驟S44)。可以將關(guān)鍵詞自身追加為關(guān)聯(lián)語(yǔ)句之一。從圖像中識(shí)別出多個(gè)人物的情況下，分別提取與各人物關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句。這是因?yàn)楹w圖像中的所有的信息(人物)，能夠提高能夠提示用戶(hù)打算輸入的語(yǔ)句的可能性。此外，在從圖像中未能識(shí)別出人物的情況(例如，圖像中未映現(xiàn)有人物的情況、只映現(xiàn)出未知的人物(即，沒(méi)有登錄在特征量數(shù)據(jù)庫(kù)18中的人物)的情況等)下，跳過(guò)步驟S44的處理。在圖5中示出了如下的例子:成功地識(shí)別出圖像50中映現(xiàn)的人物，并獲取了作為該人物的關(guān)聯(lián)語(yǔ)句的“阿部太郎”(
>))、“ 了《^ U (昵稱(chēng))，，(A X 6々/O、“俳優(yōu)(演員)，，(ii P吵))、“明日O空(明天的天空b)、“東京(東京)”(i))(這些都為日語(yǔ)語(yǔ)句和其平假名，在輸入法為中文時(shí)，為中文和其拼音)等語(yǔ)句。
[0059]當(dāng)用戶(hù)輸入文字(步驟S45 是”)時(shí)，候選創(chuàng)建部12參照詞典11，創(chuàng)建與正在輸入的文字(確定之前的文字)相對(duì)應(yīng)的語(yǔ)句的候選組(步驟S46)。除了變換候選之外，還提取預(yù)測(cè)候選來(lái)作為語(yǔ)句的候選，其中，變換候選是指基于變換詞典及用戶(hù)詞典對(duì)正在輸入的文字進(jìn)行變換而得到的結(jié)果，預(yù)測(cè)候選是指利用預(yù)測(cè)詞典對(duì)正在輸入的文字進(jìn)行補(bǔ)充及變換而得到的結(jié)果。進(jìn)而，在步驟S44中提取了與圖像中的人物關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句的情況下，候選創(chuàng)建部12將這些關(guān)聯(lián)語(yǔ)句中與正在輸入的文字相對(duì)應(yīng)的(例如，讀法在前方一致的語(yǔ)句等)關(guān)聯(lián)語(yǔ)句也追加到預(yù)測(cè)候選中。例如，在正在輸入的文字是“ A (阿部太郎、7
6、明日O空的日語(yǔ)首字母發(fā)音)”的情況下，將“阿部太郎”、“ r ^ L ”、“明日Q空”等從“ A ”開(kāi)始的關(guān)聯(lián)語(yǔ)句追加到預(yù)測(cè)候選中。
[0060]在創(chuàng)建候選組時(shí)，可以基于用戶(hù)的過(guò)去的輸入歷史記錄，來(lái)決定各候選的順序(提示順序)。作為利用輸入歷史記錄的方法，列舉有優(yōu)先提示用戶(hù)在過(guò)去輸入的次數(shù)多的語(yǔ)句的方法、或者優(yōu)先提示用戶(hù)最近輸入的語(yǔ)句的方法，或者優(yōu)先提示與用戶(hù)已輸入(確定)的文字之間的聯(lián)系度(詞類(lèi)、文章連貫性，詞組等)高的語(yǔ)句的方法等?？梢岳萌我夥椒?，也可以組合多個(gè)方法。
[0061]或者，優(yōu)選地，以與從預(yù)測(cè)詞典提取的一般的預(yù)測(cè)候選相比，使與圖像中的人物關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句位于上方的位置的方式(以?xún)?yōu)先提示的方式)，決定各候選的順序。這是因?yàn)槟軌蛘J(rèn)為輸入與圖像關(guān)聯(lián)的文章的可能性更高。
[0062]候選顯示部13將在步驟S46中創(chuàng)建的語(yǔ)句的候選組提示給用戶(hù)(步驟S47)。在圖5的顯示例中，在軟鍵盤(pán)53的上側(cè)顯示有候選組54。已知在與正在輸入的文字“ h ”相對(duì)應(yīng)的預(yù)測(cè)候選中，出現(xiàn)了與圖像中的人物關(guān)聯(lián)的語(yǔ)句(“阿部太郎”，“7?^“明日O空”等)。當(dāng)用戶(hù)從候選組54中選擇了某個(gè)語(yǔ)句(步驟S48:“是”)時(shí)，輸入語(yǔ)句確定部14將所選擇的語(yǔ)句確定為輸入文字，將該輸入文字的信息傳遞至郵件軟件(步驟S49)。由此，向郵件51的文字輸入窗口 52輸入文字。在圖5中示出了選擇并輸入了“明日O空”這樣的語(yǔ)句的狀態(tài)。
[0063]例如，若想要在郵件本文中輸入“我看了電影“明日O空(明天的天空)”了！叫阿部太郎的演員的演技真棒?！边@樣的文章的情況，則該文章中的“明日O空”、“阿部太郎”、“俳優(yōu)”等語(yǔ)句作為附加圖像的關(guān)聯(lián)語(yǔ)句出現(xiàn)在預(yù)測(cè)候選的上方位置。由此，能夠以較少的擊鍵來(lái)簡(jiǎn)單地輸入文章，非常便利。
[0064](本實(shí)施方式的優(yōu)點(diǎn))
[0065]根據(jù)如上所述的第一實(shí)施方式的文字輸入系統(tǒng)，在用戶(hù)進(jìn)行文字輸入時(shí)，提示與圖像中的人物關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句來(lái)作為輸入預(yù)測(cè)的候選。因此，在用戶(hù)要輸入與圖像中的人物關(guān)聯(lián)的文章的情況下，能夠提高能夠提示與用戶(hù)打算輸入的語(yǔ)句一致的候選的可能性，從而能夠提高輸入預(yù)測(cè)的精度及便利性。
[0066]基于以往的預(yù)測(cè)詞典進(jìn)行的輸入預(yù)測(cè)及基于情景分析(參照專(zhuān)利文獻(xiàn)I)進(jìn)行的輸入預(yù)測(cè)，僅能夠提示使用頻度高的常見(jiàn)的語(yǔ)句來(lái)作為預(yù)測(cè)候選。相對(duì)于此，利用了圖像識(shí)別的本實(shí)施方式的輸入預(yù)測(cè)具有如下的優(yōu)點(diǎn):還能夠?qū)⑨槍?duì)識(shí)別對(duì)象的專(zhuān)門(mén)的(即不太常見(jiàn))語(yǔ)句設(shè)為預(yù)測(cè)候選。
[0067]另外，在本實(shí)施方式中，由于采用了利用關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19來(lái)獲取圖像的關(guān)聯(lián)語(yǔ)句的結(jié)構(gòu)，所以具有能夠簡(jiǎn)單地實(shí)現(xiàn)關(guān)聯(lián)語(yǔ)句的預(yù)測(cè)處理而且能夠?qū)崿F(xiàn)高速的處理的優(yōu)點(diǎn)，其中，關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19針對(duì)能夠通過(guò)圖像識(shí)別來(lái)識(shí)別的每個(gè)對(duì)象(登錄者)，登錄了關(guān)聯(lián)語(yǔ)句。
[0068]<第二實(shí)施方式>
[0069]接著，說(shuō)明本發(fā)明的第二實(shí)施方式的文字輸入系統(tǒng)。在第一實(shí)施方式中，從圖像中識(shí)別出人物(臉部)，并將與該人物關(guān)聯(lián)的語(yǔ)句追加到預(yù)測(cè)候選中，相對(duì)于此，第二實(shí)施方式的不同點(diǎn)在于，從圖像中識(shí)別出字符串。基本結(jié)構(gòu)與第一實(shí)施方式相同，因而，下面主要說(shuō)明第二實(shí)施方式特有的結(jié)構(gòu)。
[0070]本實(shí)施方式的圖像識(shí)別部16通過(guò)對(duì)由圖像獲取部15讀取的圖像數(shù)據(jù)進(jìn)行圖像識(shí)別處理，來(lái)識(shí)別圖像所包含的“字符串”。就文字識(shí)別處理而言，提出了多種方法，在本實(shí)施方式中可以利用任意的方法。例如，能夠優(yōu)選地采用利用圖案匹配的方法、與前述的臉部識(shí)別同樣地對(duì)每個(gè)文字的特征量進(jìn)行比較的方法等。在特征量數(shù)據(jù)庫(kù)18中登錄有針對(duì)英文字母、數(shù)字、平假名、片假名、漢字中的每個(gè)文字的模板(template)及特征量。能夠利用與第一實(shí)施方式結(jié)構(gòu)相同的數(shù)據(jù)庫(kù)，來(lái)作為關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19。
[0071]參照?qǐng)D4及圖6，說(shuō)明在郵件軟件中進(jìn)行文字輸入的情況的動(dòng)作例。圖6是用于說(shuō)明第二實(shí)施方式的動(dòng)作例的圖。如圖6所示，在附加到郵件51中的圖像50中包含電影的標(biāo)題、標(biāo)語(yǔ)、演員名等多個(gè)字符串。在第二實(shí)施方式中識(shí)別這些字符串，并加這些字符串用于輸入預(yù)測(cè)。
[0072]步驟S40?S42的處理內(nèi)容與第一實(shí)施方式相同。在步驟S43的圖像識(shí)別中，圖像識(shí)別部16嘗試從附加到郵件中的各圖像中識(shí)別字符串。在圖6的例子中，示出了識(shí)別出“明日CO空”、“阿部太郎”、“感動(dòng)作(感人之作)”等字符串的情況。接著，關(guān)聯(lián)語(yǔ)句提取部17從關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19中提取與在步驟S43中得到的字符串(相當(dāng)于第一實(shí)施方式中的“關(guān)鍵詞”)對(duì)應(yīng)關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句(步驟S44)。此時(shí)，將“明日O空”、“阿部太郎”等從圖像中識(shí)別出的字符串自身也追加為關(guān)聯(lián)語(yǔ)句之一。另外，優(yōu)選地，根據(jù)需要，還通過(guò)對(duì)識(shí)別出的字符串進(jìn)行詞素分析，來(lái)提取“明日(明天)”、“空(天空)”、“阿部”、“感動(dòng)(激動(dòng))”等獨(dú)立詞，并追加這些獨(dú)立詞及它們的關(guān)聯(lián)語(yǔ)句。此后的處理內(nèi)容與第一實(shí)施方式相同。
[0073]根據(jù)第二實(shí)施方式的文字輸入系統(tǒng)，在用戶(hù)進(jìn)行文字輸入時(shí)，提示圖像中的字符串及與其關(guān)聯(lián)的語(yǔ)句，來(lái)作為輸入預(yù)測(cè)的候選。因此，在用戶(hù)要輸入圖像中的字符串自身及與其關(guān)聯(lián)的文章的情況下，能夠提高能夠提示與用戶(hù)打算輸入的語(yǔ)句一致的候選的可能性，從而能夠提高輸入預(yù)測(cè)的精度及便利性。
[0074]〈第三實(shí)施方式〉
[0075]接著，說(shuō)明本發(fā)明的第三實(shí)施方式的文字輸入系統(tǒng)。在第一實(shí)施方式中將“人物(臉部)”作為圖像識(shí)別對(duì)象，在第二實(shí)施方式中將“字符串”作為圖像識(shí)別對(duì)象，在第三實(shí)施方式中，將多種類(lèi)型的對(duì)象作為圖像識(shí)別對(duì)象。
[0076]例如，可以組合第一實(shí)施方式和第二實(shí)施方式。即，圖像識(shí)別部16執(zhí)行人物識(shí)別和字符串識(shí)別兩種處理，提示與能夠識(shí)別出的對(duì)象(人物、字符串)關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句，來(lái)作為預(yù)測(cè)候選。進(jìn)而，優(yōu)選地，圖像識(shí)別部16識(shí)別圖像所包含的“特定物體”，將特定物體的關(guān)聯(lián)語(yǔ)句追加到預(yù)測(cè)候選中?！疤囟ㄎ矬w”是指，“人物”和“字符串”以外的物體中的能夠利用圖像識(shí)別部16的圖像識(shí)別處理識(shí)別的(S卩，預(yù)先登錄有特征量數(shù)據(jù))物體?？梢缘卿泟?dòng)物、植物、工業(yè)產(chǎn)品、建筑物、表示企業(yè)及其他團(tuán)體的徽標(biāo)(1gmark)等所有類(lèi)型的物體。像這樣，由于若增加能夠識(shí)別出的對(duì)象的類(lèi)型，則從圖像中獲取的信息的類(lèi)型及信息量也增加，所以能夠期待能夠進(jìn)一步提高輸入預(yù)測(cè)的精度及便利性。
[0077]<第四實(shí)施方式>
[0078]接著，說(shuō)明本發(fā)明的第四實(shí)施方式的文字輸入系統(tǒng)。在第四實(shí)施方式中，說(shuō)明在提取了多個(gè)關(guān)聯(lián)語(yǔ)句來(lái)作為圖像識(shí)別結(jié)果的情況下用于調(diào)整這些關(guān)聯(lián)語(yǔ)句的提示順序(優(yōu)先順序)的方法?；窘Y(jié)構(gòu)與上述的實(shí)施方式相同，因而，下面主要說(shuō)明第四實(shí)施方式特有的結(jié)構(gòu)。
[0079]如圖7所示，假設(shè)從圖像中識(shí)別出了兩個(gè)人物70、71和一個(gè)字符串72，并提取出“安田二郎”、“安田”、“山梨県(山梨縣)”、“弁護(hù)士(律師)”來(lái)作為人物71的關(guān)聯(lián)語(yǔ)句，提取出“安田三郎”、“安田”、“山梨県”、“警察官(警察)”來(lái)作為人物70的關(guān)聯(lián)語(yǔ)句，提取出“富士山”、“山梨県”、“靜岡県”、“山”來(lái)作為字符串72的關(guān)聯(lián)語(yǔ)句。
[0080]候選創(chuàng)建部12針對(duì)各關(guān)聯(lián)語(yǔ)句，計(jì)算與圖像之間的關(guān)聯(lián)度。關(guān)聯(lián)度是表示關(guān)聯(lián)語(yǔ)句與圖像之間的關(guān)聯(lián)性的強(qiáng)度的指標(biāo)，在本實(shí)施方式中，將與關(guān)聯(lián)語(yǔ)句關(guān)聯(lián)的對(duì)象(人物、字符串)的個(gè)數(shù)用作關(guān)聯(lián)度?！吧嚼姹h”這個(gè)語(yǔ)句與三個(gè)對(duì)象70、71、72有關(guān)聯(lián)，因而關(guān)聯(lián)度為“3”，“安田”這個(gè)語(yǔ)句與二個(gè)對(duì)象70、71有關(guān)聯(lián)，因而關(guān)聯(lián)度為“2”，這以外的語(yǔ)句的關(guān)聯(lián)度為“I”。在候選創(chuàng)建部12將關(guān)聯(lián)語(yǔ)句追加到預(yù)測(cè)候選中時(shí)，以?xún)?yōu)先提示與圖像之間的關(guān)聯(lián)度高的關(guān)聯(lián)語(yǔ)句的方式調(diào)整順序。即，當(dāng)用戶(hù)輸入“々(安田二郎、安田三郎、山、山梨県等的日語(yǔ)首字母發(fā)音)”這樣的文字時(shí)，作為的預(yù)測(cè)候選，在提示“安田二郎”、“安田三郎”、“山”等的語(yǔ)句之前，先提示“山梨県”及“安田”這樣的語(yǔ)句。
[0081]由于認(rèn)為和圖像之間的關(guān)聯(lián)度高的語(yǔ)句與用戶(hù)打算輸入的語(yǔ)句一致的可能性高，所以通過(guò)以本實(shí)施方式的方式調(diào)整提示順序或者縮小提示的候選，能夠期待提高輸入預(yù)測(cè)的精度及便利性。在圖7的例子中，關(guān)聯(lián)語(yǔ)句的個(gè)數(shù)為十多個(gè)，但可假定從圖像中識(shí)別出的對(duì)象的個(gè)數(shù)以及從關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19的詞匯數(shù)中提取的關(guān)聯(lián)語(yǔ)句的個(gè)數(shù)可達(dá)到數(shù)十個(gè)或數(shù)百個(gè)。在獲取那樣的個(gè)數(shù)龐大的關(guān)聯(lián)語(yǔ)句的情況下，如本實(shí)施方式那樣對(duì)提示順序進(jìn)行的調(diào)整及提示候選的縮小非常有效。
[0082]<其他的實(shí)施方式>
[0083]上述各實(shí)施方式僅示出了本發(fā)明的一個(gè)具體例。例如，能夠采用如下的結(jié)構(gòu)作為本發(fā)明的實(shí)施方式。
[0084](I)在第二實(shí)施方式中，作為預(yù)測(cè)候選，不僅提示從圖像中識(shí)別出的字符串，還提示從該字符串派生出來(lái)的關(guān)聯(lián)語(yǔ)句，但作為更簡(jiǎn)單的結(jié)構(gòu)，也可以采用僅提示從圖像中識(shí)別出的字符串(或者，識(shí)別出的字符串和對(duì)該字符串進(jìn)行詞素分析得到的結(jié)果)來(lái)作為預(yù)測(cè)候選的結(jié)構(gòu)。在向郵件正文等文本輸入圖像中所包含的字符串的情況下，僅提示這樣的預(yù)測(cè)候選也非常便利。此外，在采用該結(jié)構(gòu)的情況下，不需要關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19及圖4的步驟S44的處理。
[0085](2)在第四實(shí)施方式中，優(yōu)先提示與多個(gè)對(duì)象有關(guān)聯(lián)性的語(yǔ)句，但也可以以其他基準(zhǔn)決定關(guān)聯(lián)語(yǔ)句的提示順序。一個(gè)方法是基于用戶(hù)的過(guò)去的輸入歷史記錄來(lái)決定關(guān)聯(lián)語(yǔ)句的提示順序。例如，可以在關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19中記錄各關(guān)聯(lián)語(yǔ)句的選擇頻度，優(yōu)先提示頻度高的語(yǔ)句。此外，作為利用輸入歷史記錄的方法，存在提高用戶(hù)最近輸入的語(yǔ)句的優(yōu)先順序或者提高與用戶(hù)已輸入(確定)的文章之間的聯(lián)系度高的語(yǔ)句的優(yōu)先順序等各種方法，可以采用任何方法，也可以組合這些方法。通過(guò)以上述方式基于輸入歷史記錄調(diào)整來(lái)關(guān)聯(lián)語(yǔ)句的順序，能夠在上方位置提示與用戶(hù)的意圖一致的可能性高的語(yǔ)句。
[0086](3)優(yōu)選地，在關(guān)聯(lián)語(yǔ)句數(shù)據(jù)庫(kù)19中，一并存儲(chǔ)各關(guān)聯(lián)語(yǔ)句與其屬性。屬性是用于對(duì)關(guān)聯(lián)語(yǔ)句進(jìn)行分類(lèi)(判別類(lèi)型)的信息。例如，若登錄有與該人物的姓名、昵稱(chēng)、出生地、郵件地址等項(xiàng)目相對(duì)應(yīng)的語(yǔ)句來(lái)作為與人物關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句，則“姓名”、“昵稱(chēng)”、“出生地”、“郵件地址”等項(xiàng)目相當(dāng)于屬性。像這樣，若一并管理關(guān)聯(lián)語(yǔ)句與屬性，則能夠?qū)傩缘男畔⒂糜谳斎腩A(yù)測(cè)等，增加了便利性。
[0087]例如，可以作為用戶(hù)的輸入歷史記錄學(xué)習(xí)每個(gè)屬性的選擇頻度，在上方位置提示具有用戶(hù)的選擇頻度(概率)高的屬性的關(guān)聯(lián)語(yǔ)句。就該方法而言，例如，如一邊看集體照一邊用文字輸入照片中的多個(gè)人物的姓名的情況那樣，在持續(xù)輸入與相同的屬性相關(guān)的信息時(shí)，優(yōu)先提示相同屬性的語(yǔ)句，因而很便利。
[0088](4)在上述實(shí)施方式中，基于用戶(hù)正在輸入的文字(確定之前的文字)創(chuàng)建并提示預(yù)測(cè)候選，但提示預(yù)測(cè)候選的時(shí)機(jī)不限定于此。例如，也可以基于與剛剛輸入的(已確定的)語(yǔ)句之間的聯(lián)系度來(lái)創(chuàng)建并提示預(yù)測(cè)候選。另外，也可以基于用戶(hù)剛剛進(jìn)行的操作(例如，將圖像拖放到文字輸入窗口中等)等，來(lái)創(chuàng)建并提示預(yù)測(cè)候選。
【權(quán)利要求】
1.一種文字輸入用方法，其具有輸入預(yù)測(cè)功能，所述輸入預(yù)測(cè)功能用于向用戶(hù)提示預(yù)測(cè)用戶(hù)會(huì)輸入的語(yǔ)句的候選組，所述文字輸入用方法包括: 圖像識(shí)別步驟，在對(duì)處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)，通過(guò)圖像識(shí)別來(lái)識(shí)別所述圖像所包含的人物； 候選追加步驟，將與從所述圖像中識(shí)別出的人物關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到在對(duì)所述處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)所提示的語(yǔ)句的候選組中。
2.一種文字輸入用方法，其具有輸入預(yù)測(cè)功能，所述輸入預(yù)測(cè)功能用于向用戶(hù)提示預(yù)測(cè)用戶(hù)會(huì)輸入的語(yǔ)句的候選組，所述文字輸入用方法包括: 圖像識(shí)別步驟，在對(duì)處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)，通過(guò)圖像識(shí)別來(lái)識(shí)別所述圖像所包含的字符串； 候選追加步驟，將與從所述圖像中識(shí)別出的字符串關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到在對(duì)所述處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)所提示的語(yǔ)句的候選組中。
3.如權(quán)利要求1所述的文字輸入用方法，其特征在于， 在所述圖像識(shí)別步驟中，還通過(guò)圖像識(shí)別來(lái)識(shí)別所述圖像所包含的字符串； 在所述候選追加步驟中，還將與從所述圖像中識(shí)別出的字符串關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到所述候選組中。
4.如權(quán)利要求1至3中任一項(xiàng)所述的文字輸入用方法，其特征在于， 在所述圖像識(shí)別步驟中，還通過(guò)圖像識(shí)別來(lái)識(shí)別所述圖像所包含的特定物體； 在所述候選追加步驟中，還將與從所述圖像中識(shí)別出的特定物體關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到所述候選組中。
5.如權(quán)利要求1至3中任一項(xiàng)所述的文字輸入用方法，其特征在于， 在所述候選追加步驟中，參照數(shù)據(jù)庫(kù)，獲取與從所述圖像中識(shí)別出的對(duì)象關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句，所述數(shù)據(jù)庫(kù)針對(duì)能夠通過(guò)圖像識(shí)別來(lái)識(shí)別出的每個(gè)對(duì)象預(yù)先登錄有一個(gè)以上的關(guān)聯(lián)語(yǔ)句。
6.如權(quán)利要求1至3中任一項(xiàng)所述的文字輸入用方法，其特征在于， 在所述圖像識(shí)別步驟中識(shí)別出多個(gè)對(duì)象的情況下，在所述候選追加步驟中，將識(shí)別出的所述多個(gè)對(duì)象的各自的關(guān)聯(lián)語(yǔ)句追加到所述候選組中。
7.如權(quán)利要求6所述的文字輸入用方法，其特征在于， 在所述候選追加步驟中，以與僅與一個(gè)對(duì)象關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句相比優(yōu)先提示與多個(gè)對(duì)象關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句的方式，決定追加到所述候選組中的關(guān)聯(lián)語(yǔ)句的順序。
8.一種文字輸入用系統(tǒng)，其向用戶(hù)提示預(yù)測(cè)用戶(hù)會(huì)輸入的語(yǔ)句的候選組，來(lái)支援用戶(hù)的文字輸入，所述文字輸入用系統(tǒng)包括: 圖像識(shí)別裝置，在對(duì)處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)，通過(guò)圖像識(shí)別來(lái)識(shí)別所述圖像所包含的人物； 候選追加裝置，將與從所述圖像中識(shí)別出的人物關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到在對(duì)所述處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)所提示的語(yǔ)句的候選組中。
9.一種文字輸入用系統(tǒng)，其向用戶(hù)提示預(yù)測(cè)用戶(hù)會(huì)輸入的語(yǔ)句的候選組，來(lái)支援用戶(hù)的文字輸入，所述文字輸入用系統(tǒng)包括: 圖像識(shí)別裝置，在對(duì)處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)，通過(guò)圖像識(shí)別來(lái)識(shí)別所述圖像所包含的字符串； 候選追加裝置，將與從所述圖像中識(shí)別出的字符串關(guān)聯(lián)的關(guān)聯(lián)語(yǔ)句追加到在對(duì)所述處理圖像的應(yīng)用進(jìn)行文字輸入時(shí)所提示的語(yǔ)句的候選組中。
【文檔編號(hào)】G06F17/20GK104182381SQ201410171420
【公開(kāi)日】2014年12月3日 申請(qǐng)日期:2014年4月25日 優(yōu)先權(quán)日:2013年5月23日
【發(fā)明者】太田昂志 申請(qǐng)人:歐姆龍株式會(huì)社