專利名稱：一種殘疾人可使用軟件的實(shí)現(xiàn)方法
技術(shù)領(lǐng)域：
本發(fā)明屬于計(jì)算機(jī)軟件領(lǐng)域，涉及一種軟件實(shí)現(xiàn)方法，特別是一種殘疾人可以使用的軟件實(shí)現(xiàn)方法。
背景技術(shù)：
現(xiàn)在社會(huì)對(duì)殘疾人提供了各種關(guān)懷和考慮，比如盲道、無障礙通道等。一些手機(jī)都具有一定的語音播放和語音識(shí)別功能，比如語音報(bào)手機(jī)號(hào)、識(shí)別語音姓名。但是現(xiàn)有的計(jì)算機(jī)軟件設(shè)計(jì)仍然相對(duì)缺乏對(duì)于殘疾人操作計(jì)算機(jī)的考慮，隨著信息技術(shù)和軟件應(yīng)用的普及，以及社會(huì)對(duì)殘疾人的關(guān)懷，軟件對(duì)于殘疾人的可操作性顯得日益重要和突出。設(shè)計(jì)可以讓殘疾人進(jìn)行操作的軟件，可以為殘疾人就業(yè)、創(chuàng)業(yè)、學(xué)習(xí)和生活帶來很大的便 利，讓他們?cè)谛畔⒒纳鐣?huì)中能夠享受信息技術(shù)帶來的好處?，F(xiàn)在的軟件的操作一般需要手對(duì)鍵盤鼠標(biāo)的操作，以及眼睛從屏幕上獲取信息，這對(duì)于盲人、上肢殘疾的人是不便的。這種方式同樣不利于遠(yuǎn)程的控制，特別是視線遠(yuǎn)離屏幕的情況下控制電腦。長(zhǎng)期對(duì)屏幕的關(guān)注造成視覺疲勞和頭昏腦脹，許多人的身心都受到嚴(yán)重的影響?，F(xiàn)在的無線鼠標(biāo)已經(jīng)可以遠(yuǎn)距離地操作電腦，但是由于現(xiàn)在的軟件需要看到屏幕才能操作，使得無線鼠標(biāo)的遠(yuǎn)程操作功能受到了限制。開發(fā)可以利用語音控制，且能夠以語音的方式提示用戶進(jìn)行操作的軟件，通過語音實(shí)施相應(yīng)的操作和互動(dòng)，可以避免上述的缺陷，可以有利于殘疾人對(duì)軟件的操作，以及正常人可以通過語音進(jìn)行遠(yuǎn)距離的計(jì)算機(jī)控制，或者在操作計(jì)算機(jī)的時(shí)候，可以一邊閉目養(yǎng)神，一邊進(jìn)行語音操作和得到軟件的語音提示，減少用眼疲勞，一些研究和實(shí)踐表明，用戶長(zhǎng)期面對(duì)電腦會(huì)造成多方面的傷害，因此，有必要避免長(zhǎng)期面對(duì)電腦，而上述的軟件可以達(dá)到語音交互的目的。

發(fā)明內(nèi)容
為了便于殘疾人操作和遠(yuǎn)程操作，本發(fā)明主要采用語音提示和語音識(shí)別來達(dá)到語音輸出和語音輸入，通過設(shè)定的規(guī)則確定各種操作和交互的語音編碼，這種編碼規(guī)則應(yīng)該是易于學(xué)習(xí)的，簡(jiǎn)單的，以利于實(shí)現(xiàn)基于語音的人機(jī)交互，從而，可以無需通過視覺來獲取電腦屏幕和軟件顯示的信息，以及無需通過手動(dòng)操作鍵盤和鼠標(biāo)來控制軟件。本發(fā)明中的一些語音輸入、輸出、控制功能是可以設(shè)置的，殘疾人使用前，先在正常人的幫助下進(jìn)行設(shè)置，或者軟件啟動(dòng)的時(shí)候，用語音提醒用戶做出選擇，而用戶也可以采用語音控制的方式進(jìn)行選擇和配置，即如果是盲人，他可以用語音將軟件配置為相應(yīng)的模式，電腦通過將語音轉(zhuǎn)換為文本來識(shí)別用戶的命令。因此，本發(fā)明的一些語音功能是可選的，可配置的。針對(duì)于盲人，在軟件設(shè)計(jì)的時(shí)候采用語音提示，語音提示可以用文本轉(zhuǎn)語音技術(shù)實(shí)現(xiàn)，通過將預(yù)先設(shè)置的文本，或者程序中的已有的標(biāo)題等文本，轉(zhuǎn)換為語音，通過語音輸出設(shè)備播放，語音提示的內(nèi)容可以包括以下方面第一，當(dāng)鼠標(biāo)移動(dòng)到某一控件(或者工具、按鈕、菜單)上時(shí)，采用語音提示控件的名稱，以及簡(jiǎn)要的操作幫助提示。第二，在軟件的界面的外圍設(shè)置一個(gè)方框型的邊界區(qū)域，這樣當(dāng)鼠標(biāo)移入或者移出軟件邊界的時(shí)候可以給予提示，為了讓操作者知道到底是哪一邊界，可以約定上下左右邊界的名稱，比如，上邊界之類，或者提示用戶讓某一方向移動(dòng)鼠標(biāo)即進(jìn)入某某軟件的某一界面區(qū)域。第三，軟件的幫助功能除了可以在顯示屏現(xiàn)實(shí)外，也可以采用語音提示，除了將針對(duì)正常人的幫助文檔設(shè)計(jì)為可以轉(zhuǎn)換為語音播放的形式提示外，另外，還專門設(shè)計(jì)殘疾人軟件操作指南，該文檔采用樹形的組織結(jié)構(gòu)，逐級(jí)給出語音提示，讓殘疾人做出細(xì)化的選擇，殘疾人用語音做出選擇，系統(tǒng)將語音選擇轉(zhuǎn)換為對(duì)應(yīng)文本，觸發(fā)系統(tǒng)做出更細(xì)致的提示，殘疾人通過逐級(jí)的選擇，最終可以得到所需的幫助，軟件通過文本轉(zhuǎn)語音技術(shù)播放幫助內(nèi)容。第四，對(duì)軟件界面中的按鈕、控件、菜單的操作及其確認(rèn)進(jìn)行語音提醒，以避免誤操作。第五，為了增強(qiáng)交互性，將軟件顯示的文本內(nèi)容和軟件界面中的各種提示等內(nèi)容的文本采用text to speech技術(shù)轉(zhuǎn)化為語音播放。第六、針對(duì)于一些無法記住鍵盤的盲人，通過設(shè)置，使軟件操作過程中的按鍵操作也得到語音提醒，如發(fā)現(xiàn)按鍵錯(cuò)誤，可以按某個(gè)指定的特定鍵取消，特定鍵一般用易于為盲人區(qū)分的空格鍵，或處于特殊位置的ESC鍵等。第七，軟件可增加一些輔助性的語音提醒功能，比如，報(bào)時(shí)提醒、鬧鐘提醒、下載天氣預(yù)報(bào)網(wǎng)站的數(shù)據(jù)后進(jìn)行天氣預(yù)報(bào)提醒。
針對(duì)盲人無法觀察鼠標(biāo)和鍵盤操作的困難，以及上肢殘疾人士的鼠標(biāo)和鍵盤操作的困難，本發(fā)明采用語音控制功能來完成和輔助輸入和控制第一，系統(tǒng)默認(rèn)采用Tab鍵控制焦點(diǎn)切換，用回車鍵來執(zhí)行焦點(diǎn)對(duì)應(yīng)的當(dāng)前控件(或按鈕)，這些對(duì)于殘疾人和盲人存在操作上的困難，而且盲人無法看見焦點(diǎn)所在位置，本發(fā)明中可以通過設(shè)置，采用特定的語音控制命令來控件焦點(diǎn)切換，焦點(diǎn)切換到下一個(gè)控件后，用文本轉(zhuǎn)語音(text-to-speech)技術(shù)發(fā)音提醒切換后焦點(diǎn)對(duì)應(yīng)的當(dāng)前控件的名稱，并可以用語音命令控制焦點(diǎn)所對(duì)應(yīng)的當(dāng)前控件執(zhí)行。第二，具有語音輸入功能，在語音輸入設(shè)置下，可以用語音轉(zhuǎn)文本(speech-to-text)技術(shù)將語音輸入轉(zhuǎn)化為文本,錄入輸入框。第三，具有語音控制功能，通過發(fā)聲即可控制一些操作，麥克風(fēng)獲取語音，將語音轉(zhuǎn)換為文本，當(dāng)這一文本剛好是當(dāng)前可用的命令集中的某個(gè)命令時(shí)，觸發(fā)該命令相應(yīng)的操作。通過一定的方式來設(shè)計(jì)語音控制的規(guī)則，防止語音控制之間的歧義，語音輸入和語音控制可能混淆，所以在語音輸入狀態(tài)輸入 完成后，采用某一命令結(jié)束語音輸入狀態(tài)。為了減少殘疾人的操作，可以增加一定的自動(dòng)運(yùn)行的功能，例如軟件自動(dòng)啟動(dòng)、自動(dòng)登錄、在電腦沒有操作時(shí)電腦自動(dòng)關(guān)機(jī)這類功能的設(shè)置。為了對(duì)殘疾人提供幫助，可以增加一些針對(duì)于殘疾人的輔助功能，比如備忘錄定時(shí)提醒功能，到了預(yù)定的時(shí)間提醒殘疾人應(yīng)該做某事。以上的部分功能對(duì)于正常人也是有用的，它還可以實(shí)現(xiàn)遠(yuǎn)程的控制，減少用眼，現(xiàn)在許多人不喜歡面對(duì)電腦，這種軟件可以避免長(zhǎng)期面對(duì)電腦帶來的不適和疲勞等。為了避免語音識(shí)別受到語音播放的干擾，可以在語音播放的時(shí)段暫停語音識(shí)別，另外一種人為解決方法就是采用耳機(jī)。


圖I是本發(fā)明的殘疾人支持功能示意圖。圖2是本發(fā)明的實(shí)施例界面邊界示意圖。
具體實(shí)施例方式以下為
具體實(shí)施例方式 本實(shí)施例中，電腦接有耳機(jī)和麥克風(fēng)，通過麥克風(fēng)輸入語音命令或信息，通過耳機(jī)收聽軟件的語音提示。系統(tǒng)中有TTS語音引擎，它可以將文本轉(zhuǎn)換為語音，同時(shí)也有語音識(shí)別引擎，可以將聲音轉(zhuǎn)換為文本，或者進(jìn)一步再將文本轉(zhuǎn)換為命令。軟件是可以設(shè)置的，即當(dāng)這些語音功能成為一種妨礙時(shí)，可以關(guān)閉各種語音功能。軟件的語音功能啟用的多少可以進(jìn)行一定的劃分，可以分為適用于僅上肢殘疾設(shè)置，適用于盲人設(shè)置(包括上肢殘疾的)，以及適用于其他人的設(shè)置，當(dāng)然一般人也可以選用盲人的設(shè)置，以達(dá)到閉目養(yǎng)神、遠(yuǎn)程控制等目的。盲人設(shè)置中還有一個(gè)選項(xiàng)，就是啟動(dòng)鍵盤輸入提醒功能，這是針對(duì)于那些無法記憶鍵盤的盲人。這個(gè)鍵盤提醒功能也可以用于盲人在使用鍵盤之初掌握鍵盤位置。語音提示采用TTS語音引擎實(shí)現(xiàn)，這些語音提醒的實(shí)現(xiàn)方法為將軟件中的文本轉(zhuǎn)換為語音，然后采用音箱或耳機(jī)播放，語音提醒功能在軟件中體現(xiàn)為以下幾個(gè)方面，下面分別介紹它們的具體實(shí)現(xiàn)第一，當(dāng)鼠標(biāo)移動(dòng)到某一控件(或者按鈕)上時(shí)，利用相應(yīng)的鼠標(biāo)移 動(dòng)事件，觸發(fā)事件，發(fā)出控件名稱的聲音，并且如果有必要可以給予一定的提醒“如需某操作，請(qǐng)按下鼠標(biāo)左鍵(右鍵)”，并且對(duì)隨后的操作給出一定提示。第二，軟件的界面不是全屏的時(shí)候，盲人可能無法確定該軟件界面的范圍，從而，造成一定的誤操作。本實(shí)施例中在軟件的各個(gè)界面的外圍設(shè)置一個(gè)方框型的邊界區(qū)域，如圖2所示，其界面不是處于最大化狀態(tài)時(shí)，區(qū)域2，3，4，5分別為其邊界，6為有效界面。這樣當(dāng)鼠標(biāo)移入或者移出軟件邊界的時(shí)候可以給予提示，為了讓操作者知道到底是哪一邊界，采用語音提醒，比如當(dāng)鼠標(biāo)移動(dòng)到2區(qū)域的時(shí)候，觸發(fā)事件，提示“進(jìn)入某軟件的某界面的上邊界”，進(jìn)入4區(qū)域的時(shí)候，提示“進(jìn)入某軟件的某界面下邊界”，進(jìn)入5區(qū)域的時(shí)候，提示“進(jìn)入某軟件的某界面左邊界”，進(jìn)入3區(qū)域的時(shí)候，提示“進(jìn)入某軟件的某界面右邊界”。第三，幫助可以利用語音控制播放，當(dāng)用特定語音命令時(shí)，系統(tǒng)利用文本轉(zhuǎn)語音引擎，將幫助的文本內(nèi)容自動(dòng)閱讀。另外，更具有針對(duì)性的是，還有一個(gè)專門的殘疾人操作指南，將所有可能的幫助內(nèi)容，逐步細(xì)分分為不同的類型，以選擇題一樣的提示方式讓殘疾人逐步進(jìn)行選擇，殘疾人可以用語音做選擇，系統(tǒng)將語音轉(zhuǎn)換為文本，將文本轉(zhuǎn)換為對(duì)應(yīng)的選擇，通過采用這樣的逐級(jí)細(xì)化的選擇方式，逐步細(xì)化和確定幫助的內(nèi)容，最終可以得到幫助的內(nèi)容，由軟件用文本轉(zhuǎn)語音技術(shù)進(jìn)行播放。第四，對(duì)軟件界面中的按鈕、控件、菜單的操作及其確認(rèn)，通過文本轉(zhuǎn)語音進(jìn)行語音提醒。第五，為了增強(qiáng)交互性，將軟件顯示文本內(nèi)容和軟件界面中的各種提示、顯示、警告等內(nèi)容的文本采用text to speech技術(shù)轉(zhuǎn)化為語音播放。第六、針對(duì)于一些無法記住鍵盤的盲人,通過設(shè)置啟用鍵盤提醒功能，使軟件操作過程中的按鍵操作，被鉤子截獲并且采用文本轉(zhuǎn)語音技術(shù)，變成語音播放來提醒當(dāng)前按鍵的名稱，如發(fā)現(xiàn)按鍵錯(cuò)誤，可以按ESC鍵取消。第七，軟件設(shè)置了輔助性的報(bào)時(shí)提醒功能，當(dāng)時(shí)間到特定的點(diǎn)時(shí)，通過文本轉(zhuǎn)語音技術(shù)，將時(shí)間轉(zhuǎn)為語音播放，這樣提醒無法看時(shí)間的盲人。第七，軟件的運(yùn)行過程中所處的一些特殊狀態(tài)，特別是出現(xiàn)錯(cuò)誤的時(shí)候，用文本轉(zhuǎn)語音技術(shù)，播放語音進(jìn)行提醒。針對(duì)于盲人無法觀察鼠標(biāo)和鍵盤操作的困難，以及上肢殘疾人士的鼠標(biāo)和鍵盤操作的困難，本發(fā)明采用語音控制功能來完成和輔助輸入和控制第一，通過設(shè)置，可以采用特定的語音控制來控件焦點(diǎn)切換，焦點(diǎn)切換到下一個(gè)控件后，用text-to-speech技術(shù)發(fā)音提醒切換后焦點(diǎn)對(duì)應(yīng)的當(dāng)前控件的名稱，并可以用語音控制焦點(diǎn)所對(duì)應(yīng)的當(dāng)前控件執(zhí)行。第二，具有語音輸入功能，在語音輸入啟動(dòng)時(shí)，可以用語音轉(zhuǎn)文本(speech-to-text)技術(shù)將語音輸入轉(zhuǎn)化為文本，錄入輸入框或文件中。第三，語音控制功能，該功能啟動(dòng)時(shí)，監(jiān)聽麥克風(fēng)接受到的語音，利用語音轉(zhuǎn)文本，將語音轉(zhuǎn)換為文本，當(dāng)文本剛好是當(dāng)前狀態(tài)下對(duì)應(yīng)的某一個(gè)控件、按鈕、操作等的對(duì)應(yīng)命令時(shí)，觸發(fā)該操作。語音輸入的文本可能與語音控制的文本是相同的，且語音輸入文本的長(zhǎng)度也是可變的。在語音輸入文本和語音命令之間，如果不進(jìn)行區(qū)分，可能會(huì)將兩者混淆。在實(shí)現(xiàn)時(shí)，應(yīng)該有一個(gè)切換，采用某一個(gè)不可能輸入文本的語音命令，或者采用一段固定時(shí)間沉默，表示文本輸入狀態(tài)結(jié)束，切換到可以進(jìn)行語音命令狀態(tài)。功能選項(xiàng)的設(shè)置上，可以采用兩種方式實(shí)現(xiàn)1)在最初運(yùn)行軟件時(shí)，軟件會(huì)用語音提醒是否要進(jìn)行相關(guān)的設(shè)置，并且可以采用語音控制來進(jìn)行前述的語音提醒、語音控制功能的設(shè)置，正常人可以不選擇相關(guān)的語音功能；2)在殘疾人使用前，軟件由正常人進(jìn)行相關(guān)
語音設(shè)置。
·
軟件的語音功能不僅僅限于支持殘疾人使用本軟件，還可以設(shè)置一些其他的殘疾人幫助功能，本實(shí)施例中，采用類似的方法通過語音控制進(jìn)行關(guān)機(jī)等，實(shí)現(xiàn)的方式同前。
權(quán)利要求
1.一種殘疾人可使用軟件的實(shí)現(xiàn)方法，其特征在于對(duì)于盲人和上肢殘疾人可以1)采用語音轉(zhuǎn)文本技術(shù)將語音輸入轉(zhuǎn)換為文本來代替一般的鍵盤的文本輸入，2)用語音轉(zhuǎn)文本技術(shù)將語音轉(zhuǎn)換為文本，再將文本對(duì)應(yīng)某些命令進(jìn)而實(shí)現(xiàn)語音控制，而代替一般的鼠標(biāo)操作和鍵盤按鍵；對(duì)于盲人可以采用文本轉(zhuǎn)語音技術(shù)將軟件中預(yù)設(shè)的文本轉(zhuǎn)變?yōu)檎Z音，播放出來而代替電腦顯示屏提示，包括:A)啟用語音提醒后，當(dāng)鼠標(biāo)在軟件界面內(nèi)拖動(dòng)時(shí)，當(dāng)移動(dòng)到軟件界面中的按鈕、控件、菜單等上時(shí)利用文本轉(zhuǎn)語音技術(shù)進(jìn)行語音播放提醒，播放其名稱及其操作幫助，B)在對(duì)軟件界面中的按鈕、控件、菜單進(jìn)行操作時(shí)，對(duì)相應(yīng)的操作及其確認(rèn)進(jìn)行文本轉(zhuǎn)語音的提醒，并且可播放進(jìn)一步的操作的簡(jiǎn)要幫助。
2.如權(quán)利要求I所述的軟件的實(shí)現(xiàn)方法，其特征在于啟用語音提醒時(shí)，在軟件的界面區(qū)域的外邊界設(shè)置方框型的語音提醒區(qū)域，當(dāng)鼠標(biāo)從軟件的窗口界面移出或者移入的時(shí)候，以約定的方式告知操作人，當(dāng)前狀態(tài)下朝著什么方向是將鼠標(biāo)移出或者移入軟件的某某界面區(qū)域。
3.如權(quán)利要求I所述的軟件的實(shí)現(xiàn)方法，其特征在于啟用語音提醒時(shí)，其軟件操作的幫助文件、殘疾人軟件操作指南可用文本轉(zhuǎn)語音技術(shù)轉(zhuǎn)化為語音播放，殘疾人操作指南以樹形的結(jié)構(gòu)對(duì)殘疾人進(jìn)行語音提醒，提示殘疾人做出選擇，殘疾人用語音做出選擇，語音輸入轉(zhuǎn)換為文本，觸發(fā)軟件做出進(jìn)一步細(xì)致的提示，如此循環(huán)直到最后確定殘疾人需要的幫助，幫助的文本以語音形式播放。
4.如權(quán)利要求3所述的軟件的實(shí)現(xiàn)方法，其特征在于啟用語音提醒時(shí)，將軟件顯示文本內(nèi)容和軟件涉及到的文件的文本內(nèi)容可用文本轉(zhuǎn)語音技術(shù)轉(zhuǎn)化為語音播放。
5.如權(quán)利要求4所述的軟件的實(shí)現(xiàn)方法，其特征在于啟用鍵盤提醒功能時(shí)，在軟件操作過程中的按鍵操作，被鉤子截獲并且用預(yù)設(shè)的文本名稱轉(zhuǎn)變?yōu)閷?duì)應(yīng)名稱的語音進(jìn)行提醒，如發(fā)現(xiàn)按鍵錯(cuò)誤，可以按某個(gè)特定鍵取消。
6.如權(quán)利要求5所述的軟件的實(shí)現(xiàn)方法，其特征在于啟用語音控制功能時(shí)，可采用語音控制控件焦點(diǎn)的切換，焦點(diǎn)切換到下一個(gè)控件后，用文本轉(zhuǎn)語音技術(shù)進(jìn)行發(fā)音，提醒切換后焦點(diǎn)對(duì)應(yīng)的當(dāng)前控件的名稱，并且當(dāng)用戶用語音輸出(說出)執(zhí)行當(dāng)前控件的語音命令時(shí)，用語音轉(zhuǎn)文本技術(shù)將語音命令轉(zhuǎn)換為文本，將文本匹配命令，來控制處于焦點(diǎn)狀態(tài)的控件的執(zhí)行。
7.如權(quán)利要求6所述的軟件的實(shí)現(xiàn)方法，其特征在于具有語音輸入功能，在語音輸入功能啟動(dòng)時(shí)，處于文本輸入狀態(tài)時(shí)，語音輸入將會(huì)用語音轉(zhuǎn)文本(speech-to-text)技術(shù)，變成語音對(duì)應(yīng)的文本，錄入輸入框，殘疾人發(fā)聲如果是某一個(gè)指定的語音命令時(shí)，結(jié)束語音輸入狀態(tài)。
全文摘要
本發(fā)明涉及殘疾人使用軟件的實(shí)現(xiàn)方法。為了解決殘疾人使用軟件的不便，它通過語音提醒代替顯示器的顯示，通過語音輸入和語音控制代替鍵盤和鼠標(biāo)操作。為了讓盲人知道鼠標(biāo)所在位置，當(dāng)鼠標(biāo)在軟件界面內(nèi)拖動(dòng)、鼠標(biāo)移出界面時(shí)，軟件會(huì)發(fā)出適當(dāng)?shù)恼Z音提醒，并且提示用戶進(jìn)行一定的操作。軟件有針對(duì)殘疾人的操作指南，以樹形的結(jié)構(gòu)進(jìn)行語音提醒，提示殘疾人做出選擇。殘疾人可用語音做出選擇，直到以語音形式播放幫助具體內(nèi)容。具有鍵盤提醒功能，在軟件操作過程中的按鍵操作，可以被轉(zhuǎn)變?yōu)閷?duì)應(yīng)的語音進(jìn)行提醒。可以采用語音控制焦點(diǎn)切換，并且可以用語音命令控制處于焦點(diǎn)狀態(tài)的控件的執(zhí)行。軟件可以將語音輸入變成語音對(duì)應(yīng)的文本，錄入輸入框。
文檔編號(hào)G06F9/44GK102799433SQ20121022830
公開日2012年11月28日 申請(qǐng)日期2012年7月4日 優(yōu)先權(quán)日2012年7月4日
發(fā)明者王勇, 鐘艷如, 汪華登, 付莉, 陳智勇 申請(qǐng)人:桂林電子科技大學(xué)