欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

一種語音識別模型的訓(xùn)練方法、語音識別的方法及裝置與流程

文檔序號:40422506發(fā)布日期:2024-12-24 14:55閱讀:來源:國知局

技術(shù)特征:

1.一種語音識別模型的訓(xùn)練方法,其特征在于,所述語音識別模型為采用結(jié)合ctc與注意力機制的多任務(wù)學(xué)習(xí)架構(gòu)的模型,包括transformer編碼器和解碼器,所述方法包括:

2.根據(jù)權(quán)利要求1所述的一種語音識別模型的訓(xùn)練方法,其特征在于,所述獲取待識別的語音數(shù)據(jù),對所述語音數(shù)據(jù)進行預(yù)處理,得到音頻fbank特征和文本數(shù)據(jù)編碼結(jié)果,包括:

3.根據(jù)權(quán)利要求1所述的一種語音識別模型的訓(xùn)練方法,其特征在于,所述基于預(yù)處理得到的音頻fbank特征和文本數(shù)據(jù)編碼結(jié)果,對語音識別模型進行預(yù)訓(xùn)練,得到音頻編碼器和ctc分類器包括:

4.根據(jù)權(quán)利要求1所述的一種語音識別模型的訓(xùn)練方法,其特征在于,所述采用預(yù)訓(xùn)練得到的ctc分類器對編碼后的音頻特征序列進行去冗余處理,得到精簡后的音頻編碼特征包括:

5.根據(jù)權(quán)利要求4所述的一種語音識別模型的訓(xùn)練方法,其特征在于,所述步驟401還包括如下步驟:

6.根據(jù)權(quán)利要求5所述的一種語音識別模型的訓(xùn)練方法,其特征在于,所述步驟402還包括如下步驟:

7.根據(jù)權(quán)利要求1所述的一種語音識別模型的訓(xùn)練方法,其特征在于,所述通過去除冗余后的音頻編碼特征對語音識別模型中的transformer解碼器進行微調(diào)訓(xùn)練,得到完成訓(xùn)練的語音識別模型:

8.一種語音識別模型的訓(xùn)練裝置,其特征在于,所述語音識別模型為采用結(jié)合ctc與注意力機制的多任務(wù)學(xué)習(xí)架構(gòu)的模型,包括transformer編碼器和解碼器,所述裝置包括:

9.一種語音識別方法,其特征在于,所述方法通過語音識別模型實現(xiàn),所述語音識別模型為根據(jù)權(quán)利要求1~7任一項所述的方法訓(xùn)練得到,所述語音識別方法包括:

10.根據(jù)權(quán)利要求9所述的一種語音識別方法,其特征在于,所述語音識別方法還包括:

11.根據(jù)權(quán)利要求10所述的一種語音識別方法,其特征在于,所述預(yù)設(shè)解碼策略包括自回歸解碼和非自回歸解碼。

12.根據(jù)權(quán)利要求11所述的一種語音識別方法,其特征在于,所述transformer解碼器使用自回歸解碼策略對音頻編碼特征進行解碼處理,得到預(yù)測文本序列,包括如下步驟:

13.一種語音識別裝置,其特征在于,所述裝置通過語音識別模型實現(xiàn),所述語音識別模型為根據(jù)權(quán)利要求1~7任一項所述的方法訓(xùn)練得到的,所述裝置包括:


技術(shù)總結(jié)
本發(fā)明提供了一種語音識別模型的訓(xùn)練方法、語音識別的方法及裝置,所述方法包括:獲取待識別的語音數(shù)據(jù),對語音數(shù)據(jù)進行預(yù)處理,得到音頻Fbank特征和文本數(shù)據(jù)編碼結(jié)果;基于預(yù)處理得到的音頻Fbank特征和文本數(shù)據(jù)編碼結(jié)果,對語音識別模型進行預(yù)訓(xùn)練,得到音頻編碼器和CTC分類器;將音頻Fbank特征輸入到音頻編碼器中進行編碼處理,輸出音頻特征序列;采用預(yù)訓(xùn)練得到的CTC分類器對編碼后的音頻特征序列進行去冗余處理,得到精簡后的音頻編碼特征;通過去除冗余后的音頻編碼特征對語音識別模型中的Transformer解碼器進行微調(diào)訓(xùn)練,得到完成訓(xùn)練的語音識別模型。本發(fā)明解決了現(xiàn)有技術(shù)存在的關(guān)于如何有效提高解碼速度和精度以及語音識別效果的問題。

技術(shù)研發(fā)人員:舒洋
受保護的技術(shù)使用者:重慶位圖信息技術(shù)有限公司
技術(shù)研發(fā)日:
技術(shù)公布日:2024/12/23
當(dāng)前第2頁1 2 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
昭觉县| 湘阴县| 建宁县| 城步| 广宁县| 吐鲁番市| 丰台区| 隆尧县| 麦盖提县| 新巴尔虎左旗| 林周县| 依兰县| 潍坊市| 自治县| 中西区| 当涂县| 遂平县| 宕昌县| 东乌珠穆沁旗| 淳安县| 邳州市| 岳普湖县| 古丈县| 津南区| 冀州市| 隆安县| 吉林市| 江永县| 什邡市| 德令哈市| 建湖县| 徐闻县| 浠水县| 天门市| 成武县| 崇明县| 中山市| 沧州市| 大同市| 手机| 尼木县|