本發(fā)明涉及圖像處理，尤其涉及一種基于輔助信息的圖像修復(fù)方法、系統(tǒng)、終端及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

背景技術(shù)：

1、攝像頭是一種將圖像信號(hào)轉(zhuǎn)換為電信號(hào)的設(shè)備，廣泛應(yīng)用于手機(jī)、電腦、監(jiān)控及醫(yī)療等領(lǐng)域。攝像頭的成像質(zhì)量不僅取決于其內(nèi)部的傳感器、電路及算法等因素，還受到其外部的鏡頭、玻璃罩等因素的影響。其中，鏡頭是攝像頭最重要的組成部分之一，它決定了攝像頭的視角、光圈及焦距等參數(shù)，同時(shí)也容易受到外界環(huán)境的干擾，從而影響攝像頭的成像效果，從而影響攝像頭的成像效果，主要表現(xiàn)為圖像整體或局部模糊等現(xiàn)象。

2、目前，現(xiàn)有的模糊圖像處理方法沒有基于相關(guān)的信息源作為輔助信息，導(dǎo)致處理后的模糊圖像的整體效果不是很好，造成圖像的成像質(zhì)量不高，影響用戶的體驗(yàn)。因此，如何根據(jù)輔助信息進(jìn)行修復(fù)模糊圖像得到高質(zhì)量圖像的問題，是圖像處理領(lǐng)域亟待解決的難題。

3、因此，現(xiàn)有技術(shù)還有待于改進(jìn)和發(fā)展。

技術(shù)實(shí)現(xiàn)思路

1、本發(fā)明的主要目的在于提供一種基于輔助信息的圖像修復(fù)方法、系統(tǒng)、終端及存儲(chǔ)介質(zhì)，旨在解決現(xiàn)有技術(shù)中沒有基于相關(guān)的信息源作為輔助信息，導(dǎo)致處理后的模糊圖像的整體效果不佳，且成像質(zhì)量不高的問題。

2、為實(shí)現(xiàn)上述目的，本發(fā)明提供一種基于輔助信息的圖像修復(fù)方法，所述基于輔助信息的圖像修復(fù)方法包括如下步驟：

3、獲取待處理模糊圖像，并對(duì)所述待處理模糊圖像進(jìn)行信息分析，得到目標(biāo)圖像信息；

4、根據(jù)所述目標(biāo)圖像信息對(duì)所述待處理模糊圖像的模糊核估計(jì)方案進(jìn)行優(yōu)化處理，得到目標(biāo)模糊核估計(jì)方案，根據(jù)所述目標(biāo)圖像信息對(duì)所述待處理模糊圖像的修復(fù)策略進(jìn)行優(yōu)化處理，得到目標(biāo)修復(fù)策略；

5、根據(jù)所述目標(biāo)模糊核估計(jì)方案和所述目標(biāo)修復(fù)策略對(duì)所述待處理模糊圖像進(jìn)行修復(fù)處理，得到去模糊圖像，并對(duì)所述去模糊圖像的質(zhì)量進(jìn)行優(yōu)化處理，得到目標(biāo)圖像。

6、可選地，所述的基于輔助信息的圖像修復(fù)方法，其中，所述目標(biāo)圖像信息包括時(shí)間信息、圖像場(chǎng)景信息和圖像深度信息；

7、所述獲取待處理模糊圖像，并對(duì)所述待處理模糊圖像進(jìn)行信息分析，得到目標(biāo)圖像信息，具體包括：

8、獲取待處理模糊圖像，讀取所述待處理模糊圖像的元數(shù)據(jù)，根據(jù)所述元數(shù)據(jù)獲取對(duì)應(yīng)的圖像捕捉時(shí)間戳，并根據(jù)所述圖像捕捉時(shí)間戳得到所述時(shí)間信息；

9、對(duì)所述待處理模糊圖像進(jìn)行場(chǎng)景分類處理，得到分類結(jié)果，根據(jù)所述分類結(jié)果對(duì)所述待處理模糊圖像進(jìn)行特征提取，得到場(chǎng)景特征，并根據(jù)所述場(chǎng)景特征得到所述圖像場(chǎng)景信息；

10、對(duì)所述待處理模糊圖像進(jìn)行深度估計(jì)，得到場(chǎng)景深度信息，并對(duì)所述場(chǎng)景深度信息進(jìn)行平滑處理，得到圖像深度信息。

11、可選地，所述的基于輔助信息的圖像修復(fù)方法，其中，所述對(duì)所述待處理模糊圖像進(jìn)行深度估計(jì)，得到場(chǎng)景深度信息，具體包括：

12、獲取所述待處理模糊圖像的圖像視角，其中，所述圖像視角包括單視角和多視角；

13、若所述圖像視角為單視角，則通過深度卷積網(wǎng)絡(luò)對(duì)所述待處理模糊圖像進(jìn)行特征提取，得到目標(biāo)特征，并根據(jù)所述目標(biāo)特征進(jìn)行區(qū)域深度推斷，得到場(chǎng)景深度信息，其中，所述目標(biāo)特征包括紋理特征、光照特征和物體大小特征；

14、若所述圖像視角為多視角，則通過立體視覺算法對(duì)所述待處理模糊圖像進(jìn)行視差計(jì)算，得到位置差異結(jié)果，并根據(jù)所述位置差異結(jié)果進(jìn)行深度計(jì)算，得到場(chǎng)景深度信息。

15、可選地，所述的基于輔助信息的圖像修復(fù)方法，其中，所述根據(jù)所述目標(biāo)圖像信息對(duì)所述待處理模糊圖像的模糊核估計(jì)方案進(jìn)行優(yōu)化處理，得到目標(biāo)模糊核估計(jì)方案，具體包括：

16、獲取所述待處理模糊圖像的模糊核估計(jì)方案，并根據(jù)所述時(shí)間信息對(duì)所述待處理模糊圖像進(jìn)行光照條件推斷，得到圖像光照條件；

17、根據(jù)所述圖像場(chǎng)景信息對(duì)所述待處理模糊圖像分別進(jìn)行識(shí)別處理，得到物體信息和背景信息，并根據(jù)所述物體信息和所述背景信息進(jìn)行模糊推斷，得到目標(biāo)模糊來源；

18、根據(jù)所述圖像深度信息對(duì)所述待處理模糊圖像進(jìn)行區(qū)域距離判斷，得到多個(gè)不同區(qū)域的距離信息，并根據(jù)所有區(qū)域的距離信息得到對(duì)應(yīng)區(qū)域的模糊情況；

19、根據(jù)所述圖像光照條件、所述目標(biāo)模糊來源和所有區(qū)域的模糊情況對(duì)所述模糊核估計(jì)方案進(jìn)行優(yōu)化處理，得到目標(biāo)模糊核估計(jì)方案。

20、可選地，所述的基于輔助信息的圖像修復(fù)方法，其中，所述根據(jù)所述目標(biāo)圖像信息對(duì)所述待處理模糊圖像的修復(fù)策略進(jìn)行優(yōu)化處理，得到目標(biāo)修復(fù)策略，具體包括：

21、獲取所述待處理模糊圖像的修復(fù)策略，根據(jù)所述時(shí)間信息對(duì)所述待處理模糊圖像進(jìn)行曝光時(shí)間推斷，得到圖像曝光時(shí)間，并根據(jù)所述圖像場(chǎng)景信息得到所述待處理模糊圖像的濾波器調(diào)整參數(shù)；

22、根據(jù)所述圖像曝光時(shí)間、所述濾波器調(diào)整參數(shù)和所有區(qū)域的模糊情況對(duì)所述修復(fù)策略進(jìn)行優(yōu)化處理，得到目標(biāo)修復(fù)策略。

23、可選地，所述的基于輔助信息的圖像修復(fù)方法，其中，所述根據(jù)所述目標(biāo)模糊核估計(jì)方案和所述目標(biāo)修復(fù)策略對(duì)所述待處理模糊圖像進(jìn)行修復(fù)處理，得到去模糊圖像，具體包括：

24、根據(jù)所述目標(biāo)模糊核估計(jì)方案和所述目標(biāo)修復(fù)策略對(duì)所述待處理模糊圖像進(jìn)行去模糊處理，得到初始清晰圖像；

25、對(duì)所述初始清晰圖像進(jìn)行誤差修正處理，得到去模糊圖像，并根據(jù)預(yù)設(shè)圖像質(zhì)量對(duì)所述去模糊圖像進(jìn)行質(zhì)量評(píng)估，得到評(píng)估結(jié)果；

26、若所述評(píng)估結(jié)果為所述去模糊圖像的質(zhì)量滿足所述預(yù)設(shè)圖像質(zhì)量，則輸出所述去模糊圖像。

27、可選地，所述的基于輔助信息的圖像修復(fù)方法，其中，所述對(duì)所述去模糊圖像的質(zhì)量進(jìn)行優(yōu)化處理，得到目標(biāo)圖像，具體包括：

28、對(duì)所述去模糊圖像的質(zhì)量進(jìn)行第一優(yōu)化處理，得到優(yōu)化圖像，其中，所述第一優(yōu)化處理的內(nèi)容包括對(duì)比度增強(qiáng)處理、銳化處理和色彩校正處理；

29、對(duì)所述優(yōu)化圖像進(jìn)行第二優(yōu)化處理，得到目標(biāo)圖像，其中，所述第二優(yōu)化處理的內(nèi)容包括噪聲抑制、偽影抑制和圖像邊緣細(xì)化。

30、可選地，所述的基于輔助信息的圖像修復(fù)方法，其中，所述的基于輔助信息的圖像修復(fù)系統(tǒng)包括：

31、圖像分析模塊，用于獲取待處理模糊圖像，并對(duì)所述待處理模糊圖像進(jìn)行信息分析，得到目標(biāo)圖像信息；

32、方案優(yōu)化模塊，用于根據(jù)所述目標(biāo)圖像信息對(duì)所述待處理模糊圖像的模糊核估計(jì)方案進(jìn)行優(yōu)化處理，得到目標(biāo)模糊核估計(jì)方案，根據(jù)所述目標(biāo)圖像信息對(duì)所述待處理模糊圖像的修復(fù)策略進(jìn)行優(yōu)化處理，得到目標(biāo)修復(fù)策略；

33、圖像修復(fù)模塊，用于根據(jù)所述目標(biāo)模糊核估計(jì)方案和所述目標(biāo)修復(fù)策略對(duì)所述待處理模糊圖像進(jìn)行修復(fù)處理，得到去模糊圖像，并對(duì)所述去模糊圖像的質(zhì)量進(jìn)行優(yōu)化處理，得到目標(biāo)圖像。

34、此外，為實(shí)現(xiàn)上述目的，本發(fā)明還提供一種終端，其中，所述終端包括：存儲(chǔ)器、處理器及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的基于輔助信息的圖像修復(fù)程序，所述基于輔助信息的圖像修復(fù)程序被所述處理器執(zhí)行時(shí)實(shí)現(xiàn)如上所述的基于輔助信息的圖像修復(fù)方法的步驟。

35、此外，為實(shí)現(xiàn)上述目的，本發(fā)明還提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其中，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)有基于輔助信息的圖像修復(fù)程序，所述基于輔助信息的圖像修復(fù)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如上所述的基于輔助信息的圖像修復(fù)方法的步驟。

36、本發(fā)明中，獲取待處理模糊圖像，并對(duì)所述待處理模糊圖像進(jìn)行信息分析，得到目標(biāo)圖像信息；根據(jù)所述目標(biāo)圖像信息對(duì)所述待處理模糊圖像的模糊核估計(jì)方案進(jìn)行優(yōu)化處理，得到目標(biāo)模糊核估計(jì)方案，根據(jù)所述目標(biāo)圖像信息對(duì)所述待處理模糊圖像的修復(fù)策略進(jìn)行優(yōu)化處理，得到目標(biāo)修復(fù)策略；根據(jù)所述目標(biāo)模糊核估計(jì)方案和所述目標(biāo)修復(fù)策略對(duì)所述待處理模糊圖像進(jìn)行修復(fù)處理，得到去模糊圖像，并對(duì)所述去模糊圖像的質(zhì)量進(jìn)行優(yōu)化處理，得到目標(biāo)圖像。本發(fā)明能夠基于圖像相關(guān)的輔助信息，使得處理后得到的圖像的去模糊效果更好，且提高了對(duì)應(yīng)的成像質(zhì)量。