下面的示例涉及具有超分辨率的方法和設(shè)備。

背景技術(shù)：

1、圖像超分辨率技術(shù)可以是用于從單個(gè)低分辨率（lr）圖像獲取高分辨率（hr）圖像的技術(shù)。圖像超分辨率技術(shù)不僅可包括將lr圖像的質(zhì)量提高到hr，而且還可包括用于對(duì)圖像中的小對(duì)象進(jìn)行大的縮放的縮放技術(shù)。超分辨率技術(shù)（例如，最近插值、雙線性插值和雙三次插值）可使用插值和各種基于深度學(xué)習(xí)的超分辨率技術(shù)，并且用于使深度學(xué)習(xí)模型輕量化的技術(shù)可包括量化、剪枝、低秩近似、知識(shí)蒸餾和緊湊網(wǎng)絡(luò)設(shè)計(jì)，以在移動(dòng)環(huán)境（如，智能電話）中實(shí)時(shí)處理圖像的超分辨率。

技術(shù)實(shí)現(xiàn)思路

1、提供本
技術(shù)實(shí)現(xiàn)要素：
以簡(jiǎn)化的形式介紹在下面的具體實(shí)施方式中進(jìn)一步描述的構(gòu)思的選擇。本發(fā)明內(nèi)容不意在識(shí)別要求保護(hù)的主題的關(guān)鍵特征或必要特征，也不意在用于幫助確定要求保護(hù)的主題的范圍。

2、在一個(gè)或多個(gè)總體實(shí)施例中，一種具有超分辨率的處理器實(shí)現(xiàn)的方法包括：基于輸入圖像的梯度來(lái)確定輸入圖像的方向類(lèi)型；基于與映射到確定的方向類(lèi)型的內(nèi)核集對(duì)應(yīng)的殘差查找表（lut）來(lái)獲取第一中間圖像，第一中間圖像是與輸入圖像對(duì)應(yīng)的超分辨率圖像；基于輸入圖像的梯度和預(yù)設(shè)的調(diào)諧參數(shù)來(lái)確定輸入圖像的lut強(qiáng)度圖；以及基于lut強(qiáng)度圖和第一中間圖像來(lái)生成輸出圖像，輸出圖像是輸入圖像的超分辨率圖像。

3、獲取第一中間圖像的步驟可包括：基于包括在內(nèi)核集中的內(nèi)核來(lái)確定與輸入圖像中的參考像素對(duì)應(yīng)的感受野；

4、利用通過(guò)從感受野中的像素的值減去參考像素的值而獲得的值來(lái)更新感受野中的像素的值；以及針對(duì)感受野中的除參考像素之外的像素的更新后的值的組合來(lái)獲得存儲(chǔ)在與所述內(nèi)核對(duì)應(yīng)的殘差lut中的值，以獲取第一中間圖像。

5、生成輸出圖像的步驟可包括：基于lut強(qiáng)度圖和第一中間圖像來(lái)獲取第二中間圖像；以及基于第二中間圖像和通過(guò)將用于超分辨率的插值應(yīng)用于輸入圖像而獲取的基線圖像來(lái)生成輸出圖像。

6、輸入圖像的lut強(qiáng)度圖可包括基于輸入圖像中的每個(gè)像素的梯度與調(diào)諧參數(shù)的乘積而確定的輸入圖像中的每個(gè)像素的lut強(qiáng)度值。

7、包括在輸入圖像中的第一像素的lut強(qiáng)度值可響應(yīng)于第一像素的梯度的大小與調(diào)諧參數(shù)的乘積大于預(yù)定的最大值而被確定為預(yù)定的最大值，可響應(yīng)于第一像素的梯度的大小與調(diào)諧參數(shù)的乘積小于預(yù)定的最小值而被確定為預(yù)定的最小值，并且可響應(yīng)于第一像素的梯度的大小與調(diào)諧參數(shù)的乘積小于或等于最大值且大于或等于最小值而被確定為第一像素的梯度的大小與調(diào)諧參數(shù)的乘積。

8、內(nèi)核集可包括多個(gè)內(nèi)核，并且獲取第一中間圖像的步驟可包括：根據(jù)基于分別針對(duì)所述多個(gè)內(nèi)核確定的權(quán)重對(duì)分別與所述多個(gè)內(nèi)核對(duì)應(yīng)的超分辨率運(yùn)算結(jié)果進(jìn)行加權(quán)求和來(lái)獲取第一中間圖像。

9、獲取第一中間圖像的步驟可包括：利用通過(guò)對(duì)與第一中間圖像的不同區(qū)域?qū)?yīng)的塊進(jìn)行重疊而獲取的圖像來(lái)更新第一中間圖像，第一中間圖像的每個(gè)塊可以是與輸入圖像中的每個(gè)像素的超分辨率結(jié)果對(duì)應(yīng)的一組像素，并且在更新后的第一中間圖像中對(duì)塊進(jìn)行重疊的區(qū)域的像素值可被確定為重疊的塊的像素值的平均值。

10、確定輸入圖像的lut強(qiáng)度圖的步驟可包括：基于調(diào)諧參數(shù)和輸入圖像中的被檢測(cè)為角的像素的梯度來(lái)確定與輸入圖像中的被檢測(cè)為角的像素對(duì)應(yīng)的lut強(qiáng)度值，并且生成輸出圖像的步驟可包括：響應(yīng)于第一中間圖像中的第一像素與輸入圖像中的被檢測(cè)為角的像素對(duì)應(yīng)，基于第一中間圖像和與輸入圖像中的被檢測(cè)為角的像素對(duì)應(yīng)的lut強(qiáng)度值來(lái)生成輸出圖像。

11、所述方法可包括：將輸出圖像設(shè)置為輸入圖像，以及重復(fù)確定輸入圖像的方向類(lèi)型的步驟、獲取第一中間圖像的步驟、確定lut強(qiáng)度圖的步驟、以及生成輸出圖像的步驟。

12、在一個(gè)或多個(gè)總體方面，一種具有超分辨率的處理器實(shí)現(xiàn)的方法包括：基于輸入圖像的梯度來(lái)確定輸入圖像的方向類(lèi)型；基于分別與包括在內(nèi)核集中的內(nèi)核對(duì)應(yīng)的殘差查找表來(lái)獲得分別與內(nèi)核對(duì)應(yīng)的超分辨率運(yùn)算結(jié)果，內(nèi)核集被映射到確定的輸入圖像的方向類(lèi)型；以及基于通過(guò)分別針對(duì)內(nèi)核確定的權(quán)重對(duì)分別與內(nèi)核對(duì)應(yīng)的超分辨率運(yùn)算結(jié)果進(jìn)行加權(quán)求和來(lái)生成輸出圖像，輸出圖像是輸入圖像的超分辨率圖像，其中，殘差lut包括像素值的組合的超分辨率運(yùn)算結(jié)果，所述像素值的數(shù)量比相應(yīng)的內(nèi)核的大小小“1”。

13、生成輸出圖像的步驟可包括：根據(jù)基于分別針對(duì)內(nèi)核確定的權(quán)重對(duì)分別與內(nèi)核對(duì)應(yīng)的超分辨率運(yùn)算結(jié)果進(jìn)行加權(quán)求和來(lái)獲取第一中間圖像，第一中間圖像是與輸入圖像對(duì)應(yīng)的超分辨率圖像；以及基于第一中間圖像和通過(guò)將用于超分辨率的插值應(yīng)用于輸入圖像而獲取的基線圖像來(lái)生成輸出圖像。

14、獲得超分辨率運(yùn)算結(jié)果的步驟可包括：基于包括在內(nèi)核集中的內(nèi)核來(lái)確定與輸入圖像中的參考像素對(duì)應(yīng)的感受野；利用通過(guò)從感受野中的像素的值減去參考像素的值而獲得的值來(lái)更新感受野中的像素的值；以及針對(duì)感受野中的除參考像素之外的像素的更新后的值的組合來(lái)獲得存儲(chǔ)在與所述內(nèi)核對(duì)應(yīng)的殘差查找表中的值，以獲得超分辨率運(yùn)算結(jié)果。

15、針對(duì)內(nèi)核之中的第一內(nèi)核確定的第一權(quán)重可基于由第一內(nèi)核指示的感受野中的參考像素與另外的像素之間的相對(duì)位置關(guān)系而被確定。

16、生成輸出圖像的步驟可包括：通過(guò)對(duì)與對(duì)應(yīng)于內(nèi)核之中的第一內(nèi)核的超分辨率運(yùn)算結(jié)果的不同區(qū)域?qū)?yīng)的塊進(jìn)行重疊來(lái)更新對(duì)應(yīng)于第一內(nèi)核的超分辨率運(yùn)算結(jié)果，對(duì)應(yīng)于第一內(nèi)核的超分辨率運(yùn)算結(jié)果的每個(gè)塊可以是存儲(chǔ)在與第一內(nèi)核對(duì)應(yīng)的殘差lut中的輸入圖像中的每個(gè)像素的超分辨率結(jié)果的集合，并且在與第一內(nèi)核對(duì)應(yīng)的更新后的超分辨率運(yùn)算結(jié)果中對(duì)塊進(jìn)行重疊的區(qū)域的像素值可被確定為重疊的塊的像素值的平均值。

17、生成輸出圖像的步驟可包括：針對(duì)輸入圖像中的被檢測(cè)為角的第一像素，確定分別與內(nèi)核對(duì)應(yīng)的超分辨率運(yùn)算結(jié)果的加權(quán)和；以及針對(duì)輸入圖像中的沒(méi)有被檢測(cè)為角的第二像素，確定分別與內(nèi)核對(duì)應(yīng)的超分辨率運(yùn)算結(jié)果的簡(jiǎn)單和。

18、所述方法可包括：將輸出圖像設(shè)置為輸入圖像，以及重復(fù)確定輸入圖像的方向類(lèi)型的步驟、獲得分別與內(nèi)核對(duì)應(yīng)的超分辨率運(yùn)算結(jié)果的步驟、以及生成輸出圖像的步驟。

19、在一個(gè)或多個(gè)總體方面，一種非暫時(shí)性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)指令，所述指令在由處理器執(zhí)行時(shí)將處理器配置為執(zhí)行在此描述的操作和/或方法中的任何一個(gè)、任何組合或全部。

20、在一個(gè)或多個(gè)總體方面，一種用于超分辨率圖像處理的設(shè)備包括：一個(gè)或多個(gè)處理器，被配置為基于輸入圖像的梯度來(lái)確定輸入圖像的方向類(lèi)型；基于與映射到確定的方向類(lèi)型的內(nèi)核集對(duì)應(yīng)的殘差查找表（lut）來(lái)獲取第一中間圖像，第一中間圖像是與輸入圖像對(duì)應(yīng)的超分辨率圖像；基于輸入圖像的梯度和預(yù)設(shè)的調(diào)諧參數(shù)來(lái)確定輸入圖像的lut強(qiáng)度圖；并且基于lut強(qiáng)度圖和第一中間圖像來(lái)生成輸出圖像，輸出圖像是輸入圖像的超分辨率圖像。

21、內(nèi)核集可包括多個(gè)內(nèi)核，并且為了獲取第一中間圖像，所述一個(gè)或多個(gè)處理器可被配置為：根據(jù)基于分別針對(duì)所述多個(gè)內(nèi)核確定的權(quán)重對(duì)分別與所述多個(gè)內(nèi)核對(duì)應(yīng)的超分辨率運(yùn)算結(jié)果進(jìn)行加權(quán)求和來(lái)獲取第一中間圖像。

22、在一個(gè)或多個(gè)總體方面，一種用于超分辨率圖像處理的設(shè)備包括：一個(gè)或多個(gè)處理器，被配置為：基于輸入圖像的梯度來(lái)確定輸入圖像的方向類(lèi)型；基于分別與包括在內(nèi)核集中的內(nèi)核對(duì)應(yīng)的殘差查找表（lut）來(lái)獲得分別與內(nèi)核對(duì)應(yīng)的超分辨率運(yùn)算結(jié)果，內(nèi)核集被映射到確定的輸入圖像的方向類(lèi)型；并且基于通過(guò)分別針對(duì)內(nèi)核確定的權(quán)重對(duì)分別與內(nèi)核對(duì)應(yīng)的超分辨率運(yùn)算結(jié)果進(jìn)行加權(quán)求和來(lái)生成輸出圖像，輸出圖像是輸入圖像的超分辨率圖像，其中，殘差lut包括像素值的組合的超分辨率運(yùn)算結(jié)果，所述像素值的數(shù)量比相應(yīng)的內(nèi)核的大小小“1”。

23、根據(jù)下面的具體實(shí)施方式、附圖和權(quán)利要求，其他特征和方面將是清楚的。