本申請(qǐng)涉及視頻圖像編碼，尤其涉及幀內(nèi)預(yù)測(cè)融合方法裝置、編解碼方法編解碼器、設(shè)備介質(zhì)。

背景技術(shù)：

1、視頻圖像數(shù)據(jù)量比較大，通常需要對(duì)視頻像素?cái)?shù)據(jù)(rgb、yuv等)進(jìn)行壓縮，壓縮后的數(shù)據(jù)稱之為視頻碼流，視頻碼流通過(guò)有線或者無(wú)線網(wǎng)絡(luò)傳輸至用戶端，再進(jìn)行解碼觀看。整個(gè)視頻編碼流程包括塊劃分、預(yù)測(cè)、變換、量化、編碼等過(guò)程。

2、為了更好地預(yù)測(cè)幀內(nèi)編碼塊，現(xiàn)有技術(shù)提出了一種基于模板匹配的幀內(nèi)預(yù)測(cè)模式(intratmp，簡(jiǎn)寫(xiě)為tmp)，在該模式下，首先利用當(dāng)前編碼塊相鄰的重建相鄰像素作為當(dāng)前模板，然后利用當(dāng)前模板在預(yù)定的已重建區(qū)域內(nèi)進(jìn)行搜索，并獲得具有最小模板差異的匹配模板，最后將最佳匹配模板對(duì)應(yīng)的匹配塊作為當(dāng)前編碼塊的預(yù)測(cè)值?，F(xiàn)有技術(shù)提出了一種基于tmp的濾波方法(ftmp)，ftmp濾波模型的輸入為參考中心像素及其空域相鄰像素、以及偏置項(xiàng)，求解出濾波模型的模型參數(shù)后，應(yīng)用于匹配塊，從而得到當(dāng)前編碼塊的預(yù)測(cè)值。

3、現(xiàn)有技術(shù)ftmp存在的問(wèn)題是，僅存在單一的濾波模型，只對(duì)某一種紋理的圖像編碼效果較好，魯棒性和泛化性較差，基于ftmp的幀內(nèi)預(yù)測(cè)準(zhǔn)確性不能保證。

技術(shù)實(shí)現(xiàn)思路

1、本申請(qǐng)實(shí)施例提供了幀內(nèi)預(yù)測(cè)融合方法裝置、編解碼方法編解碼器、設(shè)備介質(zhì)，用以解決現(xiàn)有技術(shù)ftmp僅存在單一的濾波模型，魯棒性和泛化性較差，基于ftmp的幀內(nèi)預(yù)測(cè)準(zhǔn)確性不能保證的問(wèn)題。

2、第一方面，本申請(qǐng)?zhí)峁┝艘环N幀內(nèi)預(yù)測(cè)融合方法，所述方法包括：

3、構(gòu)建預(yù)測(cè)融合模型，所述預(yù)測(cè)融合模型的輸入包括對(duì)當(dāng)前編碼塊的至少兩個(gè)不同的預(yù)測(cè)模式的預(yù)測(cè)結(jié)果；其中，至少一個(gè)預(yù)測(cè)模式為ftmp模式或ftmp衍生模式；

4、基于所述預(yù)測(cè)融合模型，對(duì)至少兩個(gè)預(yù)測(cè)結(jié)果進(jìn)行融合，根據(jù)融合結(jié)果確定所述當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果。

5、第二方面，本申請(qǐng)?zhí)峁┝艘环N幀內(nèi)預(yù)測(cè)融合裝置，所述裝置包括：

6、模型構(gòu)建模塊，用于構(gòu)建預(yù)測(cè)融合模型，所述預(yù)測(cè)融合模型的輸入包括至少兩個(gè)不同的預(yù)測(cè)模式的預(yù)測(cè)結(jié)果；其中，至少一個(gè)預(yù)測(cè)模式為ftmp模式或ftmp衍生模式；

7、融合預(yù)測(cè)模塊，用于基于所述預(yù)測(cè)融合模型，對(duì)至少兩個(gè)預(yù)測(cè)結(jié)果進(jìn)行融合，根據(jù)融合結(jié)果確定所述當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果。

8、第三方面，本申請(qǐng)?zhí)峁┝艘环N電子設(shè)備，包括處理器、通信接口、存儲(chǔ)器和通信總線，其中，處理器，通信接口，存儲(chǔ)器通過(guò)通信總線完成相互間的通信；

9、存儲(chǔ)器，用于存放計(jì)算機(jī)程序；

10、處理器，用于執(zhí)行存儲(chǔ)器上所存放的程序時(shí)，實(shí)現(xiàn)所述的方法步驟。

11、第四方面，本申請(qǐng)?zhí)峁┝艘环N編碼方法，所述方法包括：采用所述的幀內(nèi)預(yù)測(cè)融合方法確定當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果；根據(jù)所述目標(biāo)預(yù)測(cè)結(jié)果確定所述當(dāng)前編碼塊的預(yù)測(cè)殘差；所述預(yù)測(cè)殘差經(jīng)過(guò)變換、量化和熵編碼得到所述當(dāng)前編碼塊的編碼碼流。

12、第五方面，本申請(qǐng)?zhí)峁┝艘环N編碼器，所述編碼器包括：

13、第一獲取單元，用于獲取待編碼的圖像；

14、編碼單元，用于采用所述的編碼方法，對(duì)所述待編碼的圖像進(jìn)行編碼，獲得所述待編碼的圖像對(duì)應(yīng)的編碼圖像。

15、第六方面，本申請(qǐng)?zhí)峁┝艘环N解碼方法，所述方法包括：采用所述的編碼方法得到的當(dāng)前編碼塊的編碼碼流，經(jīng)過(guò)熵解碼、反量化和反變換，得到所述當(dāng)前編碼塊的預(yù)測(cè)殘差；根據(jù)所述預(yù)測(cè)殘差和采用所述的幀內(nèi)預(yù)測(cè)融合方法確定的所述當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果，確定所述當(dāng)前編碼塊的解碼結(jié)果。

16、第七方面，本申請(qǐng)?zhí)峁┝艘环N解碼器，所述解碼器包括：

17、第二獲取單元，用于獲取編碼后的圖像，其中，所述編碼后的圖像是基于所述的編碼方法編碼得到的；

18、解碼單元，用于采用所述的解碼方法，對(duì)所述編碼后的圖像進(jìn)行解碼，獲得所述編碼后的圖像對(duì)應(yīng)的解碼圖像。

19、第八方面，本申請(qǐng)?zhí)峁┝艘环N計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)內(nèi)存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)所述的方法步驟。

20、本申請(qǐng)?zhí)峁┝藥瑑?nèi)預(yù)測(cè)融合方法裝置、編解碼方法編解碼器、設(shè)備介質(zhì)，所述方法包括：構(gòu)建預(yù)測(cè)融合模型，所述預(yù)測(cè)融合模型的輸入包括對(duì)當(dāng)前編碼塊的至少兩個(gè)不同的預(yù)測(cè)模式的預(yù)測(cè)結(jié)果；其中，至少一個(gè)預(yù)測(cè)模式為ftmp模式或ftmp衍生模式；基于所述預(yù)測(cè)融合模型，對(duì)至少兩個(gè)預(yù)測(cè)結(jié)果進(jìn)行融合，根據(jù)融合結(jié)果確定所述當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果。

21、上述的技術(shù)方案具有如下優(yōu)點(diǎn)或有益效果：

22、本申請(qǐng)構(gòu)建預(yù)測(cè)融合模型，預(yù)測(cè)融合模型的輸入包括當(dāng)前編碼塊的至少兩個(gè)不同的預(yù)測(cè)模式的預(yù)測(cè)結(jié)果；基于預(yù)測(cè)融合模型，對(duì)至少兩個(gè)預(yù)測(cè)結(jié)果進(jìn)行融合，確定當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果，并且至少一個(gè)預(yù)測(cè)模式為ftmp模式或ftmp衍生模式。ftmp模式或ftmp衍生模式的預(yù)測(cè)結(jié)果與另外的預(yù)測(cè)模式的預(yù)測(cè)結(jié)果的融合，這樣得到的目標(biāo)預(yù)測(cè)結(jié)果融合了至少兩種預(yù)測(cè)模式的特點(diǎn)，提升了對(duì)不同紋理的圖像編碼效果，使得應(yīng)用棒性和泛化性較好。進(jìn)一步地提升幀內(nèi)預(yù)測(cè)的準(zhǔn)確性。

技術(shù)特征：

1.一種幀內(nèi)預(yù)測(cè)融合方法，其特征在于，所述方法包括：

2.如權(quán)利要求1所述的方法，其特征在于，所述ftmp衍生模式的輸入項(xiàng)包括梯度信息和位置信息中的至少一個(gè)。

3.如權(quán)利要求2所述的方法，其特征在于，所述ftmp衍生模式的濾波模型的輸入項(xiàng)包括梯度信息，所述梯度信息包括水平索貝爾梯度、垂直索貝爾梯度、對(duì)角索貝爾梯度、反對(duì)角索貝爾梯度中的至少一個(gè)。

4.如權(quán)利要求2所述的方法，其特征在于，所述ftmp衍生模式的濾波模型的輸入項(xiàng)包括位置信息，所述位置信息包括絕對(duì)水平偏移、絕對(duì)垂直偏移、相對(duì)水平偏移、相對(duì)垂直偏移中的至少一個(gè)。

5.如權(quán)利要求1所述的方法，其特征在于，基于所述預(yù)測(cè)融合模型，對(duì)至少兩個(gè)預(yù)測(cè)結(jié)果進(jìn)行融合，根據(jù)融合結(jié)果確定所述當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果包括：

6.如權(quán)利要求5所述的方法，其特征在于，所述對(duì)得到的至少兩個(gè)子預(yù)測(cè)融合結(jié)果進(jìn)行組合，確定所述目標(biāo)預(yù)測(cè)結(jié)果之前，所述方法還包括：

7.如權(quán)利要求6所述的方法，其特征在于，確定所述預(yù)測(cè)塊對(duì)應(yīng)的預(yù)測(cè)模板包括：

8.如權(quán)利要求7所述的方法，其特征在于，確定所述當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果包括：

9.如權(quán)利要求1所述的方法，其特征在于，所述根據(jù)融合結(jié)果確定所述當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果包括：

10.如權(quán)利要求9所述的方法，其特征在于，所述方法還包括：

11.如權(quán)利要求9所述的方法，其特征在于，所述方法還包括：

12.一種幀內(nèi)預(yù)測(cè)融合裝置，其特征在于，所述裝置包括：

13.一種電子設(shè)備，其特征在于，包括處理器、通信接口、存儲(chǔ)器和通信總線，其中，處理器，通信接口，存儲(chǔ)器通過(guò)通信總線完成相互間的通信；

14.一種編碼方法，其特征在于，所述方法包括：采用權(quán)利要求1-11任一項(xiàng)所述的幀內(nèi)預(yù)測(cè)融合方法確定當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果；根據(jù)所述目標(biāo)預(yù)測(cè)結(jié)果確定所述當(dāng)前編碼塊的預(yù)測(cè)殘差；所述預(yù)測(cè)殘差經(jīng)過(guò)變換、量化和熵編碼得到所述當(dāng)前編碼塊的編碼碼流。

15.一種編碼器，其特征在于，所述編碼器包括：

16.一種解碼方法，其特征在于，所述方法包括：采用權(quán)利要求14所述的編碼方法得到的當(dāng)前編碼塊的編碼碼流，經(jīng)過(guò)熵解碼、反量化和反變換，得到所述當(dāng)前編碼塊的預(yù)測(cè)殘差；根據(jù)所述預(yù)測(cè)殘差和采用權(quán)利要求1-11任一項(xiàng)所述的幀內(nèi)預(yù)測(cè)融合方法確定的所述當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果，確定所述當(dāng)前編碼塊的解碼結(jié)果。

17.一種解碼器，其特征在于，所述解碼器包括：

18.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)內(nèi)存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1-11或14或16任一項(xiàng)所述的方法的步驟。

技術(shù)總結(jié)
本申請(qǐng)公開(kāi)了幀內(nèi)預(yù)測(cè)融合方法裝置、編解碼方法編解碼器、設(shè)備介質(zhì)，構(gòu)建預(yù)測(cè)融合模型，預(yù)測(cè)融合模型的輸入包括當(dāng)前編碼塊的至少兩個(gè)不同的預(yù)測(cè)模式的預(yù)測(cè)結(jié)果；基于預(yù)測(cè)融合模型，對(duì)至少兩個(gè)預(yù)測(cè)結(jié)果進(jìn)行融合，確定當(dāng)前編碼塊的目標(biāo)預(yù)測(cè)結(jié)果，并且至少一個(gè)預(yù)測(cè)模式為FTMP模式或FTMP衍生模式。FTMP模式或FTMP衍生模式的預(yù)測(cè)結(jié)果與另外的預(yù)測(cè)模式的預(yù)測(cè)結(jié)果的融合，這樣得到的目標(biāo)預(yù)測(cè)結(jié)果融合了至少兩種預(yù)測(cè)模式的特點(diǎn)，提升了對(duì)不同紋理的圖像編碼效果，使得應(yīng)用魯棒性和泛化性較好。進(jìn)一步地提升幀內(nèi)預(yù)測(cè)的準(zhǔn)確性。

技術(shù)研發(fā)人員：彭雙,江東,林聚財(cái),方誠(chéng),張雪,殷俊,施夏夢(mèng),金恒
受保護(hù)的技術(shù)使用者：浙江大華技術(shù)股份有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/10/21