[發(fā)明專利]使用SEI消息進(jìn)行視頻后處理的方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202010195503.4
• 申請(qǐng)日: 2020-03-19
• 公開（公告）號(hào): CN111726637A
• 公開（公告）日: 2020-09-29
• 發(fā)明（設(shè)計(jì)）人: 李一鳴;劉杉;許曉中
• 申請(qǐng)（專利權(quán)）人: 騰訊美國(guó)有限責(zé)任公司
• 主分類號(hào): H04N19/85
• 分類號(hào): H04N19/85;H04N19/117;H04N19/186;G06N3/04;G06N3/08
• 代理公司: 北京德琦知識(shí)產(chǎn)權(quán)代理有限公司 11018
• 代理人: 陳美娥;王琦

本申請(qǐng)實(shí)施提供了一種使用SEI消息進(jìn)行視頻后處理的方法和裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)。該方法包括：當(dāng)確定為解碼器定義了神經(jīng)網(wǎng)絡(luò)的結(jié)構(gòu)以及與所述神經(jīng)網(wǎng)絡(luò)相關(guān)聯(lián)的一個(gè)或多個(gè)參數(shù)時(shí)，使用一個(gè)或多個(gè)SEI消息請(qǐng)求與所述神經(jīng)網(wǎng)絡(luò)的結(jié)構(gòu)和所述一個(gè)或多個(gè)參數(shù)對(duì)應(yīng)的數(shù)據(jù)；以及接收所述請(qǐng)求的結(jié)構(gòu)和參數(shù)數(shù)據(jù)，并且基于所述接收的結(jié)構(gòu)和參數(shù)數(shù)據(jù)對(duì)視頻數(shù)據(jù)執(zhí)行后處理。

優(yōu)先權(quán)信息

本申請(qǐng)要求于2019年3月22日遞交的、申請(qǐng)?zhí)枮?2/822,758的美國(guó)臨時(shí)申請(qǐng)、于2019年7月3日遞交的、申請(qǐng)?zhí)枮?2/870,369的美國(guó)臨時(shí)申請(qǐng)、以及于2020年3月16日遞交的、申請(qǐng)?zhí)枮?6/820,100的美國(guó)申請(qǐng)的優(yōu)先權(quán)，其全部?jī)?nèi)容通過(guò)引用并入本申請(qǐng)中。

技術(shù)領(lǐng)域

本申請(qǐng)涉及視頻編解碼技術(shù)。具體地，本申請(qǐng)涉及使用補(bǔ)充增強(qiáng)信息(SEI)消息進(jìn)行視頻后處理的方法和裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)。

背景技術(shù)

ITU-T VCEG(Q6/16)和ISO/IEC MPEG(JTC 1/SC 29/WG 11)在2013年(版本1)、2014年(版本2)、2015年(版本3)和2016年(版本4)中發(fā)布了H.265/HEVC(高效視頻編碼)標(biāo)準(zhǔn)。從那時(shí)起，他們一直在研究對(duì)壓縮能力遠(yuǎn)遠(yuǎn)超過(guò)HEVC標(biāo)準(zhǔn)(包括其擴(kuò)展)的未來(lái)視頻編碼技術(shù)標(biāo)準(zhǔn)化的潛在需求。2017年10月，他們發(fā)出了聯(lián)合呼吁，征集針對(duì)具有超出HEVC(CfP)能力的視頻壓縮的提案。截至2018年2月15日，分別提交了針對(duì)標(biāo)準(zhǔn)動(dòng)態(tài)范圍(SDR)的共22個(gè)CfP響應(yīng)、針對(duì)高動(dòng)態(tài)范圍(HDR)的12個(gè)CfP響應(yīng)和針對(duì)360種視頻類別的12個(gè)CfP響應(yīng)。2018年4月，在122運(yùn)動(dòng)圖象專家組(MPEG)/第十次聯(lián)合視頻探索組-聯(lián)合視頻專家組(JVE)會(huì)議上，對(duì)所有收到的CfP響應(yīng)都進(jìn)行了評(píng)估。通過(guò)仔細(xì)的評(píng)估，JVET正式啟動(dòng)了超過(guò)HEVC的下一代視頻編碼的標(biāo)準(zhǔn)化，即所謂的通用視頻編碼(VVC)。同時(shí)，中國(guó)的音頻視頻編解碼標(biāo)準(zhǔn)(AVS)也在進(jìn)行中。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例涉及一種使用補(bǔ)充增強(qiáng)信息(SEI)消息進(jìn)行視頻后處理的方法和裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)，旨在解決現(xiàn)有的視頻編解碼方法效率不高的問(wèn)題。

根據(jù)本申請(qǐng)的實(shí)施例，提供了一種使用SEI消息進(jìn)行視頻后處理的方法，所述方法包括：

當(dāng)確定為解碼器定義了神經(jīng)網(wǎng)絡(luò)的結(jié)構(gòu)以及與所述神經(jīng)網(wǎng)絡(luò)相關(guān)聯(lián)的一個(gè)或多個(gè)參數(shù)時(shí)，使用一個(gè)或多個(gè)SEI消息請(qǐng)求與所述神經(jīng)網(wǎng)絡(luò)的結(jié)構(gòu)和所述一個(gè)或多個(gè)參數(shù)對(duì)應(yīng)的數(shù)據(jù)；

接收所述請(qǐng)求的結(jié)構(gòu)和參數(shù)數(shù)據(jù)；以及

基于所述接收的結(jié)構(gòu)和參數(shù)數(shù)據(jù)對(duì)視頻數(shù)據(jù)執(zhí)行后處理。

根據(jù)本申請(qǐng)的實(shí)施例，提供了一種使用SEI消息進(jìn)行視頻后處理的裝置，所述裝置包括：

請(qǐng)求模塊，用于當(dāng)確定為解碼器定義了神經(jīng)網(wǎng)絡(luò)的結(jié)構(gòu)以及與所述神經(jīng)網(wǎng)絡(luò)相關(guān)聯(lián)的一個(gè)或多個(gè)參數(shù)時(shí)，使用一個(gè)或多個(gè)SEI消息請(qǐng)求與所述神經(jīng)網(wǎng)絡(luò)的結(jié)構(gòu)和所述一個(gè)或多個(gè)參數(shù)對(duì)應(yīng)的數(shù)據(jù)；

接收模塊，用于接收所述請(qǐng)求的結(jié)構(gòu)和參數(shù)數(shù)據(jù)；以及

執(zhí)行模塊，用于基于所述接收的結(jié)構(gòu)和參數(shù)數(shù)據(jù)對(duì)視頻數(shù)據(jù)執(zhí)行后處理。

根據(jù)本申請(qǐng)的實(shí)施例，提供了一種非易失性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，用于存儲(chǔ)程序指令，當(dāng)所述程序指令被用于編碼/解碼的計(jì)算機(jī)執(zhí)行時(shí)，使得所述計(jì)算機(jī)執(zhí)行所述使用SEI消息進(jìn)行視頻后處理的方法。

根據(jù)本申請(qǐng)的實(shí)施例，提供了一種計(jì)算機(jī)設(shè)備，包括一個(gè)或多個(gè)處理器和一個(gè)或多個(gè)存儲(chǔ)器，所述一個(gè)或多個(gè)存儲(chǔ)器中存儲(chǔ)有至少一條程序指令，所述至少一條程序指令由所述一個(gè)或多個(gè)處理器加載并執(zhí)行，以實(shí)現(xiàn)所述使用SEI消息進(jìn)行視頻后處理的方法。