[發(fā)明專利]一種視頻幀預(yù)測方法、裝置及終端設(shè)備在審
| 申請?zhí)枺?/td> | 201911420604.0 | 申請日： | 2019-12-31 |
| 公開（公告）號： | CN111083479A | 公開（公告）日： | 2020-04-28 |
| 發(fā)明（設(shè)計）人： | 李東陽 | 申請（專利權(quán)）人： | 合肥圖鴨信息科技有限公司 |
| 主分類號： | H04N19/137 | 分類號： | H04N19/137;H04N19/139;H04N19/31;H04N19/503;H04N19/91 |
| 代理公司： | 暫無信息 | 代理人： | 暫無信息 |
| 地址： | 211101 江蘇省南京市江寧區(qū)東山街*** | 國省代碼： | 江蘇;32 |
| 權(quán)利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關(guān)鍵詞： | 一種 視頻 預(yù)測 方法 裝置 終端設(shè)備 | ||
1.一種視頻幀預(yù)測方法，其特征在于，包括：
計算當前幀和參考幀之間的光流信息；
將所述光流信息、參考幀和當前幀輸入運動補償網(wǎng)絡(luò)得到重構(gòu)光流和N個分離卷積核，其中N為正整數(shù)；
根據(jù)所述重構(gòu)光流對所述參考幀進行warp操作得到warp預(yù)測圖；
根據(jù)預(yù)先設(shè)定的N個擴張率，將所述N個分離卷積核分別作用在所述warp預(yù)測圖上得到N個分離卷積預(yù)測圖；
將所述N個分離卷積預(yù)測圖輸入融合網(wǎng)絡(luò)進行融合，得到當前幀的預(yù)測幀。
2.如權(quán)利要求1所述的視頻幀預(yù)測方法，其特征在于，所述計算當前幀和參考幀之間的光流信息包括：
計算當前幀圖像的像素與參考幀圖像的像素的空間位置映射關(guān)系，得到光流信息。
3.如權(quán)利要求1所述的視頻幀預(yù)測方法，其特征在于，所述將所述光流信息、參考幀和當前幀輸入運動補償網(wǎng)絡(luò)得到重構(gòu)光流和N個分離卷積核包括：
將所述光流信息、參考幀和當前幀輸入運動補償網(wǎng)絡(luò)得到運動補償特征信息；
對所述運動補償特征信息進行熵編碼和熵解碼后輸入所述運動補償網(wǎng)絡(luò)得到重構(gòu)光流和N個分離卷積核。
4.如權(quán)利要求1所述的視頻幀預(yù)測方法，其特征在于，所述根據(jù)預(yù)先設(shè)定的N個擴張率，將所述N個分離卷積核分別作用在所述warp預(yù)測圖上得到N個分離卷積預(yù)測圖包括：
根據(jù)預(yù)先設(shè)定的N個擴張率，將所述N個分離卷積核分別對所述warp預(yù)測圖進行分離卷積操作后，得到N個分離卷積預(yù)測圖。
5.一種視頻幀預(yù)測裝置，其特征在于，包括：
光流計算模塊，用于計算當前幀和參考幀之間的光流信息；
運動補償模塊，用于將所述光流信息、參考幀和當前幀輸入運動補償網(wǎng)絡(luò)得到重構(gòu)光流和N個分離卷積核，其中N為正整數(shù)；
warp模塊，用于根據(jù)所述重構(gòu)光流對所述參考幀進行warp操作得到warp預(yù)測圖；
分離卷積模塊，用于根據(jù)預(yù)先設(shè)定的N個擴張率，將所述N個分離卷積核分別作用在所述warp預(yù)測圖上得到N個分離卷積預(yù)測圖；
融合模塊，用于將所述N個分離卷積預(yù)測圖輸入融合網(wǎng)絡(luò)進行融合，得到當前幀的預(yù)測幀。
6.如權(quán)利要求5所述的視頻幀預(yù)測裝置，其特征在于，所述光流計算模塊包括：
光流計算單元，用于計算當前幀圖像的像素與參考幀圖像的像素的空間位置映射關(guān)系，得到光流信息。
7.如權(quán)利要求5所述的視頻幀預(yù)測裝置，其特征在于，所述運動補償模塊包括：
輸入單元，用于將所述光流信息、參考幀和當前幀輸入運動補償網(wǎng)絡(luò)得到運動補償特征信息；
輸出單元，用于對所述運動補償特征信息進行熵編碼和熵解碼后輸入所述運動補償網(wǎng)絡(luò)得到重構(gòu)光流和N個分離卷積核。
8.如權(quán)利要求5所述的視頻幀預(yù)測裝置，其特征在于，所述分離卷積模塊包括：
分離卷積單元，用于根據(jù)預(yù)先設(shè)定的N個擴張率，將所述N個分離卷積核分別對所述warp預(yù)測圖進行分離卷積操作后，得到N個分離卷積預(yù)測圖。
9.一種視頻幀預(yù)測終端設(shè)備，包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機程序，其特征在于，所述處理器執(zhí)行所述計算機程序時實現(xiàn)如權(quán)利要求1至4任一項所述方法的步驟。
10.一種計算機可讀存儲介質(zhì)，所述計算機可讀存儲介質(zhì)存儲有計算機程序，其特征在于，所述計算機程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1至4任一項所述方法的步驟。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息，商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于合肥圖鴨信息科技有限公司，未經(jīng)合肥圖鴨信息科技有限公司許可，擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作，請聯(lián)系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201911420604.0/1.html，轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 上一篇：一種阻燃抗菌水性涂料制備方法
- 下一篇：一種針式薄膜電容免焊接工藝
- 圖像編碼裝置、圖像編碼方法、圖像譯碼裝置、圖像譯碼方法、程序以及記錄介質(zhì)
- 圖像編碼裝置、圖像編碼方法、圖像譯碼裝置、圖像譯碼方法
- 圖像編碼裝置、圖像編碼方法、圖像譯碼裝置、圖像譯碼方法
- 基于時間序列預(yù)測模型適用性量化的預(yù)測模型選擇方法
- 圖像編碼裝置、圖像編碼方法、圖像譯碼裝置、圖像譯碼方法
- 分類預(yù)測方法及裝置、預(yù)測模型訓練方法及裝置
- 幀內(nèi)預(yù)測的方法及裝置
- 圖像預(yù)測方法及裝置、電子設(shè)備和存儲介質(zhì)
- 文本預(yù)測方法、裝置以及電子設(shè)備
- 模型融合方法、預(yù)測方法、裝置、設(shè)備及存儲介質(zhì)
