[發(fā)明專利]一種視頻的壓縮方法

在審

• 申請?zhí)枺?/td>: 202211201356.2
• 申請日: 2022-09-29
• 公開（公告）號(hào): CN115619882A
• 公開（公告）日: 2023-01-17
• 發(fā)明（設(shè)計(jì)）人: 溫力嘉;段一平
• 申請（專利權(quán)）人: 清華大學(xué)
• 主分類號(hào): G06T9/00
• 分類號(hào): G06T9/00;G06T3/40
• 代理公司: 北京潤澤恒知識(shí)產(chǎn)權(quán)代理有限公司 11319
• 代理人: 茍冬梅

1.一種視頻的壓縮方法，其特征在于，所述方法包括：

將視頻輸入視頻壓縮模型，得到所述視頻的每個(gè)視頻幀的OAR基元；

對所述每個(gè)視頻幀的OAR基元進(jìn)行壓縮重建，得到壓縮后視頻；

獲取所述視頻壓縮模型輸出的所述壓縮后視頻。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將視頻輸入視頻壓縮模型，得到所述視頻的每個(gè)視頻幀的OAR基元，包括：

將所述視頻輸入所述視頻壓縮模型，提取所述每個(gè)視頻幀的目標(biāo)屬性基元、目標(biāo)關(guān)系基元和背景向量；

將所述每個(gè)視頻幀的目標(biāo)屬性基元、目標(biāo)關(guān)系基元和背景向量進(jìn)行拼接，得到所述每個(gè)視頻幀的OAR基元。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述提取所述視頻的每個(gè)視頻幀的目標(biāo)屬性基元、目標(biāo)關(guān)系基元和背景向量，包括：

對所述每個(gè)視頻幀進(jìn)行目標(biāo)檢測，得到目標(biāo)屬性幀、目標(biāo)關(guān)系幀和背景圖像幀，所述目標(biāo)屬性幀包括至少一個(gè)目標(biāo)，所述目標(biāo)關(guān)系幀包括至少兩個(gè)目標(biāo)，所述背景圖像幀不包括目標(biāo)；

提取所述目標(biāo)屬性幀的目標(biāo)屬性基元，提取所述目標(biāo)關(guān)系幀的目標(biāo)關(guān)系基元，以及提取所述目標(biāo)屬性幀、所述目標(biāo)關(guān)系幀和所述背景圖像幀中的背景向量；

將不為所述目標(biāo)屬性幀的視頻幀的目標(biāo)屬性基元設(shè)置為0，以及將不為所述目標(biāo)關(guān)系幀的視頻幀的目標(biāo)關(guān)系基元設(shè)置為0；

將所述每個(gè)視頻幀的目標(biāo)屬性基元、目標(biāo)關(guān)系基元和背景向量進(jìn)行拼接，得到所述每個(gè)視頻幀的OAR基元，其中，所述OAR基元中的目標(biāo)屬性基元和/或目標(biāo)關(guān)系基元為0或非0。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述提取所述目標(biāo)屬性幀的目標(biāo)屬性基元，包括：

將所述目標(biāo)屬性幀輸入目標(biāo)屬性基元提取模塊，所述目標(biāo)屬性基元提取模塊對所述目標(biāo)屬性幀進(jìn)行壓縮解碼，得到初步屬性特征向量；

對所述初步屬性特征向量進(jìn)行編碼，得到所述目標(biāo)屬性幀的均值向量和方差向量；

根據(jù)所述目標(biāo)屬性幀的均值向量和方差向量，構(gòu)建所述目標(biāo)屬性幀的隱向量分布；

對所述目標(biāo)屬性幀的隱向量分布進(jìn)行解碼，得到所述目標(biāo)屬性幀的目標(biāo)屬性基元。

5.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述提取所述目標(biāo)關(guān)系幀的目標(biāo)關(guān)系基元，包括：

將所述目標(biāo)關(guān)系幀輸入目標(biāo)關(guān)系基元提取模塊，所述目標(biāo)關(guān)系基元提取模塊對所述目標(biāo)關(guān)系幀進(jìn)行壓縮解碼，得到初步關(guān)系特征向量；

對所述初步關(guān)系特征向量進(jìn)行編碼，得到所述目標(biāo)關(guān)系幀的均值向量和方差向量；

根據(jù)所所述目標(biāo)關(guān)系幀的均值向量和方差向量，構(gòu)建所述目標(biāo)關(guān)系幀的隱向量分布；

對所述目標(biāo)關(guān)系幀的隱向量分布進(jìn)行解碼，得到所述目標(biāo)關(guān)系基元。

6.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述提取所述目標(biāo)屬性幀、所述目標(biāo)關(guān)系幀和所述背景圖像幀中的背景向量，包括：

檢測所述目標(biāo)屬性幀和所述目標(biāo)關(guān)系幀中的目標(biāo)所在位置；

基于所述目標(biāo)所在位置，生成所述目標(biāo)屬性幀和所述目標(biāo)關(guān)系幀各自的目標(biāo)位置掩膜；

將所述目標(biāo)屬性幀和所述目標(biāo)屬性幀的目標(biāo)位置掩膜輸入背景提取模塊，得到所述目標(biāo)屬性幀的背景向量；

將所述目標(biāo)關(guān)系幀和所述目標(biāo)關(guān)系幀的目標(biāo)位置掩膜輸入所述背景提取模塊，得到所述目標(biāo)關(guān)系幀的背景向量；

將所述背景圖像幀輸入所述背景提取模塊，得到所述背景圖像幀的背景向量。