[發(fā)明專利]視頻處理方法、裝置、計(jì)算機(jī)設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202010904742.2
• 申請(qǐng)日: 2020-09-01
• 公開（公告）號(hào): CN111988664B
• 公開（公告）日: 2022-09-20
• 發(fā)明（設(shè)計(jì)）人: 劉春宇
• 申請(qǐng)（專利權(quán)）人: 廣州酷狗計(jì)算機(jī)科技有限公司
• 主分類號(hào): H04N21/44
• 分類號(hào): H04N21/44;H04N21/4402;H04N21/472;G06V20/40
• 代理公司: 北京三高永信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 郭翱杰

1.一種視頻處理方法，其特征在于，所述方法包括：

對(duì)第一視頻數(shù)據(jù)的視頻幀進(jìn)行識(shí)別，得到所述視頻幀所包括對(duì)象的對(duì)象類別和對(duì)象尺寸；

若基于所述對(duì)象尺寸確定出的對(duì)象寬高比，與對(duì)應(yīng)對(duì)象類別的預(yù)設(shè)寬高比不匹配，則基于所述對(duì)象尺寸和所述預(yù)設(shè)寬高比，確定變形信息，所述變形信息用于指示對(duì)所述視頻幀進(jìn)行變形處理時(shí)所采用的變形比例；

根據(jù)所述變形信息，對(duì)所述視頻幀進(jìn)行變形處理，基于變形處理后的視頻幀生成第二視頻數(shù)據(jù)；

所述基于所述對(duì)象尺寸和所述預(yù)設(shè)寬高比，確定變形信息包括：

從所述對(duì)象類別中確定目標(biāo)對(duì)象類別，其中，所述視頻幀中屬于所述目標(biāo)對(duì)象類別的對(duì)象的數(shù)量最多；

以所述預(yù)設(shè)寬高比中的分子為基準(zhǔn)，基于所述對(duì)象寬高比中的分母和所述預(yù)設(shè)寬高比中的分母，確定變形信息。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述以所述預(yù)設(shè)寬高比中的分子為基準(zhǔn)，基于所述對(duì)象寬高比中的分母和所述預(yù)設(shè)寬高比中的分母，確定變形信息包括：

若所述對(duì)象寬高比中的分子和所述預(yù)設(shè)寬高比中的分子不一致，則以所述預(yù)設(shè)寬高比中的分子為基準(zhǔn)，對(duì)所述對(duì)象寬高比進(jìn)行約分處理，得到處理后的對(duì)象寬高比，所述處理后的對(duì)象寬高比中的分子與所述預(yù)設(shè)寬高比中的分子一致；

確定所述處理后的對(duì)象寬高比中的分母的平均值，與所述預(yù)設(shè)寬高比中的分母的差值；

將所述差值與所述預(yù)設(shè)寬高比中的分母的比值，確定為所述變形信息。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述變形信息，對(duì)所述視頻幀進(jìn)行變形處理包括：

若所述對(duì)象寬高比大于所述預(yù)設(shè)寬高比，則根據(jù)所述變形信息，保持所述視頻幀的寬度不變，對(duì)所述視頻幀進(jìn)行拉伸處理；

若所述對(duì)象寬高比小于所述預(yù)設(shè)寬高比，則根據(jù)所述變形信息，保持所述視頻幀的寬度不變，對(duì)所述視頻幀進(jìn)行縮放處理。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述若基于所述對(duì)象尺寸確定出的對(duì)象寬高比，與對(duì)應(yīng)對(duì)象類別的預(yù)設(shè)寬高比不匹配，則基于所述對(duì)象尺寸和所述預(yù)設(shè)寬高比，確定變形信息之前，所述方法還包括：

根據(jù)所述對(duì)象尺寸，確定所述對(duì)象寬高比；

獲取所述視頻幀所包括對(duì)象的對(duì)象類別的預(yù)設(shè)寬高比；

將所述對(duì)象寬高比與對(duì)應(yīng)對(duì)象類別的預(yù)設(shè)寬高比進(jìn)行比較。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)第一視頻數(shù)據(jù)的視頻幀進(jìn)行識(shí)別，得到所述視頻幀所包括對(duì)象的對(duì)象類別和對(duì)象尺寸包括：

將所述視頻幀輸入對(duì)象識(shí)別模型，輸出所述視頻幀所包括對(duì)象的對(duì)象定位框和對(duì)象類別，所述對(duì)象識(shí)別模型用于對(duì)所述視頻幀所包括的對(duì)象和對(duì)應(yīng)的對(duì)象類別進(jìn)行識(shí)別；

根據(jù)所述對(duì)象定位框，確定所述視頻幀所包括對(duì)象的對(duì)象尺寸。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述將所述視頻幀輸入對(duì)象識(shí)別模型，輸出所述視頻幀所包括對(duì)象的對(duì)象定位框和對(duì)象類別包括：

通過所述對(duì)象識(shí)別模型的卷積層，提取所述視頻幀的卷積特征；

通過所述對(duì)象識(shí)別模型的采樣層，提取所述卷積特征的采樣特征；

通過所述對(duì)象識(shí)別模型的分類器，基于所述采樣特征，確定所述視頻幀所包括對(duì)象的對(duì)象定位框以及所屬的對(duì)象類別。

7.一種視頻處理裝置，其特征在于，所述裝置包括：

識(shí)別模塊，用于對(duì)第一視頻數(shù)據(jù)的視頻幀進(jìn)行識(shí)別，得到所述視頻幀所包括對(duì)象的對(duì)象類別和對(duì)象尺寸；

第一確定模塊，用于若基于所述對(duì)象尺寸確定出的對(duì)象寬高比，與對(duì)應(yīng)對(duì)象類別的預(yù)設(shè)寬高比不匹配，則基于所述對(duì)象尺寸和所述預(yù)設(shè)寬高比，確定變形信息，所述變形信息用于指示對(duì)所述視頻幀進(jìn)行變形處理時(shí)所采用的變形比例；

處理模塊，用于根據(jù)所述變形信息，對(duì)所述視頻幀進(jìn)行變形處理；

生成模塊，用于基于變形處理后的視頻幀生成第二視頻數(shù)據(jù)；

所述第一確定模塊，用于從所述對(duì)象類別中確定目標(biāo)對(duì)象類別，其中，所述視頻幀中屬于所述目標(biāo)對(duì)象類別的對(duì)象的數(shù)量最多；以所述預(yù)設(shè)寬高比中的分子為基準(zhǔn)，基于所述對(duì)象寬高比中的分母和所述預(yù)設(shè)寬高比中的分母，確定變形信息。