[發(fā)明專利]用于擁堵識別的視頻處理方法、裝置與電子設(shè)備

在審

• 申請?zhí)枺?/td>: 202110435032.4
• 申請日: 2021-04-22
• 公開（公告）號: CN113111822A
• 公開（公告）日: 2021-07-13
• 發(fā)明（設(shè)計(jì)）人: 黃澤元
• 申請（專利權(quán)）人: 深圳集智數(shù)字科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06K9/62
• 代理公司: 北京律智知識產(chǎn)權(quán)代理有限公司 11438
• 代理人: 孫寶海;袁禮君

1.一種用于擁堵識別的視頻處理方法，其特征在于，包括：

獲取待預(yù)測位置在待預(yù)測時(shí)間段內(nèi)的待預(yù)測視頻；

分別提取所述待預(yù)測視頻的目標(biāo)多尺度時(shí)間特征信息和目標(biāo)多尺度空間特征信息；

融合所述目標(biāo)多尺度時(shí)間特征信息和所述目標(biāo)多尺度空間特征信息，獲得初階時(shí)空編碼特征；

對所述初階時(shí)空編碼特征進(jìn)行時(shí)間特征和空間特征的進(jìn)階融合處理，以獲得所述待預(yù)測視頻的進(jìn)階時(shí)空編碼特征；

對所述進(jìn)階時(shí)空編碼特征進(jìn)行解碼處理，以確定至少一個(gè)待識別對象在所述待預(yù)測視頻中的位置信息；

根據(jù)所述至少一個(gè)待識別對象在所述待預(yù)測視頻中的位置信息，確定所述待預(yù)測位置在所述待預(yù)測時(shí)間段的擁堵狀態(tài)。

2.根據(jù)權(quán)利要求1所述方法，其特征在于，分別提取所述待預(yù)測視頻的目標(biāo)多尺度時(shí)間特征信息和目標(biāo)多尺度空間特征信息，包括：

利用第一時(shí)間支路提取所述待預(yù)測視頻的所述目標(biāo)多尺度時(shí)間特征信息，所述第一時(shí)間支路包括至少兩個(gè)并列分布的時(shí)間信息提取卷積結(jié)構(gòu)；

利用第一空間支路提取所述待預(yù)測視頻的所述目標(biāo)多尺度空間特征信息，所述第一空間支路包括至少兩個(gè)并列分布的空間信息提取卷積結(jié)構(gòu)。

3.根據(jù)權(quán)利要求1所述方法，其特征在于，分別提取所述待預(yù)測視頻的目標(biāo)多尺度時(shí)間特征信息和目標(biāo)多尺度空間特征信息，包括：

利用第一時(shí)間支路提取所述待預(yù)測視頻的初始多尺度時(shí)間特征信息，所述第一時(shí)間支路包括至少兩個(gè)并列分布的時(shí)間信息提取卷積結(jié)構(gòu)；

利用第一空間支路提取所述待預(yù)測視頻的初始多尺度空間特征信息，所述第一空間支路包括至少兩個(gè)并列分布的空間信息提取卷積結(jié)構(gòu)；

融合所述初始多尺度時(shí)間特征信息和所述初始多尺度空間特征信息，獲得初始時(shí)空融合特征；

利用第二時(shí)間支路處理所述初始時(shí)空融合特征以獲得所述目標(biāo)多尺度時(shí)間特征信息，所述第二時(shí)間支路包括少兩個(gè)并列分布的時(shí)間信息提取卷積結(jié)構(gòu)；

利用第二空間支路處理所述初始時(shí)空融合特征以獲得所述目標(biāo)多尺度空間特征信息，所述第二時(shí)間支路包括少兩個(gè)并列分布的空間信息提取卷積結(jié)構(gòu)。

4.根據(jù)權(quán)利要求1所述方法，其特征在于，對所述初階時(shí)空編碼特征進(jìn)行時(shí)間特征和空間特征的進(jìn)階融合，以獲得所述待預(yù)測視頻的進(jìn)階時(shí)空編碼特征，包括：

對所述初階時(shí)空編碼特征分別進(jìn)行空間編碼和時(shí)間編碼，獲得所述初階時(shí)空編碼特征的空間特征矩陣和時(shí)間特征矩陣；

對所述空間特征矩陣和所述時(shí)間特征矩陣進(jìn)行交互，獲得所述進(jìn)階時(shí)空編碼特征。

5.根據(jù)權(quán)利要求4所述方法，其特征在于，對所述初階時(shí)空編碼特征分別進(jìn)行空間編碼和時(shí)間編碼，獲得所述初階時(shí)空編碼特征的空間特征矩陣和時(shí)間特征矩陣，包括：

獲取訓(xùn)練完成的時(shí)間參數(shù)查詢矩陣、空間參數(shù)查詢矩陣、時(shí)間參數(shù)鍵矩陣和空間參數(shù)鍵矩陣；

通過所述時(shí)間參數(shù)查詢矩陣對所述初階時(shí)空編碼特征進(jìn)行時(shí)間編碼處理，獲得目標(biāo)時(shí)間特征查詢矩陣；

通過所述空間參數(shù)查詢矩陣對所述初階時(shí)空編碼特征進(jìn)行空間編碼處理，獲得目標(biāo)空間特征查詢矩陣；

通過所述時(shí)間參數(shù)鍵矩陣對所述初階時(shí)空編碼特征進(jìn)行時(shí)間編碼處理，獲得目標(biāo)時(shí)間特征鍵矩陣，以便根據(jù)所述目標(biāo)時(shí)間特征查詢矩陣和所述目標(biāo)時(shí)間特征鍵矩陣確定所述時(shí)間特征矩陣；

通過所述空間參數(shù)鍵矩陣對所述初階時(shí)空編碼特征進(jìn)行空間編碼處理，獲得目標(biāo)空間特征鍵矩陣，以便根據(jù)所述目標(biāo)空間特征查詢矩陣和所述目標(biāo)空間特征鍵矩陣確定所述空間特征矩陣。