[發(fā)明專利]行為信息的確定方法、裝置、存儲介質(zhì)及電子裝置

有效

• 申請?zhí)枺?/td>: 202211322667.4
• 申請日: 2022-10-27
• 公開（公告）號: CN115375978B
• 公開（公告）日: 2023-02-03
• 發(fā)明（設(shè)計）人: 李朝光;楊德城;林亦寧
• 申請（專利權(quán)）人: 北京閃馬智建科技有限公司;上海閃馬智能科技有限公司;杭州閃馬智擎科技有限公司
• 主分類號: G06V10/774
• 分類號: G06V10/774;G06V10/764;G06V10/74;G06V20/52
• 代理公司: 北京康信知識產(chǎn)權(quán)代理有限責任公司 11240
• 代理人: 趙靜

1.一種行為信息的確定方法，其特征在于，包括：

確定第一圖像中包括的目標對象的檢測框?qū)?yīng)的第二圖像，其中，所述第一圖像為對第一對象進行拍攝所得到的圖像，所述目標對象為所述第一對象關(guān)聯(lián)的對象；

將第二圖像輸入至目標網(wǎng)絡(luò)模型，確定所述目標對象的屬性信息，其中，所述目標網(wǎng)絡(luò)模型是通過如下方式訓(xùn)練得到的：將訓(xùn)練圖像輸入至初始網(wǎng)絡(luò)模型中包括的第一初始子模型，確定所述訓(xùn)練圖像的第一特征；將所述訓(xùn)練圖像輸入至所述初始網(wǎng)絡(luò)模型中包括的第二初始子模型，確定所述訓(xùn)練圖像的第二特征；基于所述第一特征以及所述第二特征確定所述初始網(wǎng)絡(luò)模型的第一損失值；基于所述第一特征以及所述訓(xùn)練圖像的標簽結(jié)果確定所述初始網(wǎng)絡(luò)模型的第二損失值，基于所述第一損失值以及所述第二損失值確定所述初始網(wǎng)絡(luò)模型的目標損失值，基于所述目標損失值更新所述第一初始子模型的網(wǎng)絡(luò)參數(shù)，得到所述目標網(wǎng)絡(luò)模型，其中，所述第二初始子模型為預(yù)先訓(xùn)練完成的模型；

基于所述屬性信息以及所述第二圖像的數(shù)量確定所述第一對象的行為信息；

基于所述第一特征以及所述第二特征確定所述初始網(wǎng)絡(luò)模型的第一損失值包括：基于所述第一特征確定所述第二圖像的第一空間注意力特征圖；基于所述第二特征確定所述第二圖像的第二空間注意力特征圖；基于所述第一空間注意力特征圖以及所述第二空間注意力特征圖確定所述第一損失值；

基于所述第一特征確定所述第二圖像的第一空間注意力特征圖包括：針對所述第二圖像中包括的每個目標像素點，均執(zhí)行以下操作，確定每個所述目標像素點對應(yīng)的第一空間注意力特征：確定所述第一特征中包括的所述目標像素點在每個通道的第一特征值，確定每個所述第一特征值的絕對值，得到多個第二特征值，確定多個第二特征值的第一平均值，將所述第一平均值確定為所述目標像素點的所述第一空間注意力特征；將每個所述目標像素點的所述第一空間注意力特征構(gòu)成的特征圖確定為所述第一空間注意力特征圖；

基于所述第二特征確定所述第二圖像的第二空間注意力特征圖包括：針對所述第二圖像中包括的每個目標像素點，均執(zhí)行以下操作，確定每個所述目標像素點對應(yīng)的第二空間注意力特征：確定所述第二特征中包括的所述目標像素點在每個通道的第三特征值，確定每個所述第三特征值的絕對值，得到多個第四特征值，確定多個第四特征值的第二平均值，將所述第二平均值確定為所述目標像素點的所述第二空間注意力特征；將每個所述目標像素點的所述第二空間注意力特征構(gòu)成的特征圖確定為所述第二空間注意力特征圖。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，基于所述第一空間注意力特征圖以及所述第二空間注意力特征圖確定所述第一損失值包括：

針對所述第一特征中包括的每個第一子特征均執(zhí)行以下操作：

確定所述第一子特征與所述第二特征中包括的與所述第一子特征對應(yīng)的第二子特征的差值的平方，得到多個平方值；

將所述多個平方值的和確定為所述第一損失值。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，基于所述第一損失值以及所述第二損失值確定所述初始網(wǎng)絡(luò)模型的目標損失值包括：

確定所述第一損失值和所述第二損失值的和值；

將所述和值確定為所述目標損失值。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，確定第一圖像中包括的目標對象的檢測框?qū)?yīng)的第二圖像包括：

利用檢測網(wǎng)絡(luò)模型識別所述第一圖像，確定所述第一圖像中包括的所述目標對象的目標區(qū)域的所述檢測框；

基于所述檢測框從所述第一圖像中確定出所述第二圖像。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，基于所述屬性信息以及所述第二圖像的數(shù)量確定所述第一對象的行為信息包括：

在所述屬性信息中存在滿足預(yù)定條件的目標屬性信息的情況下，和/或所述第二圖像的數(shù)量大于預(yù)定閾值的情況下，確定所述第一對象的行為信息為違章行為。