[發明專利]一種社交關系識別方法、裝置、電子設備及存儲介質

在審

• 申請號: 202011617638.1
• 申請日: 2020-12-30
• 公開（公告）號: CN112633224A
• 公開（公告）日: 2021-04-09
• 發明（設計）人: 余意;邢玲
• 申請（專利權）人: 深圳云天勵飛技術股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/32;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 深圳驛航知識產權代理事務所(普通合伙) 44605
• 代理人: 楊倫

1.一種社交關系識別方法，其特征在于，包括以下步驟：

獲取待識別圖像，所述待識別圖像包括第一目標人員與第二目標人員；

對所述待識別圖像進行關鍵點信息提取，提取所述第一目標人員的第一人體關鍵點信息，提取所述第二目標人員的第二人體關鍵點信息，所述第一人體關鍵點信息與所述第二人體關鍵點信息為人體關節關鍵點信息；

根據所述第一人體關鍵點信息與所述第二人體關鍵點信息，分別構建所述第一目標人員與所述第二目標人員之間的關鍵點圖數據和骨架圖數據；

通過預設的第一圖卷積模型，提取所述關鍵點圖數據的關鍵點交互特征，以及通過預設的第二圖卷積模型，提取所述骨架圖數據的骨架交互特征；

將所述關鍵點交互特征與所述骨架交互特征進行融合并分類，得到所述第一目標人員與所述第二目標人員的社交關系。

2.如權利要求1所述的一種社交關系識別方法，其特征在于，所述根據所述第一人體關鍵點信息與所述第二人體關鍵點信息，構建所述第一目標人員與所述第二目標人員之間的關鍵點圖數據，包括：

計算第一人體關鍵點信息與第二人體關鍵點信息的特征矩陣，將所述特征矩陣作為所述第一目標人員與所述第二目標人員之間的所述關鍵點圖數據。

3.如權利要求2所述的一種社交關系識別方法，其特征在于，所述根據所述第一人體關鍵點信息與所述第二人體關鍵點信息，構建所述第一目標人員與所述第二目標人員之間的骨架圖數據，包括：

根據所述第一人體關鍵點信息與所述第二人體關鍵點信息，確定所述第一目標人員的骨架以及所述第二目標人員的骨架；

將所述第一目標人員的骨架兩端的中心點作為第一骨架點，得到所述第一目標人員的第一骨架點信息，以及將所述第二目標人員的骨架兩端的中心點作為第二骨架點，得到所述第二目標人員的第二骨架點信息；

計算所述第一人體骨架點信息與所述第二人體骨架點信息的特征矩陣，將所述特征矩陣作為所述第一目標人員與所述第二目標人員之間的所述骨架圖數據。

4.如權利要求3所述的一種社交關系識別方法，其特征在于，預設的所述第一圖卷積模型與所述第二圖卷積模型基于自適應圖卷積網絡構建得到，所述自適應圖卷積網絡包括全局鄰接矩陣、個體鄰接矩陣以及參數矩陣。

5.如權利要求4所述的一種社交關系識別方法，其特征在于，所述參數矩陣包括第一參數矩陣與第二參數矩陣，所述通過預設的第一圖卷積模型，提取所述關鍵點圖數據的關鍵點交互特征，以及通過預設的第二圖卷積模型，提取所述骨架圖數據的骨架交互特征，包括：

對所述關鍵點圖數據進行卷積操作，使得所述關鍵點圖數據中的多個關鍵點的特征映射到同一個第一特征空間；

在所述第一特征空間中，遍歷計算任意兩個關鍵點的相似度，并對計算得到的所有關鍵點的相似度進行歸一化后得到第一個體鄰接矩陣；

根據所述關鍵點圖數據、第一全局鄰接矩陣、所述第一個體鄰接矩陣以及所述第一參數矩陣，計算得到所述關鍵點圖數據的關鍵點交互特征；

所述通過預設的第二圖卷積模型，提取所述骨架圖數據的骨架交互特征，包括：

對所述骨架圖數據進行卷積操作，使得不同骨架點的特征映射到同一個第二特征空間；

在所述第二特征空間中，遍歷計算任意兩個骨架點的相似度，對計算得到的所有骨架點的相似度進行歸一化后得到第二個體鄰接矩陣；

根據所述骨架圖數據、第二全局鄰接矩陣、所述第二個體鄰接矩陣以及所述第二參數矩陣，計算得到所述骨架圖數據的骨架交互特征。