[發明專利]一種基于社交照片的人物關系可視分析方法

在審

• 申請號: 202010169065.4
• 申請日: 2020-03-12
• 公開（公告）號: CN111506825A
• 公開（公告）日: 2020-08-07
• 發明（設計）人: 黃可妤;陳樟樟;陳佳舟;秦緒佳;汪雨薇
• 申請（專利權）人: 浙江工業大學
• 主分類號: G06F16/9536
• 分類號: G06F16/9536;G06Q50/00;G06K9/00;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 杭州天正專利事務所有限公司 33201
• 代理人: 王兵;黃美娟

1.基于社交照片的人物關系可視分析方法，包括以下步驟：

步驟1、使用卷積神經網絡(CNN)人臉檢測模型檢測照片中待識別的人臉區域；

步驟2、使用深度殘差網絡(ResNet)的人臉識別模型獲取128維的人臉特征數據，并將獲取的人臉特征數據與數據庫中存儲的特征模板進行匹配，通過比較閾值得到匹配后的結果；

步驟3、從數據庫中獲取識別對象的關系數據，構建社交關系網絡；

步驟4、通過力導引布局的可視化方式展現社交關系網絡。

2.如權利要求1所述的基于社交照片的人物關系可視分析方法，其特征在于：所述步驟1中，卷積神經網絡(CNN)人臉檢測模型由第三方人臉檢測Dlib庫提供，通過cnn_face_detection_model_v1檢測算子檢測照片中待識別的人臉區域。

3.如權利要求1所述的基于社交照片的人物關系可視分析方法，其特征在于：步驟2中，通過使用Dlib庫中提供的ResNet模型的接口，此接口返回一個128維的人臉特征向量；數據庫中存儲的特征模板由根據人臉檢測模型和人臉識別模型得到的已知人臉相片的特征向量組成的；在獲取特征向量之后使用歐式距離和已知的人臉特征向量進行匹配，小于閾值即為識別結果。

4.如權利要求1所述的基于社交照片的人物關系可視分析方法，其特征在于：步驟3中，已知人臉的關系數據由百度百科、微博、知乎等社交媒體獲得，關系數據涉及親屬關系、師生關系、敵對關系等社交關系，同時記錄已知人臉的興趣愛好；分別將識別對象的關系數據從數據庫中提取，檢索社交關系中是否存在與其他識別對象的直接關系，若存在則添加到社交關系網絡中，同時記錄對象的興趣愛好；在所有識別對象的關系數據中，判斷識別對象間是否存在共同認識的對象或共同的興趣愛好，若存在則添加到社交關系網絡中。

5.如權利要求1所述的基于社交照片的人物關系可視分析方法，其特征在于：所述步驟4中，通過節點鏈的力導引方式展現，識別對象為視圖的中心節點，以圓形的識別對象的頭像表示，對象間的直接關系由節點間的邊表示，并在邊上標記對象間的具體關系；若對象間存在共同認識的人物，以實心小圓表示該對象，并用邊連接該對象與識別對象，標記具體關系；若對象間存在共同的興趣愛好，則通過方形表示興趣愛好，并連接識別對象。