[發明專利]基于人群交互智能圖像采集與互動方法、系統、終端以及介質

有效

• 申請號: 202011015629.5
• 申請日: 2020-09-24
• 公開（公告）號: CN112200023B
• 公開（公告）日: 2023-03-28
• 發明（設計）人: 趙宇飛;楊金鑫;曲晨;楊文志;梁龍飛
• 申請（專利權）人: 上海新氦類腦智能科技有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V20/52;H04N23/611;H04N5/262
• 代理公司: 上海光華專利事務所(普通合伙) 31219
• 代理人: 倪靜

1.一種基于人群交互智能圖像采集與互動方法，其特征在于，包括：

采集當前場景的圖像；

對所述圖像進行人臉識別，獲得所述圖像中同時出現的識別人物的數量以及各識別人物的人臉識別信息并進行儲存；

當判斷所述識別人物的數量為至少兩個時，根據儲存的各識別人物的人臉識別信息獲得符合交互條件的兩個識別人物并將其作為一對交互人物；

對所述交互人物之間的互動圖像進行自動近景采集并進行人物角度識別，以對所述互動圖像進行美化和與所述交互人物進行互動；

其中，所述對所述交互人物之間的互動圖像進行自動近景采集并進行人物角度識別，以對所述互動圖像進行美化和與所述交互人物進行互動的方式包括：

對所述交互人物之間的互動圖像進行自動近景采集；

并對所述互動圖像中的交互人物的人臉角度進行實時追蹤，并判斷所述交互人物的親密度；

根據所述交互人物的親密度，對所述互動圖像進行美化和與所述交互人物進行與當前場景環境相關的互動。

2.根據權利要求1中所述的基于人群交互智能圖像采集與互動方法，其特征在于，所述對所述圖像進行人臉識別，獲得所述圖像中同時出現的識別人物的數量以及各識別人物的人臉識別信息并進行儲存的方式包括：

基于人臉識別算法，對所述圖像進行人臉識別，獲得在所述圖像中同時出現的識別人物的數量以及各識別人物的人臉矩形框；

在每個臉矩形框中識別各識別人物的人臉識別信息，并進行儲存；

其中，所述人臉識別信息包括：人臉矩形框的位置信息、性別信息以及面部特征向量信息中的一種或多種。

3.根據權利要求1中所述的基于人群交互智能圖像采集與互動方法，其特征在于，所述當判斷所述識別人物的數量為至少兩個時，根據儲存的各識別人物的人臉識別信息獲得符合交互條件的兩個識別人物并將其作為一對交互人物的方式包括；

當判斷所述識別人物的數量為至少兩個時，根據各識別人物的人臉矩形框的位置信息和/或性別信息獲得符合性別交互條件和/或絕對距離條件的兩個識別人物并將其作為一對交互人物；

其中，

所述性別交互條件包括：所述交互人物的性別為異性或同性；

所述絕對距離條件包括：所述交互人物之間的絕對距離為最近。

4.根據權利要求1中所述的基于人群交互智能圖像采集與互動方法，其特征在于，所述親密度與所述交互之間的親密舉動相關；其中，所述親密舉動包括：親吻、擁抱、對望、頭部貼近中的一種或多種。

5.根據權利要求1中所述的基于人群交互智能圖像采集與互動方法，其特征在于，所述與所述交互人物進行互動的方式包括：語音互動、音樂互動以及圖像互動中的一種或多種。

6.一種基于人群交互智能圖像采集與互動系統，其特征在于，所述系統包括：

采集模塊，用于采集當前場景的圖像；

人臉識別模塊，連接所述采集模塊，用于對所述圖像進行人臉識別，獲得所述圖像中同時出現的識別人物的數量以及各識別人物的人臉識別信息并進行儲存；

交互人物確定模塊，連接所述人臉識別模塊，用于當判斷所述識別人物的數量為至少兩個時，根據儲存的各識別人物的人臉識別信息獲得符合交互條件的兩個識別人物并將其作為一對交互人物；

交互圖像采集與互動模塊，連接所述交互人物確定模塊，用于對所述交互人物之間的互動圖像進行自動近景采集并進行人物角度識別，以對所述互動圖像進行美化和與所述交互人物進行互動；

其中，所述對所述交互人物之間的互動圖像進行自動近景采集并進行人物角度識別，以對所述互動圖像進行美化和與所述交互人物進行互動的方式包括：

對所述交互人物之間的互動圖像進行自動近景采集；

并對所述互動圖像中的交互人物的人臉角度進行實時追蹤，并判斷所述交互人物的親密度；

根據所述交互人物的親密度，對所述互動圖像進行美化和與所述交互人物進行與當前場景環境相關的互動。