[發明專利]基于人臉檢測的信息交互方法、裝置、設備及存儲介質

在審

• 申請號: 202110547862.6
• 申請日: 2021-05-19
• 公開（公告）號: CN115460460A
• 公開（公告）日: 2022-12-09
• 發明（設計）人: 羅飛;周詩文
• 申請（專利權）人: 北京字跳網絡技術有限公司
• 主分類號: H04N21/4402
• 分類號: H04N21/4402;H04N21/488;H04N21/431;H04N21/41;G06V40/16;G06V20/40
• 代理公司: 上海光柵知識產權代理有限公司 31340
• 代理人: 關浩;馬雯雯

1.一種基于人臉檢測的信息交互方法，其特征在于，應用于第一終端設備，所述方法包括：

獲取用戶面部圖像，所述用戶面部圖像為所述第一終端設備播放在線視頻時采集到的用戶面部圖像；

對所述用戶面部圖像進行特征識別，確定專注度信息，其中，所述專注度信息表征用戶通過所述第一終端設備觀看所述在線視頻的的過程中，所述用戶注視所述在線視頻時長占全部時長的比例；

根據所述專注度信息，向第二終端設備發送提示信息，所述提示信息用于指示所述第二終端設備顯示所述專注度信息。

2.根據權利要求1所述的方法，其特征在于，獲取用戶面部圖像，包括：

采集所述用戶的多幀面部圖像；

根據所述用戶面部圖像，確定專注度信息，包括：

對所述多幀面部圖像中的每一幀面部圖像進行面部特征識別，確定所述多幀面部圖像中的注視圖像的幀數，所述注視圖像為所述多幀面部圖像中表征所述用戶注視所述在線視頻的圖像；

根據所述注視圖像的幀數與所述多幀面部圖像的幀數之間的比值，確定所述專注度信息。

3.根據權利要求2所述的方法，其特征在于，對所述多幀面部圖像中的每一幀面部圖像進行面部特征識別，確定所述多幀面部圖像中的注視圖像的幀數，包括：

對所述多幀面部圖像分別進行圖像識別，確定每一幀所述面部圖像對應的面部屬性信息，所述面部屬性信息用于表征所述面部圖像所呈現的用戶面部的空間角度；

根據每一幀所述面部圖像對應的面部屬性信息，確定各所述面部圖像是否為所述注視圖像，并統計所述注視圖像的幀數。

4.根據權利要求3所述的方法，其特征在于，所述面部屬性信息包括用戶面部的俯仰角和用戶面部的偏航角，根據每一幀所述面部圖像對應的面部屬性信息，確定各所述面部圖像是否為所述注視圖像，包括：

若所述面部圖像對應的用戶面部的俯仰角位于第一角度區間，且所述面部圖像對應的用戶面部的偏航角位于第二角度區間，則確定所述面部圖像為注視圖像。

5.根據權利要求1-4任一項所述的方法，其特征在于，所述提示信息中包括所述第一終端設備的標識信息和對應的專注度信息，根據所述專注度信息，向所述第二終端設備發送提示信息，包括：

若所述專注度信息小于第一專注度閾值，則向所述第二終端設備發送所述標識信息和與所述標識信息對應的專注度信息。

6.根據權利要求1-4任一項所述的方法，其特征在于，所述方法還包括：

若所述專注度信息小于第一專注度閾值，則控制所述第一終端設備顯示提醒信息，并將狀態標識設置為第一狀態；

若所述專注度信息大于第一專注度閾值，則將所述狀態標識設置為第二狀態；

根據所述專注度信息，向第二終端設備發送對應的提示信息，包括：

若所述專注度信息小于第一專注度閾值，且所述狀態標識為第一狀態，則向第二終端設備發送對應的提示信息。

7.根據權利要求1-4任一項所述的方法，其特征在于，所述用戶面部圖像包括多幀面部圖像；所述方法還包括：

根據所述多幀面部圖像，確定至少兩個不同的時間區間對應的專注度信息；

統計各所述時間區間對應的專注度信息，生成專注度統計信息，所述專注度統計信息用于表征所述專注度信息在不同時間區間的分布情況；

向第二終端設備發送所述專注度統計信息。

8.一種基于人臉檢測的信息交互方法，其特征在于，應用于第二終端設備，所述方法包括：

錄制并發送在線視頻；

接收第一終端設備發送的提示信息，所述提示信息用于指示所述第二終端設備顯示專注度信息，所述專注度信息表征用戶通過所述第一終端設備觀看所述在線視頻的過程中，所述用戶注視所述在線視頻時長占全部時長的比例；

根據所述提示信息，在錄制所述在線視頻的同時，顯示所述專注度信息。