[發明專利]說話對象的確定方法、裝置、電子設備及存儲介質

在審

• 申請號: 202110167298.5
• 申請日: 2021-02-05
• 公開（公告）號: CN112949418A
• 公開（公告）日: 2021-06-11
• 發明（設計）人: 黃冠文;程駿;龐建新;譚歡
• 申請（專利權）人: 深圳市優必選科技股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 深圳中一聯合知識產權代理有限公司 44414
• 代理人: 張瑞志

本申請適用于機器人技術領域，提供了說話對象的確定方法、裝置、電子設備及存儲介質。說話對象的確定方法包括：獲取機器人拍攝得到的初始圖像中的人臉圖像，確定每個人臉圖像的嘴唇遮擋信息和嘴唇變化信息，一個嘴唇變化信息為：一個人臉圖像中的嘴唇相對于參考圖像中的嘴唇的變化信息，將嘴唇遮擋信息指示嘴唇是未被遮擋，且嘴唇變化信息滿足預設變化條件的人臉圖像對應的用戶作為機器人的說話對象。由于機器人拍攝得到的初始圖像是機器人視角內的用戶的圖像，根據每個人臉圖像的嘴唇遮擋信息和嘴唇變化信息可以確定出機器人視角內正在說話的用戶，從而確定出機器人的說話對象，進而實現與說話對象有效交互，提高用戶體驗。

技術領域

本申請屬于機器人技術領域，尤其涉及說話對象的確定方法、裝置、電子設備及存儲介質。

背景技術

機器人一般通過語音識別實現與用戶的交互，當機器人同時面對多個用戶時，僅僅依靠接收到的語音無法識別出與機器人交互的對象，即無法確定機器人的說話對象，從而無法實現與說話對象的有效交互，影響用戶體驗。

發明內容

有鑒于此，本申請實施例提供了說話對象的確定方法、裝置、電子設備及存儲介質，可以確定出機器人的說話對象，從而實現與的說話對象有效交互，提高用戶體驗。

本申請實施例的第一方面提供了一種說話對象的確定方法，包括：

獲取機器人拍攝得到的初始圖像中的人臉圖像；

確定每個所述人臉圖像的嘴唇遮擋信息和嘴唇變化信息，一個所述嘴唇變化信息為：一個人臉圖像中的嘴唇相對于參考圖像中的嘴唇的變化信息，一個人臉圖像對應一個用戶；

將所述嘴唇遮擋信息指示嘴唇未被遮擋，且所述嘴唇變化信息滿足預設變化條件的人臉圖像對應的用戶作為所述機器人的說話對象。

在一種可能的實現方式中，所述確定每個所述人臉圖像的嘴唇變化信息，包括：

將所述參考圖像中的上下嘴唇間的距離作為第一距離，將所述人臉圖像中的上下嘴唇間的距離作為第二距離；

根據所述第一距離與所述第二距離的差值確定對應人臉圖像的嘴唇變化信息。

在一種可能的實現方式中，一個用戶對應一個參考圖像，在所述確定每個所述人臉圖像的嘴唇變化信息之后，所述說話對象的確定方法還包括：

若所述人臉圖像的嘴唇變化信息滿足所述預設變化條件，將所述人臉圖像中的嘴唇圖像作為對應用戶的更新后的參考圖像，所述更新后的參考圖像用于確定目標圖像中對應用戶的人臉圖像的嘴唇變化信息，所述目標圖像為在初始圖像之后所述機器人拍攝得到的圖像。

在一種可能的實現方式中，在所述將所述人臉圖像中的上下嘴唇間的距離作為第二距離之前，所述說話對象的確定方法還包括：

根據預設算法確定所述人臉圖像上的特征點，所述特征點包括分布于所述嘴唇上的特征點；

根據所述分布于所述嘴唇上的特征點計算所述人臉圖像中的上下嘴唇間的距離。

在一種可能的實現方式中，所述確定每個所述人臉圖像的嘴唇遮擋信息，包括：

根據所述分布于所述嘴唇上的特征點確定每個所述人臉圖像中的嘴唇所在的位置，根據每個所述嘴唇所在的位置分別從對應的所述人臉圖像中提取嘴唇圖像；

根據每個所述嘴唇圖像分別確定每個所述人臉圖像的嘴唇遮擋信息。

在一種可能的實現方式中，在所述將所述嘴唇遮擋信息指示嘴唇未被遮擋，且所述嘴唇變化信息滿足預設變化條件的人臉圖像對應的用戶作為所述機器人的說話對象之后，所述說話對象的確定方法還包括：

確定所述說話對象所在的位置，根據所述說話對象所在的位置控制所述機器人的動作。