[發(fā)明專利]基于多個表情動作的交互方法、裝置、介質(zhì)和電子設(shè)備

在審

• 申請?zhí)枺?/td>: 201911102952.3
• 申請日: 2019-11-12
• 公開（公告）號: CN110928410A
• 公開（公告）日: 2020-03-27
• 發(fā)明（設(shè)計）人: 李云飛;張前川
• 申請（專利權(quán)）人: 北京字節(jié)跳動網(wǎng)絡(luò)技術(shù)有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;A63F13/213;A63F13/428
• 代理公司: 北京睿馳通程知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11604
• 代理人: 唐華;張文平

本公開提供了一種基于多個表情動作的交互方法、裝置、介質(zhì)和電子設(shè)備，該方法包括：通過攝像頭獲取用戶的表情圖像，并將所述表情圖像顯示于交互界面；實時監(jiān)測所述表情圖像的動作特性，所述動作特性包括：頭部動作特性、眼部動作特性以及嘴部動作特性；當有至少兩個所述動作特性同時發(fā)生時，觸發(fā)攻擊性標識，使得所述攻擊性標識以預(yù)置形態(tài)顯示于所述交互界面。本方法一方面提供了另外的交互方式，通過表情動作就可以控制界面終端中的人物角色或控制多個人物角色之間的交互，解放了手勢的控制，使得控制方式更加簡單、便捷。另一方面，通過將用戶的真實頭像映射到交互界面，使得用戶能夠更加深入的參與到角色交互過程中，增加了用戶面部交互的樂趣。

技術(shù)領(lǐng)域

本公開涉及計算機技術(shù)領(lǐng)域，具體而言，涉及一種基于多個表情動作的交互方法、裝置、介質(zhì)和電子設(shè)備。

背景技術(shù)

隨時移動互聯(lián)網(wǎng)的發(fā)展，對于交互的終端也漸漸從PC端轉(zhuǎn)移到移動端，例如，對于手游的開發(fā)、操控方式，多還是需要通過物理觸控的方式進行交互控制，而對于一些場景，通過橫屏狀態(tài)下，雙手操控的方式顯然顯得過于復(fù)雜，特別是對于一些小程序的隨時隨地娛樂，復(fù)雜的操控特性就顯得更加笨拙，對于屏幕較小的手機更加不便于操作。

公開內(nèi)容

本公開的目的在于提供一種基于多個表情動作的交互方法、裝置、介質(zhì)和電子設(shè)備，能夠解決上述提到的至少一個技術(shù)問題。具體方案如下：

根據(jù)本公開的具體實施方式，第一方面，本公開提供一種基于多個表情動作的交互方法，包括：

通過攝像頭獲取用戶的表情圖像，并將所述表情圖像顯示于交互界面，所述交互界面包括顯示用戶頭像的第一區(qū)域和顯示虛擬頭像的第二區(qū)域；

實時監(jiān)測所述表情圖像的動作特性，所述動作特性包括：頭部動作特性、眼部動作特性以及嘴部動作特性；

當有至少兩個所述動作特性同時發(fā)生時，觸發(fā)攻擊性標識，使得所述攻擊性標識以預(yù)置形態(tài)顯示于所述交互界面。

可選的，所述通過攝像頭獲取用戶的表情圖像，并將所述表情圖像顯示于交互界面，包括：

通過攝像頭獲取用戶的真實的表情圖像，并將所述真實的表情圖像實時顯示于交互界面；或，

通過攝像頭獲取用戶的真實的表情圖像，選擇與所述真實的表情圖像匹配的模型頭像，將所述模型頭像實時顯示于交互界面。

可選的，所述實時監(jiān)測所述表情圖像的動作特性，所述動作特性包括：頭部動作特性、眼部動作特性以及嘴部動作特性，包括：

將所述表情圖像劃分為頭部區(qū)域、眼部區(qū)域以及嘴部區(qū)域；

所述頭部區(qū)域、眼部區(qū)域以及嘴部區(qū)域分布包括多個特征區(qū)域；

在每個所述特征區(qū)域，選擇至少一個特征點；

通過所述至少一個特征點的位置變化監(jiān)測所述表情圖像的動作特性。

可選的，所述頭部區(qū)域、眼部區(qū)域以及嘴部區(qū)域分布包括多個特征區(qū)域，包括：

頭部區(qū)域的特征區(qū)域包括：耳朵以及鼻子；

嘴部區(qū)域的特征區(qū)域包括：上嘴唇、下嘴唇以及下巴；

眼部區(qū)域的特征區(qū)域包括：眉毛、眼皮以及瞳孔。

可選的，所述通過所述位置信息的變化確定所述至少一個特征點的移動矢量R，包括：

在第一時間t₁，獲取一個所述特征點的第一位置坐標信息；

在第二時間t₂，獲取同一個所述特征點的第二位置坐標信息；