[發(fā)明專利]基于多個表情動作的交互方法、裝置、介質(zhì)和電子設(shè)備

在審

• 申請?zhí)枺?/td>: 201911102952.3
• 申請日: 2019-11-12
• 公開（公告）號: CN110928410A
• 公開（公告）日: 2020-03-27
• 發(fā)明（設(shè)計）人: 李云飛;張前川
• 申請（專利權(quán)）人: 北京字節(jié)跳動網(wǎng)絡(luò)技術(shù)有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;A63F13/213;A63F13/428
• 代理公司: 北京睿馳通程知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11604
• 代理人: 唐華;張文平

1.一種基于多個表情動作的交互方法，其特征在于，包括：

通過攝像頭獲取用戶的表情圖像，并將所述表情圖像顯示于交互界面,所述交互界面包括顯示用戶頭像的第一區(qū)域和顯示虛擬頭像的第二區(qū)域；

實時監(jiān)測所述表情圖像的動作特性，所述動作特性包括：頭部動作特性、眼部動作特性以及嘴部動作特性；

當(dāng)有至少兩個所述動作特性同時發(fā)生時，觸發(fā)攻擊性標(biāo)識，使得所述攻擊性標(biāo)識以預(yù)置形態(tài)顯示于所述交互界面。

2.根據(jù)權(quán)利要求1所述的交互方法，所述通過攝像頭獲取用戶的表情圖像，并將所述表情圖像顯示于交互界面，包括：

通過攝像頭獲取用戶的真實的表情圖像，并將所述真實的表情圖像實時顯示于所述第一區(qū)域；或，

通過攝像頭獲取用戶的真實的表情圖像，選擇與所述真實的表情圖像匹配的模型頭像，將所述模型頭像實時顯示于所述第一區(qū)域。

3.根據(jù)權(quán)利要求1所述的交互方法，其特征在于，所述實時監(jiān)測所述表情圖像的動作特性，所述動作特性包括：頭部動作特性、眼部動作特性以及嘴部動作特性，包括：

將所述表情圖像劃分為頭部區(qū)域、眼部區(qū)域以及嘴部區(qū)域；

所述頭部區(qū)域、眼部區(qū)域以及嘴部區(qū)域分別包括多個特征區(qū)域；

在每個所述特征區(qū)域，分別選擇至少一個特征點；

通過所述至少一個特征點的位置變化監(jiān)測所述表情圖像的動作特性。

4.根據(jù)權(quán)利要求3所述的交互方法，其特征在于，所述頭部區(qū)域、眼部區(qū)域以及嘴部區(qū)域分別包括多個特征區(qū)域，包括：

頭部區(qū)域的特征區(qū)域包括：耳朵以及鼻子；

嘴部區(qū)域的特征區(qū)域包括：上嘴唇、下嘴唇以及下巴；

眼部區(qū)域的特征區(qū)域包括：眉毛、眼皮以及瞳孔。

5.根據(jù)權(quán)利要求4所述的交互方法，其特征在于，所述通過所述至少一個特征點的位置變化監(jiān)測所述表情圖像的動作特性，包括：

在第一時間t₁，獲取一個所述特征點的第一位置坐標(biāo)信息；在第二時間t₂，獲取同一個所述特征點的第二位置坐標(biāo)信息；其中，所述第二時間t₂與第一時間t₁的間隔Δt在預(yù)設(shè)范圍內(nèi)；

通過所述第一位置坐標(biāo)信息和第二位置坐標(biāo)信息計算所述特征點的移動矢量R；

通過所述至少一個特征點的移動矢量R監(jiān)測所述表情圖像的動作特性。

6.根據(jù)權(quán)利要求5所述的交互方法，其特征在于，所述通過所述至少一個特征點的位置變化監(jiān)測所述表情圖像的動作特性，包括：

獲取所述表情圖像的連續(xù)兩幀圖像；

比較所述連續(xù)兩幀圖像中的所有特征點位置信息；

監(jiān)測各個特征點位置信息是否有變化；

根據(jù)各個特征點位置信息的變化確定所述頭部區(qū)域、眼部區(qū)域和/或嘴部區(qū)域動作特性。

7.根據(jù)權(quán)利要求1所述的交互方法，其特征值在于，所述當(dāng)有至少兩個所述動作特性同時發(fā)生時，觸發(fā)攻擊性標(biāo)識，使得所述攻擊性標(biāo)識以預(yù)置形態(tài)顯示于所述交互界面，包括：

當(dāng)所述頭部區(qū)域、眼部區(qū)域和嘴部區(qū)域任意兩個區(qū)域或三個區(qū)域同時發(fā)生各自的動作特性；

觸發(fā)所述頭部區(qū)域、眼部區(qū)域和嘴部區(qū)域的至少一個攻擊性標(biāo)識，使得所述攻擊性標(biāo)識以預(yù)置形態(tài)顯示于所述交互界面。

8.根據(jù)權(quán)利要求1所述的交互方法，其特征值在于，所述頭部動作特性、眼部動作特性以及嘴部動作特性分別具有各自的攻擊性標(biāo)識，所述攻擊性標(biāo)識包括傷害特征值、速度特征值以及距離特征值；

所述當(dāng)有至少兩個所述動作特性同時發(fā)生時，觸發(fā)攻擊性標(biāo)識，使得所述攻擊性標(biāo)識以預(yù)置形態(tài)顯示于所述交互界面，包括：

當(dāng)所述眼部動作特性和/或嘴部動作特性以及頭部動作特性發(fā)生時，觸發(fā)眼部和/或嘴部攻擊性標(biāo)識，同時觸發(fā)頭部動作特性，使得所述眼部和/或嘴部攻擊性標(biāo)識結(jié)合頭部動作特性以預(yù)置形態(tài)顯示于所述交互界面。