[發明專利]一種圖像互動方法及互動裝置

有效

• 申請號: 201710060919.3
• 申請日: 2017-01-25
• 公開（公告）號: CN106919906B
• 公開（公告）日: 2021-04-20
• 發明（設計）人: 雷宇;付一洲;李曉帆;李偉棟;王玉坤;金宇林;伏英娜
• 申請（專利權）人: 邁吉客科技（北京）有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06T13/80
• 代理公司: 北京布瑞知識產權代理有限公司 11505
• 代理人: 孟潭

1.一種圖像互動方法，包括：

第一部分：建立照片中臉部的五官關鍵點位與控制人的初始面部的五官初始關鍵部位的映射聯系；

第二部分：

步驟一：捕捉控制人的后續面部，識別后續面部的五官后續關鍵部位，形成五官后續關鍵部位與五官初始關鍵部位的偏差數據，以及捕捉相鄰后續面部的相應五官后續關鍵部位的相對偏差數據，形成相應五官后續關鍵部位間的附加偏差數據；

步驟二：利用五官后續關鍵部位與五官初始關鍵部位的偏差數據以及五官后續關鍵部位間的附加偏差數據拉伸相應五官關鍵點位涉及的網格；

步驟三：更新表情網格，根據表情網格對臉部特寫的紋理圖案進行渲染，形成序列幀中的一幀畫面；

重復所述步驟一、所述步驟二和所述步驟三，形成序列幀畫面，在屏幕中臉部特寫位置播放，形成表情變化，

其中，所述附加偏差數據的利用采用如下步驟：

捕捉到所述五官后續關鍵部位后，將所述五官后續關鍵部位經過矩陣的旋轉、平移和縮放，映射到所述照片中，以根據所述附加偏差數據拉伸相應五官關鍵點位涉及的網格，其中，

所述第一部分包括：

識別照片中的臉部特寫；

識別臉部特寫中的五官關鍵點位；

利用五官關鍵點位構建表情網格，劃分臉部特寫的紋理圖案；

捕捉控制人初始面部，識別初始面部的五官初始關鍵部位；

將五官初始關鍵部位與五官關鍵點位形成映射聯系，其中，

所述將五官初始關鍵部位與五官關鍵點位形成映射聯系包括：

控制人的五官初始關鍵部位通過距離矢量矩陣變化，與臉部特寫中相應的五官關鍵點位根據映射策略關聯；所述映射策略包括：

將控制人的五官初始關鍵部位向臉部特寫中的五官關鍵點位進行一對一的關聯；或將控制人的五官初始關鍵部位向臉部特寫中的五官關鍵點位進行多對一的關聯。

2.如權利要求1所述的圖像互動方法，其特征在于，所述利用五官關鍵點位構建表情網格，劃分臉部特寫的紋理圖案包括：

利用五官關鍵點位構建覆蓋臉部特寫的連續二維網格；

關聯每個網格與覆蓋的局部臉部特寫的特征數據。

3.如權利要求1所述的圖像互動方法，其特征在于，所述利用五官后續關鍵部位與五官初始關鍵部位的偏差數據以及五官后續關鍵部位間的附加偏差數據拉伸相應五官關鍵點位涉及的網格，包括：

體現在五官后續關鍵部位與五官初始關鍵部位的偏差數據以及五官后續關鍵部位間的附加偏差數據中的五官關鍵點位圍成的網格的拉伸；

包含五官后續關鍵部位與五官初始關鍵部位的偏差數據以及五官后續關鍵部位間的附加偏差數據中的五官關鍵點位的網格的拉伸。

4.如權利要求1所述的圖像互動方法，其特征在于，所述更新表情網格，根據表情網格對臉部特寫的紋理圖案進行渲染，形成序列幀中的一幀畫面包括：

控制更新表情網格的頻率與捕捉控制人連續的后續面部的頻率成比例關系，優選1:1、5:1～1:10。