[發明專利]一種圖像互動方法及互動裝置

有效

• 申請號: 201710060919.3
• 申請日: 2017-01-25
• 公開（公告）號: CN106919906B
• 公開（公告）日: 2021-04-20
• 發明（設計）人: 雷宇;付一洲;李曉帆;李偉棟;王玉坤;金宇林;伏英娜
• 申請（專利權）人: 邁吉客科技（北京）有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06T13/80
• 代理公司: 北京布瑞知識產權代理有限公司 11505
• 代理人: 孟潭

本發明的圖像互動方法及互動裝置，用于解決活照片模式下無法形成高效實時交互動畫的技術問題。互動方法包括：第一部分：建立照片與控制人的相應五官位置的映射聯系；第二部分：識別控制人五官移動的位置偏差數據，作為照片相應位置變化的依據，形成照片的表情變化效果。利用在相似坐標空間內建立相似特征的轉換模型，將主動變化的特征數據作為控制信號完成靜止畫面的被動變化，形成新穎視覺效果。

技術領域

本發明涉及計算機圖形處理領域，特別涉及圖形的人機交互處理。

背景技術

對于讓靜止人物圖像活動起來，通常是采用計算機動畫處理。針對臉部特寫的活動，美術設計人員需要提前做好臉部特寫的圖片模型，然后形成連續的序列幀畫面，或者是對頭臉部建模，綁定好骨頭或肌肉，按幀率進行拉伸、紋理貼圖、實時渲染，形成序列幀畫面。以上處理方法需要確定的人物或臉部特寫。

在現有人機交互行為中，需要實現在移動終端上實現活照片模式，主要特點是首先在移動終端屏幕上呈現獲得的靜止的臉部特寫，通常為一張照片中的部分圖像，然后利用移動終端攝像頭捕捉操作者的面部變化，并識別為一種具體表情，在移動終端攝屏幕上控制臉部特寫做出相應的變化。

上述計算機動畫處理方法處理活照片模式存在技術缺陷。首先無法為隨機獲得的臉部特寫預先形成各種表情的序列幀畫面用于實時調用切換。即使在獲得具體表情數據后能夠實時生成臉部特寫表情的序列幀畫面，也會對移動終端的處理能力要求過高，造成系統反應延遲，以及過高的能耗，只能通過減低圖像分辨率的方式衰減表情細節，降低表情質量。

發明內容

有鑒于此，本發明實施例提供了一種圖像互動方法及互動裝置，用于解決活照片模式下無法形成高效實時交互動畫的技術問題。

本發明的圖像互動方法，包括：

第一部分：建立照片與控制人的相應五官位置的映射聯系；

第二部分：識別控制人五官移動的位置偏差數據，作為照片相應位置變化的依據，形成照片的表情變化效果。

所述第一部分：

識別照片中的臉部特寫；

識別臉部特寫中的五官關鍵點位；

利用五官關鍵點位構建表情網格，劃分臉部特寫的紋理圖案；

捕捉控制人初始面部，識別初始面部的五官初始關鍵部位；

將五官初始關鍵部位與五官關鍵點位形成映射聯系；

所述第二部分：

捕捉控制人的后續面部，識別后續面部的五官后續關鍵部位，形成五官后續關鍵部位與五官初始關鍵部位的偏差數據；

利用偏差數據拉伸相應五官關鍵點位涉及的網格；

更新表情網格，根據表情網格對臉部特寫的紋理圖案進行渲染，形成序列幀中的一幀畫面；

重復第二部分，形成序列幀畫面，在屏幕中臉部特寫位置播放，形成表情變化。

所述利用五官關鍵點位構建表情網格，劃分臉部特寫的紋理圖案包括：

利用五官關鍵點位構建覆蓋臉部特寫的連續二維網格；

關聯每個網格與覆蓋的局部臉部特寫的特征數據。

所述將五官初始關鍵部位與五官關鍵點位形成映射聯系包括：

控制人的五官初始關鍵部位通過距離矢量矩陣變化，與臉部特寫中相應的五官關鍵點位關聯；關聯的映射策略包括：

將控制人的五官初始關鍵部位向臉部特寫中的五官關鍵點位進行一對一的關聯；或將控制人的五官初始關鍵部位向臉部特寫中的五官關鍵點位進行多對一的關聯。