[發明專利]用于插入圖像的方法和裝置

有效

• 申請號: 201810879255.8
• 申請日: 2018-08-03
• 公開（公告）號: CN109165571B
• 公開（公告）日: 2020-04-24
• 發明（設計）人: 鄧涵;劉志超
• 申請（專利權）人: 北京字節跳動網絡技術有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06T7/70
• 代理公司: 北京英賽嘉華知識產權代理有限責任公司 11204
• 代理人: 王達佐;馬曉亞

1.一種用于插入圖像的方法，包括：

獲取目標人眼圖像，以及確定所述目標人眼圖像的人眼關鍵點數據，其中，所述人眼關鍵點數據用于表征所述目標人眼圖像中的人眼關鍵點在所述目標人眼圖像中的位置；

獲取預設的參考人眼關鍵點數據和參考輔助關鍵點數據，其中，所述參考人眼關鍵點數據用于表征預設的參考人眼圖像中的人眼關鍵點在所述參考人眼圖像中的位置，所述參考輔助關鍵點數據用于表征預先在所述參考人眼圖像中設置的參考輔助關鍵點的位置；

基于所述人眼關鍵點數據，確定所述目標人眼圖像的輔助關鍵點數據，其中，所述輔助關鍵點數據用于表征所述目標人眼圖像中的輔助關鍵點在所述目標人眼圖像中的位置；

根據所述目標人眼圖像的人眼關鍵點數據確定表征所述目標人眼圖像指示的人眼的張開程度的張開程度值；

根據預設的弧度計算公式和所述參考輔助關鍵點數據包括的橫坐標，確定用于表征所述參考輔助關鍵點數據的坐標的變化程度的弧度值；

基于所述弧度值和所述張開程度值，確定變換后參考輔助關鍵點數據；

將所述參考輔助關鍵點數據、所述變換后參考輔助關鍵點數據和所述目標人眼圖像的輔助關鍵點數據輸入預設的坐標映射模型，得到所述目標人眼圖像的變換后輔助關鍵點數據；

獲取待插入圖像，以及將所述待插入圖像插入所述目標人眼圖像中的、所述變換后輔助關鍵點數據和所述人眼關鍵點數據表征的位置處。

2.根據權利要求1所述的方法，其中，所述基于所述人眼關鍵點數據，確定所述目標人眼圖像的輔助關鍵點數據，包括：

基于所述參考輔助關鍵點數據和所述參考人眼關鍵點數據構建第一三角剖分網格；

基于所述第一三角剖分網格包括的三角形的邊長和內角，以及所述參考人眼關鍵點數據與所述目標人眼圖像的人眼關鍵點數據之間的對應關系，確定在所述目標人眼圖像上形成的第二三角剖分網格；

從所述第二三角剖分網格包括的三角形的頂點中確定目標頂點，以及基于所述目標頂點在所述目標人眼圖像中的位置，確定所述目標人眼圖像的輔助關鍵點數據。

3.根據權利要求1所述的方法，其中，所述坐標映射模型為基于移動最小二乘法MLS構建的模型。

4.根據權利要求1-3之一所述的方法，其中，所述獲取待插入圖像，包括：

獲取預設圖像；

基于所述人眼關鍵點數據和所述變換后輔助關鍵點數據，對所述預設圖像進行變形，以及將變形后的預設圖像確定為待插入圖像。

5.一種用于插入圖像的裝置，包括：

第一獲取單元，被配置成獲取目標人眼圖像，以及確定所述目標人眼圖像的人眼關鍵點數據，其中，所述人眼關鍵點數據用于表征所述目標人眼圖像中的人眼關鍵點在所述目標人眼圖像中的位置；

第二獲取單元，被配置成獲取預設的參考人眼關鍵點數據和參考輔助關鍵點數據，其中，所述參考人眼關鍵點數據用于表征預設的參考人眼圖像中的人眼關鍵點在所述參考人眼圖像中的位置，所述參考輔助關鍵點數據用于表征預先在所述參考人眼圖像中設置的參考輔助關鍵點的位置；

確定單元，被配置成基于所述人眼關鍵點數據，確定所述目標人眼圖像的輔助關鍵點數據，其中，所述輔助關鍵點數據用于表征所述目標人眼圖像中的輔助關鍵點在所述目標人眼圖像中的位置；

變換單元，包括：變換模塊和生成模塊，其中，變化模塊包括：第一確定子模塊，被配置成根據所述目標人眼圖像的人眼關鍵點數據確定表征所述目標人眼圖像指示的人眼的張開程度的張開程度值；第二確定子模塊，被配置成根據預設的弧度計算公式和所述參考輔助關鍵點數據包括的橫坐標，確定用于表征所述參考輔助關鍵點數據的坐標的變化程度的弧度值；第三確定子模塊，被配置成基于所述弧度值和所述張開程度值，確定變換后參考輔助關鍵點數據；生成模塊被配置成：將所述參考輔助關鍵點數據、所述變換后參考輔助關鍵點數據和所述目標人眼圖像的輔助關鍵點數據輸入預設的坐標映射模型，得到所述目標人眼圖像的變換后輔助關鍵點數據；

插入單元，被配置成獲取待插入圖像，以及將所述待插入圖像插入所述目標人眼圖像中的、所述變換后輔助關鍵點數據和所述人眼關鍵點數據表征的位置處。