[發明專利]一種虛擬試妝指導方法及裝置

有效

• 申請號: 201810603455.0
• 申請日: 2018-06-12
• 公開（公告）號: CN108932654B
• 公開（公告）日: 2021-03-26
• 發明（設計）人: 余東
• 申請（專利權）人: 蘇州誠滿信息技術有限公司
• 主分類號: G06Q30/06
• 分類號: G06Q30/06;A45D44/00
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種虛擬試妝指導方法，其特征在于，包括以下步驟：

S1.獲取目標用戶不低于三張面部圖像，根據用戶面部特征推薦不同妝面效果至第一試妝區域；所述目標用戶的面部圖像包括目標的人臉圖像，還包括特征部位，即唇部、眉毛區域、眼部周圍的區域、臉部區域；獲取用戶圖像時，還包括獲取用戶面部表情，不同角度的照片，以便形成用戶的面部的3D模型圖；獲取用戶圖像時，還包括獲取特征部位的不同動作和狀態下的圖像；唇部獲取以下動作：抿嘴、閉嘴、癟嘴、微張口、大張口、微笑、大笑的動作狀態，對于眉毛區域，獲取眉毛皺眉、挑眉、正常眉的情況；對于眼睛周圍，獲取眼睛閉眼、眨眼、瞇眼、瞪眼狀態下的動作狀態；

S2.確定目標用戶選擇的妝面效果；

S3.獲取目標用戶的化妝的特征部位的效果并將特征部位效果映射到第二試妝區域；

S4.從預先建立的模板庫中選擇3D的面部模板，并將所述面部模板映射到試妝設備上的第二試妝區域；

S5.獲取目標用戶的面部動作圖并將面部動作圖映射到第三試妝區域；

S6.從預先建立的模板庫中選擇面部動作相對應的模板映射到試妝設備上的第三試妝區域；

S7.對比所述選擇的妝面效果與第二試妝區域的化妝效果，提示目標用戶進行妝面修改；所述試妝區域包括第一試妝區域、第二試妝區域和第三試妝區域，所述第一試妝區域用來呈現妝面效果圖；第二試妝區域用來呈現當前化妝進度；第三試妝區域有鏡子的功能，同時用來獲取目標用戶的特征部位的化妝進度，并將進度發送至第二試妝區域，通過控制中心的數據處理，第二試妝區域接收當前化妝進度并通過圖像的方式呈現；

特征部位的效果映射到第二試妝區域的數據來源于所述第三試妝區域的獲取的內容，當用戶正在使用口紅，第三試妝區域內的獲取模塊獲取到用戶當前的進度，獲取的方式是根據接收到的顏色的變化，嘴部的顏色由淺變深，判斷用戶化妝的進度，同時，通過面部追蹤的相關技術，將變化的部分由第二試妝區域去呈現；

在步驟S3中，映射到第二試妝區域時，用戶的特征部位效果從所述第三試妝區域中獲取圖片并分析顏色代碼得出；

所述方法還包括：

S21.接收妝面效果的選擇指令，并確定所述選擇指令對應的妝面效果的顏色代碼；

S22.標記所述妝面效果圖各個位置的顏色代碼。

2.根據權利要求1所述的一種虛擬試妝指導方法，其特征在于，所述獲取目標用戶的面部動作圖，包括：

S51.提取目標用戶的面部動作圖中的關鍵點。

3.根據權利要求1所述的一種虛擬試妝指導方法，其特征在于，所述選擇面部動作相對應的模板映射到試妝設備上的第三試妝區域，還包括：

S61.根據面部動作的圖像中的關鍵點，對比動作狀態，選擇該動作狀態下相似度最高的模板。

4.根據權利要求1所述的一種虛擬試妝指導方法，其特征在于，包括：建立所述模板庫，具體的，包括以下步驟：

S8.對預設用戶進行人臉圖像采集，得到所述預設用戶的多個人臉圖像集合；所述人臉圖像集合包括多個動作狀態下的多個人臉圖像。

5.根據權利要求4所述的一種虛擬試妝指導方法，其特征在于，還包括：

S81.對預設用戶進行人臉圖像采集，得到每個特征部位對應的多個動作下的圖像集合。

6.一種虛擬試妝指導裝置，包括本體，其特征在于，還包括：獲取模塊，用來獲取用戶的面部頭像和面部動作以及特征部位動作；

推薦模塊，用來根據用戶臉型和外出場合推薦適合目標用戶的妝面效果；

確定模塊，用于確定目標圖像中待試妝區域的動作狀態；以及用于確定用戶選擇的妝面效果對應的顏色編號；

模板庫模塊，用來存儲用戶的3D圖像，以及存儲用戶的面部圖片，特征部位的圖片；

映射模塊，用于將模板圖像映射到第一試妝區域、第二試妝區域以及第三試妝區域；

提示模塊，用來提示目標用戶妝面的修改以及完成化妝；

顏色標記模塊，用來記錄不同妝面效果的色彩的顏色對應的編碼；

對比模塊，用來對比第二試妝區域和妝面效果的色彩是否一致；

顯示模塊，所述顯示模塊包括第一試妝區域、第二試妝區域和第三試妝區域，所述第一試妝區域用來呈現妝面效果圖；第二試妝區域用來呈現當前化妝進度；第三試妝區域用來獲取目標用戶的特征部位的動作，并將進度發送至控制中心，通過控制中心的數據處理，第二試妝區域接收當前化妝進度并通過圖像的方式呈現；還用來顯示提示信息；

特征部位的效果映射到第二試妝區域的數據來源于所述第三試妝區域的獲取的內容，當用戶正在使用口紅，第三試妝區域內的獲取模塊獲取到用戶當前的進度，獲取的方式是根據接收到的顏色的變化，嘴部的顏色由淺變深，判斷用戶化妝的進度，同時，通過面部追蹤的相關技術，將變化的部分由第二試妝區域去呈現。