[發明專利]基于肖像照片的簡筆畫生成方法、系統及存儲介質

有效

• 申請號: 202010016615.9
• 申請日: 2020-01-08
• 公開（公告）號: CN111243051B
• 公開（公告）日: 2023-08-18
• 發明（設計）人: 朱靜潔;高飛;李鵬;俞澤遠;王韜
• 申請（專利權）人: 杭州未名信科科技有限公司;浙江省北大信息技術高等研究院
• 主分類號: G06T11/00
• 分類號: G06T11/00;G06T11/60;G06N3/0475;G06N3/0455;G06N3/094;G06V40/16;G06V10/82
• 代理公司: 北京辰權知識產權代理有限公司 11619
• 代理人: 付婧

本申請實施例中提供了一種基于肖像照片的簡筆畫生成方法、系統及存儲介質。基于肖像照片的簡筆畫生成方法通過根據肖像照片進行圖像預處理得到預處理肖像圖像；然后根據預處理肖像圖像進行光照屬性檢測及處理得到光照處理圖像；最后根據光照處理圖像以及簡筆畫風格照片進行簡筆畫融合得到簡筆畫圖像，解決了現有簡筆畫生成方法采用全局合成策略導致難以兼顧一張照片中不同的光照及姿態的問題。

技術領域

本申請屬于圖像處理技術領域，具體地，涉及一種基于肖像照片的簡筆畫生成方法、系統及存儲介質。

背景技術

隨著機器視覺相關技術的不斷發展，肖像繪制在虛擬現實、增強現實以及機器人肖像繪制系統等多媒體、個性化娛樂以及互聯網等有廣泛應用。隨著人工智能的發展，越來越多人開始研究人工智能與藝術的結合，即計算藝術。我們可以通過數學和統計學，將藝術中包含的規律量化為數學關系，例如，黃金分割具有嚴格的比例性，藝術性和和諧性，并且具有豐富的審美價值。同時，這些數學關系成為計算藝術理論基礎的一部分。當繪畫涉及到人物的表達時，有許多不同形式的繪畫藝術。肖像畫包括了夸張肖像漫畫，素描，卡通畫和簡筆畫等。

拍攝的照片中，陰影有助于為圖像中的內容創造深度，包括視覺和色彩上的深度以及精神意義上的深度，因此無論是證件照、生活照還是專業攝影出的照片正面面部都會存在陰影。除此之外，由于缺乏相關專業攝影技術，人們往往會拍出過曝光或是欠曝光的肖像照片。無論是陰影還是曝光問題，這都歸結于光照的作用。然而，在肖像轉簡筆畫的任務中，現有的方法非常容易受光照影響導致會產生很多突兀且不必要的線條，合成效果并不具備魯棒性。

因此，肖像照片在不同區域、不同姿態下的光照上存在較大差異，現有的簡筆畫生成方法中，通常采用全局合成策略，即利用全局的表達方式進行簡筆畫生成，但是現有簡筆畫生成方法仍難以兼顧一張照片中不同的光照及姿態而出現的合成效果差的問題。

發明內容

本發明提出了一種基于肖像照片的簡筆畫生成方法、系統及存儲介質，旨在解決現有技術的簡筆畫生成方法采用全局合成策略導致難以兼顧一張照片中不同的光照及姿態的問題。

根據本申請實施例的第一個方面，提供了一種基于肖像照片的簡筆畫生成方法，包括以下步驟：

根據肖像照片進行圖像預處理得到預處理肖像圖像；

根據預處理肖像圖像進行光照屬性檢測及處理得到光照處理圖像；

根據光照處理圖像以及簡筆畫風格照片進行簡筆畫融合得到簡筆畫圖像。

可選地，在根據光照處理圖像進行簡筆畫融合得到簡筆畫圖像后，還包括：

根據簡筆畫圖像以及專家繪制簡筆畫圖像采用精煉圖像模型進行圖像精煉得到精煉簡筆畫圖像。

可選地，在根據光照處理圖像進行簡筆畫融合得到簡筆畫圖像后，還包括：

根據簡筆畫圖像或精煉簡筆畫圖像進行簡筆畫后處理得到最終簡筆畫圖像，后處理包括高斯模糊處理以及自適應二值化處理。

可選地，根據肖像照片進行圖像預處理得到預處理肖像圖像，圖像預處理具體包括：

根據肖像照片進行面部框圖以及面部五官關鍵點檢測，得到面部邊界框信息以及面部五官關鍵點的位置坐標；

根據面部邊界框信息以及面部五官關鍵點的位置坐標得到人臉對齊肖像圖像；

根據人臉對齊肖像圖像得到肖像照片解析掩碼圖；

根據肖像照片解析掩碼圖得到去背景的肖像圖像。

可選地，根據預處理肖像圖像進行光照屬性檢測及處理得到光照處理圖像，光照屬性檢測及處理具體包括：