[發明專利]一種三維圖像的處理方法、裝置，電子設備及存儲介質

有效

• 申請號: 202110397463.6
• 申請日: 2021-04-13
• 公開（公告）號: CN113112617B
• 公開（公告）日: 2023-04-14
• 發明（設計）人: 宋萬忠;李宇
• 申請（專利權）人: 四川大學
• 主分類號: G06T19/20
• 分類號: G06T19/20;G06T17/00
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 張萌

本申請提供一種三維圖像的處理方法、裝置，電子設備及存儲介質。該方法包括：接收用戶導入的三維人臉圖像，并將三維人臉圖像顯示在工作界面的顯示區域；獲取三維人臉圖像的口內區域的空間點，并將口內區域的空間點刪除以及將口內區域的透明度調整為全透明；基于用戶對工作界面的移動操作，將工作界面移動至呈現咬合狀態下的三維牙齒模型上方，以使三維牙齒模型在所述口內區域進行呈現。該方式能夠直觀且便捷地查看三維牙齒模型與三維人臉圖像組合在一起的融合效果，同時該三維牙齒模型在其自身的工作界面中，仍然可以展示牙齒移動的效果，從而使牙齒移動的效果，能夠在三維人臉背景下得到展示。

技術領域

本申請涉及圖像處理技術領域，具體而言，涉及一種三維圖像的處理方法、裝置，電子設備及存儲介質。

背景技術

現有各種數字化口腔正畸的廠商，其研發的軟件常采用如圖1所示的方式，采集各顆牙齒的形狀和相互之間位置信息后，通過各顆牙齒三維方向的移動，顯示牙齒從初始位置逐漸移動到目標矯正位置的動態效果。此動態三維牙齒模型在該廠商自己的軟件內可以任意旋轉或縮放進行觀看。但是此類軟件其顯示的僅是三維牙齒模型，缺乏矯治患者的面部信息，進而無法顯示三維牙齒模型變化前后在矯治患者面部所能達到的效果，比如牙列中線是否與面部中線一致，微笑時牙齒的暴露量是否適宜，笑弧是否與唇形協調，頰廊大小是否合適等都無法從現有軟件上得以體現。

為了顯示三維牙齒模型在面部環境中的效果，一種方法是獲得三維牙齒模型的原始數據(具體的模型參數)后，通過三維制圖的方式結合到患者的面部，但這些原始數據各廠商都是封閉的，不容易獲取。另一種方法則是在現在各廠商牙齒軟件的基礎上，通過PS(photoshop，一種圖像處理軟件)技術來實現圖像的拼接，但是該方式，無法體現三維牙齒模型中牙齒的動態移動效果，且PS技術只能對二維人臉圖像進行處理，無法模擬真實的效果。

發明內容

本申請實施例的目的在于提供一種三維圖像的處理方法、裝置，電子設備及存儲介質，以實現在不需要三維牙齒模型的原始數據的情況下，將三維牙齒模型與三維人臉圖像進行有效地模擬結合。

本發明是這樣實現的：

第一方面，本申請實施例提供一種三維圖像的處理方法，包括：接收用戶導入的三維人臉圖像，并將所述三維人臉圖像顯示在工作界面的顯示區域；其中，所述三維人臉圖像為被拍攝對象呈現牙齒咬合、嘴唇分開的面部狀態下所拍攝獲取的，所述顯示區域可調整顯示透明度；獲取所述三維人臉圖像的口內區域的空間點，并將所述口內區域的空間點刪除以及將所述口內區域的透明度調整為全透明；基于用戶對所述工作界面的移動操作，將所述工作界面移動至呈現咬合狀態下的三維牙齒模型上方，以使所述三維牙齒模型在已調整為全透明的口內區域進行呈現；其中，所述三維牙齒模型的大小、位置、方向與刪除口內區域內的牙齒的大小、位置、方向一致。

在本申請實施例中，首先獲取用戶導入的三維人臉圖像，然后將其顯示在工作界面中可以調整顯示透明度的顯示區域，然后將獲取的三維人臉圖像的口內區域的空間點進行刪除，并將口內區域調整為全透明，最后將其他軟件所打開的三維牙齒模型拖動至呈全透明的口內區域后即可實現二者的重合呈現。通過上述方式，能夠在不需要呈現咬合狀態下的三維牙齒模型的原始數據的情況下，直觀且便捷地查看三維牙齒模型與三維人臉圖像組合在一起的融合效果，同時該三維牙齒模型在其自身的工作界面中，仍然可以展示牙齒移動的效果，從而使牙齒移動的效果，能夠在三維人臉背景下得到展示。

結合上述第一方面提供的技術方案，在一些可能的實現方式中，所述獲取所述三維人臉圖像的口內區域的空間點，包括：將所述三維人臉圖像進行投影，生成與所述三維人臉圖像對應的二維人臉圖像；其中，所述二維人臉圖像顯示的人臉角度與所述三維人臉圖像在所述顯示區域呈現的人臉角度相同；對所述二維人臉圖像進行語義分割，獲取所述二維人臉圖像的口內區域的圖像點；基于所述三維人臉圖像與所述二維人臉圖像的投影對應關系，獲取與所述二維人臉圖像的口內區域的圖像點對應的所述三維人臉圖像的口內區域的空間點。