[發明專利]圖像處理方法、裝置、電子設備和可讀存儲介質

在審

• 申請號: 202110099198.3
• 申請日: 2021-01-25
• 公開（公告）號: CN112785687A
• 公開（公告）日: 2021-05-11
• 發明（設計）人: 王錫浩;黃晗;郭彥東
• 申請（專利權）人: OPPO廣東移動通信有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00;G06T7/33;G06T9/00
• 代理公司: 深圳市智圈知識產權代理事務所(普通合伙) 44351
• 代理人: 呂靜

1.一種圖像處理方法，其特征在于，所述方法包括：

獲取第一圖像數據和第二圖像數據，所述第一圖像數據和第二圖像數據為不同時刻的圖像數據；

將所述第一圖像數據和所述第二圖像數據輸入至特征匹配網絡，并利用所述特征匹配網絡獲取第一圖像數據與所述第二圖像數據之間的至少一個匹配特征點；

基于所述匹配特征點獲取特征變換數據，將所述特征變化數據和所述第一圖像數據進行融合，得到目標數據；

根據所述目標數據執行三維重建操作，得到三維圖像。

2.根據權利要求1所述的方法，其特征在于，所述獲取第一圖像數據和第二圖像數據，包括：

獲取第一彩色圖像和第一深度圖像，對所述第一彩色圖像和所述第一深度圖像執行圖像對齊操作，得到第一圖像數據；

獲取第二彩色圖像和第二深度圖像，對所述第二彩色圖像和所述第二深度圖像執行圖像對齊操作，得到第二圖像數據。

3.根據權利要求1所述的方法，其特征在于，所述特征網絡包括第一圖像編碼器和第二圖像編碼器，所述第一圖像編碼器和所述第二圖像編碼器權重共享；

所述將所述第一圖像數據和所述第二圖像數據輸入至特征匹配網絡，利用所述特征匹配網絡獲取所述第一圖像數據與所述第二圖像數據之間的至少一個匹配特征點，包括：

將所述第一圖像數據輸入至所述第一圖像編碼器，并利用所述第一圖像編碼器對所述第一圖像數據進行編碼，得到第一編碼數據；

將所述第二圖像數據輸入至所述第二圖像編碼器，并利用所述第二圖像編碼器對所述第一圖像數據進行編碼，得到第二編碼數據；

對所述第一圖像編碼器數據和所述第二編碼數據進行比對，得到所述第一圖像數據與所述第二圖像數據之間的至少一個匹配特征點。

4.根據權利要求3所述的方法，其特征在于，所述特征網絡包括瓶頸層，所述對所述第一圖像編碼器數據和所述第二編碼數據進行比對，得到所述第一圖像數據與所述第二圖像數據之間的至少一個匹配特征點，包括：

當所述匹配特征點的數量超過特征點閾值時，利用所述瓶頸層對所述匹配特征點進行刪選，并將剩余的所述匹配特征點作為目標特征點。

5.根據權利要求4所述的方法，其特征在于，所述特征匹配網絡還包括圖像解碼器，所述利用所述瓶頸層對所述匹配特征點進行刪選之后，還包括：

利用所述圖像解碼器對所述目標特征點進行解碼，得到概率熱力圖；

將所述概率熱力圖與所述第一圖像數據和所述第二圖像數據中的彩色圖像進行對比，得到至少一個匹配特征點。

6.根據權利要求1所述的方法，其特征在于，所述基于所述匹配特征點獲取特征變換數據，包括：

確定每個所述匹配特征點對應的位置信息，并基于所述位置信息獲取特征變化數據，所述特征變換數據包括旋轉信息和平移信息。

7.根據權利要求6所述的方法，其特征在于，所述第一圖像數據包括多個第一匹配特征點，所述第二圖像數據包括多個與所述第一匹配特征點對應的第二匹配特征點；

所述確定每個所述匹配特征點對應的位置信息，并基于所述位置信息獲取特征變化數據，包括：

確定每個所述第一匹配特征點對應的第一位置信息，以及確定每個所述第二匹配特征點對應的第二位置信息；

根據所述第一位置信息和所述第二位置信息確定所述特征變換數據。

8.根據權利要求1至7任一所述的方法，其特征在于，所述特征匹配網絡包括Softmax分類器和Sigmoid分類器，所述Softmax分類器和Sigmoid分類器用于從不同角度確定所述第一圖像數據和所述第二圖像數據之間的匹配特征點。