[發明專利]基于三維重建的息肉圖像識別方法、裝置及電子設備

在審

• 申請號: 202111519442.3
• 申請日: 2021-12-14
• 公開（公告）號: CN113920546A
• 公開（公告）日: 2022-01-11
• 發明（設計）人: 招展鵬;邱琛;馬清飛
• 申請（專利權）人: 廣州思德醫療科技有限公司
• 主分類號: G06V40/10
• 分類號: G06V40/10;G06V10/774;G06V10/764;G06T17/00
• 代理公司: 北京路浩知識產權代理有限公司 11002
• 代理人: 毛宏寶

本發明提供一種基于三維重建的息肉識別方法、裝置及電子設備，所述方法包括：獲取待識別圖像；將所述待識別圖像輸入至息肉檢測模型中，得到所述待識別圖像的識別結果；其中所述息肉檢測模型是基于息肉圖像樣本及其對應的標簽訓練得到的；在確認所述識別結果為息肉圖像時，獲取所述識別結果對應的待識別圖像的三維重建模型，并根據所述三維重建模型對所述待識別圖像進行二次識別，得到二次識別結果。本發明能夠減少對待識別圖像的誤判和漏判，從而提高了對息肉圖像識別的準確率。

技術領域

本發明涉及圖像識別技術領域，尤其涉及一種基于三維重建的息肉圖像識別方法、裝置及電子設備。

背景技術

目前現有自動識別算法多基于淺層卷積神經網絡學習或者人工特征圖像提取，其在表征圖像特征圖像的能力方面受到限制。由于胃腸道粘膜表面形態復雜多變，且息肉與粘膜的特征圖像差異較小，導致部分微小、扁平的息肉的漏判和誤判，最終導致篩查的準確率下降。因此，如何提高息肉識別的準確率，是當前課題亟需解決的問題。

發明內容

本發明提供一種基于三維重建的息肉圖像識別方法、裝置及電子設備，用以解決現有技術中息肉識別準確度較低的缺陷，從而提高息肉識別的準確度。

本發明提供一種基于三維重建的息肉圖像識別方法，包括：

獲取待識別圖像；其中，所述待識別圖像是對目標區域進行拍攝或基于互聯網獲取得到的；

將所述待識別圖像輸入至息肉檢測模型中，得到所述待識別圖像的識別結果；其中所述息肉檢測模型是基于息肉圖像樣本及其對應的標簽訓練得到的；

在確認所述識別結果為息肉圖像時，獲取所述識別結果對應的待識別圖像的三維重建模型，并根據所述三維重建模型對所述待識別圖像進行二次識別，得到二次識別結果。

根據本發明提供的一種基于三維重建的息肉圖像識別方法，所述獲取所述識別結果對應的待識別圖像的三維重建模型，具體包括：

獲取所述識別結果對應的待識別圖像的關鍵幀；

基于所述關鍵幀及預設范圍閾值，獲取重建關鍵幀范圍；

對所述重建關鍵幀范圍對應的待識別圖像進行三維重建，得到三維重建模型。

根據本發明提供的一種基于三維重建的息肉圖像識別方法，所述息肉檢測模型是基于息肉圖像樣本及其對應的標簽訓練得到的，包括：

將所述息肉圖像樣本劃分為訓練集和測試集；

對所述訓練集進行特征提取，得到所述息肉圖像樣本的特征信息；

將所述特征信息和息肉圖像樣本對應的標簽輸入至初始的息肉檢測模型中迭代訓練，反復迭代和調整所述息肉檢測模型的訓練參數，直至所述息肉檢測模型的損失值收斂至第一目標，以及在測試集上對準確率評估達到第二目標。

根據本發明提供的一種基于三維重建的息肉圖像識別方法，判斷所述識別結果是否存在漏判；

在確認所述識別結果存在漏判的情況下，降低所述息肉檢測模型的預設閾值。

根據本發明提供的一種基于三維重建的息肉圖像識別方法，根據所述三維重建模型對所述待識別圖像進行二次識別，得到二次識別結果之后，所述方法還包括：

對所述二次識別結果進行投票評估，得到所述待識別圖像的識別準確度。

根據本發明提供的一種基于三維重建的息肉圖像識別方法，所述獲取重建關鍵幀范圍，具體包括：

獲取所述關鍵幀前后滿足預設閾值的第一重建關鍵幀和第二重建關鍵幀；

所述對所述重建關鍵幀范圍對應的待識別圖像進行三維重建，具體包括：

基于所述第一重建關鍵幀和第二重建關鍵幀，對所述待識別圖像進行三維重建。

本發明還提供一種基于三維重建的息肉圖像識別裝置，包括：

獲取模塊，用于獲取待識別圖像；其中，所述待識別圖像是對目標區域進行拍攝或基于互聯網獲取得到的；