[發明專利]基于目標檢測模型的腹腔鏡手術組織器官識別方法及裝置

有效

• 申請號: 202111471854.4
• 申請日: 2021-12-06
• 公開（公告）號: CN113902983B
• 公開（公告）日: 2022-03-25
• 發明（設計）人: 陳豪;李國新;余江;陳浩彬;茍龍飛;陳翊;閆滕
• 申請（專利權）人: 南方醫科大學南方醫院
• 主分類號: G06V20/20
• 分類號: G06V20/20;G06V10/80;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 廣州嘉權專利商標事務所有限公司 44205
• 代理人: 余凱歡

1.一種基于目標檢測模型的腹腔鏡手術組織器官識別方法，包括：

提取輸入圖像的第一特征圖；

對所述第一特征圖進行局部信息靜態建模和上下文信息動態建模，獲取局部上下文信息增強的增強特征圖；

基于所述增強特征圖進行目標檢測，得到所述輸入圖像中包含的器官信息及相應的標識；

對所述第一特征圖進行局部信息靜態建模，包括：

采用特定的第一卷積核對所述第一特征圖進行卷積，以對所述第一特征圖進行局部信息靜態建模，得到具備局部上下文信息表示的靜態注意力鍵值；對所述第一特征圖進行上下文信息動態建模，包括：

采用特定的第二卷積核對所述第一特征圖進行卷積，得到所述第一特征圖的特征值，以便對所述第一特征圖進行上下文信息動態建模；

基于預先構建的記憶力單元對所述第一特征圖進行點乘，得到注意力的查詢信息，其中，所述記憶力單元的尺寸與所述第一特征圖的尺寸相同；

將所述查詢信息與所述靜態注意力鍵值進行計算，得到自注意力增強特征圖；

基于所述特征值和所述自注意力增強特征圖進行點乘計算，得到上下文信息動態建模的特征圖。

2.根據權利要求1所述的基于目標檢測模型的腹腔鏡手術組織器官識別方法，將所述查詢信息與所述靜態注意力鍵值進行計算，得到自注意力增強特征圖，包括：

將所述查詢信息與所述靜態注意力鍵值進行拼接，得到拼接后的第二特征圖；

基于多層感知機對所述拼接后的第二特征圖進行計算，得到自注意力增強特征圖。

3.根據權利要求1或2所述的基于目標檢測模型的腹腔鏡手術組織器官識別方法，對所述第一特征圖進行局部信息靜態建模和上下文信息動態建模，獲取局部上下文信息增強的增強特征圖，包括：

將所述靜態注意力鍵值和所述上下文信息動態建模的特征圖相加，得到局部上下文信息增強的增強特征圖。

4.根據權利要求1所述的基于目標檢測模型的腹腔鏡手術組織器官識別方法，基于所述增強特征圖進行目標檢測，得到所述輸入圖像中包含的器官信息及相應的標識，包括：

基于特征金字塔網絡對所述增強特征圖進行特征融合，得到至少一個待識別特征圖；

對所述待識別特征圖進行目標檢測，確定所述待識別特征圖中包含的目標；

識別所述目標對應的器官信息。

5.根據權利要求4所述的基于目標檢測模型的腹腔鏡手術組織器官識別方法，所述器官信息中包括器官名稱和識別概率，識別所述目標對應的器官信息之后，所述方法還包括：

在所述輸入圖像中輸出用于標識目標所在位置的包圍框；

在所述輸入圖像中的包圍框內輸出與所述包圍框所標識的目標對應的器官名稱和識別概率。

6.一種存儲有程序的存儲介質，其中，所述存儲介質存儲有計算機程序，所述計算機程序被處理器執行時實現如權利要求1~5中的任一項所述的方法。

7.一種計算設備，包括如權利要求6所述的存儲介質。