[發明專利]一種檢測影像中骨骼區域的方法及裝置

有效

• 申請號: 201910940606.6
• 申請日: 2019-09-30
• 公開（公告）號: CN110706222B
• 公開（公告）日: 2022-04-12
• 發明（設計）人: 倪浩;石磊;魏子昆;華銥煒;柏慧屏
• 申請（專利權）人: 杭州依圖醫療技術有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00
• 代理公司: 北京天方智力知識產權代理事務所(普通合伙) 11719
• 代理人: 張廷利

1.一種檢測影像中骨骼區域的方法，其特征在于，所述方法包括：

獲取多幀連續的2D影像；

檢測每一幀2D影像中骨骼區域的中心，以獲得該幀2D影像中骨骼區域的檢出中心；

對于每一幀2D影像，使用除該幀2D影像外的至少兩幀2D影像中骨骼區域的檢出中心，采用線性插值算法、雙線性插值算法或線性擬合算法預測該幀2D影像中骨骼區域的中心，以獲得該幀2D影像中骨骼區域的預測中心，基于該幀2D影像中骨骼區域的預測中心和檢出中心確定該幀2D影像中骨骼區域的中心，并基于該幀2D影像中骨骼區域的中心獲取該幀2D影像中的骨骼區域：以該幀2D影像中骨骼區域的中心為中心，從該幀2D影像中截取預設尺寸的影像以獲得第一影像，將所述第一影像輸入至第二卷積神經網絡模型，以獲得第一影像中骨骼區域的關鍵點，其中，所述關鍵點是指骨骼邊緣上的點；連接所述骨骼區域的關鍵點以獲得該幀2D影像中的骨骼區域。

2.根據權利要求1所述的方法，其特征在于，所述基于該幀2D影像中骨骼區域的預測中心和檢出中心確定該幀2D影像中骨骼區域的中心，包括：

若該幀2D影像中骨骼區域的檢出中心與預測中心的坐標差小于或等于第一閾值，則將該幀2D影像中骨骼區域的檢出中心作為其骨骼區域的中心；若該幀2D影像中骨骼區域的檢出中心與預測中心的坐標差大于所述第一閾值，或者，該幀2D影像中不存在骨骼區域的檢出中心，則將該幀2D影像中骨骼區域的預測中心作為其骨骼區域的中心。

3.根據權利要求1所述的方法，其特征在于，所述基于該幀2D影像中骨骼區域的中心獲取該幀2D影像中的骨骼區域，包括：

以該幀2D影像中骨骼區域的中心為中心，從該幀2D影像中截取預設尺寸的影像以獲得第一影像，將所述第一影像輸入至第一卷積神經網絡模型，以獲得所述第一影像中的像素點屬于骨骼區域的置信度；

將所述第一影像中像素點的置信度大于第二閾值的一個或多個像素點組成的區域作為該幀2D影像中的骨骼區域。

4.根據權利要求1至3中任一項所述的方法，其特征在于，所述檢測每一幀2D影像中骨骼區域的中心以獲得該幀2D影像中骨骼區域的檢出中心，包括：

將每一幀2D影像輸入至第三卷積神經網絡模型，以檢測出該幀2D影像中的至少一個骨骼區域及與該骨骼區域對應的置信度；

獲取檢測到的骨骼區域中置信度最高的骨骼區域，若該骨骼區域的置信度大于或等于第三閾值，則以該骨骼區域的中心為該幀2D影像中骨骼區域的檢出中心；

或者，獲取檢測到的骨骼區域中置信度大于或等于第三閾值的骨骼區域，并以置信度最高的骨骼區域的中心為該幀2D影像中骨骼區域的檢出中心。

5.一種檢測影像中骨骼區域的裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取多幀連續的2D影像；

檢測模塊，用于檢測每一幀2D影像中骨骼區域的中心，以獲得該幀2D影像中骨骼區域的檢出中心；

處理模塊，用于對于每一幀2D影像，使用除該幀2D影像外的至少兩幀2D影像中骨骼區域的檢出中心，采用線性插值算法、雙線性插值算法或線性擬合算法預測該幀2D影像中骨骼區域的中心，以獲得該幀2D影像中骨骼區域的預測中心，基于該幀2D影像中骨骼區域的預測中心和檢出中心確定該幀2D影像中骨骼區域的中心，并基于該幀2D影像中骨骼區域的中心獲取該幀2D影像中的骨骼區域：以該幀2D影像中骨骼區域的中心為中心，從該幀2D影像中截取預設尺寸的影像以獲得第一影像，將所述第一影像輸入至第二卷積神經網絡模型，以獲得第一影像中骨骼區域的關鍵點，其中，所述關鍵點是指骨骼邊緣上的點；連接所述骨骼區域的關鍵點以獲得該幀2D影像中的骨骼區域。

6.根據權利要求5所述的裝置，其特征在于，所述處理模塊具體用于：

若該幀2D影像中骨骼區域的檢出中心與預測中心的坐標差小于或等于第一閾值，則將該幀2D影像中骨骼區域的檢出中心作為其骨骼區域的中心；若該幀2D影像中骨骼區域的檢出中心與預測中心的坐標差大于所述第一閾值，或者，該幀2D影像中不存在骨骼區域的檢出中心，則將該幀2D影像中骨骼區域的預測中心作為其骨骼區域的中心。