[發明專利]內窺鏡圖像處理方法、裝置、電子設備及存儲介質

在審

• 申請號: 202010076394.4
• 申請日: 2020-01-23
• 公開（公告）號: CN111311557A
• 公開（公告）日: 2020-06-19
• 發明（設計）人: 章子健;尚鴻;孫鐘前
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06T3/40;H04N21/44
• 代理公司: 北京派特恩知識產權代理有限公司 11270
• 代理人: 劉暉銘;張穎玲

1.一種內窺鏡圖像處理方法，其特征在于，所述方法包括：

獲取內窺鏡視頻流，其中，所述內窺鏡視頻流攜帶原始內窺鏡圖像；

通過第一線程對相應視頻幀中的原始內窺鏡圖像進行檢測，將所述原始內窺鏡圖像的檢測結果傳輸至集成器；

通過集成器根據所述原始內窺鏡圖像的檢測結果，形成控制指令；

響應于所述控制指令，通過第二線程對所述第二線程中的輸出結果進行調整，以實現所述輸出結果與所述內窺鏡視頻流的使用環境相匹配，其中，所述第一線程與所述第二線程為并行線程。

2.根據權利要求1所述的方法，其特征在于，所述獲取內窺鏡視頻流，包括：

提取目標對象的病理信息中的內窺鏡視頻幀；

對所述內窺鏡視頻幀進行清晰度提升處理；

將所述內窺鏡視頻幀的格式由當前編碼格式轉換為灰階值編碼格式，以獲得多個內窺鏡視頻幀；

將所述內窺鏡視頻幀進行編碼壓縮，以形成視頻流狀態的內窺鏡視頻流。

3.根據權利要求2所述的方法，其特征在于，所述將所述內窺鏡視頻幀的格式由當前編碼格式轉換為灰階值編碼格式，包括：

通過與目標格式相匹配的編碼方法分別對所述內窺鏡視頻幀進行編碼壓縮；

寫入所述視頻幀對應的序列號和生成所述圖像數據包對應的時間戳，以生成與所述內窺鏡視頻幀的格式相匹配的數據包；

對所述圖像數據包進行拼接處理，以形成多個內窺鏡視頻幀。

4.根據權利要求1所述的方法，其特征在于，所述方法還包括：

將所述原始內窺鏡圖像調整至目標尺寸，生成標準內窺鏡圖像幀；

對所述標準內窺鏡圖像幀進行過濾，刪除存在干擾的標準內窺鏡圖像幀，以形成包括不同目標內窺鏡圖像幀的目標內窺鏡圖像幀。

5.根據權利要求4所述的方法，其特征在于，所述通過第一線程對相應視頻幀中的原始內窺鏡圖像進行檢測，將所述原始內窺鏡圖像的檢測結果傳輸至集成器，包括：

通過所述第一線程中的檢測器，檢測所存在的異物獲得分布于所述目標內窺鏡圖像幀的異物框，其中，所述異物框用于指示所述目標內窺鏡圖像幀中存在異物的區域；

基于所述異物框對所述目標內窺鏡圖像幀進行過濾，以定位所述目標內窺鏡圖像幀中的病灶區域和所屬病灶類別；

將通過所述異物框定位的所述目標內窺鏡圖像幀中的病灶區域傳輸至集成器。

6.根據權利要求5所述的方法，其特征在于，所述方法還包括：

當所述第一線程中的檢測器的檢測時間超出檢測時間閾值時，停止檢測當前目標內窺鏡圖像幀，并獲取后續目標內窺鏡圖像幀進行檢測。

7.根據權利要求4所述的方法，其特征在于，所述第二線程響應于所述控制指令，對所述第二線程中的輸出結果進行調整，包括：

當所述第二線程中的跟蹤器處于繼續跟蹤狀態時，所述跟蹤器對應的跟蹤框與所述檢測器對應的異物框相匹配，所述第二線程中的跟蹤器輸出當前目標內窺鏡圖像幀；或者

當所述第二線程中的跟蹤器處于重置狀態時，所述跟蹤器對應的跟蹤框與所述檢測器對應的異物框未匹配，所述第二線程中的跟蹤器輸出新的目標內窺鏡圖像幀。

8.根據權利要求7所述的方法，其特征在于，所述方法還包括：

通過所述第一線程中的檢測器，確定述目標內窺鏡圖像幀中存在異物框時，確定相應的邊框回歸參數；

通過所述邊框回歸參數激活所述第二線程中的跟蹤器。

9.根據權利要求8所述的方法，其特征在于，所述方法還包括：

當所述第二線程中的跟蹤器被激活時，為所述當前目標內窺鏡圖像幀中的異物分配目標標識；

當所述第二線程中的跟蹤器在激活狀態、繼續跟蹤狀態以及重置狀態時的目標內窺鏡圖像幀中的異物統一時，對所述目標標識進行初始化，以實現對當前目標內窺鏡圖像幀中的異物進行連續跟蹤。