[發(fā)明專利]內(nèi)窺鏡圖像處理方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010076394.4
• 申請(qǐng)日: 2020-01-23
• 公開（公告）號(hào): CN111311557A
• 公開（公告）日: 2020-06-19
• 發(fā)明（設(shè)計(jì)）人: 章子健;尚鴻;孫鐘前
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號(hào): G06T7/00
• 分類號(hào): G06T7/00;G06T3/40;H04N21/44
• 代理公司: 北京派特恩知識(shí)產(chǎn)權(quán)代理有限公司 11270
• 代理人: 劉暉銘;張穎玲

1.一種內(nèi)窺鏡圖像處理方法，其特征在于，所述方法包括：

獲取內(nèi)窺鏡視頻流，其中，所述內(nèi)窺鏡視頻流攜帶原始內(nèi)窺鏡圖像；

通過第一線程對(duì)相應(yīng)視頻幀中的原始內(nèi)窺鏡圖像進(jìn)行檢測(cè)，將所述原始內(nèi)窺鏡圖像的檢測(cè)結(jié)果傳輸至集成器；

通過集成器根據(jù)所述原始內(nèi)窺鏡圖像的檢測(cè)結(jié)果，形成控制指令；

響應(yīng)于所述控制指令，通過第二線程對(duì)所述第二線程中的輸出結(jié)果進(jìn)行調(diào)整，以實(shí)現(xiàn)所述輸出結(jié)果與所述內(nèi)窺鏡視頻流的使用環(huán)境相匹配，其中，所述第一線程與所述第二線程為并行線程。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取內(nèi)窺鏡視頻流，包括：

提取目標(biāo)對(duì)象的病理信息中的內(nèi)窺鏡視頻幀；

對(duì)所述內(nèi)窺鏡視頻幀進(jìn)行清晰度提升處理；

將所述內(nèi)窺鏡視頻幀的格式由當(dāng)前編碼格式轉(zhuǎn)換為灰階值編碼格式，以獲得多個(gè)內(nèi)窺鏡視頻幀；

將所述內(nèi)窺鏡視頻幀進(jìn)行編碼壓縮，以形成視頻流狀態(tài)的內(nèi)窺鏡視頻流。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述將所述內(nèi)窺鏡視頻幀的格式由當(dāng)前編碼格式轉(zhuǎn)換為灰階值編碼格式，包括：

通過與目標(biāo)格式相匹配的編碼方法分別對(duì)所述內(nèi)窺鏡視頻幀進(jìn)行編碼壓縮；

寫入所述視頻幀對(duì)應(yīng)的序列號(hào)和生成所述圖像數(shù)據(jù)包對(duì)應(yīng)的時(shí)間戳，以生成與所述內(nèi)窺鏡視頻幀的格式相匹配的數(shù)據(jù)包；

對(duì)所述圖像數(shù)據(jù)包進(jìn)行拼接處理，以形成多個(gè)內(nèi)窺鏡視頻幀。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

將所述原始內(nèi)窺鏡圖像調(diào)整至目標(biāo)尺寸，生成標(biāo)準(zhǔn)內(nèi)窺鏡圖像幀；

對(duì)所述標(biāo)準(zhǔn)內(nèi)窺鏡圖像幀進(jìn)行過濾，刪除存在干擾的標(biāo)準(zhǔn)內(nèi)窺鏡圖像幀，以形成包括不同目標(biāo)內(nèi)窺鏡圖像幀的目標(biāo)內(nèi)窺鏡圖像幀。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述通過第一線程對(duì)相應(yīng)視頻幀中的原始內(nèi)窺鏡圖像進(jìn)行檢測(cè)，將所述原始內(nèi)窺鏡圖像的檢測(cè)結(jié)果傳輸至集成器，包括：

通過所述第一線程中的檢測(cè)器，檢測(cè)所存在的異物獲得分布于所述目標(biāo)內(nèi)窺鏡圖像幀的異物框，其中，所述異物框用于指示所述目標(biāo)內(nèi)窺鏡圖像幀中存在異物的區(qū)域；

基于所述異物框?qū)λ瞿繕?biāo)內(nèi)窺鏡圖像幀進(jìn)行過濾，以定位所述目標(biāo)內(nèi)窺鏡圖像幀中的病灶區(qū)域和所屬病灶類別；

將通過所述異物框定位的所述目標(biāo)內(nèi)窺鏡圖像幀中的病灶區(qū)域傳輸至集成器。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述方法還包括：

當(dāng)所述第一線程中的檢測(cè)器的檢測(cè)時(shí)間超出檢測(cè)時(shí)間閾值時(shí)，停止檢測(cè)當(dāng)前目標(biāo)內(nèi)窺鏡圖像幀，并獲取后續(xù)目標(biāo)內(nèi)窺鏡圖像幀進(jìn)行檢測(cè)。

7.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述第二線程響應(yīng)于所述控制指令，對(duì)所述第二線程中的輸出結(jié)果進(jìn)行調(diào)整，包括：

當(dāng)所述第二線程中的跟蹤器處于繼續(xù)跟蹤狀態(tài)時(shí)，所述跟蹤器對(duì)應(yīng)的跟蹤框與所述檢測(cè)器對(duì)應(yīng)的異物框相匹配，所述第二線程中的跟蹤器輸出當(dāng)前目標(biāo)內(nèi)窺鏡圖像幀；或者

當(dāng)所述第二線程中的跟蹤器處于重置狀態(tài)時(shí)，所述跟蹤器對(duì)應(yīng)的跟蹤框與所述檢測(cè)器對(duì)應(yīng)的異物框未匹配，所述第二線程中的跟蹤器輸出新的目標(biāo)內(nèi)窺鏡圖像幀。

8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述方法還包括：

通過所述第一線程中的檢測(cè)器，確定述目標(biāo)內(nèi)窺鏡圖像幀中存在異物框時(shí)，確定相應(yīng)的邊框回歸參數(shù)；

通過所述邊框回歸參數(shù)激活所述第二線程中的跟蹤器。

9.根據(jù)權(quán)利要求8所述的方法，其特征在于，所述方法還包括：

當(dāng)所述第二線程中的跟蹤器被激活時(shí)，為所述當(dāng)前目標(biāo)內(nèi)窺鏡圖像幀中的異物分配目標(biāo)標(biāo)識(shí)；

當(dāng)所述第二線程中的跟蹤器在激活狀態(tài)、繼續(xù)跟蹤狀態(tài)以及重置狀態(tài)時(shí)的目標(biāo)內(nèi)窺鏡圖像幀中的異物統(tǒng)一時(shí)，對(duì)所述目標(biāo)標(biāo)識(shí)進(jìn)行初始化，以實(shí)現(xiàn)對(duì)當(dāng)前目標(biāo)內(nèi)窺鏡圖像幀中的異物進(jìn)行連續(xù)跟蹤。