[發(fā)明專利]內(nèi)窺鏡圖像的處理方法、裝置、系統(tǒng)及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201811276885.2
• 申請(qǐng)日: 2018-10-30
• 公開（公告）號(hào): CN109523522B
• 公開（公告）日: 2023-05-09
• 發(fā)明（設(shè)計(jì)）人: 付星輝;孫鐘前;楊巍
• 申請(qǐng)（專利權(quán)）人: 騰訊醫(yī)療健康（深圳）有限公司
• 主分類號(hào): G06T7/00
• 分類號(hào): G06T7/00;G06N3/0464;G06N3/08
• 代理公司: 北京德琦知識(shí)產(chǎn)權(quán)代理有限公司 11018
• 代理人: 郭曼;王琦

1.一種內(nèi)窺鏡圖像的處理方法，其特征在于，包括：

獲取針對(duì)上消化道部位的第一內(nèi)窺鏡圖像；根據(jù)所述上消化道部位的結(jié)構(gòu)以及預(yù)設(shè)的診斷目標(biāo)，確定至少一個(gè)備選器官類別；通過從所述第一內(nèi)窺鏡圖像中過濾出具備備選器官特征的圖像，獲取每個(gè)備選器官類別所對(duì)應(yīng)的標(biāo)簽圖像；

創(chuàng)建用于預(yù)測(cè)內(nèi)窺鏡圖像的深度卷積網(wǎng)絡(luò)，并對(duì)所述第一內(nèi)窺鏡圖像進(jìn)行變換，得到變換后的至少一個(gè)第二內(nèi)窺鏡圖像，其中，所做的變換的數(shù)量根據(jù)備選器官類別的數(shù)量來確定；

在訓(xùn)練所述深度卷積網(wǎng)絡(luò)時(shí)，將所述第一內(nèi)窺鏡圖像和所述至少一個(gè)第二內(nèi)窺鏡圖像作為輸入樣本，將各個(gè)標(biāo)簽圖像作為理想的輸出樣本，確定所述深度卷積網(wǎng)絡(luò)的訓(xùn)練參數(shù)，包括：

初始化所述第一內(nèi)窺鏡圖像所屬器官類別的中心特征，其中，將所屬器官類別的標(biāo)簽圖像的平均值作為所屬器官類別的中心特征的初始值；

并迭代執(zhí)行如下處理：獲取所述深度卷積網(wǎng)絡(luò)中處理層處理所述第一內(nèi)窺鏡圖像得到的處理后特征；分別計(jì)算所述處理后特征以及每個(gè)第二內(nèi)窺鏡圖像的特征之間的第一距離；計(jì)算所述第一內(nèi)窺鏡圖像的特征以及所述第一內(nèi)窺鏡圖像對(duì)應(yīng)的中心特征之間的第二距離；根據(jù)所述第一距離和所述第二距離，計(jì)算此次迭代時(shí)損失函數(shù)的取值；根據(jù)所述損失函數(shù)的取值確定訓(xùn)練過程并未結(jié)束時(shí)，更新所述訓(xùn)練參數(shù)和所述中心特征；及，

獲取待檢用戶的當(dāng)前內(nèi)窺鏡圖像，使用所述深度卷積網(wǎng)絡(luò)并基于所述訓(xùn)練參數(shù)對(duì)所述當(dāng)前內(nèi)窺鏡圖像進(jìn)行預(yù)測(cè)，確定出所述當(dāng)前內(nèi)窺鏡圖像在所述上消化道部位中所對(duì)應(yīng)的器官類別。

2.根據(jù)權(quán)利要求1所述的方法，其中，所述至少一個(gè)備選器官類別包括：咽部、食管、胃部、賁門、十二指腸。

3.根據(jù)權(quán)利要求1所述的方法，其中，所述深度卷積網(wǎng)絡(luò)包括輸入層、所述處理層和分類層，所述創(chuàng)建用于預(yù)測(cè)內(nèi)窺鏡圖像的深度卷積網(wǎng)絡(luò)包括：

在所述處理層中加入至少一個(gè)密集連接層，所述密集連接層包括多個(gè)連接子層；

對(duì)于每個(gè)連接子層，將處于該連接子層之前的其他連接子層所輸出的特征作為該連接子層的輸入。

4.根據(jù)權(quán)利要求3所述的方法，其中，所述在所述處理層中加入至少一個(gè)密集連接層包括：

在相鄰兩個(gè)密集連接層之間加入過渡層，并根據(jù)預(yù)設(shè)的預(yù)測(cè)精度設(shè)置該過渡層的特征壓縮比的數(shù)值。

5.根據(jù)權(quán)利要求1所述的方法，其中，所述深度卷積網(wǎng)絡(luò)包括輸入層、所述處理層和分類層，所述方法進(jìn)一步包括：

預(yù)先構(gòu)建用于訓(xùn)練所述深度卷積網(wǎng)絡(luò)的所述損失函數(shù)；

當(dāng)所述損失函數(shù)的取值達(dá)到閾值時(shí)，確定訓(xùn)練過程結(jié)束。

6.根據(jù)權(quán)利要求5所述的方法，進(jìn)一步包括：

根據(jù)所述第一內(nèi)窺鏡圖像的數(shù)量、預(yù)測(cè)精度以及訓(xùn)練過程中對(duì)超參數(shù)的調(diào)整，確定出所述深度卷積網(wǎng)絡(luò)中所述處理層和所述分類層的參數(shù)。

7.根據(jù)權(quán)利要求1至6中任一項(xiàng)所述的方法，其中，對(duì)所述第一內(nèi)窺鏡圖像所做的變換包括剪裁、旋轉(zhuǎn)、亮度抖動(dòng)、顏色抖動(dòng)、對(duì)比度抖動(dòng)中的至少一項(xiàng)。