[發(fā)明專利]基于深度學習的氣管鏡圖像特征識別系統(tǒng)及方法在審
| 申請?zhí)枺?/td> | 202011501259.6 | 申請日： | 2020-12-18 |
| 公開（公告）號： | CN112614566A | 公開（公告）日： | 2021-04-06 |
| 發(fā)明（設計）人： | 孫加源;劉奇為;李營;謝芳芳;吳煒進 | 申請（專利權(quán)）人： | 上海市胸科醫(yī)院;上海鏡影信息科技有限公司 |
| 主分類號： | G16H30/20 | 分類號： | G16H30/20;G16H40/63;G09B23/28;G06K9/00;G06K9/62;G06T7/00;G06T7/73;G06F16/51 |
| 代理公司： | 上海雙霆知識產(chǎn)權(quán)代理事務所(普通合伙) 31415 | 代理人： | 張驥 |
| 地址： | 200030 *** | 國省代碼： | 上海;31 |
| 權(quán)利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關(guān)鍵詞： | 基于 深度 學習 氣管 圖像 特征 識別 系統(tǒng) 方法 | ||
1.一種基于深度學習的氣管鏡圖像特征識別系統(tǒng)，其特征在于，包括：
圖像監(jiān)測模塊，被配置為用于接收氣管鏡所采集的圖像，并將所接收的氣管鏡圖像傳遞給深度學習模型；
深度學習模型，包括模型一、模型二、模型三；
所述模型一為根據(jù)合格圖像庫訓練完成的卷積神經(jīng)網(wǎng)絡模型，被配置為用于接收來自于圖像監(jiān)測模塊的氣管鏡圖像，模型一對該氣管鏡圖像進行識別，判斷其是否為合格圖像，若不合格，則模型一將該氣管鏡圖像判斷為“不合格圖像”作為模型一識別結(jié)果傳輸給圖像演示模塊，并繼續(xù)接收來自于圖像監(jiān)測模塊的氣管鏡圖像；若合格，則模型一將該氣管鏡圖像判斷為“合格圖像”并傳輸給深度學習模型的模型二；
所述模型二為根據(jù)體內(nèi)/體外圖像庫訓練完成的卷積神經(jīng)網(wǎng)絡模型，被配置為用于接收來自于模型一的合格圖像，模型二對該合格圖像進行識別，判斷其是否在體內(nèi)，若識別為體外圖像，則模型二將該合格圖像判斷為“體外圖像”作為模型二識別結(jié)果傳輸給圖像演示模塊，并繼續(xù)接收來自于模型一的合格圖像；若識別為體內(nèi)圖像，則模型二將該合格圖像判斷為“體內(nèi)圖像”并傳輸給深度學習模型的模型三；
所述模型三為根據(jù)部位圖像庫訓練完成的卷積神經(jīng)網(wǎng)絡模型，被配置為用于接收來自于模型二的體內(nèi)圖像，模型三對該體內(nèi)圖像進行部位識別，識別該體內(nèi)圖像的具體部位并進行標注，得到部位標注圖像作為模型三識別結(jié)果，并將該識別結(jié)果傳輸給圖像演示模塊；以及
圖像演示模塊，被配置為將來自于深度學習模型的所述模型一識別結(jié)果、模型二識別結(jié)果和模型三識別結(jié)果進行顯示。
2.根據(jù)權(quán)利要求1所述的基于深度學習的氣管鏡圖像特征識別系統(tǒng)，其特征在于，所述識別系統(tǒng)還包括表示氣管各部位的部位顯示圖像；圖像演示模塊調(diào)用部位顯示圖像，將模型三識別結(jié)果與部位顯示圖像進行疊加展示。
3.一種基于深度學習的氣管鏡圖像特征識別方法，其特征在于，包括以下步驟：
步驟S1，氣管鏡設備采集氣管鏡圖像；
步驟S2，圖像監(jiān)測模塊接收來自于氣管鏡設備所采集的氣管鏡圖像，并上傳至深度學習模型；
步驟S3，深度學習模型的模型一接收來自于圖像監(jiān)測模塊的氣管鏡圖像，模型一對該氣管鏡圖像進行識別，判斷其是否為合格圖像，若不合格，則模型一將該氣管鏡圖像判斷為“不合格圖像”作為模型一識別結(jié)果傳輸給圖像演示模塊，并繼續(xù)接收來自于圖像監(jiān)測模塊的氣管鏡圖像；若合格，則模型一將該氣管鏡圖像判斷為“合格圖像”并傳輸給深度學習模型的模型二；
步驟S4，深度學習模型的模型二接收來自于模型一的合格圖像，模型二對該合格圖像進行識別，判斷其是否在體內(nèi)，若識別為體外圖像，則模型二將該合格圖像判斷為“體外圖像”作為模型二識別結(jié)果傳輸給圖像演示模塊，并繼續(xù)接收來自于模型一的合格圖像；若識別為體內(nèi)圖像，則模型二將該合格圖像判斷為“體內(nèi)圖像”并傳輸給深度學習模型的模型三；
步驟S5，深度學習模型的模型三接收來自于模型二的體內(nèi)圖像，模型三對該體內(nèi)圖像進行部位識別，識別該體內(nèi)圖像的具體部位并進行標注，得到部位標注圖像作為模型三識別結(jié)果，并將該識別結(jié)果傳輸給圖像演示模塊；
步驟S6，圖像演示模塊接收來自于模型一的不合格圖像、來自于模型二的體外圖像以及來自于模型三的部位標注圖像并進行顯示；圖像演示模塊在顯示來自于模型三的部位標注圖像的同時，調(diào)用表示各部位的部位圖像，以所述部位圖像作為背景，將部位標注圖像與部位圖像進行匹配判斷；當部位標注圖像與部位圖像的某一部位相匹配，且該部位未覆蓋有部位標注圖像，則將部位標注圖像與部位圖像進行疊加展示；當部位標注圖像與部位圖像的某一部位相匹配，且該部位已覆蓋有部位標注圖像，則重復步驟S5；
步驟S7，判斷部位圖像上所有部位是否全部覆蓋有部位標注圖像，如31個部位全部覆蓋有部位標注圖像，則結(jié)束，此時已完成氣管鏡檢查操作；如31個部位中至少有一個部位未覆蓋有部位標注圖像，則重復步驟S1。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息，商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于上海市胸科醫(yī)院;上海鏡影信息科技有限公司，未經(jīng)上海市胸科醫(yī)院;上海鏡影信息科技有限公司許可，擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作，請聯(lián)系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202011501259.6/1.html，轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
