[發(fā)明專利]應(yīng)用于小目標(biāo)檢測的特征融合方法、裝置、設(shè)備以及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011021013.9
• 申請日: 2020-09-25
• 公開（公告）號: CN111967538A
• 公開（公告）日: 2020-11-20
• 發(fā)明（設(shè)計(jì)）人: 武秉泓;楊葉輝;許言午;王磊
• 申請（專利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類號: G06K9/62
• 分類號: G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京英賽嘉華知識產(chǎn)權(quán)代理有限責(zé)任公司 11204
• 代理人: 王達(dá)佐;馬曉亞

本申請實(shí)施例公開了應(yīng)用于小目標(biāo)檢測的特征融合方法、裝置、設(shè)備以及存儲介質(zhì)，涉及計(jì)算機(jī)視覺技術(shù)領(lǐng)域，可應(yīng)用于醫(yī)療影像分析。該應(yīng)用于小目標(biāo)檢測的特征融合方法的一具體實(shí)施方式包括：獲取Backbone網(wǎng)絡(luò)中多個卷積層輸出的特征圖；對所述特征圖進(jìn)行卷積運(yùn)算，得到多個特征層的輸入特征圖，其中，所述多個特征層表征所述輸入特征圖的多個分辨率；對每個特征層的所述輸入特征圖進(jìn)行密集鏈接特征金字塔特征融合，得到該特征層的輸出特征圖，由于沒有引入額外的卷積層進(jìn)行特征融合，因此可以在不額外增加參數(shù)的情況下增強(qiáng)小目標(biāo)檢測性能，在具有計(jì)算資源約束的情況下提升小目標(biāo)的檢測能力。

技術(shù)領(lǐng)域

本申請涉及計(jì)算機(jī)技術(shù)領(lǐng)域，具體涉及計(jì)算機(jī)視覺技術(shù)領(lǐng)域，可應(yīng)用于醫(yī)療影像分析，尤其涉及應(yīng)用于小目標(biāo)檢測的特征融合方法、裝置、設(shè)備以及存儲介質(zhì)。

背景技術(shù)

智能眼底篩查系統(tǒng)是指在無專業(yè)眼科醫(yī)生經(jīng)驗(yàn)指示或引導(dǎo)的前提下，系統(tǒng)自主地根據(jù)受檢者的眼底照片信息、輔助參考其相關(guān)身體狀況(如血壓、血糖等)而作出的符合醫(yī)生診斷結(jié)果的智能診斷系統(tǒng)。

智能眼底篩查系統(tǒng)可以采用本地終端自主決策的方式，即直接將待篩查的照片在本地的智能終端上進(jìn)行診斷決策。這種診斷方式不依賴于網(wǎng)絡(luò)環(huán)境可直接反饋診斷結(jié)果，但可能對智能診斷系統(tǒng)的復(fù)雜度以及有限算力下的實(shí)時性產(chǎn)生了巨大的考驗(yàn)。眼底疾病的早期篩查(如糖尿病視網(wǎng)膜病變1級)往往依賴于微小目標(biāo)的檢測(微血管瘤、出血斑)，所以如何在資源受限的情況下盡量提高細(xì)小目標(biāo)的檢出精度，具有十分重要的意義。

發(fā)明內(nèi)容

為了解決上述背景技術(shù)部分提到的一個或多個技術(shù)問題，本申請實(shí)施例提供了應(yīng)用于小目標(biāo)檢測的特征融合方法、裝置、設(shè)備以及存儲介質(zhì)。

第一方面，本申請實(shí)施例提供了應(yīng)用于小目標(biāo)檢測的特征融合方法，包括：獲取Backbone網(wǎng)絡(luò)中多個卷積層輸出的特征圖；對所述特征圖進(jìn)行卷積運(yùn)算，得到多個特征層的輸入特征圖，其中，所述多個特征層表征所述輸入特征圖的多個分辨率；對每個特征層的所述輸入特征圖進(jìn)行密集鏈接特征金字塔特征融合，得到該特征層的輸出特征圖，其中，所述進(jìn)行密集鏈接特征金字塔特征融合包括：對第i個特征層的輸入特征圖以及低于第i個特征層對應(yīng)分辨率的其它特征層的輸入特征圖進(jìn)行采樣，其中，i為正整數(shù)；將采樣后的其它特征層的輸入特征圖縮放至與第i個特征層的輸入特征圖同一尺寸大小；將縮放后的其它特征層的輸入特征圖與第i個特征層的輸入特征圖逐個疊加，并將疊加后的最終結(jié)果作為第i個特征層的輸出特征圖。

第二方面，本申請實(shí)施例提供了應(yīng)用于小目標(biāo)檢測的特征融合裝置，包括：獲取模塊，被配置為獲取Backbone網(wǎng)絡(luò)中多個卷積層輸出的特征圖；維度壓縮模塊，被配置為對所述特征圖進(jìn)行卷積運(yùn)算，得到多個特征層的輸入特征圖，其中，所述多個特征層表征所述輸入特征圖的多個分辨率；密集鏈接特征金字塔特征融合模塊，被配置為對每個特征層的所述輸入特征圖進(jìn)行密集鏈接特征金字塔特征融合，得到該特征層的輸出特征圖，其中，所述進(jìn)行密集鏈接特征金字塔特征融合包括：對第i個特征層的輸入特征圖以及低于第i個特征層對應(yīng)分辨率的其它特征層的輸入特征圖進(jìn)行采樣，其中，i為正整數(shù)；將采樣后的其它特征層的輸入特征圖縮放至與第i個特征層的輸入特征圖同一尺寸大小；將縮放后的其它特征層的輸入特征圖與第i個特征層的輸入特征圖逐個疊加，并將疊加后的最終結(jié)果作為第i個特征層的輸出特征圖。

第三方面，本申請實(shí)施例提出了一種電子設(shè)備，包括：至少一個處理器；以及與至少一個處理器通信連接的存儲器；其中，存儲器存儲有可被至少一個處理器執(zhí)行的指令，指令被至少一個處理器執(zhí)行，以使至少一個處理器能夠執(zhí)行如第一方面中任一實(shí)現(xiàn)方式描述的方法。

第四方面，本申請實(shí)施例提出了一種存儲有計(jì)算機(jī)指令的非瞬時計(jì)算機(jī)可讀存儲介質(zhì)，計(jì)算機(jī)指令用于使計(jì)算機(jī)執(zhí)行如第一方面中任一實(shí)現(xiàn)方式描述的方法。