[發(fā)明專利]圖像處理方法、裝置、存儲介質(zhì)及攝像裝置

在審

• 申請?zhí)枺?/td>: 202010085056.7
• 申請日: 2020-02-10
• 公開（公告）號: CN111294512A
• 公開（公告）日: 2020-06-16
• 發(fā)明（設(shè)計）人: 溫江濤;韓宇星;李陽昊;谷嘉文;張睿
• 申請（專利權(quán)）人: 深圳市鉑巖科技有限公司
• 主分類號: H04N5/232
• 分類號: H04N5/232;G06N3/04
• 代理公司: 北京英創(chuàng)嘉友知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11447
• 代理人: 魏云鹿

本公開涉及一種圖像處理方法、裝置、存儲介質(zhì)及攝像裝置，所述方法應(yīng)用于攝像裝置，包括：采集目標(biāo)圖像；通過預(yù)先設(shè)置的目標(biāo)卷積層獲取所述目標(biāo)圖像的目標(biāo)特征圖；其中，所述目標(biāo)卷積層包括卷積神經(jīng)網(wǎng)絡(luò)的多層卷積層中的至少一個；輸出所述目標(biāo)特征圖。也就是說，在攝像裝置采集到目標(biāo)圖像后，可以通過攝像裝置中預(yù)先集成的目標(biāo)卷積層對該目標(biāo)圖像進行處理，得到目標(biāo)特征圖。這樣，攝像裝置只需傳輸該目標(biāo)特征圖，使得傳輸?shù)臄?shù)據(jù)量減少，從而可以減小傳輸延遲，并節(jié)省圖像傳輸所需的帶寬。

技術(shù)領(lǐng)域

本公開涉及圖像處理技術(shù)領(lǐng)域，具體地，涉及一種圖像處理方法、裝置、存儲介質(zhì)及攝像裝置。

背景技術(shù)

隨著SPAD(Single-Photon Avalanche Diode，單光子雪崩二極管)在標(biāo)準(zhǔn)CMOS(Complementary Metal Oxide Semiconductor，互補金屬氧化物半導(dǎo)體)技術(shù)中的發(fā)展和SPAD陣列的推出，SPAD圖像傳感器在目標(biāo)識別、目標(biāo)分類、目標(biāo)檢測等領(lǐng)域得到廣泛應(yīng)用。

相關(guān)技術(shù)中，通過SPAD相機采集并輸出目標(biāo)圖像之后，通過重建的方法得到該目標(biāo)圖像的重建圖，并將該重建圖輸入特定的卷積神經(jīng)網(wǎng)絡(luò)中，得到最終的輸出結(jié)果。但是，由于該目標(biāo)圖像的數(shù)據(jù)量較大，SPAD相機傳輸該目標(biāo)圖像會有較大的延遲，并且大數(shù)據(jù)量傳輸對帶寬的需求也比較高。

發(fā)明內(nèi)容

為了解決上述問題，本公開提供一種圖像處理方法、裝置、存儲介質(zhì)及攝像裝置。

第一方面，本公開提供一種圖像處理方法，應(yīng)用于攝像裝置，所述方法包括：采集目標(biāo)圖像；通過預(yù)先設(shè)置的目標(biāo)卷積層獲取所述目標(biāo)圖像的目標(biāo)特征圖；其中，所述目標(biāo)卷積層包括卷積神經(jīng)網(wǎng)絡(luò)的多層卷積層中的至少一個；輸出所述目標(biāo)特征圖。

可選地，所述目標(biāo)卷積層通過以下方式確定：獲取所述卷積神經(jīng)網(wǎng)絡(luò)的多層卷積層中每個所述卷積層輸出的特征圖的數(shù)據(jù)量；根據(jù)所述數(shù)據(jù)量，從多層所述卷積層中確定所述目標(biāo)卷積層。

可選地，所述根據(jù)所述數(shù)據(jù)量，從多層所述卷積層中確定所述目標(biāo)卷積層包括：從所述數(shù)據(jù)量中，獲取小于或者等于預(yù)設(shè)數(shù)據(jù)量閾值的目標(biāo)數(shù)據(jù)量；將所述目標(biāo)數(shù)據(jù)量對應(yīng)的待確定卷積層以及多層所述卷積層中在所述待確定卷積層之前的卷積層作為目標(biāo)卷積層。

可選地，在所述輸出所述目標(biāo)特征圖之后，所述方法還包括：從多層所述卷積層中，獲取所述目標(biāo)卷積層的下一卷積層，并將所述目標(biāo)特征圖作為所述目標(biāo)卷積層的下一卷積層的輸入。

第二方面，本公開提供一種圖像處理裝置，應(yīng)用于攝像裝置，所述裝置包括：采集模塊，用于采集目標(biāo)圖像；特征圖獲取模塊，用于通過預(yù)先設(shè)置的目標(biāo)卷積層獲取所述目標(biāo)圖像的目標(biāo)特征圖；其中，所述目標(biāo)卷積層包括卷積神經(jīng)網(wǎng)絡(luò)的多層卷積層中的至少一個；輸出模塊，用于輸出所述目標(biāo)特征圖。

可選地，所述特征圖獲取模塊，具體用于：獲取所述卷積神經(jīng)網(wǎng)絡(luò)的多層卷積層中每個所述卷積層輸出的特征圖的數(shù)據(jù)量；根據(jù)所述數(shù)據(jù)量，從多層所述卷積層中確定所述目標(biāo)卷積層。

可選地，所述特征圖獲取模塊，還用于：從所述數(shù)據(jù)量中，獲取小于或者等于預(yù)設(shè)數(shù)據(jù)量閾值的目標(biāo)數(shù)據(jù)量；將所述目標(biāo)數(shù)據(jù)量對應(yīng)的待確定卷積層以及多層所述卷積層中在所述待確定卷積層之前的卷積層作為目標(biāo)卷積層。

可選地，所述裝置還包括：卷積層獲取模塊，用于從多層所述卷積層中，獲取所述目標(biāo)卷積層的下一卷積層，并將所述目標(biāo)特征圖作為所述目標(biāo)卷積層的下一卷積層的輸入。

第三方面，本公開提供一種計算機可讀存儲介質(zhì)，其上存儲有計算機程序，該程序被處理器執(zhí)行時實現(xiàn)本公開第一方面所述方法的步驟。

第四方面，本公開提供一種攝像裝置，包括：存儲器，其上存儲有計算機程序；處理器，用于執(zhí)行所述存儲器中的所述計算機程序，以實現(xiàn)本公開第一方面所述方法的步驟。