[發(fā)明專利]圖像處理方法、目標(biāo)檢測裝置、機(jī)器視覺設(shè)備和存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010537684.4
• 申請(qǐng)日: 2020-06-12
• 公開（公告）號(hào): CN113807998A
• 公開（公告）日: 2021-12-17
• 發(fā)明（設(shè)計(jì)）人: 彭海勇;曹常鋒;劉新陽;李火林;田萬廷
• 申請(qǐng)（專利權(quán)）人: 深圳市中興微電子技術(shù)有限公司
• 主分類號(hào): G06T1/20
• 分類號(hào): G06T1/20;G06T1/60;G06N3/04
• 代理公司: 北京天昊聯(lián)合知識(shí)產(chǎn)權(quán)代理有限公司 11112
• 代理人: 馮建基;姜春咸

1.一種圖像處理方法，其特征在于，包括：

對(duì)待檢測的圖像進(jìn)行預(yù)處理獲得輸入特征圖，并提取所述輸入特征圖的第一深度并行度和縱向并行度；

依據(jù)所述第一深度并行度和所述縱向并行度對(duì)所述輸入特征圖進(jìn)行向量化處理，獲得N個(gè)輸入向量數(shù)據(jù)，其中，N為大于或等于1的整數(shù)；

使用所述N個(gè)輸入向量數(shù)據(jù)與卷積核同時(shí)進(jìn)行卷積運(yùn)算，獲得輸出特征圖。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述輸出特征圖的第二深度并行度和所述卷積核的數(shù)量相同，所述第一深度并行度和所述第二深度并行度是依據(jù)并行度模型確定的并行度，所述并行度模型是依據(jù)硬件資源和內(nèi)存帶寬模型確定的模型。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述使用所述N個(gè)輸入向量數(shù)據(jù)與卷積核同時(shí)進(jìn)行卷積運(yùn)算，獲得輸出特征圖，包括：

使用所述N個(gè)輸入向量數(shù)據(jù)與卷積核同時(shí)進(jìn)行卷積運(yùn)算，獲得輸出向量數(shù)據(jù)；

利用乘累加樹對(duì)所述輸出向量數(shù)據(jù)和對(duì)應(yīng)的權(quán)重參數(shù)進(jìn)行處理，獲得所述輸出特征圖。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述利用乘累加樹對(duì)所述輸出向量數(shù)據(jù)和對(duì)應(yīng)的權(quán)重參數(shù)進(jìn)行處理，獲得所述輸出特征圖，包括：

依據(jù)所述輸出向量數(shù)據(jù)的數(shù)據(jù)位寬和所述權(quán)重參數(shù)，對(duì)M個(gè)所述輸出向量數(shù)據(jù)進(jìn)行點(diǎn)對(duì)點(diǎn)的乘累加運(yùn)算，獲得第一累加結(jié)果，其中，M為大于或等于1的整數(shù)；

將所述第一累加結(jié)果緩存到移位緩存區(qū)中；

依據(jù)所述移位緩存區(qū)的深度，對(duì)所述第一累加結(jié)果進(jìn)行局部累加，獲得第二累加結(jié)果；

將所述第二累加結(jié)果緩存到延時(shí)緩存區(qū)中；

對(duì)所述延時(shí)緩存中的數(shù)據(jù)再次進(jìn)行相加運(yùn)算，獲得所述輸出特征圖。

5.根據(jù)權(quán)利要求3所述的方法，其特征在于，在所述利用乘累加樹對(duì)所述輸出向量數(shù)據(jù)和對(duì)應(yīng)的權(quán)重參數(shù)進(jìn)行處理，獲得所述輸出特征圖的步驟之后，還包括：

將所述輸出特征圖緩存至輸出緩存區(qū)，其中，所述輸出緩存區(qū)的存儲(chǔ)形式包括多端口加載模式。

6.根據(jù)權(quán)利要求3所述的方法，其特征在于，在所述利用乘累加樹對(duì)所述輸出向量數(shù)據(jù)和對(duì)應(yīng)的權(quán)重參數(shù)進(jìn)行處理，獲得所述輸出特征圖的步驟之后，還包括：

依據(jù)所述第一深度并行度，對(duì)所述輸出特征圖進(jìn)行重排，獲得重排結(jié)果；

將所述重排結(jié)果輸出至輸出緩存區(qū)。

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述將所述重排結(jié)果輸出至輸出緩存區(qū)，包括：

以多端口存儲(chǔ)數(shù)據(jù)的形式，將所述重排結(jié)果輸出至所述輸出緩存區(qū)。

8.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述將所述重排結(jié)果輸出至輸出緩存區(qū)，包括：

依據(jù)所述第一深度并行度對(duì)所述重排結(jié)果進(jìn)行池化處理，獲得池化后的結(jié)果；

將所述池化后的結(jié)果以開放運(yùn)算語言管道的形式輸出至所述輸出緩存區(qū)。

9.根據(jù)權(quán)利要求1至8中任一項(xiàng)所述的方法，其特征在于，在所述依據(jù)所述第一深度并行度和所述縱向并行度對(duì)所述輸入特征圖進(jìn)行向量化處理，獲得N個(gè)輸入向量數(shù)據(jù)的步驟之前，還包括：

將所述輸入特征圖緩存到輸入緩存區(qū)，其中，所述輸入緩存區(qū)的存儲(chǔ)形式至少包括折疊存儲(chǔ)形式、雙緩存機(jī)制和多端口加載形式中的任一項(xiàng)。

10.根據(jù)權(quán)利要求9所述的方法，其特征在于，所述將所述輸入特征圖緩存到輸入緩存區(qū)，包括：

若確定所述輸入緩存區(qū)的存儲(chǔ)形式是所述折疊形式，則依據(jù)數(shù)據(jù)步長將所述輸入特征圖對(duì)應(yīng)的數(shù)據(jù)進(jìn)行折疊，并將折疊后的數(shù)據(jù)存儲(chǔ)在所述輸入緩存區(qū)中，其中，所述數(shù)據(jù)步長是依據(jù)所述縱向并行度、所述輸入特征圖在縱向維度上進(jìn)行卷積運(yùn)算所需的數(shù)據(jù)長度和單位步長確定的值；

若確定所述輸入緩存區(qū)的存儲(chǔ)形式是所述多端口加載形式，依據(jù)端口的數(shù)量和加載一個(gè)數(shù)據(jù)緩沖區(qū)所需的時(shí)鐘周期數(shù)，將所述輸入特征圖對(duì)應(yīng)的數(shù)據(jù)緩存到所述輸入緩存區(qū)。