[發(fā)明專利]基于雙攝像頭的圖像處理裝置及方法

有效

• 申請?zhí)枺?/td>: 201710312832.0
• 申請日: 2017-05-05
• 公開（公告）號: CN107087107B
• 公開（公告）日: 2019-11-29
• 發(fā)明（設計）人: 韓銀和;許浩博;王穎
• 申請（專利權(quán)）人: 中國科學院計算技術(shù)研究所
• 主分類號: H04N5/232
• 分類號: H04N5/232
• 代理公司: 11280 北京泛華偉業(yè)知識產(chǎn)權(quán)代理有限公司
• 代理人: 王勇<國際申請>=<國際公布>=<進入國

1.一種基于雙攝像頭的圖像處理裝置，包括第一攝像頭、第二攝像頭、控制模塊和處理模塊，其中，所述第一攝像頭用于拍攝整體圖像，所述整體圖像包括指定目標D；所述控制模塊用于發(fā)送拍攝指令到所述第二攝像頭；所述第二攝像頭用于按照接收的所述拍攝指令拍攝局部圖像，所述局部圖像包括指定目標D'；所述處理模塊用于將所述整體圖像與所述局部圖像進行圖像融合，使所述指定目標D'替代所述指定目標D，獲得包含所述指定目標D'的新的完整圖像；并且其中，所述拍攝指令包含所述第一攝像頭的拍攝信息和所述整體圖像的圖像信息；所述指定目標D和所述指定目標D'為同一對象；

其中所述整體圖像的圖像信息是所述整體圖像中包含指定目標D的區(qū)域圖形的信息，所述區(qū)域圖形的信息是所述處理模塊采用下列步驟識別的所述區(qū)域圖形的中心位置信息：

a1)將包含指定目標D的整體圖像1分割為n個區(qū)域，利用各區(qū)域內(nèi)的灰度平均值，計算每個區(qū)域與其相鄰區(qū)域的相似度，獲得由相似度數(shù)值組成的二維數(shù)組；

a2)從步驟a1)獲得的二維數(shù)組中找出相似度最大值及其所對應的兩個區(qū)域，并將這兩個區(qū)域合并，將合并的區(qū)域記為m₀；計算剩余n-1個區(qū)域內(nèi)的相似度，并將相似度最高的兩個區(qū)域合并，重復上述步驟，直至合并為同一個區(qū)域，得到n-1個區(qū)域(m₀,m₁……m_n-1)；

a3)將步驟a2)得到的n-1個區(qū)域調(diào)整為像素n*n的區(qū)域圖形A，若該區(qū)域為不規(guī)則圖形，可采用填充像素的方式使之成為n*n大小，其中，填充像素值可為該區(qū)域灰度平均值；

a4)利用深度神經(jīng)網(wǎng)絡識別步驟a3)獲得的區(qū)域圖形A中是否包含指定目標D，若區(qū)域圖形A與指定目標D的區(qū)域重合度IOU大于設定的閾值，則認定該區(qū)域圖形A內(nèi)包含該指定目標，并計算該區(qū)域圖形A的中心點坐標，其中上述重合度IOU定義為：

IOU＝S_重合/(S_區(qū)域A+S_區(qū)域D-S_重合)

其中，S_重合代表重合部分面積，S_區(qū)域A代表區(qū)域圖形A的面積，S_區(qū)域D代表指定目標D的面積。

2.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于，所述處理模塊還用于將所述指定目標D'去除部分像素點以匹配所述整體圖像。

3.根據(jù)權(quán)利要求1或2所述的圖像處理裝置，其特征在于，所述局部圖像可以是一個或多個。