[發(fā)明專(zhuān)利]場(chǎng)景元素融合處理方法、裝置和設(shè)備及計(jì)算機(jī)存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202110176324.0
• 申請(qǐng)日: 2021-02-07
• 公開(kāi)（公告）號(hào): CN112529116B
• 公開(kāi)（公告）日: 2021-06-25
• 發(fā)明（設(shè)計(jì)）人: 李德輝
• 申請(qǐng)（專(zhuān)利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類(lèi)號(hào): G06K9/62
• 分類(lèi)號(hào): G06K9/62;G06N20/00
• 代理公司: 北京同達(dá)信恒知識(shí)產(chǎn)權(quán)代理有限公司 11291
• 代理人: 朱佳

1.一種場(chǎng)景元素融合處理方法，其特征在于，所述方法包括：

從包含多個(gè)源樣本圖片的源樣本圖片集合中，獲取包含目標(biāo)類(lèi)型元素的源樣本圖片，每一個(gè)源樣本圖片包含多種類(lèi)型的元素，且每一個(gè)元素設(shè)置了相應(yīng)的標(biāo)注信息；

根據(jù)標(biāo)注信息，從所述包含目標(biāo)類(lèi)型元素的源樣本圖片中，提取目標(biāo)類(lèi)型元素所在的目標(biāo)區(qū)域圖片；

從待進(jìn)行元素?cái)?shù)量增強(qiáng)的目標(biāo)樣本圖片集合中確定N個(gè)目標(biāo)樣本圖片；其中，每一個(gè)目標(biāo)樣本圖片包含多種類(lèi)型的元素，且每一個(gè)元素設(shè)置了相應(yīng)的標(biāo)注信息，所述目標(biāo)類(lèi)型元素為所述目標(biāo)樣本圖片集合中的缺失元素，或者所述目標(biāo)樣本圖片集合中所述目標(biāo)類(lèi)型元素的數(shù)量不大于其他類(lèi)型元素，各源樣本圖片與各目標(biāo)樣本圖片具有相同的場(chǎng)景類(lèi)型；

為所述N個(gè)目標(biāo)樣本圖片中的每一個(gè)目標(biāo)樣本圖片選取至少一個(gè)目標(biāo)區(qū)域圖片；

將所述至少一個(gè)目標(biāo)區(qū)域圖片融入相應(yīng)目標(biāo)樣本圖片中，獲得包含所述目標(biāo)類(lèi)型元素的N個(gè)目標(biāo)樣本圖片；

根據(jù)所述目標(biāo)類(lèi)型元素的元素類(lèi)型信息，以及融入每一個(gè)目標(biāo)樣本圖片的目標(biāo)區(qū)域圖片的坐標(biāo)信息，相應(yīng)更新每一個(gè)目標(biāo)樣本圖片的標(biāo)注文件；

基于所述N個(gè)目標(biāo)樣本圖片與所述目標(biāo)樣本圖片集合中其余M個(gè)目標(biāo)樣本圖片，構(gòu)成訓(xùn)練樣本圖片集合；其中，所述訓(xùn)練樣本圖片集合包含的各類(lèi)元素的元素?cái)?shù)量均衡；

其中，從待進(jìn)行元素?cái)?shù)量增強(qiáng)的目標(biāo)樣本圖片集合中確定N個(gè)目標(biāo)樣本圖片，包括：

根據(jù)所述目標(biāo)樣本圖片集合中各個(gè)目標(biāo)樣本圖片的標(biāo)注信息，確定所述目標(biāo)樣本圖片集合中標(biāo)注的所述目標(biāo)類(lèi)型元素的總數(shù)量以及其他類(lèi)型元素的總數(shù)量；

根據(jù)所述目標(biāo)類(lèi)型元素的總數(shù)量以及所述其他類(lèi)型元素的總數(shù)量，確定所述目標(biāo)樣本圖片集合需增加的所述目標(biāo)類(lèi)型元素的總數(shù)量；

根據(jù)需增加的所述目標(biāo)類(lèi)型元素的總數(shù)量，從所述目標(biāo)樣本圖片集合確定所述N個(gè)目標(biāo)樣本圖片；其中，所述N個(gè)目標(biāo)樣本圖片中各個(gè)目標(biāo)樣本圖片對(duì)應(yīng)的需增加的目標(biāo)類(lèi)型元素的數(shù)量之和，與需增加的所述目標(biāo)類(lèi)型元素的總數(shù)量相同。

2.如權(quán)利要求1所述的方法，其特征在于，根據(jù)標(biāo)注信息，從所述包含目標(biāo)類(lèi)型元素的源樣本圖片中，提取目標(biāo)類(lèi)型元素所在的目標(biāo)區(qū)域圖片，包括：

針對(duì)各個(gè)源樣本圖片的標(biāo)注文件，獲取相應(yīng)的標(biāo)注信息；

針對(duì)獲得的各個(gè)標(biāo)注信息，分別執(zhí)行以下操作：確定獲得的一個(gè)標(biāo)注信息中指示的元素類(lèi)型包含所述目標(biāo)類(lèi)型元素時(shí)，根據(jù)所述一個(gè)標(biāo)注信息指示的所述目標(biāo)類(lèi)型元素的坐標(biāo)信息，從相應(yīng)的源樣本圖片中截取所述目標(biāo)類(lèi)型元素對(duì)應(yīng)的目標(biāo)區(qū)域圖片。

3.如權(quán)利要求1所述的方法，其特征在于，針對(duì)一個(gè)目標(biāo)樣本圖片，為所述一個(gè)目標(biāo)樣本圖片選取至少一個(gè)目標(biāo)區(qū)域圖片，包括：

根據(jù)所述需增加的所述目標(biāo)類(lèi)型元素的總數(shù)量，為所述一個(gè)目標(biāo)樣本圖片選取相應(yīng)數(shù)量的目標(biāo)區(qū)域圖片；其中，所述N個(gè)目標(biāo)樣本圖片中各個(gè)目標(biāo)樣本圖片需增加的所述目標(biāo)類(lèi)型元素的數(shù)量之和與需增加的所述目標(biāo)類(lèi)型元素的總數(shù)量相同；或者，

為所述一個(gè)目標(biāo)樣本圖片選取設(shè)定數(shù)量的目標(biāo)區(qū)域圖片。

4.如權(quán)利要求1所述的方法，其特征在于，從待進(jìn)行元素?cái)?shù)量增強(qiáng)的目標(biāo)樣本圖片集合中確定N個(gè)目標(biāo)樣本圖片，包括：

根據(jù)所述目標(biāo)樣本圖片集合中各個(gè)目標(biāo)樣本圖片的標(biāo)注信息，分別確定所述各個(gè)目標(biāo)樣本圖片各自對(duì)應(yīng)的所述目標(biāo)類(lèi)型元素的數(shù)量；

將所述目標(biāo)類(lèi)型元素的數(shù)量不大于預(yù)設(shè)數(shù)量閾值的目標(biāo)樣本圖片確定為所述N個(gè)目標(biāo)樣本圖片。

5.如權(quán)利要求1所述的方法，其特征在于，將所述至少一個(gè)目標(biāo)區(qū)域圖片融入相應(yīng)目標(biāo)樣本圖片中，獲得包含所述目標(biāo)類(lèi)型元素的N個(gè)目標(biāo)樣本圖片，包括：

確定所述目標(biāo)類(lèi)型元素在所述一個(gè)目標(biāo)樣本圖片中的融合區(qū)域；

對(duì)所述一個(gè)目標(biāo)樣本圖片對(duì)應(yīng)的所述至少一個(gè)目標(biāo)區(qū)域圖片在所述融合區(qū)域中分別進(jìn)行融合處理，以得到包含所述目標(biāo)類(lèi)型元素的一個(gè)目標(biāo)樣本圖片；其中，針對(duì)一個(gè)目標(biāo)區(qū)域圖片，將所述一個(gè)目標(biāo)區(qū)域圖片在所述融合區(qū)域中進(jìn)行融合處理時(shí)，將所述一個(gè)目標(biāo)區(qū)域圖片中所述目標(biāo)類(lèi)型元素的像素覆蓋所述融合區(qū)域中對(duì)應(yīng)位置的像素。