[發(fā)明專利]幀數(shù)據(jù)的修改方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 202010795359.8
• 申請(qǐng)日: 2020-08-10
• 公開（公告）號(hào): CN112070656B
• 公開（公告）日: 2023-08-25
• 發(fā)明（設(shè)計(jì)）人: 林曉明;江金陵;唐大閏
• 申請(qǐng)（專利權(quán)）人: 上海明略人工智能（集團(tuán)）有限公司
• 主分類號(hào): G06T3/00
• 分類號(hào): G06T3/00;G06T7/11;G06T7/187
• 代理公司: 青島清泰聯(lián)信知識(shí)產(chǎn)權(quán)代理有限公司 37256
• 代理人: 李祺

1.一種幀數(shù)據(jù)的修改方法，其特征在于，包括：

獲取第一幀數(shù)據(jù)，對(duì)第一幀數(shù)據(jù)進(jìn)行語(yǔ)義分割，得到第二幀數(shù)據(jù)；

將所述第二幀數(shù)據(jù)填充至調(diào)色板，依據(jù)輸入信息將所述第二幀數(shù)據(jù)中的非保留區(qū)域的背景顏色變更為一個(gè)或多個(gè)第一顏色，形成第三幀數(shù)據(jù)，其中，預(yù)先設(shè)置有不同第一顏色與不同物體的映射關(guān)系；

基于所述映射關(guān)系，使用圖像生成模型將所述第三幀數(shù)據(jù)中呈現(xiàn)所述第一顏色的區(qū)域顯示為對(duì)應(yīng)物體，將所述保留區(qū)域還原為語(yǔ)義分割前的物體，形成第四幀數(shù)據(jù)；

其中，?將所述第二幀數(shù)據(jù)填充至調(diào)色板，依據(jù)輸入信息將所述第二幀數(shù)據(jù)中的非保留區(qū)域的背景顏色變更為一個(gè)或多個(gè)第一顏色，形成第三幀數(shù)據(jù)，包括：

接收第一輸入信息，依據(jù)所述第一輸入信息確定所述第二幀數(shù)據(jù)的保留區(qū)域，將所述保留區(qū)域的設(shè)置為第二顏色；

接收第二輸入信息，依據(jù)所述第二輸入信息將所述第二幀數(shù)據(jù)中非所述保留區(qū)域設(shè)置為所述一個(gè)或多個(gè)第一顏色，形成所述第三幀數(shù)據(jù)；

其中，所述接收第二輸入信息，依據(jù)所述第二輸入信息將所述第三幀數(shù)據(jù)中非所述保留區(qū)域設(shè)置為所述一個(gè)或多個(gè)第一顏色，形成所述第三幀數(shù)據(jù)之后，所述方法還包括：

檢測(cè)出所述第三幀數(shù)據(jù)中像素點(diǎn)的紅綠藍(lán)RGB值未對(duì)應(yīng)至所述一個(gè)或多個(gè)第一顏色的第一像素點(diǎn)；

計(jì)算所述第一像素點(diǎn)的RGB值與每個(gè)所述第一顏色的RGB值的絕對(duì)值距離，記為絕對(duì)值距離集合；

將所述第一像素點(diǎn)的RGB值調(diào)整為所述絕對(duì)值距離集合中最小值對(duì)應(yīng)的所述第一顏色RGB值。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所述保留區(qū)域還原為語(yǔ)義分割前的物體，包括：

獲取所述第一幀數(shù)據(jù)中與所述保留區(qū)域?qū)?yīng)的原始物體圖像；

使用所述原始物體圖像替換所述第三幀數(shù)據(jù)中所述保留區(qū)域的所述第二顏色。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，

所述對(duì)第一幀數(shù)據(jù)進(jìn)行語(yǔ)義分割，得到第二幀數(shù)據(jù)包括：使用語(yǔ)義分割模型對(duì)所述第一幀數(shù)據(jù)進(jìn)行語(yǔ)義分割，顯示語(yǔ)義分割后的第二幀數(shù)據(jù)。

4.一種幀數(shù)據(jù)的修改裝置，其特征在于，包括：

獲取模塊，用于獲取第一幀數(shù)據(jù)，對(duì)第一幀數(shù)據(jù)進(jìn)行語(yǔ)義分割，得到第二幀數(shù)據(jù)；

調(diào)整模塊，用于將所述第二幀數(shù)據(jù)填充至調(diào)色板，依據(jù)輸入信息將所述第二幀數(shù)據(jù)中的非保留區(qū)域的背景顏色變更為一個(gè)或多個(gè)第一顏色，形成第三幀數(shù)據(jù)，其中，預(yù)先設(shè)置有不同第一顏色與不同物體的映射關(guān)系；

還原模塊，用于基于所述映射關(guān)系，使用圖像生成模型將所述第三幀數(shù)據(jù)中呈現(xiàn)所述第一顏色的區(qū)域顯示為對(duì)應(yīng)物體，將所述保留區(qū)域還原為語(yǔ)義分割前的物體，形成第四幀數(shù)據(jù)；

其中，所述調(diào)整模塊還用于接收第一輸入信息，依據(jù)所述第一輸入信息確定所述第二幀數(shù)據(jù)的保留區(qū)域，將所述保留區(qū)域的設(shè)置為第二顏色；

以及用于接收第二輸入信息，依據(jù)所述第二輸入信息將所述第二幀數(shù)據(jù)中非所述保留區(qū)域設(shè)置為所述一個(gè)或多個(gè)第一顏色，形成所述第三幀數(shù)據(jù)；

在形成所述第三幀數(shù)據(jù)之后，所述調(diào)整模塊還用于檢測(cè)出所述第三幀數(shù)據(jù)中像素點(diǎn)的紅綠藍(lán)RGB值未對(duì)應(yīng)至所述一個(gè)或多個(gè)第一顏色的第一像素點(diǎn)；

用于計(jì)算所述第一像素點(diǎn)的RGB值與每個(gè)所述第一顏色的RGB值的絕對(duì)值距離，記為絕對(duì)值距離集合；

以及用于將所述第一像素點(diǎn)的RGB值調(diào)整為所述絕對(duì)值距離集合中最小值對(duì)應(yīng)的所述第一顏色RGB值。

5.一種“計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)”或“非易失性存儲(chǔ)介質(zhì)”，其特征在于，所述“計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)”或“非易失性存儲(chǔ)介質(zhì)”包括存儲(chǔ)的程序，其中，在所述程序運(yùn)行時(shí)控制所述“計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)”或“非易失性存儲(chǔ)介質(zhì)”所在設(shè)備執(zhí)行權(quán)利要求1至3中任意一項(xiàng)所述的幀數(shù)據(jù)的修改方法。

6.一種處理器，其特征在于，所述處理器用于運(yùn)行程序，其中，所述程序運(yùn)行時(shí)執(zhí)行權(quán)利要求1至3中任意一項(xiàng)所述的幀數(shù)據(jù)的修改方法。