[發(fā)明專利]體育運(yùn)動(dòng)視頻去除拖影的方法及裝置、存儲(chǔ)介質(zhì)、設(shè)備

有效

• 申請?zhí)枺?/td>: 202310018950.6
• 申請日: 2023-01-06
• 公開（公告）號(hào): CN116128756B
• 公開（公告）日: 2023-08-18
• 發(fā)明（設(shè)計(jì)）人: 楊瀾;邸建
• 申請（專利權(quán)）人: 北京華數(shù)安信科技有限公司
• 主分類號(hào): G06T5/00
• 分類號(hào): G06T5/00;G06T5/50;G06T3/40;G06V10/80;G06V10/82;G06N3/0475
• 代理公司: 北京慧智興達(dá)知識(shí)產(chǎn)權(quán)代理有限公司 11615
• 代理人: 李麗穎

1.一種體育運(yùn)動(dòng)視頻去除拖影的方法，其特征在于，所述方法包括：

對(duì)待去除拖影視頻中的圖像幀進(jìn)行切片，得到多張切片子圖像；

建立所述多張切片子圖像在原圖像幀中的索引；其中，所述建立所述多張切片子圖像在原圖像幀中的索引，包括：根據(jù)每一切片子圖像的左上角原點(diǎn)坐標(biāo)生成切片子圖像的索引，所述索引的格式為：X軸索引-Y軸索引；

對(duì)所述切片子圖像分別按照預(yù)設(shè)數(shù)據(jù)出入格式進(jìn)行數(shù)據(jù)變換；

利用預(yù)設(shè)的對(duì)抗神經(jīng)網(wǎng)絡(luò)模型對(duì)所述切片子圖像對(duì)應(yīng)的數(shù)據(jù)變換的數(shù)據(jù)進(jìn)行不同采樣倍數(shù)的多次下采樣，生成多個(gè)不同尺度的特征；

將所述多個(gè)不同尺度的特征分別上采樣到切片子圖像的1/n大小的特征圖像，并將上采樣后得到的多個(gè)不同尺度的特征圖像拼接為包含多個(gè)尺度的整體特征信息的目標(biāo)圖像，所述n為正整數(shù)；

對(duì)所述目標(biāo)圖像進(jìn)行多次上采樣，生成與所述多張切片子圖像大小一致的去除拖影的多張切片子圖像；

根據(jù)去除拖影的多張切片子圖像和所述切片子圖像在原圖像幀中的索引，拼接合成與原圖像大小一致的去除拖影后的圖像幀。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述對(duì)待去除拖影視頻中的圖像幀進(jìn)行切片之前，所述方法還包括：

獲取待去除拖影的視頻流；

對(duì)所述視頻流進(jìn)行切幀處理，得到視頻幀列表；

遍歷所述視頻幀列表，依次從對(duì)所述視頻幀列表中提取待去除拖影的圖像幀。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述對(duì)待去除拖影視頻中的圖像幀進(jìn)行切片，得到多張切片子圖像，包括：

對(duì)所述視頻幀列表中待去除拖影的當(dāng)前幀以預(yù)設(shè)大小的滑塊進(jìn)行滑塊切片，切割成多張長寬相等的切片子圖像。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)所述切片子圖像分別按照預(yù)設(shè)數(shù)據(jù)出入格式進(jìn)行數(shù)據(jù)變換，包括：

對(duì)所述多張切片子圖像的每個(gè)通道的像素值進(jìn)行歸一化，對(duì)歸一化生成的切片數(shù)據(jù)進(jìn)行擴(kuò)維度。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)抗神經(jīng)網(wǎng)絡(luò)模型，包括：

判別網(wǎng)絡(luò)和生成網(wǎng)絡(luò)；

其中，所述生成網(wǎng)絡(luò)用于生成去除拖影的多張切片子圖像；

所述判別網(wǎng)絡(luò)用于判別所述生成網(wǎng)絡(luò)生成的去除拖影的多張切片子圖像的可靠性。

6.一種體育運(yùn)動(dòng)視頻去除拖影的裝置，其特征在于，所述裝置包括：

切片模塊，用于對(duì)待去除拖影視頻中的圖像幀進(jìn)行切片，得到多張切片子圖像；

所述切片模塊，還用于建立所述多張切片子圖像在原圖像幀中的索引；其中，所述建立所述多張切片子圖像在原圖像幀中的索引，包括：根據(jù)每一切片子圖像的左上角原點(diǎn)坐標(biāo)生成切片子圖像的索引，所述索引的格式為：X軸索引-Y軸索引；

數(shù)據(jù)變換模塊，用于對(duì)所述切片子圖像分別按照預(yù)設(shè)數(shù)據(jù)出入格式進(jìn)行數(shù)據(jù)變換；

下采樣模塊，用于利用預(yù)設(shè)的對(duì)抗神經(jīng)網(wǎng)絡(luò)模型對(duì)所述切片子圖像對(duì)應(yīng)的數(shù)據(jù)變換的數(shù)據(jù)進(jìn)行不同采樣倍數(shù)的多次下采樣，生成多個(gè)不同尺度的特征；

上采樣模塊，用于將所述多個(gè)不同尺度的特征分別上采樣到切片子圖像的1/n大小的特征圖像，并將上采樣后得到的多個(gè)不同尺度的特征圖像拼接為包含多個(gè)尺度的整體特征信息的目標(biāo)圖像，所述n為正整數(shù)；

生成模塊，用于對(duì)所述目標(biāo)圖像進(jìn)行多次上采樣，生成與所述多張切片子圖像大小一致的去除拖影的多張切片子圖像；

拼接合成模塊，用于根據(jù)去除拖影的多張切片子圖像和所述切片子圖像在原圖像幀中的索引，拼接合成與原圖像大小一致的去除拖影后的圖像幀。

7.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-5任一項(xiàng)所述方法的步驟。

8.一種電子設(shè)備，其特征在于，包括存儲(chǔ)控制器，所述存儲(chǔ)控制器包括存儲(chǔ)器、處理器及存儲(chǔ)在存儲(chǔ)器上并可在處理器上運(yùn)行的計(jì)算機(jī)程序，所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)如權(quán)利要求1-5任一項(xiàng)所述方法的步驟。