[發明專利]一種圖像處理方法及裝置

在審

• 申請號: 202210666525.3
• 申請日: 2022-06-13
• 公開（公告）號: CN114882425A
• 公開（公告）日: 2022-08-09
• 發明（設計）人: 王心瑩;祁晗;張競超;孫錢麗;余意
• 申請（專利權）人: 湖南快樂陽光互動娛樂傳媒有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V10/82
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 秦曉君

1.一種圖像處理方法，其特征在于，包括：

確定目標圖像幀序列中待進行遮擋的目標對象；

從所述目標圖像幀序列中，選取出部分圖像確定為待進行目標檢測的第一部分圖像幀序列；

將所述目標對象的圖像和所述第一部分圖像幀序列輸入至訓練好的目標檢測網絡，獲得所述目標檢測網絡輸出的第一定位信息，所述第一定位信息包括所述目標對象在所述第一部分圖像幀序列的各圖像中所處的圖像區域的位置信息；

將所述第一定位信息和第二部分圖像幀序列輸入至訓練好的目標跟蹤網絡，獲得所述目標跟蹤網絡輸出的第二定位信息；其中，所述第二部分圖像幀序列是由所述目標圖像幀序列中除所述第一部分圖像幀序列之外的各幀圖像構成的，所述第二定位信息包括所述目標對象在所述第二部分圖像幀序列的各圖像中所處的圖像區域的位置信息；

基于所述第一定位信息和所述第二定位信息，分別對所述目標對象在所述目標圖像幀序列的各幀圖像中所處的圖像區域進行遮擋處理。

2.根據權利要求1所述的圖像處理方法，其特征在于，所述目標檢測網絡從所述目標對象的圖像中提取出目標圖像特征，對于所述第一部分圖像幀序列中的任一幀圖像：提取出該幀圖像的圖像特征，對該幀圖像的圖像特征與所述目標圖像特征進行相關性計算，確定出該幀圖像的圖像特征中與所述目標圖像特征相關性最大的局域圖像特征，將該幀圖像中與所述局域圖像特征相對應的圖像區域確定為目標區域，將所述目標區域的位置信息確定為所述目標對象在該幀圖像中所處的圖像區域的位置信息。

3.根據權利要求1所述的圖像處理方法，其特征在于，當所述目標對象包括類別相同的多個待遮擋對象時，所述目標跟蹤網絡針對所述第一定位信息中任一所述待遮擋對象的位置信息：將所述待遮擋對象在所述第一定位信息中的位置信息，與所述待遮擋對象在所述第二部分圖像幀序列的各幀圖像中所處圖像區域的位置信息進行關聯。

4.根據權利要求3所述的圖像處理方法，其特征在于，所述將所述待遮擋對象在所述第一定位信息中的位置信息，與所述待遮擋對象在所述第二部分圖像幀序列的各幀圖像中所處圖像區域的位置信息進行關聯，包括：

將所述第二部分圖像幀序列中的一幀圖像確定為當前的目標幀圖像，在當前的目標幀圖像中檢測出所述待遮擋對象的所有相似對象，從所有相似對象中確定出與所述待遮擋對象相匹配的目標相似對象，將所述目標相似對象在當前的目標幀圖像中所處圖像區域的位置信息確定為所述待遮擋對象在當前的目標幀圖像中所處圖像區域的位置信息，將當前已確定出的所述待遮擋對象在各幀圖像中所處圖像區域的位置信息進行關聯，返回執行所述將所述第二部分圖像幀序列中的一幀圖像確定為當前的目標幀圖像的步驟，直至將所述待遮擋對象在所述目標圖像幀序列的各幀圖像中所處圖像區域的位置信息進行關聯。

5.根據權利要求3或4所述的圖像處理方法，其特征在于，所述基于所述第一定位信息和所述第二定位信息，分別對所述目標對象在所述目標圖像幀序列的各幀圖像中所處的圖像區域進行遮擋處理，包括：

分別基于已關聯好的各所述待遮擋對象在所述目標圖像幀序列的各幀圖像中所處圖像區域的位置信息，在所述目標圖像幀序列中對各所述待遮擋對象所處的圖像區域進行遮擋處理。

6.根據權利要求1所述的圖像處理方法，其特征在于，所述目標檢測網絡在所述目標圖像幀序列的各幀圖像中，使用檢測框對定位出的所述目標對象進行標識；在所述獲得所述目標跟蹤網絡輸出的第二定位信息之后，所述圖像處理方法還包括：

基于所述第一定位信息和所述第二定位信息，確定已標識所述目標對象的各所述檢測框在所述目標圖像幀序列中的運動軌跡；

采用均值濾波處理方式，對所述運動軌跡進行平滑處理以消除已標識所述目標對象的各所述檢測框的抖動。

7.根據權利要求1所述的圖像處理方法，其特征在于，所述基于所述第一定位信息和所述第二定位信息，分別對所述目標對象在所述目標圖像幀序列的各幀圖像中所處的圖像區域進行遮擋處理，包括：

基于所述第一定位信息和所述第二定位信息，對所述目標圖像幀序列的各幀圖像中所述目標對象所處的圖像區域進行背景補全，獲得已進行背景補全后的圖像幀序列。