[發明專利]視頻的目標分割方法、裝置、設備及計算機可讀存儲介質

在審

• 申請號: 202011421192.5
• 申請日: 2020-12-07
• 公開（公告）號: CN114596325A
• 公開（公告）日: 2022-06-07
• 發明（設計）人: 鄒夢超;劉陽興;林染染;黨晚婷;張傳昊
• 申請（專利權）人: 武漢TCL集團工業研究院有限公司
• 主分類號: G06T7/12
• 分類號: G06T7/12;G06T7/181;G06T7/246;G06N20/00
• 代理公司: 深圳中一聯合知識產權代理有限公司 44414
• 代理人: 李木燕

1.一種視頻的目標分割方法，其特征在于，包括：

從視頻幀序列中獲取第一視頻幀，所述第一視頻幀為所述視頻幀序列中除最后一個視頻幀之外的任一視頻幀；

通過曲線擺置分割網絡模型對所述第一視頻幀進行處理，生成所述第一視頻幀中目標邊緣的閉合曲線，將生成的閉合曲線作為第一目標邊緣；

對所述第一目標邊緣的位置進行調整，確定位于所述第一視頻幀之后的視頻幀中的目標邊緣，以對位于所述第一視頻幀之后的視頻幀進行目標跟蹤。

2.如權利要求1所述的方法，其特征在于，所述通過曲線擺置分割網絡模型對所述第一視頻幀進行處理，生成所述第一視頻幀中目標邊緣的閉合曲線，包括：

通過所述曲線擺置分割網絡模型對所述第一視頻幀進行處理，依次預測所述第一視頻幀中目標邊緣上的錨點和曲率；

基于預測的錨點和曲率，生成所述第一視頻幀中目標邊緣的閉合曲線。

3.如權利要求1所述的方法，其特征在于，所述對所述第一目標邊緣的位置進行調整，確定位于所述第一視頻幀之后的視頻幀中的目標邊緣，包括：

對于第二視頻幀，在所述第二視頻幀中對所述第一目標邊緣的位置進行調整，得到第二目標邊緣，所述第二視頻幀為所述第一視頻幀的下一個視頻幀；

將所述第二目標邊緣確定為所述第二視頻幀的目標邊緣。

4.如權利要求1所述的方法，其特征在于，所述對所述第一目標邊緣的位置進行調整，確定位于所述第一視頻幀之后的視頻幀中的目標邊緣，包括：

對于第三視頻幀，在所述第三視頻幀中對指定目標邊緣的位置進行調整，得到第四目標邊緣，所述第三視頻幀為位于所述第二視頻幀之后的任一視頻幀，所述指定目標邊緣為所述第三視頻幀的上一個視頻幀的目標邊緣；

將所述第四目標邊緣確定為所述第三視頻幀的目標邊緣。

5.如權利要求3所述的方法，其特征在于，所述在所述第二視頻幀中對所述第一目標邊緣的位置進行調整，得到第二目標邊緣，包括：

在所述第二視頻幀中，按照預設規則對所述第一目標邊緣的位置進行調整；

將所述第二視頻幀和調整后的第一目標邊緣輸入至目標邊緣匹配模型中，通過所述邊緣匹配模型，確定調整后的第一目標邊緣與所述第二視頻幀中的目標之間的匹配信息，根據所述匹配信息確定所述第二目標邊緣。

6.如權利要求5所述的方法，其特征在于，所述在所述第二視頻幀中，按照預設規則對所述第一目標邊緣的位置進行調整，包括：

基于所述第一視頻幀和所述第二視頻幀中像素在時域上的變化，以及所述第一視頻幀和所述第二視頻幀之間的相關性，計算所述第一視頻幀和所述第二視頻幀之間光流的運動矢量；基于所述運動矢量對所述第一目標邊緣的位置進行調整。

7.如權利要求5所述的方法，其特征在于，所述在所述第二視頻幀中，按照預設規則對所述第一目標邊緣的位置進行調整，包括：

在所述第二視頻幀中，按照隨機調整機制對所述第一目標邊緣的位置進行調整。

8.如權利要求5所述的方法，其特征在于，所述根據所述匹配信息確定所述第二目標邊緣，包括：

若根據所述匹配信息確定調整后的第一目標邊緣與所述第二視頻幀中的目標匹配，則將調整后的第一目標邊緣確定為所述第二目標邊緣；

若根據所述匹配信息確定調整后的第一目標邊緣與所述第二視頻幀中的目標不匹配，則按照所述預設規則對調整后的第一目標邊緣的位置繼續進行調整，直至確定調整后的第一目標邊緣與所述第二視頻幀中的目標匹配，將調整后的第一目標邊緣確定為所述第二目標邊緣。

9.如權利要求5所述的方法，其特征在于，所述將所述第二視頻幀和調整后的第一目標邊緣輸入至目標邊緣匹配模型中之前，還包括：

獲取樣本數據，所述樣本數據包括多個正樣本數據，每個正樣本數據包括正樣本圖像和對應的目標邊緣，且所述正樣本圖像對應的目標邊緣與所述正樣本圖像中的目標匹配；

基于所述樣本數據，對待訓練的目標邊緣匹配模型進行訓練，得到訓練好的所述目標邊緣匹配模型。