[發明專利]目標處理方法、目標處理模型的訓練方法及其裝置有效
| 申請號: | 202110556714.0 | 申請日: | 2021-05-21 |
| 公開(公告)號: | CN113361519B | 公開(公告)日: | 2023-07-28 |
| 發明(設計)人: | 張偉;譚嘯;孫昊 | 申請(專利權)人: | 北京百度網訊科技有限公司 |
| 主分類號: | G06V10/25 | 分類號: | G06V10/25;G06V10/26;G06V10/44 |
| 代理公司: | 北京清亦華知識產權代理事務所(普通合伙) 11201 | 代理人: | 王萌 |
| 地址: | 100085 北京市*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 目標 處理 方法 模型 訓練 及其 裝置 | ||
1.一種目標處理方法,包括:
獲取當前圖像幀以及參考實例分割圖;
根據所述參考實例分割圖,確定所述參考實例分割圖對應的參考圖像幀中各個像素屬于相應實例的概率,并生成參考語義熱力圖;
獲取所述參考圖像幀的全局上下文向量,并根據所述全局上下文向量、所述當前圖像幀和所述參考語義熱力圖,生成特征圖;
根據所述特征圖,生成所述當前圖像幀對應的語義種子圖以及至少一種處理方式的偏移圖,其中,所述語義種子圖包括:所述當前圖像幀中各個實例的邊界信息以及中心信息;
提取所述語義種子圖中的中心信息,生成實例中心圖;
根據所述實例中心圖以及所述至少一種處理方式的偏移圖,生成所述當前圖像幀在所述至少一種處理方式下的目標處理結果。
2.根據權利要求1所述的方法,其中,所述獲取當前圖像幀以及參考實例分割圖,包括:
獲取圖像序列中的所述當前圖像幀;
獲取所述圖像序列中位于所述當前圖像幀之前的歷史圖像幀;
將所述歷史圖像幀的實例分割圖,確定為所述參考實例分割圖。
3.根據權利要求1所述的方法,其中,所述處理方式包括:實例分割方式,所述實例分割方式的偏移圖包括:所述當前圖像幀中各個像素相對于相應實例中心的偏移信息;
所述根據所述實例中心圖以及所述至少一種處理方式的偏移圖,生成所述當前圖像幀在所述至少一種處理方式下的目標處理結果,包括:
根據所述實例中心圖中各個實例中心的位置信息,以及所述當前圖像幀中各個像素相對于相應實例中心的偏移信息,確定所述當前圖像幀中各個實例的位置信息;
根據所述當前圖像幀中各個實例的位置信息,確定所述當前圖像幀在實例分割方式下的實例分割結果。
4.根據權利要求1或3所述的方法,其中,所述處理方式包括:邊框檢測方式,所述邊框檢測方式的偏移圖包括:所述當前圖像幀中各個實例的邊框頂點相對于相應實例中心的偏移信息;
所述根據所述實例中心圖以及所述至少一種處理方式的偏移圖,生成所述當前圖像幀在所述至少一種處理方式下的目標處理結果,包括:
根據所述實例中心圖中各個實例中心的位置信息,以及所述當前圖像幀中各個實例的邊框頂點相對于相應實例中心的偏移信息,確定所述當前圖像幀中各個實例的邊框信息;
根據所述當前圖像幀中各個實例的邊框信息,確定所述當前圖像幀在邊框檢測方式下的邊框檢測結果。
5.根據權利要求4所述的方法,其中,所述處理方式包括:目標跟蹤方式,所述目標跟蹤方式的偏移圖包括:所述當前圖像幀中各個實例的中心相對于所述參考實例分割圖中相應實例的中心的偏移信息;
所述根據所述實例中心圖以及所述至少一種處理方式的偏移圖,生成所述當前圖像幀在所述至少一種處理方式下的目標處理結果,包括:
根據所述實例中心圖中各個實例中心的位置信息,以及所述當前圖像幀中各個實例的中心相對于所述參考實例分割圖中相應實例的中心的偏移信息,確定所述當前圖像幀中各個實例的位置信息;
根據所述當前圖像幀中各個實例的位置信息,確定所述當前圖像幀在所述目標跟蹤方式下的目標跟蹤結果。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京百度網訊科技有限公司,未經北京百度網訊科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110556714.0/1.html,轉載請聲明來源鉆瓜專利網。





