[發明專利]特征處理方法、動作定位方法及相關設備

在審

• 申請號: 202110786286.0
• 申請日: 2021-07-12
• 公開（公告）號: CN113673557A
• 公開（公告）日: 2021-11-19
• 發明（設計）人: 余言勛;王亞運;楊雪峰
• 申請（專利權）人: 浙江大華技術股份有限公司
• 主分類號: G06K9/62
• 分類號: G06K9/62;G06K9/68
• 代理公司: 深圳市威世博知識產權代理事務所(普通合伙) 44280
• 代理人: 何倚雯

本申請公開了一種圖像特征處理方法、動作定位方法、電子設備及計算機可讀存儲介質。該特征處理方法包括：獲取圖像或圖像序列的待處理特征；分別對待處理特征進行至少兩個維度轉換操作，得到不同維度的至少兩個第一特征；基于注意力機制，確定各個第一特征的注意力處理參考值；并基于對應的注意力處理參考值，分別對各個第一特征進行處理，得到各個第一特征各自對應的第二特征；對各個第二特征進行融合處理，得到待處理特征對應的目標特征。通過上述方式，能夠提高相關圖像的特征的信息表達能力。

技術領域

本申請涉及圖像處理領域，特別是涉及一種圖像特征處理方法、動作定位方法、電子設備及計算機可讀存儲介質。

背景技術

隨著科技和經濟的快速發展，每天都會產生大量圖像或視頻數據，這些圖像或視頻數據蘊含著巨大的價值。在醫療、工業、金融、教育等領域，經常會存在對圖像或視頻數據進行分析的情況。其中，對圖像或視頻數據進行分析的過程大致可以描述為提取圖像或視頻數據的特征，對特征分析，得到分析結果。

然而，特征不能充分表達圖像或視頻數據的原始信息，會影響后續分析結果的準確度；因此，亟需一種特征處理方法來提高特征的信息表達能力。

發明內容

本申請提供一種圖像特征處理方法、動作定位方法、電子設備及計算機可讀存儲介質，能夠提高圖像/圖像序列的特征的信息表達能力。

為解決上述技術問題，本申請采用的一個技術方案是：提供一種圖像特征處理方法。該方法包括：獲取圖像或圖像序列的待處理特征；分別對待處理特征進行至少兩個維度轉換操作，得到不同維度的至少兩個第一特征；基于注意力機制，確定各個第一特征的注意力處理參考值；并基于對應的注意力處理參考值，分別對各個第一特征進行處理，得到各個第一特征各自對應的第二特征；對各個第二特征進行融合處理，得到待處理特征對應的目標特征。

為解決上述技術問題，本申請采用的另一個技術方案是：提供一種動作定位方法，該方法包括：將目標視頻中待檢測動作的特征，確定為待處理特征；利用前述特征處理方法對待處理特征進行處理，得到目標特征；基于目標特征，確定目標視頻中待檢測動作的視頻幀定位信息；其中，視頻幀定位信息用于表示目標視頻中包含待檢測動作的視頻幀。

為解決上述技術問題，本申請采用的再一個技術方案是：提供一種電子設備，該電子設備包括處理器、與處理器連接的存儲器，其中，存儲器存儲有程序指令；處理器用于執行存儲器存儲的程序指令以實現上述方法。

為解決上述技術問題，本申請采用的又一個技術方案是：提供一種計算機可讀存儲介質，存儲有程序指令，該程序指令被執行時能夠實現上述方法。

通過上述方式，本申請先將待處理特征轉換為不同維度的至少兩個第一特征；基于注意力機制分別確定各個第一特征的注意力處理參考值；并基于對應的注意力處理參考值，分別對各個第一特征進行處理，得到各個第一特征各自對應的第二特征；對各個第二特征進入融合得到目標特征。由于不同維度的第一特征為待處理特征在不同的空間信息，能夠從不同角度來描述待處理特征，使待處理特征有更強的泛化能力，因此進一步對多個第一特征處理得到多個第二特征，再對多個第二特征進行融合得到的目標特征，相對于待處理特征來說，能夠更好地表達圖像或圖像序列的信息，即提高了圖像或圖像序列的信息表達能力。另外，將該特征處理方法應用于圖像序列時，目標特征還能夠更好地表達圖像序列中不同的圖像之間的信息。

附圖說明

圖1是本申請圖像特征處理方法一實施例的流程示意圖；

圖2是本申請圖像特征處理方法另一實施例的流程示意圖；

圖3是本申請獲取注意力處理參考值的結構示意圖；

圖4是本申請特征處理的結構示意圖；

圖5是本申請動作定位方法一實施例的流程示意圖；

圖6是本申請動作定位方法另一實施例的流程示意圖；