[發明專利]多攝像頭下行為識別方法、裝置及計算機可讀存儲介質

在審

• 申請號: 202010534443.4
• 申請日: 2020-06-12
• 公開（公告）號: CN111626265A
• 公開（公告）日: 2020-09-04
• 發明（設計）人: 黃杰;黃文豪;楊忠程
• 申請（專利權）人: 上海依圖網絡科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06K9/20
• 代理公司: 上海市匯業律師事務所 31325
• 代理人: 金煒霞

本發明提供本發明實施例提出一種多攝像頭下行為識別方法裝置，其中，方法包括：獲取第一視頻數據和第二視頻數據；獲取第一人像和第二人像；確定第一人像和第二人像中的人是否為同一人；當第一人像和第二人像中的人為同一人時，分別提取第一特征數據和第二特征數據；對第一特征數據和第二特征數據進行融合得到融合特征數據，根據融合特征數據確定第一視頻數據和第二視頻數據種人的行為是第一行為。本發明實施例的多攝像頭下行為識別方法，在確定多個攝像頭采集到人像為同一人之后，分別提取特征數據，特征數據融合之后，根據融合的特征數據確定人的行為，通過對多個特征數據的融合擴展空間信息，增加行為識別的可靠性，提高識別的準確度。

技術領域

本發明涉及行為識別領域，特別涉及一種多攝像頭下行為識別方法、裝置及計算機可讀存儲介質。

背景技術

行為識別在AI領域有著特別重要的作用，例如在特定的場所進行行為識別，監控系統能主動識別場景內各種事件，及時作出預警給監控中心，可以實現快速反應，及時防范，阻止事態惡化。

但現有的技術對于特定行為識別，往往只用到單個攝像頭獲取的信息。而單攝像頭往往會有較大的遮蔽，角度等問題。尤其是一些特定行為，很難從單一角度完整的分析。

現有技術也有采用多攝像頭同時使用的方法，但現有技術多攝像頭往往用于在不同空間和時間對于人的軌跡追蹤。在同一空間，或室內場景，同時使用多攝像頭時，往往只是單純的羅列多個攝像頭，單純的把同一空間位置上的內容聯合到一起。

發明內容

為了解決現有技術存在的問題，本發明的至少一個實施例提供了多攝像頭下行為識別方法、裝置及計算機可讀存儲介質，解決以上背景技術部分提到的各種問題。

第一方面，本發明實施例提出一種多攝像頭下行為識別方法，包括：獲取第一視頻數據和第二視頻數據，所述第一視頻數據和第二視頻數據由位于同一空間的第一視頻采集設備和第二視頻采集設備以不同角度采集得到；在所述第一視頻數據和第二視頻數據中分別檢測人像，獲取第一人像和第二人像；確定所述第一人像和第二人像中的人是否為同一人；當所述第一人像和第二人像中的人為同一人時，分別提取第一視頻數據和第二視頻數據中所述人的特征數據，第一特征數據和第二特征數據；對所述第一特征數據和第二特征數據進行融合得到融合特征數據，根據所述融合特征數據確定所述第一視頻數據和第二視頻數據種所述人的行為是第一行為。

在一些實施例中，所述提取第一特征數據和第二特征數據，包括：提取所述第一視頻數據中所述人的運動特征和表觀特征，綜合所述第一視頻數據的運動特征和表觀特征獲得所述第一特征數據；提取所述第二視頻數據中所述人的運動特征和表觀特征，綜合所述第二視頻數據運動特征和表觀特征獲得所述第二特征數據。

在一些實施例中，所述根據融合特征數據確定所述第一視頻數據和第二視頻數據種所述人的行為是第一行為，包括：對所述融合特征數據進行分割，得到連續的或有預設間隔的多個子時間段的融合特征數據；根據所述子時間段的融合特征數據確定各所述子時間段內所述人的行為；當多于預設數量的多個子時間段的融合特征數據確定的所述人的行為皆為第一行為時，確定所述人的行為是所述第一行為。

在一些實施例中，所述確定所述第一人像和第二人像中的人是否為同一人，包括：獲取所述第一人像的整體特征數據；對所述第一人像進行橫向切割，得到第一預設數量的局部圖像，獲取所述第一人像的各第一局部特征數據；按照第一預設順序拼接所述第一人像的整體特征數據和各第一局部特征數據，得到所述第一人像的綜合特征數據；獲取所述第二人像的整體特征數據；對所述第二人像按照和所述第一人像相同的方式進行橫向切割，得到所述第一預設數量的局部圖像，獲取所述第二人像的各第一局部特征數據；按照所述第一預設順序拼接所述第二人像的整體特征數據和各第一局部特征數據，得到所述第二人像的綜合特征數據；根據所述第一人像的綜合特征數據和所述第二人像的綜合特征數據確定所述第一人像和第二人像中的人是否為同一人。