[發明專利]一種基于光流信息的行為識別方法

有效

• 申請號: 201410249469.9
• 申請日: 2014-06-06
• 公開（公告）號: CN104036243B
• 公開（公告）日: 2017-04-05
• 發明（設計）人: 解梅;董純鏗;蔡家柱
• 申請（專利權）人: 電子科技大學
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06T7/269
• 代理公司: 電子科技大學專利中心51203
• 代理人: 周劉英

1.一種基于光流信息的行為識別方法，其特征在于，包括下列步驟：

步驟1：提取單行為視頻序列的光流信息，得到兩幅以上的光流圖；

步驟2：確定各光流圖的每個光流矢量m的運動模式：

步驟2-1：在光流矢量m的鄰域取k×k網格，將所述k×k網格所在的平面劃分為等間隔度數的a個方向區間，所述方向區間的取值范圍為(0°，360°]，并設定0°表示靜止狀態模式，基于所述a個方向區間，得到a+1種運動方向模式，其中k為大于1的奇數，a為大于1的整數；

對k×k網格中的各個光流矢量按方向在所述a+1種運動方向模式上進行投票，取得票最多的運動方向模式為光流矢量m的運動方向，取得票最多的運動方向模式所對應的方向區間或取值為k×k網格的主運動方向；

步驟2-2：基于k×k網格中落在所述主運動方向的光流矢量，按幅度值進行中值濾波，并將濾波結果作為光流矢量m的幅度值；

步驟2-3：基于光流矢量m的幅度值，根據預設運動幅度模式聚類類別，對各光流矢量m進行聚類處理，確定光流矢量m的運動幅度模式；

步驟2-4：基于光流矢量m的運動方向模式和運動幅度模式，確定各個光流矢量m的運動模式；

步驟3：確定步驟1所述單行為視頻序列的行為特征向量：

步驟3-1：分別將每幅光流圖按行、列劃分為h×l個矩形塊，統計每個矩形塊中的各光流矢量m的運動模式，形成各個矩形塊的運動模式直方圖；將得到的h×l個運動模式直方圖級聯構成各光流圖的特征向量；

步驟3-2：將各光流圖的特征向量級聯后得到當前行為特征向量；

步驟4：基于支持向量機SVM對步驟3獲取的不同的行為特征向量進行訓練和識別。

2.如權利要求1所述的方法，其特征在于，所述步驟2-4中，基于局部三值模式LTP對光流矢量m的運動方向模式和運動幅度模式進行聯合編碼，確定各光流矢量m的運動模式。

3.如權利要求1或2所述的方法，其特征在于，所述步驟1為：

從單行為視頻序列中等距離抽取s個切片，所述切片表示單行為視頻序列中一段連續視頻幀，s為自然數；

分別在每個切片中選取3幀等間隔視頻圖像：前一幀I(t-Δt)、當前幀I(t)、后一幀I(t+Δt)，其中Δt表示相鄰兩幀之間的時間間隔；

分別計算各切片中前一幀I(t-Δt)與當前幀I(t)的光流矢量，當前幀I(t)與后一幀I(t+Δt)的光流矢量，得到各切片的光流圖。

4.如權利要求3所述的方法，其特征在于，設定參數s＝3,h＝2,l＝2,a＝4，運動幅度模式聚類類別為3。