[發(fā)明專利]一種基于深度學(xué)習(xí)的區(qū)域行人軌跡重構(gòu)裝置及方法

在審

• 申請?zhí)枺?/td>: 202210111154.2
• 申請日: 2022-01-27
• 公開（公告）號: CN114429665A
• 公開（公告）日: 2022-05-03
• 發(fā)明（設(shè)計(jì)）人: 李文熙;馮瑞
• 申請（專利權(quán)）人: 復(fù)旦大學(xué)
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V40/10;G06V20/40;G06V20/52;G06V10/82;G06N3/04;G06N3/08
• 代理公司: 上海德昭知識產(chǎn)權(quán)代理有限公司 31204
• 代理人: 程宗德

1.一種基于深度學(xué)習(xí)的區(qū)域行人軌跡重構(gòu)裝置，用于對視頻流進(jìn)行處理從而重構(gòu)出行人的軌跡信息并示出，其特征在于，包括：

攝像頭、行人檢測模塊、數(shù)據(jù)存儲更新模塊、行人重識別模塊、行人軌跡重構(gòu)模塊以及結(jié)果顯示模塊，

其中，所述攝像頭根據(jù)不同安裝位置采集對應(yīng)位置的監(jiān)控視頻，

所述行人檢測模塊對所述攝像頭傳輸?shù)谋O(jiān)控視頻RTSP流數(shù)據(jù)進(jìn)行行人檢測以獲取包含行人的待重構(gòu)圖像，

所述數(shù)據(jù)存儲更新模塊存儲有行人圖像、人臉信息以及與所述行人圖像中的行人對應(yīng)的當(dāng)前軌跡數(shù)據(jù)，

所述行人重識別模塊將所述待重構(gòu)圖像與所述數(shù)據(jù)存儲模塊存儲的行人圖像進(jìn)行行人相似度比對，一旦比對成功，就生成該行人的軌跡記錄信息，所述軌跡記錄信息包括時間信息、位置信息和身份信息，

所述數(shù)據(jù)存儲更新模塊將所述軌跡記錄信息對應(yīng)存儲至所述當(dāng)前軌跡數(shù)據(jù)中生成新的軌跡數(shù)據(jù)，

所述行人軌跡重構(gòu)模塊根據(jù)所述身份信息對所述軌跡記錄信息按行人進(jìn)行分類，根據(jù)所述時間信息對所述新的軌跡數(shù)據(jù)進(jìn)行排列整理，并基于所述位置信息對排列整理后的新的軌跡數(shù)據(jù)進(jìn)行重構(gòu)從而生成該行人的軌跡圖，

所述結(jié)果顯示模塊將該行人的身份信息以及所述軌跡圖進(jìn)行展示。

2.根據(jù)權(quán)利要求1所述的一種基于深度學(xué)習(xí)的區(qū)域行人軌跡重構(gòu)裝置，其特征在于：

其中，所述行人檢測模塊包括數(shù)據(jù)解碼單元、快速下采樣單元以及多尺度卷積單元，

所述數(shù)據(jù)解碼單元對接收的所述監(jiān)控視頻RTSP流數(shù)據(jù)進(jìn)行解碼生成對應(yīng)的視頻幀圖像，

所述快速下采樣單元對所述視頻幀圖像進(jìn)行預(yù)定倍數(shù)的下采樣，以獲取所述視頻幀圖像的感受野，

所述多尺度卷積單元基于所述感受野獲取不同感受野下的特征圖，以生成所述待重構(gòu)圖像。

3.根據(jù)權(quán)利要求2所述的一種基于深度學(xué)習(xí)的區(qū)域行人軌跡重構(gòu)裝置，其特征在于：

其中，所述快速下采樣單元采用卷積核尺寸為7x7、5x5的大尺度卷積和兩次池化層，

在進(jìn)行所述下采樣時，第一次卷積的步長為4，其他卷積和池化層的步長為2，所述預(yù)定倍數(shù)為32。

4.根據(jù)權(quán)利要求2所述的一種基于深度學(xué)習(xí)的區(qū)域行人軌跡重構(gòu)裝置，其特征在于：

其中，所述多尺度卷積單元采用7層3x3的卷積，

所述多尺度卷積單元分別在第三層卷積層、第五層卷積層和第七層卷積層進(jìn)行卷積后提取對應(yīng)的特征圖。

5.根據(jù)權(quán)利要求1所述的一種基于深度學(xué)習(xí)的區(qū)域行人軌跡重構(gòu)裝置，其特征在于，還包括：

人臉識別模塊，

其中，所述人臉識別模塊包括人臉檢測單元與人臉識別單元，

所述人臉檢測單元對所述待重構(gòu)圖像進(jìn)行人臉定位檢測，基于檢測到的人臉生成人臉圖像并將其傳輸至所述人臉識別單元，

所述人臉識別單元提取接收到的所述人臉圖像的人臉特征信息，將所述人臉特征信息與所述數(shù)據(jù)存儲更新模塊存儲的行人圖像中的行人人臉進(jìn)行比對，一旦比對成功，就將該行人的所述人臉特征信息傳輸至所述數(shù)據(jù)存儲更新模塊，

所述數(shù)據(jù)存儲更新模塊根據(jù)所述人臉特征信息對該行人的行人圖像進(jìn)行更新存儲。

6.根據(jù)權(quán)利要求1所述的一種基于深度學(xué)習(xí)的區(qū)域行人軌跡重構(gòu)裝置，其特征在于，還包括：

攝像頭控制模塊，

其中，攝像頭控制模塊通過定時讀取并監(jiān)控所述攝像頭的配置文件來對所述攝像頭實(shí)現(xiàn)調(diào)配。

7.一種基于深度學(xué)習(xí)的區(qū)域行人軌跡重構(gòu)方法，其特征在于，采用權(quán)利要求1至6中任意一項(xiàng)所述的基于深度學(xué)習(xí)的區(qū)域行人軌跡重構(gòu)裝置對視頻流進(jìn)行處理從而獲得行人的軌跡信息并示出。