日韩在线一区二区三区,日本午夜一区二区三区,国产伦精品一区二区三区四区视频,欧美日韩在线观看视频一区二区三区 ,一区二区视频在线,国产精品18久久久久久首页狼,日本天堂在线观看视频,综合av一区

[發明專利]基于骨架和視頻特征融合的行為分類方法有效

專利信息
申請號: 202011419698.2 申請日: 2020-12-06
公開(公告)號: CN112560618B 公開(公告)日: 2022-09-16
發明(設計)人: 路紅;汪子健;楊博弘;冉武;沈夢琦;任浩然 申請(專利權)人: 復旦大學
主分類號: G06V40/20 分類號: G06V40/20;G06V10/764;G06V10/774;G06V10/80;G06V10/82;G06K9/62;G06N3/04;G06N3/08
代理公司: 上海正旦專利代理有限公司 31200 代理人: 陸飛;陸尤
地址: 200433 *** 國省代碼: 上海;31
權利要求書: 查看更多 說明書: 查看更多
摘要:
搜索關鍵詞: 基于 骨架 視頻 特征 融合 行為 分類 方法
【說明書】:

發明屬于計算機圖像處理技術領域,具體為一種基于骨架和視頻特征融合的行為分類方法。本發明方法包括:對已有的人類行為視頻數據進行預處理,通過人體檢測模型和OpenPose分別獲取對應的人體檢測框和人體骨架數據,作為深度學習模型的訓練數據;其中視頻數據和人體檢測框數據作為前景與背景特征融合網絡的輸入,骨架特征作為個體與群體特征融合網絡的輸入;兩個網絡的輸出結果進行平均為最終分類結果;接著對訓練集進行監督式學習,得到泛化的深度學習模型;然后,對識別的視頻進行和模型訓練時一樣的預處理,然后作為輸入,放進預先訓練好深度學習模型里,就能得到行為分類的結果。

技術領域

本發明屬于計算機圖像處理技術領域,具體涉及一種利用骨架特征和視頻特征融合的行為分類方法。

背景技術

在計算機視覺任務中,行為識別是十分具有挑戰性的領域。行為識別主要有兩類研究方法,一類是基于RGB圖像的行為識別,另外一類是基于骨架的行為識別。基于RGB的方法,其優點是擁有所有視覺層面上的信息,特征完備,但其缺點是場景過于豐富,而人體姿態在不同的相機角度下變化太大,模型無法完全理解人體姿態語義信息,可能學習到更多的背景特征。基于骨架的方法,其優點人體姿態結構清晰,天然的圖模型,對相機視角變化和背景不敏感,特征聚焦在人體。但其缺點也很明顯,沒有其他物體和背景相關特征,導致當人體與物體進行交互時,往往很難識別其行為類別。因此可以通過將視頻特征與骨架特征相融合,以解決單一特征不魯棒的缺點。

發明內容

本發明的目的在于提供一種魯棒性好的將視頻與骨架特征融合的行為分類方法。

本發明提供的將視頻與骨架特征融合的行為分類方法,是基于深度學習的;基本步驟為:對已有的人類行為視頻數據進行預處理,通過人體檢測模型和OpenPose[1]分別獲取對應的人體檢測框和人體骨架數據,作為深度學習模型的訓練數據;其中視頻數據和人體檢測框數據作為前景與背景特征融合網絡的輸入,骨架特征作為個體與群體特征融合網絡的輸入;兩個網絡的輸出結果進行平均為最終分類結果;接著對訓練集進行監督式學習,得到泛化的深度學習模型;然后,對識別的視頻進行和模型訓練時一樣的預處理,然后作為輸入,放進預先訓練好深度學習模型里,就能得到行為分類的結果。

本發明提出的基于骨架和視頻特征融合的行為分類方法,具體步驟如下:

(1)獲取深度學習的訓練數據;

(2)訓練深度學習模型;

(3)用訓練好的模型對視頻進行行為分類。

步驟(1)中所述獲取深度學習訓練數據的具體流程為:

(11)首先處理視頻數據;所有的視頻數據都按30FPS處理,所有視頻縮放至256×256,并同時從視頻中隨機抽取一段視頻幀,長度為T,采樣率為2(即每隔一幀采樣一次);

(12)用ResNet-101-FPN為骨干的Faster-RCNN[2]模型對流程(11)中處理好的視頻數據進行人體檢測,得到人體檢測框;該ResNet-101-FPN為骨干的Faster-RCNN模型是在ImageNet和COCO人體關鍵點數據集上預訓練得到的;

(13)對流程(12)中獲取的人體檢測框數據,在每個人體框內使用OpenPose的2D姿態估計來獲取骨架數據,其數據結構為18個關節的2D空間坐標。

步驟(2)中所述訓練深度學習模型,具體包括:

對于視頻數據使用前景與背景特征融合網絡進行訓練;所述前景與背景特征融合網絡是由3DCNN網絡提取的背景特征與人體檢測框內的前景特征進行融合的網絡,其中3DCNN網絡使用SlowFast[3]網絡;

下載完整專利技術內容需要扣除積分,VIP會員可以免費下載。

該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于復旦大學,未經復旦大學許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服

本文鏈接:http://www.szxzyx.cn/pat/books/202011419698.2/2.html,轉載請聲明來源鉆瓜專利網。

同類專利
專利分類
×

專利文獻下載

說明:

1、專利原文基于中國國家知識產權局專利說明書;

2、支持發明專利 、實用新型專利、外觀設計專利(升級中);

3、專利數據每周兩次同步更新,支持Adobe PDF格式;

4、內容包括專利技術的結構示意圖流程工藝圖技術構造圖

5、已全新升級為極速版,下載速度顯著提升!歡迎使用!

請您登陸后,進行下載,點擊【登陸】 【注冊】

關于我們 尋求報道 投稿須知 廣告合作 版權聲明 網站地圖 友情鏈接 企業標識 聯系我們

鉆瓜專利網在線咨詢

周一至周五 9:00-18:00

咨詢在線客服咨詢在線客服
tel code back_top
主站蜘蛛池模板: 国产淫片免费看| 99国产精品久久久久| 欧美精品一卡二卡| 17c国产精品一区二区| 91精品视频一区二区三区| 亚洲乱在线| 国产精品一区二区三区在线看| 真实的国产乱xxxx在线91| 欧美精品在线视频观看| 日韩av一区二区在线播放| 精品国产一区二区三区久久久久久 | 国产精品亚洲精品| 国产一区二区极品| 色婷婷综合久久久久中文| 麻豆国产一区二区三区| 狠狠色丁香久久综合频道| 欧美乱大交xxxxx古装| 国产日韩精品一区二区三区| 国产精品国产三级国产专区53| 中文字幕在线视频一区二区| 欧美日韩国产欧美| 久久91久久久久麻豆精品| 国产日韩欧美综合在线| 北条麻妃久久99精品| 91一区二区三区在线| 亚洲无人区码一码二码三码| 国产区一二| 国产精品69av| 欧美日韩精品影院| 欧美日韩激情一区二区| 窝窝午夜精品一区二区| 久久久久一区二区三区四区| 国产免费观看一区| 国产伦精品一区二区三区免费观看| 羞羞视频网站免费| 免费观看黄色毛片| 欧美日韩一区二区三区四区五区| 亚洲精品456| 午夜亚洲影院| 一区二区三区香蕉视频| 精品国产区一区二| 国产日韩欧美一区二区在线观看| 亚洲欧美中日精品高清一区二区| 久久九九亚洲| 亚洲v欧美v另类v综合v日韩v| 日韩精品一区二区三区在线| 国产真裸无庶纶乱视频| 狠狠色狠狠色综合久久第一次| 26uuu亚洲国产精品| 91avpro| 国产精品电影免费观看| 午夜一区二区视频| 欧美性猛交xxxxxⅹxx88| 精品久久一区| 国产欧美一区二区三区精品观看| 电影91久久久| 国产高清一区二区在线观看| 91久久国语露脸精品国产高跟| 午夜肉伦伦影院九七影网| 91精品啪在线观看国产| 国偷自产中文字幕亚洲手机在线| 四季av中文字幕一区| 午夜免费一级片| 公乱妇hd在线播放bd| 狠狠色噜狠狠狠狠| 国产白嫩美女在线观看| 久久人人97超碰婷婷开心情五月| 欧美视屏一区| 国产精品综合一区二区| 国产精品99久久久久久宅男| 少妇高清精品毛片在线视频| 国产精品一区二区中文字幕| 91麻豆精品国产91久久久资源速度| 国产精品女同一区二区免费站| 91精品啪在线观看国产手机 | 日韩av一区二区在线播放| 欧美国产在线看 | 91国产一区二区| 国产日韩欧美亚洲| 亚洲女人av久久天堂| 北条麻妃久久99精品| 国产精品一区在线观看你懂的 | 国产在线不卡一区| 性欧美精品动漫| 四虎久久精品国产亚洲av| 玖玖玖国产精品| 日韩一区国产| 自拍偷在线精品自拍偷写真图片| 国产精品一区二区在线看| 国产精品午夜一区二区三区视频| 国产精品亚洲二区| 国产天堂一区二区三区| 国产精品一区一区三区| 精品亚洲午夜久久久久91| 色婷婷久久一区二区三区麻豆 | 91高跟紫色丝袜呻吟在线观看| 欧美日韩亚洲另类| 国产精品日韩视频| 国产一区第一页| 久久国产精品-国产精品| 一区不卡av| 国产一区观看| 国产日本一区二区三区| 欧美午夜羞羞羞免费视频app| 26uuu亚洲国产精品| 日本精品一区二区三区在线观看视频 | 国产在线不卡一| 麻豆国产一区二区| 亚洲一区二区国产精品| 国产精品伦一区二区三区级视频频| 国产欧美日韩中文字幕| 久久国产精品欧美| 日韩精品中文字幕在线| 欧美一区二区三区精品免费| 日韩中文字幕在线一区| 一级午夜影院| 午夜爽爽爽男女免费观看| 91精品美女| 91精品久| 中文字幕区一区二| 国产精品九九九九九九| 日本五十熟hd丰满| 国产在线一卡二卡| 亚洲国产精品综合| 99久久国产免费| 日韩av在线网址| 亚洲一卡二卡在线| 久久久精品视频在线| 久久艹国产精品| 伊人久久婷婷色综合98网| 亚洲精品少妇一区二区 | 色婷婷精品久久二区二区我来| 日本一级中文字幕久久久久久| 亚洲精品一区在线| 欧美亚洲视频二区| 免费在线观看国产精品| 激情久久一区二区三区| 曰韩av在线| 日韩女女同一区二区三区| 秋霞三级伦理| 欧美一区二区免费视频| 欧美高清xxxxx| 少妇高潮一区二区三区99小说| 欧美极品少妇videossex| 久久久中精品2020中文| 国产欧美一区二区三区沐欲| 国产aⅴ一区二区| 国产精品1区二区| 91精品国产综合久久婷婷香| 国产精品一区一区三区| 国产精品一区二区毛茸茸| 国产精品二区一区| 国产韩国精品一区二区三区| 91精品免费观看| 日韩精品午夜视频| 国产偷自视频区视频一区二区| 欧美在线播放一区| 中文乱码字幕永久永久电影| 国产91丝袜在线播放动漫| 538国产精品一区二区| 蜜臀久久99静品久久久久久| 国产1区在线观看| 国产精品久久国产三级国电话系列 | 精品99在线视频| 李采潭无删减版大尺度| 欧美日韩一卡二卡| 国产电影精品一区| 精品久久久久久中文字幕| 久久久久久中文字幕| 亚洲日韩aⅴ在线视频| 欧美精品二区三区| 片毛片免费看| 夜夜精品视频一区二区| 免费的午夜毛片| 欧美日韩一区二区三区在线观看视频| 欧美日韩中文字幕三区| 鲁丝一区二区三区免费| 一区二区午夜| 欧美一区二区三区高清视频| 国产精品久久亚洲7777| 欧美一区二三区| 亚洲免费永久精品国产| 少妇自拍一区| 午夜剧场一区| 国产伦理精品一区二区三区观看体验| 日本一区二区在线观看视频| 日本午夜一区二区| 国产亚洲综合一区二区| 国产精品亚洲欧美日韩一区在线| 国产精品久久99| 国产日韩欧美色图| 欧美hdfree性xxxx| 粉嫩久久久久久久极品| 欧美二区精品| 欧美日韩国产区| 久久一二区| 欧美一级不卡| 欧美日韩一区二区三区不卡| 国产三级一区二区| 日韩精品久久久久久中文字幕8| 99精品一区二区| 国产精品一二三四五区| 99久久国产综合精品麻豆| 99re久久精品国产| 波多野结衣巨乳女教师| 亚洲国产精品一区在线| 国产精品1234区| 国产精品96久久久久久久| 思思久久96热在精品国产| 国产精品视频tv| 国产一区免费在线观看| 精品久久9999| 亚洲一区二区三区加勒比| 国产精品96久久久| 久久一区二区三区视频| 国产精品一区二区av日韩在线| 国产精品久久二区| 欧美日本一二三区| 精品国产91久久久| 狠狠色成色综合网| 女人被爽到高潮呻吟免费看| 国产69精品久久777的优势| 久久激情影院| 欧美精品第一区| 97久久精品人人做人人爽| 色婷婷精品久久二区二区6| 国产欧美久久一区二区三区| 91麻豆精品国产综合久久久久久| 狠狠色狠狠色综合久久一| 在线国产精品一区二区| 欧美日韩国产精品综合| 7799国产精品久久99| 视频国产一区二区| 国产欧美一区二区精品婷| 国产一二三区免费| 国产精品999久久久| 久久99精品久久久秒播| 99精品小视频| 999亚洲国产精| 色综合久久久| 久久午夜鲁丝片| 国产69精品久久久久app下载| 色噜噜狠狠色综合中文字幕| 精品国产乱码久久久久久影片| 国产在线播放一区二区| 国产精一区二区三区|