[發(fā)明專利]一種人工巡檢智能監(jiān)測的方法、裝置、系統(tǒng)及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 201910925657.1
• 申請日: 2019-09-27
• 公開（公告）號: CN110781754A
• 公開（公告）日: 2020-02-11
• 發(fā)明（設(shè)計）人: 朱曉寧;吳喆峰;趙珊珊
• 申請（專利權(quán)）人: 精英數(shù)智科技股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62
• 代理公司: 11577 北京知呱呱知識產(chǎn)權(quán)代理有限公司
• 代理人: 彭伶俐

1.一種人工巡檢智能監(jiān)測的方法，其特征在于，包括：

獲取人物及物體的圖像信息；

根據(jù)人物的圖像信息確定人物動作，確定所述人物動作是否為巡檢特征動作；

響應(yīng)于確定所述人物動作為巡檢特征動作時，根據(jù)人物及物體的圖像信息確定人物與物體的位置關(guān)系，確定所述巡檢特征動作為有效巡檢動作或無效巡檢動作；

響應(yīng)于確定所述巡檢特征動作為無效巡檢動作時，執(zhí)行提示。

2.如權(quán)利要求1所述的一種人工巡檢智能監(jiān)測的方法，其特征在于，根據(jù)人物的圖像信息確定人物動作，確定所述人物動作是否為巡檢特征動作包括：

通過目標檢測模型獲取人物的一個或多個關(guān)鍵點的坐標信息；

對所述關(guān)鍵點的坐標信息進行正則化處理，通過運動姿態(tài)分類器確定所述人物動作；

響應(yīng)于確定預(yù)設(shè)巡檢特征動作數(shù)據(jù)庫中存在所述人物動作時，確定所述人物動作為巡檢特征動作。

3.如權(quán)利要求2所述的一種人工巡檢智能監(jiān)測的方法，其特征在于，通過目標檢測模型獲取人物的一個或多個關(guān)鍵點的坐標信息包括：

通過AlphaPose目標檢測模型獲取人物的18個關(guān)鍵點的坐標信息。

4.如權(quán)利要求3所述的一種人工巡檢智能監(jiān)測的方法，其特征在于，對所述關(guān)鍵點的坐標信息進行正則化處理，通過運動姿態(tài)分類器確定所述人物動作包括：

對所述關(guān)鍵點的坐標信息進行L2正則化處理，通過SoftMax分類器確定所述人物動作。

5.如權(quán)利要求4所述的一種人工巡檢智能監(jiān)測的方法，其特征在于，還包括：

通過COCO和MPII數(shù)據(jù)集訓(xùn)練AlphaPose目標檢測模型與SoftMax分類器。

6.如權(quán)利要求2所述的一種人工巡檢智能監(jiān)測的方法，其特征在于，響應(yīng)于確定所述人物動作為巡檢特征動作時，根據(jù)人物及物體的圖像信息確定人物與物體的位置關(guān)系，確定所述巡檢特征動作為有效巡檢動作或無效巡檢動作包括：

通過目標檢測模型確定物體的坐標信息；

根據(jù)所述人物的一個或多個關(guān)鍵點的坐標信息及物體的坐標信息，確定人物與物體的距離及角度；

響應(yīng)于所述人物與物體的距離滿足第一預(yù)設(shè)范圍且所述人物與物體的角度滿足第二預(yù)設(shè)范圍時，確定所述巡檢特征動作為有效巡檢動作；

響應(yīng)于所述人物與物體的距離不滿足第一預(yù)設(shè)范圍或所述人物與物體的角度不滿足第二預(yù)設(shè)范圍時，確定所述巡檢特征動作為無效巡檢動作。

7.如權(quán)利要求6所述的一種人工巡檢智能監(jiān)測的方法，其特征在于，還包括：

確定人物圖像信息的持續(xù)時間及有效巡檢動作的次數(shù)；

根據(jù)所述人物圖像信息的持續(xù)時間及有效巡檢動作的次數(shù)，確定巡檢過程的評分；

響應(yīng)于所述巡檢過程的評分低于預(yù)設(shè)分值，執(zhí)行提示。

8.一種人工巡檢智能監(jiān)測的裝置，其特征在于，包括：圖像采集單元、分析單元、提示單元，其中，

所述圖像采集單元，用于獲取人物及物體的圖像信息；

所述分析單元，用于根據(jù)人物的圖像信息確定人物動作，確定所述人物動作是否為巡檢特征動作；響應(yīng)于確定所述人物動作為巡檢特征動作時，根據(jù)人物及物體的圖像信息確定人物與物體的位置關(guān)系，確定所述巡檢特征動作為有效巡檢動作或無效巡檢動作；

所述提示單元，用于響應(yīng)于確定所述巡檢特征動作為無效巡檢動作時，執(zhí)行提示。

9.一種人工巡檢智能監(jiān)測的系統(tǒng)，其特征在于，包括：至少一個圖像采集裝置，至少一個處理器，至少一個提示裝置，其中，

所述圖像采集裝置，用于獲取人物及物體的圖像信息；

所述處理器，用于根據(jù)人物的圖像信息確定人物動作，確定所述人物動作是否為巡檢特征動作；響應(yīng)于確定所述人物動作為巡檢特征動作時，根據(jù)人物及物體的圖像信息確定人物與物體的位置關(guān)系，確定所述巡檢特征動作為有效巡檢動作或無效巡檢動作；

所述提示裝置，用于響應(yīng)于確定所述巡檢特征動作為無效巡檢動作時，執(zhí)行提示。

10.一種人工巡檢智能監(jiān)測的存儲介質(zhì)，其特征在于，所述存儲介質(zhì)中包含一個或多個程序指令，所述一個或多個程序指令用于執(zhí)行如權(quán)利要求1-7任一項所述的方法。