[發明專利]一種航班地面保障作業規范流程檢測系統

在審

• 申請號: 201910088718.3
• 申請日: 2019-01-30
• 公開（公告）號: CN109871786A
• 公開（公告）日: 2019-06-11
• 發明（設計）人: 劉勇;鄧淳方
• 申請（專利權）人: 浙江大學
• 主分類號: G06K9/00
• 分類號: G06K9/00;H04N7/18;G06Q10/06;G06Q50/30
• 代理公司: 浙江杭州金通專利事務所有限公司 33100
• 代理人: 劉曉春

1.一種航班地面保障作業規范流程檢測系統，其特征在于：包括視頻獲取模塊、深度學習檢測模塊和數據分析模塊；

視頻獲取模塊獲取機場停機坪的監控視頻，視頻來自停機坪三個不同位置的相機，其中兩個相機分別固定在飛機的右側和左前方，另一個可旋轉相機安裝在飛機前方；拍攝的視頻保存在機場本地數據中心，開放API供其他模塊調取；

深度學習檢測模塊預先使用標注數據訓練目標檢測模型并保存，使用檢測工具復檢保證數據標注的可靠性，在darknet框架下構建目標檢測深度學習模型，使用標注數據進行訓練，保存訓練好的模型參數；從視頻獲取模塊提供的API接口調取監控視頻，經目標檢測模型逐幀檢測后，將檢測結果通過API傳遞給數據分析模塊；

數據分析模塊從API獲取視頻圖像幀檢測結果，對檢測結果進行數據預處理，使用狀態機模型分析視頻中的流程進行狀態并可視化顯示，對不符合地面保障作業規范流程的異常狀態發出警告信息，并將關鍵事件的時間段導出到ACDM數據庫。

2.根據權利要求1所述的一種航班地面保障作業規范流程檢測系統，其特征在于：視頻獲取模塊中采集到的視頻按照不同視角分類存儲，視頻分辨率為1080P。

3.根據權利要求1所述的一種航班地面保障作業規范流程檢測系統，其特征在于：深度學習檢測模塊中，使用目標檢測標注工具對提取出的圖像幀進行數據標注，標注目標包括飛機、人、警示錐、輪檔、客梯車、裝卸貨車、配餐車、加油車、清/污水車、客艙門供10種地面保障流程對象；目標的位置信息采用矩形邊界框表示，每個矩形邊界框用左上角坐標和右下角坐標定義。

4.根據權利要求1所述的一種航班地面保障作業規范流程檢測系統，其特征在于：數據分析模塊對從深度學習檢測模塊API獲取的檢測結果進行數據預處理，聯合物體的當前位置信息、運動信息、環境信息對當前的流程狀態進行判斷；深度學習檢測模塊API提供物體的當前位置信息，采用KCF跟蹤算法獲取物體的運動信息，采用傳統機器視覺方法獲取物體的環境信息。

5.根據權利要求4所述的一種航班地面保障作業規范流程檢測系統，其特征在于：狀態機模型可根據數據預處理獲取的信息推斷得到物體的下一個狀態，并綜合判斷物體的位置和運動是否符合流程規范。

6.根據權利要求5所述的一種航班地面保障作業規范流程檢測系統，其特征在于：針對物體的當前位置信息、運動信息和環境信息，狀態機模型可以分析得到關鍵事件的時間點。