[發(fā)明專利]口腔器械消毒滅菌操作監(jiān)控方法及裝置

有效

• 申請?zhí)枺?/td>: 202111322545.0
• 申請日: 2021-11-09
• 公開（公告）號: CN113762228B
• 公開（公告）日: 2022-02-22
• 發(fā)明（設計）人: 武文;孟慶超;王俊杰;武楊
• 申請（專利權）人: 南京惠積信息科技有限公司
• 主分類號: G06V20/52
• 分類號: G06V20/52;G10L25/57;G10L25/51;H04N7/18
• 代理公司: 北京久維律師事務所 11582
• 代理人: 邢江峰

1.一種口腔器械消毒滅菌操作監(jiān)控方法，其特征在于，包括：

讀取第一json文件和口腔清洗間拍攝到的視頻文件，其中，所述第一json文件記錄有水槽位置信息、視頻文件所在位置的絕對路徑以及輸出文件的絕對路徑；

對所述視頻文件進行解析，得到音頻和畫面；

將所述音頻切割為多段音頻，以保證每段音頻內容的單一性；

將切割得到的每一段音頻帶入到水聲檢測模型中，以檢測每一段音頻中是否出現(xiàn)水聲，并將水聲檢測結果保存在列表中；

將所述畫面進行灰度化及高斯模糊處理；

將所述畫面帶入到人體檢測模型中，以對所述畫面中出現(xiàn)的人體進行檢測，其中，檢測時加大手部和肘部的權重，并在檢測結果匯總之后用一個點來代替人體位置信息，將人體位置信息存儲在列表中；

調用所述水槽位置信息和人體位置信息；

根據(jù)所述水槽位置信息和人體位置信息，判斷水槽和人的位置是否在預定的距離內；

如果水槽和人的位置在預定的距離內，根據(jù)所述水聲檢測結果，識別同時音頻中是否出現(xiàn)水聲；

如果水槽和人的位置在預定的距離內，并且同時音頻中出現(xiàn)水聲，判定操作員做出了沖洗動作；

如果水槽和人的位置在預定的距離內，但音頻中未同時出現(xiàn)水聲，判定操作員沒有做出沖洗動作；

將判定的結果輸出到第一json文件中，所述判定的結果包含操作員是否進行了沖洗動作，以及在操作員進行了沖洗動作的情況下，沖洗動作的起始時間和結束時間。

2.如權利要求1所述的方法，其特征在于，所述水槽位置信息包含水槽在畫面中的大小信息，當水槽中心點到水槽外切圓距離與人與水槽中心點的距離的比值大于1/2，認為水槽和人的位置在預定的距離內。

3.如權利要求1所述的方法，其特征在于，所述第一json文件還記錄有算法每秒讀取幀數(shù)；將所述畫面進行灰度化及高斯模糊處理之前，所述方法還包括：

判斷所述第一json文件中記錄的算法每秒讀取幀數(shù)是否大于所述視頻文件本身的幀數(shù)；

如果所述第一json文件中記錄的算法每秒讀取幀數(shù)大于所述視頻文件本身的幀數(shù)，不進行抽幀處理，直接將所述畫面進行灰度化及高斯模糊處理；

如果所述第一json文件中記錄的算法每秒讀取幀數(shù)小于或等于所述視頻文件本身的幀數(shù)，按所述算法每秒讀取幀對視頻文件進行抽幀處理，之后對抽取的每一幀畫面進行灰度化及高斯模糊處理。

4.如權利要求1所述的方法，其特征在于，所述方法還包括：

讀取第二json文件和口腔清洗間拍攝到的視頻文件，其中，所述第二json文件記錄有超聲儀位置信息、視頻文件所在位置的絕對路徑以及輸出文件的絕對路徑；

對所述視頻文件進行解析，得到音頻和畫面；

將所述音頻切割為多段音頻，以保證每段音頻內容的單一性；

將切割得到的每一段音頻帶入到金屬碰撞聲檢測模型中，以檢測每一段音頻中是否出現(xiàn)金屬碰撞聲，并將金屬碰撞聲檢測結果保存在列表中；

將所述畫面進行灰度化及高斯模糊處理；

將所述畫面帶入到人體檢測模型中，以對所述畫面中出現(xiàn)的人體進行檢測，其中，檢測時加大手部和肘部的權重，并在檢測結果匯總之后用一個點來代替人體位置信息，將人體位置信息存儲在列表中；

調用所述超聲儀位置信息和人體位置信息；

將超聲儀位置信息所在區(qū)域單獨分割出來，進行移動檢測，得到畫面變化信息；

根據(jù)所述超聲儀位置信息和人體位置信息和畫面變化信息，判斷超聲儀和人的位置是否在預定的距離內；

如果超聲儀和人的位置在預定的距離內，根據(jù)所述金屬碰撞聲檢測結果，識別同時音頻中是否出現(xiàn)金屬碰撞聲，以及同時畫面變化信息中是否存在畫面產生明顯變化；

如果超聲儀和人的位置在預定的距離內，并且同時音頻中出現(xiàn)金屬碰撞聲，同時畫面變化信息中存在畫面產生明顯變化，判定操作員做出了取放器械動作；

如果水槽和人的位置在預定的距離內，但未同時滿足音頻中出現(xiàn)金屬碰撞聲以及畫面變化信息中存在畫面產生明顯變化，判定操作員沒有做出取放器械動作；

將判定的結果輸出到第二json文件中，所述判定的結果包含操作員是否進行了取放器械動作，以及在操作員進行了取放器械動作的情況下，取放器械動作的起始時間和結束時間。