[發明專利]一種基于AR眼鏡的自動化手術記錄整理的方法及系統

在審

• 申請號: 201811315319.8
• 申請日: 2018-11-06
• 公開（公告）號: CN109274914A
• 公開（公告）日: 2019-01-25
• 發明（設計）人: 孫文
• 申請（專利權）人: 北京智能決策醫療科技有限公司
• 主分類號: H04N5/76
• 分類號: H04N5/76
• 代理公司: 北京知呱呱知識產權代理有限公司 11577
• 代理人: 武媛;呂學文

1.一種基于AR眼鏡的自動化手術記錄整理的方法，其特征在于，所述方法包括：

在手術前預先向AR眼鏡中錄入患者的醫療信息；

在手術過程中，通過所述AR眼鏡全程記錄視頻與音頻，并通過預設指令集從記錄的所述視頻與音頻中獲取關鍵視頻、關鍵音頻以及關鍵圖像；

基于預先錄入的所述患者的醫療信息以及獲取的所述關鍵視頻、關鍵音頻和關鍵圖像，自動整理本次的手術記錄。

2.根據權利要求1所述的方法，其特征在于，所述預設指令集至少包括記錄視頻、拍攝照片、放大拍攝、調取病歷以及插入信息。

3.根據權利要求1或2所述的方法，其特征在于，所述通過預設指令集從記錄的所述視頻與音頻中獲取關鍵視頻、關鍵音頻以及關鍵圖像包括：

所述AR眼鏡接收記錄視頻的指令，并從接收到所述記錄視頻的指令的時刻開始錄制視頻，并在接收到停止記錄視頻的指令時，停止本次的視頻錄制過程，并將本次錄制的視頻作為所述關鍵視頻。

4.根據權利要求3所述的方法，其特征在于，所述自動整理本次的手術記錄包括：

在手術記錄的模板中確定視頻記錄區域，并將所述關鍵視頻壓縮之后，插入所述視頻記錄區域中。

5.根據權利要求1或2所述的方法，其特征在于，所述通過預設指令集從記錄的所述視頻與音頻中獲取關鍵視頻、關鍵音頻以及關鍵圖像包括：

所述AR眼鏡接收拍攝照片或者放大拍攝的指令，并按照所述指令拍攝當前的圖像，并將當前拍攝的圖像作為所述關鍵圖像。

6.根據權利要求5所述的方法，其特征在于，所述自動整理本次的手術記錄包括：

在手術記錄的模板中確定圖像記錄區域，并將所述關鍵圖像插入所述圖像記錄區域中。

7.根據權利要求1或2所述的方法，其特征在于，所述方法還包括：

所述AR眼鏡接收調取病歷和插入信息的指令，獲取預先錄入的所述患者的醫療信息；

相應地，自動整理本次的手術記錄包括：

在手術記錄的模板中確定醫療信息區域，并將獲取的所述患者的醫療信息插入所述醫療信息區域中。

8.根據權利要求1或2所述的方法，其特征在于，所述方法還包括：

所述AR眼鏡通過語音識別技術對全程記錄的音頻進行識別，以將所述全程記錄的音頻轉換為對應的文字；

從轉換得到的文字中抽取具備語義的文字，并將抽取的文字插入對應時間的手術記錄中。

9.一種基于AR眼鏡的自動化手術記錄整理的系統，其特征在于，所述系統包括：

醫療信息錄入單元，用于在手術前預先向AR眼鏡中錄入患者的醫療信息；

關鍵信息獲取單元，用于在手術過程中，通過所述AR眼鏡全程記錄視頻與音頻，并通過預設指令集從記錄的所述視頻與音頻中獲取關鍵視頻、關鍵音頻以及關鍵圖像；

手術記錄自動整理單元，用于基于預先錄入的所述患者的醫療信息以及獲取的所述關鍵視頻、關鍵音頻和關鍵圖像，自動整理本次的手術記錄。

10.根據權利要求9所述的系統，其特征在于，所述關鍵信息獲取單元包括：

視頻獲取模塊，用于接收記錄視頻的指令，并從接收到所述記錄視頻的指令的時刻開始錄制視頻，并在接收到停止記錄視頻的指令時，停止本次的視頻錄制過程，并將本次錄制的視頻作為所述關鍵視頻；

圖像獲取模塊，用于接收拍攝照片或者放大拍攝的指令，并按照所述指令拍攝當前的圖像，并將當前拍攝的圖像作為所述關鍵圖像；

語音識別模塊，用于通過語音識別技術對全程記錄的音頻進行識別，以將所述全程記錄的音頻轉換為對應的文字。