[發(fā)明專利]基于語義和圖像識別的心電信息提取方法及裝置

有效

• 申請?zhí)枺?/td>: 202011001748.5
• 申請日: 2020-09-22
• 公開（公告）號: CN111931717B
• 公開（公告）日: 2021-01-26
• 發(fā)明（設計）人: 宋青原;王健宗;吳天博;程寧
• 申請（專利權）人: 平安科技（深圳）有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06F40/30;G06N3/08;G06N3/04
• 代理公司: 深圳市精英專利事務所 44242
• 代理人: 李翔宇

本發(fā)明公開了基于語義和圖像識別的心電信息提取方法、裝置、計算機設備及存儲介質，涉及人工智能技術，可應用于智慧醫(yī)療場景，包括對當前待識別文本信息進行語義識別，得到與當前待識別文本信息對應的語義向量；接收上傳的心電圖影像，調用基于注意力機制的Res2Net分類網絡，將心電圖影像根據基于注意力機制的Res2Net分類網絡進行分類，得到對應的輸出向量；以及調用預先訓練的Light GBM模型，將語義向量及輸出向量輸入至Light GBM模型進行分類，得到對應的分類結果。該方法還涉及醫(yī)療科技和區(qū)塊鏈技術，實現了結合用戶端上傳的文字信息與心電圖影像對應的圖像信息，再經過Light GBM算法來進行分類，提升了分類結果的準確度與可信度。

技術領域

本發(fā)明涉及人工智能的智能決策技術領域，尤其涉及一種基于語義和圖像識別的心電信息提取方法、裝置、計算機設備及存儲介質。

背景技術

目前，心電智能診斷系統在日常生活中得到了廣泛應用，例如一些智能穿戴設備（如蘋果公司的Apple Watch）可以采集用戶的心電信息，還可將采集的心電信息生成心電圖后上傳至服務器進行后續(xù)圖像識別，以生成報告信息。但是上述方式存在以下缺陷：

1）上傳的僅僅只有心電圖，缺乏文字描述；

2）心電圖信息都是基于智能便攜式測量得到的，精度與可靠性遠遠不如醫(yī)用心電儀；

3）對心電圖進行識別的圖像識別模型準確度較低。

發(fā)明內容

本發(fā)明實施例提供了一種基于語義和圖像識別的心電信息提取方法、裝置、計算機設備及存儲介質，旨在解決現有技術中心電圖信息都是基于智能便攜式測量得到的，精度與可靠性較低，而且對心電圖進行識別的圖像識別模型準確度較低的問題。

第一方面，本發(fā)明實施例提供了一種基于語義和圖像識別的心電信息提取方法，其包括：

接收用戶端上傳的文本描述信息；

判斷所述文本描述信息中是否包括預設的關鍵詞；

若所述文本描述信息中包括所述關鍵詞，獲取所述文本描述信息以作為當前待識別文本信息；

若所述文本描述信息中不包括所述關鍵詞，調用預先存儲的引導問題集發(fā)送至用戶端；

接收用戶端根據所述引導問題集對應發(fā)送的回復文本信息以作為當前待識別文本信息；

對所述當前待識別文本信息進行語義識別，以得到與所述當前待識別文本信息對應的語義向量；

接收上傳的心電圖影像，調用預先訓練的基于注意力機制的Res2Net分類網絡，將所述心電圖影像根據所述基于注意力機制的Res2Net分類網絡進行分類，得到對應的輸出向量；以及

調用預先訓練的Light GBM模型，將所述語義向量及所述輸出向量輸入至所述Light GBM模型進行分類，得到對應的分類結果。

第二方面，本發(fā)明實施例提供了一種基于語義和圖像識別的心電信息提取裝置，其包括：

文本描述信息接收單元，用于接收用戶端上傳的文本描述信息；

關鍵詞判斷單元，用于判斷所述文本描述信息中是否包括預設的關鍵詞；

第一文本信息獲取單元，用于若所述文本描述信息中包括所述關鍵詞，獲取所述文本描述信息以作為當前待識別文本信息；

引導問題集發(fā)送單元，用于若所述文本描述信息中不包括所述關鍵詞，調用預先存儲的引導問題集發(fā)送至用戶端；

第二文本信息獲取單元，用于接收用戶端根據所述引導問題集對應發(fā)送的回復文本信息以作為當前待識別文本信息；