[發明專利]一種自動識別和朗讀藥品說明書的方法

有效

• 申請號: 201710027181.0
• 申請日: 2017-01-16
• 公開（公告）號: CN106652673B
• 公開（公告）日: 2020-09-22
• 發明（設計）人: 秦華標;梁志堅;吳朝暉;林小穎;許華杰
• 申請（專利權）人: 華南理工大學
• 主分類號: G09B21/00
• 分類號: G09B21/00;G10L13/00;G10L15/22
• 代理公司: 廣州粵高專利商標代理有限公司 44102
• 代理人: 何淑珍

1.一種自動識別和朗讀藥品說明書的方法，采用具有攝像頭、處理器、語音播放模塊的識別系統，其特征在于包括如下步驟：

（1）識別說明書，系統通過拍攝一張藥品說明書的圖片，自動識別國藥準字并以此通過調用互聯網接口獲取具體藥品信息；其中還包括精簡識別字庫，只保留關鍵字，再進行訓練，提高識別準確率和識別速度；同時也能識別國外的進口藥；包括如下步驟：

分析連通區域，檢測出字符區域的區域輪廓和子輪廓，集成為塊區域；

找到塊區域，檢測出字符輪廓，得到文本行；再通過空格得到單詞；

找文本行和單詞，采用自適應分類器，分析單詞；進行兩次單詞分析；

得出識別文本，識別含有模糊的空格，筆畫高度，小寫字母；

（2）旋轉文本校正，通過霍夫直線檢測算法實現基于傅里葉變換的旋轉文本校正，將拍攝得到有旋轉偏差的文本旋轉至水平；包括如下步驟：

（2.1）以灰度方式讀入原文件；

（2.2）將圖像擴展到合適的尺寸以方便快速變換；

（2.3）進行DFT運算，分別計算實部和虛部；

（2.4）對數據進行適當調整，考慮到幅度變化范圍很大，還要用log函數把數值范圍縮小；

（2.5）移動中心，DFT運算的結果低頻部分位于四角，高頻部分在中心，因此要把低頻部分移動到中心；

（2.6）圖像校正，先將得到的傅里葉頻譜進行二值化，接下來檢測直線，然后找到符合條件的那條斜線并獲取角度，接著進行角度轉換，最后對圖像進行校正；

（3）紙張翻轉檢測，通過識別藥品說明書上是否有文字來檢測紙張是否翻轉，并通過語音提示將翻轉的紙張翻轉回來；

（4）文本倒置翻轉檢測，通過同時識別經過旋轉文本校正的圖片和翻轉180°后得到的圖片獲取國藥準字；

（5）獲取藥品信息，通過調用互聯網提供的藥品信息接口，上傳識別得到的國藥準字并返回藥品信息；

（6）語音喚醒，通過使用語音喚醒庫設定喚醒短語，將系統從睡眠狀態喚醒過來；

（7）語音合成，通過使用語音合成庫，將藥品的文本信息朗讀出來。

2.根據權利要求 1 所述的一種自動識別和朗讀藥品說明書的方法，其特征在于，步驟（5）獲取藥品信息中還包括處理返回的字符串得到藥品的文本信息，為語音合成提供文件。

3.根據權利要求 1 所述的一種自動識別和朗讀藥品說明書的方法，其特征在于，還包含采用語音識別模塊，通過使用語音識別庫設定控制命令，識別語音指令。