[發明專利]一種基于視覺感知的面部神經麻痹患者康復檢測系統

有效

• 申請號: 202110886200.1
• 申請日: 2021-08-03
• 公開（公告）號: CN113570590B
• 公開（公告）日: 2022-06-07
• 發明（設計）人: 陳如中
• 申請（專利權）人: 江蘇仁和醫療器械有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06T7/246;G06V10/77;G06V10/26;G06V40/20;G06V40/16;G06T17/00
• 代理公司: 江蘇長德知識產權代理有限公司 32478
• 代理人: 張勝海

本發明涉及機器視覺技術領域，具體涉及一種基于視覺感知的面部神經麻痹患者康復檢測系統。該系統通過患者運動過程中的人臉三維信息獲得患者嘴巴傾斜程度和嘴巴運動能力。通過熱成像圖像結合人臉三維信息獲得代謝嚴重程度和康復狀態特征。根據嘴巴傾斜程度、嘴巴運動能力、代謝嚴重程度和康復狀態特征全面的對患者面部運動過程中的運動變化和熱量變化進行分析，獲得康復程度。本發明通過患者的三維信息和熱成像圖像全面的分析了患者的康復程度，便于康復訓練的指導。

技術領域

本發明涉及機器視覺技術領域，具體涉及一種基于視覺感知的面部神經麻痹患者康復檢測系統。

背景技術

面部神經麻痹疾病是以面部表情肌群運動功能障礙為主要特征的一種疾病，它是一種常見病、多發病，不受年齡限制，癥狀表現為口眼歪斜等，嚴重的患者往往連最基本的抬眉、閉眼、鼓嘴等動作都無法完成。

對于出現嘴部神經麻痹的患者，其癥狀表現為嘴巴歪斜、嘴角偏移、嘴部的肌肉運動能力不強，例如患者在說話時嘴巴上只有部分肌肉能夠靈活運動。

面部神經麻痹疾病患者不僅需要配合藥物治療，還需要長期做康復訓練才能有效的治愈疾病，例如多做一些咧嘴、微笑等動作進行康復訓練，但是患者不能定量的指導自己的康復情況，現有技術中通過機器視覺分析面部圖像中一些部位的位移情況來反映康復程度，沒有考慮嘴巴相關肌肉的代謝程度，無法全面的檢測患者的康復程度。

發明內容

為了解決上述技術問題，本發明的目的在于提供一種基于視覺感知的面部神經麻痹患者康復檢測系統，所采用的技術方案具體如下：

本發明提出了一種基于視覺感知的面部神經麻痹患者康復檢測系統，所述系統包括：

三維信息采集模塊，用于獲得患者面部運動過程中的面部圖像；根據所述面部圖像獲得人臉三維信息；

嘴巴傾斜程度獲取模塊，用于通過所述人臉三維信息獲得嘴巴傾斜程度；

嘴巴運動能力獲取模塊，用于通過運動過程中的所述人臉三維信息的網格點坐標變化獲得嘴巴運動信息集合；根據所述嘴巴運動信息集合獲得嘴巴運動能力；

嘴巴代謝嚴重程度獲取模塊，用于獲得患者面部的熱成像圖像；分割所述熱成像圖像，獲得嘴巴熱量圖；將所述嘴巴熱量圖和所述人臉三維信息分別旋轉至水平并融合，獲得嘴巴三維熱量圖；根據所述嘴巴三維熱量圖獲得多組嘴巴對稱網格點；獲得每個所述嘴巴對稱網格點之間的像素值差異；通過所述嘴巴熱量圖每列像素的均值構建熱量列表數據；根據所述熱量列表數據和所述像素值差異獲得代謝嚴重程度；

康復狀態特征獲取模塊，用于以所述熱成像圖像中患者的面部兩側熱量差異作為第一熱量差異；以患者面部運動前后所述第一熱量差異的差值作為第二熱量差異；通過所述第二熱量差異和所述嘴巴運動信息集合獲得康復狀態特征；

康復程度獲取模塊，用于通過所述嘴巴傾斜程度、所述嘴巴運動能力、所述代謝嚴重程度和所述康復狀態特征獲得康復程度。

進一步地，所述嘴巴傾斜程度獲取模塊包括：

對所述人臉三維信息中嘴巴網格點進行主成分分析，獲得多個第一主成分方向；以所述嘴巴網格點在所有所述第一主成分方向上投影方差最大的所述第一主成分方向作為最優第一主成分方向；

對所述人臉三維信息中人臉中心線網格點進行主成分分析，獲得多個第二主成分方向；以所述中心線網格點在所有所述第二主成分方向上投影方差最大的所述第二主成分方向作為最優第二主成分方向；

以所述最優第一主成分方向與所述最優第二主成分方向的夾角表示所述嘴巴傾斜程度。

進一步地，所述嘴巴運動能力獲取模塊還包括嘴巴運動信息獲取模塊；