[發明專利]一種基于多傳感器信息融合和深度學習的智能中醫健康檢測梳妝臺

在審

• 申請號: 201810724230.0
• 申請日: 2018-07-04
• 公開（公告）號: CN108814565A
• 公開（公告）日: 2018-11-16
• 發明（設計）人: 魏大鵬;郭云飛;陳喬松;劉文俊
• 申請（專利權）人: 重慶郵電大學
• 主分類號: A61B5/02
• 分類號: A61B5/02;A47B67/00;G16H20/30;G16H20/60;G16H50/20;G16H50/30
• 代理公司: 北京同恒源知識產權代理有限公司 11275
• 代理人: 趙榮之

本發明涉及一種基于多傳感器信息融合和深度學習的智能中醫健康檢測梳妝臺，屬于人機交互領域。該梳妝臺包括多維傳感器信號采集單元、信息融合單元、信號控制與處理單元。信息融合單元通過wide&deep算法進行時域信息融合：使用LSTM算法對脈搏信號進行特征提取作為wide部分，再使用Fast?RCNN算法對用戶面部信息進行特征提取作為deep部分，最后利用協同濾波對脈搏特征和面部特征進行綜合特征提取；信號控制與處理單元根據中醫的望診和脈診作為先驗知識對提取的用戶面部特征和脈搏特征進行健康綜合評估，再根據用戶的健康綜合評估給出建議。本發明使用方便且多維信號對用戶健康狀態判斷準確性更高。

技術領域

本發明屬于人機交互領域，涉及一種基于多傳感器信息融合和深度學習的智能中醫健康檢測梳妝臺。

背景技術

使用化妝品是現代女性生活中不可分割的一部分，化妝品在美化女性面容的同時也使一些健康問題被掩蓋。現代社會快節奏的生活方式，長期的使用電子產品，睡眠時間的減少以及無規律的飲食——極易導致現代女性在健康方面出現問題，這些問題在初期有可能不屬于病態的，而是屬于亞健康狀態。

根據《亞健康中醫臨床指南》：亞健康是指人體處于健康和疾病之間的狀態。處于亞健康狀態者，不能達到健康標準，表現為一定時間內的活力下降，記憶力減退，注意力不集中，思維緩慢，環境適應能力減退等癥狀。而女性長期處于亞健康狀態，會導致內分泌紊亂，睡眠質量下降，情緒易于波動，脫發，體重發生變化等情況。

中醫理論是中華民族的文化瑰寶，同時有別于西醫針對病理問題的思維方式——中醫講求通過天人合一的整體理念來調節人體的陰陽五行平衡狀態。而在中醫的望聞問切中，望診和切診是當代中醫重要的判斷患者病情的方式。運用視覺觀察患者的形體、面色、舌苔和舌體，根據形色變化確定病位、病性，成為望診。脈診又稱切診，是通過按觸人體不同部位的脈搏以體察脈象變化方法。

現代女性大量的使用化妝品會將女性面部肌膚的許多問題掩蓋掉，比如：眼部的分泌物，肌膚的色澤，眼瞼的水腫等特征。而中醫中的望診正是通過這些特征來判斷患者病情的。所以，當代女性的生活方式為中醫給女性診斷帶來一定阻力。

發明內容

有鑒于此，本發明的目的在于提供一種基于多傳感器信息融合和深度學習的智能中醫健康檢測梳妝臺，實現現代女性愛美需求與現代中醫理療的平衡點：1，針對用戶：利用每天卸妝后和化妝前的時段，通過靜態面部信息采集模塊和脈搏信息采集模塊對自身的健康狀態進行監控——不僅能夠方便女性的日常生活，而且還有助于采集到用戶的真實生理特征；2，通過采集到用戶的真實面部細節生理特征——可以使用具有中醫望診專家知識庫的計算機視覺系統對用戶的健康狀態進行精準評估；3，通過采集到用戶的脈搏特征——可以使用具有中醫脈診專家知識庫的遞歸神經網絡系統對用戶的健康狀態進行精準評估；4，針對長期處于亞健康狀態的用戶——利用每天化妝時間養成對面部數據和脈搏數據采集的習慣，可以建立用戶個體專用數據庫，以此訓練深度學習模型進行改進；5，將面部信息經過望診提取的特征與脈搏信息通過脈診提取的特征通過wide&deep算法進行特征信息融合實現在特征級別的多源異構數據的融合學習，以此從多維信息來準確定位用戶的亞健康病位和病性。

為達到上述目的，本發明提供如下技術方案：

一種基于多傳感器信息融合和深度學習的智能中醫健康檢測梳妝臺，包括多維傳感器信號采集單元、信息融合單元、信號控制與處理單元；

多維傳感器信號采集單元包括智能手環脈搏傳感器單元和用戶面部信息采集單元，智能手環脈搏傳感器單元用于動態采集用戶脈搏信息，用戶面部信息采集單元用于采集用戶面部圖像和舌苔圖像；智能手環脈搏傳感器單元包括紅外傳感器和數模信號轉換模塊；用戶面部信息采集單元包括數字攝像頭和視頻信息存儲設備；