[發明專利]一種全自動眼底照片獲取、眼病預警及個性化管理系統

有效

• 申請號: 202010052971.6
• 申請日: 2020-01-17
• 公開（公告）號: CN111260635B
• 公開（公告）日: 2023-05-05
• 發明（設計）人: 孟巍;施丹莉
• 申請（專利權）人: 廣州慧視醫療科技有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06V10/764;G06V10/82;G16H30/20
• 代理公司: 廣州市南鋒專利事務所有限公司 44228
• 代理人: 劉媖

1.一種全自動眼底照片獲取、眼病預警及個性化管理系統，包括視覺信息采集傳感器、交互式語音引導裝置、多光譜眼底照相機、輕量化人工神經網絡嵌入的智能硬件、云平臺；

所述輕量化人工神經網絡包括：行為識別單元、交互式引導單元、眼底照片拍攝質量判定單元、數據儲存單元；

其中行為識別單元包括：

距離識別模塊：用以在視覺信息采集傳感器傳送過來的信息中，通過仿射變換探測目標距離；

關鍵點識別模塊：用以在定位后的目標中檢測目標運動的軸心和軸心運動軌跡；

動作識別模塊：用檢測到的距離和關鍵點判斷目標動作；

其中交互式引導單元包括：受檢者引導模塊：用以接收動作識別模塊的輸出，產生決策，輸入語音引導裝置，指引受檢者完成檢查流程；

環境配置模塊：用以接收動作識別模塊的輸出，產生決策，輸入多光譜眼底照相機模塊，自動開啟照相機，關閉環境燈光，調整照相機位置；

其中眼底照片拍攝質量判定單元包括：

亮度檢測模塊：用以判斷拍攝亮度是否達標，是否有反光，偽影；

清晰度檢測模塊：用以判斷拍攝清晰度是否達標；

完整度檢測模塊：用以判斷所拍攝眼底是否完整，是否有遮擋，黃斑和視盤區域是否被采集；

其中眼底疾病識別單元包括：

異常識別模塊：判斷眼底照片是否有異常；

異常分類模塊：將異常眼底照片根據疾病進行分類，明確疾病類別，對于人工神經網絡判定不能識別的分類不予分類；

其中個性化管理單元包括：

云平臺數據管理模塊：將數據進行交互式展示；

健康管理模塊：根據眼底疾病識別單元給出的診斷，個性化宣傳護眼、愛眼知識，給出隨訪意見；

轉診模塊：根據眼底是否異常，判斷疾病嚴重程度，提出預警，給出轉診和隨訪意見；

其中數據儲存單元包括：

信息匹配模塊：根據采集到的眼底圖片和診斷信息與受檢者既往的檢查記錄進行匹配，調取受檢者既往信息與本次檢查進行比較；

信息儲存模塊：將采集到的眼底圖片和診斷信息與受檢者既往的檢查記錄進行匹配，上傳和歸檔；

所述輕量化人工神經網絡還包括自適應結構調整單元，所述的自適應結構調整單元根據不同來源的輸入信息調整人工神經網絡的連接方式、特征提取結構、人工神經網絡的寬度和深度，具體步驟如下：

S1:判斷輸入層的維度大小，如果為一維，選擇循環神經網絡作為特征提取結構與輸入相連，如果為三維，選擇卷積神經網絡作為特征提取結構與輸入相連;

S2:根據目標輸入圖片的形狀和分辨率大小設計最佳的特征提取結構的并聯、串聯、不同數量的組合;

S3:調整輸出方式，將處理結果輸送到不同的處理單元，完成不同的功能，方法如下：如果輸入來自視覺信息采集傳感器，人工神經網絡的輸出連接至行為識別單元；如果輸入來自行為識別單元，人工神經網絡的輸出分別連接至語音引導裝置和眼底照相機設備；如果輸入來自眼底照相機，人工神經網絡的輸出連接至拍攝質量判定單元；如果輸入來自拍攝質量判定單元，判定為未通過則人工神經網絡的輸出連接至眼底照相機和語音引導單元，判定為通過則人工神經網絡的輸出連接至眼底疾病識別單元；如果輸入來自眼底疾病識別單元，人工神經網絡的輸出連接至個性化管理單元；如果輸入來自個性化管理單元，人工神經網絡的輸出連接至信息儲存單元。