[發明專利]一種計算機輔助的自閉癥兒童情感社交康復訓練系統

在審

• 申請號: 202011189221.X
• 申請日: 2020-10-30
• 公開（公告）號: CN112331305A
• 公開（公告）日: 2021-02-05
• 發明（設計）人: 陳輝;彭曉蘭;姚乃明;王宏安
• 申請（專利權）人: 中國科學院軟件研究所
• 主分類號: G16H20/70
• 分類號: G16H20/70;G06K9/62
• 代理公司: 北京君尚知識產權代理有限公司 11200
• 代理人: 司立彬

1.一種計算機輔助的自閉癥兒童情感社交康復訓練系統，其特征在于，包括身份認知訓練模塊、視線訓練模塊、表情訓練模塊、社交場景情感訓練模塊和多通道反饋單元，其中

所述多通道反饋單元包括視線處理裝置、面部表情處理裝置、語音識別處理裝置和觸控行為處理裝置；所述視線處理裝置，用于獲取并識別自閉癥兒童的視線方向；所述面部表情處理裝置，用于獲取并識別自閉癥兒童的面部表情；所述語音識別處理裝置，用于獲取并識別自閉癥兒童的語音；所述觸控行為處理裝置，用于獲取并分析自閉癥兒童在交互界面上的界面動作；

所述身份認知訓練模塊，用于基于設定的身份認知訓練題目對自閉癥兒童進行訓練并利用所述多通道反饋單元采集訓練時自閉癥兒童的身份認知反饋信息，然后基于身份認知反饋信息計算訓練任務完成時間和準確率，確定視線訓練模塊的訓練內容、訓練難度以及訓練頻次；

所述視線訓練模塊，用于基于設定的視線訓練題目對自閉癥兒童進行訓練并利用所述多通道反饋單元采集訓練時自閉癥兒童的視線反饋信息，然后基于視線反饋信息計算訓練任務完成時間和準確率，確定表情訓練模塊的訓練內容、訓練難度以及訓練頻次；

所述表情訓練模塊，用于基于設定的表情訓練題目對自閉癥兒童進行訓練并利用所述多通道反饋單元采集訓練時自閉癥兒童的表情反饋信息，然后基于表情反饋信息計算訓練任務完成時間和準確率，確定社交場景情感訓練模塊的訓練內容、訓練難度以及訓練頻次；所述社交場景情感訓練模塊，用于基于設定的社交場景情感訓練題目對自閉癥兒童進行訓練并利用所述多通道反饋單元采集訓練時自閉癥兒童的視線、表情、身份反饋信息，然后基于反饋信息計算訓練任務完成時間和準確率，確定綜合訓練內容以及訓練頻次。

2.如權利要求1所述的系統，其特征在于，所述身份認知訓練題目包括第一身份匹配題目、第二身份匹配題目、身份匹配題目和身份記憶題目；其中，所述第一身份匹配題目中的圖片包括布置在所述交互界面上的多對匹配圖片，每對匹配圖片由兩張相同的人物圖片組成；第一身份匹配題目對應的操作指令用于指示自閉癥兒童選擇相同的人物圖片進行配對，直至交互界面上所有的人物圖片配對完成；所述第二身份匹配題目中的圖片包括布置在所述交互界面上的多對匹配圖片，每對匹配圖片包括兩張具有相同的身份信息、不同的搭配信息的人物圖片組成；第二身份匹配題目對應的操作指令用于指示自閉癥兒童選擇具有相同的身份信息的人物圖片進行配對，直至交互界面上所有的人物圖片配對完成；所述身份匹配題目中的圖片包括布置在所述交互界面上的目標圖片以及多張圖片碎片，其中存在多張圖片碎片能夠拼成與所述目標圖片中人物的身份信息相同的圖片；身份匹配題目對應的操作指令用于指示自閉癥兒童選擇圖片碎片，并拼成與所述目標圖片中人物的身份信息相同的圖片；所述身份記憶題目包括按照預設的時間間隔依次顯示的第一界面和第二界面，第一界面中的圖片包括布置在所述交互界面上的目標圖片，第二界面中的圖片包括布置在所述交互界面上的多張人物圖片；其中不同人物圖片的身份信息不同，且存在一張人物圖片與目標圖片相同，或者是存在一張人物圖片的身份信息與目標圖片中的身份信息相同；身份記憶題目對應的操作指令用于指示自閉癥兒童在第二界面中選擇與目標圖片相同或者是與目標圖片中的身份信息相同的人物圖片。

3.如權利要求1所述的系統，其特征在于，所述視線訓練題目包括第一視線識別題目、第二視線識別題目和視線輸出題目；所述第一視線識別題目中的圖片包括布置在所述交互界面上不同位置的一人物圖片和多張物品圖片，其中人物圖片指示出人物視線方向，其中一張所述物品圖片布置在人物圖片的人物視線方向上；第一視線識別題目對應的操作指令用于指示自閉癥兒童選擇布置在人物圖片中人物視線方向上的物品圖片；所述第二視線識別題目中的圖片包括布置在所述交互界面上的多張人物圖片，不同人物圖片中的人物視線方向不同；第二視線識別題目對應的操作指令用于指示自閉癥兒童選擇指定人物視線方向的人物圖片；所述視線輸出題目中的圖片包括布置在所述交互界面上的多張物品圖片或人物圖片；視線輸出題目對應的操作指令用于指示自閉癥兒童看向交互界面上指定的物品圖片或人物圖片。