[發明專利]一種自閉癥康復訓練導引游戲式人機互動系統及方法

有效

• 申請號: 201811147285.6
• 申請日: 2018-09-29
• 公開（公告）號: CN108939532B
• 公開（公告）日: 2022-05-31
• 發明（設計）人: 宋祥銳;區耀文
• 申請（專利權）人: 上海青鴻教育科技有限公司
• 主分類號: A63F13/20
• 分類號: A63F13/20;A63F13/25;A63B69/00;A63B71/06
• 代理公司: 北京酷愛智慧知識產權代理有限公司 11514
• 代理人: 鄒成嬌

1.一種自閉癥康復訓練導引游戲式人機互動系統，其特征在于，包括輸入模塊、處理模塊和顯示模塊；

所述輸入模塊用于獲取受訓兒童的輸入請求；

所述處理模塊用于根據所述輸入請求調用導引游戲的游戲畫面；

所述顯示模塊用于顯示所述游戲畫面；

所述輸入模塊還用于對顯示的所述游戲畫面進行操作以生成互動數據，具體包括：

所述游戲畫面上顯示有提示信息，受訓兒童根據所述提示信息在輸入模塊上操作，并識別出操作時所產生的線段軌跡，獲取各線段軌跡的坐標信息，并將所述坐標信息作為所述互動數據；

通過所述提示信息引導對游戲畫面中的一些物體進行移動、點擊以及將一些數字移動到特定的空格處，組成一段完整的話，并獲取各個觸摸點在水平方向和豎直方向上的坐標值；

所以處理模塊還將獲取輸入模塊的坐標原點位置，將坐標原點位置和觸摸點的坐標送入預設的坐標系下進行轉換，將轉換結果作為最終的互動數據，用于下一步的驗證；

所述處理模塊還用于對所述互動數據進行驗證，若驗證通過，則生成反饋數據；

所述顯示模塊還用于顯示所述反饋數據；

還包括采集模塊；

所述采集模塊用于采集受訓兒童的面部表情圖像和肢體動作；

所述處理模塊還用于對接收的所述面部表情圖像進行識別以得到表情類型，對所述肢體動作進行識別以得到動作類型，并將所述表情類型和動作類型發送至遠程的智能終端和醫師終端上；

所述處理模塊還用于對所述互動數據進行驗證具體包括：

對所述互動數據進行預處理以得到預處理數據；

從所述預處理數據中提取出目標數據；

將所述目標數據與預設的驗證數據進行比較驗證。

2.根據權利要求1所述的一種自閉癥康復訓練導引游戲式人機互動系統，其特征在于，所述反饋數據以動畫、圖片或文字的方式進行展示。

3.一種自閉癥康復訓練導引游戲式人機互動方法，其特征在于，應用于上述權利要求1或 2所述的一種自閉癥康復訓練導引游戲式人機互動系統，所述方法包括：

所述輸入模塊獲取受訓兒童的輸入請求；

所述處理模塊根據所述輸入請求調用導引游戲的游戲畫面；

所述顯示模塊用于顯示所述游戲畫面；

所述輸入模塊對顯示的所述游戲畫面進行操作以生成互動數據；

所述處理模塊對所述互動數據進行驗證，若驗證通過，則生成反饋數據；

所述顯示模塊顯示所述反饋數據；

所述方法還包括：

采集模塊采集受訓兒童的面部表情圖像和肢體動作；

所述處理模塊對接收的所述面部表情圖像進行識別以得到表情類型，對所述肢體動作進行識別以得到動作類型，并將所述表情類型和動作類型發送至遠程的智能終端和醫師終端上；

所述輸入模塊對顯示的所述游戲畫面進行操作以生成互動數據具體包括：

所述游戲畫面上顯示有提示信息，受訓兒童根據所述提示信息在輸入模塊上操作，并識別出操作時所產生的線段軌跡；

獲取各線段軌跡的坐標信息，并將所述坐標信息作為所述互動數據。

4.根據權利要求1所述的一種自閉癥康復訓練導引游戲式人機互動系統，其特征在于，所述處理模塊對所述互動數據進行驗證具體包括：

對所述互動數據進行預處理以得到預處理數據；

從所述預處理數據中提取出目標數據；

將所述目標數據與預設的驗證數據進行比較驗證。