[發明專利]基于注意力辨識進行情感運算的3D校園導覽方法

有效

• 申請號: 201710575393.2
• 申請日: 2017-07-14
• 公開（公告）號: CN107562186B
• 公開（公告）日: 2020-09-04
• 發明（設計）人: 莊禮鴻;吳明霓;林千慧
• 申請（專利權）人: 華僑大學
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/0481
• 代理公司: 廈門市首創君合專利事務所有限公司 35204
• 代理人: 張松亭

1.一種基于注意力辨識進行情感運算的3D校園導覽方法，其特征在于，包括：

眼動儀捕捉使用者注視終端設備屏幕上3D校園環境導覽應用的眼動信息并發送給終端設備；所述眼動信息包括屏幕視線坐標；

所述終端設備接收所述眼動儀發送的眼動信息，將所述屏幕視線坐標轉換為3D校園環境導覽應用中的窗口坐標，判斷所述窗口坐標是否位于感興趣區域，如果是，計算注視持續時間，通過注視持續時間的長短來辨識使用者的情緒；如果注視持續時間少于第一預設時間，表示使用者的視線只是掃過或忽略，3D校園環境導覽應用不做任何回饋；如果注視持續時間大于第一預設時間少于第二預設時間，表示使用者的注意力集中，3D校園環境導覽應用在預設位置顯示對應回饋內容；如果注視持續時間大于第二預設時間，表示使用者感興趣，3D校園環境導覽應用在預設位置顯示詳細資訊回饋內容；所述對應回饋內容包括操作指令、環境地圖和/或資訊簡介；

眼動儀捕捉使用者注視終端設備屏幕上3D校園環境導覽應用的眼動信息并發送給終端設備之前，還包括：使用者使用所述眼動儀進行視線的校正；

所述校正方法包括：使用者佩戴眼動儀觀看所述終端設備屏幕上顯示的圓十字圖案，并進行9個定位點的視線定位，以計算對應屏幕的(x,y)坐標，校正后使用者便可以進行3D校園環境導覽。

2.根據權利要求1所述的基于注意力辨識進行情感運算的3D校園導覽方法，其特征在于，在所述3D校園環境導覽應用之中，使用者通過鍵盤來進行角色的行動操控，使用者可以自由地觀看與進入依據真實的校園環境所建造出來的3D樓層環境，了解各樓層內部的樣貌，參觀的同時，使用者的眼動信息會透過眼動儀進行捕捉。

3.根據權利要求1所述的基于注意力辨識進行情感運算的3D校園導覽方法，其特征在于，所述第一預設時間為600ms，所述第二預設時間為3000ms。

4.根據權利要求1所述的基于注意力辨識進行情感運算的3D校園導覽方法，其特征在于，如果所述窗口坐標沒有位于感興趣區域，不做任何回饋。

5.根據權利要求1所述的基于注意力辨識進行情感運算的3D校園導覽方法，其特征在于，所述感興趣區域可設置。

6.根據權利要求1所述的基于注意力辨識進行情感運算的3D校園導覽方法，其特征在于，顯示對應回饋內容或顯示詳細資訊回饋內容之后，還包括：根據使用者是否開始使用鍵盤移動角色來判別是否離開當前區域；如果沒有移動，繼續顯示對應回饋內容或顯示詳細資訊回饋內容；如果有移動，重新判斷窗口坐標是否位于新的感興趣區域。

7.根據權利要求1所述的基于注意力辨識進行情感運算的3D校園導覽方法，其特征在于：所述眼動儀通過紅外線感測和追蹤瞳孔位置來獲取屏幕視線坐標。

8.根據權利要求1所述的基于注意力辨識進行情感運算的3D校園導覽方法，其特征在于，所述終端設備包括PC機、平板電腦和智能手機。