[發(fā)明專利]基于洞察力的認知輔助裝置、方法及系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201880052218.8
• 申請日: 2018-05-14
• 公開（公告）號: CN111213197B
• 公開（公告）日: 2021-07-20
• 發(fā)明（設(shè)計）人: P-V·阮
• 申請（專利權(quán)）人: FUVI認知網(wǎng)絡(luò)公司
• 主分類號: G10L15/26
• 分類號: G10L15/26;G10L15/04;G09B5/06;A61B5/16;A61B5/369
• 代理公司: 北京戈程知識產(chǎn)權(quán)代理有限公司 11314
• 代理人: 程偉;王錦陽

1.一種基于個人情感的學(xué)習(xí)輔助系統(tǒng)，包括：

至少一個數(shù)據(jù)擷取裝置，擷取包括同步的視覺及音頻信息的數(shù)據(jù)，且擷取自用戶生成的對應(yīng)的認知信號；以及

至少一個顯示裝置，經(jīng)配置以：

在該至少一個顯示裝置的不同顯示區(qū)域中輸出該視覺及音頻信息的多組分信息，其中，該不同顯示區(qū)域包括：

至少一個第一視頻播放區(qū)域，其中，播放該視覺及音頻信息的視頻，以及

至少一個第二額外信息區(qū)域，其中，顯示多個同步文本及符號滾動片段，其中，該多個同步文本及符號滾動片段包括被轉(zhuǎn)換成文本及符號的該視覺及音頻信息的至少一個且與播放的該視頻同步顯示，

在該第一視頻播放區(qū)域及該第二額外信息區(qū)域的至少一者上生成及顯示與所顯示的該文本及符號片段同步的多個指示器，

通過該至少一個數(shù)據(jù)擷取裝置將擷取的該數(shù)據(jù)劃分成多個片段，

針對該多個片段的各者，自認知狀態(tài)的多個類型確定該用戶的第一認知狀態(tài)及第二認知狀態(tài)，及自該認知狀態(tài)的多個程度確定所確定的該第一認知狀態(tài)的第一程度及所確定的該第二認知狀態(tài)的第二程度，

其中，在通過該數(shù)據(jù)擷取裝置對該數(shù)據(jù)的該擷取期間基于該用戶生成的該認知信號以確定該第一認知狀態(tài)，

其中，在該至少一個第一視頻播放區(qū)域中該數(shù)據(jù)的回放期間基于該用戶生成的該認知信號以確定該第二認知狀態(tài)，以及

其中，該多個指示器針對該多個片段中對應(yīng)的片段標(biāo)示該第一認知狀態(tài)及該第二認知狀態(tài)。

2.如權(quán)利要求1所述的基于個人情感的學(xué)習(xí)輔助系統(tǒng)，其中，至少一個時間軸顯示在該至少一個第一視頻播放區(qū)域及該至少一個第二額外信息區(qū)域的至少其中一者中。

3.如權(quán)利要求2所述的基于個人情感的學(xué)習(xí)輔助系統(tǒng)，其中，針對該多個片段的該各者，基于該用戶的該第一認知狀態(tài)及該用戶的該第二認知狀態(tài)的至少其中一者，以及基于該認知狀態(tài)的該第一程度及該認知狀態(tài)的該第二程度的至少其中一者，該至少一個時間軸是顏色編碼的。

4.如權(quán)利要求2所述的基于個人情感的學(xué)習(xí)輔助系統(tǒng)，其中，該至少一個時間軸包括：

第一時間軸，顯示在該至少一個第一視頻播放區(qū)域中，具有與該視頻同步的該多個指示器，其中，該多個指示器在擷取的該數(shù)據(jù)的原始呈現(xiàn)期間標(biāo)示該用戶的該第一認知狀態(tài)及該認知狀態(tài)的該第一程度，以及

第二時間軸，顯示在該至少一個第二額外信息區(qū)域中，具有與顯示的該文本及符號片段同步的該多個指示器，其中，該多個指示器在該視頻播放在該至少一個第一視頻播放區(qū)域的復(fù)習(xí)期間標(biāo)示該用戶的該第二認知狀態(tài)及該認知狀態(tài)的該第二程度。

5.如權(quán)利要求1所述的基于個人情感的學(xué)習(xí)輔助系統(tǒng)，其中，該至少一個顯示裝置包括：

第一顯示裝置，顯示該至少一個第一視頻播放區(qū)域，以及

第二顯示裝置，顯示該至少一個第二額外信息區(qū)域。

6.如權(quán)利要求1所述的基于個人情感的學(xué)習(xí)輔助系統(tǒng)，其中，該至少一個顯示裝置還顯示包括與當(dāng)前正在顯示的對應(yīng)的相應(yīng)片段有關(guān)的圖像、圖形、文本及簡述的至少一者的第三區(qū)域。

7.如權(quán)利要求1所述的基于個人情感的學(xué)習(xí)輔助系統(tǒng)，其中，該至少一個顯示裝置還包括運動至簡述轉(zhuǎn)換器，經(jīng)配置以將該多個片段中示出的對象的運動信息轉(zhuǎn)換成同步的簡述及符號。