[發(fā)明專利]眼球追蹤方法、裝置、存儲(chǔ)介質(zhì)及頭戴式顯示設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202010664802.8
• 申請(qǐng)日: 2020-07-10
• 公開（公告）號(hào): CN111831119A
• 公開（公告）日: 2020-10-27
• 發(fā)明（設(shè)計(jì)）人: 杜鵬
• 申請(qǐng)（專利權(quán)）人: OPPO廣東移動(dòng)通信有限公司
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01;G02B27/01
• 代理公司: 深圳翼盛智成知識(shí)產(chǎn)權(quán)事務(wù)所(普通合伙) 44300
• 代理人: 李漢亮

本申請(qǐng)實(shí)施例公開了一種眼球追蹤方法、裝置、存儲(chǔ)介質(zhì)及頭戴式顯示設(shè)備，其中，本申請(qǐng)實(shí)施例采集動(dòng)態(tài)視覺傳感器模組對(duì)用戶眼部進(jìn)行拍攝輸出的事件流數(shù)據(jù)；根據(jù)事件流數(shù)據(jù)獲取眼球在動(dòng)態(tài)視覺傳感器模組中的成像信息；根據(jù)成像信息計(jì)算眼球在動(dòng)態(tài)視覺傳感器模組上的成像位置坐標(biāo)；根據(jù)坐標(biāo)映射關(guān)系以及成像位置坐標(biāo)，計(jì)算得到眼球在顯示屏上的注視位置坐標(biāo)，基于此，當(dāng)用戶改變注視方向時(shí)，動(dòng)態(tài)視覺傳感器可以根據(jù)眼球的運(yùn)動(dòng)進(jìn)行成像并計(jì)算得到眼球在顯示屏上的注視位置坐標(biāo)，該方案僅捕獲目標(biāo)運(yùn)動(dòng)變化的特征，極大地減少了信息的冗余，具有低延時(shí)的特性，可以高效地獲取到注視位置坐標(biāo)，提高了眼球追蹤的實(shí)時(shí)性。

技術(shù)領(lǐng)域

本申請(qǐng)涉及電子設(shè)備技術(shù)領(lǐng)域，具體涉及一種眼球追蹤方法、裝置、存儲(chǔ)介質(zhì)及頭戴式顯示設(shè)備。

背景技術(shù)

隨著人機(jī)交互技術(shù)的發(fā)展，眼球追蹤技術(shù)在人機(jī)交互領(lǐng)域中應(yīng)用越來越廣泛。眼球追蹤技術(shù)是一種對(duì)人眼視線定位的技術(shù)，融合了機(jī)械、電子、光學(xué)等學(xué)科領(lǐng)域知識(shí)，在人工智能、機(jī)器視覺等領(lǐng)域有著良好的應(yīng)用前景，例如，疲勞監(jiān)測(cè)、虛擬現(xiàn)實(shí)、溝通輔助工具等。

常規(guī)的眼球追蹤技術(shù)中，一般采用紅外補(bǔ)光發(fā)射和攝像頭接收的方式來實(shí)現(xiàn)眼球追蹤圖像傳感采集，但是這種方式存在實(shí)時(shí)性差的缺陷。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供一種眼球追蹤方法、裝置、存儲(chǔ)介質(zhì)及頭戴式顯示設(shè)備，能夠提高眼球追蹤的實(shí)時(shí)性。

第一方面，本申請(qǐng)實(shí)施例提供一種眼球追蹤方法，包括：

采集動(dòng)態(tài)視覺傳感器模組對(duì)用戶眼部進(jìn)行拍攝輸出的事件流數(shù)據(jù)；

根據(jù)所述事件流數(shù)據(jù)獲取眼球在動(dòng)態(tài)視覺傳感器模組中的成像信息；

根據(jù)所述成像信息計(jì)算眼球在所述動(dòng)態(tài)視覺傳感器模組上的成像位置坐標(biāo)；

根據(jù)顯示屏與所述動(dòng)態(tài)視覺傳感器模組之間的坐標(biāo)映射關(guān)系，以及所述成像位置坐標(biāo)，計(jì)算得到眼球在所述顯示屏上的注視位置坐標(biāo)。

第二方面，本申請(qǐng)實(shí)施例還提供一種眼球追蹤裝置，包括：

數(shù)據(jù)采集模塊，用于采集動(dòng)態(tài)視覺傳感器模組對(duì)用戶眼部進(jìn)行拍攝輸出的事件流數(shù)據(jù)；

成像獲取模塊，用于根據(jù)所述事件流數(shù)據(jù)獲取眼球在動(dòng)態(tài)視覺傳感器模組中的成像信息；

第一計(jì)算模塊，用于根據(jù)所述成像信息計(jì)算眼球在所述動(dòng)態(tài)視覺傳感器模組上的成像位置坐標(biāo)；

第二計(jì)算模塊，用于根據(jù)顯示屏與所述動(dòng)態(tài)視覺傳感器模組之間的坐標(biāo)映射關(guān)系，以及所述成像位置坐標(biāo)，計(jì)算得到眼球在所述顯示屏上的注視位置坐標(biāo)。

第三方面，本申請(qǐng)實(shí)施例還提供一種存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，當(dāng)所述計(jì)算機(jī)程序在計(jì)算機(jī)上運(yùn)行時(shí)，使得所述計(jì)算機(jī)執(zhí)行如本申請(qǐng)任一實(shí)施例提供的眼球追蹤方法。

第四方面，本申請(qǐng)實(shí)施例還提供一種頭戴式顯示設(shè)備，包括處理器和存儲(chǔ)器，所述存儲(chǔ)器有計(jì)算機(jī)程序，所述處理器通過調(diào)用所述計(jì)算機(jī)程序，用于執(zhí)行如本申請(qǐng)任一實(shí)施例提供的眼球追蹤方法。

本申請(qǐng)實(shí)施例提供的技術(shù)方案，通過動(dòng)態(tài)視覺傳感器模組對(duì)用戶眼部進(jìn)行拍攝，采集動(dòng)態(tài)視覺傳感器輸出的事件流數(shù)據(jù)，根據(jù)該事件流數(shù)據(jù)獲取眼球在動(dòng)態(tài)視覺傳感器模組中的成像信息，然后根據(jù)成像信息計(jì)算眼球的成像位置坐標(biāo)，根據(jù)顯示屏與動(dòng)態(tài)視覺傳感器之間的坐標(biāo)映射關(guān)系，以及成像位置坐標(biāo)，計(jì)算得到眼球在顯示屏上的注視位置坐標(biāo)，通過該方案，當(dāng)用戶注視顯示屏并改變注視方向時(shí)，動(dòng)態(tài)視覺傳感器可以根據(jù)眼球的運(yùn)動(dòng)進(jìn)行成像，并根據(jù)成像位置的變化確定出用戶的注視方向的變化，進(jìn)而計(jì)算得到眼球在所述顯示屏上的注視位置坐標(biāo)，因此，該方案僅捕獲目標(biāo)運(yùn)動(dòng)變化的特征，極大地減少了信息的冗余，減少了數(shù)據(jù)量，具有低延時(shí)的特性，可以高效地獲取到注視位置坐標(biāo)，提高了眼球追蹤的實(shí)時(shí)性。

附圖說明