[發(fā)明專利]一種視線估計(jì)方法及裝置

有效

• 申請?zhí)枺?/td>: 201710612923.6
• 申請日: 2017-07-25
• 公開（公告）號(hào): CN107392156B
• 公開（公告）日: 2020-08-25
• 發(fā)明（設(shè)計(jì)）人: 王云飛;樓志江
• 申請（專利權(quán)）人: 北京七鑫易維信息技術(shù)有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06T7/70
• 代理公司: 北京超凡宏宇專利代理事務(wù)所(特殊普通合伙) 11463
• 代理人: 徐麗

本發(fā)明提供了一種視線估計(jì)方法及裝置，其中，該方法包括：按照第一頻率獲取用戶的人眼圖像，確定人眼圖像對應(yīng)的注視信息；按照第二頻率獲取用戶的眼球電容向量；根據(jù)眼球電容向量和注視信息，構(gòu)建視線估計(jì)模型；通過視線估計(jì)模型對用戶進(jìn)行實(shí)時(shí)視線估計(jì)。本發(fā)明基于圖像處理方式提供的注視信息，結(jié)合用戶眼球轉(zhuǎn)動(dòng)產(chǎn)生的眼球電容向量，構(gòu)建視線估計(jì)模型。在視線估計(jì)模型構(gòu)建完成后，停止采用圖像處理方式進(jìn)行視線估計(jì)，而是采用視線估計(jì)模型進(jìn)行實(shí)時(shí)的視線估計(jì)。實(shí)現(xiàn)從圖像處理方式過渡到采用視線估計(jì)模型進(jìn)行估計(jì)，大大提高視線估計(jì)速度，降低延時(shí)及資源占用率，提高眼動(dòng)跟蹤效率及準(zhǔn)確性。

技術(shù)領(lǐng)域

本發(fā)明涉及人機(jī)交互技術(shù)領(lǐng)域，具體而言，涉及一種視線估計(jì)方法及裝置。

背景技術(shù)

視線是眼睛注視的方向，代表一個(gè)人關(guān)注的焦點(diǎn)。視線追蹤是目前比較活躍的研究課題之一，在人機(jī)交互及人類認(rèn)知科學(xué)等領(lǐng)域存在著很大的應(yīng)用潛力。視線追蹤的基礎(chǔ)是對人眼視線的方向進(jìn)行估計(jì)。

相關(guān)技術(shù)中，通常采用P-CR方法確定眼球的注視信息，P-CR方法分為基于回歸的P-CR方法和基于3D的P-CR方法兩種，這兩種方法在具體實(shí)現(xiàn)時(shí)，均需要利用多個(gè)光源在用戶眼球中形成多個(gè)光斑，并獲取用戶的人眼圖像，通過對人眼圖像進(jìn)行圖像處理，在人眼圖像上檢測到所有光源對應(yīng)的光斑，進(jìn)而根據(jù)光源與光斑的對應(yīng)關(guān)系確定眼球的注視信息。

但相關(guān)技術(shù)中對人眼圖像進(jìn)行圖像處理，圖像處理速度很慢，資源占用率高，視線估計(jì)的延時(shí)長。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明實(shí)施例的目的在于提供一種視線估計(jì)方法及裝置，以解決相關(guān)技術(shù)存在的以下問題：相關(guān)技術(shù)采用圖像處理方式進(jìn)行視線估計(jì)，圖像處理速度很慢，資源占用率高，視線估計(jì)的延時(shí)長。

第一方面，本發(fā)明實(shí)施例提供了一種視線估計(jì)方法，所述方法包括：

按照第一頻率獲取用戶的人眼圖像，確定所述人眼圖像對應(yīng)的注視信息；

按照第二頻率獲取所述用戶的眼球電容向量；

根據(jù)所述眼球電容向量和所述注視信息，構(gòu)建視線估計(jì)模型；

通過所述視線估計(jì)模型對所述用戶進(jìn)行實(shí)時(shí)視線估計(jì)。

結(jié)合第一方面，本發(fā)明實(shí)施例提供了上述第一方面的第一種可能的實(shí)現(xiàn)方式，其中，所述根據(jù)所述眼球電容向量和所述注視信息，構(gòu)建視線估計(jì)模型，包括：

根據(jù)多組滿足獲取時(shí)刻條件的所述眼球電容向量及所述注視信息，用函數(shù)擬合的方式獲得眼球電容向量和注視信息之間的映射關(guān)系，從而得到視線估計(jì)模型；或者，

根據(jù)多組滿足獲取時(shí)刻條件的所述眼球電容向量及所述注視信息，進(jìn)行神經(jīng)網(wǎng)絡(luò)訓(xùn)練得到視線估計(jì)模型；或者，

將多組滿足獲取時(shí)刻條件的所述眼球電容向量及所述注視信息存儲(chǔ)在眼球電容向量與注視信息的對應(yīng)關(guān)系中，將所述對應(yīng)關(guān)系確定為視線估計(jì)模型。

結(jié)合第一方面，本發(fā)明實(shí)施例提供了上述第一方面的第二種可能的實(shí)現(xiàn)方式，其中，所述通過所述視線估計(jì)模型對所述用戶進(jìn)行實(shí)時(shí)視線估計(jì)，包括：

獲取所述用戶當(dāng)前的眼球電容向量；

根據(jù)所述當(dāng)前的眼球電容向量，通過所述視線估計(jì)模型計(jì)算所述用戶當(dāng)前的注視信息。

結(jié)合第一方面，本發(fā)明實(shí)施例提供了上述第一方面的第三種可能的實(shí)現(xiàn)方式，其中，所述按照第二頻率獲取所述用戶的眼球電容向量，包括：

當(dāng)檢測到當(dāng)前時(shí)間與上次獲取時(shí)間之間的時(shí)間差達(dá)到所述第二頻率對應(yīng)的時(shí)間間隔時(shí)，讀取傳感器矩陣包括的多個(gè)電容傳感器采集的電容值；

按照所述多個(gè)電容傳感器在所述傳感器矩陣中的排列順序，將讀取到的多個(gè)所述電容值組成眼球電容向量。