[發(fā)明專利]一種眼球震顫識(shí)別方法、裝置及設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 202211523509.5
• 申請(qǐng)日: 2022-12-01
• 公開（公告）號(hào): CN115546884B
• 公開（公告）日: 2023-03-14
• 發(fā)明（設(shè)計(jì)）人: 謝偉浩;鄭小賓;吳梓華;劉玉萍
• 申請(qǐng)（專利權(quán)）人: 廣州視景醫(yī)療軟件有限公司
• 主分類號(hào): G06V40/18
• 分類號(hào): G06V40/18
• 代理公司: 廣州三環(huán)專利商標(biāo)代理有限公司 44202
• 代理人: 江嘉玲

本發(fā)明公開了一種眼球震顫識(shí)別方法、裝置及設(shè)備，包括：根據(jù)人臉信息獲取人臉關(guān)鍵點(diǎn)信息，并根據(jù)所述人臉關(guān)鍵點(diǎn)信息進(jìn)行人臉對(duì)齊，獲取區(qū)域人眼信息；所述人臉信息包括視頻流信息；根據(jù)所述區(qū)域人眼信息獲取角膜輪廓信息，并根據(jù)所述角膜輪廓信息通過橢圓擬合獲取角膜中心信息；將所述角膜中心信息輸入預(yù)設(shè)的時(shí)間序列分類模型中，進(jìn)行人眼震顫識(shí)別。本發(fā)明無需佩戴特定的設(shè)備，通過普通攝像頭即可獲取人臉視頻流信息，簡化了眼球震顫識(shí)別的操作，提高了眼球震顫識(shí)別的便利性，使得用戶可隨時(shí)隨地拍攝人臉信息進(jìn)行眼球震顫識(shí)別。

技術(shù)領(lǐng)域

本發(fā)明涉及于眼科監(jiān)測(cè)技術(shù)領(lǐng)域，尤其涉及一種眼球震顫識(shí)別方法、裝置及設(shè)備。

背景技術(shù)

眼球震顫（nystagmus；NY）是一種不自主、有節(jié)律性、往返擺動(dòng)的眼球運(yùn)動(dòng)。 方向分為水平型、垂直型、旋轉(zhuǎn)型等，以水平型為常見，通常以快相方向表示眼球震顫方向，快相為代償性恢復(fù)注視位的運(yùn)動(dòng)，簡稱眼震。常由視覺系統(tǒng)、眼外肌、內(nèi)耳迷路及中樞神經(jīng)系統(tǒng)的疾病引起。

現(xiàn)有的眼球震顫識(shí)別方法，眼球震顫識(shí)別都是基于紅外攝像頭或包括十字結(jié)構(gòu)光的攝像頭；同時(shí)，需要特定的設(shè)備，例如需佩戴頭戴式相機(jī)，并且特定設(shè)備的操作復(fù)雜、攝像頭與人眼的相對(duì)位置是固定的，設(shè)備操作流程嚴(yán)格、容錯(cuò)率低。

發(fā)明內(nèi)容

本發(fā)明提供了一種眼球震顫識(shí)別方法、裝置及設(shè)備，以解決現(xiàn)有眼顫識(shí)別中需要佩戴特定的設(shè)備，設(shè)備操作復(fù)雜、流程嚴(yán)格、容錯(cuò)率低的技術(shù)問題。

為了解決上述技術(shù)問題，本發(fā)明實(shí)施例提供了一種眼球震顫識(shí)別方法，包括：

根據(jù)人臉信息獲取人臉關(guān)鍵點(diǎn)信息，并根據(jù)所述人臉關(guān)鍵點(diǎn)信息進(jìn)行人臉對(duì)齊，獲取區(qū)域人眼信息；所述人臉信息包括視頻流信息；

根據(jù)所述區(qū)域人眼信息獲取角膜輪廓信息，并根據(jù)所述角膜輪廓信息通過橢圓擬合獲取角膜中心信息；

將所述角膜中心信息輸入預(yù)設(shè)的時(shí)間序列分類模型中，進(jìn)行人眼震顫識(shí)別。

本發(fā)明通過人臉信息識(shí)別關(guān)鍵點(diǎn)，從而獲取眼部關(guān)鍵點(diǎn)信息，并根據(jù)所述眼部關(guān)鍵點(diǎn)信息對(duì)齊人臉，獲取每一幀圖片的眼部信息，并通過時(shí)間序列分類模型對(duì)眼球震顫進(jìn)行預(yù)測(cè)識(shí)別；無需佩戴特定的設(shè)備，通過普通攝像頭即可獲取人臉視頻流信息，簡化了眼球震顫識(shí)別的操作，提高了眼球震顫識(shí)別的便利性，使得用戶可隨時(shí)隨地拍攝人臉信息進(jìn)行眼球震顫識(shí)別。

進(jìn)一步地，所述根據(jù)人臉信息獲取人臉關(guān)鍵點(diǎn)信息，并根據(jù)所述人臉關(guān)鍵點(diǎn)信息進(jìn)行人臉對(duì)齊，獲取區(qū)域人眼信息；所述人臉信息包括視頻流信息，具體為：

根據(jù)預(yù)設(shè)的采樣率對(duì)人臉信息進(jìn)行抽幀獲取第一圖片集，并根據(jù)預(yù)設(shè)的模型對(duì)第一圖片集中的所有圖片進(jìn)行檢測(cè)，獲取人臉關(guān)鍵點(diǎn)信息，所述人臉關(guān)鍵點(diǎn)信息包括所有圖片的人臉關(guān)鍵點(diǎn)；

根據(jù)預(yù)設(shè)規(guī)則選取一張圖片作為基準(zhǔn)圖片，并根據(jù)所述基準(zhǔn)圖片對(duì)齊第一圖片集中在基準(zhǔn)圖片后抽取的所有圖片；

根據(jù)對(duì)齊后的圖片判斷人眼狀態(tài)，獲取區(qū)域人眼信息。

本發(fā)明通過人臉關(guān)鍵點(diǎn)對(duì)每一幀的人臉進(jìn)行對(duì)齊，無需固定攝像頭與人臉的關(guān)系，提高了眼球震顫識(shí)別的可操作性，便于用戶獨(dú)立進(jìn)行眼球震顫識(shí)別。

進(jìn)一步地，所述根據(jù)對(duì)齊后的圖片判斷人眼狀態(tài)，獲取區(qū)域人眼信息，具體為：

根據(jù)對(duì)齊后的第一圖片集中的各個(gè)圖片人眼的中上眼瞼和下眼瞼的關(guān)鍵點(diǎn)距離確定各個(gè)圖片的人眼狀態(tài)，所述人眼狀態(tài)包括睜眼和眨眼；

篩選出所有人眼狀態(tài)為非眨眼的第二圖片作為第二圖片集，并獲取第二圖片集中所有第二圖片的區(qū)域人眼信息。

本發(fā)明通過剔除非睜眼圖片，以獲取有效的人眼信息，避免眨眼圖片干擾眼球震顫識(shí)別。

進(jìn)一步地，所述將所述角膜中心信息輸入預(yù)設(shè)的時(shí)間序列分類模型中，進(jìn)行人眼震顫識(shí)別，具體為：