[發明專利]一種增強現實設備的圖像處理方法和增強現實設備

在審

• 申請號: 201910577995.0
• 申請日: 2019-06-28
• 公開（公告）號: CN110310373A
• 公開（公告）日: 2019-10-08
• 發明（設計）人: 崔利陽;孫建康;陳麗莉;張浩
• 申請（專利權）人: 京東方科技集團股份有限公司;北京京東方光電科技有限公司
• 主分類號: G06T19/00
• 分類號: G06T19/00;G06T17/00;G06T7/70;G06K9/62;G06K9/00
• 代理公司: 北京安信方達知識產權代理有限公司 11262
• 代理人: 解婷婷;曲鵬

1.一種增強現實設備的圖像處理方法，其特征在于，包括：

采集人眼圖像，并通過所述人眼圖像獲取人眼在初始點云中的注視范圍；

對比位于所述注視范圍內的更新點云與目標點云，以確定所述注視范圍內的所述目標點云中是否包含殘影；其中，所述更新點云為獲取的更新圖像在所述注視范圍內的點云，所述目標點云為所述初始點云在所述注視范圍內的點云。

2.根據權利要求1所述的增強現實設備的圖像處理方法，其特征在于，所述通過所述人眼圖像獲取人眼在初始點云中的注視范圍，包括：

通過所述人眼圖像計算所述人眼的左、右瞳孔中心點的坐標；

根據已建立的人眼成像模型和所述左、右瞳孔中心點的坐標，計算所述左右瞳孔在虛擬成像面上的交點的坐標；

根據光學模組的左、右出瞳中心點的中心位置和所述交點的坐標，獲取所述人眼在所述初始點云中的注視范圍。

3.根據權利要求2所述的增強現實設備的圖像處理方法，其特征在于，所述計算所述左右瞳孔在虛擬成像面上的交點坐標，包括：

將所述左、右瞳孔中心點的坐標代入所述人眼成像模型，計算出所述人眼在所述光學模組的左成像面上的左注視點的坐標和右成像面上的右注視點的坐標；

根據左注視線和右注視線在所述虛擬成像面上的交點，得到所述交點的坐標；其中，所述左注視線為通過左出瞳中心點和所述左成像面上的左注視點確定的，所述右注視線為通過右出瞳中心點和所述右成像面上的右注視點確定的。

4.根據權利要求2所述的增強現實設備的圖像處理方法，其特征在于，所述獲取人眼在初始點云中的注視范圍，包括：

以所述左、右出瞳中心點的中心位置和所述交點的連線為軸線，以角度為頂角做視線圓錐，其中，所述左、右出瞳中心點的中心位置為所述視線圓錐的頂點，所述角度的初始值在15度到30度之間，所述視線圓錐為所述注視范圍。

5.根據權利要求4所述的增強現實設備的圖像處理方法，其特征在于，還包括：

通過所述光學模組實時采集所述更新圖像；

將所述更新圖像所形成的點云與所述視線圓錐進行匹配，獲取所述點云位于所述視線圓錐內的更新點云；

將所述初始點云與所述視線圓錐進行匹配，獲取所述初始點云位于所述視線圓錐內的所述目標點云。

6.根據權利要求5所述的增強現實設備的圖像處理方法，其特征在于，

所述對比位于所述注視范圍內的更新點云與目標點云，以確定所述注視范圍內的所述目標點云中是否包含殘影，包括：

計算所述左、右出瞳中心點的中心位置與所述更新點云中每個點的平均距離d2；

計算所述左、右出瞳中心點的中心位置與所述目標點云中每個點的平均距離d3；

根據所述d2和所述d3，確定所述視線圓錐內的目標點云是否包含殘影。

7.根據權利要求6所述的增強現實設備的圖像處理方法，其特征在于，所述根據所述d2和所述d3，確定注視范圍內的目標點云中是否包含殘影，包括：

在所述d2與s的乘積大于所述d3時，確定出所述注視范圍內的所述目標點云中包含殘影，其中，所述s為小于1的比例系數。

8.根據權利要求2～7中任一項所述的增強現實設備的圖像處理方法，其特征在于，所述方法還包括：建立所述人眼成像模型；

所述建立所述人眼成像模型，包括：

在所述光學模組的虛擬成像面上選取X個注視點，第i個注視點所在虛擬成像面與坐標原點的距離為di，所述i為大于或等于1、且小于或等于X的正整數；

根據所述X個注視點的坐標，以及所述X個注視點在所述光學模組上的左右出瞳中心點，確定所述X個注視點在所述光學模組的左、右成像面上的X組成像坐標；

采集人眼注視所述X個注視點時的人眼圖像，并獲取人眼注視所述X個注視點的X組左、右瞳孔中心點的坐標；

根據所述X組成像坐標，所述X組左、右瞳孔中心點的坐標和成像標準模型，建立所述人眼成像模型，建立的所述人眼成像模型包括左眼成像模型和右眼成像模型。