[發明專利]增強現實圖像處理方法、裝置及存儲介質

有效

• 申請號: 201710372760.9
• 申請日: 2017-05-24
• 公開（公告）號: CN108932051B
• 公開（公告）日: 2022-12-16
• 發明（設計）人: 房子超;張海洲
• 申請（專利權）人: 騰訊科技（北京）有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;H04N7/18
• 代理公司: 北京德琦知識產權代理有限公司 11018
• 代理人: 郭曼;王琦

1.一種增強現實圖像處理方法，其特征在于，包括：

接收采集終端發送的地上真實場景中不同方位的圖像，保存在圖像數據庫中；

接收用戶終端中的應用客戶端發送的圖像獲取請求，建立與所述應用客戶端之間的連接；所述用戶終端位于地下交通工具中；

接收所述應用客戶端發送的所述用戶終端的方位信息、姿態信息及所述用戶終端的攝像頭參數；

根據所述用戶終端的方位信息，在圖像數據庫中查找對應的地上真實場景中的圖像；

根據查找到的所述真實場景中的圖像、所述用戶終端的姿態信息及所述用戶終端的攝像頭參數，生成增強現實圖像；

將所述增強現實圖像發送給所述應用客戶端以進行展示。

2.根據權利要求1所述的方法，其中，所述根據查找到的所述真實場景中的圖像、所述用戶終端的姿態信息及所述用戶終端的攝像頭參數，確定增強現實圖像包括：

根據所述用戶終端的姿態信息，建立設備坐標系；

根據所述用戶終端的攝像頭參數，確定設備坐標系到圖像坐標系的第一變換矩陣；

根據所述真實場景中的圖像確定一個或多個目標標記，針對任一目標標記，執行以下操作：

將所述目標標記與模板數據庫中的模板圖像進行匹配，確定與所述目標標記對應的虛擬物體；

根據所述確定的虛擬物體建立物體坐標系；

根據所述物體坐標系、設備坐標系及所述第一變換矩陣確定從物體坐標系到圖像坐標系的變換矩陣；

根據所述從物體坐標系到圖像坐標系的變換矩陣確定所述目標標記在圖像坐標系中的位置；

根據每一個目標標記在圖像坐標系中的位置生成所述增強現實圖像。

3.根據權利要求2所述的方法，其中，所述根據所述物體坐標系、設備坐標系及所述第一變換矩陣確定從物體坐標系到圖像坐標系的變換矩陣包括：

根據所述物體坐標系、設備坐標系，確定從物體坐標系到設備坐標系的第二變換矩陣；

根據所述第二變換矩陣、第一變換矩陣，確定所述從物體坐標系到圖像坐標系的變換矩陣。

4.根據權利要求2所述的方法，其中，所述根據所述從物體坐標系到圖像坐標系的變換矩陣確定所述目標標記在圖像坐標系中的位置包括：

針對所述目標標記中的任一像素點，根據所述從物體坐標系到圖像坐標系的變換矩陣，確定該像素點在圖像坐標系中的位置。

5.根據權利要求2所述的方法，其中，所述根據所述真實場景中的圖像確定一個或多個目標標記包括：

將所述真實場景中的圖像轉換為黑白圖像；

在所述黑白圖像中提取矩形形狀的連通域作為目標標記。

6.根據權利要求2所述的方法，其中，所述將所述目標標記與模板數據庫中的模板圖像進行匹配，確定與所述目標標記對應的虛擬物體包括：

計算目標標記中的圖像與一個模板圖像的相似度；

將相似度滿足預設條件的模板圖像對應的物體確定為與所述目標標記對應的虛擬物體。

7.根據權利要求6所述的方法，其中，所述計算目標標記中的圖像與一個模板圖像的相似度包括：

調整所述目標標記中圖像的分辨率，使得所述目標標記中的圖像與所述模板圖像具有相同的像素尺寸；

對于目標標記圖像中的任一像素點，計算該像素點與模板圖像中對應像素點的灰度值的差值的平方；

將計算得到的目標標記圖像中與每一個像素點對應的灰度值的差值的平方進行加和，根據計算得到的加和值確定所述相似度。

8.一種增強現實圖像處理方法，其特征在于，包括：

向應用服務器發送圖像獲取請求，以使所述應用服務器建立與自身的連接；

獲取自身所在用戶終端的方位信息、姿態信息及所述用戶終端的攝像頭參數；

發送所述方位信息、所述姿態信息及所述攝像頭參數至所述應用服務器，以使所述應用服務器根據權利要求1所述的方法生成增強現實圖像；

從所述應用服務器接收所述增強現實圖像并展示。