[發明專利]三維信息展示方法、裝置和移動終端

在審

• 申請號: 201710668444.6
• 申請日: 2017-08-07
• 公開（公告）號: CN107464290A
• 公開（公告）日: 2017-12-12
• 發明（設計）人: 韓夢龍
• 申請（專利權）人: 上海白澤網絡科技有限公司
• 主分類號: G06T19/00
• 分類號: G06T19/00
• 代理公司: 北京超凡志成知識產權代理事務所(普通合伙)11371
• 代理人: 蘇勝

1.一種三維信息展示方法，其特征在于，包括：

通過終端采集信息展示載體的圖像數據；

采用預設的檢測模型，檢測所述圖像數據中，所述信息展示載體的特征點；其中，所述預設的檢測模型通過對所述信息展示載體的多個圖像數據進行機器學習后獲得；

根據預先獲取的所述信息展示載體的理想模型，以及所述信息展示載體的特征點，確定所述特征點在所述終端的攝像機坐標系下的位置信息；

根據所述位置信息和所述終端的攝像參數，確定三維信息的展示位置；

根據所述展示位置，將所述三維信息疊加顯示在所述圖像數據中。

2.根據權利要求1所述的方法，其特征在于，所述預設的檢測模型，具體通過下述方式獲得：

獲取圖像數據集合；其中，所述圖像數據集合包括多個信息展示載體的圖像數據；每個所述信息展示載體對應多個圖像數據；

采用多層神經網絡技術訓練所述圖像數據集合，生成圖像區域檢測器；

采用語義識別技術訓練所述圖像數據集合，生成特征點識別器。

3.根據權利要求2所述的方法，其特征在于，所述采用預設的檢測模型，檢測所述圖像數據中，所述信息展示載體的特征點的步驟，包括：

通過所述圖像區域檢測器，檢測所述圖像數據中，所述信息展示載體的分布區域；

通過所述特征點識別器，識別所述分布區域中，所述信息展示載體的特征點。

4.根據權利要求1所述的方法，其特征在于，所述信息展示載體的理想模型，通過下述方式獲得：

通過預先生成的分類器，識別所述圖像數據中，所述信息展示載體的標識；

從預先建立的模型庫中，查找所述標識對應的所述信息展示載體的理想模型；其中，所述模型庫中包含所述信息展示載體的二維模型或三維模型；所述信息展示載體的二維模型或三維模型中包含所述信息展示載體的相應維度的特征點。

5.根據權利要求4所述的方法，其特征在于，所述根據預先獲取的所述信息展示載體的理想模型，以及所述信息展示載體的特征點，確定所述特征點在所述終端的攝像機坐標系下的位置信息的步驟，包括：

通過公式：

spc1pc21=K[R|T]pm1pm2pm31]]>

計算獲得所述理想模型中的特征點與所述圖像數據中的特征點的轉換矩陣R和轉換矩陣T；其中，P_m＝[p_m1 p_m2 p_m3 1]′為所述理想模型中的特征點對應的坐標矩陣；P_c＝[p_c1 p_c21]′為所述圖像數據中的特征點對應的坐標矩陣；s為尺度因子；K為所述終端中攝像機的參數矩陣；f_x為攝像機焦距與物理像素點寬度的比值；f_y為攝像機焦距與物理像素點高度的比值；λ為攝像機物理像素點的錯切系數；d_x和d_y為圖像坐標系中心轉換系數；

通過公式：

kpce1pce2pce31=[R|T]pm1pm2pm31]]>

獲得所述特征點在所述終端的攝像機坐標系下的位置信息；其中，所述攝像機坐標系下的位置信息對應的矩陣坐標為P_ce＝[p_ce1 p_ce2 p_ce3 1]′；k為比例因子。