[發(fā)明專利]三維信息展示方法、裝置和移動(dòng)終端

在審

• 申請(qǐng)?zhí)枺?/td>: 201710668444.6
• 申請(qǐng)日: 2017-08-07
• 公開（公告）號(hào): CN107464290A
• 公開（公告）日: 2017-12-12
• 發(fā)明（設(shè)計(jì)）人: 韓夢(mèng)龍
• 申請(qǐng)（專利權(quán)）人: 上海白澤網(wǎng)絡(luò)科技有限公司
• 主分類號(hào): G06T19/00
• 分類號(hào): G06T19/00
• 代理公司: 北京超凡志成知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙)11371
• 代理人: 蘇勝

1.一種三維信息展示方法，其特征在于，包括：

通過終端采集信息展示載體的圖像數(shù)據(jù)；

采用預(yù)設(shè)的檢測(cè)模型，檢測(cè)所述圖像數(shù)據(jù)中，所述信息展示載體的特征點(diǎn)；其中，所述預(yù)設(shè)的檢測(cè)模型通過對(duì)所述信息展示載體的多個(gè)圖像數(shù)據(jù)進(jìn)行機(jī)器學(xué)習(xí)后獲得；

根據(jù)預(yù)先獲取的所述信息展示載體的理想模型，以及所述信息展示載體的特征點(diǎn)，確定所述特征點(diǎn)在所述終端的攝像機(jī)坐標(biāo)系下的位置信息；

根據(jù)所述位置信息和所述終端的攝像參數(shù)，確定三維信息的展示位置；

根據(jù)所述展示位置，將所述三維信息疊加顯示在所述圖像數(shù)據(jù)中。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述預(yù)設(shè)的檢測(cè)模型，具體通過下述方式獲得：

獲取圖像數(shù)據(jù)集合；其中，所述圖像數(shù)據(jù)集合包括多個(gè)信息展示載體的圖像數(shù)據(jù)；每個(gè)所述信息展示載體對(duì)應(yīng)多個(gè)圖像數(shù)據(jù)；

采用多層神經(jīng)網(wǎng)絡(luò)技術(shù)訓(xùn)練所述圖像數(shù)據(jù)集合，生成圖像區(qū)域檢測(cè)器；

采用語(yǔ)義識(shí)別技術(shù)訓(xùn)練所述圖像數(shù)據(jù)集合，生成特征點(diǎn)識(shí)別器。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述采用預(yù)設(shè)的檢測(cè)模型，檢測(cè)所述圖像數(shù)據(jù)中，所述信息展示載體的特征點(diǎn)的步驟，包括：

通過所述圖像區(qū)域檢測(cè)器，檢測(cè)所述圖像數(shù)據(jù)中，所述信息展示載體的分布區(qū)域；

通過所述特征點(diǎn)識(shí)別器，識(shí)別所述分布區(qū)域中，所述信息展示載體的特征點(diǎn)。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述信息展示載體的理想模型，通過下述方式獲得：

通過預(yù)先生成的分類器，識(shí)別所述圖像數(shù)據(jù)中，所述信息展示載體的標(biāo)識(shí)；

從預(yù)先建立的模型庫(kù)中，查找所述標(biāo)識(shí)對(duì)應(yīng)的所述信息展示載體的理想模型；其中，所述模型庫(kù)中包含所述信息展示載體的二維模型或三維模型；所述信息展示載體的二維模型或三維模型中包含所述信息展示載體的相應(yīng)維度的特征點(diǎn)。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述根據(jù)預(yù)先獲取的所述信息展示載體的理想模型，以及所述信息展示載體的特征點(diǎn)，確定所述特征點(diǎn)在所述終端的攝像機(jī)坐標(biāo)系下的位置信息的步驟，包括：

通過公式：

spc1pc21=K[R|T]pm1pm2pm31]]>

計(jì)算獲得所述理想模型中的特征點(diǎn)與所述圖像數(shù)據(jù)中的特征點(diǎn)的轉(zhuǎn)換矩陣R和轉(zhuǎn)換矩陣T；其中，P_m＝[p_m1 p_m2 p_m3 1]′為所述理想模型中的特征點(diǎn)對(duì)應(yīng)的坐標(biāo)矩陣；P_c＝[p_c1 p_c21]′為所述圖像數(shù)據(jù)中的特征點(diǎn)對(duì)應(yīng)的坐標(biāo)矩陣；s為尺度因子；K為所述終端中攝像機(jī)的參數(shù)矩陣；f_x為攝像機(jī)焦距與物理像素點(diǎn)寬度的比值；f_y為攝像機(jī)焦距與物理像素點(diǎn)高度的比值；λ為攝像機(jī)物理像素點(diǎn)的錯(cuò)切系數(shù)；d_x和d_y為圖像坐標(biāo)系中心轉(zhuǎn)換系數(shù)；

通過公式：

kpce1pce2pce31=[R|T]pm1pm2pm31]]>

獲得所述特征點(diǎn)在所述終端的攝像機(jī)坐標(biāo)系下的位置信息；其中，所述攝像機(jī)坐標(biāo)系下的位置信息對(duì)應(yīng)的矩陣坐標(biāo)為P_ce＝[p_ce1 p_ce2 p_ce3 1]′；k為比例因子。