[發(fā)明專利]增強(qiáng)現(xiàn)實(shí)處理方法及裝置、顯示終端及計(jì)算機(jī)存儲(chǔ)介質(zhì)

有效

• 申請?zhí)枺?/td>: 201710340898.0
• 申請日: 2017-05-15
• 公開（公告）號(hào): CN108875460B
• 公開（公告）日: 2023-06-20
• 發(fā)明（設(shè)計(jì)）人: 龐英明;魏扼
• 申請（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號(hào): G06T19/00
• 分類號(hào): G06T19/00;G06T19/20;G06T7/73;G06T5/50
• 代理公司: 北京三高永信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 張所明

1.一種增強(qiáng)現(xiàn)實(shí)AR處理方法，其特征在于，應(yīng)用于顯示終端中，所述顯示終端包括AR引擎、所述顯示終端與網(wǎng)絡(luò)平臺(tái)數(shù)據(jù)傳輸?shù)臄?shù)據(jù)傳輸單元和與用于進(jìn)行顯示交互的UI單元，包括：

通過應(yīng)用打開攝像頭，使得視頻流由所述UI單元導(dǎo)入所述數(shù)據(jù)傳輸單元；

基于所述視頻流，顯示視頻；

通過所述數(shù)據(jù)傳輸單元提取所述視頻流中至少部分圖像的特征點(diǎn)，根據(jù)所述特征點(diǎn)的數(shù)目和所述特征點(diǎn)的分布，計(jì)算各個(gè)子區(qū)域特征點(diǎn)的分布密度，當(dāng)一個(gè)圖像中存在預(yù)設(shè)數(shù)量個(gè)子區(qū)域的分布密度大于密度閾值時(shí)，確定所述圖像為滿足預(yù)設(shè)清晰條件的待識(shí)別圖像，其中，所述特征點(diǎn)為第一灰度值的第一像素點(diǎn)，所述第一灰度值與所述第一像素點(diǎn)鄰近的第二像素點(diǎn)的第二灰度值的差異滿足預(yù)設(shè)差異條件；

通過所述數(shù)據(jù)傳輸單元將所述待識(shí)別圖像傳給后臺(tái)代理服務(wù)器；

其中，所述后臺(tái)代理服務(wù)器用于接收所述待識(shí)別圖像，并將所述待識(shí)別圖像發(fā)送給云端識(shí)別服務(wù)器，所述云端識(shí)別服務(wù)器用于針對所述待識(shí)別圖像進(jìn)行圖像泛化識(shí)別，以識(shí)別出所述待識(shí)別圖像中目標(biāo)對象的類別、位置和個(gè)數(shù)信息，并將識(shí)別結(jié)果傳給所述后臺(tái)代理服務(wù)器；所述后臺(tái)代理服務(wù)器還用于將所述識(shí)別結(jié)果發(fā)送給咨詢搜索中心服務(wù)器，所述咨詢搜索中心服務(wù)器用于向所述后臺(tái)代理服務(wù)器返回與所述識(shí)別結(jié)果對應(yīng)的AR信息；所述后臺(tái)代理服務(wù)器還用于將所述AR信息發(fā)送給所述數(shù)據(jù)傳輸單元；

通過所述數(shù)據(jù)傳輸單元將所述AR信息發(fā)送給所述AR引擎；

通過所述AR引擎定位所述視頻流中的前一圖像幀中所述目標(biāo)對象的第一位置參數(shù)；以所述第一位置參數(shù)在所述視頻的當(dāng)前圖像幀對應(yīng)的邊緣位置，向外擴(kuò)展預(yù)設(shè)個(gè)像素，作為搜索區(qū)域；通過將所述搜索區(qū)域與所述前一圖像幀中目標(biāo)對象的圖像匹配，定位出所述目標(biāo)對象在所述當(dāng)前圖像幀中的第二位置參數(shù)；

通過所述AR引擎接收到所述AR信息時(shí)，將所述第二位置參數(shù)傳給所述數(shù)據(jù)傳輸單元；

通過所述數(shù)據(jù)傳輸單元更新所述目標(biāo)對象的位置信息，并將所述AR信息和所述第二位置參數(shù)傳送給所述UI單元；

通過所述UI單元根據(jù)所述第二位置參數(shù)，將所述AR信息疊加顯示在所述當(dāng)前圖像幀中，所述AR信息鄰近對應(yīng)的目標(biāo)對象進(jìn)行顯示。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

基于在前一圖像幀對所述目標(biāo)對象的跟蹤，確定所述目標(biāo)對象在當(dāng)前幀中的基準(zhǔn)點(diǎn)，其中，所述基準(zhǔn)點(diǎn)為表征所述目標(biāo)對象在前一圖像幀的顯示位置的像素點(diǎn)；

確定在當(dāng)前圖像幀的各個(gè)特征點(diǎn)相對于所述基準(zhǔn)點(diǎn)的偏移向量；

基于所述偏移向量，確定各個(gè)所述特征點(diǎn)相對于所述基準(zhǔn)點(diǎn)的均值偏移向量，其中，所述均值偏移向量包括：均值偏移方向和均值偏移量；

基于所述基準(zhǔn)點(diǎn)及所述均值偏移向量，定位所述目標(biāo)對象對應(yīng)的目標(biāo)點(diǎn)；其中，所述目標(biāo)點(diǎn)為下一圖像幀的基準(zhǔn)點(diǎn)，且與所述第二位置參數(shù)相對應(yīng)。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，

所述目標(biāo)對象為顯示在所述待識(shí)別圖像的焦點(diǎn)區(qū)域內(nèi)的圖形對象。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，

所述方法還包括:

在獲取所述AR信息的過程中，在所述視頻的畫面上顯示獲取提示，其中，所述獲取提示，用于提示當(dāng)前正在獲取所述AR信息。