[發(fā)明專利]增強現(xiàn)實AR信息展示的方法、裝置、設(shè)備及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011229694.8
• 申請日: 2020-11-06
• 公開（公告）號: CN112365574A
• 公開（公告）日: 2021-02-12
• 發(fā)明（設(shè)計）人: 侯欣如
• 申請（專利權(quán)）人: 北京市商湯科技開發(fā)有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00;G06T19/00
• 代理公司: 北京中知恒瑞知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11889
• 代理人: 吳迪

本公開提供了一種增強現(xiàn)實AR信息展示的方法、裝置、設(shè)備及存儲介質(zhì)，其中，該方法包括：獲取AR設(shè)備采集的作業(yè)現(xiàn)場的真實場景圖像；基于真實場景圖像，確定當(dāng)前的待操作設(shè)備的作業(yè)節(jié)點信息；根據(jù)待操作設(shè)備的作業(yè)節(jié)點信息，生成針對待操作設(shè)備上的待操作部件的操作提示信息；通過AR設(shè)備展示針對待操作部件的操作提示信息的AR特效。

技術(shù)領(lǐng)域

本公開涉及增強現(xiàn)實(Augmented Reality，AR)技術(shù)領(lǐng)域，具體而言，涉及一種增強現(xiàn)實AR信息展示的方法、裝置、設(shè)備及存儲介質(zhì)。

背景技術(shù)

AR技術(shù)作為一種根據(jù)實時計算的攝像機影像的位置及角度，在影像上疊加相應(yīng)的圖像、視頻、三維(3-Dimensional，3D)模型以實現(xiàn)虛擬世界與現(xiàn)實世界融合的技術(shù)，面向用戶提供了一種新的交互體驗，因而被廣泛應(yīng)用于消費、醫(yī)療、工業(yè)等各種技術(shù)領(lǐng)域。

以工廠作業(yè)場景為例，在AR技術(shù)應(yīng)用到這一場景時，由于缺乏針對特定作業(yè)場景的相關(guān)處理，而導(dǎo)致AR交互體驗感較低。

發(fā)明內(nèi)容

本公開實施例至少提供一種增強現(xiàn)實AR信息展示的方法、裝置、設(shè)備及存儲介質(zhì)，以提升AR交互體驗感。

第一方面，本公開實施例提供了一種增強現(xiàn)實AR信息展示的方法，所述方法包括：

獲取AR設(shè)備采集的作業(yè)現(xiàn)場的真實場景圖像；

基于所述真實場景圖像，確定當(dāng)前的待操作設(shè)備的作業(yè)節(jié)點信息；

根據(jù)所述待操作設(shè)備的作業(yè)節(jié)點信息，生成針對待操作設(shè)備上的待操作部件的操作提示信息；

通過所述AR設(shè)備展示針對所述待操作部件的操作提示信息的AR特效。

采用上述增強現(xiàn)實AR信息展示的方法，基于真實場景圖像可以自動確定當(dāng)前需要操作的待操作設(shè)備，基于待操作設(shè)備的作業(yè)節(jié)點信息可以自動生成指示對待操作設(shè)備上的待操作部件進行相應(yīng)操作的操作提示信息，這樣，用戶可以基于操作提示信息的提示功能對待操作部件執(zhí)行相應(yīng)的操作，例如，可以是拆卸待操作部件，還可以是安裝待操作部件等操作。可知的是，上述方法在實現(xiàn)了虛擬環(huán)境與真實場景融合的前提下，提升了用戶與AR設(shè)備之間的交互體驗感，且在實際工業(yè)場景中通過在采集的待操作設(shè)備的真實場景圖像上疊加待操作部件的操作提示信息，可以對工業(yè)作業(yè)流程，比如設(shè)備拆裝流程進行有效引導(dǎo)。

在一種可能的實施方式中，所述基于所述真實場景圖像，確定當(dāng)前的待操作設(shè)備的作業(yè)節(jié)點信息，包括：

從所述真實場景圖像中提取待操作設(shè)備的特征信息；

將提取的所述特征信息與數(shù)據(jù)庫中存儲的各個標(biāo)準(zhǔn)操作設(shè)備的特征信息進行比對，確定與所述待操作設(shè)備匹配的標(biāo)準(zhǔn)操作設(shè)備；

將確定的所述標(biāo)準(zhǔn)操作設(shè)備關(guān)聯(lián)的作業(yè)節(jié)點信息，確定為當(dāng)前的待操作設(shè)備的作業(yè)節(jié)點信息。

本公開實施例的數(shù)據(jù)庫中可以預(yù)先存儲有各個標(biāo)準(zhǔn)操作設(shè)備的特征信息，這樣，在從真實場景圖像中提取出待操作設(shè)備的特征信息的情況下，可以基于特征信息比對實現(xiàn)關(guān)聯(lián)的作業(yè)節(jié)點信息的確定，從而快速準(zhǔn)確地獲取當(dāng)前作業(yè)節(jié)點下的操作提示信息，并進行AR特效的快速展示，以進行有效引導(dǎo)，也能夠提升用戶與AR設(shè)備之間的交互體驗感。

在一種可能的實施方式中，所述根據(jù)所述待操作設(shè)備的作業(yè)節(jié)點信息，生成針對待操作設(shè)備上的待操作部件的操作提示信息，包括：

若根據(jù)所述待操作設(shè)備的作業(yè)節(jié)點信息，確定所述待操作設(shè)備上的待操作部件處于待拆卸狀態(tài)，則生成指示拆卸所述待操作部件的第一操作提示信息；

若根據(jù)所述待操作設(shè)備的作業(yè)節(jié)點信息，確定所述待操作設(shè)備處于需要組裝待操作部件的待配組狀態(tài)，則生成指示向所述待操作設(shè)備配組安裝所述待操作部件的第二操作提示信息。