[發(fā)明專利]增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法、客戶端裝置和服務(wù)器

有效

• 申請?zhí)枺?/td>: 201410149033.2
• 申請日: 2014-04-14
• 公開（公告）號: CN103942049B
• 公開（公告）日: 2018-09-07
• 發(fā)明（設(shè)計(jì)）人: 楊春勇;賀周洲;傅正超;隋鑫
• 申請（專利權(quán)）人: 百度在線網(wǎng)絡(luò)技術(shù)（北京）有限公司
• 主分類號: G06F9/451
• 分類號: G06F9/451;G06K9/00;G06F17/30
• 代理公司: 北京清亦華知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11201
• 代理人: 宋合成

1.一種增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法，其特征在于，包括：

接收客戶端發(fā)送的待識別對象的相關(guān)信息，其中，所述待識別對象的相關(guān)信息包括所述待識別對象的圖像信息、聲音信息、位置信息、及通過傳感器獲得的數(shù)據(jù)；

對所述相關(guān)信息進(jìn)行識別，獲得對應(yīng)的識別結(jié)果，根據(jù)所述識別結(jié)果生成所述待識別對象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息；以及

向所述客戶端返回所述增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息，以使所述客戶端根據(jù)所述顯示位置信息，同時(shí)顯示所述待識別對象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)；

在確定客戶端發(fā)送的圖像中包含至少2個待識別對象時(shí)，對所述圖像進(jìn)行分割處理，獲取每個待識別對象在所述圖像中的位置，對每個待識別對象和對應(yīng)的位置進(jìn)行識別；

所述對所述相關(guān)信息進(jìn)行識別，包括：

獲得所述待識別對象對應(yīng)的類型信息，根據(jù)所述類型信息確定采用的識別模型的順序，并按照所述順序采用對應(yīng)的識別模型對所述相關(guān)信息進(jìn)行識別，獲得識別結(jié)果；和/或

并行采用對應(yīng)的識別模型對所述相關(guān)信息進(jìn)行識別，獲得識別結(jié)果，

其中，并行識別結(jié)果的概率由聲音識別模型的識別概率、圖像識別模型的識別概率、位置識別模型的識別概率及各識別模型對應(yīng)的權(quán)重決定。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述識別結(jié)果生成所述待識別對象的增強(qiáng)信息，包括：

根據(jù)所述識別結(jié)果從本地的信息源中獲得所述待識別對象的關(guān)聯(lián)信息，對所述關(guān)聯(lián)信息和所述識別結(jié)果進(jìn)行整合，生成所述待識別對象的增強(qiáng)信息。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述按照所述順序采用對應(yīng)的識別模型對所述相關(guān)信息進(jìn)行識別，獲得識別結(jié)果，包括：

按照所述順序采用對應(yīng)的識別模型并結(jié)合從本地的信息源中獲得的信息，對所述相關(guān)信息進(jìn)行識別，獲得識別結(jié)果；和/或

所述并行采用對應(yīng)的識別模型對所述相關(guān)信息進(jìn)行識別，獲得識別結(jié)果，包括：

并行采用對應(yīng)的識別模型并結(jié)合從本地的信息源中獲得的信息，對所述相關(guān)信息進(jìn)行識別，獲得識別結(jié)果。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述對所述相關(guān)信息進(jìn)行識別，獲得識別結(jié)果，包括：

對所述待識別對象的圖像信息進(jìn)行識別，獲得所述圖像信息中包含的多個待識別對象以及每個待識別對象的名稱、識別概率和位置信息；

對于每個待識別對象，當(dāng)確定當(dāng)前待識別對象的識別概率大于預(yù)定閾值時(shí)，根據(jù)所述當(dāng)前待識別對象的名稱和位置信息獲得識別結(jié)果；當(dāng)確定當(dāng)前待識別對象的識別概率小于等于所述預(yù)定閾值時(shí)，重新對所述當(dāng)前待識別對象進(jìn)行識別，直至當(dāng)前待識別對象的識別概率大于預(yù)定閾值。

5.一種服務(wù)器，其特征在于，包括：

接收模塊，用于接收客戶端發(fā)送的待識別對象的相關(guān)信息，其中，所述待識別對象的相關(guān)信息包括所述待識別對象的圖像信息、聲音信息、位置信息、及通過傳感器獲得的數(shù)據(jù)；

融合處理模塊，用于對所述接收模塊接收的所述相關(guān)信息進(jìn)行識別，獲得對應(yīng)的識別結(jié)果，根據(jù)所述識別結(jié)果生成所述待識別對象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息；

所述融合處理模塊，還用于在確定客戶端發(fā)送的圖像中包含至少2個待識別對象時(shí)，對所述圖像進(jìn)行分割處理，獲取每個待識別對象在所述圖像中的位置，對每個待識別對象和對應(yīng)的位置進(jìn)行識別；

以及

返回模塊，用于向所述客戶端返回所述融合處理模塊生成的所述增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息，以使所述客戶端根據(jù)所述顯示位置信息，同時(shí)顯示所述待識別對象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)；

所述融合處理模塊，還包括：

識別單元，用于獲得所述待識別對象對應(yīng)的類型信息，根據(jù)所述類型信息確定采用的識別模型的順序，并按照所述順序采用對應(yīng)的識別模型對所述相關(guān)信息進(jìn)行識別，獲得識別結(jié)果；和/或

并行采用對應(yīng)的識別模型對所述相關(guān)信息進(jìn)行識別，獲得識別結(jié)果；

其中，并行識別結(jié)果的概率由聲音識別模型的識別概率、圖像識別模型的識別概率、位置識別模型的識別概率及各識別模型對應(yīng)的權(quán)重決定。