[發(fā)明專利]一種增強(qiáng)現(xiàn)實(shí)互動(dòng)系統(tǒng)及圖像處理方法

有效

• 申請?zhí)枺?/td>: 201710140853.9
• 申請日: 2017-03-10
• 公開（公告）號: CN107092347B
• 公開（公告）日: 2020-06-09
• 發(fā)明（設(shè)計(jì)）人: 胡喜林;李湘黔
• 申請（專利權(quán)）人: 深圳市博樂信息技術(shù)有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06T11/60
• 代理公司: 北京德高行遠(yuǎn)知識產(chǎn)權(quán)代理有限公司 11549
• 代理人: 王健鵬;黃啟法

本發(fā)明提供了一種增強(qiáng)現(xiàn)實(shí)互動(dòng)系統(tǒng)及圖像處理方法，其中系統(tǒng)包括：包括：RGB攝像頭，所述RGB攝像頭用以獲取第一RGB圖像；紅外傳感器，所述紅外傳感器包括紅外發(fā)射器和紅外接收器，用以獲取景深圖像；體感控制器，所述體感控制器用以辨別所述景深圖像中的人體部位，辨識出人體多個(gè)節(jié)點(diǎn)并生成人體框架，所述人體框架具有與所述人體多個(gè)節(jié)點(diǎn)對應(yīng)的多個(gè)特征點(diǎn)；圖像處理系統(tǒng)，所述圖像處理系統(tǒng)通過一個(gè)裁剪范圍裁剪所述景深圖像，將裁剪后的景深圖像疊加至所述第一RGB圖像，生成第二RGB圖像，本發(fā)明將獲取的圖像進(jìn)行分割，可以實(shí)現(xiàn)對比圖片特征碼的速度提升，以及實(shí)際運(yùn)算量減少了3倍以上，提高了識別率，從而提高了識別范圍。

技術(shù)領(lǐng)域

本發(fā)明涉及人工智能領(lǐng)域，具體涉及一種增強(qiáng)現(xiàn)實(shí)互動(dòng)系統(tǒng)及圖像處理方法。

背景技術(shù)

傳統(tǒng)的AR識別，在處理高清圖片時(shí)，會(huì)占用大量的CPU資源，由于kinect的RGB攝像頭30幀每秒，采樣幀率不夠，而且距離越遠(yuǎn)，對比特征點(diǎn)的耗時(shí)越長，輕微的運(yùn)動(dòng)都會(huì)導(dǎo)致識別率大幅下降，以及特征點(diǎn)不夠時(shí)，不能作為有效識別。

目前相關(guān)的專利申請如下：

1、申請?zhí)枮?01610187382.2的中國發(fā)明專利申請，名稱為“一種內(nèi)容交互方法及其系統(tǒng)”，通過視頻采集單元、第一計(jì)算終端、第二計(jì)算終端、觸摸顯示設(shè)備和語音輸出單元，其中視頻采集單元對場景中的識別圖進(jìn)行采集；第一計(jì)算終端對采集的識別圖進(jìn)行識別確認(rèn)；當(dāng)識別確認(rèn)成功后，通過輸出預(yù)制的互動(dòng)內(nèi)容；用戶通過互動(dòng)內(nèi)容進(jìn)行互動(dòng)時(shí)，第一計(jì)算終端存儲并向第二計(jì)算終端發(fā)送互動(dòng)的步驟和內(nèi)容；第二計(jì)算終端根據(jù)互動(dòng)的步驟和內(nèi)容進(jìn)行統(tǒng)計(jì)分析，以及將分析結(jié)果反饋給第一計(jì)算終端，進(jìn)而調(diào)整互動(dòng)內(nèi)容。從而實(shí)現(xiàn)了在虛實(shí)結(jié)合的界面上的人機(jī)互動(dòng)，但是并沒有解決本發(fā)明需要解決的技術(shù)問題。

2、申請?zhí)枮?01110037077.2的中國發(fā)明專利申請，名稱為“實(shí)現(xiàn)擴(kuò)增實(shí)境互動(dòng)的方法、擴(kuò)增實(shí)境互動(dòng)裝置及移動(dòng)終端”，通過獲取圖案信息；圖案為擴(kuò)增實(shí)境互動(dòng)場景；根據(jù)圖案信息確定虛擬景物的三維信息；根據(jù)三維信息計(jì)算出虛擬景物與擴(kuò)增實(shí)境互動(dòng)裝置、以及圖案的初始相對空間位置關(guān)系；根據(jù)初始相對空間位置關(guān)系將虛擬景物和圖案疊加在一起；采集擴(kuò)增實(shí)境互動(dòng)裝置的空間位置信息，確定出擴(kuò)增實(shí)境互動(dòng)裝置的三維運(yùn)動(dòng)路徑；根據(jù)初始相對空間位置關(guān)系及三維動(dòng)態(tài)運(yùn)動(dòng)路徑，獲得虛擬景物與擴(kuò)增實(shí)境互動(dòng)裝置、以及圖案的當(dāng)前相對空間位置關(guān)系；根據(jù)當(dāng)前相對空間位置關(guān)系將虛擬景物和圖案重新進(jìn)行疊加。增加了AR互動(dòng)過程的穩(wěn)定性，且提高了AR互動(dòng)的易操作性，但是也沒有解決本發(fā)明需要解決的技術(shù)問題。

發(fā)明內(nèi)容

為了解決上述不足的缺陷，本發(fā)明提供了一種增強(qiáng)現(xiàn)實(shí)互動(dòng)系統(tǒng)及圖像處理方法，本發(fā)明將獲取的圖像進(jìn)行分割，可以將圖片特征碼比對的速度提升，也使實(shí)際運(yùn)算量減少了3倍以上，提高了識別率，從而提高了識別范圍。將識別距離從傳統(tǒng)的AR識別范圍在1米左右提高到了2.5米。也加快了用戶拿取商家的商品在屏前識別的速度。

本發(fā)明提供的一種增強(qiáng)現(xiàn)實(shí)互動(dòng)系統(tǒng)，包括：

RGB攝像頭，所述RGB攝像頭用以獲取第一RGB圖像；

紅外傳感器，所述紅外傳感器包括紅外發(fā)射器和紅外接收器，用以獲取景深圖像；

體感控制器，所述體感控制器用以辨別所述景深圖像中的人體部位，辨識出人體多個(gè)節(jié)點(diǎn)并生成人體框架，所述人體框架具有與所述人體多個(gè)節(jié)點(diǎn)對應(yīng)的多個(gè)特征點(diǎn)；

圖像處理系統(tǒng)，所述圖像處理系統(tǒng)通過一個(gè)裁剪范圍裁剪所述景深圖像，將裁剪后的景深圖像疊加至所述第一RGB圖像，生成第二RGB圖像，所述裁剪范圍的最大高度為所述人體框架的頭頂?shù)剿鋈梭w框架的脊柱中心之間的高度，所述裁剪范圍的最大寬度為左手和右手兩邊最大節(jié)點(diǎn)之間的寬度。