[發明專利]一種增強現實互動系統及圖像處理方法

有效

• 申請號: 201710140853.9
• 申請日: 2017-03-10
• 公開（公告）號: CN107092347B
• 公開（公告）日: 2020-06-09
• 發明（設計）人: 胡喜林;李湘黔
• 申請（專利權）人: 深圳市博樂信息技術有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06T11/60
• 代理公司: 北京德高行遠知識產權代理有限公司 11549
• 代理人: 王健鵬;黃啟法

1.一種增強現實互動系統，其特征在于，包括：

RGB攝像頭，所述RGB攝像頭用以獲取第一RGB圖像；

紅外傳感器，所述紅外傳感器包括紅外發射器和紅外接收器，用以獲取景深圖像；體感控制器，所述體感控制器用以辨別所述景深圖像中的人體部位，辨識出人體多個節點并生成人體框架，所述人體框架具有與所述人體多個節點對應的多個特征點；

圖像處理系統，所述圖像處理系統通過一個裁剪范圍裁剪所述景深圖像，將裁剪后的景深圖像疊加至所述第一RGB圖像，生成第二RGB圖像，所述裁剪范圍的最大高度為所述人體框架的頭頂到所述人體框架的脊柱中心之間的高度，所述裁剪范圍的最大寬度為左手和右手兩邊最大節點之間的寬度；

所述圖像處理系統連接有圖像特征庫，所述圖像特征庫包含多個圖像，所述多個圖像分別具有各自的圖像特征點，所述圖像處理系統將所述人體框架的特征點與圖像特征庫的特征點進行對比，并將特征點比對相符的圖像疊加至所述第二RGB圖像上形成合成圖案；

所述圖像處理系統還連接有資源庫，所述資源庫包含有物品信息、動畫、視頻、模型、圖片和語音數據。

2.如權利要求1所述的一種增強現實互動系統，其特征在于，所述圖像特征庫的圖像與所述資源庫的所述物品信息、動畫、視頻、模型、圖片和語音數據相關聯。

3.如權利要求2所述的一種增強現實互動系統，其特征在于，所述圖像處理系統將所述物品信息、動畫、視頻、模型、圖片和語音數據疊加至所述第二RGB圖像或第一RGB圖像。

4.一種增強現實互動的圖像處理方法，其特征在于，包括以下步驟：

(1)提供至少一個RGB攝像頭、紅外傳感器、體感控制器、以及至少一個圖像處理系統，所述圖像處理系統連接有圖像特征庫，所述圖像特征庫具有特征點的圖像；

(2)通過所述RGB攝像頭，獲取第一RGB圖像；

(3)通過所述紅外傳感器獲取景深圖像；

(4)通過所述體感控制器辨別所述景深圖像中的人體部位，辨識出人體多個節點并生成人體框架，所述人體框架具有與所述人體多個節點對應的多個特征點；

(5)通過一個裁剪范圍裁剪所述景深圖像，將裁剪后的景深圖像疊加至所述第一RGB圖像，生成第二RGB圖像，所述裁剪范圍的最大高度為所述人體框架的頭頂到所述人體框架的脊柱中心之間的高度，所述裁剪范圍的最大寬度為所述人體框架的左手和右手兩邊最大節點之間的寬度；

(6)提取所述第二RGB圖像的其中一幀的特征點與所述圖像特征庫的圖像的特征點進行對比；

(7)將與特征點比對相符的圖像疊加到第二RGB圖像形成合成圖案；所述圖像處理系統還連接有資源庫，所述資源庫包含物品信息、動畫、視頻、模型、圖片和語音數據。

5.如權利要求4所述的一種增強現實互動的圖像處理方法，其特征在于，所述步驟(7)包括：

所述圖像特征庫的圖像與所述資源庫的所述物品信息、動畫、視頻、模型、圖片和語音數據相關聯。

6.如權利要求5所述的一種增強現實互動的圖像處理方法，其特征在于，所述步驟(7)包括：

所述圖像處理系統將所述物品信息、動畫、視頻、模型、圖片和語音數據疊加至所述第二RGB圖像或第一RGB圖像。