[發明專利]圖像處理方法、裝置、存儲介質和計算機設備

有效

• 申請號: 201810494117.8
• 申請日: 2018-05-22
• 公開（公告）號: CN110515452B
• 公開（公告）日: 2022-02-22
• 發明（設計）人: 劉天成;潘紅;余媛;何金文;劉立強;趙彬如;鐘慶華;王旅波;肖歡;方楚楠;劉偉
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/04815
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 李文淵;何平

1.一種圖像處理方法，其特征在于，包括：

獲取從現實場景中采集的圖像幀；

將獲取的圖像幀按照采集的時序逐幀播放；

當獲取的多幀圖像幀中目標物運動所形成的軌跡滿足觸發條件時，確定現實場景中所述目標物所對應的位置；

按照所述位置在當前播放的圖像幀中渲染虛擬入口；

在所述虛擬入口中顯示虛擬內容；

確定所述虛擬入口對應于現實場景中的空間區域；

在當前終端的位置經過所述空間區域后未再次穿過所述空間區域、且當前視野區域經過移動后覆蓋所述虛擬入口對應現實場景中的所述位置時，則確定當前視野區域中位于所述虛擬入口內的視野區域；

在所述虛擬入口中顯示獲取的圖像幀中確定的所述視野區域內的現實畫面。

2.根據權利要求1所述的方法，其特征在于，所述目標物為手部；所述方法還包括：

從獲取的圖像幀中分割出手部圖像；

識別出所述手部圖像所對應的手勢類型；

當所述手勢類型為觸發類型時，在所述圖像幀中確定運動參考點；

按照所述運動參考點確定所述手部運動所形成的軌跡。

3.根據權利要求2所述的方法，其特征在于，所述從獲取的圖像幀中分割出手部圖像，包括：

通過手部識別模型，將獲取的圖像幀編碼為語義分割特征矩陣；

解碼所述語義分割特征矩陣得到語義分割圖像；所述語義分割圖像中的像素點，具有表示所屬分類類別的像素值，且編碼自的圖像幀中的像素點對應；

根據屬于手部類別的像素點從所述圖像中分割出手部圖像。

4.根據權利要求2所述的方法，其特征在于，所述方法還包括：

當所述觸發條件未滿足時，在播放的視頻幀中，將所述軌跡所經過的像素點的像素值替換為預設像素值；

當所述觸發條件被滿足時，按照所述位置在當前播放的圖像幀中，播放預設動畫。

5.根據權利要求1所述的方法，其特征在于，所述確定現實場景中所述目標物所對應的位置，包括：

確定所述目標物在世界坐標空間中的世界坐標位置；

所述按照所述位置在當前播放的圖像幀中渲染虛擬入口，包括：

按照相機坐標空間中對應于所述世界坐標位置的相機坐標位置，在當前播放的圖像幀中渲染虛擬入口。

6.根據權利要求5所述的方法，其特征在于，所述按照相機坐標空間中對應于所述世界坐標位置的相機坐標位置，在當前播放的圖像幀中渲染虛擬入口，包括：

獲取當前終端的位置和姿態；

根據所述當前終端的位置和姿態，確定當前的相機坐標空間與所述世界坐標空間的變換矩陣；

按所述變換矩陣將世界坐標位置變換為相機坐標空間中的相機坐標位置；

按照所述相機坐標位置，在當前播放的圖像幀中渲染虛擬入口。

7.根據權利要求6所述的方法，其特征在于，所述獲取當前終端的位置和姿態，包括：

從地圖中挑選與獲取的圖像幀匹配的地圖節點；

查詢對應于所述地圖節點所存儲的現實場景中的位置；

獲取慣性傳感器采集的傳感器數據；

根據所述傳感器數據，確定當前終端在現實場景中的姿態。

8.根據權利要求7所述的方法，其特征在于，所述方法還包括：

從按時序采集的圖像幀中選取圖像幀；

當選取的圖像幀的圖像特征符合節點圖像的圖像特征時，獲取選取的圖像幀為節點圖像；

確定獲取的所述節點圖像在地圖中相應的地圖節點；

對應于確定的所述地圖節點存儲獲取的所述節點圖像的圖像特征，及采集獲取的所述節點圖像時在現實場景中的位置。