[發明專利]一種全景視頻的熱點交互方法

有效

• 申請號: 201910297415.2
• 申請日: 2019-04-15
• 公開（公告）號: CN110060201B
• 公開（公告）日: 2023-02-28
• 發明（設計）人: 修文群;彭信;齊文光
• 申請（專利權）人: 深圳市數字城市工程研究中心;深圳市城市公共安全技術研究院有限公司
• 主分類號: G06T3/00
• 分類號: G06T3/00;G06T3/40;G06T7/33;G06T7/40;G06T17/00;G06F17/16
• 代理公司: 深圳國新南方知識產權代理有限公司 44374
• 代理人: 周純

1.一種全景視頻的熱點交互方法，其特征在于，所述交互方法包括：

S1，獲取原始視頻圖像，對所述原始視頻圖像進行拼接，以生成球面全景視頻；

S2，利用球面重投影算法在以所述全景視頻的球心為視點的不同視線方向上對所述全景視頻進行重構，生成不同視線方向上的透視圖；

S3，在所述全景視頻中接收對目標物的點選操作，將所述點選操作對應的像素位置配置為熱點，獲取所述熱點的球面坐標信息，將所述目標物的屬性信息與所述熱點的球面坐標信息進行關聯；

S4，獲取所述透視圖上與所述熱點對應的投影點的圖像坐標信息，將所述投影點的圖像坐標信息與所述熱點的球面坐標信息建立映射關系；

S5，將所述目標物的部分或全部屬性信息作為標注內容按照所述熱點的球面坐標信息以及所述熱點對應的投影點的圖像坐標信息分別在所述全景視頻和所述透視圖中進行顯示。

2.根據權利要求1所述的全景視頻的熱點交互方法，其特征在于，步驟S1包括：

S11，對視頻流圖像幀進行特征點提取；

S12，對所述圖像幀進行特征點匹配，利用最小二乘法或隨機抽樣一致算法對所述特征點匹配中的誤匹配點進行剔除；

S13，基于剔除誤匹配點的特征點，建立圖像幀的配準模型；

S14，根據所述配準模型在球體模型的三維球面上將圖像幀進行配準，生成球面全景視頻。

3.根據權利要求1所述的全景視頻的熱點交互方法，其特征在于，步驟S2包括：

S21，建立以所述全景視頻的球心為原點的世界坐標系XYZ，將世界坐標系XYZ繞X軸旋轉α度，得到相機坐標系xyz；

S22，根據原始視頻圖像的像素高度H及像素寬度W、和相機的焦距r，建立圖像點在透視圖中的二維圖像坐標與所述圖像點在相機坐標系xyz的對應坐標的轉換關系；

S23，根據所述轉換關系、以及世界坐標系XYZ與相機坐標系xyz的變換矩陣，建立全景視頻中任意點投影到透視圖的對應投影點的坐標轉換關系，計算對應投影點在透視圖上的二維圖像坐標，生成不同視線方向上的透視圖。

4.根據權利要求1所述的全景視頻的熱點交互方法，其特征在于，在步驟S3中，當所述目標物移動時，獲取所述目標物在全景視頻中首次出現的圖像幀，在所述圖像幀中接收對所述目標物的點選操作，將所述點選操作對應的像素位置配置為初始熱點，獲取所述初始熱點的球面坐標信息，將所述目標物的屬性信息與所述初始熱點的球面坐標信息進行關聯。

5.根據權利要求4所述的全景視頻的熱點交互方法，其特征在于，在步驟S3中還包括：

在所述圖像幀中對所述目標物在上下左右四個方向放大X個像素，對放大區域進行特征提取，得到目標物的特征信息，其中，X為大于20且小于50的自然數；

繼續播放全景視頻，根據所述特征信息在全景視頻的圖像幀中進行目標物識別，將識別區域配置為后續熱點，將所述目標物的屬性信息與所述后續熱點的球面坐標信息進行關聯。

6.根據權利要求5所述的全景視頻的熱點交互方法，其特征在于，在步驟S4中，當所述目標物移動時，獲取所述透視圖上與所述初始熱點及所述后續熱點對應的投影點的圖像坐標信息，將所述投影點的圖像坐標信息與對應初始熱點或后續熱點的球面坐標信息建立映射關系。

7.根據權利要求1所述的全景視頻的熱點交互方法，其特征在于，所述交互方法還包括：

S6，利用WebGL加載所述全景視頻和所述透視圖，將所述全景視頻和所述透視圖作為紋理渲染到3D幾何模型上。

8.根據權利要求1所述的全景視頻的熱點交互方法，其特征在于，所述交互方法還包括：

接收目標物的屬性信息，所述屬性信息包括文字、圖片、音頻、視頻、網址鏈接中的一種或組合；

創建所述全景視頻的標注圖層，并在標注圖層中存儲所述目標物的熱點的球面坐標信息、與所述熱點對應的投影點的圖像坐標信息以及目標物的標注內容，所述標注內容包括目標物的部分或全部屬性信息。