[發明專利]一種全視點視頻圖像的處理方法及系統

在審

• 申請號: 201710733135.2
• 申請日: 2017-08-24
• 公開（公告）號: CN107396085A
• 公開（公告）日: 2017-11-24
• 發明（設計）人: 熊磊;郝冬寧;朱春波;吳迪;謝俊;孫曄;李磊;何文升
• 申請（專利權）人: 三星電子（中國）研發中心;三星電子株式會社
• 主分類號: H04N13/02
• 分類號: H04N13/02;H04N21/472;H04N21/6587
• 代理公司: 北京德琦知識產權代理有限公司11018
• 代理人: 牛崢,王麗琴

技術領域

本發明涉及計算機的圖像處理技術，特別涉及一種全視點視頻圖像的處理方法及系統。

背景技術

隨著計算機技術的發展，具有與用戶交互功能的應用也越來越多。在這些不同類型的應用中，常常需要為用戶提供不同視點的圖像，以便用戶選擇或/和參考運行應用。目前，為了能夠為用戶提供不同視點的圖像，需要將不同視點的圖像存儲在終端中，這里的終端可以是各種類型的，比如移動終端或計算機終端等等，等到用戶向終端發送獲取請求時，展示給用戶。

為了提升用戶體驗度，終端趨于向用戶提供三維的不同視點的圖像。三維的不同視點的圖像形成可以有多種方式，比如可以將一視點的二維圖像與其深度信息進行整合，得到該視點的三維圖像，采用這種方式形成多個視點的三維圖像后存儲在終端中。對于一個場景或物體，根據視點的不同，其深度信息也不同，所以最終得到的該視點的三維圖像也不同，從而使得用戶可以從多個不同視點觀察一個物體或場景，獲取不同的三維圖像。這樣，根據用戶的不同視點的三維圖像請求，終端可以為用戶提供相應的對應視點的三維圖像，從而實現不同視點的圖像自由切換。

但是，終端采用這種存儲不同視點的圖像提供給用戶也存在缺陷：其無法為用戶提供全視點圖像，且在進行不同視點的圖像切換過程中不是無縫切換。更進一步地，終端需要一一存儲不同視點的圖像才能為用戶提供，而無法根據存儲的圖像合成虛擬視點的圖像。終端只能在每個視點上提供固定觀察角度的圖像，當用戶需要觀察其他角度時則必須切換視點，從而從終端獲取到的不同視點的圖像繁瑣，體驗度不高。

發明內容

有鑒于此，本發明實施例提供一種全視點視頻圖像的處理方法，該方法能夠提供全視點視頻圖像，實現不同視點的視頻圖像無縫切換。

本發明實施例還提供一種全視點視頻圖像的處理系統，該系統能夠提供全視點視頻圖像，實現不同視點的視頻圖像無縫切換。

根據上述目的，本發明是這樣實現的：

一種全視點視頻圖像的處理方法，包括：

對一場景或物體的視頻數據進行采集；

將采集的視頻數據拼接為所述場景或物體的全景視頻圖像；

將所述場景或物體的全景視頻圖像作為所述場景或物體的全視點圖像存儲；

接收到獲取某一視點的所述場景或物體的視頻圖像請求后，獲取存儲的所述場景或物體的全視點視頻圖像，選擇其中對應視點的視頻圖像或切換到對應視點的視頻圖像輸出。

所述拼接算法采用時域拼接算法和/或相位相關法。

所述采集時采用的系統時鐘同步于所述拼接過程中的時鐘。

所述將采集的視頻數據拼接為所述場景或物體的全景視頻圖像后，還包括：

根據用戶所請求的視點信息，確定所述場景或物體的全景視頻圖像在不同視點的熱力圖，根據所述場景或物體的全景視頻圖像在不同視點的熱力圖，確定對應的視點策略后，根據對應的視點策略合成所述場景或物體的某一個或多個視點的視頻圖像，進行存儲；

所述方法還包括：接收到獲取某一視點的所述場景或物體的視頻圖像請求后，直接將合成的所述場景或物體的對應視點的視頻圖像輸出。

所述視點信息包括：采集視點的視頻圖像的設備編號、時刻或/和視角的經緯度，所述生成的熱力圖為對應視點視角及訪問次數的區域熱力圖；

所述熱力圖及視點策略定時更新，所述根據對應的視點策略合成所述場景或物體的某一個或多個視點的視頻圖像中的某一個或多個視點是不同的。

一種全視點視頻圖像的系統，包括：采集設備、拼接和同步服務器、同步監測和處理服務器、視頻流服務器以及用戶終端，其中，

采集設備，用于對一場景或物體的視頻數據進行采集；

拼接和同步服務器，用于將采集的視頻數據拼接為所述場景或物體的全景視頻圖像；

同步監測和處理服務器，用于從拼接和同步服務器接收到所述場景或物體的全景視頻圖像，發送給視頻流服務器；

視頻流服務器，用于存儲所述場景或物體的全景視頻圖像，接收用戶終端發送的獲取某一視點的所述場景或物體的視頻圖像請求后，獲取存儲的所述場景或物體的全視點視頻圖像，選擇其中對應視點的視頻圖像或切換到對應視點的視頻圖像輸出；

用戶終端，用于發送獲取某一視點的所述場景或物體的視頻圖像請求，接收其中對應視點的視頻圖像或切換到對應視點的視頻圖像。

所述采集設備包括專業攝像機和/或監控攝像機，所述采集設備，還用于采集時采用的系統時鐘同步于所述拼接和同步服務器的時鐘。

還包括：