[發明專利]全景視頻的目標跟蹤方法、可讀存儲介質及計算機設備

有效

• 申請號: 202010023864.0
• 申請日: 2020-01-09
• 公開（公告）號: CN111242977B
• 公開（公告）日: 2023-04-25
• 發明（設計）人: 許睿;姜文杰
• 申請（專利權）人: 影石創新科技股份有限公司
• 主分類號: G06T7/246
• 分類號: G06T7/246;G06T7/73;G06V20/40;G06V10/764
• 代理公司: 深圳瑞天謹誠知識產權代理有限公司 44340
• 代理人: 溫青玲

本申請適用于視頻處理領域，提供了一種全景視頻的目標跟蹤方法、可讀存儲介質及計算機設備。所述方法包括：采用所述跟蹤器對所述待跟蹤目標進行跟蹤檢測，得到所述待跟蹤目標在下一全景視頻幀的預測跟蹤位置，計算所述預測跟蹤位置的置信度，并采用遮擋檢測器計算所述預測跟蹤位置的遮擋分數；判斷所述預測跟蹤位置的置信度是否大于預設置信度閾值，并判斷所述預測跟蹤位置的遮擋分數是否大于預設遮擋分數閾值；根據置信度和遮擋分數采取相應的跟蹤策略。本申請能夠區分跟蹤失敗的原因是由于目標丟失還是遮擋導致，進而采取相應的跟蹤恢復策略，在跟蹤失效時能自動恢復跟蹤，從而達到長時間持續跟蹤的效果，且本發明方法具有較低的運算復雜度，實時性好。

技術領域

本申請屬于視頻處理領域，尤其涉及一種全景視頻的目標跟蹤方法、可讀存儲介質及計算機設備。

背景技術

全景視頻可使用戶能夠觀看在全景相機拍攝角度范圍內的任意視角的視頻。在觀看全景視頻時，由于平面顯示器某一時刻只能顯示全景視頻的其中一個視角，當用戶想要持續觀看特定目標對象時，可能由于目標消失在當前視角而需要控制平面顯示器轉動視角，因此操作比較麻煩。且當用戶感興趣的一個目標在全景視頻中位置不斷變化時，用戶需要跟隨目標的轉動不斷地調整觀看視角，不僅操作麻煩，且會使用戶有眩暈感。

發明內容

本申請的目的在于提供一種全景視頻的目標跟蹤方法、裝置、計算機可讀存儲介質、計算機設備及全景相機，旨在解決當用戶感興趣的一個目標在全景視頻中位置不斷變化時，用戶需要跟隨目標的轉動不斷地調整觀看視角，不僅操作麻煩，且會使用戶有眩暈感的問題。

本申請提供了一種全景視頻的目標跟蹤方法，所述方法包括：

S101、對當前需確定跟蹤目標的全景視頻幀進行目標檢測，獲取待跟蹤目標；

S102、初始化跟蹤器和遮擋檢測器，將所述待跟蹤目標的邊界框作為跟蹤器的目標跟蹤框，將所述待跟蹤目標的類別作為跟蹤器的跟蹤目標類別；

S103、采用所述跟蹤器對所述待跟蹤目標進行跟蹤檢測，得到所述待跟蹤目標在下一全景視頻幀的預測跟蹤位置，計算所述預測跟蹤位置的置信度，并采用遮擋檢測器計算所述預測跟蹤位置的遮擋分數；

S104、判斷所述預測跟蹤位置的置信度是否大于預設置信度閾值，并判斷所述預測跟蹤位置的遮擋分數是否大于預設遮擋分數閾值；

如果所述預測跟蹤位置的置信度大于預設置信度閾值，則根據所述待跟蹤目標的預測跟蹤位置對所述待跟蹤目標進行跟蹤；

如果所述預測跟蹤位置的置信度小于預設置信度閾值，且所述預測跟蹤位置的遮擋分數大于預設遮擋分數閾值，則在所述下一全景視頻幀中檢測目標的類別和目標檢測框，并根據所述目標的類別和目標檢測框以及跟蹤器中的跟蹤信息重新確定預測跟蹤框，將所述預測跟蹤框代替跟蹤器的目標跟蹤框，通過預測跟蹤框進行跟蹤；和/或，

如果所述預測跟蹤位置的置信度小于預設置信度閾值，且所述預測跟蹤位置的遮擋分數小于預設遮擋分數閾值，則在所述下一全景視頻幀中檢測目標的類別和目標檢測框，并根據所述目標的類別和目標檢測框以及跟蹤器中的跟蹤信息重新確定預測跟蹤框，將所述預測跟蹤框的位置和大小作為跟蹤器重啟的初始化位置和大小，進行跟蹤器重啟。

進一步地，所述根據所述待跟蹤目標的預測跟蹤位置對所述待跟蹤目標進行跟蹤之后，所述方法還包括：

在目標跟蹤過程中，每隔一預設時間間隔，重新返回S103。

進一步地，所述在所述下一全景視頻幀中檢測目標的類別和目標檢測框，并根據所述目標的類別和目標檢測框以及跟蹤器中的跟蹤信息重新確定預測跟蹤框，將所述預測跟蹤框代替跟蹤器的目標跟蹤框，通過預測跟蹤框進行跟蹤包括：