[發明專利]一種直播機位攝像方案自動學習方法

有效

• 申請號: 202010786600.0
• 申請日: 2020-08-07
• 公開（公告）號: CN111739105B
• 公開（公告）日: 2020-11-20
• 發明（設計）人: 梁棟;丁剛毅;李鵬;唐明湘;黃天羽;李立杰
• 申請（專利權）人: 北京理工大學
• 主分類號: G06T7/80
• 分類號: G06T7/80;G06T7/73;G06N3/08
• 代理公司: 北京云嘉律師事務所 11869
• 代理人: 常俊虎

本發明涉及一種直播機位攝像方案自動學習方法，包括以下步驟：對已有直播視頻進行鏡頭分割；逐幀提取得到視頻關鍵幀序列；對相鄰的毎兩幀圖像進行特征點提取和匹配；利用匹配的特征點得到攝像機幀間運動的旋轉矩陣和平移向量；根據攝像機幀間運動參數得到對應于每個關鍵幀時間點的攝像機世界坐標和姿態，從而獲得攝像機在攝像過程中的運動軌跡和姿態參數；對所有視頻片段進行攝像機運動軌跡和姿態參數生成，得到直播過程使用的所有攝像機參數構成的直播攝像方案。本發明通過對已有直播視頻進行圖像處理生成直播攝像方案，對直播攝像方案的學習提供了輔助方法和工具，也為直播攝像過程的自動化提供了可能。

技術領域

本發明涉及一種電視直播方案生成方法，特別涉及一種直播機位攝像方案自動學習方法。

背景技術

電視臺在進行現場直播的時候，直播人員需要具有豐富的經驗。當碰到電視臺以前沒有拍攝制作過的活動，就會給負責現場直播的電視臺提出挑戰。進行現場直播時應該怎么布設直播的攝像機，在直播過程中怎么對攝像機進行控制，都成為直播過程中面臨的技術難題。面對這種問題，一個可行的解決方案是從以往類似活動的直播視頻資源中進行直播攝像方案的學習。使用純人工的方式對海量視頻數據進行分析和學習是不可取的，圖像處理、視頻處理領域的各項成果應該被廣泛使用進行直播攝像方案的學習。如果能夠進行直播攝像方案的自動化學習，那么不僅僅可用于沒有經驗的直播攝像方案的設計，也為直播攝像機的自動布設、控制也就是攝像過程的自動化提供了可能。但是現有技術中從未見有直播攝像方案自動學習相關技術的報道。

發明內容

本發明的目的在于針對現有技術的不足，提供一種直播機位攝像方案自動學習方法，包括以下步驟：

對已有直播視頻進行鏡頭分割，使得每個視頻片段不包含相機切換；

選取一段分割后的視頻片段，標定攝像機類型，并逐幀提取得到視頻關鍵幀序列；

對相鄰的毎兩幀圖像進行特征點提取和匹配；

利用匹配的特征點得到攝像機幀間運動的旋轉矩陣和平移向量；

根據攝像機幀間運動參數得到對應于每個關鍵幀時間點的攝像機世界坐標和姿態，從而獲得攝像機在攝像過程中的運動軌跡和姿態參數；

對所有視頻片段進行攝像機運動軌跡和姿態參數生成，得到直播過程使用的所有攝像機參數構成的直播攝像方案。

根據本發明實施例的一種具體實現方式，所述標定攝像機類型通過人工方式標定，或者通過對每種攝像機拍攝圖像特征進行特征建模，實現對視頻片段的自動標定。

根據本發明實施例的一種具體實現方式，對視頻片段進行關鍵動作片段標定，從而生成對應關鍵動作片段的直播攝像方案。

根據本發明實施例的一種具體實現方式，還包括回環檢測步驟，比較每兩幀圖像的相似度，當相似度大于閾值，就認為這兩幀圖像是在同一點觀測到的，并對攝像機的軌跡進行修正。

根據本發明實施例的一種具體實現方式，還包括人工修正攝像機參數的步驟。

根據本發明實施例的一種具體實現方式，還包括對視頻關鍵幀的運動模糊進行復原的步驟。

根據本發明實施例的一種具體實現方式，還包括對視頻關鍵幀進行圖像增強的步驟。

另一方面，本發明還提供了一種電子設備，所述電子設備包括：

至少一個處理器；以及，

與所述至少一個處理器通信連接的存儲器；其中，所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被所述至少一個處理器執行，以使所述至少一個處理器能夠執行前述的一種直播機位攝像方案自動學習方法。