[發明專利]一種視頻處理的方法、裝置、電子設備及存儲介質

在審

• 申請號: 202111123318.5
• 申請日: 2021-09-24
• 公開（公告）號: CN113824993A
• 公開（公告）日: 2021-12-21
• 發明（設計）人: 孔祥暉
• 申請（專利權）人: 北京市商湯科技開發有限公司
• 主分類號: H04N21/238
• 分類號: H04N21/238
• 代理公司: 北京中知恒瑞知識產權代理事務所(普通合伙) 11889
• 代理人: 吳迪

本公開提供了一種視頻處理的方法、裝置、電子設備及存儲介質，其中，該方法包括：獲取智能設備采集的目標真實場景下的視頻畫面；通過對視頻畫面進行肢體識別，確定位于視頻畫面中的用戶肢體的位置信息；基于用戶肢體的位置信息，調整采集到的視頻畫面。本公開隨著用戶肢體的動態變化，本公開的視頻畫面可以隨之發生變化，使得用戶即使在目標真實場景下也可以體驗到不同的視頻畫面，虛實結合，提升用戶沉浸感，體驗更佳。

技術領域

本公開涉及計算機視覺技術領域，具體而言，涉及一種視頻處理的方法、裝置、電子設備及存儲介質。

背景技術

隨著智能設備的快速發展和全面普及，傳統的生活模式也發生了全新的改變。例如智能電視的應用使得人們在家庭中就可以通過智能電視實現類似于KTV場景的唱歌體驗。

目前，歌詞的背景通常是通過智能電視的顯示屏以音樂短片(Music Video，MV)形式呈現，但對于用戶而言，上述呈現方式難以使用戶親身感受歌曲所營造的氛圍，用戶體驗不佳。

發明內容

本公開實施例至少提供一種視頻處理的方法、裝置、電子設備及存儲介質。

第一方面，本公開實施例提供了一種視頻處理的方法，所述方法包括：

獲取智能設備采集的目標真實場景下的視頻畫面；

通過對所述視頻畫面進行肢體識別，確定位于所述視頻畫面中的用戶肢體的位置信息；

基于所述用戶肢體的位置信息，調整采集到所述視頻畫面。

采用上述視頻處理的方法，在獲取到智能設備采集的視頻畫面的情況下，可以通過肢體識別，確定視頻畫面中用戶肢體的位置信息，也即，用戶肢體在視頻畫面中可以是動態變化的，隨著用戶肢體的動態變化，本公開的視頻畫面可以隨之發生變化，使得用戶即使在目標真實場景下也可以體驗到不同的視頻畫面，虛實結合，提升用戶沉浸感，體驗更佳。

在一種可能的實施方式中，所述基于所述用戶肢體的位置信息，調整采集到的所述視頻畫面，包括：

基于所述用戶肢體的位置信息，對所述視頻畫面進行背景分割，確定所述視頻畫面中的背景區域的位置信息；

基于所述背景區域的位置信息，調整所述視頻畫面中的背景區域的背景特效。

這里，通過背景分離可以確定視頻畫面中背景區域的位置信息，利用這一位置信息所指示的實施位置可以動態調整視頻畫面中的背景區域的背景特效，也即，隨著用戶肢體的運動，背景區域也在發生動態變化，發生動態變化的背景區域的背景特效也隨之發生變化，用戶體驗更佳。

在一種可能的實施方式中，所述基于所述背景區域的位置信息，調整所述視頻畫面中的背景區域的背景特效，包括：

基于所述用戶肢體的位置信息，確定用戶在所述視頻畫面中的肢體動作信息；

基于所述肢體動作信息和所述背景區域的位置信息，將所述視頻畫面中的背景區域的背景特效調整為與所述肢體動作信息對應的背景特效。

這里，可以結合用戶的肢體動作信息來控制背景特效的調整，并能夠將調整的背景特效展示在背景區域的實時位置上，進一步提升了用戶的交互體驗。

在一種可能的實施方式中，所述基于所述背景區域的位置信息，調整所述視頻畫面中的背景區域的背景特效，包括：

基于所述用戶肢體的位置信息，確定所述視頻畫面中的用戶圖像尺寸；

基于所述用戶圖像尺寸和所述背景區域的位置信息，將所述視頻畫面中的背景區域的背景特效調整為與所述用戶圖像尺寸匹配規格的背景特效。