[發明專利]交互式視頻播放的方法和系統

有效

• 申請號: 202010901425.5
• 申請日: 2020-08-31
• 公開（公告）號: CN111970568B
• 公開（公告）日: 2021-07-16
• 發明（設計）人: 樊星
• 申請（專利權）人: 上海松鼠課堂人工智能科技有限公司
• 主分類號: H04N21/442
• 分類號: H04N21/442;H04N21/472;H04N21/485;H04N13/239;G10L21/0208;G10L17/00;G06F3/01
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明提供了交互式視頻播放的方法和系統，其通過對用戶進行拍攝和錄音，以此獲得來自用戶的動作特征信息和語音特征信息，并以該動作特征信息和該語音特征信息作為用戶與視頻播放之間的原始互動信息，從預設指令庫中摘選匹配的視頻播放控制指令來調整當前視頻的播放狀態，并且向用戶反饋當前視頻的播放參數實時調整狀態，從而提高用戶與視頻播放之間的互動自動化和互動智能化程度，以及改善用戶觀看視頻的體驗性。

技術領域

本發明涉及智能教育的技術領域，特別涉及交互式視頻播放的方法和系統。

背景技術

智能教學在實踐過程中通常需要借助播放視頻在完成相應的知識數據教授，而用戶在觀看視頻過程中時常需要進行相應的筆記記錄。但是智能教學所涉及的視頻通常是按照預定視頻模式來制作的，這使得該視頻并不能滿足不同用戶個體的觀看需求，而用戶并不能一直進行手動操作來調節來實現相應視頻交互式播放，這嚴重地降低了視頻播放的自動化和智能化交互程度，以及降低了用戶觀看視頻的體驗性。

發明內容

針對現有技術存在的缺陷，本發明提供交互式視頻播放的方法和系統，其包括對用戶進行拍攝和錄音，從而獲得該用戶在觀看視頻過程中的動態影像信息和聲音信息，并對該動態影像信息和該聲音信息進行降噪預處理，再從經過該降噪預處理后的動態影像信息和聲音信息中分別提取得到該用戶的動作特征信息和語音特征信息，并根據該動作特征信息或該語音特征信息，生成相應的視頻播放控制指令，最后根據該視頻播放控制指令，調整當前視頻的播放參數，同時向該用戶反饋當前視頻的播放參數實時調整狀態；可見，該交互式視頻播放的方法和系統通過對用戶進行拍攝和錄音，以此獲得來自用戶的動作特征信息和語音特征信息，并以該動作特征信息和該語音特征信息作為用戶與視頻播放之間的原始互動信息，從預設指令庫中摘選匹配的視頻播放控制指令來調整當前視頻的播放狀態，并且向用戶反饋當前視頻的播放參數實時調整狀態，從而提高用戶與視頻播放之間的互動自動化和互動智能化程度，以及改善用戶觀看視頻的體驗性。

本發明提供交互式視頻播放的方法，其特征在于，其包括如下步驟：

步驟S1，對用戶進行拍攝和錄音，從而獲得所述用戶在觀看視頻過程中的動態影像信息和聲音信息，并對所述動態影像信息和所述聲音信息進行降噪預處理；

步驟S2，從經過所述降噪預處理后的動態影像信息和聲音信息中分別提取得到所述用戶的動作特征信息和語音特征信息，并根據所述動作特征信息或所述語音特征信息，生成相應的視頻播放控制指令；

步驟S3，根據所述視頻播放控制指令，調整當前視頻的播放參數，同時向所述用戶反饋當前視頻的播放參數實時調整狀態；

進一步，在所述步驟S1中，對用戶進行拍攝和錄音，從而獲得所述用戶在觀看視頻過程中的動態影像信息和聲音信息，并對所述動態影像信息和所述聲音信息進行降噪預處理具體包括，

步驟S101，對所述用戶進行雙目拍攝，從而獲得所述用戶在觀看視頻過程中的第一視角影像和第二視角影像，并根據所述第一視角影像和所述第二視角影像之間的視差信息，生成關于所述用戶在觀看視頻過程中三維動態影像；

步驟S102，采用麥克風陣列在不同方位對所述用戶進行聲音采集，從而獲得所述用戶在觀看視頻過程中的立體環繞聲音信息；

步驟S103，對所述三維動態影像進行環境背景圖像像素虛化處理，從而降低所述三維動態影像的環境背景圖像噪聲成分，以及對所述立體環繞聲音信息進行背景雜散噪聲過濾處理，從而提高所述立體環繞聲音信息的信噪比；

進一步，在所述步驟S1中，對所述動態影像信息和所述聲音信息進行降噪預處理具體包括，

第一、將所述動態影像信息切分為N段等時長的子影像信息；

第二、獲取所述N段等時長的子影像信息中的每一段子影像信息對應的圖像信號，并根據下面公式(1)確定每一段子影像信息的圖像信號中的噪聲信號權值，