[發明專利]與視頻用戶互動的方法和裝置

在審

• 申請號: 202010799209.4
• 申請日: 2020-08-11
• 公開（公告）號: CN111741362A
• 公開（公告）日: 2020-10-02
• 發明（設計）人: 李陽;杜思軍;高雷;李春燕;岳軍鋒
• 申請（專利權）人: 恒大新能源汽車投資控股集團有限公司
• 主分類號: H04N21/442
• 分類號: H04N21/442;H04N21/4788;H04N21/84
• 代理公司: 北京國昊天誠知識產權代理有限公司 11315
• 代理人: 朱文杰

1.一種與視頻用戶互動的方法，包括：

獲取當前所播放視頻內容的屬性信息，所述屬性信息包括所述視頻內容對應的情景標簽，和/或所述視頻內容對應的歷史觀看用戶的行為反應；

根據所述視頻內容的屬性信息，預測觀看所述視頻內容的當前觀看用戶的行為反應；

根據預測的所述當前觀看用戶的行為反應，輸出第一互動內容。

2.根據權利要求1所述的方法，其中，所述獲取當前所播放視頻內容的屬性信息，包括：

根據當前視頻播放進度，從預設的視頻數據庫中，查找與該視頻播放進度對應的情景標簽，和/或歷史觀看用戶的行為反應；所述視頻數據庫中預存有多個視頻在多個視頻播放進度所對應的情景標簽，和/或歷史觀看用戶的行為反應。

3.根據權利要求2所述的方法，其中，所述方法還包括：

從彈幕視頻網站提取出相同或相似彈幕的焦點視頻片段；

對所述相同或相似彈幕的焦點視頻片段，采用經深度學習獲取的多媒體分類模型進行分類，得到所述焦點視頻片段對應的情景標簽；

基于所述焦點視頻片段對應的視頻播放進度及對應的情景標簽構建所述視頻數據庫。

4.根據權利要求2所述的方法，其中，所述方法還包括：

從彈幕視頻網站提取出現相同或相似彈幕的焦點視頻片段；

對所述相同或相似彈幕的焦點視頻片段中的彈幕內容，采用經深度學習獲取的情感分類模型進行分類，得到所述焦點視頻片段對應的情感類別；

根據所述焦點視頻片段對應的情感類別，確定所述焦點視頻片段對應的歷史觀看用戶的行為反應；

基于所述焦點視頻片段對應的視頻播放進度，以及對應的歷史觀看用戶的行為反應構建所述視頻數據庫。

5.根據權利要求2所述的方法，其中，所述方法還包括：

獲取用戶觀看視頻過程中做出行為反應的視頻片段作為焦點視頻片段；

對所述焦點視頻片段，采用經深度學習獲取的多媒體分類模型進行分類，得到所述焦點視頻片段對應的情景標簽；

基于所述焦點視頻片段對應的視頻播放進度及對應的情景標簽構建所述視頻數據庫。

6.根據權利要求2所述的方法，其中，所述方法還包括：

獲取用戶觀看視頻過程中做出行為反應的視頻片段作為焦點視頻片段；

對所述焦點視頻片段對應的用戶的行為反應，采用經深度學習獲取的情感分類模型進行分類，得到所述焦點視頻片段對應的情感類別；

根據所述焦點視頻片段對應的情感類別，確定所述焦點視頻片段對應的歷史觀看用戶的行為反應；

基于所述焦點視頻片段對應的視頻播放進度，以及對應的歷史觀看用戶的行為反應構建所述視頻數據庫。

7.根據權利要求2所述的方法，其中，所述方法還包括：

獲取視頻樣本，采用經深度學習獲取的多媒體分類和情感分類的聯合模型對視頻樣本中的視頻片段進行分類，得到所述視頻片段對應的情景標簽和情感類別；

根據所述視頻片段對應的情感類別，確定所述視頻片段對應的歷史觀看用戶的行為反應；

基于所述視頻片段對應的視頻播放進度、所述視頻片段對應的情景標簽以及對應的歷史觀看用戶的行為反應構建所述視頻數據庫。

8.根據權利要求1-7任一項所述的方法，其中，所述方法還包括：

在所述當前觀看用戶做出行為反應后，輸出附和所述當前觀看用戶行為反應的第二互動內容。

9.根據權利要求8所述的方法，其中，用戶的行為反應包括：通過語音、表情、動作中的至少一種方式所做出的行為反應；所述第一互動內容、所述第二互動內容包括：通過語音或者圖像形式輸出的互動內容。

10.一種與視頻用戶互動的裝置，包括：

獲取模塊，獲取當前所播放視頻內容的屬性信息，所述屬性信息包括所述視頻內容對應的情景標簽，和/或所述視頻內容對應的歷史觀看用戶的行為反應；

預測模塊，根據所述視頻內容的屬性信息，預測觀看所述視頻內容的當前觀看用戶的行為反應；

第一輸出模塊，根據預測的所述當前觀看用戶的行為反應，輸出第一互動內容。