[發明專利]一種在視頻中查詢對象的方法、裝置和設備

在審

• 申請號: 201711340586.6
• 申請日: 2017-12-14
• 公開（公告）號: CN109963164A
• 公開（公告）日: 2019-07-02
• 發明（設計）人: 陳小帥;張揚
• 申請（專利權）人: 北京搜狗科技發展有限公司
• 主分類號: H04N21/232
• 分類號: H04N21/232;H04N21/84;H04N21/845
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 劉佳;王寶筠

1.一種在視頻中查詢對象的方法，其特征在于，包括：

接收攜帶有查詢信息的用戶查詢請求；

查找與所述查詢信息匹配的目標描述信息，其中，所述目標描述信息是預先為目標視頻中的目標對象設置的描述信息；

以所述目標對象形成查詢結果，為所述用戶查詢請求返回所述查詢結果；

其中，所述目標描述信息是在包括所述目標對象的視頻數據輸入到機器學習模型的情況下所述機器學習模型輸出的信息，所述機器學習模型是已基于包括歷史視頻中的歷史對象的視頻數據與所述歷史對象的已知描述信息之間的對應關系進行了訓練。

2.根據權利要求1所述的方法，其特征在于，所述已知描述信息是基于所述歷史對象在所述歷史視頻中對應的字幕和/或所述歷史對象在所述歷史視頻中對應的片段主題而形成的。

3.根據權利要求1所述的方法，其特征在于，所述已知描述信息包括以下信息中的任意一項或多項：時間信息，地點信息，類型信息，人物信息；

所述時間信息表示所述歷史對象所描述的時間；

所述地點信息表示所述歷史對象所描述的地點；

所述類型信息表示所述歷史對象所描述的事件類型；

所述人物信息表示所述歷史對象所描述的人物。

4.根據權利要求1～3任意一項所述的方法，其特征在于，所述目標對象為所述目標視頻中的視頻幀圖像，所述歷史對象為所述歷史視頻中的視頻幀圖像；

或，

所述目標對象為所述目標視頻中的視頻片段，所述歷史對象為所述歷史視頻中的視頻片段。

5.根據權利要求4所述的方法，其特征在于，所述包括所述目標對象的視頻數據具體為所述目標視頻，所述包括歷史視頻中的歷史對象的視頻數據具體為所述歷史視頻；

所述機器學習模型具體是已基于所述歷史視頻與所述歷史對象、所述已知描述信息之間的對應關系進行了訓練；

在所述目標視頻輸入到所述機器學習模型的情況下，所述機器學習模型具體輸出所述目標對象和所述目標描述信息。

6.根據權利要求1所述的方法，其特征在于，所述查詢結果具體為所述目標對象本身。

7.根據權利要求1所述的方法，其特征在于，所述以所述目標對象形成查詢結果，為所述用戶查詢請求返回所述查詢結果，包括：

若所述目標對象包括多個視頻幀圖像，按照各個所述視頻幀圖像的目標描述信息與所述查詢信息之間匹配的相似程度，對各個所述視頻幀圖像進行排序，得到各個所述視頻幀圖像的相似性排序；

按照所述相似性排序，以各個所述視頻幀圖像構建動圖序列；

以所述動圖序列作為所述查詢結果，為所述用戶查詢請求返回所述查詢結果。

8.根據權利要求1所述的方法，其特征在于，所述以所述目標對象形成查詢結果，為所述用戶查詢請求返回所述查詢結果，包括：

若所述目標對象為視頻片段，以所述目標視頻及所述視頻片段的起始點標識形成所述查詢結果；

為所述用戶查詢請求返回所述查詢結果；

其中，所述起始點標識用于在所述目標視頻中提示所述視頻片段的起始點位置。

9.根據權利要求8所述的方法，其特征在于，所述查詢結果具體是以所述目標視頻、所述視頻片段的起始點標識和所述視頻片段的結束點標識形成的；

其中，所述結束點標識，用于在所述目標視頻中提示所述視頻片段的結束點位置。