[發(fā)明專利]視頻POI識別方法、裝置及電子設備有效
| 申請?zhí)枺?/td> | 201910921292.5 | 申請日： | 2019-09-27 |
| 公開（公告）號： | CN110674349B | 公開（公告）日： | 2023-03-14 |
| 發(fā)明（設計）人： | 李偉健;王長虎 | 申請（專利權(quán)）人： | 北京字節(jié)跳動網(wǎng)絡技術有限公司 |
| 主分類號： | G06F16/75 | 分類號： | G06F16/75;G06F16/787;H04W4/021 |
| 代理公司： | 北京風雅頌專利代理有限公司 11403 | 代理人： | 安凱 |
| 地址： | 100041 北京市石景山區(qū)*** | 國省代碼： | 北京;11 |
| 權(quán)利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 視頻 poi 識別 方法 裝置 電子設備 | ||
1.一種視頻POI識別方法，其特征在于，包括：
獲取用戶上傳的目標視頻的視頻標識；
基于所述視頻標識，查找用戶對于所述目標視頻設定的一個或多個自定義POI標簽；
基于所述一個或多個自定義POI標簽，確定所述目標視頻初始的第一POI標簽；
利用預設的分類模型中的POI分類器以及預設的多個分類標簽，對所述目標視頻進行POI學習，得到所述目標視頻的第二POI標簽；
對所述第一POI標簽和所述第二POI標簽的標記的內(nèi)容是否為同一內(nèi)容進行判斷，得到POI標簽判定結(jié)果；
基于所述判定結(jié)果，確定所述第一POI標簽的設定是否正確，包括：基于所述判定結(jié)果，確定所述第一POI標簽與所述第二POI標簽是否屬于同一類型的POI標簽；若是，則認定所述第一POI標簽的設定正確；
當認定所述第一POI標簽的設定不正確之后，將所述第一POI標簽修改為所述第二POI標簽。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述一個或多個自定義POI標簽，確定所述目標視頻初始的第一POI標簽，包括：
對所述一個或多個自定義POI標簽進行聚類分析；基于聚類分析的結(jié)果，確定所述一個或多個自定義POI標簽所包含的POI類型；
基于所述POI類型，確定所述目標視頻初始的第一POI標簽。
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述利用預設的分類模型中的POI分類器以及預設的多個分類標簽，對所述目標視頻進行POI學習，包括：
對所述目標視頻中包含的視頻幀進行解析，得到多個視頻幀；利用所述分類模型，多所述多個視頻幀進行特征提取，得到多個特征矩陣；
對所述特征矩陣進行分類計算，確定所述目標視頻的第一分類標簽；
基于所述第一分類標簽，確定所述目標視頻的第二POI標簽。
4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述基于所述第一分類標簽，確定所述目標視頻的第二POI標簽，包括：
對所述目標視頻中包含的音頻信息進行提取，得到音頻文件；利用所述分類模型，將所述音頻文件轉(zhuǎn)換為文本文件；
對所述文本文件中的內(nèi)容進行分類預測，得到第二分類標簽；
基于所述第一分類標簽和所述第二分類標簽，確定所述目標視頻的第二POI標簽。
5.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述基于所述第一分類標簽，確定所述目標視頻的第二POI標簽，包括：
獲取所述目標視頻的描述信息；
利用所述分類模型，對所述描述信息進行分類預測，得到第三分類標簽；
基于所述第一分類標簽和所述第三分類標簽，確定所述目標視頻的第二POI標簽。
6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對所述第一POI標簽和所述第二POI標簽的標記的內(nèi)容是否為同一內(nèi)容進行判斷，包括：
對所述第一POI標簽和所述第二POI標簽標記的內(nèi)容進行聚類計算，得到聚類結(jié)果；
基于所述聚類結(jié)果，判斷對所述第一POI標簽和所述第二POI標簽的標記的內(nèi)容是否為同一內(nèi)容。
該專利技術資料僅供研究查看技術是否侵權(quán)等信息，商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于北京字節(jié)跳動網(wǎng)絡技術有限公司，未經(jīng)北京字節(jié)跳動網(wǎng)絡技術有限公司許可，擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術合作，請聯(lián)系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201910921292.5/1.html，轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
