[發(fā)明專利]選擇性注意線索指導的不良主播檢測方法、裝置及電子設(shè)備有效
| 申請?zhí)枺?/td> | 201811397237.2 | 申請日： | 2018-11-22 |
| 公開（公告）號： | CN109492124B | 公開（公告）日： | 2022-03-25 |
| 發(fā)明（設(shè)計）人： | 張菁;王立元;李晨豪;張輝;李嘉鋒;卓力 | 申請（專利權(quán)）人： | 北京工業(yè)大學 |
| 主分類號： | G06F16/60 | 分類號： | G06F16/60 |
| 代理公司： | 北京超凡志成知識產(chǎn)權(quán)代理事務所(普通合伙) 11371 | 代理人： | 許洪潔 |
| 地址： | 100000 *** | 國省代碼： | 北京;11 |
| 權(quán)利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關(guān)鍵詞： | 選擇性 注意 線索 指導 不良 檢測 方法 裝置 電子設(shè)備 | ||
1.一種選擇性注意線索指導的不良主播檢測方法，其特征在于，包括：
獲取待測直播音視頻；
基于所述待測直播音視頻生成第二耦合特征；
計算所述第二耦合特征與預存的各類型的影音數(shù)據(jù)對應的第一耦合特征之間的漢明距離，其中，所述第二耦合特征采用與所述第一耦合特征相同的方式生成；
將與所述第二耦合特征的漢明距離小于預設(shè)閾值的第一耦合特征所對應的影音數(shù)據(jù)的類型判定為所述待測直播音視頻的類型，并輸出；
所述第一耦合特征通過以下步驟生成：
針對預存的每種類型的影音數(shù)據(jù)，采用設(shè)定的直播檢測模型的第一子網(wǎng)絡對該類型的影音數(shù)據(jù)進行特征提取，
以獲取與該類型的影音數(shù)據(jù)對應的第一子特征；
采用所述直播檢測模型的第二子網(wǎng)絡對該類型的影音數(shù)據(jù)進行特征提取，以獲取與該類型的影音數(shù)據(jù)對應的第二子特征；以及
采用所述直播檢測模型的第三子網(wǎng)絡對該類型的影音數(shù)據(jù)進行特征提取，以獲取與該類型的影音數(shù)據(jù)對應的第三子特征；
對同一類型的影音數(shù)據(jù)對應的所述第一子特征、所述第二子特征和所述第三子特征進行特征耦合處理，以生成第一耦合特征；
所述第二耦合特征通過以下步驟生成：
將所述待測直播音視頻輸入到所述直播檢測模型；
采用所述第一子網(wǎng)絡對所述待測直播音視進行特征提取，以獲取第一待測特征；
采用所述第二子網(wǎng)絡對所述待測直播音視進行特征提取，以獲取第二待測特征；以及
采用所述第三子網(wǎng)絡對所述待測直播音視進行特征提取，以獲取第三待測特征；
對所述第一待測特征、所述第二待測特征和所述第三待測特征進行特征耦合處理，以生成第二耦合特征。
2.根據(jù)權(quán)利要求1所述的選擇性注意線索指導的不良主播檢測方法，其特征在于，
對同一類型的影音數(shù)據(jù)對應的所述第一子特征、所述第二子特征和所述第三子特征進行特征耦合處理的步驟，包括：
采用所述直播檢測模型的注意力機制，對同一類型的影音數(shù)據(jù)對應的所述第一子特征、所述第二子特征和所述第三子特征進行特征耦合處理；
對所述第一待測特征、所述第二待測特征和所述第三待測特征進行特征耦合處理的步驟，包括：
采用所述直播檢測模型的注意力機制，對所述第一待測特征、所述第二待測特征和所述第三待測特征進行特征耦合處理。
3.根據(jù)權(quán)利要求2所述的選擇性注意線索指導的不良主播檢測方法，其特征在于，
采用所述直播檢測模型的注意力機制，對同一類型的影音數(shù)據(jù)對應的所述第一子特征、所述第二子特征和所述第三子特征進行特征耦合處理的步驟，包括：
采用所述直播檢測模型的注意力機制，基于同一類型的影音數(shù)據(jù)對應的所述第一子特征生成第一注意力線索，基于同一類型的影音數(shù)據(jù)對應的所述第二子特征生成第二注意力線索，基于同一類型的影音數(shù)據(jù)對應的所述第三子特征生成第三注意力線索；
基于所述第一注意力線索、所述第二注意力線索以及所述第三注意力線索進行特征耦合。
4.根據(jù)權(quán)利要求1所述的選擇性注意線索指導的不良主播檢測方法，其特征在于，
在生成第一耦合特征之后，所述方法還包括：對不同類型的影音數(shù)據(jù)對應的第一耦合特征進行運算，將運算后的各第一耦合特征進行存儲以得到哈希特征庫；
計算所述第二耦合特征與預存的各類型的影音數(shù)據(jù)對應的第一耦合特征之間的漢明距離的步驟，包括：
獲取所述哈希特征庫中運算后的各第一耦合特征；
對所述第二耦合特征進行運算，獲得運算后的第二耦合特征，對所述第二耦合特征進行的運算與對所述第一耦合特征進行的運算一致；
計算運算后的第二耦合特征與運算后的各第一耦合特征之間的漢明距離，以獲得所述第二耦合特征與各第一耦合特征之間的漢明距離。
5.根據(jù)權(quán)利要求1所述的選擇性注意線索指導的不良主播檢測方法，其特征在于，所述第一子特征和所述第一待測特征為視頻特征，所述第二子特征和所述第二待測特征為音頻特征，所述第三子特征和所述第三待測特征為文本特征。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息，商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于北京工業(yè)大學，未經(jīng)北京工業(yè)大學許可，擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作，請聯(lián)系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201811397237.2/1.html，轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
