[發(fā)明專利]視頻知識(shí)點(diǎn)確定方法、裝置、電子設(shè)備和存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110697980.5
• 申請(qǐng)日: 2021-06-23
• 公開(kāi)（公告）號(hào): CN113297419A
• 公開(kāi)（公告）日: 2021-08-24
• 發(fā)明（設(shè)計(jì)）人: 于俊;李雅潔;連順;程禮磊;丁德成;譚昶;陳濤
• 申請(qǐng)（專利權(quán)）人: 南京謙萃智能科技服務(wù)有限公司
• 主分類號(hào): G06F16/735
• 分類號(hào): G06F16/735;G06F16/783
• 代理公司: 北京路浩知識(shí)產(chǎn)權(quán)代理有限公司 11002
• 代理人: 程琛

1.一種視頻知識(shí)點(diǎn)確定方法，其特征在于，包括：

對(duì)目標(biāo)視頻進(jìn)行知識(shí)點(diǎn)預(yù)測(cè)，得到初始知識(shí)點(diǎn)序列；

對(duì)所述初始知識(shí)點(diǎn)序列中每?jī)蓚€(gè)相鄰知識(shí)點(diǎn)進(jìn)行知識(shí)點(diǎn)關(guān)系校驗(yàn)，得到所述初始知識(shí)點(diǎn)序列中的待校正知識(shí)點(diǎn)，并確定所述初始知識(shí)點(diǎn)序列中與所述待校正知識(shí)點(diǎn)相鄰的上下文知識(shí)點(diǎn)；

基于與所述上下文知識(shí)點(diǎn)之間存在知識(shí)點(diǎn)關(guān)系的關(guān)聯(lián)知識(shí)點(diǎn)，對(duì)所述待校正知識(shí)點(diǎn)進(jìn)行校正，得到所述目標(biāo)視頻的知識(shí)點(diǎn)序列。

2.根據(jù)權(quán)利要求1所述的視頻知識(shí)點(diǎn)確定方法，其特征在于，所述對(duì)所述初始知識(shí)點(diǎn)序列中每?jī)蓚€(gè)相鄰知識(shí)點(diǎn)進(jìn)行知識(shí)點(diǎn)關(guān)系校驗(yàn)，得到所述初始知識(shí)點(diǎn)序列中的待校正知識(shí)點(diǎn)，包括：

基于預(yù)先設(shè)定的各知識(shí)點(diǎn)實(shí)體之間的知識(shí)點(diǎn)關(guān)系信息，獲取所述初始知識(shí)點(diǎn)序列中每?jī)蓚€(gè)相鄰知識(shí)點(diǎn)之間的知識(shí)點(diǎn)關(guān)系信息；

基于每?jī)蓚€(gè)相鄰知識(shí)點(diǎn)之間的知識(shí)點(diǎn)關(guān)系信息，確定所述初始知識(shí)點(diǎn)序列中的待校正知識(shí)點(diǎn)。

3.根據(jù)權(quán)利要求2所述的視頻知識(shí)點(diǎn)確定方法，其特征在于，所述基于每?jī)蓚€(gè)相鄰知識(shí)點(diǎn)之間的知識(shí)點(diǎn)關(guān)系信息，確定所述初始知識(shí)點(diǎn)序列中的待校正知識(shí)點(diǎn)，包括：

若任意兩個(gè)相鄰知識(shí)點(diǎn)之間的知識(shí)點(diǎn)關(guān)系信息為無(wú)關(guān)聯(lián)，或者所述任意兩個(gè)相鄰知識(shí)點(diǎn)之間的知識(shí)點(diǎn)關(guān)系信息中的關(guān)聯(lián)得分小于預(yù)設(shè)得分閾值，則從所述任意兩個(gè)相鄰知識(shí)點(diǎn)中確定出所述待校正知識(shí)點(diǎn)。

4.根據(jù)權(quán)利要求1所述的視頻知識(shí)點(diǎn)確定方法，其特征在于，所述基于與所述上下文知識(shí)點(diǎn)之間存在知識(shí)點(diǎn)關(guān)系的關(guān)聯(lián)知識(shí)點(diǎn)，對(duì)所述待校正知識(shí)點(diǎn)進(jìn)行校正，得到所述目標(biāo)視頻的知識(shí)點(diǎn)序列，包括：

基于所述上下文知識(shí)點(diǎn)中上文知識(shí)點(diǎn)的后繼知識(shí)點(diǎn)，以及所述上下文知識(shí)點(diǎn)中下文知識(shí)點(diǎn)的前驅(qū)知識(shí)點(diǎn)，對(duì)所述待校正知識(shí)點(diǎn)進(jìn)行校正，得到所述目標(biāo)視頻的知識(shí)點(diǎn)序列；

所述后繼知識(shí)點(diǎn)為與所述上文知識(shí)點(diǎn)之間存在后繼關(guān)系的關(guān)聯(lián)知識(shí)點(diǎn)，所述前驅(qū)知識(shí)點(diǎn)為與所述下文知識(shí)點(diǎn)之間存在前驅(qū)關(guān)系的關(guān)聯(lián)知識(shí)點(diǎn)。

5.根據(jù)權(quán)利要求4所述的視頻知識(shí)點(diǎn)確定方法，其特征在于，所述基于所述上下文知識(shí)點(diǎn)中上文知識(shí)點(diǎn)的后繼知識(shí)點(diǎn)，以及所述上下文知識(shí)點(diǎn)中下文知識(shí)點(diǎn)的前驅(qū)知識(shí)點(diǎn)，對(duì)所述待校正知識(shí)點(diǎn)進(jìn)行校正，包括：

若僅存在一個(gè)同時(shí)為所述后繼知識(shí)點(diǎn)和所述前驅(qū)知識(shí)點(diǎn)的重合知識(shí)點(diǎn)，則應(yīng)用所述重合知識(shí)點(diǎn)替換所述待校正知識(shí)點(diǎn)；

否則，基于各候選知識(shí)點(diǎn)與所述待校正知識(shí)點(diǎn)在所述目標(biāo)視頻中對(duì)應(yīng)視頻切片的匹配度，和/或各候選知識(shí)點(diǎn)與所述初始知識(shí)點(diǎn)序列的匹配度，從各候選知識(shí)點(diǎn)中選取知識(shí)點(diǎn)替換所述待校正知識(shí)點(diǎn)，所述各候選知識(shí)點(diǎn)包括所述后繼知識(shí)點(diǎn)以及所述前驅(qū)知識(shí)點(diǎn)。

6.根據(jù)權(quán)利要求5所述的視頻知識(shí)點(diǎn)確定方法，其特征在于，所述各候選知識(shí)點(diǎn)與所述待校正知識(shí)點(diǎn)在所述目標(biāo)視頻中對(duì)應(yīng)視頻切片的匹配度是基于如下步驟確定的：

確定所述待校正知識(shí)點(diǎn)在所述目標(biāo)視頻中對(duì)應(yīng)視頻切片的切片文本；

計(jì)算各候選知識(shí)點(diǎn)與所述切片文本之間的匹配度，作為各候選知識(shí)點(diǎn)與所述待校正知識(shí)點(diǎn)在所述目標(biāo)視頻中對(duì)應(yīng)視頻切片的匹配度。

7.根據(jù)權(quán)利要求1至6中任一項(xiàng)所述的視頻知識(shí)點(diǎn)確定方法，其特征在于，所述對(duì)目標(biāo)視頻進(jìn)行知識(shí)點(diǎn)預(yù)測(cè)，得到初始知識(shí)點(diǎn)序列，包括：

抽取所述目標(biāo)視頻的圖像幀，對(duì)所述圖像幀進(jìn)行預(yù)處理，得到所述目標(biāo)視頻的待識(shí)別幀，所述預(yù)處理包括去冗余、知識(shí)點(diǎn)無(wú)關(guān)篩除和目標(biāo)區(qū)域檢測(cè)中的至少一種；

對(duì)各待識(shí)別幀進(jìn)行文本抽取，并基于抽取所得的文本確定各待識(shí)別幀的知識(shí)點(diǎn)；

基于各待識(shí)別幀的知識(shí)點(diǎn)，構(gòu)建所述初始知識(shí)點(diǎn)序列。

8.一種視頻知識(shí)點(diǎn)確定裝置，其特征在于，包括：

預(yù)測(cè)模塊，用于對(duì)目標(biāo)視頻進(jìn)行知識(shí)點(diǎn)預(yù)測(cè)，得到初始知識(shí)點(diǎn)序列；

校驗(yàn)?zāi)K，用于對(duì)所述初始知識(shí)點(diǎn)序列中每?jī)蓚€(gè)相鄰知識(shí)點(diǎn)進(jìn)行知識(shí)點(diǎn)關(guān)系校驗(yàn)，得到所述初始知識(shí)點(diǎn)序列中的待校正知識(shí)點(diǎn)，并確定所述初始知識(shí)點(diǎn)序列中與所述待校正知識(shí)點(diǎn)相鄰的上下文知識(shí)點(diǎn)；

校正模塊，用于基于與所述上下文知識(shí)點(diǎn)之間存在知識(shí)點(diǎn)關(guān)系的關(guān)聯(lián)知識(shí)點(diǎn)，對(duì)所述待校正知識(shí)點(diǎn)進(jìn)行校正，得到所述目標(biāo)視頻的知識(shí)點(diǎn)序列。