[發(fā)明專利]一種基于視頻內(nèi)容元素的信息標(biāo)注和關(guān)聯(lián)方法、系統(tǒng)和設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 201510423765.0
• 申請(qǐng)日: 2015-07-15
• 公開（公告）號(hào): CN105072460B
• 公開（公告）日: 2018-08-07
• 發(fā)明（設(shè)計(jì)）人: 陳曉明;陳志波
• 申請(qǐng)（專利權(quán)）人: 中國(guó)科學(xué)技術(shù)大學(xué)先進(jìn)技術(shù)研究院
• 主分類號(hào): H04N21/254
• 分類號(hào): H04N21/254;H04N21/258;H04N21/858;H04N21/4728;H04N21/478;H04N21/475
• 代理公司: 合肥市長(zhǎng)遠(yuǎn)專利代理事務(wù)所(普通合伙) 34119
• 代理人: 程篤慶;黃樂瑜

1.一種基于視頻內(nèi)容元素VCE的信息標(biāo)注和關(guān)聯(lián)方法，其特征在于，應(yīng)用于包括VCE服務(wù)器和VCE客戶端的系統(tǒng)中，所述方法包括以下步驟：

所述VCE服務(wù)器接收來自所述VCE客戶端的視頻幀編號(hào)，將與所述視頻幀編號(hào)對(duì)應(yīng)的一個(gè)或多個(gè)已標(biāo)注VCE的索引信息發(fā)送給所述VCE客戶端；

所述VCE服務(wù)器接收來自所述VCE客戶端的被用戶選擇的VCE的索引信息，根據(jù)所述被用戶選擇的VCE的索引信息和所述視頻幀編號(hào)，檢索所述被用戶選擇的VCE的關(guān)聯(lián)信息，并將所述關(guān)聯(lián)信息發(fā)送給所述VCE客戶端；

所述VCE服務(wù)器接收來自所述VCE客戶端的視頻幀編號(hào)之后，還包括：

所述VCE服務(wù)器將與所述視頻幀編號(hào)對(duì)應(yīng)的一個(gè)或多個(gè)未標(biāo)注VCE的索引信息發(fā)送給所述VCE客戶端；

所述VCE客戶端根據(jù)所述未標(biāo)注VCE的索引信息，將所述未標(biāo)注VCE顯示在所述視頻幀編號(hào)對(duì)應(yīng)的視頻幀上；

所述被用戶選擇的VCE為未標(biāo)注VCE，所述VCE服務(wù)器接收來自所述VCE客戶端的未標(biāo)注VCE的索引信息之后，還包括：

所述VCE服務(wù)器根據(jù)所述被用戶選擇的VCE的特征信息，判斷VCE數(shù)據(jù)庫(kù)中是否存在與所述被用戶選擇的VCE匹配的已標(biāo)注VCE的數(shù)據(jù)結(jié)構(gòu)，如果是，則從與所述被用戶選擇的VCE匹配的已標(biāo)注VCE的數(shù)據(jù)結(jié)構(gòu)中獲取描述信息，將所述描述信息發(fā)送給所述VCE客戶端；否則，根據(jù)所述被用戶選擇的VCE的特征信息，使用外部搜索引擎進(jìn)行搜索，將搜索到的網(wǎng)頁(yè)集合的鏈接發(fā)送給所述VCE客戶端，接收所述VCE客戶端返回的用戶確認(rèn)的網(wǎng)頁(yè)集合的鏈接，根據(jù)所述用戶確認(rèn)的網(wǎng)頁(yè)集合的鏈接，生成所述被用戶選擇的VCE的數(shù)據(jù)結(jié)構(gòu)，將所述被用戶選擇的VCE的數(shù)據(jù)結(jié)構(gòu)存儲(chǔ)到所述VCE數(shù)據(jù)庫(kù)中。

2.如權(quán)利要求1所述的方法，其特征在于，所述VCE服務(wù)器接收來自所述VCE客戶端的視頻幀編號(hào)之后，還包括：

所述VCE服務(wù)器判斷所述視頻幀編號(hào)對(duì)應(yīng)的視頻幀內(nèi)是否存在已標(biāo)注VCE；

所述VCE服務(wù)器將與所述視頻幀編號(hào)對(duì)應(yīng)的一個(gè)或多個(gè)已標(biāo)注VCE的索引信息發(fā)送給所述VCE客戶端，具體為：

當(dāng)所述VCE服務(wù)器判斷出所述視頻幀編號(hào)對(duì)應(yīng)的視頻幀內(nèi)存在已標(biāo)注VCE時(shí)，所述VCE服務(wù)器將所述已標(biāo)注VCE的索引信息發(fā)送給所述VCE客戶端。

3.如權(quán)利要求1所述的方法，其特征在于，所述VCE服務(wù)器將與所述視頻幀編號(hào)對(duì)應(yīng)的一個(gè)或多個(gè)已標(biāo)注VCE的索引信息發(fā)送給所述VCE客戶端之后，還包括：所述VCE客戶端根據(jù)所述已標(biāo)注VCE的索引信息，將所述已標(biāo)注VCE顯示在所述視頻幀編號(hào)對(duì)應(yīng)的視頻幀上。

4.如權(quán)利要求3所述的方法，其特征在于，所述已標(biāo)注VCE為可視VCE，所述已標(biāo)注VCE的索引信息為可視VCE的位置信息；所述VCE客戶端根據(jù)所述已標(biāo)注VCE的索引信息，將所述已標(biāo)注VCE顯示在所述視頻幀編號(hào)對(duì)應(yīng)的視頻幀上，具體為：所述VCE客戶端根據(jù)所述可視VCE的位置信息，將所述可視VCE的輪廓進(jìn)行高亮顯示在所述視頻幀上。

5.如權(quán)利要求4所述的方法，其特征在于，所述已標(biāo)注VCE的位置信息包括與所述已標(biāo)注VCE對(duì)應(yīng)的邊界框的水平坐標(biāo)、垂直坐標(biāo)、高度和寬度。

6.如權(quán)利要求3所述的方法，其特征在于，所述已標(biāo)注VCE為抽象VCE，所述已標(biāo)注VCE的索引信息為抽象VCE的名稱；所述VCE客戶端根據(jù)所述已標(biāo)注VCE的索引信息，將所述已標(biāo)注VCE顯示在所述視頻幀編號(hào)對(duì)應(yīng)的視頻幀上，具體為：所述VCE客戶端根據(jù)所述抽象VCE的名稱，將所述抽象VCE以文字框的形式顯示在所述視頻幀的背景上。

7.如權(quán)利要求1所述的方法，其特征在于，所述VCE服務(wù)器將所述關(guān)聯(lián)信息發(fā)送給所述VCE客戶端之后，還包括：所述VCE客戶端對(duì)所述關(guān)聯(lián)信息進(jìn)行展示。