[發(fā)明專利]一種高清視頻內(nèi)容檢索方法及系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201110180177.0
• 申請(qǐng)日: 2011-06-30
• 公開（公告）號(hào): CN102222111A
• 公開（公告）日: 2011-10-19
• 發(fā)明（設(shè)計(jì)）人: 馬敬銳;于飛;姜瑋;杜華鵬
• 申請(qǐng)（專利權(quán)）人: 山東神戎電子股份有限公司
• 主分類號(hào): G06F17/30
• 分類號(hào): G06F17/30;G06T7/20
• 代理公司: 濟(jì)南舜源專利事務(wù)所有限公司 37205
• 代理人: 閆曉燕

1.一種高清視頻內(nèi)容檢索方法，其特征在于，包括以下步驟：

（1）高清視頻內(nèi)容初步劃分為群體信息幀和個(gè)體信息幀，并將對(duì)應(yīng)的視頻幀信息保存建立視頻索引文件；

（2）構(gòu)造高層語(yǔ)義庫(kù)，利用現(xiàn)有知識(shí)，建立包含有多種事件、多個(gè)目標(biāo)信息的語(yǔ)義庫(kù)；

（3）根據(jù)高層語(yǔ)義庫(kù)，對(duì)個(gè)體信息幀進(jìn)行視頻檢索，建立個(gè)體信息內(nèi)容索引文件；

（4）根據(jù)高層語(yǔ)義庫(kù)，對(duì)群體信息幀進(jìn)行視頻檢索，建立群體信息內(nèi)容索引文件；

（5）將個(gè)體信息內(nèi)容索引文件和群體信息內(nèi)容索引文件進(jìn)行融合，形成針對(duì)整個(gè)視頻內(nèi)容的索引文件。

2.根據(jù)權(quán)利要求1所述高清視頻內(nèi)容檢索方法，其特征在于，所述步驟（1）包括如下步驟：

（1.1）設(shè)定一個(gè)運(yùn)動(dòng)目標(biāo)閥值；

（1.2）對(duì)視頻內(nèi)容中各個(gè)視頻幀的運(yùn)動(dòng)目標(biāo)數(shù)量進(jìn)行分析，低于目標(biāo)閥值的視頻幀為個(gè)體信息視頻幀，高于目標(biāo)閥值的視頻幀為群體信息視頻幀；

（1.3）將劃分后的個(gè)體信息視頻幀、群體信息視頻幀分別與相關(guān)聯(lián)的視頻幀信息建立對(duì)應(yīng)的索引文件并保存。

3.根據(jù)權(quán)利要求2所述高清視頻內(nèi)容檢索方法，其特征在于，所述步驟（1.3）中的視頻幀信息包括視頻幀幀號(hào)和視頻幀幀時(shí)間。

4.根據(jù)權(quán)利要求1所述高清視頻內(nèi)容檢索方法，其特征在于，所述高層語(yǔ)義庫(kù)中的規(guī)則包括個(gè)體行為事件和群體行為事件的高層語(yǔ)義描述。

5.根據(jù)權(quán)利要求1所述高清視頻內(nèi)容檢索方法，其特征在于，所述步驟（3）包括：

（3.1）對(duì)視頻畫面中的目標(biāo)使用邊緣檢測(cè)算子獲得運(yùn)動(dòng)目標(biāo)的形狀信息；

（3.2）使用彩色直方圖提取目標(biāo)的顏色信息，將彩色圖像轉(zhuǎn)換為灰度圖像；

（3.3）使用灰度直方圖的特征提取目標(biāo)的紋理信息相關(guān)信息；

（3.4）將前面提取出的形狀、顏色和紋理相關(guān)信息分別使用構(gòu)建的高層語(yǔ)義庫(kù)進(jìn)行判斷，然后將所得到的判斷結(jié)果進(jìn)行與運(yùn)算，若結(jié)果為真則可判定是感興趣的信息出現(xiàn)。

6.根據(jù)權(quán)利要求1所述高清視頻內(nèi)容檢索方法，其特征在于，所述步驟（4）包括：

（4.1）首先提取群體信息，當(dāng)在某一區(qū)域中出現(xiàn)多個(gè)目標(biāo)聚集時(shí)，可以將這多個(gè)目標(biāo)視為一個(gè)較大的單一目標(biāo)，可對(duì)其使用運(yùn)動(dòng)軌跡提取算法得到群體的運(yùn)動(dòng)軌跡，利用目標(biāo)的大小特征和聚集區(qū)域大小來(lái)估計(jì)目標(biāo)的密度并監(jiān)測(cè)密度的變化，而后對(duì)其使用圖像分割方法分割成單個(gè)目標(biāo)；

（4.2）對(duì)單個(gè)目標(biāo)使用邊緣檢測(cè)算子獲得運(yùn)動(dòng)目標(biāo)的形狀信息，使用彩色直方圖提取目標(biāo)的顏色信息，將彩色圖像轉(zhuǎn)換為灰度圖像，使用灰度直方圖的特征提取目標(biāo)的紋理信息相關(guān)信息，將前面提取出的形狀、顏色和紋理相關(guān)信息分別使用構(gòu)建的高層語(yǔ)義庫(kù)進(jìn)行判斷，然后將所得到的判斷結(jié)果進(jìn)行與運(yùn)算，若結(jié)果為真則可判定是感興趣的信息出現(xiàn)；

（4.3）將以上處理得到的感興趣的信息使用構(gòu)建的相關(guān)事件的高層語(yǔ)義庫(kù)進(jìn)行判斷，將判斷得到的結(jié)果進(jìn)行與運(yùn)算，若為真，則群體事件發(fā)生。

7.根據(jù)權(quán)利要求1所述高清視頻內(nèi)容檢索方法，其特征在于，所述步驟（5）包括：

（5.1）將個(gè)體信息幀形成的索引文件以時(shí)間的先后順序插入到群體信息幀的索引中形成初步的整體索引文件；

（5.2）然后以檢測(cè)同一視頻幀號(hào)的索引數(shù)據(jù)是否包含有相同的信息，如有則刪除冗余的信息，形成最終的視頻內(nèi)容索引文件。

8.一種高清視頻內(nèi)容檢索系統(tǒng)，其特征在于，包括：

高清攝像機(jī)控制模塊：負(fù)責(zé)高清攝像機(jī)的運(yùn)行控制，對(duì)高清攝像機(jī)進(jìn)行實(shí)時(shí)的參數(shù)設(shè)置和控制，以得到攝像機(jī)最佳的效果，能夠和系統(tǒng)控制模塊進(jìn)行交互，執(zhí)行系統(tǒng)控制模塊下發(fā)的指令并反饋執(zhí)行的結(jié)果，該模塊對(duì)攝像機(jī)的參數(shù)設(shè)置包括高清攝像機(jī)的光圈參數(shù)設(shè)置、視場(chǎng)參數(shù)設(shè)置、色彩模式設(shè)置、碼流格式設(shè)置、編碼大小設(shè)置、幀率設(shè)置、位率設(shè)置、圖像品質(zhì)設(shè)置、OSD顯示設(shè)置、網(wǎng)絡(luò)參數(shù)設(shè)置；

系統(tǒng)控制模塊：負(fù)責(zé)整個(gè)系統(tǒng)的整體運(yùn)行，能夠向高清攝像機(jī)控制模塊、視頻內(nèi)容分析模塊、視頻內(nèi)容檢索模塊發(fā)送指令并接它們對(duì)指令執(zhí)行后的反饋；

存儲(chǔ)模塊：負(fù)責(zé)保存高清攝像機(jī)獲得的視頻數(shù)據(jù)和內(nèi)容索引以及檢索結(jié)果，并在檢索時(shí)將內(nèi)容索引和視頻數(shù)據(jù)提供給視頻內(nèi)容檢索模塊；

視頻內(nèi)容分析模塊：對(duì)高清攝像機(jī)所獲得的視頻內(nèi)容進(jìn)行分析，形成內(nèi)容索引文件，并對(duì)分析過(guò)程中的參數(shù)進(jìn)行設(shè)定，比如運(yùn)動(dòng)目標(biāo)閥值的設(shè)定、語(yǔ)義庫(kù)的設(shè)定；

視頻內(nèi)容檢索模塊：根據(jù)設(shè)定的檢索條件對(duì)視頻內(nèi)容分析模塊形成的索引文件進(jìn)行檢索，并將檢索的結(jié)果以及相關(guān)聯(lián)的視頻內(nèi)容發(fā)送到顯示模塊進(jìn)行顯示；

顯示模塊：負(fù)責(zé)將檢索模塊的檢索結(jié)果通過(guò)顯示終端展示給客戶。