[發(fā)明專利]主講人跟蹤方法及系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201710649997.7
• 申請(qǐng)日: 2017-08-02
• 公開（公告）號(hào): CN107452018B
• 公開（公告）日: 2020-04-07
• 發(fā)明（設(shè)計(jì)）人: 居安康
• 申請(qǐng)（專利權(quán)）人: 北京翰博爾信息技術(shù)股份有限公司
• 主分類號(hào): G06T7/215
• 分類號(hào): G06T7/215;G06T7/90;H04N7/18
• 代理公司: 北京超凡志成知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11371
• 代理人: 梁香美

本發(fā)明實(shí)施例提出一種主講人跟蹤方法及系統(tǒng)，涉及計(jì)算機(jī)視覺技術(shù)領(lǐng)域。該主講人跟蹤系統(tǒng)獲取主講人定位攝像機(jī)拍攝的主講人視頻圖像及板書定位攝像機(jī)拍攝的板書視頻圖像，對(duì)主講人視頻圖像及板書視頻圖像進(jìn)行運(yùn)動(dòng)目標(biāo)檢測以獲取主講人視頻圖像中的運(yùn)動(dòng)目標(biāo)和板書視頻圖像中的運(yùn)動(dòng)目標(biāo)，計(jì)算主講人視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息及板書視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息，對(duì)該板書視頻圖像中的運(yùn)動(dòng)目標(biāo)進(jìn)行膚色檢測，以生成檢測結(jié)果，依據(jù)主講人視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息、板書視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息及檢測結(jié)果確定主講人的跟蹤策略。該主講人跟蹤系統(tǒng)數(shù)據(jù)處理快，能自動(dòng)對(duì)主講人進(jìn)行定位、跟蹤和拍攝，具有較好的跟蹤拍攝效果。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)視覺技術(shù)領(lǐng)域，具體而言，涉及一種主講人跟蹤方法及系統(tǒng)。

背景技術(shù)

計(jì)算機(jī)多媒體技術(shù)、網(wǎng)絡(luò)技術(shù)等新技術(shù)的不斷更新和發(fā)展，基于視頻內(nèi)容分析的視頻監(jiān)控等自動(dòng)化系統(tǒng)在安防、教育、人工智能等各個(gè)產(chǎn)業(yè)領(lǐng)域都發(fā)揮著越來越重要的作用。錄播系統(tǒng)作為傳統(tǒng)教育行業(yè)的輔助教學(xué)系統(tǒng)，在課堂錄播應(yīng)用的方向上，扮演越來越重要的角色，在各中小學(xué)及高校的課堂教學(xué)中，對(duì)課程的錄制效果也提出了更高的要求。

現(xiàn)有的解決方案中，大多數(shù)錄播系統(tǒng)都只能在簡單的場景下實(shí)現(xiàn)目標(biāo)跟蹤，對(duì)于較復(fù)雜的背景和環(huán)境，往往需要人工干預(yù)控制，才能實(shí)現(xiàn)錄播，生成教學(xué)課件，因此其自動(dòng)化錄播效果不好，為保證課程錄制的整個(gè)過程能自動(dòng)完成定位、跟蹤和拍攝，需要主講人在上課時(shí)佩戴專用設(shè)備(例如紅外發(fā)射器)，給主講人帶來不適應(yīng)感，其跟蹤和拍攝效果不好；系統(tǒng)在對(duì)數(shù)據(jù)的處理過程中，復(fù)雜度較高，處理速度較緩慢，影響課程的錄制效果。此外，基于紅外技術(shù)的錄播系統(tǒng)易受太陽光、熱光源等因素的干擾，基于超聲波技術(shù)的錄播系統(tǒng)如果長期使用對(duì)健康有損害。

因此，如何解決現(xiàn)有技術(shù)中錄播系統(tǒng)存在的數(shù)據(jù)處理較為復(fù)雜、跟蹤拍攝效果不好、錄播不夠自動(dòng)化的問題，一直以來都是本領(lǐng)域技術(shù)人員關(guān)注的重點(diǎn)。

發(fā)明內(nèi)容

本發(fā)明的目的在于提供一種主講人跟蹤方法及系統(tǒng)，以解決現(xiàn)有技術(shù)中存在的數(shù)據(jù)處理較為復(fù)雜、跟蹤拍攝效果不好、錄播不夠自動(dòng)化的問題。

為了實(shí)現(xiàn)上述目的，本發(fā)明實(shí)施例采用的技術(shù)方案如下：

第一方面，本發(fā)明實(shí)施例提出一種主講人跟蹤方法。所述主講人跟蹤方法包括獲取主講人定位攝像機(jī)拍攝的主講人視頻圖像及板書定位攝像機(jī)拍攝的板書視頻圖像；對(duì)所述主講人視頻圖像以及所述板書視頻圖像分別進(jìn)行運(yùn)動(dòng)目標(biāo)檢測以獲取所述主講人視頻圖像中的運(yùn)動(dòng)目標(biāo)和所述板書視頻圖像中的運(yùn)動(dòng)目標(biāo)；計(jì)算所述主講人視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息及所述板書視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息；對(duì)所述板書視頻圖像中的運(yùn)動(dòng)目標(biāo)進(jìn)行膚色檢測，以生成檢測結(jié)果；依據(jù)所述主講人視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息、所述板書視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息以及所述檢測結(jié)果確定所述主講人的跟蹤策略。

第二方面，本發(fā)明實(shí)施例還提出一種主講人跟蹤系統(tǒng)。所述主講人跟蹤系統(tǒng)包括視頻圖像獲取模塊、目標(biāo)檢測模塊、位置信息計(jì)算模塊、膚色檢測模塊、跟蹤策略確定模塊。其中，所述視頻圖像獲取模塊用于獲取主講人定位攝像機(jī)拍攝的主講人視頻圖像及板書定位攝像機(jī)拍攝的板書視頻圖像；所述目標(biāo)檢測模塊用于對(duì)所述主講人視頻圖像以及所述板書視頻圖像分別進(jìn)行運(yùn)動(dòng)目標(biāo)檢測以獲取所述主講人視頻圖像中的運(yùn)動(dòng)目標(biāo)和所述板書視頻圖像中的運(yùn)動(dòng)目標(biāo)；所述位置信息計(jì)算模塊用于計(jì)算所述主講人視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息及所述板書視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息；所述膚色檢測模塊用于對(duì)所述板書視頻圖像中的運(yùn)動(dòng)目標(biāo)進(jìn)行膚色檢測，以生成檢測結(jié)果；所述跟蹤策略確定模塊用于依據(jù)所述主講人視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息、所述板書視頻圖像中的運(yùn)動(dòng)目標(biāo)的位置信息以及所述檢測結(jié)果確定所述主講人的跟蹤策略。