[發(fā)明專利]可交互視頻生成器、播放器及其生成方法、播放方法

有效

• 申請?zhí)枺?/td>: 201410181707.7
• 申請日: 2014-04-30
• 公開（公告）號: CN103929669B
• 公開（公告）日: 2018-01-05
• 發(fā)明（設(shè)計）人: 柳寅秋
• 申請（專利權(quán)）人: 成都理想境界科技有限公司
• 主分類號: H04N21/43
• 分類號: H04N21/43;H04N21/85;H04N21/83;H04N21/472
• 代理公司: 暫無信息
• 代理人: 暫無信息

技術(shù)領(lǐng)域

本發(fā)明涉及多媒體技術(shù)，尤其涉及一種可交互視頻生成方法、可交互視頻生成器、生成系統(tǒng)及對應(yīng)的可交互視頻播放方法及播放器。

背景技術(shù)

隨著計算機(jī)通信技術(shù)、互聯(lián)網(wǎng)技術(shù)以及多媒體技術(shù)的發(fā)展，視頻得到了越來越廣泛的應(yīng)用，不管是通過離線下載方式，還是通過在線視頻網(wǎng)站，亦或是SNS社交平臺上，視頻無處不在，用戶幾乎可以選擇在任意時段，通過客戶端建立與視頻播放服務(wù)器的網(wǎng)絡(luò)連接，查看視頻播放服務(wù)器提供的各類視頻，例如，電影、電視劇，選取自己喜好的視頻，點擊進(jìn)行播放、觀看。

然而現(xiàn)有視頻觀看方式基本不具備交互功能，用戶在觀看視頻的過程中，只能被動的接收視頻播放信息，不能夠充分的參與到視頻應(yīng)用中，用戶的個性化需求難以得到滿足。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一可交互視頻生成方法、可交互視頻生成器、可交互視頻生成系統(tǒng)及對應(yīng)的可交互視頻播放方法及播放器，解決現(xiàn)有視頻缺乏交互性的缺陷，可讓用戶在觀看視頻的過程中，隨時參與到視頻應(yīng)用中，體驗前所未有的視頻交互方式，例如當(dāng)用戶觀看某視頻時，看上了某角色提的包包，可點擊包包進(jìn)入該包的介紹及購買鏈接等。

為了實現(xiàn)上述發(fā)明目的，本發(fā)明提供了一種可交互視頻生成方法，包括：

對原視頻數(shù)據(jù)進(jìn)行解碼，逐幀獲取視頻幀圖像；

逐幀對視頻幀圖像進(jìn)行特征點提取，生成特征描述數(shù)據(jù)；

根據(jù)每一視頻幀圖像的特征描述數(shù)據(jù)，在服務(wù)器端的圖像數(shù)據(jù)庫中進(jìn)行搜索，獲取與該視頻幀圖像某區(qū)域匹配的樣本圖像及相關(guān)可交互元素；

將匹配成功的視頻幀圖像與樣本圖像進(jìn)行配準(zhǔn)，計算單應(yīng)性矩陣；

將配準(zhǔn)成功的視頻幀圖像設(shè)定為關(guān)鍵幀，并將每一關(guān)鍵幀與其對應(yīng)的可交互元素及單應(yīng)性矩陣綁定，形成關(guān)鍵幀數(shù)據(jù)；

所有視頻幀圖像處理完畢后，將原視頻數(shù)據(jù)與各關(guān)鍵幀數(shù)據(jù)融合封裝，形成可交互視頻。

優(yōu)選的，所述逐幀對視頻幀圖像進(jìn)行特征點提取，生成特征描述數(shù)據(jù)步驟，具體為如下三種方式之一：A：對每一視頻幀圖像的全圖進(jìn)行特征點提取，生成特征描述數(shù)據(jù)；B：檢測每一視頻幀圖像中是否包含預(yù)先選定的子圖像區(qū)域，若是，則對該子圖像區(qū)域進(jìn)行特征點提取，生成特征描述數(shù)據(jù)；C：對每一視頻幀圖像進(jìn)行前景分割，對前景區(qū)域進(jìn)行特征點提取，生成特征描述數(shù)據(jù)。

優(yōu)選的，所述可交互視頻生成方法還包括匹配圖像跟蹤，即當(dāng)某一視頻幀圖像配準(zhǔn)成功后，在下一視頻幀圖像中跟蹤配準(zhǔn)成功的圖像特征點，由跟蹤算法得到下一幀視頻幀圖像對應(yīng)的單應(yīng)性矩陣；當(dāng)跟蹤丟失時，再對當(dāng)前幀視頻幀圖像進(jìn)行特征點檢測與圖像配準(zhǔn)。

其中，所述可交互元素包括視頻、圖像、音頻、網(wǎng)頁、文本、3D模型、URI地址中的一種或多種。

相應(yīng)的，本發(fā)明還提供了一種可交互視頻生成器，包括視頻解碼模塊、圖像特征提取模塊、圖像搜索模塊、圖像配準(zhǔn)模塊和數(shù)據(jù)融合模塊，其中：

所述視頻解碼模塊，用于對原視頻數(shù)據(jù)進(jìn)行解碼，逐幀獲取視頻幀圖像；

所述圖像特征提取模塊，用于逐幀對所述視頻解碼模塊解析出的視頻幀圖像進(jìn)行特征點提取，生成特征描述數(shù)據(jù)，將其傳遞給圖像搜索模塊；

所述圖像搜索模塊，用于根據(jù)所述圖像特征提取模塊傳遞來的每一視頻幀圖像的特征描述數(shù)據(jù)，在服務(wù)器端的圖像數(shù)據(jù)庫中進(jìn)行搜索，獲取與該視頻幀圖像某區(qū)域匹配的樣本圖像及相關(guān)可交互元素，將匹配成功的樣本圖像的特征描述傳遞給圖像配準(zhǔn)模塊，并將與該視頻幀圖像相關(guān)的可交互元素傳遞給數(shù)據(jù)融合模塊；

所述圖像配準(zhǔn)模塊，用于將匹配成功的視頻幀圖像與樣本圖像進(jìn)行配準(zhǔn)，計算單應(yīng)性矩陣；

所述數(shù)據(jù)融合模塊，用于將所述圖像配準(zhǔn)模塊配準(zhǔn)成功的視頻幀圖像設(shè)定為關(guān)鍵幀，將每一關(guān)鍵幀與其對應(yīng)的可交互元素及單應(yīng)性矩陣綁定，形成關(guān)鍵幀數(shù)據(jù)；并在所有視頻幀圖像處理完畢后，將原視頻數(shù)據(jù)與各關(guān)鍵幀數(shù)據(jù)融合封裝，形成可交互視頻。

優(yōu)選的，所述可交互視頻生成器還包括預(yù)選圖像區(qū)域檢測模塊，用于檢測每一視頻幀圖像中是否包含預(yù)先選定的子圖像區(qū)域；若檢測到該視頻幀圖像中包含預(yù)先選定的子圖像區(qū)域，則將該視頻幀圖像或該子圖像區(qū)域發(fā)送到所述圖像特征提取模塊，由所述圖像特征提取模塊對該子圖像區(qū)域進(jìn)行特征點提取，生成特征描述數(shù)據(jù)。

優(yōu)選的，所述可交互視頻生成器還包括前景分割模塊，用于對每一視頻幀圖像進(jìn)行前景分割，并將該視頻幀圖像的前景區(qū)域發(fā)送到所述圖像特征提取模塊，由所述圖像特征提取模塊對前景區(qū)域進(jìn)行特征點提取，生成特征描述數(shù)據(jù)。