[發(fā)明專利]圖像處理方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201711335669.6
• 申請(qǐng)日: 2017-12-13
• 公開（公告）號(hào): CN109919971B
• 公開（公告）日: 2021-07-20
• 發(fā)明（設(shè)計(jì)）人: 劉鵬;王明琛;梅元?jiǎng)?/a>;陳宇;朱政
• 申請(qǐng)（專利權(quán)）人: 北京金山云網(wǎng)絡(luò)技術(shù)有限公司;北京金山云科技有限公司
• 主分類號(hào): G06T7/246
• 分類號(hào): G06T7/246
• 代理公司: 北京柏杉松知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11413
• 代理人: 項(xiàng)京;馬敬

本發(fā)明實(shí)施例提供了一種圖像處理方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，所述方法包括：獲取初始視頻幀和第一視頻幀，以及初始視頻幀中的第一特征點(diǎn)和第一視頻幀中的第二特征點(diǎn)；在完成初始視頻幀中的第一特征點(diǎn)和第一視頻幀的第二特征點(diǎn)的匹配后，將第一視頻幀作為參考視頻幀，并將成功匹配的第一視頻幀中的第二特征點(diǎn)作為光流跟蹤的初始點(diǎn)，對(duì)后面獲取的更新視頻幀進(jìn)行光流跟蹤，并計(jì)算更新映射矩陣，并且再將更新視頻幀作為參考視頻幀，對(duì)后續(xù)的視頻幀繼續(xù)進(jìn)行光流跟蹤，從而不需要再對(duì)更新視頻幀及后續(xù)的視頻幀獲取特征點(diǎn)，就可以計(jì)算出映射矩陣，減少了計(jì)算量，提高計(jì)算速度，能夠?qū)崿F(xiàn)對(duì)具有連續(xù)性的視頻圖像進(jìn)行實(shí)時(shí)的處理。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)技術(shù)領(lǐng)域，特別是涉及一種圖像處理方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

隨著計(jì)算機(jī)技術(shù)、機(jī)器視覺技術(shù)的高速發(fā)展，對(duì)于各種圖像進(jìn)行處理的需求日益增加。在圖像處理領(lǐng)域，針對(duì)具有連續(xù)性的多個(gè)視頻圖像進(jìn)行處理時(shí)，往往需要對(duì)圖像中的景物位置變化情況進(jìn)行分析，確定出連續(xù)圖像中景物位置變化的規(guī)律。

例如，在增強(qiáng)現(xiàn)實(shí)技術(shù)中，通過各類增強(qiáng)現(xiàn)實(shí)工具，如手機(jī)、智能眼鏡等，可以將虛擬物品呈現(xiàn)在通過攝像頭獲取的實(shí)際場(chǎng)景的圖像中。當(dāng)增強(qiáng)現(xiàn)實(shí)工具產(chǎn)生姿態(tài)位置變化時(shí)，可以通過攝像頭所獲取的圖像的變化來確定出增強(qiáng)現(xiàn)實(shí)工具姿態(tài)位置的變化，進(jìn)而更好的將虛擬物品呈現(xiàn)在圖像中。增強(qiáng)現(xiàn)實(shí)工具的攝像頭所獲取的是實(shí)際場(chǎng)景的具有連續(xù)性的圖像，通過對(duì)連續(xù)圖像進(jìn)行處理，可以得到每一幀圖像之間的映射矩陣，即上一幀圖像中的點(diǎn)位置坐標(biāo)，可以通過該映射矩陣映射至下一幀圖像中。如果可以得到該映射矩陣，則可以反推出實(shí)際場(chǎng)景的位置變化，即可以確定出增強(qiáng)現(xiàn)實(shí)工具姿態(tài)位置的變化。

在現(xiàn)有技術(shù)中，在對(duì)具有連續(xù)性的視頻圖像的景物位置變化情況進(jìn)行分析時(shí)，往往需要確定出初始圖像的特征點(diǎn)和發(fā)生位置變化后的圖像的特征點(diǎn)，通過特征點(diǎn)的匹配，建立起兩幅圖像之間的映射矩陣。應(yīng)用上述方法時(shí)，需要對(duì)獲取的每一幀圖像都確定特征點(diǎn)并計(jì)算映射矩陣，然而計(jì)算特征點(diǎn)的計(jì)算量較大，在對(duì)連續(xù)的視頻圖像進(jìn)行處理時(shí)，計(jì)算耗時(shí)較長，無法實(shí)現(xiàn)實(shí)時(shí)的連續(xù)圖像的處理。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例的目的在于提供一種圖像處理方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，以提高圖像處理效率，實(shí)現(xiàn)對(duì)連續(xù)的視頻圖像進(jìn)行實(shí)時(shí)處理。具體技術(shù)方案如下：

本發(fā)明實(shí)施例公開了一種圖像處理方法，包括：

獲取初始視頻幀和所述初始視頻幀之后的第一視頻幀，并確定出所述初始視頻幀與所述第一視頻幀之間的第一映射矩陣，所述第一映射矩陣為用于將所述初始視頻幀中的點(diǎn)的坐標(biāo)映射至所述第一視頻幀中的點(diǎn)的坐標(biāo)的轉(zhuǎn)換矩陣；

將所述第一視頻幀作為參考視頻幀，將所述第一映射矩陣作為參考矩陣，將所述第一視頻幀中與所述第一特征點(diǎn)匹配成功的第二特征點(diǎn)作為光流跟蹤初始點(diǎn)；

獲取所述參考視頻幀之后的更新視頻幀；

通過所述光流跟蹤初始點(diǎn)，對(duì)所述更新視頻幀進(jìn)行光流跟蹤，在所述更新視頻幀中確定出與所述各光流跟蹤初始點(diǎn)相對(duì)應(yīng)的光流跟蹤終點(diǎn)；

通過所述各光流跟蹤初始點(diǎn)和所對(duì)應(yīng)的光流跟蹤終點(diǎn)，計(jì)算更新映射矩陣，所述更新映射矩陣為用于將所述參考視頻幀中的點(diǎn)的坐標(biāo)映射至所述更新視頻幀中的點(diǎn)的坐標(biāo)的轉(zhuǎn)換矩陣；

將所述更新視頻幀作為新的參考視頻幀，將所述參考矩陣和所述更新映射矩陣相乘得到的矩陣作為新的參考矩陣。

可選的，所述獲取初始視頻幀和所述初始視頻幀之后的第一視頻幀，并確定出所述初始視頻幀與所述第一視頻幀之間的第一映射矩陣，包括：

獲取初始視頻幀，并確定所述初始視頻幀中多個(gè)第一特征點(diǎn)；

獲取所述初始視頻幀之后的第一視頻幀，并確定所述第一視頻幀中多個(gè)第二特征點(diǎn)；