[發(fā)明專利]圖像處理方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201711335669.6
• 申請日: 2017-12-13
• 公開（公告）號: CN109919971B
• 公開（公告）日: 2021-07-20
• 發(fā)明（設(shè)計(jì)）人: 劉鵬;王明琛;梅元剛;陳宇;朱政
• 申請（專利權(quán)）人: 北京金山云網(wǎng)絡(luò)技術(shù)有限公司;北京金山云科技有限公司
• 主分類號: G06T7/246
• 分類號: G06T7/246
• 代理公司: 北京柏杉松知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11413
• 代理人: 項(xiàng)京;馬敬

本發(fā)明實(shí)施例提供了一種圖像處理方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)，所述方法包括：獲取初始視頻幀和第一視頻幀，以及初始視頻幀中的第一特征點(diǎn)和第一視頻幀中的第二特征點(diǎn)；在完成初始視頻幀中的第一特征點(diǎn)和第一視頻幀的第二特征點(diǎn)的匹配后，將第一視頻幀作為參考視頻幀，并將成功匹配的第一視頻幀中的第二特征點(diǎn)作為光流跟蹤的初始點(diǎn)，對后面獲取的更新視頻幀進(jìn)行光流跟蹤，并計(jì)算更新映射矩陣，并且再將更新視頻幀作為參考視頻幀，對后續(xù)的視頻幀繼續(xù)進(jìn)行光流跟蹤，從而不需要再對更新視頻幀及后續(xù)的視頻幀獲取特征點(diǎn)，就可以計(jì)算出映射矩陣，減少了計(jì)算量，提高計(jì)算速度，能夠?qū)崿F(xiàn)對具有連續(xù)性的視頻圖像進(jìn)行實(shí)時(shí)的處理。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)技術(shù)領(lǐng)域，特別是涉及一種圖像處理方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)。

背景技術(shù)

隨著計(jì)算機(jī)技術(shù)、機(jī)器視覺技術(shù)的高速發(fā)展，對于各種圖像進(jìn)行處理的需求日益增加。在圖像處理領(lǐng)域，針對具有連續(xù)性的多個(gè)視頻圖像進(jìn)行處理時(shí)，往往需要對圖像中的景物位置變化情況進(jìn)行分析，確定出連續(xù)圖像中景物位置變化的規(guī)律。

例如，在增強(qiáng)現(xiàn)實(shí)技術(shù)中，通過各類增強(qiáng)現(xiàn)實(shí)工具，如手機(jī)、智能眼鏡等，可以將虛擬物品呈現(xiàn)在通過攝像頭獲取的實(shí)際場景的圖像中。當(dāng)增強(qiáng)現(xiàn)實(shí)工具產(chǎn)生姿態(tài)位置變化時(shí)，可以通過攝像頭所獲取的圖像的變化來確定出增強(qiáng)現(xiàn)實(shí)工具姿態(tài)位置的變化，進(jìn)而更好的將虛擬物品呈現(xiàn)在圖像中。增強(qiáng)現(xiàn)實(shí)工具的攝像頭所獲取的是實(shí)際場景的具有連續(xù)性的圖像，通過對連續(xù)圖像進(jìn)行處理，可以得到每一幀圖像之間的映射矩陣，即上一幀圖像中的點(diǎn)位置坐標(biāo)，可以通過該映射矩陣映射至下一幀圖像中。如果可以得到該映射矩陣，則可以反推出實(shí)際場景的位置變化，即可以確定出增強(qiáng)現(xiàn)實(shí)工具姿態(tài)位置的變化。

在現(xiàn)有技術(shù)中，在對具有連續(xù)性的視頻圖像的景物位置變化情況進(jìn)行分析時(shí)，往往需要確定出初始圖像的特征點(diǎn)和發(fā)生位置變化后的圖像的特征點(diǎn)，通過特征點(diǎn)的匹配，建立起兩幅圖像之間的映射矩陣。應(yīng)用上述方法時(shí)，需要對獲取的每一幀圖像都確定特征點(diǎn)并計(jì)算映射矩陣，然而計(jì)算特征點(diǎn)的計(jì)算量較大，在對連續(xù)的視頻圖像進(jìn)行處理時(shí)，計(jì)算耗時(shí)較長，無法實(shí)現(xiàn)實(shí)時(shí)的連續(xù)圖像的處理。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例的目的在于提供一種圖像處理方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)，以提高圖像處理效率，實(shí)現(xiàn)對連續(xù)的視頻圖像進(jìn)行實(shí)時(shí)處理。具體技術(shù)方案如下：

本發(fā)明實(shí)施例公開了一種圖像處理方法，包括：

獲取初始視頻幀和所述初始視頻幀之后的第一視頻幀，并確定出所述初始視頻幀與所述第一視頻幀之間的第一映射矩陣，所述第一映射矩陣為用于將所述初始視頻幀中的點(diǎn)的坐標(biāo)映射至所述第一視頻幀中的點(diǎn)的坐標(biāo)的轉(zhuǎn)換矩陣；

將所述第一視頻幀作為參考視頻幀，將所述第一映射矩陣作為參考矩陣，將所述第一視頻幀中與所述第一特征點(diǎn)匹配成功的第二特征點(diǎn)作為光流跟蹤初始點(diǎn)；

獲取所述參考視頻幀之后的更新視頻幀；

通過所述光流跟蹤初始點(diǎn)，對所述更新視頻幀進(jìn)行光流跟蹤，在所述更新視頻幀中確定出與所述各光流跟蹤初始點(diǎn)相對應(yīng)的光流跟蹤終點(diǎn)；

通過所述各光流跟蹤初始點(diǎn)和所對應(yīng)的光流跟蹤終點(diǎn)，計(jì)算更新映射矩陣，所述更新映射矩陣為用于將所述參考視頻幀中的點(diǎn)的坐標(biāo)映射至所述更新視頻幀中的點(diǎn)的坐標(biāo)的轉(zhuǎn)換矩陣；

將所述更新視頻幀作為新的參考視頻幀，將所述參考矩陣和所述更新映射矩陣相乘得到的矩陣作為新的參考矩陣。

可選的，所述獲取初始視頻幀和所述初始視頻幀之后的第一視頻幀，并確定出所述初始視頻幀與所述第一視頻幀之間的第一映射矩陣，包括：

獲取初始視頻幀，并確定所述初始視頻幀中多個(gè)第一特征點(diǎn)；

獲取所述初始視頻幀之后的第一視頻幀，并確定所述第一視頻幀中多個(gè)第二特征點(diǎn)；