[發(fā)明專利]圖像處理方法、裝置及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110190428.7
• 申請(qǐng)日: 2021-02-18
• 公開（公告）號(hào): CN112884813A
• 公開（公告）日: 2021-06-01
• 發(fā)明（設(shè)計(jì)）人: 梁增龑
• 申請(qǐng)（專利權(quán)）人: 北京小米松果電子有限公司
• 主分類號(hào): G06T7/269
• 分類號(hào): G06T7/269
• 代理公司: 北京善任知識(shí)產(chǎn)權(quán)代理有限公司 11650
• 代理人: 張振偉

本公開是關(guān)于一種圖像處理方法、裝置及存儲(chǔ)介質(zhì)。該方法主要包括：基于待處理圖像序列中第一圖像幀的像素的初始光流，確定所述第一圖像幀的像素的運(yùn)動(dòng)信息；基于所述第一圖像幀的像素的運(yùn)動(dòng)信息和所述第一圖像幀，投影得到第二圖像幀；根據(jù)第二圖像幀的像素的像素值和與第一圖像幀相鄰的第三圖像幀的像素的像素值確定校準(zhǔn)參數(shù)，基于所述校準(zhǔn)參數(shù)對(duì)各個(gè)初始光流進(jìn)行校準(zhǔn)。由于第二圖像幀是基于初始光流和第一圖像幀投影得到的后一幀圖像，而第三圖像幀是原始的后一幀圖像，基于第二圖像幀的像素的像素值和第三圖像幀的像素的像素值，能確定出初始光流的偏差程度，進(jìn)而對(duì)初始光流進(jìn)行校準(zhǔn)，以提高光流的精確性。

技術(shù)領(lǐng)域

本公開涉及圖像技術(shù)領(lǐng)域，尤其涉及一種圖像處理方法、裝置及存儲(chǔ)介質(zhì)。

背景技術(shù)

光流在計(jì)算機(jī)視覺中具有非常重要的作用，在圖像序列中對(duì)運(yùn)動(dòng)目標(biāo)的分析可以幫助獲得目標(biāo)在時(shí)序上的特征、位置信息、結(jié)構(gòu)信息等。通常直接計(jì)算目標(biāo)的運(yùn)動(dòng)場(chǎng)比較復(fù)雜且困難，圖像序列中的每個(gè)像素點(diǎn)隱含了豐富的運(yùn)動(dòng)信息，而光流正是表示每個(gè)像素點(diǎn)的運(yùn)動(dòng)信息，所以光流是圖像序列中對(duì)運(yùn)動(dòng)分析必不可少的一種重要手段。

光流在計(jì)算機(jī)視覺中的應(yīng)用非常廣泛，例如，在行為識(shí)別中利用光流對(duì)時(shí)間域特征進(jìn)行提取，從而可以對(duì)行為進(jìn)行分類；在自動(dòng)駕駛與同步定位與建圖(simultaneouslocalization and mapping，SLAM)中使用光流對(duì)目標(biāo)進(jìn)行跟蹤與重定位；在視頻壓縮與視頻超幀率中利用光流來進(jìn)行運(yùn)動(dòng)估計(jì)，從而根據(jù)運(yùn)動(dòng)估計(jì)來進(jìn)行運(yùn)動(dòng)補(bǔ)償。

可以看到在上述例子中光流起到一種中流砥柱的作用，如果沒有估計(jì)到準(zhǔn)確的光流，將會(huì)直接影響到最終結(jié)果的好壞，所以能夠得到更加精確的光流，對(duì)光流的精度進(jìn)一步處理是非常有必要的。

發(fā)明內(nèi)容

本公開提供一種圖像處理方法、裝置及存儲(chǔ)介質(zhì)。

根據(jù)本公開實(shí)施例的第一方面，提供一種圖像處理方法，包括：

基于待處理圖像序列中第一圖像幀的像素的初始光流，確定所述第一圖像幀的像素的運(yùn)動(dòng)信息；

基于所述第一圖像幀的像素的運(yùn)動(dòng)信息和所述第一圖像幀，投影得到第二圖像幀；

根據(jù)所述第二圖像幀的像素的像素值和所述圖像序列中與所述第一圖像幀相鄰的第三圖像幀的像素的像素值，確定校準(zhǔn)參數(shù)；

基于所述校準(zhǔn)參數(shù)，對(duì)所述初始光流進(jìn)行校準(zhǔn)。

可選的，所述根據(jù)所述第二圖像幀的像素的像素值和所述待處理圖像序列中與所述第一圖像幀相鄰的第三圖像幀的像素的像素值，確定校準(zhǔn)參數(shù)，包括：

根據(jù)所述第二圖像幀的像素的像素值和所述第三圖像幀的像素的像素值之間的差值，確定所述初始光流所對(duì)應(yīng)的校準(zhǔn)參數(shù)；

其中，所述校準(zhǔn)參數(shù)用于表征所述初始光流的偏差程度。

可選的，所述基于所述校準(zhǔn)參數(shù)，對(duì)所述初始光流進(jìn)行校準(zhǔn)，包括：

在所述校準(zhǔn)參數(shù)大于或者等于設(shè)定閾值時(shí)，基于所述校準(zhǔn)參數(shù)對(duì)所述初始光流進(jìn)行加權(quán)，得到校準(zhǔn)光流。

可選的，所述基于所述校準(zhǔn)參數(shù)，對(duì)所述初始光流進(jìn)行校準(zhǔn)，包括：

在所述校準(zhǔn)參數(shù)小于設(shè)定閾值時(shí)，確定所述初始光流所對(duì)應(yīng)的當(dāng)前像素，以及與所述當(dāng)前像素相鄰的像素；

根據(jù)與所述當(dāng)前像素相鄰的像素的校準(zhǔn)光流，對(duì)所述當(dāng)前像素的所述初始光流進(jìn)行校準(zhǔn)。

可選的，所述根據(jù)與所述當(dāng)前像素相鄰的像素的校準(zhǔn)光流，對(duì)所述當(dāng)前像素的所述初始光流進(jìn)行校準(zhǔn)，包括：

基于設(shè)定權(quán)重對(duì)與所述當(dāng)前像素相鄰的像素的所述校準(zhǔn)光流進(jìn)行加權(quán)，得到加權(quán)值；