[發(fā)明專利]圖像處理方法、裝置、電子設(shè)備及可讀存儲(chǔ)介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011262191.0
• 申請日: 2020-11-12
• 公開（公告）號: CN114494927A
• 公開（公告）日: 2022-05-13
• 發(fā)明（設(shè)計(jì)）人: 黃明楊;馬菲瑩
• 申請（專利權(quán)）人: 阿里巴巴集團(tuán)控股有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V10/26;G06V10/44;G06V10/82;G06N3/04
• 代理公司: 北京智信四方知識(shí)產(chǎn)權(quán)代理有限公司 11519
• 代理人: 呂雁葭;宋海龍

1.一種圖像處理方法，包括：

獲取與視頻流中的圖像幀相對應(yīng)的掩模；

根據(jù)所述圖像幀，生成與所述圖像幀相對應(yīng)的光流圖矩陣；

根據(jù)所述掩摸和所述光流圖矩陣，生成用于從所述視頻流中分割出目標(biāo)對象的目標(biāo)掩摸。

2.根據(jù)權(quán)利要求1所述的方法，其中，所述獲取與視頻流中的圖像幀相對應(yīng)的掩模，包括：

獲取與視頻流中的第一幀圖像相對應(yīng)的第一掩模和與所述第一幀圖像之后的第二幀圖像相對應(yīng)的第二掩模，所述第一掩模用于從所述第一幀圖像中分割出目標(biāo)對象，所述第二掩模用于從所述第二幀圖像中分割出目標(biāo)對象。

3.根據(jù)權(quán)利要求2所述的方法，其中，所述獲取與視頻流中的第一幀圖像相對應(yīng)的第一掩模和與所述第一幀圖像之后的第二幀圖像相對應(yīng)的第二掩模，包括：

當(dāng)所述第一幀圖像是視頻流中的首幀圖像時(shí)，通過將所述第一幀圖像輸入訓(xùn)練好的掩模生成模型得到所述第一掩模，當(dāng)所述第一幀圖像不是所述視頻流中的首幀圖像時(shí)，將根據(jù)所述第一幀圖像和所述第一幀圖像的前一幀圖像獲得的所述第一幀圖像的目標(biāo)掩模作為所述第一掩模；

通過將所述第二幀圖像輸入訓(xùn)練好的掩模生成模型得到所述第二掩模。

4.根據(jù)權(quán)利要求1所述的方法，其中，所述根據(jù)所述圖像幀，生成與所述圖像幀相對應(yīng)的光流圖矩陣，包括：

根據(jù)所述第一幀圖像和所述第二幀圖像生成光流圖矩陣，所述光流圖矩陣中的每個(gè)元素是所述第一幀圖像中的相應(yīng)單位顯示塊的光流矢量，所述單位顯示塊包括一個(gè)或多個(gè)像素。

5.根據(jù)權(quán)利要求1所述的方法，其中，所述根據(jù)所述掩摸和所述光流圖矩陣，生成用于從所述視頻流中分割出目標(biāo)對象的目標(biāo)掩摸，包括：

根據(jù)所述第一掩模、所述第二掩模和所述光流圖矩陣生成與所述第二幀圖像相對應(yīng)的目標(biāo)掩模，所述目標(biāo)掩模用于從所述第二幀圖像中分割出目標(biāo)對象。

6.根據(jù)權(quán)利要求5所述的方法，其中，所述根據(jù)所述第一掩模、所述第二掩模和所述光流圖矩陣生成與所述第二幀圖像相對應(yīng)的目標(biāo)掩模，包括：

根據(jù)所述第一掩模和所述光流圖矩陣生成第三掩模；

根據(jù)所述第三掩模、所述第二掩模、所述光流圖，生成第四掩模；

根據(jù)所述第四掩模生成所述目標(biāo)掩模。

7.根據(jù)權(quán)利要求6所述的方法，其中，所述根據(jù)所述第一掩模和所述光流圖生成第三掩模，包括：

將所述第一掩模基于所述光流圖矩陣進(jìn)行像素重映射，生成所述第三掩模。

8.根據(jù)權(quán)利要求6所述的方法，其中，所述根據(jù)所述第一掩模、所述第二掩模和所述光流圖矩陣生成與所述第二幀圖像相對應(yīng)的目標(biāo)掩模，還包括：

基于所述光流圖矩陣得到光流矩陣，所述光流矩陣的每個(gè)元素是所述光流圖中相應(yīng)元素的模。

9.根據(jù)權(quán)利要求8所述的方法，其中，所述根據(jù)所述第三掩模、所述第二掩模、所述光流圖，生成第四掩模，包括：

獲取所述第三掩模與所述光流矩陣的反結(jié)果進(jìn)行點(diǎn)乘得到的第一乘積，所述光流矩陣的反結(jié)果是用單位矩陣減去所述光流矩陣得到的；

獲取所述第二掩模與所述光流矩陣進(jìn)行點(diǎn)乘得到的第二乘積；

根據(jù)所述第一乘積和所述第二乘積之和，生成所述第四掩模。

10.根據(jù)權(quán)利要求6所述的方法，其中，所述根據(jù)所述第四掩模生成所述目標(biāo)掩模，包括：

通過所述第二掩模和所述第二幀圖像的目標(biāo)對象邊緣檢測結(jié)果修正所述第四掩模，將修正后的第四掩模作為所述目標(biāo)掩模。