[發(fā)明專利]圖像處理裝置、圖像處理方法和存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011049848.5
• 申請日: 2020-09-29
• 公開（公告）號: CN112598691A
• 公開（公告）日: 2021-04-02
• 發(fā)明（設(shè)計）人: 伊藤秀憲
• 申請（專利權(quán)）人: 佳能株式會社
• 主分類號: G06T7/194
• 分類號: G06T7/194;G06N3/04;G06N3/08
• 代理公司: 北京怡豐知識產(chǎn)權(quán)代理有限公司 11293
• 代理人: 遲軍;高華麗

本發(fā)明提供一種圖像處理裝置、圖像處理方法和存儲介質(zhì)。為了更適當?shù)靥崛∏熬皡^(qū)域，用于從輸入圖像提取前景區(qū)域的圖像處理裝置包括：圖像輸入單元，其在輸入圖像中設(shè)置第一區(qū)域和與第一區(qū)域不同的第二區(qū)域；第一提取單元，其從第一區(qū)域提取前景區(qū)域；以及第二提取單元，其通過使用與第一提取單元使用的提取方法不同的提取方法從第二區(qū)域提取前景區(qū)域。

技術(shù)領(lǐng)域

本公開涉及一種用于從圖像提取前景區(qū)域的技術(shù)。

背景技術(shù)

迄今為止，用于從圖像提取前景區(qū)域的前景提取方法已經(jīng)用于各種目的，并且至今已經(jīng)提出了各種方法。例如，日本特開第2012-48484號公報中公開的技術(shù)首先通過使用背景差分技術(shù)提取包含運動的區(qū)域作為前景候選區(qū)域，然后通過使用特征量從前景候選區(qū)域中檢測前景區(qū)域。同時，Hyeonwoo Noh、Seunghoon Hong和Bohyung Han的在2015年IEEE國際計算機視覺會議(ICCV)會議錄第1520-1528頁的“用于語義分割的學習反卷積網(wǎng)絡(luò)”(以下稱為非專利文獻1)中公開的一種技術(shù)，例如，可以在組合使用卷積網(wǎng)絡(luò)和反卷積網(wǎng)絡(luò)的同時，根據(jù)基于機器學習結(jié)果的前景提取方法，來提取多個語義上不同的前景區(qū)域。這里，語義上不同的區(qū)域表示涉及不同類型的對象(例如人和球)的區(qū)域。

然而，在使用基于機器學習結(jié)果的背景差分技術(shù)和前景提取方法的情況下，將出現(xiàn)以下問題。具體地，背景差分技術(shù)檢測輸入圖像之間的各像素的像素值的變化，并且通過使用變化落入預定閾值內(nèi)的像素來生成背景圖像。然后，將以提取前景區(qū)域為目標的輸入圖像與背景圖像進行比較，并且像素值的差等于或大于預定閾值的各個像素被提取作為前景區(qū)域。根據(jù)該方法，幾乎不移動的靜止對象被拍攝在背景圖像中，并且不可能提取存在靜止對象的區(qū)域作為前景區(qū)域。例如，在足球比賽中，可以提取存在諸如運動員和球等運動對象的區(qū)域作為前景區(qū)域，但是無法提取存在諸如角旗和包括球門網(wǎng)的球門等靜止對象的區(qū)域作為前景區(qū)域。另一方面，使用機器學習結(jié)果的前景提取方法導致處理負荷的增加。

發(fā)明內(nèi)容

鑒于前述問題而作出了本公開。本公開的目的是更適當?shù)靥崛∏熬皡^(qū)域。

根據(jù)本公開的一方面的圖像處理裝置包括：設(shè)置單元，其設(shè)置輸入圖像中的第一區(qū)域和不同于第一區(qū)域的第二區(qū)域；第一提取單元，其從第一區(qū)域中提取前景區(qū)域，以及第二提取單元，其通過使用與第一提取單元所使用的提取方法不同的提取方法從第二區(qū)域中提取前景區(qū)域。

根據(jù)參照附圖對示例性實施例的下面描述，本公開的另外的特征將變得清楚。

附圖說明

圖1是根據(jù)第一實施例的圖像處理裝置的功能構(gòu)造圖；

圖2是示出根據(jù)第一實施例的圖像處理裝置的應(yīng)用示例的圖；

圖3是根據(jù)第一實施例的前景提取處理的流程圖；

圖4A是示出根據(jù)第一實施例的僅存在靜止對象的輸入圖像的示例的圖；

圖4B是示出根據(jù)第一實施例的僅存在靜止對象的輸入圖像的另一示例的圖；

圖5A是示出根據(jù)第一實施例的區(qū)域信息的示例的圖；

圖5B是示出根據(jù)第一實施例的區(qū)域信息的另一示例的圖；

圖6A是示出根據(jù)第一實施例的存在運動對象和靜止對象的輸入圖像的示例的圖；

圖6B是示出根據(jù)第一實施例的存在運動對象和靜止對象的輸入圖像的另一示例的圖；

圖7A是示出由根據(jù)第一實施例的第一前景區(qū)域提取單元處理的圖像的示例的圖；

圖7B是示出由根據(jù)第一實施例的第一前景區(qū)域提取單元處理的圖像的另一示例的圖；

圖8A是示出由根據(jù)第一實施例的第二前景區(qū)域提取單元處理的圖像的示例的圖；