[發(fā)明專利]場景分割方法、裝置、設(shè)備及計算機可讀存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 202110763842.2
• 申請日: 2021-07-06
• 公開（公告）號: CN113470048B
• 公開（公告）日: 2023-04-25
• 發(fā)明（設(shè)計）人: 張番棟;俞益洲;李一鳴;喬昕
• 申請（專利權(quán)）人: 北京深睿博聯(lián)科技有限責(zé)任公司;杭州深睿博聯(lián)科技有限公司
• 主分類號: G06V20/70
• 分類號: G06V20/70;G06V10/40
• 代理公司: 北京天方智力知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11719
• 代理人: 張廷利

1.一種場景分割方法，其特征在于，包括：

獲取待分割的目標圖像；

生成所述目標圖像的第一強化場景特征，其中，所述第一強化場景特征中攜帶了所述目標圖像中的各個圖像類別之間的關(guān)聯(lián)關(guān)系；

根據(jù)所述目標圖像的第一強化場景特征，對所述目標圖像進行場景分割；

其中，所述生成所述目標圖像的第一強化場景特征，包括：

對所述目標圖像進行特征提取，得到所述目標圖像的第一初始場景特征；

根據(jù)所述第一初始場景特征對所述目標圖像進行場景分割，得到初始分割結(jié)果，所述初始分割結(jié)果包括至少一個分割位置，每個分割位置對應(yīng)至少一種預(yù)測類別、且每個分割位置對應(yīng)的各個預(yù)測類別的概率之和為1；

基于預(yù)先定義的圖像類別關(guān)聯(lián)關(guān)系、以及所述初始分割結(jié)果，顯式地建模目標圖像中的各圖像類別之間的邏輯關(guān)系，用于強化目標圖像中的場景特征，以生成所述目標圖像的第一強化場景特征；

其中，基于預(yù)先定義的圖像類別關(guān)聯(lián)關(guān)系、以及所述初始分割結(jié)果，生成所述目標圖像的第一強化場景特征，包括：

根據(jù)預(yù)先定義的圖像類別關(guān)聯(lián)關(guān)系、所述目標圖像中的每一分割位置對應(yīng)的各個預(yù)測類別、以及所述初始場景特征中的屬于每一分割位置的場景特征和/或每一分割位置的周邊場景的場景特征，做加權(quán)圖卷積操作，生成所述目標圖像的第一強化場景特征。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對所述目標圖像進行特征提取，包括：

采用下采樣和上采樣相結(jié)合的網(wǎng)絡(luò)結(jié)構(gòu)，對所述目標圖像進行特征提取。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述第一初始場景特征包括特征分辨率不同的細節(jié)特征和語義特征。

4.根據(jù)權(quán)利要求1-3任一項所述的方法，其特征在于，所述根據(jù)所述目標圖像的第一強化場景特征，對所述目標圖像進行場景分割，包括：

根據(jù)所述目標圖像的第一初始場景特征和第一強化場景特征，對所述目標圖像進行場景分割。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述根據(jù)所述目標圖像的第一初始場景特征和第一強化場景特征，對所述目標圖像進行場景分割，包括：

將所述目標圖像的第一初始場景特征和第一強化場景特征的特征分辨率進行統(tǒng)一化處理，得到所述目標圖像的第二初始場景特征和第二強化場景特征；

根據(jù)所述目標圖像的第二初始場景特征和第二強化場景特征，對所述目標圖像進行場景分割。

6.一種場景分割裝置，其特征在于，包括：

目標圖像獲取單元，用于獲取待分割的目標圖像；

強化特征生成單元，用于生成所述目標圖像的第一強化場景特征，其中，所述第一強化場景特征中攜帶了所述目標圖像中的各個圖像類別之間的關(guān)聯(lián)關(guān)系；

目標場景分割單元，用于根據(jù)所述目標圖像的第一強化場景特征，對所述目標圖像進行場景分割；

其中，所述強化特征生成單元，包括：

特征提取子單元，用于對所述目標圖像進行特征提取，得到所述目標圖像的第一初始場景特征；

場景分割子單元，用于根據(jù)所述第一初始場景特征對所述目標圖像進行場景分割，得到初始分割結(jié)果，所述初始分割結(jié)果包括至少一個分割位置，每個分割位置對應(yīng)至少一種預(yù)測類別、且每個分割位置對應(yīng)的各個預(yù)測類別的概率之和為1；

特征生成子單元，用于基于預(yù)先定義的圖像類別關(guān)聯(lián)關(guān)系、以及所述初始分割結(jié)果，顯式地建模目標圖像中的各圖像類別之間的邏輯關(guān)系，用于強化目標圖像中的場景特征，以生成所述目標圖像的第一強化場景特征；

其中，所述特征生成子單元在基于預(yù)先定義的圖像類別關(guān)聯(lián)關(guān)系、以及所述初始分割結(jié)果，生成所述目標圖像的第一強化場景特征時，具體用于：

根據(jù)預(yù)先定義的圖像類別關(guān)聯(lián)關(guān)系、所述目標圖像中的每一分割位置對應(yīng)的各個預(yù)測類別、以及所述初始場景特征中的屬于每一分割位置的場景特征和/或每一分割位置的周邊場景的場景特征，做加權(quán)圖卷積操作，生成所述目標圖像的第一強化場景特征。