[發(fā)明專利]超像素采樣網(wǎng)絡(luò)

在審

• 申請?zhí)枺?/td>: 201910333965.5
• 申請日: 2019-04-24
• 公開（公告）號: CN110428422A
• 公開（公告）日: 2019-11-08
• 發(fā)明（設(shè)計(jì)）人: V·揚(yáng)帕尼;孫德慶;劉洺堉;J·考茨
• 申請（專利權(quán)）人: 輝達(dá)公司
• 主分類號: G06T7/11
• 分類號: G06T7/11;G06T7/187;G06K9/62;G06N3/04
• 代理公司: 北京市磐華律師事務(wù)所 11336
• 代理人: 高偉;卜璐璐

1.一種超像素采樣網(wǎng)絡(luò)，包括：

神經(jīng)網(wǎng)絡(luò)；以及

與所述神經(jīng)網(wǎng)絡(luò)耦合的可微分簡單線性迭代聚類組件；

所述神經(jīng)網(wǎng)絡(luò)從圖像生成一組像素特征；以及

所述可微分簡單線性迭代聚類組件進(jìn)行：

確定初始超像素中心；

從所述一組像素特征和所述初始超像素中心確定像素-超像素關(guān)聯(lián)；

確定更新的超像素中心；以及

其中所述可微分簡單線性迭代聚類組件操作多次迭代，每次迭代利用所述更新的超像素中心來計(jì)算所述像素-超像素關(guān)聯(lián)，所述可微分簡單線性迭代聚類組件輸出具有最終像素-超像素關(guān)聯(lián)的所述圖像。

2.如權(quán)利要求1所述的超像素采樣網(wǎng)絡(luò)，其中所述神經(jīng)網(wǎng)絡(luò)和所述可微分簡單線性迭代聚類組件是端到端可訓(xùn)練的，所述可微分簡單線性迭代聚類組件利用軟像素-超像素關(guān)聯(lián)。

3.如權(quán)利要求2所述的超像素采樣網(wǎng)絡(luò)，其中所述可微分簡單線性迭代聚類組件還將所述軟像素-超像素關(guān)聯(lián)轉(zhuǎn)換為硬像素-超像素關(guān)聯(lián)。

4.如權(quán)利要求1所述的超像素采樣網(wǎng)絡(luò)，其中所述像素-超像素關(guān)聯(lián)由下式確定：

5.如權(quán)利要求1所述的超像素采樣網(wǎng)絡(luò)，其中所述更新的超像素中心由下式確定：

6.如權(quán)利要求1所述的超像素采樣網(wǎng)絡(luò)，其中將所述最終像素-超像素關(guān)聯(lián)轉(zhuǎn)換為空間連接的像素-超像素關(guān)聯(lián)。

7.如權(quán)利要求1所述的超像素采樣網(wǎng)絡(luò)，其中所述可微分簡單線性迭代聚類組件利用重建損失函數(shù)。

8.如權(quán)利要求7所述的超像素采樣網(wǎng)絡(luò)，其中所述重建損失函數(shù)是：

9.如權(quán)利要求1所述的超像素采樣網(wǎng)絡(luò)，其中所述可微分簡單線性迭代聚類組件利用緊湊性損失函數(shù)。

10.如權(quán)利要求9所述的超像素采樣網(wǎng)絡(luò)，其中所述緊湊性損失函數(shù)為：

11.如權(quán)利要求1所述的超像素采樣網(wǎng)絡(luò)，其中所述可微分簡單線性迭代聚類組件進(jìn)一步利用緊湊性損失函數(shù)和重建損失函數(shù)之和。

12.如權(quán)利要求11所述的超像素采樣網(wǎng)絡(luò)，其中所述緊湊性損失函數(shù)按級數(shù)10^-5的系數(shù)縮放。

13.如權(quán)利要求1所述的超像素采樣網(wǎng)絡(luò)，其中所述初始超像素中心在所述圖像上均勻確定。

14.如權(quán)利要求1所述的超像素采樣網(wǎng)絡(luò)，其中迭代次數(shù)基于當(dāng)前迭代的所述像素-超像素關(guān)聯(lián)與先前迭代的所述像素-超像素關(guān)聯(lián)的收斂。

15.如權(quán)利要求1所述的超像素采樣網(wǎng)絡(luò)，其中所述可微分簡單線性迭代聚類組件進(jìn)一步確定低于閾值大小的小超像素，并將每個(gè)所述小超像素與周圍超像素合并，所述可微分簡單線性迭代聚類組件為每個(gè)空間連接組件分配不同的聚類ID。