[發(fā)明專利]一種圖像處理方法、圖像處理設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201811079790.1
• 申請(qǐng)日: 2018-09-15
• 公開（公告）號(hào): CN110910335B
• 公開（公告）日: 2023-02-24
• 發(fā)明（設(shè)計(jì)）人: 李曉川;夏清
• 申請(qǐng)（專利權(quán)）人: 北京市商湯科技開發(fā)有限公司
• 主分類號(hào): G06T5/50
• 分類號(hào): G06T5/50;G06T7/11;G06T17/00
• 代理公司: 廣州三環(huán)專利商標(biāo)代理有限公司 44202
• 代理人: 郝傳鑫;熊永強(qiáng)

1.一種圖像處理方法，其特征在于，所述方法包括：

獲取腦部圖像，所述腦部圖像為多模態(tài)三維圖像；

使用圖像處理模型處理所述腦部圖像，依次得到所述腦部圖像中的腫瘤整體圖像、腫瘤核圖像和增強(qiáng)腫瘤圖像，其中，所述圖像處理模型為多個(gè)二維圖像分割網(wǎng)絡(luò)和多個(gè)二點(diǎn)五維圖像分割網(wǎng)絡(luò)的級(jí)聯(lián)網(wǎng)絡(luò)，所述二點(diǎn)五維圖像分割網(wǎng)絡(luò)包括用于腫瘤核分割的第一二點(diǎn)五維圖像分割網(wǎng)絡(luò)以及用于增強(qiáng)腫瘤分割的第二二點(diǎn)五維圖像分割網(wǎng)絡(luò)；

輸出所述腫瘤整體圖像、腫瘤核圖像和增強(qiáng)腫瘤圖像；

其中，所述使用圖像處理模型處理所述腦部圖像，依次得到所述腦部圖像中的腫瘤整體圖像、腫瘤核圖像和增強(qiáng)腫瘤圖像，包括：

對(duì)所述腦部圖像進(jìn)行裁取得到二維圖像，利用所述二維圖像分割網(wǎng)絡(luò)對(duì)所述二維圖像進(jìn)行處理，得到所述腫瘤整體圖像；

基于所述腫瘤整體圖像對(duì)所述腦部圖像進(jìn)行裁取得到第一二點(diǎn)五維圖像，利用所述第一二點(diǎn)五維圖像分割網(wǎng)絡(luò)對(duì)所述第一二點(diǎn)五維圖像進(jìn)行處理，得到所述腫瘤核圖像；

根據(jù)所述腫瘤核圖像和所述腦部圖像得到增強(qiáng)腦部圖像，對(duì)所述增強(qiáng)腦部圖像進(jìn)行裁取得到第二二點(diǎn)五維圖像，利用所述第二二點(diǎn)五維圖像分割網(wǎng)絡(luò)對(duì)所述第二二點(diǎn)五維圖像進(jìn)行處理，得到所述增強(qiáng)腫瘤圖像。

2.根據(jù)權(quán)利要求1所述的圖像處理方法，其特征在于，所述對(duì)所述腦部圖像進(jìn)行裁取得到二維圖像，利用所述二維圖像分割網(wǎng)絡(luò)對(duì)所述二維圖像進(jìn)行處理，得到所述腫瘤整體圖像，包括：

從預(yù)設(shè)個(gè)數(shù)的方向上裁取所述腦部圖像，得到所述預(yù)設(shè)個(gè)數(shù)的二維圖像；

利用所述預(yù)設(shè)個(gè)數(shù)的二維圖像分割網(wǎng)絡(luò)分別對(duì)所述預(yù)設(shè)個(gè)數(shù)的二維圖像進(jìn)行處理，得到預(yù)設(shè)個(gè)數(shù)的二維分割圖像；

將所述預(yù)設(shè)個(gè)數(shù)的二維分割圖像融合在一起，得到所述腫瘤整體圖像。

3.根據(jù)權(quán)利要求1所述的圖像處理方法，其特征在于，所述基于所述腫瘤整體圖像對(duì)所述腦部圖像進(jìn)行裁取得到第一二點(diǎn)五維圖像，利用所述第一二點(diǎn)五維圖像分割網(wǎng)絡(luò)對(duì)所述第一二點(diǎn)五維圖像進(jìn)行處理，得到所述腫瘤核圖像，包括：

根據(jù)所述腫瘤整體圖像確定所述腦部圖像的中心點(diǎn)；

以所述腦部圖像的中心點(diǎn)為基準(zhǔn)點(diǎn)，從預(yù)設(shè)個(gè)數(shù)的方向上裁取所述腦部圖像，得到所述預(yù)設(shè)個(gè)數(shù)的第一二點(diǎn)五維圖像；

利用所述第一二點(diǎn)五維圖像分割網(wǎng)絡(luò)分別對(duì)所述預(yù)設(shè)個(gè)數(shù)的第一二點(diǎn)五維圖像進(jìn)行處理，得到預(yù)設(shè)個(gè)數(shù)的第一二點(diǎn)五維分割圖像；

將所述預(yù)設(shè)個(gè)數(shù)的第一二點(diǎn)五維分割圖像融合在一起，得到所述腫瘤核圖像。

4.根據(jù)權(quán)利要求1所述的圖像處理方法，其特征在于，所述根據(jù)所述腫瘤核圖像和所述腦部圖像得到增強(qiáng)腦部圖像，對(duì)所述增強(qiáng)腦部圖像進(jìn)行裁取得到第二二點(diǎn)五維圖像，利用所述第二二點(diǎn)五維圖像分割網(wǎng)絡(luò)對(duì)所述第二二點(diǎn)五維圖像進(jìn)行處理，得到所述增強(qiáng)腫瘤圖像，包括：

將所述腫瘤核圖像添加到所述腦部圖像中，得到增強(qiáng)腦部圖像；

從預(yù)設(shè)個(gè)數(shù)的方向上裁取所述增強(qiáng)腦部圖像，分別得到預(yù)設(shè)個(gè)數(shù)的第二二點(diǎn)五維圖像；

利用所述第二二點(diǎn)五維圖像分割網(wǎng)絡(luò)分別對(duì)所述預(yù)設(shè)個(gè)數(shù)的二點(diǎn)五維圖像進(jìn)行處理，得到預(yù)設(shè)個(gè)數(shù)的第二二點(diǎn)五維分割圖像；

將所述預(yù)設(shè)個(gè)數(shù)的第二二點(diǎn)五維分割圖像融合在一起，得到所述增強(qiáng)腫瘤圖像。

5.根據(jù)權(quán)利要求2至4任意一項(xiàng)所述的圖像處理方法，其特征在于，所述預(yù)設(shè)個(gè)數(shù)的方向，包括軸向、矢向和冠向中的至少一個(gè)。

6.根據(jù)權(quán)利要求1至4任意一項(xiàng)所述的圖像處理方法，其特征在于，所述輸出所述腫瘤整體圖像、腫瘤核圖像和增強(qiáng)腫瘤圖像之后，包括：

獲取反饋信息和損失函數(shù)；

根據(jù)所述反饋信息和所述損失函數(shù)計(jì)算得到損失；

利用所述損失對(duì)所述圖像處理模型進(jìn)行優(yōu)化。

7.根據(jù)權(quán)利要求1至4任意一項(xiàng)所述的圖像處理方法，其特征在于，所述輸出所述腫瘤整體圖像、腫瘤核圖像和增強(qiáng)腫瘤圖像之后，包括：

將所述腫瘤整體圖像、腫瘤核圖像和增強(qiáng)腫瘤圖像依次疊加在一起，得到腫瘤圖像。