[發明專利]基于醫學影像的術中輔助顯示方法、裝置及存儲介質

在審

• 申請號: 202111672787.2
• 申請日: 2021-12-31
• 公開（公告）號: CN114334096A
• 公開（公告）日: 2022-04-12
• 發明（設計）人: 戴亞康;耿辰;戴斌;李慧;李鳳美;周志勇
• 申請（專利權）人: 蘇州國科康成醫療科技有限公司
• 主分類號: G16H30/20
• 分類號: G16H30/20;G16H20/40;G16H40/60;G06T17/00
• 代理公司: 北京三聚陽光知識產權代理有限公司 11250
• 代理人: 穆瑞丹

1.一種基于醫學影像的術中輔助顯示方法，其特征在于，包括：

根據獲取到的目標CT影像信息，生成三維重建模型；

根據所述三維重建模型，生成不同人體組織對應的虛擬組織；

在所述三維重建模型中生成用于進行模擬手術的虛擬手術器械；

接收用戶對所述虛擬手術器械的操作指令，執行對所三維重建模型中的目標虛擬組織的模擬手術，并記錄所述模擬手術過程信息；

在進行實際手術過程中，顯示所述模擬手術過程信息，以供用戶進行手術指導。

2.根據權利要求1所述的基于醫學影像的術中輔助顯示方法，其特征在于，還包括：

識別所述用戶的手部位置，在所述三維重建模型中生成相匹配的模擬手；

其中，所述接收用戶對所述虛擬手術器械的操作指令，執行對所三維重建模型中的目標虛擬組織的模擬手術，并記錄所述模擬手術過程信息，包括：

實時采集所述用戶手持手術器械進行模擬手術的過程圖像，在所述三維重建模型中生成與之相一致的模擬手術過程信息。

3.根據權利要求2所述的基于醫學影像的術中輔助顯示方法，其特征在于，還包括：

接收用戶的語音命令，其中，所述語音命令用于對所述模擬手術過程的模擬手術位置進行糾偏。

4.根據權利要求2所述的基于醫學影像的術中輔助顯示方法，其特征在于，所述目標CT影像信息中攜帶有貼片標記，其中，所述貼片標記為在進行人體CT掃描時貼附在人體相應位置處的光學標記貼片在影像上的點位；所述方法還包括：

在進行實際手術過程中，利用攝像機采集人體圖像；

將所述攝像機捕捉到的貼片位置與所述目標CT影像信息中的貼片標記進行位置配準；

在配準完成后，基于所述攝像機坐標系與空間坐標系下的轉換關系，得到CT影像信息中的所述攝像機的坐標系與真實空間坐標系的轉換關系，并實現對三維重建模型在真實世界位置的換算；

基于換算結果，在所述攝像機真實坐標位置相對于三維重建模型在真實世界位置發生改變時，確定對應CT影像信息中的所述攝像機的坐標信息，并根據所述CT影像信息中的所述攝像機的坐標信息，渲染顯示內容。

5.根據權利要求2所述的基于醫學影像的術中輔助顯示方法，其特征在于，所述根據獲取到的目標CT影像信息，生成三維重建模型，包括：

利用所述目標CT影像信息對所述虛擬組織進行分割，得到不同虛擬組織的影像信息；

對分割后的虛擬組織進行顏色標定和名稱標記，其中，不同虛擬組織標定的顏色不同。

6.一種基于醫學影像的術中輔助顯示裝置，其特征在于，包括：

第一生成模塊，用于根據獲取到的目標CT影像信息，生成三維重建模型；

第二生成模塊，用于根據所述三維重建模型，生成不同人體組織對應的虛擬組織；

第三生成模塊，用于在所述三維重建模型中生成用于進行模擬手術的虛擬手術器械；

記錄模塊，用于接收用戶對所述虛擬手術器械的操作指令，執行對所三維重建模型中的目標虛擬組織的模擬手術，并記錄所述模擬手術過程信息；

顯示模塊，用于在進行實際手術過程中，顯示所述模擬手術過程信息，以供用戶進行手術指導。

7.一種基于醫學影像的術中輔助顯示系統，其特征在于，包括：

影像處理器，用于根據獲取到的目標CT影像信息，生成三維重建模型；根據所述三維重建模型，生成不同人體組織對應的虛擬組織；在所述三維重建模型中生成用于進行模擬手術的虛擬手術器械；接收用戶對所述虛擬手術器械的操作指令，執行對所三維重建模型中的目標虛擬組織的模擬手術，并記錄所述模擬手術過程信息；

裸眼3D顯示器，與所述影像處理器連接，用于顯示虛擬手術器械以及對所三維重建模型中的目標虛擬組織的模擬手術過程；

識別模塊，與所述影像處理器連接，用于接收用戶對所述虛擬手術器械的操作指令，執行對所三維重建模型中的目標虛擬組織的模擬手術；

融合顯示屏，與所述影像處理器連接，在進行實際手術過程中，顯示所述模擬手術過程信息，以供用戶進行手術指導。