[發明專利]用于執行醫療手術并且用于訪問和/或操縱醫學相關信息的方法和系統

有效

• 申請號: 201580052437.2
• 申請日: 2015-08-13
• 公開（公告）號: CN106922190B
• 公開（公告）日: 2020-09-18
• 發明（設計）人: 尼馬·茲拉克內賈德;貝倫格·霍馬永;彼得·勞倫斯;戴維·明正·劉
• 申請（專利權）人: 不列顛哥倫比亞大學
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/042;G06F3/0482;G06F3/0484;G06F3/0485;G06F3/0488;G16H40/60;G16H40/63;A61B90/00;A61G13/10
• 代理公司: 北京京萬通知識產權代理有限公司 11440
• 代理人: 許天易

1.一種用于允許醫師在醫療手術期間與包括醫學相關信息的圖像交互的系統，所述系統包括：

投影儀，其用于將用戶界面菜單圖像投影到投影表面上；所述用戶界面菜單圖像包括多個用戶界面圖像分區，每個用戶界面圖像分區占用所述用戶界面菜單圖像的不同部分并且與對應功能性相關聯；

三維光學成像系統，其用于捕捉包括所述投影表面的感測體積中的物體的三維位置信息；

控制器，其被連接以接收來自所述三維光學成像系統的所述三維位置信息并且配置成：

將所述三維位置信息解釋為估計在所述三維光學成像系統和所述投影表面之間的空間中的所述醫師的手的位置；并且

將所述醫師的所述手的位置解釋為僅根據相對于所述用戶界面圖像分區中的一個特定的用戶界面圖像分區的所述手的位置并且將所述手的位置與由距所述投影表面的距離限定的一個或多個閾值表面比較，來從所述多個用戶界面圖像分區中的一個特定用戶界面圖像分區和所述對應功能性中選擇；以及

顯示器，用于顯示包括醫學相關信息的圖像；

其中基于由所述三維光學成像系統捕捉的所述位置信息且在將所述醫師的手的位置解釋為對所述多個用戶界面圖像分區中的一個特定用戶界面圖像分區和所述對應功能性的所述選擇之后，所述控制器還配置成將所述醫師的手做出的一個或多個包含運動的手勢解釋為表示一個或多個對應命令，以操縱所顯示的所述包括醫學相關信息的圖像；

其中所述控制器配置成通過以下做法將所述一個或多個手勢解釋為表示一個或多個對應命令：

使所述投影儀將子菜單圖像投影到所述投影表面上，所述子菜單圖像包括多個子菜單界面分區，每個子菜單界面分區占用與所述一個或多個對應命令中的一個對應命令相關聯的所述子菜單圖像的不同部分；以及

將所述一個或多個手勢解釋為包括基于所述一個或多個手勢相對于所述子菜單界面分區中的一個特定子菜單界面分區的位置對所述子菜單界面分區中的一個特定子菜單界面分區和所述一個或多個對應命令中的一個對應命令的選擇；

其中，所述控制器配置成使得所述顯示器顯示所述一個或多個對應命令中的一個對應命令，由此根據所述一個或多個對應命令中的一個對應命令操縱所顯示的包括醫學相關信息的圖像；

其中，所述一個或多個手勢包括將所述醫師的一只手移動至在所述投影表面的閾值距離內的位置；所述閾值距離相對于與所述投影表面相關聯的參考點而確定，所述參考點包括所述投影表面上最接近所述三維光學成像系統的點；所述閾值距離相對于與所述投影表面相關聯的參考點而確定，所述參考點包括所述投影表面上的多個點的平均值；所述閾值距離基于在所述感測體積中病床的檢測相對于所述投影表面的所述位置的估計值而確定。

2.根據權利要求1所述的系統，其中所述投影儀、所述三維光學成像系統和所述顯示器位于正在其中執行所述醫療手術的無菌環境中。

3.根據權利要求1所述的系統，其中所述投影表面包括水平表面。

4.根據權利要求1所述的系統，其中所述投影表面包括正在進行所述醫療手術的患者位于其上的手術臺的一部分。

5.根據權利要求1所述的系統，其中所述投影表面包括夾持所述醫療手術中使用的儀器的邊桌的水平表面。

6.根據權利要求1所述的系統，其中所述控制器被連接至所述投影儀并且被配置成：使所述投影儀從關閉狀態向開啟狀態切換；在該關閉狀態，所述投影儀不將所述用戶界面菜單圖像投影到所述投影表面，在該開啟狀態，所述投影儀將所述用戶界面菜單圖像投影到所述投影表面；先至少部分地根據檢測到所述醫師的手位于所述感測體積中的觸發位置處，再將所述投影儀切換到所述開啟狀態，所述觸發位置小于離開所述投影表面的所述閾值距離。

7.根據權利要求1所述的系統，其中每個用戶界面圖像分區包括與其對應功能性相關聯的顯示的圖形或文本。

8.根據權利要求1所述的系統，其中所述控制器配置成將所述醫師的手的位置解釋為基于所述手在所述多個用戶界面圖像分區中的特定一個用戶界面圖像分區上方的位置對所述多個用戶界面圖像分區中的一個特定用戶界面圖像分區和所述對應功能性的選擇。