[發明專利]用于交互式認知任務協助的系統和方法

有效

• 申請號: 201711210508.4
• 申請日: 2017-11-28
• 公開（公告）號: CN108228345B
• 公開（公告）日: 2023-06-02
• 發明（設計）人: W·J·伍德;M·H·博伊德;M·K·洛朗熱;D·H·硞蘇達
• 申請（專利權）人: 波音公司
• 主分類號: G06F9/50
• 分類號: G06F9/50;G06F9/48;G06Q10/20
• 代理公司: 北京紀凱知識產權代理有限公司 11245
• 代理人: 趙志剛;趙蓉民

1.一種提供指導以執行具有對工作站(102)處的物理結構(106)執行的至少一個步驟的任務的方法，其包括：

(a)在指導處理單元(104)中從執行實體(108)接收命令，所述命令調用所述任務；

(b)在所述指導處理單元(104)中根據所述命令確定所述至少一個步驟；

(c)從所述指導處理單元(104)向所述執行實體(108)傳輸說明所述至少一個步驟如何執行的指令數據；

(d)在所述指導處理單元(104)中接收由靠近所述物理結構(106)的傳感器(112)生成的實時傳感器數據，所述傳感器(112)被配置為生成能夠用于監視所述至少一個步驟的執行的數據；以及

(e)在所述指導處理單元(104)中根據所述實時傳感器數據計算與所述至少一個步驟的所述執行相關的執行度量，并且存儲所述執行度量；

其中根據所述實時傳感器數據計算與所述至少一個步驟的所述執行相關的所述執行度量包括：

使用所述實時傳感器數據生成反饋數據，其中所述反饋數據與對所述至少一個步驟的所述執行的反饋相關；

在執行所述至少一個步驟的同時，在所述工作站(102)處呈現所述反饋數據；以及

重復步驟(c)和(d)，直到所述至少一個步驟完成；

其中計算所述至少一個步驟的所述執行度量還包括：

將所述實時傳感器數據與閾值進行比較；

根據所述比較計算所述執行度量；以及

根據所述執行度量驗證所述至少一個步驟是如何執行的，

其中所述執行度量包括度量執行所述至少一個步驟的經過時間的數據，所述經過時間是根據所述閾值和所述實時傳感器數據來計算的。

2.根據權利要求1所述的方法，其進一步包括：

根據接收到的命令確定所述任務；以及

根據確定的任務確定所述至少一個步驟。

3.根據權利要求2所述的方法，其中：

根據所述接收到的命令確定所述任務包括：

使用自然語言解釋器根據所述接收到的命令生成數據庫查詢；

根據所述數據庫查詢來查詢數據庫以確定所述任務。

4.根據權利要求3所述的方法，其中：

所述任務是對所述物理結構(106)執行的多項任務中的一項；

根據當前背景數據進一步確定所述數據庫查詢，所述當前背景數據包括：

關于對所述物理結構(106)執行的所述多項任務中的其它任務的信息；以及

由物理結構(106)和所述工作站(102)的環境中的至少一個對所述任務施加的約束。

5.根據權利要求1到4中任一項所述的方法，其中說明所述至少一個步驟的執行的所述指令數據包括經由增強現實耳機(114B)在增強現實中呈現的所述至少一個步驟的視覺表示，其中所述實時傳感器數據描述所述物理結構(106)的狀態，并且其中所述實時傳感器數據描述用于執行所述至少一個步驟的工具(110)的狀態。

6.根據權利要求5所述的方法，其中所述傳感器(112)是觀察所述至少一個步驟的執行的可視傳感器，且所述實時傳感器數據包括視頻數據，并且其中所述傳感器(112)設置在用于執行所述至少一個步驟的所述工具(110)上。

7.根據權利要求1到4中任一項所述的方法，其中所述實時傳感器數據描述協作進行所述任務的裝置的狀態，其中所述數據描述執行所述任務的環境的狀態，并且其中所述命令是來自用戶的免手動命令。

8.一種用于提供指導以執行具有對工作站(102)處的物理結構(106)執行的至少一個步驟的任務的系統，其包括：

傳感器(112)和指導處理單元(104)，所述指導處理單元(104)包括通信地連接到存儲指令的存儲器(606)的處理器(604)，所述指令包括用于執行根據權利要求1到7中任一項所述的方法的指令。