[發明專利]一種增強現實裝配工藝指導系統及方法

在審

• 申請號: 201910574832.7
• 申請日: 2019-06-28
• 公開（公告）號: CN110299138A
• 公開（公告）日: 2019-10-01
• 發明（設計）人: 董瓊;李斌;蔣科;董劍
• 申請（專利權）人: 北京機械設備研究所
• 主分類號: G10L15/22
• 分類號: G10L15/22;G10L25/51
• 代理公司: 北京天達知識產權代理事務所(普通合伙) 11386
• 代理人: 李明里;叢洪杰

1.一種增強現實裝配工藝指導系統，其特征在于，所述增強現實裝配工藝指導系統包括：語音交互系統和指導交互系統；其中，

所述語音交互系統，用于接收并識別裝配人員輸入的語音，得到語音識別結果，并將所述語音識別結果發送至所述指導交互系統；

所述指導交互系統，用于接收所述語音識別結果，判斷所述語音識別結果是否為當前虛擬裝配環境中可執行的語音控制指令，若是，則直接執行所述語音識別結果；若否，則確定可執行所述語音識別結果的虛擬裝配環境，并切換至所述可執行所述語音識別結果的虛擬裝配環境，在切換后的虛擬裝配環境中執行所述語音識別結果；

所述指導交互系統的虛擬裝配環境包括初始場景、裝配場景、裝配成品虛擬使用場景。

2.根據權利要求1所述的增強現實裝配工藝指導系統，其特征在于，

所述初始場景下可執行的語音控制指令至少包括以下一種或多種：操作說明、開始裝配、裝配演示、成品檢測演示；

所述裝配場景下可執行的語音控制指令至少包括以下一種或多種：所述增強現實裝配過程中所需的各個裝配零件、上一步、下一步、重置、返回；

所述裝配成品虛擬使用場景下可執行的語音控制指令根據裝配成品的功能對應設置。

3.根據權利要求1或2中任一項所述的增強現實裝配工藝指導系統，其特征在于，所述語音交互系統包括：語音交互服務模塊、語音識別模塊、詞典管理模塊；其中，

所述詞典管理模塊中預存有包含語法文件，所述語法文件中僅存儲所述增強現實裝配工藝中用到的所有語音控制指令；

所述語音交互服務模塊與所述語音識別模塊相連，用于當檢測到有語音輸入時，接收并存儲輸入的所述語音，并將所述語音發送至所述語音識別模塊，由所述語音識別模塊生成識別結果；所述語音交互服務模塊還用于將所述識別結果發送至所述指導交互系統；

所述語音識別模塊與所述詞典管理模塊相連，用于將接收到的所述語音轉換成特征詞，并與所述詞典管理模塊中預存的語音控制指令進行路徑匹配，將匹配分數最高的目標識別詞作為識別結果。

4.根據權利要求3所述的增強現實裝配工藝指導系統，其特征在于，若所述特征詞與所述語音控制指令的匹配分數低于預定值，則所述語音識別模塊無法得到語音識別結果，所述語音識別模塊向所述語音交互服務模塊反饋語音無法識別指令，由所述語音交互服務模塊向所述裝配人員進行反饋播報。

5.根據權利要求4所述的增強現實裝配工藝指導系統，其特征在于，若所述語音交互系統連續N次無法識別裝配人員輸入的語音，所述語音交互服務模塊調用所述詞典管理模塊中預存的語法文件，向所述裝配人員語音播報所述增強現實裝配工藝中用到的所有語音控制指令。

6.根據權利要求3所述的增強現實裝配工藝指導系統，其特征在于，所述語音交互系統還包括音頻協調模塊，用于監控所述語音交互服務模塊接收到的語音輸入，當所述語音輸入模糊或不清晰時，所述音頻協調模塊控制所述語音交互服務模塊發出重新輸入語音的指令，并控制所述語音交互服務模塊重新接收語音輸入。

7.根據權利要求1所述的增強現實裝配工藝指導系統，其特征在于，所述增強現實裝配工藝指導系統集成于頭戴式眼鏡中，所述頭戴式眼鏡包括音頻設備，所述音頻設備包括麥克風與耳機，所述音頻設備與所述語音交互服務模塊相連。

8.根據權利要求1所述的增強現實裝配工藝指導系統，其特征在于，增強現實裝配工藝指導系統還包括語音交互喚醒鍵，用于喚醒所述語音交互系統。