[發明專利]一種手語翻譯方法、裝置、計算機設備及存儲介質

在審

• 申請號: 202011122840.7
• 申請日: 2020-10-20
• 公開（公告）號: CN112256827A
• 公開（公告）日: 2021-01-22
• 發明（設計）人: 洪振厚;王健宗;瞿曉陽
• 申請（專利權）人: 平安科技（深圳）有限公司
• 主分類號: G06F16/33
• 分類號: G06F16/33;G06F16/635;G06F40/30;G06N3/04;G06N3/08;G06K9/00
• 代理公司: 北京英特普羅知識產權代理有限公司 11015
• 代理人: 程超

1.一種手語翻譯方法，其特征在于，包括：

獲取用戶發送的攜帶區域信息的手語數據；

根據所述區域信息選擇與預設區域范圍關聯的翻譯模型組；

其中，每一所述翻譯模型組關聯一預設區域范圍，所述翻譯模型組包括至少兩個翻譯模型；

采用所述翻譯模型組中的所述翻譯模型對所述手語數據進行翻譯，獲取翻譯數據；

將所述翻譯數據轉換為音頻數據。

2.根據權利要求1所述的手語翻譯方法，其特征在于，根據所述區域信息選擇與預設區域范圍關聯的翻譯模型組，包括：

將所述區域信息與多個預設區域范圍進行匹配，以獲取與所述區域信息匹配的所述預設區域范圍；

獲取與所述預設區域范圍關聯的所述翻譯模型組。

3.根據權利要求1所述的手語翻譯方法，其特征在于，根據所述區域信息選擇與所述區域信息關聯的翻譯模型組，之前還包括：

獲取與所述區域信息關聯的訓練樣本集合和與區域信息關聯的測試樣本集合；

采用所述訓練樣本集合對初始分類模型組中的每一個初始分類模型分別進行訓練；

采用所述測試樣本集合對訓練后的每一個所述初始分類模型進行測試，若測試結果符合預設要求，則將訓練后的所述初始分類模型作為翻譯模型；

每一個與所述區域信息關聯的翻譯模型組包括多個所述翻譯模型。

4.根據權利要求1所述的手語翻譯方法，其特征在于，采用所述翻譯模型組中的所述翻譯模型對所述手語數據進行翻譯，獲取翻譯數據，包括：

分別采用所述翻譯模型組中的每一個所述翻譯模型對所述手語數據進行翻譯，以獲取語義概率；

將所有所述語義概率中最高的語義概率對應的語義數據作為翻譯數據。

5.根據權利要求4所述的手語翻譯方法，其特征在于，采用所述翻譯模型組中的每一個翻譯模型對所述手語數據進行翻譯，以獲取語義概率，包括：

所述手語數據包括EMG信號；

提取所述手語數據中的EMG信號，采用算分平均的方式對所述EMG信號進行降噪，并對降噪后的信號進行切割以獲取特征數據；

將所述特征數據輸入所述翻譯模型，通過所述翻譯模型對所述特征數據進行識別以獲取所述語義概率。

6.根據權利要求1所述的手語翻譯方法，將所述翻譯數據轉換為音頻數據，其特征在于，包括：

將所述翻譯數據映射到預設手語語音庫，獲取與所述翻譯數據匹配的音頻數據；

其中，所述預設手語語音庫包括：翻譯數據及與所述翻譯數據關聯的音頻數據。

7.根據權利要求1所述的手語翻譯方法，將所述翻譯數據轉換為音頻數據，其特征在于，包括：

識別所述翻譯數據的語義信息，采用語音轉換器將所述語義信息轉換為所述音頻數據。

8.一種手語翻譯裝置，其特征在于，包括：

獲取單元，用于獲取用戶發送的攜帶區域信息的手語數據；

模型選擇單元，根據所述區域信息選擇與預設區域范圍關聯的翻譯模型組；

翻譯單元，用于采用所述翻譯模型組中的所述翻譯模型對所述手語數據進行翻譯，獲取翻譯數據；

轉換單元，用于將所述翻譯數據轉換為音頻數據。

9.一種計算機設備，其特征在于，所述計算機設備包括存儲器、處理器以及存儲在存儲器上并可在處理器上運行的計算機程序，所述處理器執行所述計算機程序時實現權利要求1至7任一項所述方法的步驟。

10.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，所述計算機程序被處理器執行時實現權利要求1至7任一項所述方法的步驟。