[實用新型]一種基于增強現實和人工智能的雙向手語翻譯器

有效

• 申請號: 202023218168.X
• 申請日: 2020-12-28
• 公開（公告）號: CN213634995U
• 公開（公告）日: 2021-07-06
• 發明（設計）人: 黃志芳;李偉鑫;黃金泰;謝宋汕;宋世杰;魏潔鋒;李曉烽
• 申請（專利權）人: 嘉應學院
• 主分類號: G09B21/00
• 分類號: G09B21/00;G06F40/58;G10L15/26;H04B1/3827
• 代理公司: 廣州海心聯合專利代理事務所(普通合伙) 44295
• 代理人: 羅振國

本實用新型公開了一種基于增強現實和人工智能的雙向手語翻譯器；屬于翻譯設備技術領域；該翻譯器由供聾啞人使用的第一頭戴式終端和供健聽者使用的第二頭戴式終端組成；所述第一頭戴式終端包括第一主控電路及分別與第一主控電路連接的第一無線通訊模塊和第一顯示模組；所述第二頭戴式終端包括第二主控電路及分別與第二主控電路連接的第二無線通訊模塊、攝像頭和輸出模塊；本實用新型旨在提供一種能夠實現從聾啞人到健聽者和健聽者到聾啞人雙向翻譯的效果，通過AR顯示的特性，進而達到聾啞人與健聽者能夠直接無障礙面對面交流的基于增強現實和人工智能的雙向手語翻譯器。

技術領域

本實用新型涉及一種手語翻譯器，更具體地說，尤其涉及一種基于增強現實和人工智能的雙向手語翻譯器。

背景技術

世界衛生組織估計，全球約存在4.66億人患有殘疾性聽力損失，其中3400萬是兒童。此外，我國第二次殘疾人抽樣調查顯示，全國有殘疾人的家庭共7050萬戶，占全國家庭總戶數的17.80％，全國殘疾人口中，男性為4277萬人，占51.55％，女性為4019萬人，占48.46％。在這些基數巨大的人群中，人們通過手語進行交流。手語是聽力障礙者與他人傳遞的一種方法，它通過手語動作代替正常人聲音信號進行信息傳遞。手語通過手勢的變化模擬形象或者音節來表達一定意思或者詞語，這些手語動作包括了手指、手腕以及手肘的形狀和運動軌跡，甚至還包括面部表情和嘴唇形狀等。在健聽者的人群中，絕大多數人并不掌握手語或者不理解所有手語手勢，這造成了聾啞人群體和健聽者群體之間的交流帶來巨大的溝通障礙。再加上市面上大多數聾啞人翻譯設備是單向翻譯的，即把聾啞人手勢翻譯、顯示在顯示屏上，并且翻譯需要在特定場合進行或需要戴特定顏色的手套，非常不方便，且只能滿足單方面的需求。

為此，本實用新型通過對各類傳感器的綜合運用、對實驗數據進行合理分析、結合人工智能和深度卷積神經網絡，實現聾啞人到健聽者和健聽者到聾啞人的雙向翻譯設計。實現聾啞人與健聽者能夠直接、便捷、無障礙的面對面交流。

實用新型內容

本實用新型的目的在于針對上述現有技術的不足，提供一種能夠實現從聾啞人到健聽者和健聽者到聾啞人雙向翻譯的效果，通過AR顯示的特性，進而達到聾啞人與健聽者能夠直接無障礙面對面交流的基于增強現實和人工智能的雙向手語翻譯器。

本實用新型的技術方案是這樣實現的：一種基于增強現實和人工智能的雙向手語翻譯器，該翻譯器由供聾啞人使用的第一頭戴式終端和供健聽者使用的第二頭戴式終端組成；所述第一頭戴式終端包括第一主控電路及分別與第一主控電路連接的第一無線通訊模塊和第一顯示模組；所述第二頭戴式終端包括第二主控電路及分別與第二主控電路連接的第二無線通訊模塊、攝像頭和輸出模塊。

上述的一種基于增強現實和人工智能的雙向手語翻譯器中，所述第一頭戴式終端還包括第一眼鏡框，在第一眼鏡框一側鏡臂可拆卸連接有第一殼體；所述第一主控電路、第一無線通訊模塊和第一顯示模組設置在第一殼體內；第一殼體通過設置在第一殼體一側外壁的第一眼鏡臂插槽與第一眼鏡框一側鏡臂可拆卸連接；在第一殼體內設置有與第一主控電路電性連接的第一移動電源和與第一移動電源電性連接的第一充電電路；在第一主控電路上連接有STM32F407主控芯片和TF卡電路。

上述的一種基于增強現實和人工智能的雙向手語翻譯器中，所述第二頭戴式終端還包括第二眼鏡框，在第二眼鏡框一側鏡臂可拆卸連接有第二殼體；所述第二主控電路、第二無線通訊模塊、攝像頭和輸出模塊設置在第二殼體內；第二殼體通過設置在第二殼體一側外壁設置的第二眼鏡臂插槽與第二眼鏡框一側鏡臂可拆卸連接；在第二殼體內設置有與第二主控電路電性連接的第二移動電源和與第二移動電源電性連接的第二充電電路；所述第二主控電路上連接有STM32F103主控芯片，在第二殼體內設置有與第二主控電路電性連接的人工智能K210處理電路；所述攝像頭安裝在第二殼體前端且與人工智能K210處理電路電性連接。