[發(fā)明專利]翻譯方法、裝置、介質(zhì)和近眼顯示設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 202110380356.2
• 申請(qǐng)日: 2021-04-09
• 公開（公告）號(hào): CN112764549B
• 公開（公告）日: 2021-08-06
• 發(fā)明（設(shè)計(jì)）人: 梁祥龍;黃海;劉彥婷;孫樹成;謝天豪
• 申請(qǐng)（專利權(quán)）人: 北京亮亮視野科技有限公司
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01;G06K9/00;G06K9/20;G06F40/58;G10L13/04;G02B27/01
• 代理公司: 北京律智知識(shí)產(chǎn)權(quán)代理有限公司 11438
• 代理人: 孫寶海;闞梓瑄

本公開提供一種翻譯方法、裝置、介質(zhì)和近眼顯示設(shè)備。其中，翻譯方法包括：在獲取到待翻譯的信息時(shí)，調(diào)用目標(biāo)語種的翻譯模型對(duì)所述待翻譯的信息進(jìn)行翻譯，得到翻譯文本；獲取所述待翻譯的信息的源特征，確定與所述源特征匹配的所述翻譯文本的渲染方式；基于所述渲染方式將所述翻譯文本顯示在所述近眼顯示設(shè)備上。通過本公開實(shí)施例提供的技術(shù)方案，翻譯文本的渲染方式與獲取到的源特征對(duì)應(yīng)，能夠保證翻譯文本的顯示和聲源之間的適應(yīng)性，進(jìn)而優(yōu)化翻譯文本在近眼顯示設(shè)備上的顯示效果，對(duì)應(yīng)地，有利于提升用戶對(duì)翻譯文本的查閱體驗(yàn)。

技術(shù)領(lǐng)域

本公開涉及近眼顯示技術(shù)領(lǐng)域，具體而言，涉及一種翻譯方法、裝置、計(jì)算機(jī)可存儲(chǔ)介質(zhì)和近眼顯示設(shè)備。

背景技術(shù)

翻譯設(shè)備將采集到的發(fā)聲者的語句進(jìn)行翻譯，將翻譯后的文本轉(zhuǎn)化為音頻文件或視頻文件向使用者播放，相關(guān)技術(shù)中，作為翻譯文本的一種展示方式，可以把翻譯的文字顯示在會(huì)場(chǎng)的大屏幕上，供觀眾觀看，但是該方式需要觀眾一直觀看屏幕，不但場(chǎng)景受限，而且觀眾的體驗(yàn)不佳。

需要說明的是，在上述背景技術(shù)分公開的信息僅用于加強(qiáng)對(duì)本公開的背景的理解，因此可以包括不構(gòu)成對(duì)本領(lǐng)域普通技術(shù)人員已知的現(xiàn)有技術(shù)的信息。

發(fā)明內(nèi)容

本公開的目的在于提供一種翻譯方法、翻譯裝置、介質(zhì)和近眼顯示設(shè)備，用于至少在一定程度上克服由于相關(guān)技術(shù)的限制和缺陷而導(dǎo)致的用戶對(duì)翻譯文本觀感不佳的問題。

根據(jù)本公開實(shí)施例的一方面，提供一種翻譯方法，包括：在獲取到待翻譯的信息時(shí)，調(diào)用目標(biāo)語種的翻譯模型對(duì)所述待翻譯的信息進(jìn)行翻譯，得到翻譯文本；獲取所述待翻譯的信息的源特征，確定與所述源特征匹配的所述翻譯文本的渲染方式；基于所述渲染方式將所述翻譯文本顯示在所述近眼顯示設(shè)備上。

在本公開的一種示例性實(shí)施例中，所述獲取所述待翻譯的信息的源特征，確定與所述源特征匹配的所述翻譯文本的渲染方式包括：采集所述近眼顯示設(shè)備的視窗范圍圖像；對(duì)所述視窗范圍圖像進(jìn)行人臉識(shí)別，基于所述人臉識(shí)別的結(jié)果確定所述待翻譯的信息的信息源；將采集到的所述信息源的視覺特征確定為所述源特征，以確定與所述視覺特征匹配的所述渲染方式。

在本公開的一種示例性實(shí)施例中，所述將采集到的所述信息源的視覺特征確定為所述源特征，以確定與所述視覺特征匹配的所述渲染方式包括：基于所述視覺特征檢測(cè)與所述信息源之間的距離；基于所述距離確定所述翻譯文本的顯示尺寸；基于所述顯示尺寸對(duì)所述翻譯文本進(jìn)行顯示渲染。

在本公開的一種示例性實(shí)施例中，所述將采集到的所述信息源的視覺特征確定為所述源特征，以確定與所述視覺特征匹配的所述渲染方式包括：在確定所述信息源的所述視覺特征時(shí)，基于所述視覺特征采集所述信息源的動(dòng)作信息和表情信息；基于所述動(dòng)作信息確定所述翻譯文本的顯示時(shí)刻和消隱時(shí)刻；以及確定與所述表情信息匹配的顯示風(fēng)格；基于所述顯示時(shí)刻、消隱時(shí)刻以及所述顯示風(fēng)格對(duì)所述翻譯文本進(jìn)行顯示渲染。

在本公開的一種示例性實(shí)施例中，所述基于所述渲染方式將所述翻譯文本顯示在所述近眼顯示設(shè)備上還包括：基于所述待翻譯的信息的聲音相位和/或源圖像特征確定所述待翻譯的信息的信息源在空間坐標(biāo)系中的位置信息；基于所述近眼顯示設(shè)備的顯示坐標(biāo)系和空間坐標(biāo)系之間的映射關(guān)系，將顯示在所述近眼顯示設(shè)備上的所述翻譯文本基于所述位置信息映射到所述信息源的位置上。

在本公開的一種示例性實(shí)施例中，所述基于所述近眼顯示設(shè)備的顯示坐標(biāo)系和空間坐標(biāo)系之間的映射關(guān)系與所述位置信息，將顯示在所述近眼顯示設(shè)備上的所述翻譯文本，映射到所述信息源的位置上，還包括：所述位置信息包括與所述信息源之間的距離，基于所述距離調(diào)整所述近眼顯示設(shè)備的顯示焦平面；使所述翻譯文本顯示在調(diào)整后的所述焦平面上。