[發明專利]漢語與外語自動實時語音翻譯并標注字幕的音像錄播設備

在審

• 申請號: 201310241861.4
• 申請日: 2013-06-18
• 公開（公告）號: CN103309855A
• 公開（公告）日: 2013-09-18
• 發明（設計）人: 不公告發明人
• 申請（專利權）人: 江蘇華音信息科技有限公司
• 主分類號: G06F17/28
• 分類號: G06F17/28;G11B27/10
• 代理公司: 暫無信息
• 代理人: 暫無信息

技術領域

本技術方案屬于語音和圖像數據處理設備技術領域。

背景技術

目前市面上的漢語或外語有聲影像資料的漢字或外文或其對照字幕疊加，一般通過人工方式將漢語或外語有聲影像資料中的漢語或外語轉換成漢字或外文，再交給視頻畫面或影像畫面字幕疊加機將表達漢語意思的漢字字幕疊加在視頻畫面或影像畫面上，同時通過翻譯將漢語翻譯成外語或反之將外語翻譯成漢語，再通過配音人員將語音配到同步的視頻畫面或影像畫面上，由于存在大量實時或非實時的漢語或世界各地的外語有聲影像資料，包括電視錄像和電影等有聲影像資料，因此，如果單靠采用人工轉換的方式會很費工費時而且很難做到實時傳輸，隨著數字有聲影像技術的出現，特別是計算機系統用于處理視頻影像資料的技術出現，越來越需要有一種能自動實時將漢語或外語語音的音像分別相互轉換成外語或漢語語音并加注字幕的技術出現，而且這種能自動根據漢語或外語語音實時轉換成漢語或外語字幕的技術不但能在帶漢字系統的計算機系統中運行，還能再不帶漢字系統只帶128個字符的ASCII碼系統的以美國為代表的西方國家的計算機系統中運行，以滿足世界互聯網的日益廣泛的運用和云計算、物聯網以及世界各地漢語熱的出現，中西文化交流越來越頻繁的新形勢的需要。

發明內容

本技術方案的提出就是為了解決上述出現這些問題。具體來說本技術方案通過采用以下的漢語與外語自動實時語音翻譯并標注字幕的音像錄播設備的技術來解決上述出現的問題：

本技術方案采用的錄播設備,?其特征是：包括話筒和攝像機模塊１、音視頻同步信號標記模塊２、有聲語言音頻信號提取模塊3、漢語語音識別模塊4、漢語翻譯成外語的機器翻譯模塊5、視頻畫面或影像畫面字幕疊加機模塊6、外語語音合成模塊7、音視頻編碼壓縮模塊8、網絡傳輸模塊9、帶音視頻解碼解壓縮軟件服務器模塊10、網絡傳輸模塊11、帶音視頻音像播放軟件的客戶端模塊12、外語語音識別模塊13、外語翻譯成漢語的機器翻譯模塊14、漢語語音合成模塊15。?

本技術方案采用的錄播設備工作時按以下步驟進行:在現場實時漢語語音音像錄播時，所述錄播設備通過話筒和攝像機模塊１，將漢語語音及現場場景錄入并儲存到所述的錄播設備系統中，系統中的計算機首先通過音視頻同步信號標記模塊２做好通過上述攝像機模塊１攝制的影像資料中視頻畫面或影像畫面與上述話筒錄制的對應的漢語有聲語言的音頻信號同步信號標記并儲存在音像錄播設備的儲存系統中,然后將帶同步信號標記的有聲語言的音頻信號通過有聲語言音頻信號提取模塊3提取出來，帶同步信號標記的漢語有聲語言的音頻信號提取出來后再傳給計算機中的漢語語音識別模塊4，漢語語音識別模塊4將漢語語音識別成帶與所識別的漢語語音相同同步信號標記的用26個拉丁字母表示的漢語語音碼,再通過漢語翻譯成外語的機器翻譯模塊5將上述漢語語音碼翻譯成用26個拉丁字母表示的與對應漢語語音碼句子具有相同同步信號標記的指定的外文句子,?再將上述帶同步信號標記的漢語語音碼字幕或外文字幕或它們對照文本字幕傳輸給現有的視頻畫面或影像畫面字幕疊加機模塊6，根據漢語語音碼字幕或外文字幕或它們對照文本字幕與視頻畫面或影像畫面同步信號標記的對應關系將字幕信息疊加在視頻畫面或影像畫面上,同時將上述翻譯成帶同步信號標記的指定的外文句子,通過外語語音合成模塊7合成成相應的帶同步信號標記的外語語音，然后與具有相同同步信號標記的帶中外文字幕的視頻畫面或影像畫面合成在一起并通過上述音視頻編碼壓縮模塊8進行編碼和壓縮，經上述編碼和壓縮后再傳輸給網絡傳輸模塊9，再由網絡傳輸模塊9將編碼和壓縮后的上述具有相同同步信號標記的帶中外文字幕和外語語音的視頻畫面或影像畫面傳輸到寬帶網絡，寬帶網絡將其傳輸到指定的帶音視頻解碼解壓縮軟件服務器模塊10上進行儲存，帶音視頻音像播放軟件的客戶端模塊12通過網絡傳輸模塊11登陸到上述帶音視頻解碼解壓縮軟件服務器模塊10就可以實時觀看上述現場實時帶中外文字幕和外語語音的視頻影像資料畫面；