[發明專利]漢語外語有聲影像資料雙向可逆語音轉換并加注字幕方法

在審

• 申請號: 201210523616.8
• 申請日: 2012-12-08
• 公開（公告）號: CN103854648A
• 公開（公告）日: 2014-06-11
• 發明（設計）人: 苗玉水
• 申請（專利權）人: 上海能感物聯網有限公司
• 主分類號: G10L15/26
• 分類號: G10L15/26;H04N21/8547
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種漢語外語有聲影像資料雙向可逆語音轉換并加注字幕方法,其特征是:?在將漢語語音影像資料轉變成外語語音并加注字幕的影像資料時,?首先通過傳統計算機軟件做好影像資料中視頻畫面或影像畫面與對應的有聲語言的音頻信號同步信號標記,然后將帶同步信號標記的有聲語言的音頻信號提取出來傳給計算機中的漢語語音識別模塊，漢語語音識別模塊將漢語語音識別成帶與所識別的漢語語音相同同步信號標記的用26個拉丁字母表示的漢語語音碼,再通過機器翻譯模塊將上述漢語語音碼翻譯成用26個拉丁字母表示的與對應漢語語音碼句子具有相同同步信號標記的指定的外文,?再將上述帶同步信號標記的漢語語音碼字幕或外文字幕或它們對照文本字幕傳輸給傳統的視頻畫面或影像畫面字幕疊加機，根據漢語語音碼字幕或外文字幕或它們對照文本字幕與視頻畫面或影像畫面同步信號標記的對應關系將字幕信息疊加在視頻畫面或影像畫面上,同時將上述翻譯成帶同步信號標記的指定的外文,通過語音合成模塊合成成相應的帶同步信號標記的外語語音并與具有相同同步信號標記的帶字幕的視頻畫面或影像畫面合成在一起儲存或同步輸出;?

在將外語語音影像資料轉變成漢語語音并加注字幕的影像資料時,?首先通過傳統計算機軟件做好影像資料中視頻畫面或影像畫面和對應的有聲語言的音頻信號同步信號標記,然后將帶同步信號標記的有聲語言的音頻信號提取出來傳給計算機中的外語語音識別模塊，外語語音識別模塊將外語語音識別成帶與所識別的外語語音具有相同同步信號標記的用26個拉丁字母表示的外文,再通過機器翻譯模塊將上述外文翻譯成用26個拉丁字母表示的與該對應外文句子具有相同同步信號標記的漢語語音碼句子,?再將上述帶同步信號標記的漢語語音碼字幕或外文字幕或它們對照文本字幕傳輸給傳統的視頻畫面或影像畫面字幕疊加機，根據漢語語音碼字幕或外文字幕或它們對照文本字幕與視頻畫面或影像畫面同步信號標記的對應關系將字幕信息疊加在視頻畫面或影像畫面上,同時將上述翻譯成帶同步信號標記的漢語語音碼句子,通過漢語語音合成模塊合成成相應的帶同步信號標記的漢語語音并與具有相同同步信號標記的帶字幕的視頻畫面或影像畫面合成在一起儲存或同步輸出。

2.如權利要求1所述的一種漢語外語有聲影像資料雙向可逆語音轉換并加注字幕方法,其特征是:所述的漢語語音碼是以單詞為單位，這里將單個漢字看作單音節詞，根據組成該單詞的每個音節的《漢語拼音方案》中的拼音，用且僅用26個拉丁字母對漢語拼音的聲母、介母、韻母、聲調采取先編碼再依次按“聲碼+介碼+韻碼+調碼兼隔音節符號”的順序編碼拼寫，并通過得到的語音碼的編碼直接表達漢語信息，當直接用語音碼編碼來表示漢語信息時，其標點符號的用法同英文的標點符號的用法相同，編碼時同一個單詞的多個音節不用空格連續編碼，單詞與單詞之間要有空格隔開。

3.如權利要求1或2所述的一種漢語外語有聲影像資料雙向可逆語音轉換并加注字幕方法,其特征是:所述的漢語語音碼是聲母全部用輔音拉丁字母表示，用于表示漢語信息的語音碼的聲母除了（zh）、（ch）、（sh）的聲母分別用j、q、x三個輔音拉丁字母表示外，其余的聲母用與漢語拼音相同符號的輔音拉丁字母表示，漢語拼音的（zhi）、（chi）、（shi）分別用語音碼的jr、qr、xr表示，漢語拼音的（er）用語音碼的er來表示，jr或qr或xr及er鍵盤輸入時分別按J和R或Q和R或X和R及E和R兩個鍵位輸入。

4.如權利要求1或2所述的一種漢語外語有聲影像資料雙向可逆語音轉換并加注字幕方法,其特征是:?所述的漢語語音碼用26個字母中的一個字母表示原來漢語拼音單韻母和介母中的（ü），其余單韻母和介母的編碼采用與漢語拼音單韻母和介母相同的符號。

5.如權利要求1或2所述的一種漢語外語有聲影像資料雙向可逆語音轉換并加注字幕方法，其特征是:所述的漢語語音碼用y來表示原來漢語拼音單韻母和介母中的（ü）。

6.如權利要求1或2所述的一種漢語外語有聲影像資料雙向可逆語音轉換并加注字幕方法,其特征是:所述的漢語語音碼除了部分帶有介母的復合韻母外，其余的復合韻母的韻碼用輔音字母表示。