[發(fā)明專利]外語教學(xué)評價信息生成方法以及裝置

在審

• 申請?zhí)枺?/td>: 201810308933.5
• 申請日: 2018-04-09
• 公開（公告）號: CN108537702A
• 公開（公告）日: 2018-09-14
• 發(fā)明（設(shè)計）人: 陳鏗帆;楊寧;盧煬
• 申請（專利權(quán)）人: 深圳市鷹碩技術(shù)有限公司
• 主分類號: G06Q50/20
• 分類號: G06Q50/20;G09B5/06
• 代理公司: 北京和信華成知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11390
• 代理人: 胡劍輝

1.一種外語教學(xué)評價信息生成方法，其特征在于，所述方法包括：

輸出外語測試信息，檢測視頻采集設(shè)備采集的視頻信號，分別提取所述視頻信號中的視頻畫面信息以及音頻信息；

對所述視頻畫面信息中的用戶唇部進(jìn)行定位，并抓取所述用戶唇部的口型特征；

在預(yù)先建立的外語測試信息與發(fā)音信息模型中匹配與所述外語測試信息對應(yīng)的發(fā)音信息，所述發(fā)音信息包括標(biāo)準(zhǔn)發(fā)音以及標(biāo)準(zhǔn)口型特征；

計算所述用戶唇部的口型特征與匹配到的所述標(biāo)準(zhǔn)口型特征的第一特征偏差值，根據(jù)所述第一特征偏差值生成教學(xué)評價信息。

2.如權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

分析所述音頻信息，識別所述音頻信息中的用戶發(fā)音；

計算所述用戶發(fā)音與匹配到的所述標(biāo)準(zhǔn)發(fā)音的第二特征偏差值；

根據(jù)所述第一特征偏差值以及第二特征偏差值所述生成教學(xué)評價信息。

3.如權(quán)利要求2所述的方法，其特征在于，根據(jù)所述第一特征偏差值以及第二特征偏差值生成教學(xué)評價信息，包括：

根據(jù)所述第一特征偏差值生成得分信息；

將所述得分信息作為教學(xué)評價信息。

4.如權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

判斷所述第一特征偏差值是否滿足預(yù)設(shè)偏差條件；

若所述特征偏差值滿足預(yù)設(shè)偏差條件，根據(jù)所述第一特征偏差值生成教學(xué)評價信息，包括：

根據(jù)所述第一特征偏差值得到第一偏差信息；

根據(jù)所述第一偏差信息以及匹配到的標(biāo)準(zhǔn)發(fā)音以及標(biāo)準(zhǔn)口型特征生成教學(xué)評價信息。

5.如權(quán)利要求4所述的方法，其特征在于，所述方法還包括：

對滿足預(yù)設(shè)偏差條件的口型特征區(qū)域增加提示標(biāo)識；

根據(jù)所述增加提示標(biāo)識的口型特征生成教學(xué)評價信息，并控制所述教學(xué)評價信息在用戶顯示設(shè)備上顯示。

6.如權(quán)利要求1所述的方法，其特征在于，對所述視頻畫面信息中的用戶唇部進(jìn)行定位，包括：

識別并定位所述視頻畫面信息中的用戶面部輪廓；

對面部輪廓中指定區(qū)域使用唇色過濾器對用戶唇部進(jìn)行定位并跟蹤。

7.如權(quán)利要求1所述的方法，其特征在于，所述口型特征包括唇部輪廓、唇部口徑、唇部張角、唇高以及唇寬。

8.如權(quán)利要求7所述的方法，其特征在于，在預(yù)先建立的外語測試信息與發(fā)音信息模型中匹配與所述外語測試信息對應(yīng)的發(fā)音信息，包括：

根據(jù)所述唇部輪廓、唇部口徑、唇部張角、唇高以及唇寬的至少一項進(jìn)行幾何建模，形成矢量化口型特征；

將所述矢量化口型特征與所述標(biāo)準(zhǔn)口型特征進(jìn)行匹配。

9.如權(quán)利要求3所述的方法，其特征在于，所述方法還包括：

判斷所述得分信息是否小于預(yù)設(shè)分?jǐn)?shù)；

若是，保存所述得分信息以及與所述得分信息對應(yīng)的外語測試信息以及發(fā)音信息；

根據(jù)保存的所述得分信息以及對應(yīng)的外語測試信息以及發(fā)音信息訓(xùn)練外語練習(xí)模型；

定期將所述外語練習(xí)模型中的外語測試信息以及發(fā)音信息發(fā)送至用戶，以進(jìn)行外語強(qiáng)化練習(xí)。

10.一種外語教學(xué)評價信息生成裝置，其特征在于，所述裝置包括：

信號檢測模塊，用于輸出外語測試信息，檢測視頻采集設(shè)備采集的視頻信號，分別提取所述視頻信號中的視頻畫面信息以及音頻信息；

特征抓取模塊，用于對所述視頻畫面信息中的用戶唇部進(jìn)行定位，并抓取所述用戶唇部的口型特征；

信息匹配模塊，用于在預(yù)先建立的外語測試信息與發(fā)音信息模型中匹配與所述外語測試信息對應(yīng)的發(fā)音信息，所述發(fā)音信息包括標(biāo)準(zhǔn)發(fā)音以及標(biāo)準(zhǔn)口型特征；

信息生成模塊，用于計算所述用戶唇部的口型特征與匹配到的所述標(biāo)準(zhǔn)口型特征的第一特征偏差值，根據(jù)所述第一特征偏差值生成教學(xué)評價信息。