[發明專利]基于無線耳機的會議內容展示方法、裝置及無線耳機

在審

• 申請號: 202211634618.4
• 申請日: 2022-12-19
• 公開（公告）號: CN116095552A
• 公開（公告）日: 2023-05-09
• 發明（設計）人: 楊道宏
• 申請（專利權）人: 新線科技有限公司
• 主分類號: H04R1/10
• 分類號: H04R1/10;H04M3/56;G06F16/34
• 代理公司: 北京風雅頌專利代理有限公司 11403
• 代理人: 李莎

1.一種基于無線耳機的會議內容展示方法，其特征在于，所述無線耳機包括耳機本體和耳機收納設備，所述耳機本體與所述耳機收納設備可以通過無線的通信網絡連接，所述耳機收納設備上設置有顯示屏，所述方法通過所述耳機收納設備實現，所述方法包括：

接收所述耳機本體發送的會議語音信息；

將所述會議語音信息轉換成會議文本信息；

生成所述會議文本信息的會議摘要信息，并控制所述耳機收納設備上的顯示屏播放所述會議摘要信息。

2.根據權利要求1所述的方法，其特征在于，所述將所述會議語音信息轉換成會議文本信息，包括：

將所述會議語音信息輸入預先訓練的語音轉文本模型，得到所述語音轉文本模型輸出的所述會議語音信息對應的所述會議文本信息；

其中，所述語音轉文本模型中包含若干語音轉文本網絡，不同所述語音轉文本網絡對應不同領域；通過至少一個所述語音轉文本網絡將所述會議語音信息轉換得到所述會議文本信息。

3.根據權利要求2所述的方法，其特征在于，所述語音轉文本模型中還包含領域確定網絡；

所述將所述會議語音信息輸入預先訓練的語音轉文本模型，得到所述語音轉文本模型輸出的所述會議語音信息對應的所述會議文本信息，包括：

將所述會議語音信息輸入所述領域確定網絡，得到所述領域確定網絡輸出的所述會議語音信息對應的所述領域；

將所述會議語音信息輸入所述領域對應的所述語音轉文本網絡，得到所述語音轉文本網絡輸出的所述會議語音信息對應的所述會議文本信息。

4.根據權利要求3所述的方法，其特征在于，所述將所述會議語音信息輸入所述領域確定網絡，得到所述領域確定網絡輸出的所述會議語音信息對應的所述領域之后，所述方法還包括：

確定所述領域的置信度，并判斷所述置信度是否大于置信度閾值；

響應于確定所述置信度大于置信度閾值，將所述領域確定為所述會議語音信息對應的領域；

響應于確定所述置信度小于或等于置信度閾值，將同一會議中前一會議語音信息對應的領域確定為所述會議語音信息對應的所述領域。

5.根據權利要求2所述的方法，其特征在于，將所述語音轉文本模型的輸入和上一所述語音轉文本網絡的輸出共同作為下一所述語音轉文本網絡的輸入。

6.根據權利要求1所述的方法，其特征在于，所述耳機收納設備上還設置有攝像頭；

所述生成所述會議文本信息的會議摘要信息之后，所述方法還包括：

通過所述攝像頭獲取視頻信息，并檢測所述視頻信息中是否存在人臉圖像信息；

所述控制所述耳機收納設備上的顯示屏播放所述會議摘要信息，包括：

響應于確定所述視頻信息中存在人臉圖像信息，控制所述耳機收納設備上的顯示屏播放所述會議摘要信息；

響應于確定所述視頻信息中不存在人臉圖像信息，控制所述顯示屏暫停播放所述會議摘要信息，直到響應于確定所述視頻信息中存在人臉圖像信息，控制所述顯示屏繼續播放所述會議摘要信息。

7.根據權利要求6所述的方法，其特征在于，所述響應于確定所述視頻信息中存在人臉圖像信息之后，所述方法還包括：

從所述人臉圖像信息中獲取眼部圖像信息；

在所述眼部圖像信息中確定基準點和觀測點，并根據所述基準點與所述觀測點之間的位置關系，判斷所述人臉圖像信息中的視線目標是否為所述顯示屏；

所述控制所述耳機收納設備上的顯示屏播放所述會議摘要信息，包括：

響應于確定所述人臉圖像信息中的視線目標為所述顯示屏，控制所述耳機收納設備上的顯示屏播放所述會議摘要信息；

響應于確定所述人臉圖像信息中的視線目標不為所述顯示屏，控制所述顯示屏暫停播放所述會議摘要信息，直到響應于確定所述人臉圖像信息中的視線目標為所述顯示屏，控制所述顯示屏繼續播放所述會議摘要信息。