[發(fā)明專利]音視頻播放方法、計算機設(shè)備及計算機可讀存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 201910429523.0
• 申請日: 2019-05-22
• 公開（公告）號: CN110213663A
• 公開（公告）日: 2019-09-06
• 發(fā)明（設(shè)計）人: 齊燕
• 申請（專利權(quán)）人: 深圳壹賬通智能科技有限公司
• 主分類號: H04N21/485
• 分類號: H04N21/485;H04N21/4415;G06K9/00
• 代理公司: 深圳眾鼎專利商標(biāo)代理事務(wù)所(普通合伙) 44325
• 代理人: 黃章輝

1.一種音視頻播放方法，其特征在于，包括：

在終端播放可視化內(nèi)容和/或音頻時，確定用戶對所述終端的屏幕的第一注意力分數(shù)，以及用戶對所述終端所播放的音頻的第二注意力分數(shù)；

若所述第一注意力分數(shù)小于第一閾值和/或所述第二注意力分數(shù)小于第二閾值，則基于所述第一注意力分數(shù)和/或所述第二注意力分數(shù)，通過播放狀態(tài)自適應(yīng)模型確定可視化內(nèi)容和/或音頻的播放調(diào)整模式；

根據(jù)所述播放調(diào)整模式調(diào)整所述終端的屏幕亮度和/或音頻播放音量。

2.如權(quán)利要求1所述的音視頻播放方法，其特征在于，所述第一注意力分數(shù)為用戶對所述屏幕在視力上的注意力分數(shù)，所述第二注意力分數(shù)為用戶對所述音頻在聽力上的注意力分數(shù)；確定用戶對所述終端的屏幕的第一注意力分數(shù)，以及用戶對所述終端所播放的音頻的第二注意力分數(shù)，包括：

根據(jù)用戶的眼睛動作識別結(jié)果確定用戶對所述屏幕在視力上的注意力分數(shù)；

根據(jù)用戶對音頻所作出的反饋信號的強度確定用戶對所述音頻在聽力上的注意力分數(shù)。

3.如權(quán)利要求2所述的音視頻播放方法，其特征在于，根據(jù)用戶的眼睛動作識別結(jié)果確定用戶對所述屏幕在視力上的注意力分數(shù)包括：

獲取用戶的眼睛信息，所述眼睛信息包括眼睛睜閉狀態(tài)信息和虹膜信息；

根據(jù)所述虹膜信息確定所述屏幕前方的用戶數(shù)量；

當(dāng)所述用戶數(shù)量為一個時，根據(jù)所述眼睛睜閉狀態(tài)信息確定當(dāng)前用戶對所述屏幕在視力上的注意力分數(shù)；

當(dāng)所述用戶數(shù)量為多個時，分別根據(jù)所述眼睛睜閉狀態(tài)信息確定多個用戶對所述屏幕在視力上的注意力分數(shù)，對多個注意力分數(shù)進行排序，將分數(shù)最高的作為用戶對所述屏幕在視力上的注意力分數(shù)。

4.如權(quán)利要求1所述的音視頻播放方法，其特征在于，確定用戶對終端屏幕顯示信息的第一注意力分數(shù)，以及用戶對所述終端播放的音頻的第二注意力分數(shù)包括：

采集終端屏幕前包含用戶臉部的場景圖像；

從所述場景圖像中提取人臉信息；

根據(jù)所述人臉信息通過預(yù)定部分人臉特征圖譜確定所述用戶的疲勞程度；

根據(jù)所述疲勞程度確定用戶對終端的屏幕的第一注意力分數(shù)，以及用戶對所述終端所播放的音頻的第二注意力分數(shù)。

5.如權(quán)利要求4所述的音視頻播放方法，其特征在于，根據(jù)所述人臉信息通過預(yù)定部分人臉特征圖譜確定所述用戶的疲勞程度包括：

根據(jù)預(yù)定部分人臉特征圖譜對當(dāng)前用戶進行眼部特征圖框池化，通過瞌睡檢測網(wǎng)絡(luò)識別眼部睜閉狀態(tài)以及對眼部關(guān)鍵點進行回歸分析獲得眼睛睜閉程度；

根據(jù)所述預(yù)定部分人臉特征圖譜進行嘴部特征圖框池化，通過哈欠行為識別網(wǎng)絡(luò)識別嘴部開閉狀態(tài)，得到嘴部開閉狀態(tài)；

根據(jù)所述眼睛睜閉狀態(tài)、所述眼睛睜閉程度和所述嘴部開閉狀態(tài)確定所述用戶的疲勞程度。

6.一種音視頻播放裝置，其特征在于，包括：

第一確定模塊，用于在終端播放可視化內(nèi)容和/或音頻時，確定用戶對所述終端的屏幕的第一注意力分數(shù)，以及用戶對所述終端所播放的音頻的第二注意力分數(shù)；

第二確定模塊，用于若所述第一注意力分數(shù)小于第一閾值和/或所述第二注意力分數(shù)小于第二閾值，則基于所述第一注意力分數(shù)和/或所述第二注意力分數(shù)，通過播放狀態(tài)自適應(yīng)模型確定可視化內(nèi)容和/或音頻的播放調(diào)整模式；

調(diào)整模塊，用于根據(jù)所述播放調(diào)整模式調(diào)整所述終端的屏幕亮度和/或音頻播放音量。

7.如權(quán)利要求6所述的音視頻播放裝置，其特征在于，所述第一確定模塊包括：

第一確定單元，用于根據(jù)用戶的眼睛動作識別結(jié)果確定用戶對所述屏幕在視力上的注意力分數(shù)；

第二確定單元，用于根據(jù)用戶對音頻所作出的反饋信號的強度確定用戶對所述音頻在聽力上的注意力分數(shù)。