[發(fā)明專利]信息處理方法、裝置、電子設備和存儲介質

在審

• 申請?zhí)枺?/td>: 202110557604.6
• 申請日: 2021-05-21
• 公開（公告）號: CN113297953A
• 公開（公告）日: 2021-08-24
• 發(fā)明（設計）人: 趙大昊;徐成選;王強
• 申請（專利權）人: 北京讀我網絡技術有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06N3/04;G06N3/08;G10L25/24;G10L25/51;G10L25/90
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 魯麗美

1.一種信息處理方法，其特征在于，包括：

獲取用戶使用應用程序時的面部特征信息；

獲取用戶使用應用程序時的聲音特征信息；

根據獲得的所述用戶的面部特征信息和聲音特征信息，識別所述用戶所屬的類別信息，和/或所述用戶對所述應用程序的使用場景信息。

2.根據權利要求1所述的方法，其特征在于，所述獲取用戶使用應用程序時的面部特征信息，包括：

利用圖像采集裝置至少實時采集用戶使用所述應用程序時的面部圖像；

從采集的面部圖像中提取以下信息中的至少部分，作為所述用戶的面部特征信息：用戶雙眼間距、雙眼大小、鼻梁長度、嘴巴長度、嘴唇厚度、皮膚褶皺度。

3.根據權利要求1所述的方法，其特征在于，所述獲取用戶使用應用程序時的聲音特征信息，包括：

利用音頻采集裝置實時采集用戶使用所述應用程序時的聲音信息；

從采集的聲音信息中提取以下信息中的至少部分，作為所述用戶的聲音特征信息：Mel頻率倒譜系數MFCC、音色、頻率、響度。

4.根據權利要求1所述的方法，其特征在于，所述根據獲得的所述用戶的面部特征信息和聲音特征信息，識別所述用戶所屬的類別信息，和/或所述用戶對所述應用程序的使用場景信息，包括：

將所述面部特征信息和所述聲音特征信息，實時輸入預先基于深度學習模型構建的分類模型；

所述分類模型根據輸入的所述面部特征信息和所述聲音特征信息，識別所述用戶的性別和年齡段，和/或識別所述用戶對所述應用程序的使用場景為單人使用場景還是多人使用場景。

5.根據權利要求1-4任一項所述的方法，其特征在于，在獲取用戶使用應用程序時的面部特征信息，以及獲取用戶使用應用程序時的聲音特征信息之前，還包括：

對采集的圖像信息和/或聲音信息進行數據清洗；

其中，對采集的圖像信息和/或聲音信息進行的數據清洗包括以下處理中的至少一種：

剔除缺失值、特殊值、范圍檢查、演繹修正、插值、最小值調整。

6.根據權利要求4所述的方法，其特征在于，還包括：

根據實時識別出的用戶所屬的類別信息和/或用戶對所述應用程序的使用場景信息，動態(tài)確定或動態(tài)調整所述應用程序向所述用戶提供的服務。

7.根據權利要求6所述的方法，其特征在于，在動態(tài)確定或動態(tài)調整所述應用程序向所述用戶提供的服務之后，還包括：

獲取所述用戶對所述應用程序提供的當前服務的反饋信息；

在所述反饋信息表示所述用戶對所述當前服務的感受為負向感受的情況下，對所述應用程序向所述用戶提供的服務進行動態(tài)調整；

其中，所述反饋信息包括：用戶面部表情信息和/或聲音語氣信息。

8.一種信息處理裝置，其特征在于，包括：

第一獲取模塊，用于獲取用戶使用應用程序時的面部特征信息；

第二獲取模塊，用于獲取用戶使用應用程序時的聲音特征信息；

識別模塊，用于根據獲得的所述用戶的面部特征信息和聲音特征信息，識別所述用戶所屬的類別信息，和所述用戶對所述應用程序的使用場景信息。