[發(fā)明專利]移情式個(gè)人虛擬數(shù)字助理

有效

• 申請(qǐng)?zhí)枺?/td>: 201980015708.5
• 申請(qǐng)日: 2019-02-20
• 公開(kāi)（公告）號(hào): CN111788621B
• 公開(kāi)（公告）日: 2022-06-03
• 發(fā)明（設(shè)計(jì)）人: N·查德拉塞卡蘭;R·A·西姆;R·W·懷特;N·戈特比
• 申請(qǐng)（專利權(quán)）人: 微軟技術(shù)許可有限責(zé)任公司
• 主分類號(hào): G09B5/00
• 分類號(hào): G09B5/00;G09B7/02;G09B19/00;G09B5/06
• 代理公司: 永新專利商標(biāo)代理有限公司 72002
• 代理人: 李光穎

1.一種個(gè)人虛擬助理系統(tǒng)，包括：

處理電路；

揚(yáng)聲器；

至少一個(gè)感測(cè)設(shè)備，其從至少用戶的語(yǔ)音收集關(guān)于所述用戶的情感狀態(tài)的用戶狀態(tài)信息；以及

在其中存儲(chǔ)有指令的存儲(chǔ)器設(shè)備，其中，所述指令當(dāng)由所述處理電路運(yùn)行時(shí)將所述處理電路配置為：

從所述用戶接收引起來(lái)自所述個(gè)人虛擬助理系統(tǒng)的響應(yīng)的通信；

使用機(jī)器學(xué)習(xí)模型根據(jù)由所述至少一個(gè)感測(cè)設(shè)備收集到的至少所述用戶狀態(tài)信息來(lái)確定所述用戶的情感狀態(tài)；

生成考慮了所確定的所述用戶的情感狀態(tài)的響應(yīng)；

使用被選擇用于將所確定的所述用戶的情感狀態(tài)改變到不同的情感狀態(tài)的語(yǔ)言、音量和語(yǔ)氣，通過(guò)所述揚(yáng)聲器向所述用戶輸出所生成的響應(yīng)；以及

基于所述用戶對(duì)所輸出的響應(yīng)的響應(yīng)來(lái)訓(xùn)練所述機(jī)器學(xué)習(xí)模型，以學(xué)習(xí)所輸出的響應(yīng)的什么屬性引起來(lái)自所述用戶的相應(yīng)反應(yīng)。

2.根據(jù)權(quán)利要求1所述的個(gè)人虛擬助理系統(tǒng)，其中，所述至少一個(gè)感測(cè)設(shè)備感測(cè)所述用戶在與所述個(gè)人虛擬助理系統(tǒng)的通信中所使用的語(yǔ)言和語(yǔ)音的語(yǔ)氣。

3.根據(jù)權(quán)利要求1所述的個(gè)人虛擬助理系統(tǒng)，其中，所述至少一個(gè)感測(cè)設(shè)備還感測(cè)所述用戶的面部表情以根據(jù)所述用戶的面部表情來(lái)提取關(guān)于所述用戶的所述情感狀態(tài)的用戶狀態(tài)信息。

4.根據(jù)權(quán)利要求1所述的個(gè)人虛擬助理系統(tǒng)，其中，所述至少一個(gè)感測(cè)設(shè)備還根據(jù)以下中的至少一項(xiàng)來(lái)感測(cè)所述用戶的語(yǔ)境：所述用戶的位置、當(dāng)?shù)貢r(shí)間、日程、以及周圍環(huán)境以及所述用戶與所述個(gè)人虛擬助理系統(tǒng)或其他設(shè)備的在先交互。

5.根據(jù)權(quán)利要求1所述的個(gè)人虛擬助理系統(tǒng)，其中，所述存儲(chǔ)器設(shè)備還包括在其中存儲(chǔ)的指令，所述指令當(dāng)由所述處理電路運(yùn)行時(shí)將所述處理電路配置為：通過(guò)修改在對(duì)所述用戶的所述響應(yīng)中的速度、語(yǔ)氣和語(yǔ)言中的至少一項(xiàng)，使用考慮了所確定的所述用戶的情感狀態(tài)的語(yǔ)言、音量和語(yǔ)氣，向所述用戶輸出所生成的響應(yīng)。

6.根據(jù)權(quán)利要求1所述的個(gè)人虛擬助理系統(tǒng)，其中，所述存儲(chǔ)器設(shè)備還包括在其中存儲(chǔ)的指令，所述指令當(dāng)由所述處理電路運(yùn)行時(shí)將所述處理電路配置為：基于在提供所述響應(yīng)的時(shí)間時(shí)的所述用戶的確定的情感狀態(tài)，來(lái)修改何時(shí)以及如何向所述用戶提供所述響應(yīng)。

7.根據(jù)權(quán)利要求1所述的個(gè)人虛擬助理系統(tǒng)，還包括：用于所述處理電路、揚(yáng)聲器、至少一個(gè)感測(cè)設(shè)備以及存儲(chǔ)器設(shè)備的殼體，其中，所述存儲(chǔ)器設(shè)備還包括在其中存儲(chǔ)的指令，所述指令當(dāng)由所述處理電路運(yùn)行時(shí)將所述處理電路配置為：使用人工智能服務(wù)來(lái)處理所述用戶狀態(tài)信息，以確定用戶的當(dāng)前情感狀態(tài)參數(shù)。

8.根據(jù)權(quán)利要求7所述的個(gè)人虛擬助理系統(tǒng)，其中，所述存儲(chǔ)器設(shè)備還包括在其中存儲(chǔ)的指令，所述指令當(dāng)由所述處理電路運(yùn)行時(shí)將所述處理電路配置為：向所述用戶對(duì)所輸出的響應(yīng)的響應(yīng)和所述用戶的確定的當(dāng)前情感狀態(tài)參數(shù)應(yīng)用啟發(fā)式方法，以訓(xùn)練所述機(jī)器學(xué)習(xí)模型。

9.根據(jù)權(quán)利要求1所述的個(gè)人虛擬助理系統(tǒng)，其中，所述存儲(chǔ)器設(shè)備還包括在其中存儲(chǔ)的指令，所述指令當(dāng)由所述處理電路運(yùn)行時(shí)將所述處理電路配置為：接收用戶偏好數(shù)據(jù)和文化參考數(shù)據(jù)，所述機(jī)器學(xué)習(xí)模型將所述用戶偏好數(shù)據(jù)和所述文化參考數(shù)據(jù)與所述用戶狀態(tài)信息一起用作當(dāng)前情感狀態(tài)參數(shù)，根據(jù)所述當(dāng)前情感狀態(tài)參數(shù)來(lái)確定所述用戶的所述情感狀態(tài)。

10.根據(jù)權(quán)利要求1所述的個(gè)人虛擬助理系統(tǒng)，其中，所述存儲(chǔ)器設(shè)備還包括在其中存儲(chǔ)的指令，所述指令當(dāng)由所述處理電路運(yùn)行時(shí)將所述處理電路配置為：通過(guò)使用深度神經(jīng)網(wǎng)絡(luò)，根據(jù)所確定的所述用戶的情感狀態(tài)，來(lái)生成具有語(yǔ)境化文本和語(yǔ)氣的在交談和情感方面適當(dāng)?shù)捻憫?yīng)，從而生成考慮了所確定的所述用戶的情感狀態(tài)的響應(yīng)。