[發(fā)明專利]人工智能信息處理裝置及人工智能信息處理方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202080037794.2
• 申請(qǐng)日: 2020-03-09
• 公開（公告）號(hào): CN113853598A
• 公開（公告）日: 2021-12-28
• 發(fā)明（設(shè)計(jì)）人: 高木悟郎;小林由幸
• 申請(qǐng)（專利權(quán)）人: 索尼集團(tuán)公司
• 主分類號(hào): G06F16/9035
• 分類號(hào): G06F16/9035
• 代理公司: 北京康信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11240
• 代理人: 余剛

1.一種人工智能信息處理裝置，包括：

注視度估計(jì)單元，被配置為基于傳感器信息根據(jù)人工智能估計(jì)正在觀看內(nèi)容的用戶的注視度；

獲取單元，被配置為基于所述注視度估計(jì)單元的估計(jì)結(jié)果，獲取所述內(nèi)容中所述用戶注視的場(chǎng)景的視頻和關(guān)于所述內(nèi)容的信息；以及

場(chǎng)景信息估計(jì)單元，被配置為基于所述用戶注視的所述場(chǎng)景的視頻和關(guān)于所述內(nèi)容的信息，根據(jù)人工智能估計(jì)關(guān)于所述用戶注視的所述場(chǎng)景的信息。

2.根據(jù)權(quán)利要求1所述的人工智能信息處理裝置，其中，所述場(chǎng)景信息估計(jì)單元使用已經(jīng)學(xué)習(xí)了所述場(chǎng)景的視頻和關(guān)于所述內(nèi)容的信息、與關(guān)于所述場(chǎng)景的信息之間的相關(guān)性的神經(jīng)網(wǎng)絡(luò)來(lái)估計(jì)與所述用戶注視的所述場(chǎng)景具有相關(guān)性的信息，作為根據(jù)人工智能實(shí)現(xiàn)的估計(jì)。

3.根據(jù)權(quán)利要求1所述的人工智能信息處理裝置，其中，所述注視度估計(jì)單元使用已經(jīng)學(xué)習(xí)了傳感器信息與所述用戶的注視度之間的相關(guān)性的神經(jīng)網(wǎng)絡(luò)來(lái)估計(jì)與關(guān)于正在觀看所述內(nèi)容的所述用戶的所述傳感器信息具有相關(guān)性的注視度，作為根據(jù)人工智能實(shí)現(xiàn)的估計(jì)。

4.根據(jù)權(quán)利要求3所述的人工智能信息處理裝置，其中，

所述傳感器信息至少包括通過(guò)相機(jī)捕獲的正在觀看所述內(nèi)容的所述用戶的捕獲圖像，以及

所述注視度估計(jì)單元使用已經(jīng)學(xué)習(xí)了面部識(shí)別結(jié)果與所述用戶的注視度之間的相關(guān)性的神經(jīng)網(wǎng)絡(luò)來(lái)估計(jì)與所述捕獲圖像中的面部識(shí)別結(jié)果具有相關(guān)性的注視度，作為根據(jù)人工智能實(shí)現(xiàn)的估計(jì)。

5.根據(jù)權(quán)利要求1所述的人工智能信息處理裝置，其中，所述內(nèi)容包括廣播內(nèi)容和流分發(fā)內(nèi)容中的至少一者。

6.根據(jù)權(quán)利要求1所述的人工智能信息處理裝置，其中，關(guān)于所述用戶注視的所述場(chǎng)景的信息被輸出到外部。

7.根據(jù)權(quán)利要求1所述的人工智能信息處理裝置，其中，向所述用戶呈現(xiàn)所述用戶注視的所述場(chǎng)景和關(guān)于所述場(chǎng)景的信息。

8.一種人工智能信息處理裝置，包括：

輸入單元，被配置為接收關(guān)于正在觀看內(nèi)容的用戶的傳感器信息；以及

場(chǎng)景信息估計(jì)單元，被配置為使用已經(jīng)學(xué)習(xí)了所述傳感器信息、所述內(nèi)容以及關(guān)于所述內(nèi)容的信息與關(guān)于所述用戶注視的場(chǎng)景的信息之間的相關(guān)性的神經(jīng)網(wǎng)絡(luò)來(lái)估計(jì)與所述用戶注視的所述場(chǎng)景具有相關(guān)性的信息。

9.根據(jù)權(quán)利要求8所述的人工智能信息處理裝置，其中，

所述傳感器信息至少包括通過(guò)相機(jī)捕獲的正在觀看所述內(nèi)容的所述用戶的捕獲圖像，以及

所述場(chǎng)景信息估計(jì)單元使用已經(jīng)學(xué)習(xí)了面部圖像、內(nèi)容以及關(guān)于所述內(nèi)容的信息與關(guān)于所述用戶注視的場(chǎng)景的信息之間的相關(guān)性的神經(jīng)網(wǎng)絡(luò)來(lái)估計(jì)與所述用戶注視的所述場(chǎng)景具有相關(guān)性的信息。

10.一種人工智能信息處理方法，包括：

注視度估計(jì)步驟：基于傳感器信息根據(jù)人工智能估計(jì)正在觀看內(nèi)容的用戶的注視度；

獲取步驟：基于所述注視度估計(jì)步驟中的估計(jì)結(jié)果，獲取所述內(nèi)容中所述用戶注視的場(chǎng)景的視頻和關(guān)于所述內(nèi)容的信息；以及

場(chǎng)景信息估計(jì)步驟：基于所述用戶注視的所述場(chǎng)景的所述視頻和關(guān)于所述內(nèi)容的信息，根據(jù)人工智能估計(jì)關(guān)于所述用戶注視的所述場(chǎng)景的信息。