[發(fā)明專利]使用基于相機(jī)的感測(cè)來確定情緒

有效

• 申請(qǐng)?zhí)枺?/td>: 201880028984.0
• 申請(qǐng)日: 2018-05-02
• 公開（公告）號(hào): CN110621228B
• 公開（公告）日: 2022-07-29
• 發(fā)明（設(shè)計(jì)）人: 艾莎·赫瓦賈;詹姆斯·揚(yáng);科迪·沃瑟姆;賽義德·薩迪;賈瓦哈·賈殷
• 申請(qǐng)（專利權(quán)）人: 三星電子株式會(huì)社
• 主分類號(hào): A61B5/16
• 分類號(hào): A61B5/16;A61B5/00;A61B5/024
• 代理公司: 中科專利商標(biāo)代理有限責(zé)任公司 11021
• 代理人: 吳曉兵

在一個(gè)實(shí)施例中，一種體現(xiàn)軟件的計(jì)算機(jī)可讀的非暫時(shí)性存儲(chǔ)介質(zhì)，所述軟件在被執(zhí)行時(shí)可操作以用于實(shí)時(shí)地：通過單個(gè)傳感器捕獲用戶的多個(gè)圖像；基于多個(gè)圖像確定用戶在一段時(shí)間期間的一個(gè)或多個(gè)短期心臟學(xué)信號(hào)；基于心臟學(xué)信號(hào)估計(jì)用戶的第一短期情緒狀態(tài)；基于多個(gè)圖像確定用戶在該段時(shí)間期間的一個(gè)或多個(gè)短期神經(jīng)學(xué)信號(hào)；基于神經(jīng)學(xué)信號(hào)估計(jì)用戶的第二短期情緒狀態(tài)；將第一估計(jì)情緒狀態(tài)與第二估計(jì)情緒狀態(tài)進(jìn)行比較；以及響應(yīng)于確定第一估計(jì)情緒狀態(tài)對(duì)應(yīng)于第二估計(jì)情緒狀態(tài)，確定用戶在該段時(shí)間期間的短期情緒。

技術(shù)領(lǐng)域

本公開總體上涉及對(duì)個(gè)體的生理特征的電子檢測(cè)和評(píng)估。

背景技術(shù)

在行為、生物學(xué)和社會(huì)科學(xué)中，可以看出對(duì)評(píng)估人類情緒和/或生理特征(諸如心血管健康)的興趣日益濃厚。例如，在不考慮人類情緒的情況下，從個(gè)體認(rèn)知處理到社會(huì)和集體行為的許多現(xiàn)象可能無法很好地理解。最近，人們對(duì)情感計(jì)算產(chǎn)生了興趣，情感計(jì)算是對(duì)可以識(shí)別、解釋、處理和模擬人類情感的計(jì)算系統(tǒng)或設(shè)備的研究和開發(fā)。特別地，用戶的情緒可以用作由計(jì)算設(shè)備或系統(tǒng)進(jìn)行后續(xù)操作的輸入。另外，確定生理特征對(duì)于檢測(cè)或預(yù)測(cè)用戶的健康是有用的。

發(fā)明內(nèi)容

根據(jù)示例實(shí)施例的一方面，提供了一種或多種體現(xiàn)軟件的計(jì)算機(jī)可讀的非暫時(shí)性存儲(chǔ)介質(zhì)，所述軟件在被執(zhí)行時(shí)操作為實(shí)時(shí)地進(jìn)行以下操作：通過單個(gè)傳感器捕獲用戶的多個(gè)圖像；基于所述多個(gè)圖像，確定用戶在一段時(shí)間期間的一個(gè)或多個(gè)短期心臟學(xué)信號(hào)；基于所述心臟學(xué)信號(hào)，估計(jì)用戶的第一短期情緒狀態(tài)；基于所述多個(gè)圖像，確定用戶在所述一段時(shí)間期間的一個(gè)或多個(gè)短期神經(jīng)學(xué)信號(hào)；基于所述神經(jīng)學(xué)信號(hào)，估計(jì)用戶的第二短期情緒狀態(tài)；將第一估計(jì)情緒狀態(tài)與第二估計(jì)情緒狀態(tài)進(jìn)行比較；以及響應(yīng)于確定第一估計(jì)情緒狀態(tài)對(duì)應(yīng)于第二估計(jì)情緒狀態(tài)，基于第一估計(jì)情緒狀態(tài)和第二估計(jì)情緒狀態(tài)確定用戶在所述一段時(shí)間期間的短期情緒。

根據(jù)示例實(shí)施例的另一方面，提供了一種方法，包括實(shí)時(shí)地進(jìn)行以下操作：通過單個(gè)傳感器捕獲用戶的多個(gè)圖像；基于所述多個(gè)圖像，確定用戶在一段時(shí)間期間的一個(gè)或多個(gè)短期心臟學(xué)信號(hào)；基于所述心臟學(xué)信號(hào)，估計(jì)用戶的第一短期情緒狀態(tài)；基于所述多個(gè)圖像，確定用戶在所述一段時(shí)間期間的一個(gè)或多個(gè)短期神經(jīng)學(xué)信號(hào)；基于所述神經(jīng)學(xué)信號(hào)，估計(jì)用戶的第二短期情緒狀態(tài)；將第一估計(jì)情緒狀態(tài)與第二估計(jì)情緒狀態(tài)進(jìn)行比較；以及響應(yīng)于確定第一估計(jì)情緒狀態(tài)對(duì)應(yīng)于第二估計(jì)情緒狀態(tài)，基于第一估計(jì)情緒狀態(tài)和第二估計(jì)情緒狀態(tài)確定用戶在所述一段時(shí)間期間的短期情緒。

根據(jù)示例實(shí)施例的另一方面，提供了一種系統(tǒng)，包括：一個(gè)或多個(gè)處理器；以及耦接到所述處理器的非暫時(shí)性存儲(chǔ)器，所述非暫時(shí)性存儲(chǔ)器包括可由所述處理器執(zhí)行的指令，當(dāng)執(zhí)行所述指令時(shí)，所述處理器操作為實(shí)時(shí)地進(jìn)行以下操作：通過單個(gè)傳感器捕獲用戶的多個(gè)圖像；基于所述多個(gè)圖像，確定用戶在一段時(shí)間期間的一個(gè)或多個(gè)短期心臟學(xué)信號(hào)；基于所述心臟學(xué)信號(hào)，估計(jì)用戶的第一短期情緒狀態(tài)；基于所述多個(gè)圖像，確定用戶在所述一段時(shí)間期間的一個(gè)或多個(gè)短期神經(jīng)學(xué)信號(hào)；基于所述神經(jīng)學(xué)信號(hào)，估計(jì)用戶的第二短期情緒狀態(tài)；將第一估計(jì)情緒狀態(tài)與第二估計(jì)情緒狀態(tài)進(jìn)行比較；以及響應(yīng)于確定第一估計(jì)情緒狀態(tài)對(duì)應(yīng)于第二估計(jì)情緒狀態(tài)，基于第一估計(jì)情緒狀態(tài)和第二估計(jì)情緒狀態(tài)確定用戶在所述一段時(shí)間期間的短期情緒。

附圖說明

圖1示出了示例網(wǎng)絡(luò)環(huán)境。

圖2示出了用戶的面部和頸部上的示例光學(xué)測(cè)量區(qū)域。

圖3示出了心臟學(xué)度量的示例計(jì)算。

圖4示出了用于計(jì)算用戶的心臟學(xué)度量的示例方法。

圖5示出了用于針對(duì)用戶執(zhí)行心率測(cè)量的示例方法。

圖6A示出了基線數(shù)據(jù)直方圖的示例。

圖6B示出了測(cè)試數(shù)據(jù)直方圖的示例，其中交感神經(jīng)迷走神經(jīng)平衡向左移動(dòng)。

圖6C示出了測(cè)試數(shù)據(jù)直方圖的示例，其中交感神經(jīng)迷走神經(jīng)平衡向右移動(dòng)。

圖7示出了情緒的環(huán)狀模型的示例圖。