[發(fā)明專利]一種確定行為對象的方法和裝置

在審

• 申請?zhí)枺?/td>: 202010125657.6
• 申請日: 2020-02-27
• 公開（公告）號: CN113312947A
• 公開（公告）日: 2021-08-27
• 發(fā)明（設(shè)計）人: 王璟璟
• 申請（專利權(quán)）人: 北京沃東天駿信息技術(shù)有限公司;北京京東世紀貿(mào)易有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06N3/04;G06N3/08
• 代理公司: 中原信達知識產(chǎn)權(quán)代理有限責任公司 11219
• 代理人: 張一軍;陳繼越

本發(fā)明公開了一種確定行為對象的方法和裝置，涉及計算機技術(shù)領(lǐng)域。該方法的一具體實施方式包括：獲取貨架區(qū)域的正面角度圖像和斜側(cè)角度圖像；根據(jù)所述斜側(cè)角度圖像，確定用戶的行為；根據(jù)所述正面角度圖像和所述斜側(cè)角度圖像，確定所述行為操作的所述貨架區(qū)域中的物品。該實施方式能夠節(jié)省確定用戶行為操作的物品的時間，降低成本。同時，該方法適用于用戶觸摸物品等物品數(shù)量不發(fā)生變化的場景。

技術(shù)領(lǐng)域

本發(fā)明涉及計算機技術(shù)領(lǐng)域，尤其涉及一種確定行為對象的方法和裝置。

背景技術(shù)

貨架區(qū)域用于展示、陳列物品，例如，書架上擺放供購買或者借閱的圖書，自動售貨機中陳列飲料、玩具等各種物品。

現(xiàn)有技術(shù)由人工統(tǒng)計貨架中物品的數(shù)量，根據(jù)物品數(shù)量的變化，確定用戶行為操作的物品。

但是，人工統(tǒng)計過程需要花費較長的時間。并且，對于用戶觸摸物品等物品數(shù)量不發(fā)生變化的場景，該方法并不適用。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明實施例提供一種確定行為對象的方法和裝置，能夠節(jié)省確定用戶行為操作的物品的時間，降低成本。同時，該方法適用于用戶觸摸物品等物品數(shù)量不發(fā)生變化的場景。

第一方面，本發(fā)明實施例提供了一種確定行為對象的方法，包括：

獲取貨架區(qū)域的正面角度圖像和斜側(cè)角度圖像；

根據(jù)所述斜側(cè)角度圖像，確定用戶的行為；

根據(jù)所述正面角度圖像和所述斜側(cè)角度圖像，確定所述行為操作的所述貨架區(qū)域中的物品。

優(yōu)選地，

所述根據(jù)所述斜側(cè)角度圖像，確定用戶的行為，包括：

根據(jù)所述斜側(cè)角度圖像，確定所述用戶的手臂圖像；

根據(jù)所述手臂圖像，確定骨骼點的坐標；

根據(jù)所述手臂圖像和所述骨骼點的坐標，確定所述用戶的行為。

優(yōu)選地，

所述根據(jù)所述斜側(cè)角度圖像，確定所述用戶的手臂圖像，包括：

提取所述斜側(cè)角度圖像的特征；

根據(jù)所述斜側(cè)角度圖像的特征，確定若干包圍輪廓；

從所述若干包圍輪廓中選擇目標包圍輪廓；其中，所述目標包圍輪廓中的像素點構(gòu)成所述手臂圖像。

優(yōu)選地，

所述根據(jù)所述手臂圖像，確定骨骼點的坐標，包括：

將所述手臂圖像輸入殘差網(wǎng)絡(luò)；

對輸出結(jié)果進行上采樣，得到上臂、肘部和手背的坐標。

優(yōu)選地，

所述根據(jù)所述手臂圖像和所述骨骼點的坐標，確定所述用戶的行為，包括：

將所述手臂圖像輸入CNN(Convolutional Neural Network，卷積神經(jīng)網(wǎng)絡(luò))，得到第一輸出結(jié)果；

將所述骨骼點的坐標輸入第一全連接層，得到第二輸出結(jié)果；

拼接所述第一輸出結(jié)果和所述第二輸出結(jié)果，得到綜合輸出結(jié)果；

將所述綜合輸出結(jié)果輸入第二全連接層和softmax層，得到所述用戶的行為。

優(yōu)選地，

所述行為，包括：觸碰；

所述根據(jù)所述正面角度圖像和所述斜側(cè)角度圖像，確定所述行為操作的所述貨架區(qū)域中的物品，包括：