[發明專利]一種主動交互式智能售賣系統及方法

在審

• 申請號: 201910904736.4
• 申請日: 2019-09-24
• 公開（公告）號: CN110634053A
• 公開（公告）日: 2019-12-31
• 發明（設計）人: 高寧;黃浩;莫其嚴;許川;王昆侖
• 申請（專利權）人: 廣東愛貝佳科技有限公司
• 主分類號: G06Q30/06
• 分類號: G06Q30/06;G06K9/00
• 代理公司: 42231 武漢智嘉聯合知識產權代理事務所(普通合伙)
• 代理人: 趙澤夏

1.一種主動交互式智能售賣系統，其特征在于，包括主動信息獲取模塊、場景化分析模塊、表情及姿態識別模塊、自適應推薦模塊，

所述主動信息獲取模塊，用于獲取售賣裝置的位置信息和潛在購買人的人物圖像信息；

所述場景化分析模塊，用于對所述位置信息進行地域分析，以得到對應的地域信息和應用場景；

所述表情及姿態識別模塊，用于對所述人物圖像信息進行人臉表情識別及人物姿態識別，分別得到對應的人物表情狀態識別結果以及人物姿態識別結果；

所述自適應推薦模塊，用于利用人物表情狀態識別結果以及人物姿態結果，得到人物性格類型，利用所述對應地域信息、應用場景及人物性格類型進行產品推薦。

2.根據權利要求1所述的主動交互式智能售賣系統，其特征在于，還包括主動交互模塊，用于在售賣裝置空閑狀態時主動對話，并在工作狀態時進行人文對話。

3.根據權利要求1所述的主動交互式智能售賣系統，其特征在于，所述表情及姿態識別模塊包括表情狀態識別單元，所述表情狀態識別單元用于對所述人物圖像信息進行人臉表情識別，得到對應的人物表情狀態識別結果，具體包括，

從人物圖像信息中提取a個面部關鍵點，將利用面部表情模型對所述a個面部關鍵點進行識別，得到對應的人物表情狀態識別結果，其中，50≤a≤150；

所述面部表情模塊的生成過程為，采集各種表情狀態以及對應面部關鍵點，生成訓練集和驗證集并進行機器學習的訓練，生成面部表情模型。

4.根據權利要求1所述的主動交互式智能售賣系統，其特征在于，所述表情及姿態識別模塊還包括人物姿態識別單元，所述人物姿態識別單元用于進行人物姿態識別，得到對應的人物姿態結果，具體包括，

從人物姿態中提取b個身體關鍵點，利用人物姿態模型對人物姿態進行識別，得到對應的人物姿態識別結果，其中，20≤b≤30，

所述人物姿態模型的生成過程為，采集各種人物姿態及對應的身體關鍵點，生成訓練集和驗證集并進行機器學習的訓練，生成人物姿態模型。

5.一種主動交互式智能售賣方法，其特征在于，包括以下步驟：

步驟S1、獲取售賣裝置的位置信息和潛在購買人的人物圖像信息；

步驟S2、對所述位置信息進行地域分析，以得到對應的地域信息和應用場景；

步驟S3、對所述人物圖像信息進行人臉表情識別及人物姿態識別，分別得到對應的人物表情狀態識別結果以及人物姿態識別結果；

步驟S4、根據得到的人物表情狀態識別結果以及人物姿態識別結果，提供主動對話交互；

步驟S5、重新執行步驟S1，并重新對所述人物圖像信息進行人臉表情識別及人物姿態識別，再次分別得到對應的人物表情狀態識別結果以及人物姿態識別結果；

步驟S6、利用步驟S5所述的人物表情狀態識別結果以及人物姿態結果，得到人物性格類型，利用所述對應地域信息、應用場景及人物性格類型進行產品推薦。

6.根據權利要求5所述的主動交互式智能售賣方法，其特征在于，所述對人物圖像信息進行人臉表情識別，得到對應的人物表情狀態識別結果，具體包括，

從人物圖像信息中提取a個面部關鍵點，將利用面部表情模型對所述a個面部關鍵點進行識別，得到對應的人物表情狀態識別結果，其中，50≤a≤150；

所述面部表情模塊的生成過程為，采集各種表情狀態以及對應面部關鍵點，生成訓練集和驗證集并進行機器學習的訓練，生成面部表情模型。

7.根據權利要求5所述的主動交互式智能售賣方法，其特征在于，所述對人物圖像信息進行人物姿態識別，得到對應的人物姿態結果，具體包括，

從人物姿態中提取b個身體關鍵點，利用人物姿態模型對人物姿態進行識別，得到對應的人物姿態識別結果，其中，20≤b≤30，

所述人物姿態模型的生成過程為，采集各種人物姿態及對應的身體關鍵點，生成訓練集和驗證集并進行機器學習的訓練，生成人物姿態模型。