[發(fā)明專利]一種餐桌桌面清潔度的識(shí)別方法及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201910924334.0
• 申請(qǐng)日: 2019-09-27
• 公開（公告）號(hào): CN110705443A
• 公開（公告）日: 2020-01-17
• 發(fā)明（設(shè)計(jì)）人: 張孫波
• 申請(qǐng)（專利權(quán)）人: 杭州華慧物聯(lián)科技有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/62;G06Q50/12
• 代理公司: 33289 杭州裕陽聯(lián)合專利代理有限公司
• 代理人: 姚宇吉

1.一種餐桌桌面清潔度的識(shí)別方法，其特征在于，包括以下步驟：

采集桌面圖像，對(duì)所述桌面圖像進(jìn)行特征提取，獲得相對(duì)應(yīng)的第一特征；

將所述第一特征與預(yù)設(shè)的特征庫中的第二特征進(jìn)行相似度匹配，獲得匹配結(jié)果，根據(jù)匹配結(jié)果獲取所述第一特征的類別；

對(duì)所述桌面圖像中所有第一特征的類別進(jìn)行統(tǒng)計(jì)，并根據(jù)統(tǒng)計(jì)結(jié)果生成相應(yīng)的桌面清潔度。

2.根據(jù)權(quán)利要求1所述的一種餐桌桌面清潔度的識(shí)別方法，其特征在于，根據(jù)匹配結(jié)果獲取所述第一特征的類別后還包括反饋步驟，具體步驟包括：

從所述特征庫中提取與所述第一特征類別相同的第二特征，計(jì)算所述第一特征與所述第二特征的平均相似度；

將所述平均相似度與預(yù)設(shè)的平均相似度閾值進(jìn)行比較，當(dāng)所述平均相似度大于預(yù)設(shè)的平均相似度閾值時(shí)，將所述第一特征添加至所述特征庫中。

3.根據(jù)權(quán)利要求1所述的一種餐桌桌面清潔度的識(shí)別方法，其特征在于，對(duì)所述桌面圖像進(jìn)行特征提取，獲得相對(duì)應(yīng)的第一特征的具體步驟為：

采集桌面樣本圖像，基于食物殘?jiān)念愋蛯?duì)所述桌面樣本圖像進(jìn)行標(biāo)注，獲得訓(xùn)練樣本圖像，并按照預(yù)設(shè)的比例將訓(xùn)練樣本圖像劃分為訓(xùn)練集和測試集；

建立特征提取網(wǎng)絡(luò)，利用訓(xùn)練集對(duì)所述特征提取網(wǎng)絡(luò)進(jìn)行訓(xùn)練，并利用測試集對(duì)訓(xùn)練后的特征提取網(wǎng)絡(luò)進(jìn)行測試，當(dāng)測試獲得的準(zhǔn)確率大于預(yù)設(shè)的準(zhǔn)確率閾值時(shí)，獲得特征提取模型；

將所述桌面圖像輸入所述特征提取模型，所述特征提取模型輸出相對(duì)應(yīng)的第一特征。

4.根據(jù)權(quán)利要求3所述的一種餐桌桌面清潔度的識(shí)別方法，其特征在于，所述特征提取網(wǎng)絡(luò)采用yolov3。

5.根據(jù)權(quán)利要求1所述的一種餐桌桌面清潔度的識(shí)別方法，其特征在于，將所述第一特征與預(yù)設(shè)的特征庫中的第二特征進(jìn)行相似度匹配，獲得匹配結(jié)果，根據(jù)匹配結(jié)果獲取所述第一特征的類別的具體步驟為：

分別計(jì)算所述第一特征與各第二特征的余弦距離，獲得作為相似度的余弦距離值；

提取余弦距離值最大時(shí)對(duì)應(yīng)的第二特征的類別作為所述第一特征的類別。

6.根據(jù)權(quán)利要求1所述的一種餐桌桌面清潔度的識(shí)別方法，其特征在于，對(duì)所述桌面圖像中所有第一特征的類別進(jìn)行統(tǒng)計(jì)，并根據(jù)統(tǒng)計(jì)結(jié)果生成相應(yīng)的桌面清潔度的具體步驟為：

對(duì)所述桌面圖像中所有第一特征的類別進(jìn)行統(tǒng)計(jì)，獲得各類別所對(duì)應(yīng)的第一特征的數(shù)量，即特征數(shù)量；

計(jì)算各類別的權(quán)重和相對(duì)應(yīng)的特征數(shù)量的乘積，并對(duì)所有特征求和，獲得清潔值；

根據(jù)清潔值和預(yù)設(shè)映射關(guān)系輸出相對(duì)應(yīng)的清潔度。

7.根據(jù)權(quán)利要求1所述的一種餐桌桌面清潔度的識(shí)別方法，其特征在于：

所述第一特征的類別包括清潔、廢紙巾、肉類殘?jiān)筒祟悮堅(jiān)?/p>

所述清潔度為清潔等級(jí)。

8.一種餐桌桌面清潔度的識(shí)別系統(tǒng)，其特征在于，包括：

特征提取模塊，用于采集桌面圖像，對(duì)所述桌面圖像進(jìn)行特征提取，獲得相對(duì)應(yīng)的第一特征；

類別判定模塊，用于將所述第一特征與預(yù)設(shè)的特征庫中的第二特征進(jìn)行相似度匹配，獲得匹配結(jié)果，根據(jù)匹配結(jié)果獲取所述第一特征的類別；

清潔度計(jì)算模塊，對(duì)所述桌面圖像中所有第一特征的類別進(jìn)行統(tǒng)計(jì)，并根據(jù)統(tǒng)計(jì)結(jié)果生成相應(yīng)的桌面清潔度。

9.根據(jù)權(quán)利要求8所述的一種餐桌桌面清潔度的識(shí)別系統(tǒng)，其特征在于，還包括反饋模塊，所述反饋模塊被配置為：

從所述特征庫中提取與所述第一特征類別相同的第二特征，計(jì)算所述第一特征與所述第二特征的平均相似度；

將所述平均相似度與預(yù)設(shè)的平均相似度閾值進(jìn)行比較，當(dāng)所述平均相似度大于預(yù)設(shè)的平均相似度閾值時(shí)，將所述第一特征添加至所述特征庫中。

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，該程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至7任意一項(xiàng)所述方法的步驟。