[發(fā)明專利]基于圖像識(shí)別的洗滌控制方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010568179.6
• 申請(qǐng)日: 2020-06-19
• 公開（公告）號(hào): CN113818191A
• 公開（公告）日: 2021-12-21
• 發(fā)明（設(shè)計(jì)）人: 許升;呂佩師;石代興
• 申請(qǐng)（專利權(quán)）人: 青島海爾洗衣機(jī)有限公司;海爾智家股份有限公司
• 主分類號(hào): D06F33/36
• 分類號(hào): D06F33/36;D06F34/05;D06F34/18;D06F101/04;D06F101/06
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種基于圖像識(shí)別的洗滌控制方法，其特征在于，包括以下步驟：

獲取圖像采集裝置上傳的待洗滌衣物的原始圖像；

獲取經(jīng)過訓(xùn)練的神經(jīng)網(wǎng)絡(luò)模型；

根據(jù)所述神經(jīng)網(wǎng)絡(luò)模型確定所述原始圖像中待洗滌衣物的第一衣物信息及目標(biāo)位置，所述第一衣物信息包括第一材質(zhì)集、第一概率及衣物數(shù)量；

根據(jù)目標(biāo)位置對(duì)應(yīng)的局部特征圖進(jìn)行圖像檢索，獲取待洗滌衣物的第二衣物信息，所述第二衣物信息包括第二材質(zhì)集及第二概率；

根據(jù)所述第一衣物信息與所述第二衣物信息確定待洗滌衣物的衣物材質(zhì)；

根據(jù)所述衣物材質(zhì)和所述衣物數(shù)量確定洗滌參數(shù)，并下發(fā)所述洗滌參數(shù)，根據(jù)所述洗滌參數(shù)進(jìn)行洗滌。

2.根據(jù)權(quán)利要求1所述的基于圖像識(shí)別的洗滌控制方法，其特征在于，所述根據(jù)所述神經(jīng)網(wǎng)絡(luò)模型確定所述原始圖像中待洗滌衣物的第一衣物信息及目標(biāo)位置，所述第一衣物信息包括第一材質(zhì)集、第一概率及衣物數(shù)量，包括以下步驟：

將所述原始圖像輸入所述神經(jīng)網(wǎng)絡(luò)模型，所述神經(jīng)網(wǎng)絡(luò)模型包括特征提取子網(wǎng)絡(luò)和目標(biāo)檢測子網(wǎng)絡(luò)；

應(yīng)用所述特征提取子網(wǎng)絡(luò)對(duì)所述原始圖像進(jìn)行特征提取，獲取原始圖像的全局特征圖；

應(yīng)用所述目標(biāo)檢測子網(wǎng)絡(luò)對(duì)所述全局特征圖進(jìn)行識(shí)別，獲取待洗滌衣物的第一衣物信息及目標(biāo)位置。

3.根據(jù)權(quán)利要求1所述的基于圖像識(shí)別的洗滌控制方法，其特征在于，所述根據(jù)目標(biāo)位置對(duì)應(yīng)的局部特征圖進(jìn)行圖像檢索，獲取待洗滌衣物的第二衣物信息，所述第二衣物信息包括第二材質(zhì)集及第二概率，包括以下步驟：

獲取細(xì)粒度分類模型；

獲取目標(biāo)位置對(duì)應(yīng)的局部特征圖；

根據(jù)所述細(xì)粒度分類模型對(duì)所述局部特征圖進(jìn)行分類檢索，獲取待洗滌衣物的第二衣物信息。

4.根據(jù)權(quán)利要求3所述的基于圖像識(shí)別的洗滌控制方法，其特征在于，所述根據(jù)所述細(xì)粒度分類模型對(duì)所述局部特征圖進(jìn)行分類檢索，獲取待洗滌衣物的第二衣物信息，包括以下步驟：

將所述局部特征圖輸入所述細(xì)粒度分類模型，獲取局部特征圖的局部特征區(qū)域；

將所述局部特征區(qū)域與預(yù)存細(xì)粒度圖像進(jìn)行比對(duì)，根據(jù)比對(duì)結(jié)果確定待洗滌衣物的第二衣物信息。

5.根據(jù)權(quán)利要求1-4中任一項(xiàng)所述的基于圖像識(shí)別的洗滌控制方法，其特征在于，還包括以下步驟：

獲取洗滌裝置上傳的原始洗滌程序；

根據(jù)所述洗滌參數(shù)對(duì)所述原始洗滌程序進(jìn)行修正，并下發(fā)修正洗滌參數(shù)，根據(jù)所述修正洗滌參數(shù)進(jìn)行洗滌。

6.根據(jù)權(quán)利要求1-4中任一項(xiàng)所述的基于圖像識(shí)別的洗滌控制方法，其特征在于，所述獲取經(jīng)過訓(xùn)練的神經(jīng)網(wǎng)絡(luò)模型，包括以下步驟：

建立卷積神經(jīng)網(wǎng)絡(luò)模型，初始化卷積神經(jīng)網(wǎng)絡(luò)模型；

獲取多個(gè)衣物樣本圖像，預(yù)處理所述衣物樣本圖像，獲取訓(xùn)練集；

根據(jù)所述訓(xùn)練集迭代訓(xùn)練所述卷積神經(jīng)網(wǎng)絡(luò)模型，獲取經(jīng)過訓(xùn)練的神經(jīng)網(wǎng)絡(luò)模型。

7.根據(jù)權(quán)利要求1-4中任一項(xiàng)所述的基于圖像識(shí)別的洗滌控制方法，其特征在于，所述獲取圖像采集裝置上傳的待洗滌衣物的原始圖像，包括以下步驟：

洗滌裝置啟動(dòng)圖像采集流程；

按照預(yù)設(shè)驅(qū)動(dòng)指令驅(qū)動(dòng)內(nèi)筒轉(zhuǎn)動(dòng)，并多次采集內(nèi)筒中的待洗滌衣物的原始圖像；

若圖像采集次數(shù)是否達(dá)到預(yù)設(shè)次數(shù)，則將采集到的所述原始圖像上傳至云端服務(wù)器。