[發(fā)明專(zhuān)利]分類(lèi)和識(shí)別系統(tǒng)及方法

在審

• 申請(qǐng)?zhí)枺?/td>: 201811325789.2
• 申請(qǐng)日: 2018-11-08
• 公開(kāi)（公告）號(hào): CN110059527A
• 公開(kāi)（公告）日: 2019-07-26
• 發(fā)明（設(shè)計(jì)）人: 阿明·哈姆齊;克里斯琴·溫寧格;費(fèi)利克斯·科普
• 申請(qǐng)（專(zhuān)利權(quán)）人: 斯基達(dá)特有限公司
• 主分類(lèi)號(hào): G06K9/00
• 分類(lèi)號(hào): G06K9/00;G06T7/521;G01D21/02
• 代理公司: 北京北新智誠(chéng)知識(shí)產(chǎn)權(quán)代理有限公司 11100
• 代理人: 王宏偉;陳小鈺

公開(kāi)了一種識(shí)別食品或飲料產(chǎn)品的系統(tǒng)和方法。捕獲產(chǎn)品的圖像連同指示產(chǎn)品在圖像中何處的數(shù)據(jù)，例如，來(lái)自立體相機(jī)的數(shù)據(jù)。提取圖像中顯示產(chǎn)品的部分并將其特征與一系列產(chǎn)品的預(yù)定模型進(jìn)行比較以確定產(chǎn)品的初步標(biāo)識(shí)。作為交叉查驗(yàn)，獲取產(chǎn)品的物理屬性，例如重量和溫度，并且將這些屬性與對(duì)應(yīng)于潛在可能作為標(biāo)識(shí)的預(yù)期物理屬性進(jìn)行比較。如果產(chǎn)品的物理屬性與預(yù)期物理屬性相一致，則產(chǎn)品的初步標(biāo)識(shí)是產(chǎn)品的標(biāo)識(shí)。

技術(shù)領(lǐng)域

本公開(kāi)涉及分類(lèi)系統(tǒng)和方法以及識(shí)別系統(tǒng)和方法。更具體地但并不排他地，本公開(kāi)對(duì)食品和飲料分類(lèi)和識(shí)別。

背景技術(shù)

自助服務(wù)結(jié)賬機(jī)，例如位于超市作為收銀員結(jié)賬的替代方式，通常讀取產(chǎn)品條形碼或者需要用戶輸入產(chǎn)品選擇，例如利用觸摸屏顯示器。通常，用戶隨后將產(chǎn)品放置在“裝袋區(qū)域”內(nèi)，該“裝袋區(qū)域”包括計(jì)重稱(chēng)，其被用來(lái)對(duì)比之前存儲(chǔ)的信息驗(yàn)證產(chǎn)品的重量，從而作為用來(lái)確保用戶將經(jīng)掃描的產(chǎn)品放置在“裝袋區(qū)域”內(nèi)的安全措施。

發(fā)明內(nèi)容

概述而言，公開(kāi)了一種識(shí)別食品或飲料產(chǎn)品的系統(tǒng)和方法。捕獲產(chǎn)品的圖像，連同指示產(chǎn)品在圖像中在何處的數(shù)據(jù)，例如，來(lái)自立體相機(jī)的數(shù)據(jù)。提取圖像中顯示產(chǎn)品的部分，并將其特征與一系列產(chǎn)品的預(yù)定模型進(jìn)行比較，以確定產(chǎn)品的初步標(biāo)識(shí)。作為交叉查驗(yàn)，獲取產(chǎn)品的物理屬性，例如重量和溫度，并且將這些屬性與對(duì)應(yīng)于潛在可能的標(biāo)識(shí)的預(yù)期物理屬性進(jìn)行比較。如果產(chǎn)品的物理屬性與預(yù)期物理屬性相一致，則產(chǎn)品的初步標(biāo)識(shí)是產(chǎn)品的標(biāo)識(shí)。

在本公開(kāi)的一些方面，提供了一種識(shí)別傳感器區(qū)域中產(chǎn)品的計(jì)算機(jī)實(shí)現(xiàn)方法。該產(chǎn)品為食品或飲料。方法包括接收指示產(chǎn)品在傳感器區(qū)域中的位置的位置數(shù)據(jù)。接收傳感器區(qū)域的圖像。可以在和位置數(shù)據(jù)大體上相同的時(shí)間接收該圖像。基于位置數(shù)據(jù)確定圖像中對(duì)應(yīng)于產(chǎn)品的部分。利用圖像的該部分，基于多個(gè)預(yù)定模型，確定產(chǎn)品的初步標(biāo)識(shí)。該多個(gè)預(yù)定模型可以存儲(chǔ)在模型數(shù)據(jù)庫(kù)中。該多個(gè)預(yù)定模型包括產(chǎn)品的模型，并且預(yù)定模型中的每一個(gè)與相應(yīng)的預(yù)期物理屬性相關(guān)聯(lián)。接收指示產(chǎn)品的一個(gè)或多個(gè)物理屬性的物理屬性數(shù)據(jù)。如果物理屬性數(shù)據(jù)與預(yù)期物理屬性相一致，則確定產(chǎn)品的標(biāo)識(shí)為該初步標(biāo)識(shí)。

該方法使產(chǎn)品能夠得到識(shí)別而無(wú)需以機(jī)器可讀碼標(biāo)記產(chǎn)品，例如條形碼或二維碼。確定圖像中對(duì)應(yīng)于產(chǎn)品的部分，增大了確定初步標(biāo)識(shí)的精確度，因?yàn)樵趯D像的部分與模型數(shù)據(jù)庫(kù)中的模型進(jìn)行比較之前從圖像去除不相關(guān)的信息，。此外，將產(chǎn)品的物理屬性數(shù)據(jù)與預(yù)期物理屬性進(jìn)行比較，也增大了識(shí)別的精確度，因?yàn)榭紤]除了產(chǎn)品外觀之外的產(chǎn)品的特征。

術(shù)語(yǔ)“與……相一致”應(yīng)被理解為表示物理屬性數(shù)據(jù)大體上與預(yù)期物理屬相相匹配或相對(duì)應(yīng)。例如，傳感器區(qū)域中產(chǎn)品的重量可以在偏離產(chǎn)品的預(yù)期重量的預(yù)定閾值范圍內(nèi)。

本公開(kāi)的其他方面涉及一種用于識(shí)別傳感器區(qū)域中的產(chǎn)品的系統(tǒng)。該產(chǎn)品為食品或飲料。該系統(tǒng)包括深度傳感器和相機(jī)，該深度傳感器被設(shè)置為提供指示產(chǎn)品在傳感器區(qū)域中的位置的位置數(shù)據(jù)，該相機(jī)被設(shè)置為捕獲傳感器區(qū)域的圖像。深度傳感器可以是立體相機(jī)。系統(tǒng)還包括物理屬性傳感器，其被設(shè)置為提供指示產(chǎn)品的一個(gè)或多個(gè)物理屬性的物理屬性數(shù)據(jù)。例如，物理屬性傳感器可以是熱成像相機(jī)、溫度計(jì)、計(jì)重稱(chēng)、二維或優(yōu)選地三維激光雷達(dá)傳感器，以及雷達(dá)傳感器中的一種或多種。系統(tǒng)還包括具有多個(gè)產(chǎn)品的預(yù)定模型的模型數(shù)據(jù)庫(kù)，該多個(gè)預(yù)定模型包括該產(chǎn)品的模型。預(yù)定模型中的每一個(gè)與相應(yīng)的預(yù)期物理屬性相關(guān)聯(lián)。另外，系統(tǒng)包括處理器，該處理器被設(shè)置成基于位置數(shù)據(jù)確定圖像中對(duì)應(yīng)于產(chǎn)品的部分，利用圖像的該部分基于模型數(shù)據(jù)庫(kù)中多個(gè)預(yù)定模型確定該產(chǎn)品的初步標(biāo)識(shí)，以及通過(guò)將物理屬性數(shù)據(jù)與和初步標(biāo)識(shí)相關(guān)聯(lián)的預(yù)期物理屬性進(jìn)行比較來(lái)確定產(chǎn)品的標(biāo)識(shí)。