[發(fā)明專利]在監(jiān)控系統(tǒng)中捕獲一系列事件

有效

• 申請?zhí)枺?/td>: 201811532666.6
• 申請日: 2018-12-14
• 公開（公告）號: CN109934085B
• 公開（公告）日: 2023-07-18
• 發(fā)明（設(shè)計(jì)）人: F·勒奎;A·H·柯雷亞
• 申請（專利權(quán)）人: 埃森哲環(huán)球解決方案有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V20/52;G06V10/82;H04N7/18
• 代理公司: 北京市金杜律師事務(wù)所 11256
• 代理人: 酆迅

本公開的實(shí)施方式涉及在監(jiān)控系統(tǒng)中捕獲一系列事件。該實(shí)施方式涉及：接收多維數(shù)據(jù)集，該多維數(shù)據(jù)集包括針對監(jiān)控系統(tǒng)的設(shè)備集中的每個(gè)設(shè)備、在相應(yīng)的時(shí)間段內(nèi)和在設(shè)備集中的設(shè)備上的特征集；處理多維數(shù)據(jù)，以標(biāo)識(shí)由監(jiān)控系統(tǒng)的設(shè)備集中的相應(yīng)設(shè)備所記錄的特征集；在位置維度上將第一設(shè)備的特征集相對于第二設(shè)備的特征集進(jìn)行比較，以確定第一設(shè)備的特征集中的第一特征對應(yīng)于第二設(shè)備的特征集中的第二特征；以及通過基于比較從多維數(shù)據(jù)集中選擇適當(dāng)?shù)奶卣骷瑏硖峁┨卣骷男蛄校蛄性谠O(shè)備集的特征集之間提供對象的前進(jìn)的順序。

背景技術(shù)

監(jiān)控系統(tǒng)可以包括傳感器、相機(jī)等，以監(jiān)控和記錄在環(huán)境內(nèi)發(fā)生的活動(dòng)。例如，商業(yè)場所(例如，倉庫)可以包括相機(jī)(例如，固定的、可移動(dòng)的)和/或傳感器，相機(jī)(例如，固定的、可移動(dòng)的)和/或傳感器響應(yīng)于在商業(yè)場所內(nèi)和/或周圍發(fā)生的活動(dòng)。記錄可以被提供為存儲(chǔ)在計(jì)算機(jī)可讀文件(例如，圖像文件、視頻文件、音頻文件)中的數(shù)字記錄。記錄的長度可以跨越數(shù)十、數(shù)百甚至數(shù)千個(gè)小時(shí)。例如，監(jiān)控系統(tǒng)可以提供環(huán)境的24小時(shí)記錄，并且產(chǎn)生的記錄可以存儲(chǔ)數(shù)天、數(shù)周、數(shù)月甚至數(shù)年。進(jìn)一步地，可以提供多個(gè)記錄，每個(gè)記錄(或記錄集)來自監(jiān)控系統(tǒng)的相應(yīng)的記錄設(shè)備(例如，相機(jī))。

在一些實(shí)例中，響應(yīng)于事件，可以察看一個(gè)或多個(gè)記錄，以便解決事件。例如，如果產(chǎn)品在倉庫中的運(yùn)輸期間丟失，則可以回顧可能已經(jīng)捕獲了產(chǎn)品穿過倉庫的移動(dòng)的記錄，以幫助找到丟失的產(chǎn)品。作為另一示例，如果發(fā)生事故，可以回顧記錄以幫助了解事故的原因。然而，記錄的多樣性和記錄的長度可能需要時(shí)間密集并且資源密集的回顧，以發(fā)現(xiàn)(多個(gè))記錄的相關(guān)區(qū)段。

發(fā)明內(nèi)容

本公開的實(shí)施方式總體上涉及在監(jiān)控系統(tǒng)中捕獲一系列事件。更特別地，本公開的實(shí)施方式涉及從由多設(shè)備監(jiān)控系統(tǒng)所記錄的數(shù)據(jù)的主體中提供數(shù)據(jù)序列和相應(yīng)描述。

在一些實(shí)施方式中，動(dòng)作包括：接收多維數(shù)據(jù)集的至少一部分，多維數(shù)據(jù)集與由多設(shè)備監(jiān)控系統(tǒng)所記錄的數(shù)據(jù)相對應(yīng)，多維數(shù)據(jù)集包括針對多設(shè)備監(jiān)控系統(tǒng)的設(shè)備集中的每個(gè)設(shè)備、在相應(yīng)的時(shí)間段內(nèi)和在設(shè)備集中的設(shè)備上的特征集；處理多維數(shù)據(jù)中的至少一部分多維數(shù)據(jù)，以標(biāo)識(shí)由多設(shè)備監(jiān)控系統(tǒng)的設(shè)備集中的相應(yīng)的設(shè)備所記錄的特征集；在位置維度上將第一設(shè)備的特征集相對于第二設(shè)備的特征集進(jìn)行比較，以確定第一設(shè)備的特征集中的第一特征對應(yīng)于第二設(shè)備的特征集中的第二特征；通過基于比較從多維數(shù)據(jù)集中選擇適當(dāng)?shù)奶卣骷瑏硖峁┨卣骷男蛄校蛄性谠O(shè)備集的特征集之間提供對象的前進(jìn)的順序；以及生成包括多個(gè)節(jié)點(diǎn)的圖形，每個(gè)節(jié)點(diǎn)對應(yīng)于位置并且包括相應(yīng)的記錄數(shù)據(jù)和描述。該方面的其它實(shí)施方式包括對應(yīng)的系統(tǒng)、裝置和計(jì)算機(jī)程序，其被配置為執(zhí)行在計(jì)算機(jī)存儲(chǔ)設(shè)備上編碼的方法的動(dòng)作。

這些和其它實(shí)施方式可以各自可選地包括以下特征中的一個(gè)或多個(gè)特征：通過使用機(jī)器學(xué)習(xí)(ML)模型處理記錄數(shù)據(jù)，來基于特征提取提供多維數(shù)據(jù)集；ML模型被提供為卷積神經(jīng)網(wǎng)絡(luò)(CNN)；提供序列包括基于設(shè)備標(biāo)識(shí)后續(xù)設(shè)備、以及標(biāo)識(shí)潛在后續(xù)設(shè)備集，每個(gè)潛在后續(xù)設(shè)備與概率相關(guān)聯(lián)；第一設(shè)備的特征集相對于第二設(shè)備的特征集在時(shí)間維度上進(jìn)行比較，以確定第一設(shè)備的特征集中的第一特征對應(yīng)于第二設(shè)備的特征集中的第二特征；使用機(jī)器學(xué)習(xí)技術(shù)將第一設(shè)備的特征集相對于第二設(shè)備的特征集進(jìn)行比較；動(dòng)作進(jìn)一步包括使用知識(shí)圖來確定相對于第二設(shè)備的位置的第一設(shè)備的位置；相應(yīng)的記錄數(shù)據(jù)包括由該位置處的相應(yīng)設(shè)備所捕獲的圖像；以及根據(jù)知識(shí)圖來確定描述，并且該描述指示位置。

本公開還提供了計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其被耦合到一個(gè)或多個(gè)處理器，并且具有在其上存儲(chǔ)的指令，該指令在由一個(gè)或多個(gè)處理器執(zhí)行時(shí)使得一個(gè)或多個(gè)處理器根據(jù)本文中所提供的方法的實(shí)施方式來執(zhí)行操作。

本公開還提供了用于實(shí)現(xiàn)本文中所提供的方法的系統(tǒng)。系統(tǒng)包括一個(gè)或多個(gè)處理器、以及被耦合到一個(gè)或多個(gè)處理器的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，該計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)具有在其上存儲(chǔ)的指令，該指令在由一個(gè)或多個(gè)處理器執(zhí)行時(shí)使得一個(gè)或多個(gè)處理器根據(jù)本文中所提供的方法的實(shí)施方式來執(zhí)行操作。

應(yīng)當(dāng)理解，根據(jù)本公開的方法可以包括本文中所描述的方面和特征的任何組合。即，根據(jù)本公開的方法不限于本文中具體描述的方面和特征的組合，還包括所提供的方面和特征的任何組合。