[發(fā)明專利]基于全局交叉熵加權(quán)的樓宇監(jiān)控方法、裝置和電子設(shè)備

有效

• 申請?zhí)枺?/td>: 202010847171.3
• 申請日: 2020-08-21
• 公開（公告）號: CN112001301B
• 公開（公告）日: 2021-07-20
• 發(fā)明（設(shè)計）人: 吳寶昕
• 申請（專利權(quán)）人: 江蘇三意樓宇科技股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/34;G06K9/46;G06K9/62;H04N7/18;G06N3/04;G06N3/08
• 代理公司: 北京哌智科創(chuàng)知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11745
• 代理人: 包加健

1.一種基于全局交叉熵加權(quán)的智慧園區(qū)的樓宇監(jiān)控方法，其特征在于，包括：獲取由第一攝像頭和第二攝像頭所拍攝的所述智慧園區(qū)的樓宇的第一樓宇圖像和第二樓宇圖像，所述第一攝像頭和所述第二攝像頭具有不同的拍攝位置和拍攝角度，且所述第一樓宇圖像和所述第二樓宇圖像具有相同大小；將所述第一樓宇圖像和第二樓宇圖像分別輸入卷積神經(jīng)網(wǎng)絡(luò)以獲得第一初始特征圖和第二初始特征圖；計算所述第一初始特征圖相對于所述第二初始特征圖的第一全局交叉熵加權(quán)系數(shù)；計算所述第二初始特征圖相對于所述第一初始特征圖的第二全局交叉熵加權(quán)系數(shù)；基于所述第一全局交叉熵加權(quán)系數(shù)和所述第二全局交叉熵加權(quán)系數(shù)對所述第二初始特征圖和所述第一初始特征圖進行加權(quán)以獲得最終特征圖；以及基于所述最終特征圖進行圖像語義分割以獲得圖像語義分割結(jié)果，所述圖像語義分割結(jié)果表示所述樓宇的監(jiān)控結(jié)果；

其中，計算所述第一初始特征圖相對于所述第二初始特征圖的第一全局交叉熵加權(quán)系數(shù)包括：基于以下公式計算所述第一初始特征圖相對于所述第二初始特征圖的第一全局交叉熵加權(quán)系數(shù)：

其中，Hp是第一全局交叉熵加權(quán)系數(shù)，p^(x,y,z)第一初始特征圖中的每個位置的值，q^(x,y,z)是第二初始特征圖中的每個位置的值，W是所述第一初始特征圖和所述第二初始特征圖的寬度，H是所述第一初始特征圖和所述第二初始特征圖的寬度，且C是所述卷積神經(jīng)網(wǎng)絡(luò)的通道數(shù)；

其中，計算所述第二初始特征圖相對于所述第一初始特征圖的第二全局交叉熵加權(quán)系數(shù)包括：基于以下公式計算所述第二初始特征圖相對于所述第一初始特征圖的第二全局交叉熵加權(quán)系數(shù)：

其中，Hp是第一全局交叉熵加權(quán)系數(shù)，p^(x,y,z)是第一初始特征圖中的每個位置的值，q^(x,y,z)是第二初始特征圖中的每個位置的值，W是所述第一初始特征圖和所述第二初始特征圖的寬度，H是所述第一初始特征圖和所述第二初始特征圖的寬度，且C是所述卷積神經(jīng)網(wǎng)絡(luò)的通道數(shù)。

2.根據(jù)權(quán)利要求1所述的智慧園區(qū)的樓宇監(jiān)控方法，其中，基于所述第一全局交叉熵加權(quán)系數(shù)和所述第二全局交叉熵加權(quán)系數(shù)對所述第二初始特征圖和所述第一初始特征圖進行加權(quán)以獲得最終特征圖包括：基于所述第二全局交叉熵加權(quán)系數(shù)對所述第一初始特征圖進行加權(quán)以獲得第一加權(quán)特征圖；基于所述第一全局交叉熵加權(quán)系數(shù)對所述第二初始特征圖進行加權(quán)以獲得第二加權(quán)特征圖；以及將所述第一加權(quán)特征圖和所述第二加權(quán)特征圖進行點加以獲得所述最終特征圖。

3.根據(jù)權(quán)利要求2所述的智慧園區(qū)的樓宇監(jiān)控方法，其中，基于所述第二全局交叉熵加權(quán)系數(shù)對所述第一初始特征圖進行加權(quán)以獲得第一加權(quán)特征圖包括：以所述第二全局交叉熵加權(quán)系數(shù)與第一系數(shù)之積對所述第一初始特征圖進行加權(quán)以獲得第一加權(quán)特征圖；以及基于所述第一全局交叉熵加權(quán)系數(shù)對所述第二初始特征圖進行加權(quán)以獲得第二加權(quán)特征圖包括：以所述第一全局交叉熵加權(quán)系數(shù)與第二系數(shù)之積對所述第二初始特征圖進行加權(quán)以獲得第二加權(quán)特征圖。

4.根據(jù)權(quán)利要求3所述的智慧園區(qū)的樓宇監(jiān)控方法，其中，將所述第一加權(quán)特征圖和所述第二加權(quán)特征圖進行點加以獲得所述最終特征圖包括：將所述第一加權(quán)特征圖與第三系數(shù)之積和所述第二加權(quán)特征圖進行點加以獲得所述最終特征圖。

5.根據(jù)權(quán)利要求1所述的智慧園區(qū)的樓宇監(jiān)控方法，其中，所述卷積神經(jīng)網(wǎng)絡(luò)由訓(xùn)練用樓宇圖像訓(xùn)練而獲得，所述訓(xùn)練用樓宇圖像具有樓宇房間的已標(biāo)注的標(biāo)簽。

6.根據(jù)權(quán)利要求4所述的智慧園區(qū)的樓宇監(jiān)控方法，其中，所述第一系數(shù)、所述第二系數(shù)和所述第三系數(shù)作為超參數(shù)，與所述卷積神經(jīng)網(wǎng)絡(luò)一起由訓(xùn)練用樓宇圖像訓(xùn)練而獲得，所述訓(xùn)練用樓宇圖像具有樓宇房間的已標(biāo)注的標(biāo)簽。