[發(fā)明專利]交互方法、裝置及計(jì)算機(jī)設(shè)備

有效

• 申請?zhí)枺?/td>: 202011474943.X
• 申請日: 2020-12-14
• 公開（公告）號(hào): CN112464894B
• 公開（公告）日: 2023-09-01
• 發(fā)明（設(shè)計(jì)）人: 顧在旺;程駿;龐建新
• 申請（專利權(quán)）人: 深圳市優(yōu)必選科技股份有限公司
• 主分類號(hào): G06V20/20
• 分類號(hào): G06V20/20;G06V10/25;G06V10/44;G06V10/774;G06V10/82;G06N3/0464;G06N3/084
• 代理公司: 北京超凡宏宇專利代理事務(wù)所(特殊普通合伙) 11463
• 代理人: 梁韜

1.一種交互方法，其特征在于，所述方法包括：

輸出待識(shí)別物體的提示信息；

根據(jù)待識(shí)別物體的類別調(diào)用相應(yīng)的識(shí)物子模型；

將初始圖像輸入所述識(shí)物子模型，獲取所述初始圖像對應(yīng)的中心點(diǎn)位置熱力圖和物體高寬特征圖；所述中心點(diǎn)位置熱力圖用于表示圖像中的任何一點(diǎn)是物體框中心點(diǎn)的概率；所述物體高寬特征圖是指圖像中的每個(gè)像素點(diǎn)為物體檢測框的中心點(diǎn)時(shí)，對應(yīng)物體檢測框長寬在特征圖中的區(qū)域體現(xiàn)；

根據(jù)預(yù)先存儲(chǔ)的全部物體的中心點(diǎn)位置熱力圖，查找與所述初始圖像對應(yīng)的中心點(diǎn)位置熱力圖匹配的備選物體；

判斷所述備選物體的高寬特征圖與所述初始圖像對應(yīng)的物體高寬特征圖是否匹配；

若所述備選物體的高寬特征圖與所述初始圖像對應(yīng)的物體高寬特征圖匹配，則確定所述初始圖像中包含所述待識(shí)別物體。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述輸出待識(shí)別物體的提示信息的步驟之前，所述方法還包括：

采集當(dāng)前場景的基礎(chǔ)圖像；

識(shí)別所述基礎(chǔ)圖像中包含的全部物體的特征數(shù)據(jù)，其中，所述待識(shí)別物體為所述全部物體中的任一個(gè)；

對應(yīng)存儲(chǔ)每個(gè)物體的提示信息及類別。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)預(yù)先存儲(chǔ)的全部物體的中心點(diǎn)位置熱力圖，查找與所述初始圖像對應(yīng)的中心點(diǎn)位置熱力圖匹配的備選物體的步驟，包括：

根據(jù)全部物體的中心點(diǎn)位置熱力圖，對所述初始圖像對應(yīng)的中心點(diǎn)位置熱力圖內(nèi)的各像素點(diǎn)進(jìn)行遍歷，確定每個(gè)物體的中心點(diǎn)位置熱力圖的置信度；

查找出置信度最高的候選物體；

若所述候選物體的置信度高于預(yù)設(shè)閾值，則確定所述候選物體為匹配的備選物體。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將初始圖像輸入所述識(shí)物子模型，獲取所述初始圖像對應(yīng)的中心點(diǎn)位置熱力圖和物體高寬特征圖的步驟，包括：

將所述初始圖像進(jìn)行標(biāo)準(zhǔn)化預(yù)處理；

將標(biāo)準(zhǔn)化預(yù)處理后的所述初始圖像進(jìn)行編碼，獲得對應(yīng)的特征矩陣；

解碼所述特征矩陣，獲得所述初始圖像對應(yīng)的中心點(diǎn)位置熱力圖和物體高寬特征圖。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述將所述初始圖像進(jìn)行標(biāo)準(zhǔn)化預(yù)處理的步驟，包括：

將所述初始圖像裁剪成預(yù)設(shè)尺寸；

將裁剪后的所述初始圖像進(jìn)行歸一化處理。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述識(shí)物子模型通過如下方式預(yù)先獲得：

獲取各個(gè)類別的預(yù)定數(shù)量的物體樣本圖像；

將各個(gè)類別的物體樣本圖像分別輸入基礎(chǔ)神經(jīng)網(wǎng)絡(luò)，訓(xùn)練得到相應(yīng)類別的識(shí)物子模型。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，檢測所述初始圖像中是否包含所述待識(shí)別物體的步驟之后，所述方法還包括：

若所述初始圖像中包含所述待識(shí)別物體，則確定所述待識(shí)別物體識(shí)別成功。

8.一種交互裝置，其特征在于，所述裝置包括：

輸出模塊，用于輸出待識(shí)別物體的提示信息；

調(diào)用模塊，用于根據(jù)待識(shí)別物體的類別調(diào)用相應(yīng)的識(shí)物子模型；

檢測模塊，用于將初始圖像輸入所述識(shí)物子模型，獲取所述初始圖像對應(yīng)的中心點(diǎn)位置熱力圖和物體高寬特征圖；所述中心點(diǎn)位置熱力圖用于表示圖像中的任何一點(diǎn)是物體框中心點(diǎn)的概率；所述物體高寬特征圖是指圖像中的每個(gè)像素點(diǎn)為物體檢測框的中心點(diǎn)時(shí)，對應(yīng)物體檢測框長寬在特征圖中的區(qū)域體現(xiàn)；

根據(jù)預(yù)先存儲(chǔ)的全部物體的中心點(diǎn)位置熱力圖，查找與所述初始圖像對應(yīng)的中心點(diǎn)位置熱力圖匹配的備選物體；

判斷所述備選物體的高寬特征圖與所述初始圖像對應(yīng)的物體高寬特征圖是否匹配；

若所述備選物體的高寬特征圖與所述初始圖像對應(yīng)的物體高寬特征圖匹配，則確定所述初始圖像中包含所述待識(shí)別物體。