[發明專利]數據關聯方法、裝置、設備及存儲介質

有效

• 申請號: 202010027553.1
• 申請日: 2020-01-10
• 公開（公告）號: CN111259755B
• 公開（公告）日: 2023-07-28
• 發明（設計）人: 羅宇軒;亢樂;包英澤
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06V20/64
• 分類號: G06V20/64
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 張娜;劉芳

1.一種數據關聯方法，其特征在于，所述方法應用于電子設備，電子設備與多個深度視覺傳感器進行通信，所述深度視覺傳感器設置在預設三維場景內，所述預設三維場景內還包括目標物品和至少一個用戶，所述方法包括：

若監測到用戶拿取所述目標物品，則獲取拿取所述目標物品時對應的多個目標深度視覺傳感器采集的二維圖像；

根據各二維圖像及映射參數確定對應的目標三維場景點云數據；

根據目標三維場景點云數據確定至少一個用戶關鍵部位在預設三維場景中的位置，所述至少一個用戶關鍵部位在預設三維場景中的位置為根據所述目標三維場景點云數據和第一已訓練至收斂的位置檢測模型確定；

根據各用戶關鍵部位在預設三維場景中的位置確定拿取所述目標物品的目標用戶，所述目標用戶為所述各用戶關鍵部位在預設三維場景中的位置與所述目標物品位置距離最小的用戶；

將所述目標物品與所述目標用戶進行關聯。

2.根據權利要求1所述的方法，其特征在于，所述根據各二維圖像及映射參數確定對應的目標三維場景點云數據，包括：

獲取各目標深度視覺傳感器對應的內外參數和在預設三維場景中的位置；

將所述各二維圖像按照對應的內外參數和在預設三維場景中的位置映射到預設三維場景坐標系中，以獲得對應的目標三維場景點云數據。

3.根據權利要求1所述的方法，其特征在于，所述根據目標三維場景點云數據確定至少一個用戶關鍵部位在預設三維場景中的位置，包括：

將所述目標三維場景點云數據輸入到第一已訓練至收斂的位置檢測模型中，以通過所述第一已訓練至收斂的位置檢測模型對各用戶關鍵部位在預設三維場景中的位置進行檢測；

通過所述第一已訓練至收斂的位置檢測模型輸出各用戶關鍵部位在預設三維場景中的位置。

4.根據權利要求3所述的方法，其特征在于，所述將所述目標三維場景點云數據輸入到第一已訓練至收斂的位置檢測模型中之前，還包括：

采用第一訓練樣本對第一初始位置檢測模型進行訓練；所述第一訓練樣本為標注至少一個用戶關鍵部位在預設三維場景中的位置的第一歷史三維場景點云數據；

若確定滿足第一訓練收斂條件，則將滿足第一訓練收斂條件的第一初始位置檢測模型確定為所述第一已訓練至收斂的位置檢測模型。

5.根據權利要求1所述的方法，其特征在于，所述根據各用戶關鍵部位在預設三維場景中的位置確定拿取所述目標物品的目標用戶，包括：

獲取目標物品位置；

根據各用戶關鍵部位在預設三維場景中的位置與所述目標物品位置確定各用戶關鍵部位與所述目標物品的距離；

將距離最小的用戶確定為所述目標用戶。

6.根據權利要求1所述的方法，其特征在于，所述將所述目標物品與所述目標用戶進行關聯，包括：

獲取所述目標用戶的標識信息和所述目標物品的標識信息；

將所述目標用戶的標識信息和所述目標物品的標識信息進行關聯。

7.根據權利要求6所述的方法，其特征在于，所述根據各用戶關鍵部位在預設三維場景中的位置確定拿取所述目標物品的目標用戶之后，還包括：

根據所述目標三維場景點云數據確定目標用戶頭部在預設三維場景中的位置；

確定與目標用戶頭部在預設三維場景中的位置相匹配的目標用戶的人體位置；

根據所述目標用戶的人體位置與目標用戶的標識信息的映射關系確定所述目標用戶的標識信息。

8.根據權利要求7所述的方法，其特征在于，所述根據所述目標三維場景點云數據確定目標用戶頭部在預設三維場景中的位置，包括：

將所述目標三維場景點云數據輸入到第二已訓練至收斂的位置檢測模型中，以通過所述第二已訓練至收斂的位置檢測模型對目標用戶頭部在預設三維場景中的位置進行檢測；

通過所述第二已訓練至收斂的位置檢測模型輸出目標用戶頭部在預設三維場景中的位置。