[發明專利]一種輔助用戶尋物的方法及裝置

有效

• 申請號: 201680007027.0
• 申請日: 2016-12-30
• 公開（公告）號: CN107278301B
• 公開（公告）日: 2020-12-08
• 發明（設計）人: 南一冰;廉士國;李強
• 申請（專利權）人: 深圳前海達闥云端智能科技有限公司
• 主分類號: G01S11/14
• 分類號: G01S11/14;G06F16/9537;G06T7/70
• 代理公司: 北京中博世達專利商標代理有限公司 11274
• 代理人: 申健

1.一種輔助用戶尋物的方法，其特征在于，包括：

確定目標物體以及所述目標物體相對于所述用戶的初始三維空間位置，所述目標物體為用戶待尋找的物體；所述確定所述目標物體相對于所述用戶的初始三維空間位置包括：通過深度傳感器確定所述目標物體相對于所述用戶的初始三維空間位置；

生成與所述初始三維空間位置對應的初始虛擬空間聲，所述初始虛擬空間聲通過根據人耳對聲音信號的感知特點,使用信號處理方法對聲源到兩耳之間的傳遞函數模擬構建；

在用戶尋物過程中，實時更新所述目標物體相對于所述用戶的三維空間位置，并生成與更新后的三維空間位置對應的新的虛擬空間聲；

所述確定目標物體，具體包括：接收用戶輸入的第一提示信息，所述第一提示信息用于指定所述目標物體；獲取用戶所在場景對應的全景圖像，并在所述全景圖像中進行目標檢測以確定所述目標物體；所述第一提示信息包括所述目標物體的名稱或用戶對所述目標物體的特征描述；

所述在所述全景圖像中進行目標檢測以確定所述目標物體，具體包括：當進行目標檢測后檢測到至少一個候選目標物體時，向用戶輸出第二提示信息，所述第二提示信息用于提示用戶從所述至少一個候選目標物體中選擇最終的目標物體；接收用戶對所述第二提示信息的響應，并根據用戶的響應確定所述目標物體；

在生成與更新后的三維空間位置對應的新的虛擬空間聲之后，所述方法還包括：當所述目標物體與所述用戶的距離小于預設閾值時，語音提示用戶以指導用戶逐漸靠近所述目標物體。

2.根據權利要求1所述的方法，其特征在于，所述確定目標物體之后，所述方法還包括：

實時跟蹤已確定的所述目標物體和所述用戶；

所述實時更新所述目標物體相對于所述用戶的三維空間位置，具體包括：

根據對所述目標物體和用戶的跟蹤結果，分別確定所述目標物體和所述用戶的當前位置；

根據所述目標物體和所述用戶的當前位置，確定所述目標物體相對于所述用戶的更新后的三維空間位置。

3.根據權利要求1所述的方法，其特征在于，所述虛擬空間聲的聲音類別與所述目標物體的種類對應。

4.根據權利要求1所述的方法，其特征在于，所述生成與更新后的三維空間位置對應的新的虛擬空間聲，包括：

檢測所述更新后的三維空間位置與更新前的三維空間位置相比是否靠近所述用戶；

如果是，則生成與所述更新后的三維空間位置對應的新的虛擬空間聲，且所述新的虛擬空間聲的頻率大于所述更新前的三維空間位置對應的虛擬空間聲。

5.一種輔助用戶尋物的裝置，其特征在于，包括：

檢測單元，用于確定目標物體，所述目標物體為用戶待尋找的物體；

位置確定單元，用于確定所述檢測單元檢測到的目標物體相對于所述用戶的初始三維空間位置，包括通過深度傳感器確定所述目標物體相對于所述用戶的初始三維空間位置；

虛擬空間聲生成單元，用于生成與所述位置確定單元確定的所述初始三維空間位置對應的初始虛擬空間聲，所述初始虛擬空間聲通過根據人耳對聲音信號的感知特點,使用信號處理方法對聲源到兩耳之間的傳遞函數模擬構建；

所述位置確定單元，還用于在用戶尋物過程中，實時更新所述目標物體相對于所述用戶的三維空間位置；

所述虛擬空間聲生成單元，還用于生成與所述位置確定單元確定的更新后的三維空間位置對應的新的虛擬空間聲；

所述檢測單元，還用于接收用戶輸入的第一提示信息，所述第一提示信息用于指定所述目標物體；獲取用戶所在場景對應的全景圖像，并在所述全景圖像中進行目標檢測以確定所述目標物體；所述第一提示信息包括所述目標物體的名稱或用戶對所述目標物體的特征描述；所述檢測單元，還用于當檢測到至少一個候選目標物體時，向用戶輸出第二提示信息，所述第二提示信息用于提示用戶從所述至少一個候選目標物體中選擇最終的目標物體；以及接收用戶對所述第二提示信息的響應，并根據用戶的響應確定所述目標物體；

所述檢測單元，還用于當所述目標物體與所述用戶的距離小于預設閾值時，語音提示用戶以使得用戶逐漸靠近所述目標物體。