[發(fā)明專利]物體搜索方法及其裝置

有效

• 申請?zhí)枺?/td>: 201710640090.4
• 申請日: 2017-07-31
• 公開（公告）號: CN107463659B
• 公開（公告）日: 2020-07-17
• 發(fā)明（設(shè)計）人: 唐城
• 申請（專利權(quán)）人: OPPO廣東移動通信有限公司
• 主分類號: G06F16/583
• 分類號: G06F16/583;G06K9/00
• 代理公司: 深圳市恒申知識產(chǎn)權(quán)事務(wù)所(普通合伙) 44312
• 代理人: 鮑竹

1.一種物體搜索方法，其特征在于，包括：

獲取待搜索物體的搜索信息；

通過結(jié)構(gòu)光對所述待搜索物體所在的場景進行掃描，獲取所述場景的3D模型；

對所述3D模型中的物體進行識別，得到每個物體的識別結(jié)果；

將所述搜索信息與各物體的識別結(jié)果進行匹配，獲取與所述搜索信息匹配的目標物體并標記顯示；其中，所述目標物體為所述待搜索物體；

其中，所述獲取待搜索物體的搜索信息之前，還包括：采集各類物體的深度信息作為樣本數(shù)據(jù)，利用所述樣本數(shù)據(jù)訓(xùn)練得到用于對物體進行識別的識別模型；

所述對所述3D模型中的物體進行識別，包括：從所述3D模型中提取各個物體的深度信息，將提取到的各個物體的深度信息輸入到識別模型中進行識別，得到各個物體的識別概率，針對每個物體，將所述識別概率最高的識別結(jié)果作為所述物體的識別結(jié)果。

2.根據(jù)權(quán)利要求1所述的物體搜索方法，其特征在于，所述將所述搜索信息與各物體的識別結(jié)果進行匹配，獲取與所述搜索信息匹配的目標物體并標記顯示，包括：

將所述搜索信息的關(guān)鍵字與各物體識別結(jié)果中的關(guān)鍵字進行匹配，得到與各物體的匹配度；

將匹配度最高的第一物體作為所述目標物體；

在所述目標物體所在位置處，標記顯示所述目標物體。

3.根據(jù)權(quán)利要求1-2任一項所述的物體搜索方法，其特征在于，所述獲取待搜索物體的搜索信息，包括：

接收用戶通過屏幕輸入的所述搜索信息；或者，

接收用戶通過拾音裝置輸入的所述搜索信息。

4.根據(jù)權(quán)利要求1-2任一項所述的物體搜索方法，其特征在于，所述通過結(jié)構(gòu)光對所述待搜索物體所在的場景進行掃描，獲取所述場景的3D模型，包括：

向所述場景發(fā)射結(jié)構(gòu)光；

采集所述結(jié)構(gòu)光在所述場景中各個物體上的發(fā)射光，并形成所述場景的深度圖像；

基于所述深度圖像重構(gòu)所述場景的3D模型。

5.根據(jù)權(quán)利要求4所述的物體搜索方法，其特征在于，所述結(jié)構(gòu)光為非均勻的結(jié)構(gòu)光，所述非均勻的結(jié)構(gòu)光為多個光斑的集合構(gòu)成的散斑圖案或亂點圖案，是由設(shè)置在終端上的投射裝置中的衍射光學(xué)元件形成的，其中，所述衍射光學(xué)元件上設(shè)置有一定數(shù)量的浮雕，所述浮雕的凹槽深度不同。

6.根據(jù)權(quán)利要求3所述的物體搜索方法，其特征在于，所述將所述識別概率最高的識別結(jié)果作為所述物體的識別結(jié)果之后，還包括：

將所述場景下每個物體的識別結(jié)果顯示給所述用戶。

7.一種物體搜索裝置，其特征在于，包括：

第一獲取模塊，用于獲取待搜索物體的搜索信息；

第二獲取模塊，用于通過結(jié)構(gòu)光對所述待搜索物體所在的場景進行掃描，獲取所述場景的3D模型；

第三獲取模塊，用于對所述3D模型中的物體進行識別，得到每個物體的識別結(jié)果；

第四獲取模塊，用于將所述搜索信息與各物體的識別結(jié)果進行匹配，獲取與所述搜索信息匹配的目標物體并標記顯示；其中，所述目標物體為所述待搜索物體；

所述物體搜索裝置還包括：采集模塊，用于在所述獲取待搜索物體的搜索信息之前，采集各類物體的深度信息作為樣本數(shù)據(jù)；訓(xùn)練模塊，用于利用所述樣本數(shù)據(jù)訓(xùn)練得到用于對物體進行識別的識別模型；

所述第三獲取模塊，具體用于從所述3D模型中提取各個物體的深度信息，將提取到的各個物體的深度信息輸入到識別模型中進行識別，得到各個物體的識別概率，針對每個物體，將所述識別概率最高的識別結(jié)果作為所述物體的識別結(jié)果。

8.一種終端設(shè)備，包括存儲器及處理器，所述存儲器中儲存有計算機可讀指令，所述指令被所述處理器執(zhí)行時，使得所述處理器執(zhí)行如權(quán)利要求1-6 中任一所述的物體搜索方法。

9.一個或多個包含計算機可執(zhí)行指令的非易失性計算機可讀存儲介質(zhì)，當(dāng)所述計算機可執(zhí)行指令被一個或多個處理器執(zhí)行時，使得所述處理器執(zhí)行如權(quán)利要求1-6中任一所述的物體搜索方法。