[發明專利]圖像搜索方法和裝置

在審

• 申請號: 201910943975.0
• 申請日: 2019-09-30
• 公開（公告）號: CN111782848A
• 公開（公告）日: 2020-10-16
• 發明（設計）人: 陸韜
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F16/583
• 分類號: G06F16/583;G06K9/62
• 代理公司: 北京英賽嘉華知識產權代理有限責任公司 11204
• 代理人: 王達佐;馬曉亞

本申請公開了圖像搜索方法和裝置。該方法的一具體實施方式包括：響應于獲取到待識別的圖像，采用圖像識別模型對待識別的圖像進行圖像識別得到第一圖像，其中，第一圖像包括用于指示待識別圖像所包含的物品所處的圖像區域以及物品類別的信息；呈現第一圖像并生成接收用戶選取操作的控件；響應于接收到用戶對第一圖像中物品的選取操作，基于用戶選取的物品所處的圖像區域得到第二圖像；將第二圖像和用戶選取的物品類別的信息上傳至服務器；接收并呈現服務器返回的與用戶選取的物品相匹配的物品信息。該實施方式減小了用戶在獲取待搜索物品相關信息的操作難度，提升了用戶體驗，同時節省了用戶的網絡資源以及后端服務的存儲資源。

技術領域

本申請涉及計算機技術領域，具體涉及圖像處理技術領域，尤其涉及一種圖像搜索方法和裝置。

背景技術

現有技術中，用戶通過終端設備獲取到包含感興趣物品的圖像，若用戶想要獲取感興趣物品的相關信息，需要終端設備提供一個選擇框，用戶手動調整該框，框中圖像中自己感興趣的物品，然后終端設備基于用戶的操作將包含感興趣物品的圖像以及用戶框選的感興趣物品的坐標發送至服務端，服務端基于接收到的信息進行特征提取后返回用戶感興趣物品的相關信息。

發明內容

本申請實施例提出了圖像搜索方法和裝置。

第一方面，本申請提供了一種圖像搜索方法，該方法包括：響應于獲取到待識別的圖像，采用圖像識別模型對待識別的圖像進行識別得到第一圖像，其中，第一圖像包括用于指示所述待識別圖像所包含的物品所處的圖像區域以及物品類別的信息；呈現第一圖像并生成接收用戶選取操作的控件；響應于接收到用戶對第一圖像中物品的選取操作，基于用戶選取的物品所處的圖像區域得到第二圖像；將第二圖像和用戶選取的物品類別的信息上傳至服務器；接收并呈現服務器返回的與用戶選取的物品相匹配的物品信息。

在一些實施例中，接收用戶選取操作的控件包括選擇控件，以及呈現第一圖像并生成接收用戶選取操作的控件包括：呈現第一圖像并生成接收用戶選取操作的與待識別的圖像中的物品所處的圖像區域相對應的選擇控件。

在一些實施例中，響應于獲取到待識別的圖像，對待識別的圖像進行圖像識別得到第一圖像包括：響應于獲取到待識別的圖像，調用MobileNet模型對待識別的圖像進行識別得到第一圖像。

在一些實施例中，MobileNet模型通過后臺下載的方式得到。

在一些實施例中，響應于接收到用戶對所述第一圖像中物品的選取操作，基于用戶選取的物品所處的圖像區域得到第二圖像包括：響應于接收到用戶對第一圖像中物品的選取操作，將用戶選取的物品所處的圖像區域，向外擴展預設數量個像素后進行圖像分割得到第二圖像。

第二方面，本申請提供了一種圖像搜索裝置，該裝置包括：識別模塊，配置用于響應于獲取到待識別的圖像，采用圖像識別模型對待識別的圖像進行識別得到第一圖像，其中，第一圖像包括用于指示待識別圖像所包含的物品所處的圖像區域以及物品類別的信息；呈現模塊，配置用于呈現第一圖像并生成接收用戶選取操作的控件；選取模塊，配置用于響應于接收到用戶對所述第一圖像中物品的選取操作，基于用戶選取的物品所處的圖像區域得到第二圖像；發送模塊，配置用于將第二圖像和用戶選取的物品類別的信息上傳至服務器；展示模塊，配置用于接收并呈現服務器返回的與用戶選取的物品相匹配的物品信息。

在一些實施例中，接收用戶選取操作的控件包括選擇控件，以及呈現模塊進一步配置用于：呈現第一圖像并生成接收用戶選取操作的與待識別的圖像中的物品所處的圖像區域相對應的選擇控件。

在一些實施例中，識別模塊進一步配置用于：響應于獲取到待識別的圖像，調用MobileNet模型對待識別的圖像進行圖像識別得到第一圖像。

在一些實施例中，MobileNet模型通過后臺下載的方式得到。