[發明專利]促進圖像在搜索查詢中的使用

有效

• 申請號: 201680082227.2
• 申請日: 2016-12-02
• 公開（公告）號: CN108701143B
• 公開（公告）日: 2022-05-03
• 發明（設計）人: M.沙里菲;D.彼得魯;A.夏爾馬
• 申請（專利權）人: 谷歌有限責任公司
• 主分類號: G06F16/53
• 分類號: G06F16/53
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 邵亞麗

用于接收查詢圖像，接收與查詢圖像相關聯的一個或多個實體，針對實體中的一個或多個識別與一個或多個實體預先關聯的一個或多個候選搜索查詢，為候選搜索查詢中的每一個生成各個相關性分數，至少基于所生成的各個相關性分數選擇具體候選搜索查詢作為查詢圖像的代表性搜索查詢，并響應于接收到查詢圖像而提供代表性搜索查詢以用于輸出的方法、系統和裝置。通過允許搜索查詢采用圖像的形式，用戶界面能夠允許進入搜索查詢而不需要使用鍵盤或諸如話音辨識的另一文本鍵入機制的文本輸入。

技術領域

本說明書涉及簡化搜索引擎的使用。

背景技術

一般地，用戶能夠通過向搜索引擎輸入查詢來請求信息。搜索引擎能夠處理查詢并且能夠響應于查詢而提供用于輸出到用戶的信息。一些用戶受限于他們與計算機交互的能力，包括受限于他們將搜索查詢輸入到計算機中的能力。

發明內容

根據本說明書中描述的主題的一些創新方面，計算設備允許對于搜索工具的簡化用戶界面。具體地，計算設備允許用戶能夠提供查詢圖像(例如，來自用戶周圍環境的照片)作為搜索查詢。響應于系統接收到查詢圖像，系統用一個或多個查詢圖像標簽(例如，標記查詢圖像中的特征的查詢圖像標簽)來注釋查詢圖像。查詢圖像標簽標記查詢圖像的粗粒度特征，并且在某些情況下，標記查詢圖像的細粒度特征。基于查詢圖像標簽，系統識別與查詢圖像標簽相關聯的一個或多個實體，例如，人、地點、電視網絡、或體育俱樂部，并使用所識別的一個或多個實體識別一個或多個候選搜索查詢。系統使用所識別的實體和查詢圖像標簽來將候選搜索查詢的評分偏向與用戶相關的候選搜索查詢，而與查詢圖像是否用細粒度標簽標記無關。系統提供一個或多個相關的代表性搜索查詢用于輸出。

通過允許搜索查詢采取圖像的形式，用戶界面能夠允許進入搜索查詢而不需要使用鍵盤或諸如話音辨識的另一文本鍵入機制的文本輸入。這能夠允許可能不能夠以其它方式容易地使用搜索引擎的一類用戶來使用界面，該類用戶包括幼兒、具有有限的精細運動控制的用戶、沒有話音能力的用戶等。它也能夠允許在基于文本輸入可能很難或不可能的情況下由用戶使用界面，諸如在寒冷環境中，用戶戴在其手上的手套阻止他們使用諸如在其移動設備上的虛擬鍵盤或小鍵盤的文本鍵入設備。用戶可以鍵入文本以補充搜索查詢的圖像組件。

本說明書中描述的主題的創新方面可以體現在方法中，該方法包括接收查詢圖像，接收與查詢圖像相關聯的一個或多個實體，對于實體中的一個或多個，識別與該一個或多個實體預先關聯的一個或多個候選搜索查詢，為候選搜索查詢中的每一個生成各個相關性分數，至少基于所生成的各個相關性分數選擇具體候選搜索查詢作為查詢圖像的代表性搜索查詢，并響應于接收到查詢圖像而提供代表性搜索查詢以用于輸出。

此方面的其它實施例包括相應的計算機系統、裝置、和記錄在一個或多個計算機存儲設備上的計算機程序，均被配置為執行該方法的動作。一個或多個計算機的系統能夠被配置為通過安裝在系統上的、在操作中引起或引起系統執行動作的軟件、固件、硬件、或其組合來執行具體操作或動作。一個或多個計算機程序能夠被配置為通過包括當由數據處理裝置運行時引起裝置執行動作的指令來執行具體操作或動作。

前述和其它實施例均單獨地或組合地能夠可選地包括一個或多個以下特征。在一些實施方式中，為候選搜索查詢中的每一個生成各個相關性分數包括，對于每個候選搜索查詢：確定查詢圖像的上下文是否匹配候選搜索查詢；并且基于所確定的匹配，為候選搜索查詢生成各個相關性分數。

在一些實施方式中，確定查詢圖像的上下文是否匹配候選搜索查詢包括確定查詢圖像是否具有匹配候選搜索查詢的關聯定位。

在一些情況下，該方法還包括接收自然語言查詢；并且至少基于接收到的自然語言查詢，為候選搜索查詢中的每一個生成各個相關性分數。

在其它情況下，該方法還包括為候選搜索查詢中的每一個生成各個相關性分數包括，對于每個候選搜索查詢：使用候選搜索查詢生成搜索結果頁面；分析所生成的搜索結果頁面以確定指示該搜索結果頁面多感興趣和多有用的度量；并且基于所確定的度量，為候選搜索查詢生成各個相關性分數。