[發(fā)明專利]有效地增強(qiáng)具有相關(guān)內(nèi)容的圖像

有效

• 申請?zhí)枺?/td>: 201780090761.2
• 申請日: 2017-09-13
• 公開（公告）號: CN110651267B
• 公開（公告）日: 2023-09-19
• 發(fā)明（設(shè)計(jì)）人: 查爾斯·楊;路易斯·王;查爾斯·J·羅森貝格
• 申請（專利權(quán)）人: 谷歌有限責(zé)任公司
• 主分類號: G06F16/951
• 分類號: G06F16/951;G06F16/953
• 代理公司: 中原信達(dá)知識產(chǎn)權(quán)代理有限責(zé)任公司 11219
• 代理人: 周亞榮;鄧聰惠

1.一種用于搜索相關(guān)內(nèi)容的方法，包括：

由用戶裝置從捕獲的圖像中提取文本；

由所述用戶裝置將所提取的文本劃分成多個塊；

由所述用戶裝置并且以第一縮放級，在所述用戶裝置的用戶界面上將所述多個塊呈現(xiàn)為相應(yīng)的用戶可選目標(biāo)；

檢測對所述多個塊中的第一塊的用戶選擇；

確定所述第一塊的一個或多個單詞將被用戶選擇的可能性；

響應(yīng)于檢測到對所述第一塊的所述用戶選擇，由所述用戶裝置并且以大于所述第一縮放級的第二縮放級，在所述用戶裝置的所述用戶界面上將所述第一塊中的所提取的文本的部分呈現(xiàn)為相應(yīng)的第二用戶可選目標(biāo)，其中，基于所述第一塊的所述一個或多個單詞將被用戶選擇的所述可能性，相應(yīng)的第二用戶可選目標(biāo)不包括所述第一塊的所述一個或多個單詞；以及

響應(yīng)于檢測到對所述第一塊內(nèi)的所提取的文本的一部分的用戶選擇，由所述用戶裝置基于用戶選擇文本的內(nèi)容而發(fā)起動作；以及

進(jìn)一步包括：在用戶選擇所述塊中的一個塊之前，

針對至少一個塊，由所述用戶裝置基于該塊的所提取的文本來生成一個或多個搜索查詢；

將來自所述用戶裝置的所述一個或多個搜索查詢發(fā)送到搜索引擎；

在所述用戶裝置處接收基于所述一個或多個搜索查詢的來自所述搜索引擎的搜索結(jié)果內(nèi)容；以及

在所述用戶裝置的本地存儲器中存儲接收到的搜索結(jié)果內(nèi)容；

其中所述用戶裝置生成所述一個或多個搜索查詢并且在將該塊在所述用戶界面上呈現(xiàn)為相應(yīng)的用戶可選目標(biāo)之前發(fā)送所述一個或多個搜索查詢。

2.根據(jù)權(quán)利要求1所述的方法，其中，發(fā)起所述動作包括發(fā)起與由所述用戶選擇文本識別的目標(biāo)地址的通信。

3.根據(jù)權(quán)利要求1所述的方法，其中，發(fā)起所述動作包括：

基于所述用戶選擇文本的所述內(nèi)容而生成搜索查詢；以及

由所述用戶裝置將所述搜索查詢發(fā)送到搜索引擎。

4.根據(jù)權(quán)利要求1所述的方法，其中，發(fā)起所述動作包括：

基于所述用戶選擇文本的所述內(nèi)容而生成兩個或更多個候選搜索查詢；

將所述候選搜索查詢顯示在所述用戶界面上；以及

響應(yīng)于對所述候選搜索查詢中的一個候選搜索查詢的用戶選擇，由所述用戶裝置將所選擇的候選搜索查詢發(fā)送到所述搜索引擎。

5.根據(jù)權(quán)利要求3所述的方法，進(jìn)一步包括：

由所述用戶裝置從所述圖像中提取場境；

其中，生成所述搜索查詢或所述候選搜索查詢包括進(jìn)一步基于所述圖像的所提取的場境而生成所述搜索查詢或所述候選搜索查詢。

6.根據(jù)權(quán)利要求3所述的方法，進(jìn)一步包括：

由所述用戶裝置從所述圖像中提取場境；以及

由所述用戶裝置使用所述圖像的所提取的場境來確定所述圖像是否落入多個預(yù)定類別中的一個預(yù)定類別中；

其中，生成所述搜索查詢或所述候選搜索查詢包括：如果所述圖像落入所述預(yù)定類別中的一個預(yù)定類別中，則進(jìn)一步基于所提取的場境而生成所述搜索查詢或所述候選搜索查詢；否則，僅基于所述用戶選擇文本的所述內(nèi)容而生成所述搜索查詢或所述候選搜索查詢。

7.根據(jù)權(quán)利要求1所述的方法，其中，基于所述塊的所提取的文本而生成所述一個或多個搜索查詢包括：

以第一基于文本的粒度級將所述塊的所提取的文本解析成多個第一文本集；以及

生成每個第一文本集的搜索查詢。

8.根據(jù)權(quán)利要求7所述的方法，進(jìn)一步包括：

響應(yīng)于檢測到對所述塊的所述用戶選擇：

以大于所述第一基于文本的粒度級的第二基于文本的粒度級將所述塊的所提取的文本解析成多個第二文本集；以及

在接收到對所述第一塊內(nèi)的所提取的文本的一部分的所述用戶選擇之前：

生成每個第二文本集的附加搜索查詢；

將每個附加搜索查詢從所述用戶裝置發(fā)送到所述搜索引擎；

基于所述附加搜索查詢，由所述用戶裝置并且從所述搜索引擎接收附加搜索結(jié)果內(nèi)容；以及

將所述附加搜索結(jié)果內(nèi)容存儲在所述用戶裝置的本地存儲器中。