[發(fā)明專利]識別圖像中與用戶向在線系統(tǒng)標識的產(chǎn)品匹配的對象

在審

• 申請?zhí)枺?/td>: 202011296179.1
• 申請日: 2020-11-18
• 公開（公告）號: CN112819025A
• 公開（公告）日: 2021-05-18
• 發(fā)明（設計）人: 史蒂夫·莫林;歐陽雪薇;馬丁·姆羅茲;阿努杰·馬登;亞拉蒂·維賈伊·索曼
• 申請（專利權）人: 臉譜公司
• 主分類號: G06K9/62
• 分類號: G06K9/62;G06F16/535;G06F16/54;G06F16/58;G06F16/735;G06F16/74;G06F16/78
• 代理公司: 北京安信方達知識產(chǎn)權代理有限公司 11262
• 代理人: 俞立文;楊明釗

本申請涉及識別圖像中與用戶向在線系統(tǒng)標識的產(chǎn)品匹配的對象。用戶標識由用戶向在線系統(tǒng)提供的產(chǎn)品。在線系統(tǒng)通過將識別模型應用于圖像來在圖像中識別用戶提供的產(chǎn)品。如果在線系統(tǒng)在圖像中識別出至少具有最大置信度值的產(chǎn)品，則在線系統(tǒng)自動用關于該產(chǎn)品的元數(shù)據(jù)來給帖子加標簽，或者向用戶建議標簽。如果圖像中的對象可以是多個產(chǎn)品中的一個，則在線系統(tǒng)為用戶識別多個產(chǎn)品，可以基于與對象相匹配的置信度來對該多個產(chǎn)品進行排序，允許用戶選擇圖像中的哪個產(chǎn)品。如果未列出者在圖像中識別出小于最小置信度值的產(chǎn)品，則在線系統(tǒng)識別出用戶提供的產(chǎn)品，并建議用戶選擇產(chǎn)品。

相關申請的交叉引用

本申請要求于2019年11月18日提交的第62/937,067號美國臨時申請的權益，該美國臨時申請通過引用以其整體并入。

背景

本公開總體上涉及在線系統(tǒng)對內(nèi)容的顯示，并且具體地涉及在線系統(tǒng)在圖像內(nèi)檢測和識別向在線系統(tǒng)標識(identify)的產(chǎn)品，該圖像由在線系統(tǒng)從用戶獲得。

諸如社交網(wǎng)絡系統(tǒng)的在線系統(tǒng)允許用戶關連(connect)到在線系統(tǒng)的其他用戶并與之通信。用戶可以在在線系統(tǒng)上創(chuàng)建簡檔，該簡檔與其身份相關聯(lián)并包括關于用戶的信息，例如興趣和人口統(tǒng)計信息。用戶可以是個人或實體(例如公司或慈善機構)。在線系統(tǒng)允許用戶通過向在線系統(tǒng)提供內(nèi)容以呈現(xiàn)給其他用戶來容易地與其他在線系統(tǒng)用戶交流和分享內(nèi)容。

此外，在線系統(tǒng)的許多發(fā)布用戶(publishing user)提供產(chǎn)品供其他用戶購買，并通過在線系統(tǒng)向其他用戶分發(fā)包括所提供產(chǎn)品的內(nèi)容項(content item)。例如，發(fā)布用戶提供家庭商品供其他用戶購買，并向其他用戶分發(fā)包括家庭商品圖像的內(nèi)容項，以提高家庭商品的知名度。為了向用戶提供關于由發(fā)布用戶提供的產(chǎn)品的更多信息，發(fā)布用戶可以在包括產(chǎn)品的內(nèi)容項中包括具有關于產(chǎn)品的信息的標簽(tag)。標簽可以包括產(chǎn)品的名稱和價格，以及購買產(chǎn)品的鏈接。當查看內(nèi)容項的用戶執(zhí)行與內(nèi)容項的特定交互時，標簽中的信息被顯示給該用戶，允許用戶容易地從內(nèi)容項獲得關于產(chǎn)品的信息。

然而，當內(nèi)容項被提供給在線系統(tǒng)時，傳統(tǒng)的在線系統(tǒng)要求發(fā)布用戶手動地給內(nèi)容項中的不同產(chǎn)品加標簽。為了手動地給內(nèi)容項中的不同產(chǎn)品加標簽，發(fā)布用戶查看相應的產(chǎn)品目錄，并將不同產(chǎn)品的圖片與內(nèi)容項中包括的產(chǎn)品進行比較。然后，發(fā)布用戶將標識產(chǎn)品目錄中與內(nèi)容項中的產(chǎn)品相匹配的不同產(chǎn)品的標簽手動地添加到內(nèi)容項中。內(nèi)容項中產(chǎn)品的這種手動標識是資源密集型的，需要花費大量的時間和計算資源來瀏覽發(fā)布用戶的產(chǎn)品目錄，并將不同的產(chǎn)品與內(nèi)容項進行比較。因為用于將標識內(nèi)容項中的產(chǎn)品的標簽添加到內(nèi)容項的傳統(tǒng)技術是資源密集型的，所以許多發(fā)布用戶將放棄標識提供給在線系統(tǒng)的內(nèi)容項中的產(chǎn)品，從而限制了關于來自發(fā)布用戶的可用產(chǎn)品的信息的傳播。

概述

在線系統(tǒng)從用戶獲得標識在線系統(tǒng)的用戶提供給其他用戶供購買的產(chǎn)品的信息。所獲得的信息包括與產(chǎn)品標識符(identifier)相關聯(lián)的每個產(chǎn)品的一個或更多個圖片，并且還可以包括關于每個產(chǎn)品的附加信息。例如，在線系統(tǒng)從用戶獲得產(chǎn)品目錄，該產(chǎn)品目錄包括用戶提供的每個產(chǎn)品的條目(entry)。在一些實施例中，產(chǎn)品目錄中的產(chǎn)品條目包括產(chǎn)品的產(chǎn)品標識符、產(chǎn)品的一個或更多個圖片、產(chǎn)品的名稱以及用戶提供的供購買產(chǎn)品的價格。在一些實施例中，產(chǎn)品目錄中的產(chǎn)品條目還可以包括產(chǎn)品的描述。在一些實施例中，從用戶獲得的標識產(chǎn)品的信息包括產(chǎn)品的多個圖片，其中不同的圖片對應于產(chǎn)品相對于捕獲產(chǎn)品圖片的圖像捕獲設備(例如，照相機)的不同位置。在線系統(tǒng)存儲標識由用戶提供的產(chǎn)品的信息，該信息包括與用戶相關聯(lián)的每個產(chǎn)品的一個或更多個圖片。例如，在線系統(tǒng)將標識由用戶提供的產(chǎn)品的信息存儲在由在線系統(tǒng)為用戶維護的用戶簡檔中，或者將獲得的標識由用戶提供的產(chǎn)品的信息與標識用戶的用戶簡檔相關聯(lián)地存儲。