[發明專利]用于基于檢測桌子周圍的文件和人來搜索文件和人的系統

在審

• 申請號: 201910170670.0
• 申請日: 2019-03-07
• 公開（公告）號: CN110471886A
• 公開（公告）日: 2019-11-19
• 發明（設計）人: P·邱;金哲暄;上野肇;Y·賈亞迪;安東尼·鄧尼根;S·卡特;弗朗辛·陳;趙健;B·Y·劉
• 申請（專利權）人: 富士施樂株式會社
• 主分類號: G06F16/14
• 分類號: G06F16/14;G06K9/00
• 代理公司: 11127 北京三友知識產權代理有限公司
• 代理人: 黃綸偉;李輝<國際申請>=<國際公布>=

用于基于檢測桌子周圍的文件和人來搜索文件和人的系統。系統和方法致力于使用第一攝像頭系統來拍攝靠近桌面的一個或更多個人的第一圖像；使用第二攝像頭系統來拍攝靠近桌面的一個或更多個文件的第二圖像；生成對數據庫的查詢，該數據庫是從對第一圖像進行的人物識別和對第二圖像進行的文本提取得到的；基于查詢結果來確定第一人物排名列表和第二文件排名列表，該結果基于所計算的雙模網絡排名列表；并且在顯示器上提供用于訪問與來自第一人物排名列表中的一個或更多個人和來自第二文件排名列表中的一個或更多個文件有關的信息的接口。

技術領域

本公開總體涉及文件管理系統，具體地涉及會議或辦公環境中的文件和人物識別和取得。

背景技術

在相關技術實施方案中，雖然存在基于搜索相關文件來搜索相關人物的搜索系統，但這種實施方案沒有將可能同時發生的會議或辦公環境的背景考慮在內。

在相關技術實施方案中，存在深度學習面部檢測和識別算法，這些深度學習面部檢測和識別算法對可能難以檢測并識別未在兩只眼睛可見的情況下面向攝像頭的面部的之前算法進行了改進。使用這種相關技術實施方案，可以在不同的姿勢并在來自覆蓋180°視野的魚眼鏡頭或覆蓋360°視野的全景攝像頭的失真的情況下檢測并識別面部。

發明內容

在相關技術實施方案中，雖然存在可以從數據庫取得組織內的相關人物(例如，基于相關文件的作者)的系統，但不存在使用與可以是圍繞桌子或辦公桌開會的會議或辦公環境中的參加者有關的信息的系統。在各種會議情況下，可能需要這種信息以基于會議參加者來容易地訪問并打印或取得用于呈現的相關文件。

例如，如果對于會議或桌面討論未制作文件的足夠實體拷貝，則通常麻煩的是會議成員取得文件來進行另一次實體打印輸出，因為這些成員將必須訪問計算機和文件管理系統來打印輸出文件。或者，如果會議的特定成員請求文件的軟拷貝，則文件的作者通常將必須返回到他們的辦公桌來訪問計算機，以經由電子郵件或其他方法來轉發這種文件。進一步地，如果在會議討論期間存在特定主題而會議的其他成員具有相關的出版論文，則這些成員可能希望訪問他們的相關文件，但無法訪問計算機或其他裝置來取得這些文件并向會議成員提供。

這里描述的示例實施方案通過以下方案來解決上述問題：識別由魚眼鏡頭拍攝的桌子周圍的人，并且使用這種信息來制定查詢并處理所取得的結果，以生成相關人物和文件的交互可視化。

本公開的方面包括一種系統，該系統涉及處理器，該處理器被配置為：使用第一攝像頭系統來拍攝靠近桌面的一個或更多個人的第一圖像；使用第二攝像頭系統來拍攝靠近桌面的一個或更多個文件的第二圖像；生成對數據庫的查詢，該數據庫是根據對第一圖像進行的人物識別和對第二圖像進行的文本提取得到的；基于查詢結果來確定第一人物排名列表和第二文件排名列表，該結果基于所計算的雙模網絡排名列表；并且在顯示器上提供用于訪問來自第二文件排名列表中的一個或更多個文件的接口。

本公開的方面還包括一種方法，該方法涉及：使用第一攝像頭系統來拍攝靠近桌面的一個或更多個人的第一圖像；使用第二攝像頭系統來拍攝靠近桌面的一個或更多個文件的第二圖像；生成對數據庫的查詢，該查詢是根據對第一圖像進行的人物識別和對第二圖像進行的文本提取得到的；基于查詢結果來確定第一人物排名列表和第二文件排名列表，該結果基于所計算的雙模網絡排名列表；以及在顯示器上提供用于訪問來自第二文件排名列表中的一個或更多個文件的接口。

本公開的方面還包括一種存儲用于執行處理的指令的永久計算機可讀介質，該處理涉及：使用第一攝像頭系統來拍攝靠近桌面的一個或更多個人的第一圖像；使用第二攝像頭系統來拍攝靠近桌面的一個或更多個文件的第二圖像；生成對數據庫的查詢，該數據庫是根據對第一圖像進行的人物識別和對第二圖像進行的文本提取得到的；基于查詢結果來確定第一人物排名列表和第二文件排名列表，該結果基于所計算的雙模網絡排名列表；以及在顯示器上提供用于訪問來自第二文件排名列表中的一個或更多個文件的接口。