[發明專利]注視位置估計系統、注視位置估計裝置及它們的控制方法

有效

• 申請號: 201280055269.9
• 申請日: 2012-07-30
• 公開（公告）號: CN103946887B
• 公開（公告）日: 2017-05-17
• 發明（設計）人: 酒卷隆治
• 申請（專利權）人: 樂天株式會社
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06T7/73
• 代理公司: 北京三友知識產權代理有限公司11127
• 代理人: 李輝,黃綸偉

技術領域

本發明涉及注視位置估計系統、注視位置估計系統的控制方法、注視位置估計裝置、注視位置估計裝置的控制方法、程序以及信息存儲介質。

背景技術

公開有如下技術：根據由一個照相機拍攝的用戶面部圖像來估計用戶正在注視的位置。例如，在專利文獻1中公開了如下內容：從由一個照相機拍攝的圖像檢測用戶的虹膜中心位置，還根據該圖像估計用戶的眼球中心的投影位置，并基于這些虹膜中心位置和眼球中心的投影位置來估計用戶的視線方向。

現有技術文獻

專利文獻

專利文獻1：日本特開2011-90702號公報

發明內容

發明所要解決的課題

但是，在專利文獻1所記載的技術中，需要檢測用戶的虹膜中心位置或者估計用戶的眼球中心的投影位置。為了檢測虹膜中心位置或者估計眼球中心的投影位置，需要執行處理負荷重的處理，因此存在用于估計用戶的注視位置的處理的處理負荷變重的情況。

本發明是鑒于上述問題而完成的，其目的在于，提供不用檢測虹膜中心位置或者估計眼球中心的投影位置就能夠估計用戶的注視位置的注視位置估計系統、注視位置估計系統的控制方法、注視位置估計裝置、注視位置估計裝置的控制方法、程序以及信息存儲介質。

用于解決課題的手段

為了解決上述課題，本發明的注視位置估計系統，其特征在于，包括：攝影單元，其用于拍攝觀看顯示單元所顯示的畫面的用戶的面部；區域檢測單元，其從所述攝影單元的攝影圖像檢測所述用戶的面部區域與所述用戶的眼睛以外的規定部位區域中的至少一方和所述用戶的眼睛區域；面積/位置信息取得單元，其取得所述眼睛區域的面積信息和位置信息、所述面部區域與所述規定部位區域中的所述至少一方的面積信息和位置信息；基準面積/位置信息取得單元，其根據所述用戶觀看所述畫面內的基準位置時的所述眼睛區域的面積信息和位置信息而取得所述眼睛區域的基準面積信息和基準位置信息，而且根據所述用戶觀看所述畫面內的所述基準位置時的所述面部區域與所述規定部位區域中的所述至少一方的面積信息和位置信息，取得所述面部區域與所述規定部位區域中的所述至少一方的基準面積信息和基準位置信息；以及注視位置估計單元，其根據由所述面積/位置信息取得單元取得的面積信息和位置信息、與由所述基準面積/位置信息取得單元取得的基準面積信息和基準位置信息之間的差，估計所述用戶正在注視的所述畫面內的位置。

另外，本發明的注視位置估計系統的控制方法，其特征在于，包括：取得攝影單元的攝影圖像的步驟，該攝影單元用于拍攝觀看顯示單元所顯示的畫面的用戶的面部；區域檢測步驟，從所述攝影圖像檢測所述用戶的面部區域與所述用戶的眼睛以外的規定部位區域中的至少一方和所述用戶的眼睛區域；面積/位置信息取得步驟，取得所述眼睛區域的面積信息和位置信息、所述面部區域與所述規定部位區域中的所述至少一方的面積信息和位置信息；取得基準面積信息和基準位置信息的步驟，取得能夠根據所述用戶觀看所述畫面內的基準位置時的所述眼睛區域的面積信息和位置信息取得的所述眼睛區域的基準面積信息和基準位置信息、以及能夠根據所述用戶觀看所述畫面內的所述基準位置時的所述面部區域與所述規定部位區域中的所述至少一方的面積信息和位置信息取得的所述面部區域與所述規定部位區域中的所述至少一方的基準面積信息和基準位置信息；以及注視位置估計步驟，根據在所述取得面積信息和位置信息的步驟中取得的所述面積信息和所述位置信息、與在所述取得基準面積和基準位置信息的步驟中取得的所述基準面積信息和所述基準位置信息之間的差，估計所述用戶正在注視的所述畫面內的位置。

另外，本發明的注視位置估計裝置，其特征在于，包括：取得面積信息和位置信息的單元，其取得從攝影單元的攝影圖像檢測到的、用戶的面部區域與所述用戶的眼睛以外的規定部位區域中的至少一方和所述用戶的眼睛區域的面積信息和位置信息，所述攝影單元用于拍攝觀看顯示單元所顯示的畫面的用戶的面部；基準面積/位置信息取得單元，其根據所述用戶觀看所述畫面內的基準位置時的所述眼睛區域的面積信息和位置信息而取得所述眼睛區域的基準面積信息和基準位置信息，而且根據所述用戶觀看所述畫面內的所述基準位置時的所述面部區域與所述規定部位區域中的所述至少一方的面積信息和位置信息，取得所述面部區域與所述規定部位區域中的所述至少一方的基準面積信息和基準位置信息；以及注視位置估計單元，其根據由所述面積/位置信息取得單元取得的面積信息和位置信息、與由所述基準面積/位置信息取得單元取得的基準面積信息和基準位置信息之間的差，估計所述用戶正在注視的所述畫面內的位置。