[發(fā)明專利]圖像處理裝置、以及圖像處理方法及程序

在審

• 申請?zhí)枺?/td>: 201380067240.7
• 申請日: 2013-12-12
• 公開（公告）號: CN104871525A
• 公開（公告）日: 2015-08-26
• 發(fā)明（設(shè)計(jì)）人: 大久保厚志;下村秀樹;青山一美;周藤泰廣;田中章愛
• 申請（專利權(quán)）人: 索尼公司
• 主分類號: H04N5/232
• 分類號: H04N5/232;G06F3/0346;G06T7/00;G06T7/60
• 代理公司: 北京集佳知識產(chǎn)權(quán)代理有限公司 11227
• 代理人: 王萍;韓煒

技術(shù)領(lǐng)域

本技術(shù)涉及圖像處理裝置、圖像處理方法及程序，更具體地，涉及能夠更適當(dāng)?shù)貙τ脩粽谧⒁暤膶ο蟮膱D像進(jìn)行成像或顯示的圖像處理裝置、圖像處理方法及程序。

背景技術(shù)

已經(jīng)提出了用于輔助用戶對圖像進(jìn)行成像和顯示的輔助技術(shù)。

作為這樣的輔助技術(shù)，已經(jīng)提出了如下技術(shù)：在對圖像進(jìn)行成像時，自動聚焦于該圖像中的特定對象(參見專利文獻(xiàn)1)。另外，已經(jīng)提出了諸如以圖像中的特定對象為中心對用戶觀察的圖像進(jìn)行放大的其他技術(shù)。

引用列表

專利文獻(xiàn)

專利文獻(xiàn)1：JP?2012-137600A

發(fā)明內(nèi)容

技術(shù)問題

然而，通過上面的技術(shù)，控制目標(biāo)的特定對象有時與用戶意圖的主體(subject)不同，使得基于與用戶意圖不匹配的控制目標(biāo)在經(jīng)歷圖像處理之后對圖像進(jìn)行成像或顯示。

鑒于上述情況做出本技術(shù)，并且本技術(shù)尤其使得通過以下操作能夠?qū)m當(dāng)?shù)胤从秤脩粢鈭D的圖像進(jìn)行成像和顯示：檢測用戶的眼睛注視方向并且由此準(zhǔn)確地捕獲用戶意圖的主體作為圖像中的控制目標(biāo)，以及然后基于所捕獲的控制目標(biāo)適當(dāng)?shù)貙D像進(jìn)行處理。

問題的解決方案

一種根據(jù)本技術(shù)的實(shí)施方式的圖像處理裝置，包括：眼睛注視方向檢測單元，其被配置成檢測用戶朝向圖像的眼睛注視方向；估計(jì)單元，其被配置成基于眼睛注視方向和圖像來估計(jì)該圖像中的注視區(qū)域，眼睛注視方向由眼睛注視方向檢測單元來檢測；追逐對象檢測單元，其被配置成基于由估計(jì)單元估計(jì)的時間序列的注視區(qū)域來檢測圖像中由用戶眼睛追逐的追逐對象；跟蹤單元，其被配置成搜索和跟蹤由追逐對象檢測單元檢測到的追逐對象；以及圖像控制單元，其被配置成對由跟蹤單元跟蹤的追逐對象的圖像進(jìn)行控制。

追逐對象檢測單元可以基于由估計(jì)單元估計(jì)的時間序列的注視區(qū)域來檢測臉部圖像作為圖像中由用戶眼睛追逐的追逐對象。

追逐對象檢測單元可以基于由估計(jì)單元估計(jì)的時間序列的注視區(qū)域來檢測特定對象作為圖像中由用戶眼睛追逐的追逐對象。

圖像處理裝置可以是眼鏡式成像裝置，并且還可以包括成像單元，其被配置成對用戶在佩戴眼鏡式成像裝置時能夠觀察的視場的圖像進(jìn)行成像。眼睛注視方向檢測單元可以檢測用戶朝向用戶在佩戴眼鏡式成像裝置時能夠觀察的視場的圖像的眼睛注視方向。圖像控制單元可以按照以下方式執(zhí)行控制：成像單元對由跟蹤單元正在跟蹤的追逐對象的圖像最佳地進(jìn)行成像。

圖像處理裝置可以是由用戶手持并且用于成像的成像裝置，并且還可以包括：成像單元，其被配置成對圖像進(jìn)行成像；以及取景器，通過其觀看由成像單元成像的圖像。眼睛注視方向檢測單元可以檢測用戶通過取景器看向由成像單元成像的圖像的眼睛注視方向。圖像控制單元可以按照以下方式執(zhí)行控制：成像單元對由跟蹤單元正在跟蹤的追逐對象的圖像最佳地進(jìn)行成像。

還可以包括：再現(xiàn)單元，其被配置成再生圖像；以及圖像處理單元，其被配置成對由再現(xiàn)單元再現(xiàn)的圖像進(jìn)行處理，并且使顯示單元顯示再現(xiàn)的圖像。眼睛注視方向檢測單元可以檢測用戶觀察顯示在顯示單元上的圖像的眼睛注視方向。圖像處理單元可以對由再現(xiàn)單元再現(xiàn)的圖像進(jìn)行處理，并且使顯示單元按照以下方式顯示圖像：最佳地顯示由跟蹤單元正在跟蹤的追逐對象的圖像。

眼睛注視方向檢測單元可以是眼鏡式裝置，并且可以檢測用戶朝向用戶在佩戴眼鏡式成像裝置時能夠觀察的視場的圖像的眼睛注視方向。

一種根據(jù)本技術(shù)的實(shí)施方式的圖像處理方法，包括：執(zhí)行檢測用戶朝向圖像的眼睛注視方向的眼睛注視方向檢測處理；執(zhí)行基于所述眼睛注視方向和所述圖像來估計(jì)所述圖像中的注視區(qū)域的估計(jì)處理，所述眼睛注視方向通過所述眼睛注視方向檢測處理來檢測；執(zhí)行基于通過所述估計(jì)處理估計(jì)的時間序列的注視區(qū)域來檢測所述圖像中由所述用戶眼睛追逐的追逐對象的追逐對象檢測處理；執(zhí)行搜索和跟蹤通過所述追逐對象檢測處理檢測到的所述追逐對象的跟蹤處理；以及執(zhí)行對通過所述跟蹤處理跟蹤的所述追逐對象的圖像進(jìn)行控制的圖像控制處理。