[發明專利]圖像處理裝置以及圖像顯示裝置

有效

• 申請號: 201380043318.1
• 申請日: 2013-08-23
• 公開（公告）號: CN104584531B
• 公開（公告）日: 2018-03-13
• 發明（設計）人: 澀久奈保;德井圭
• 申請（專利權）人: 夏普株式會社
• 主分類號: H04N5/232
• 分類號: H04N5/232;G06T1/00;H04N5/225
• 代理公司: 中科專利商標代理有限責任公司11021
• 代理人: 吳秋明

技術領域

本發明涉及一種圖像處理裝置以及具備該圖像處理裝置的圖像顯示裝置，在攝像部的攝像方向與顯示部的顯示方向一致的所謂的自拍攝影的情況下，生成適當的自拍圖像。

背景技術

在便攜式電話、平板電腦、筆記本電腦、電視機等的各種顯示器中，存在將攝像部的攝像方向與顯示部的顯示方向朝向同一方向配置并且以自己的臉部為被攝體來進行攝像的所謂的自拍攝影。

自拍攝影的代表性的應用有以下2個。一個是通過在遠程地點的對象所保有的顯示器中顯示攝像圖像從而能夠進行與遠程地點的對象的對話的視頻聊天或者TV會議功能。另一個是通過使所攝像的圖像左右反轉來進行鏡像顯示從而能夠進行需要確認自己的臉部的化妝等操作的鏡子功能。

由于在視頻聊天中對象的臉部顯示于顯示部，在鏡子功能中自己的臉部顯示于顯示部，因此使用者會注視顯示部而并非攝像部。由于所攝像的被攝體的視線方向與攝像部的攝像方向并不一致，因此所攝像的被攝體并不朝向正面，位于遠程地點的對象、或者被攝體本人即使觀察攝像圖像，也成為視線與被攝體不一致的狀態。作為校正該被攝體的臉部方向的方法，例如在下述專利文獻1中公開了一種方法，在圖像顯示部的顯示畫面的外側部，分散配置多個攝像單元，根據由各攝像單元得到的多個攝像數據對被攝體的圖像進行處理來得到三維圖像，由此生成與攝像部正對的被攝體的圖像。

現有技術文獻

專利文獻

專利文獻1：JP特開2004-159061號公報

發明內容

發明要解決的課題

但是，在上述方法中，會修正為所攝像到的被攝體總是與顯示畫面正對的圖像。例如，即使在想要拍攝被攝體的側臉時也被修正為正對的圖像，難以生成適當的自拍圖像。

本發明鑒于上述課題而發明，其目的在于提供一種圖像處理裝置，在攝像部的攝像方向與顯示部的顯示方向一致的所謂自拍攝影的情況下，生成適當的自拍圖像。

用于解決課題的手段

根據本發明的一觀點，本發明的圖像處理裝置具備：臉部信息檢測部，其從圖像數據檢測被攝體的臉部位置信息、臉部大小信息和臉部成分信息；臉部方向計算部，其根據所述臉部位置信息、所述臉部大小信息和所述臉部成分信息，來計算出所述被攝體的臉部方向信息；圖像平行移動部，其使所述圖像數據進行平行移動以使所述臉部位置信息成為所述圖像數據的中心；臉部模型生成部，其基于所述臉部位置信息、所述臉部大小信息、所述臉部成分信息和所述臉部方向信息，使表示臉部的立體形狀的臉部立體形狀模板信息進行變形來生成所述被攝體的臉部模型；和圖像生成部，其基于所述臉部方向信息和所述臉部模型，來生成按照所述被攝體的臉部成為正面臉部的方式進行了變換的圖像，所述圖像處理裝置根據所述臉部方向信息，對輸出由所述圖像平行移動部進行了平行移動的圖像數據的處理、和輸出由所述圖像生成部生成的圖像數據的處理進行切換。

此外，根據本發明的其他觀點，提供一種圖像顯示裝置，其具備：攝像部，其對被攝體進行攝像；所述圖像處理裝置，其對由所述攝像部攝像到的所述被攝體的圖像數據進行處理；和發送部，其發送在所述圖像處理裝置中生成的圖像。

此外，根據本發明的其他觀點，提供一種圖像顯示裝置，其具備：攝像部，其對被攝體進行攝像；所述圖像處理裝置，其對由所述攝像部攝像到的所述被攝體的圖像數據進行處理；和接收部，其接收由其他帶攝像部的圖像顯示裝置生成的圖像數據。

發明效果

根據本發明，在攝像部的攝像方向與顯示部的顯示方向一致的所謂自拍攝影的情況下，能夠根據被攝體的臉部方向進行適當的圖像處理，并能夠生成適當的自拍攝像圖像。

附圖說明

圖1是表示具備本發明的圖像處理裝置的圖像顯示裝置的第1實施例的系統構成的圖。

圖2是說明由臉部信息檢測部檢測出的臉部成分信息、臉部的大小信息和臉部的位置信息的圖。

圖3是說明被攝體的臉部方向信息與眼睛的配置的關系的圖。

圖4是說明被攝體的臉部的朝向與攝像部的攝像方向所成的角度的圖。

圖5是說明圖像平行移動部的動作的圖。

圖6是說明圖像平行移動部的動作的圖。

圖7是說明在臉部模型生成中使用的臉部立體形狀模板信息的圖。

圖8是說明所生成的臉部模型的圖。

圖9是說明圖像生成部的動作的圖。

圖10是本發明的第1實施例中的動作的流程圖。

圖11是表示具備本發明的圖像處理裝置的圖像顯示裝置的第2實施例的系統構成的圖。