[發明專利]用于調整拍攝的用戶的眼睛的顯示裝置和控制方法

在審

• 申請號: 201410008787.6
• 申請日: 2014-01-08
• 公開（公告）號: CN103914806A
• 公開（公告）日: 2014-07-09
• 發明（設計）人: 金度完;金成烈;金圣晉;金珠熙;李珍晟
• 申請（專利權）人: 三星電子株式會社
• 主分類號: G06T3/00
• 分類號: G06T3/00;G06T7/00;G06T19/00
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 邵亞麗

相關申請的交叉引用

本申請要求于2013年1月9日向美國專利商標局提交的美國臨時申請第61/750,536號的優先權，并且要求于2013年5月29日向韓國知識產權局提交的韓國專利申請第2013-0061214號的優先權，兩者的公開內容通過引用整體合并于此。

技術領域

示范性實施例涉及顯示裝置及其控制方法。更具體地，示范性實施例涉及能夠調整拍攝的用戶的眼睛的顯示裝置和控制方法。

背景技術

由于電子技術和通信技術的發展，已經開發了能夠執行各種功能的電子設備。例如，舊的TV只有通過接收廣播信號輸出廣播節目的能力。但是，近來的TV能夠執行另外的功能，諸如，互聯網連接、視頻呼叫、等等。

TV可以被提供為具有用于視頻呼叫的攝像頭。一般，攝像頭被布置在TV的顯示單元的邊緣（例如，上邊緣）周圍，而進行視頻呼叫的用戶看向顯示在屏幕上的對方，而不是看向攝像頭。因此，由于攝像頭捕捉到用戶時用戶眼睛朝向下方，從而眼睛朝向下方的用戶被顯示在視頻呼叫的對方的TV上。同樣地，用戶的TV也會顯示眼睛朝向下方的對方。因此，在用戶和對方之間出現了眼睛的不一致，而這種眼睛的不一致成為了干擾在視頻呼叫期間各方融入的因素。

在過去，為了解決這種涉及各方眼睛的不一致，已經使用了機械學方法、圖像處理方法、等等。然而，根據顯示設備的大小，解決這樣問題的機械學方法是受到限制的。而圖像處理方法校準用戶眼睛注視的方向。然而，因為相關技術的圖像處理方法僅僅補償用戶的眼睛區域，取決于看向顯示裝置時用戶臉部的角度，可能出現用戶臉部與眼睛不能自然匹配的問題。

因此，已經出現了對能夠自然地處理所捕捉的用戶眼睛而不管用戶臉部的角度的技術的需要。

發明內容

已經開發了示范性實施例以便克服上述障礙以及與相關技術的安排相關的其他問題。示范性實施例的一個方面提供了能夠自然地處理并輸出拍攝的用戶的眼睛的顯示裝置及其控制方法。

示范性實施例的上述方面和/或其它特征能夠通過提供一種顯示裝置來基本實現，該顯示裝置可以包括：拍攝裝置，其被配置為對臉部的形狀進行拍攝；檢測器，其被配置為檢測臉部的形狀的方向和角度；變形器，其被配置為對拍攝的臉部形狀和3D臉部模型進行合成，并通過使用檢測到的臉部的形狀的方向和角度對合成的臉部形狀進行變形；以及輸出接口，其被配置為輸出變形后的臉部形狀。

變形器可以通過使用與拍攝的臉部的形狀的臉部邊界部分相關的信息，額外地對變形后的臉部形狀的對應的臉部邊界部分進行變形。

檢測器可以從拍攝的臉部的形狀中提取特征點，通過從存儲的參考3D臉部模型中提取特征點來生成網格形式的參考3D臉部模型，并且可以通過投射網格形式的參考3D臉部模型并匹配對應的特征點來生成與拍攝的臉部的形狀相對應的網格形式的3D臉部模型。

檢測器可以通過使用網格形式的參考3D臉部模型和所生成的3D臉部模型的預定部分的位置上的差別來檢測臉部形狀的方向和角度。

變形器可以投射網格形式的3D臉部模型的預定部分，然后將對應的單位網格與拍攝的臉部形狀的單位網格進行合成，以便生成網格形式的合成的臉部形狀。

預定部分可以包括眼睛部分。

變形器可以將合成的臉部形狀變形為面向其前部，即，面向前方。

變形器可以基于拍攝的臉部形狀和變形后的臉部形狀的臉部邊界，檢測由從臉部形狀向內的預定間隙形成的第一邊界和由從臉部形狀向外的預定間隙形成的第二邊界，以及可以通過使用與拍攝的臉部的形狀的第一邊界和第二邊界之間的部分相關的信息，額外地對變形后的臉部形狀的第一邊界和第二邊界之間的對應部分進行變形。

顯示裝置可以包括顯示器，其被配置為顯示變形后的臉部形狀。

顯示裝置可以包括通信器，其被配置為執行以下功能中的至少一個：變形后的臉部形狀數據的傳送功能，以及與在外部顯示裝置中執行變形后的臉部形狀數據相關的接收功能。

根據示范性實施例的另一個方面，控制顯示裝置的方法可以包括：對臉部形狀進行拍攝；檢測臉部形狀的方向和角度；對拍攝的臉部形狀和3D臉部模型進行合成；通過使用檢測到的臉部形狀的方向和角度對合成的臉部形狀進行變形；并且輸出變形后的臉部形狀。

對合成的臉部形狀進行變形可以包括通過使用與拍攝的臉部的形狀的臉部邊界部分相關的信息，額外地對變形后的臉部形狀的對應的臉部邊界部分進行變形。