[發(fā)明專利]視頻會議中的面部識別和面部圖像的傳輸

有效

• 申請?zhí)枺?/td>: 201380052000.X
• 申請日: 2013-09-19
• 公開（公告）號: CN104737533A
• 公開（公告）日: 2015-06-24
• 發(fā)明（設(shè)計）人: 雅各布·賈瑞德·薩默斯
• 申請（專利權(quán)）人: 思杰系統(tǒng)有限公司
• 主分類號: H04N7/15
• 分類號: H04N7/15;G06K9/00
• 代理公司: 北京安信方達知識產(chǎn)權(quán)代理有限公司 11262
• 代理人: 白云;鄭霞

相關(guān)申請的交叉引用

本申請要求于2012年10月8日提交的序列號為13/647,205、題名為“在視頻會議中的面部識別和面部圖像的傳輸(Facial?Recognition?and?Transmission?of?Facial?Images?in?a?Videoconference)”的美國專利申請的優(yōu)先權(quán)，通過引用將它整體并入本申請。

技術(shù)領(lǐng)域

本公開中所描述的各個方面涉及在一個房間中的一個或多個人的面部圖像的捕捉、處理和傳輸。

背景

當視頻會議在發(fā)生在多方之間時，往往難以確定誰正在發(fā)言。通常，發(fā)言人的面部被指定了房間的座位安排的相同房間內(nèi)的另一個人擋住。此外，面部圖像的大小可能是不同的，這取決于每個人與正在捕捉視頻會議的攝影機的距離。另外，取決于攝影機的視場，一個或多個發(fā)言者的面部可能是模糊的導(dǎo)致很難準確地確定誰正在講話。此外，攝影機捕捉視頻會議中參與者的面部圖像的角度可能導(dǎo)致一個或多個視頻會議的參與者不期望的側(cè)面或后部頭像。因此，發(fā)送到另一方的視頻可能提供很少或沒有提供關(guān)于誰正在發(fā)言的信息。

在視頻會議期間，發(fā)言者的面部表情和嘴唇動作可能是部分不可見或全部不可見。這些面部表情和嘴唇動作確定正在發(fā)言的人或可以有助于更好的理解發(fā)言人所講的話和他講話時的表情。此外，發(fā)言者的面部表情也可以提供對他陳述的情感內(nèi)容的理解(例如，發(fā)言者是高興、憤怒、悲傷、興奮等)。因此，多方之間通過視頻會議呼叫的通信可能會遇到不能夠看到發(fā)言者的面部圖像的情況。

此外，如果發(fā)言者移動到攝影機視場范圍內(nèi)的房間中的另一個人的后面，那么攝影機可能不能繼續(xù)捕捉發(fā)言者的圖像。因此，在這種情況下，發(fā)言者可能徹底的從視頻會議中消失，并且發(fā)言者的嘴唇動作可能不能夠被攝影機捕捉到。

因此，基于以上內(nèi)容，在從一方到一方或從一方到其它更多方的視頻會議呼叫中存在提供捕捉、處理和傳輸面部圖像的視圖的更好的方法的需求。

概述

根據(jù)前述的背景，以下提出本公開的簡要概述以便提供對本發(fā)明中所描述的一些方面的基本的理解。本概述不是綜述的擴展，并不是意圖識別關(guān)鍵或重要元素或劃定權(quán)利要求的范圍。下面的概述僅僅以簡要的形式提出各種所描述的方面作為下面所提供的更詳細的描述的序言。

為了闡述上述缺點和將通過閱讀本公開認識到的另外的益處，本文說明性的各個方面的各個方面描述了用于捕捉、處理和從主機向客戶端傳輸參與者的面部圖像的新方法和新系統(tǒng)。

說明性實施例的各個方面基本上在至少一個下面的圖中示出和/或結(jié)合至少一個下面的圖進行了描述，同時在權(quán)利要求中更全面的進行闡述。

本公開的這些和其他優(yōu)點、各個方面和新穎的特征，還有其中所說明的實施例的細節(jié)將從下面的描述和附圖中得到更充分地理解。

附圖說明

已經(jīng)以通用的術(shù)語如此描述了本公開的多個方面，現(xiàn)在將參考附圖，這些附圖不需要按照比例繪制，并且其中：

圖1A示出了本公開的各個方面可以被實現(xiàn)在其中的操作環(huán)境。

圖1B示出了來自根據(jù)圖1A中說明的說明性的操作環(huán)境的攝影機的透鏡(perspective)的視場。

圖1C示出了在由根據(jù)圖1A中說明的說明性的操作環(huán)境的攝影機所捕捉的圖像內(nèi)識別或檢測面部圖像。

圖1D示出了根據(jù)圖1A中說明的說明性的操作環(huán)境的、參與者的面部圖像已經(jīng)被歸一化之后的參與者的面部圖像。

圖1E示出了根據(jù)圖1A中說明的說明性的操作環(huán)境，分類(collating)和和/或整理(sorting)參與者的歸一化的面部圖像。

圖1F示出了根據(jù)圖1A中說明的說明性的操作環(huán)境，將參與者的歸一化的面部圖像定位或布置到輸出網(wǎng)格圖案中。

圖2A示出了本公開的各個方面可以在其中實現(xiàn)的示例性操作環(huán)境。

圖2B示出了從由根據(jù)圖2A中說明的說明性的操作環(huán)境的第一攝影機捕捉的圖像采集的面部圖像。

圖2C示出了從由根據(jù)圖2A中說明的說明性的操作環(huán)境的第二攝影機捕捉的圖像采集的面部圖像。

圖2D示出了從由根據(jù)圖2A中說明的說明性的操作環(huán)境的第三攝影機捕捉的圖像采集的面部圖像。

圖2E示出了由根據(jù)圖2A中說明的說明性的操作環(huán)境的第一攝影機所捕捉的、選出的面部圖像的歸一化。

圖2F示出了由根據(jù)圖2A中說明的說明性的操作環(huán)境的第二攝影機所捕捉的、選出的面部圖像的歸一化。