[發(fā)明專利]人臉表情的捕捉方法、裝置及存儲裝置在審
| 申請?zhí)枺?/td> | 201710407288.8 | 申請日： | 2017-06-02 |
| 公開（公告）號： | CN107368778A | 公開（公告）日： | 2017-11-21 |
| 發(fā)明（設(shè)計）人： | 黃源浩;肖振中;許宏淮 | 申請（專利權(quán)）人： | 深圳奧比中光科技有限公司 |
| 主分類號： | G06K9/00 | 分類號： | G06K9/00 |
| 代理公司： | 深圳市威世博知識產(chǎn)權(quán)代理事務(wù)所(普通合伙)44280 | 代理人： | 何青瓦 |
| 地址： | 518057 廣東省深圳市南山區(qū)粵*** | 國省代碼： | 廣東;44 |
| 權(quán)利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關(guān)鍵詞： | 表情 捕捉 方法 裝置 存儲 | ||
1.一種人臉表情的捕捉方法，其特征在于，包括以下步驟：
獲取包含人臉的RGBD圖像序列，所述RGBD圖像包括RGB圖像和深度圖像，其中，所述RGB圖像和深度圖像的像素一一對應(yīng)；
對所述RGBD圖像進行人臉檢測，以提取出人臉區(qū)域的RGBD圖像；
從所述人臉區(qū)域的RGBD圖像中獲取人臉特征點；
標(biāo)記所述人臉特征點在所述人臉區(qū)域的RGBD圖像上的位置；
在所述RGBD圖像序列中跟蹤所述人臉特征點的運動軌跡，并記錄運動軌跡信息。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述從所述RGBD圖像中提取出人臉區(qū)域的RGBD圖像的步驟包括：
獲取所述RGBD圖像中的RGB圖像；
對所述RGB圖像進行人臉檢測以提取出人臉區(qū)域的RGB圖像；
從所述RGBD圖像中的深度圖像中提取出與所述人臉區(qū)域的RGB圖像對應(yīng)的區(qū)域，從而獲取人臉區(qū)域的RGBD圖像。
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述從所述RGBD圖像中提取出人臉區(qū)域的RGBD圖像的步驟包括：
獲取所述RGBD圖像中的深度圖像；
對所述深度圖像進行人臉檢測以提取人臉區(qū)域的深度圖像；
從所述RGBD圖像中的RGB圖像中提取出與所述人臉區(qū)域的深度圖像對應(yīng)的區(qū)域，從而獲取人臉區(qū)域的RGBD圖像。
4.根據(jù)權(quán)利要求2或3所述的方法，其特征在于，所述從所述人臉區(qū)域的RGBD圖像中獲取人臉特征點的步驟包括：
從所述人臉區(qū)域的RGBD圖像中的人臉區(qū)域的RGB圖像中識別RGB人臉特征點；
從所述人臉區(qū)域的RGBD圖像中的人臉區(qū)域的深度圖像中提取出與所述RGB人臉特征點對應(yīng)的特征點，從而獲取所述人臉特征點。
5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述從所述人臉RGB圖像中識別RGB人臉特征點的步驟中，采用灰度信息法、先驗規(guī)則法、幾何形狀法、統(tǒng)計模型法和小波方法中的一種來識別RGB人臉特征點。
6.一種人臉表情的捕捉裝置，其特征在于，包括處理器和RGBD相機，所述RGBD相機與所述處理器連接；
所述RGBD相機用于獲取包含人臉的RGBD圖像序列，所述RGBD圖像包括RGB圖像和深度圖像，其中，所述RGB圖像和深度圖像的像素一一對應(yīng)；
所述處理器用于對所述RGBD圖像進行人臉檢測，以提取出人臉區(qū)域的RGBD圖像；從所述人臉區(qū)域的RGBD圖像中獲取人臉特征點；標(biāo)記所述人臉特征點在所述人臉區(qū)域的RGBD圖像上的位置；在所述RGBD圖像序列中跟蹤所述人臉特征點的運動軌跡，并記錄運動軌跡信息。
7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述處理器還用于獲取所述RGBD圖像中的RGB圖像；對所述RGB圖像進行人臉檢測以提取出人臉區(qū)域的RGB圖像；從所述RGBD圖像中的深度圖像中提取出與所述人臉區(qū)域的RGB圖像對應(yīng)的區(qū)域，從而獲取人臉區(qū)域的RGBD圖像。
8.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述處理器還用于獲取所述RGBD圖像中的深度圖像；對所述深度圖像進行人臉檢測以提取人臉區(qū)域的深度圖像；從所述RGBD圖像中的RGB圖像中提取出與所述人臉區(qū)域的深度圖像對應(yīng)的區(qū)域，從而獲取人臉區(qū)域的RGBD圖像。
9.根據(jù)權(quán)利要求7或8所述的裝置，其特征在于，所述處理器還用于從所述人臉區(qū)域的RGBD圖像中的人臉區(qū)域的RGB圖像中識別RGB人臉特征點；從所述人臉區(qū)域的RGBD圖像中的人臉區(qū)域的深度圖像中提取出與所述RGB人臉特征點對應(yīng)的特征點，從而獲取所述人臉特征點。
10.根據(jù)權(quán)利要求9所述的裝置，其特征在于，所述處理器采用灰度信息法、先驗規(guī)則法、幾何形狀法、統(tǒng)計模型法和小波方法中的一種來識別RGB人臉特征點。
11.一種存儲裝置，其特征在于，存儲有程序數(shù)據(jù)，所述程序數(shù)據(jù)能夠被執(zhí)行以實現(xiàn)如權(quán)利要求1至5任一項所述的方法。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息，商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于深圳奧比中光科技有限公司，未經(jīng)深圳奧比中光科技有限公司許可，擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作，請聯(lián)系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201710407288.8/1.html，轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06K 數(shù)據(jù)識別；數(shù)據(jù)表示；記錄載體；記錄載體的處理
G06K9-00 用于閱讀或識別印刷或書寫字符或者用于識別圖形，例如，指紋的方法或裝置
G06K9-03 .錯誤的檢測或校正，例如，用重復(fù)掃描圖形的方法
G06K9-18 .應(yīng)用具有附加代碼標(biāo)記或含有代碼標(biāo)記的打印字符的，例如，由不同形狀的各個筆畫組成的，而且每個筆畫表示不同的代碼值的字符
G06K9-20 .圖像捕獲
G06K9-36 .圖像預(yù)處理，即無須判定關(guān)于圖像的同一性而進行的圖像信息處理
G06K9-60 .圖像捕獲和多種預(yù)處理作用的組合
