[發明專利]基于深度信息的剛體部件方向檢測方法和裝置

有效

• 申請號: 201010281512.1
• 申請日: 2010-09-13
• 公開（公告）號: CN102402687A
• 公開（公告）日: 2012-04-04
• 發明（設計）人: 胡芝蘭;陳茂林;楚汝峰;林華書
• 申請（專利權）人: 三星電子株式會社;北京三星通信技術研究有限公司
• 主分類號: G06K9/52
• 分類號: G06K9/52;G06K9/00
• 代理公司: 北京銘碩知識產權代理有限公司 11286
• 代理人: 韓明星;李娜娜

技術領域

本發明涉及一種剛體部件方向檢測方法和裝置，更具體地，涉及一種基于深度信息的剛體部件方向檢測方法和裝置。

背景技術

剛體部件方向確定是計算機視覺的基本問題，并可廣泛用于許多領域，諸如人機互動、手勢識別以及用于游戲、電影和體育科學的現實角色動畫。由于其理論和商業價值，在計算機視覺和模式識別領域中剛體部件檢測吸引了更多的關注，尤其是用于非剛性(non-rigid)對象定位或姿態估計。使用人類手臂檢測作為例子，提出了大量方法并可根據不同的圖像特征將所述方法大體分為四種類型：基于區域的方法、基于色彩的方法、基于邊緣的方法和基于深度信息的方法。

基于區域的方法是在某些約束下通過產生幾個分割的區域來恢復手臂。例如，首先使用規格化分割(normalized?cuts)分割彩色圖像，并假設一般手臂由單個分割的區域構成，并通過分析每個分割的區域來尋找手臂檢測。通常，這種方法在忽略圖像分割問題的困難的同時，假設每個部分可以從靜止圖像被完美地分割。然而，由于雜亂的背景、各種衣著以及不同的亮度，通常難以獲得好的分割，并且彩色圖像分割通常是耗時的。

基于色彩的方法假設手臂的皮膚暴露，通過使用檢測的皮膚區域來估計用于前臂的候選，因此當處理雜亂的背景以及沒有暴露皮膚的其它衣著時，該方法的性能較差。此外，甚至在暴露手臂皮膚的情況下，當在衣著或背景中存在與皮膚相似的色彩時，也難以準確地檢測皮膚區域。

基于邊緣的方法可以通過尋找手臂的邊界來檢測手臂。例如，基于一對平行線段提取軀干。然而，基于邊緣的方法對于線段是敏感的，尤其在復雜的背景和衣著或自遮擋姿態中。與彩色圖像分割類似，完美的圖像邊緣提取本身也是一個難題。

與上述方法不同，基于深度信息的方法使用由深度TOF相機(Time-of-Flight?Camera)捕捉的深度圖像來確定部件。首先將對象從背景分割，隨后基于空間信息和深度信息將前景像素集合為子集合，并最終使用所述子集合和拓撲結構確定部件。然而，這種方法主要對沒有自遮擋以及非重疊環境的簡單姿態有效。

因此，需要一種能夠應對適應各種環境、對象和亮度的具有更好魯棒性的剛體部件方向檢測方法。

發明內容

技術方案

本發明仍然聚焦于用于非剛性對象定位或姿態估計的剛體部件方向檢測。為了增強魯棒性和計算效率，提供了使用深度信息的新穎方案。

提供了一種基于深度信息提取圖像特征的方法，包括：對由深度相機捕捉的輸入圖像的預定像素計算突出度特征；通過計算的突出度特征獲得輸入圖像的突出度特征圖像；尋找突出度特征圖像上的具有顯著突出度特征的種子；以及通過種子的生長來產生突出區域。

通過使用如下公式計算突出度特征：其中，N_R表示深度值小于深度閾值的內區域中的像素的比率，N_C表示深度值大于深度閾值的外區域中的像素的比率，深度閾值是內區域中像素的最小深度與特定變化范圍的和，內區域是以當前像素為中心的預定大小的區域，外區域是由以當前像素為中心的大于所述內區域的另一預定大小的區域減去內區域所得到的環狀區域。

產生突出區域的步驟還可包括丟棄孤立的像素和小的突出區域。

內區域和外區域的大小以及內區域與外區域的比率是可調節的，并且內區域和外區域可具有多種形狀。

所述獲得輸入圖像的突出度特征圖像的步驟可包括：將輸入圖像的所述預定像素的突出度特征量化為0～255的灰度值；通過輸入圖像的所述預定像素的灰度值獲得輸入圖像的突出度特征圖像，其中，通過使用如下公式進行所述量化：

Ph′=[255×(Ph-PminPmax-Pmin)]]]>