[發(fā)明專(zhuān)利]用于人體跟蹤的代表訓(xùn)練數(shù)據(jù)

有效

• 申請(qǐng)?zhí)枺?/td>: 201110071738.3
• 申請(qǐng)日: 2011-03-18
• 公開(kāi)（公告）號(hào): CN102194105A
• 公開(kāi)（公告）日: 2011-09-21
• 發(fā)明（設(shè)計(jì)）人: A·費(fèi)茨吉本;J·肖頓;M·科克;R·摩爾;M·芬諾基奧
• 申請(qǐng)（專(zhuān)利權(quán)）人: 微軟公司
• 主分類(lèi)號(hào): G06K9/00
• 分類(lèi)號(hào): G06K9/00;G06K9/62
• 代理公司: 上海專(zhuān)利商標(biāo)事務(wù)所有限公司 31100
• 代理人: 錢(qián)靜芳

1.一種用于生成用于人體跟蹤的代表訓(xùn)練數(shù)據(jù)的處理器實(shí)現(xiàn)的方法，包括以下處理器實(shí)現(xiàn)的步驟：

訪(fǎng)問(wèn)至少一個(gè)運(yùn)動(dòng)捕捉序列(500)，所述至少一個(gè)運(yùn)動(dòng)捕捉序列標(biāo)識(shí)其中行動(dòng)者執(zhí)行移動(dòng)的時(shí)間段期間所述行動(dòng)者的身體的姿態(tài)(1100)；

基于所述至少一個(gè)運(yùn)動(dòng)捕捉序列執(zhí)行到多個(gè)身體類(lèi)型的重新定標(biāo)和不相似姿態(tài)選擇，來(lái)提供多個(gè)不相似姿態(tài)(502)；以及

根據(jù)用于所述多個(gè)身體類(lèi)型中的一相應(yīng)身體類(lèi)型的3-D身體模型(1302、1360)來(lái)渲染每一所述不相似姿態(tài)，以提供所述不相似姿態(tài)的相應(yīng)的深度圖像，并提供標(biāo)識(shí)所述不相似姿態(tài)的身體部位的相應(yīng)的分類(lèi)圖像(1400)，其中所述3-D身體模型是基于對(duì)應(yīng)骨架的關(guān)節(jié)位置和關(guān)節(jié)角度中的至少一個(gè)來(lái)渲染的，使用多個(gè)3-D身體模型，對(duì)每一身體類(lèi)型有一個(gè)3-D身體模型，并且相應(yīng)的深度圖像和相應(yīng)的分類(lèi)圖像包括可由機(jī)器學(xué)習(xí)算法用于人體跟蹤的像素?cái)?shù)據(jù)。

2.如權(quán)利要求1所述的處理器實(shí)現(xiàn)的方法，其特征在于：

所述重新定標(biāo)將所述至少一個(gè)運(yùn)動(dòng)捕捉序列重新定標(biāo)到所述多個(gè)身體類(lèi)型，以提供多個(gè)重新定標(biāo)的運(yùn)動(dòng)捕捉序列，每一重新定標(biāo)的運(yùn)動(dòng)捕捉序列標(biāo)識(shí)所述多個(gè)身體類(lèi)型的一相應(yīng)身體類(lèi)型的姿態(tài)；以及

所述不相似姿態(tài)選擇從所述多個(gè)重新定標(biāo)的運(yùn)動(dòng)捕捉序列中選擇不相似姿態(tài)，使得所述不相似姿態(tài)是所述多個(gè)重新定標(biāo)的運(yùn)動(dòng)捕捉序列中的姿態(tài)的子集。

3.如權(quán)利要求1所述的處理器實(shí)現(xiàn)的方法，其特征在于：

所述不相似姿態(tài)選擇從所述至少一個(gè)運(yùn)動(dòng)捕捉序列中選擇不相似姿態(tài)，使得所述不相似姿態(tài)是所述至少一個(gè)運(yùn)動(dòng)捕捉序列中的姿態(tài)的子集；以及

所述重新定標(biāo)將所述不相似姿態(tài)重新定標(biāo)到所述多個(gè)身體類(lèi)型，以提供多個(gè)重新定標(biāo)的運(yùn)動(dòng)捕捉序列，每一重新定標(biāo)的運(yùn)動(dòng)捕捉序列標(biāo)識(shí)所述多個(gè)身體類(lèi)型的一相應(yīng)身體類(lèi)型的姿態(tài)。

4.如權(quán)利要求1所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其特征在于，還包括以下處理器實(shí)現(xiàn)的步驟：

向至少一個(gè)所述不相似姿態(tài)引入變化，所述變化包括變化的骨長(zhǎng)度和變化的關(guān)節(jié)角度中的至少一個(gè)。

5.如權(quán)利要求1所述的處理器實(shí)現(xiàn)的方法，其特征在于：

所述渲染向至少一個(gè)所述不相似姿態(tài)添加3-D場(chǎng)景元素(1304、1306、1308、1310)；以及

所述3-D場(chǎng)景元素中的至少一個(gè)被修改成適合所述不相似姿態(tài)的對(duì)應(yīng)的身體姿態(tài)。

6.如權(quán)利要求5所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其特征在于，還包括以下處理器實(shí)現(xiàn)的步驟：

通過(guò)組合來(lái)自所述至少一個(gè)運(yùn)動(dòng)捕捉序列的兩個(gè)或更多運(yùn)動(dòng)捕捉幀的關(guān)節(jié)角度，將所述行動(dòng)者的身體的姿態(tài)擴(kuò)展到至少一個(gè)附加姿態(tài)。

7.如權(quán)利要求1所述的處理器實(shí)現(xiàn)的方法，其特征在于：

所述渲染通過(guò)改變虛擬相機(jī)高度、虛擬相機(jī)角度和虛擬相機(jī)視野中的至少一個(gè)來(lái)改變至少一個(gè)所述不相似姿態(tài)。

8.如權(quán)利要求1所述的處理器實(shí)現(xiàn)的方法，其特征在于：

所述渲染通過(guò)改變至少一個(gè)所述不相似姿態(tài)的身體位置來(lái)改變至少一個(gè)所述不相似姿態(tài)。

9.如權(quán)利要求1所述的處理器實(shí)現(xiàn)的方法，其特征在于：

所述渲染向至少一個(gè)所述不相似姿態(tài)添加3-D場(chǎng)景元素；以及

所述渲染組合不同姿態(tài)中的、但具有共同的虛擬相機(jī)位置和共同的3-D場(chǎng)景元素的兩個(gè)或更多3-D身體模型。

10.一種用于生成用于人體跟蹤的代表訓(xùn)練數(shù)據(jù)的處理器實(shí)現(xiàn)的方法，包括以下處理器實(shí)現(xiàn)的步驟：

訪(fǎng)問(wèn)至少一個(gè)運(yùn)動(dòng)捕捉序列(500)，所述至少一個(gè)運(yùn)動(dòng)捕捉序列標(biāo)識(shí)其中行動(dòng)者執(zhí)行移動(dòng)的時(shí)間段期問(wèn)所述行動(dòng)者的身體的姿態(tài)(1100)；

基于所述至少一個(gè)運(yùn)動(dòng)捕捉序列執(zhí)行不相似姿態(tài)選擇和到多個(gè)身體類(lèi)型的重新定標(biāo)，來(lái)提供多個(gè)不相似姿態(tài)(502)；以及

根據(jù)用于所述多個(gè)身體類(lèi)型中的一相應(yīng)身體類(lèi)型的3-D身體模型(1302、1360)來(lái)渲染每一所述不相似姿態(tài)，以提供所述不相似姿態(tài)的相應(yīng)的深度圖像，并提供標(biāo)識(shí)所述不相似姿態(tài)的身體部位的相應(yīng)的分類(lèi)圖像(1400)，其中使用多個(gè)3-D身體模型，對(duì)每一身體類(lèi)型有一個(gè)3-D身體模型，并且相應(yīng)的深度圖像和相應(yīng)的分類(lèi)圖像包括可由機(jī)器學(xué)習(xí)算法用于人體跟蹤的像素?cái)?shù)據(jù)，并且所述渲染向至少一個(gè)所述不相似姿態(tài)添加噪聲(506)。