[發(fā)明專利]用于將測(cè)試幀序列與參考幀序列進(jìn)行匹配的系統(tǒng)和方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202210192321.0
• 申請(qǐng)日: 2022-03-01
• 公開（公告）號(hào): CN115035542A
• 公開（公告）日: 2022-09-09
• 發(fā)明（設(shè)計(jì)）人: A·阿茲漢德;P·阿加瓦爾
• 申請(qǐng)（專利權(quán)）人: 林德拉股份有限公司
• 主分類號(hào): G06V40/10
• 分類號(hào): G06V40/10;G06V20/40;G06N3/04;G06N3/08;G06V10/75;G06V10/82
• 代理公司: 北京紀(jì)凱知識(shí)產(chǎn)權(quán)代理有限公司 11245
• 代理人: 徐東升

本發(fā)明公開了一種用于將測(cè)試幀序列與參考幀序列進(jìn)行匹配的計(jì)算機(jī)實(shí)施的方法、計(jì)算機(jī)程序產(chǎn)品和計(jì)算機(jī)系統(tǒng)。對(duì)于參考幀序列的每一幀，姿態(tài)數(shù)據(jù)文件表示虛擬球面上的多個(gè)二維骨架投影。對(duì)于特定幀，球面上的每個(gè)二維骨架投影對(duì)應(yīng)于來(lái)自不同視場(chǎng)角的第一人的三維骨架的二維參考姿態(tài)圖像。測(cè)試幀序列表示第二人在進(jìn)行體育鍛煉時(shí)的運(yùn)動(dòng)。實(shí)時(shí)二維骨架檢測(cè)器模塊檢測(cè)在測(cè)試幀序列的每個(gè)接收到的測(cè)試幀中的第二人的二維骨架。姿態(tài)匹配模塊選擇具有到當(dāng)前測(cè)試幀中的第二人的二維骨架的最小數(shù)學(xué)距離的第一人的特定二維骨架投影，以將當(dāng)前測(cè)試幀中的第二人的當(dāng)前姿態(tài)與姿態(tài)數(shù)據(jù)文件的對(duì)應(yīng)參考姿態(tài)圖像進(jìn)行匹配。

技術(shù)領(lǐng)域

本發(fā)明總體上涉及電子數(shù)據(jù)處理，并且更具體地涉及用于將顯示用戶進(jìn)行體育鍛煉的測(cè)試幀序列與對(duì)應(yīng)參考幀序列進(jìn)行匹配的計(jì)算機(jī)實(shí)施的方法、計(jì)算機(jī)程序產(chǎn)品和系統(tǒng)。

背景技術(shù)

一般而言，進(jìn)行體育鍛煉促進(jìn)人類肌肉骨骼系統(tǒng)的健康，并且通常改善個(gè)體的健康狀況。幫助患者在事故、手術(shù)、椎間盤突出等之后恢復(fù)其完全活動(dòng)能力的物理治療措施通常包括需要由患者正確地進(jìn)行的專門體育鍛煉。如果未正確地進(jìn)行，此類鍛煉甚至可能損害患者的健康。

雖然在醫(yī)療療程中，經(jīng)驗(yàn)豐富的物理治療師或教練可以在進(jìn)行鍛煉期間觀察患者，并提供關(guān)于如何正確地進(jìn)行鍛煉的指令，但是當(dāng)患者在家中進(jìn)行鍛煉而沒(méi)有物理治療師或教練的監(jiān)督時(shí)，這是不可能的。通常，非常有利的是在醫(yī)療療程之間定期重復(fù)鍛煉，以實(shí)現(xiàn)患者醫(yī)療狀態(tài)的可持續(xù)改善。

存在向用戶提供指令視頻的商業(yè)應(yīng)用，它們示出指導(dǎo)者的正確鍛煉表現(xiàn)。然而，或者是如果鍛煉被正確地進(jìn)行或者未正確地進(jìn)行時(shí)用戶沒(méi)有接收到反饋(如在醫(yī)療療程中)，在這種情況下，當(dāng)以不正確的方式進(jìn)行鍛煉時(shí)，用戶的健康甚至可能惡化，或者是需要復(fù)雜的硬件裝置，如來(lái)自德國(guó)柏林10587的etone運(yùn)動(dòng)分析股份有限公司(etone MotionAnalysis GmbH) 的VAHA鏡，或者由德國(guó)達(dá)爾戈-德貝里茨14624的Pixformance體育股份有限公司 (Pixformance Sports GmbH)提供的PIXFORMANCE鏡，其也包括深度傳感器。此類硬件鏡像解決方案包括需要復(fù)雜設(shè)置程序的大型裝置。在設(shè)置之后，它們需要在固定位置操作。

發(fā)明內(nèi)容

因此，需要一種應(yīng)用，其能夠以此類方式向用戶提供指令，即通過(guò)確保在無(wú)人監(jiān)督訓(xùn)練期間正確地進(jìn)行體育鍛煉而不需要特定的復(fù)雜硬件裝置來(lái)防止對(duì)用戶健康的損害。這是通過(guò)提供一種應(yīng)用來(lái)實(shí)現(xiàn)的，該應(yīng)用允許根據(jù)獨(dú)立權(quán)利要求中描繪的實(shí)施例來(lái)識(shí)別由來(lái)自參考幀序列的視頻的測(cè)試幀序列捕捉的所述用戶的鍛煉表現(xiàn)的偏差，該參考幀序列示出指導(dǎo)者進(jìn)行正確的序列。

因此，所述實(shí)施例解決了進(jìn)一步的技術(shù)問(wèn)題。當(dāng)試圖將測(cè)試幀序列與參考幀序列進(jìn)行匹配時(shí)，通常需要以與用于捕捉測(cè)試幀序列的攝像機(jī)相同的方式(即，在相同的視場(chǎng)角下)來(lái)定位用于捕捉測(cè)試幀序列的攝像機(jī)。在家庭環(huán)境中，這可能是有挑戰(zhàn)性的，特別是在使用具有一體化攝像機(jī)的簡(jiǎn)單智能手機(jī)或平板電腦來(lái)捕捉測(cè)試幀序列的情況下。通常，此類裝置不能容易地安裝在相應(yīng)位置。有時(shí)甚至用戶進(jìn)行鍛煉的位置也不允許此類定位。因此，需要提供一種應(yīng)用，其能夠以這樣的方式將測(cè)試幀序列與參考幀序列進(jìn)行匹配，即當(dāng)捕捉所述用戶的鍛煉表現(xiàn)時(shí)，不可知攝像機(jī)朝向用戶的視場(chǎng)角。

該技術(shù)問(wèn)題的解決通過(guò)實(shí)施例－根據(jù)獨(dú)立權(quán)利要求的計(jì)算機(jī)實(shí)施的方法、計(jì)算機(jī)程序產(chǎn)品和計(jì)算機(jī)系統(tǒng)—以將示出用戶(在進(jìn)行所述體育鍛煉的同時(shí))的測(cè)試幀序列與對(duì)應(yīng)參考幀序列(由教練/指導(dǎo)者演示體育鍛煉的正確表現(xiàn))進(jìn)行匹配。

一種計(jì)算機(jī)系統(tǒng)，其將相應(yīng)計(jì)算機(jī)程序產(chǎn)品加載到其存儲(chǔ)器中，并且其利用一個(gè)或多個(gè)處理器來(lái)處理所加載的計(jì)算機(jī)程序，從而被配置成如下所述執(zhí)行計(jì)算機(jī)實(shí)施的方法。