[發(fā)明專利]視頻回放與用戶運動的同步方法、計算機可讀介質和系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202010489056.3
• 申請日: 2020-06-02
• 公開（公告）號: CN112153468A
• 公開（公告）日: 2020-12-29
• 發(fā)明（設計）人: D·G·金貝爾;L·德努;M·J·貝克;P·邱;金哲暄;張艷霞
• 申請（專利權）人: 富士施樂株式會社
• 主分類號: H04N21/472
• 分類號: H04N21/472;H04N21/432;G06K9/00
• 代理公司: 北京三友知識產權代理有限公司 11127
• 代理人: 劉久亮;黃綸偉

1.一種用于協(xié)調與實況視頻饋送中的第一對象的實時運動關聯的感測姿態(tài)以及與視頻中的第二對象的運動關聯的預先記錄的姿態(tài)的計算機實現的方法，該計算機實現的方法包括以下步驟：

應用匹配函數以確定所述感測姿態(tài)之一的點與所述預先記錄的姿態(tài)的對應點之間的匹配；以及

基于所述匹配，確定播放時間并將與所述第二對象關聯的所述視頻的至少一幀輸出達所述播放時間。

2.根據權利要求1所述的計算機實現的方法，其中，所述感測姿態(tài)之一的所述點和所述預先記錄的姿態(tài)的所述對應點包括第一模式下所述第一對象和所述第二對象的單個點以及第二模式下所述第一對象和所述第二對象的多個點。

3.根據權利要求2所述的計算機實現的方法，其中，提供用戶控件以在所述第一模式和所述第二模式之間選擇，并且對于所述第二模式，選擇所述第一對象和所述第二對象的所述多個點的數量和位置。

4.根據權利要求1所述的計算機實現的方法，其中，所述第一對象包括接收所述視頻的輸出并按順序執(zhí)行姿態(tài)以與所述預先記錄的姿態(tài)協(xié)調的用戶，并且所述第二對象包括顯示在所述視頻中的按順序執(zhí)行所述預先記錄的姿態(tài)的教練。

5.根據權利要求4所述的計算機實現的方法，其中，所述運動包括物理治療活動、鍛煉的至少一部分、舞蹈的至少一部分或表演的至少一部分中的一個。

6.根據權利要求1所述的計算機實現的方法，該方法還包括以下步驟：

基于應用所述匹配函數和確定所述播放時間的結果來確定時間窗口上的瞬時速度估計；

對所述瞬時速度估計應用平滑方法，以生成播放速度；以及

基于所述播放速度來更新所述播放時間。

7.根據權利要求6所述的計算機實現的方法，其中，所述平滑方法包括利用以經驗確定的平滑因子或者基于所述時間窗口上所述第二對象的運動程度而改變的變量的滑動平均。

8.根據權利要求1所述的計算機實現的方法，其中，所述視頻包括與所述第二對象的所述預先記錄的姿態(tài)關聯的一個或更多個視覺反饋指示物。

9.根據權利要求8所述的計算機實現的方法，其中，所述一個或更多個視覺反饋指示物包括指示所述第二對象的所述對應點的運動路徑的軌跡、指示所述第二對象的所述對應點沿著所述軌跡的相對速度和相對方向的軌道以及指示所述第二對象的所述對應點的位置與所述第一對象的所述點的位置之間的差異的伸縮帶中的一個或更多個。

10.一種能夠協(xié)調與實況視頻饋送中的第一對象的實時運動關聯的感測姿態(tài)以及與視頻中的第二對象的運動關聯的預先記錄的姿態(tài)的系統(tǒng)，該系統(tǒng)被配置為執(zhí)行以下操作：

應用匹配函數以確定所述感測姿態(tài)之一的點與所述預先記錄的姿態(tài)的對應點之間的匹配；并且

基于所述匹配，確定播放時間并將與所述第二對象關聯的所述視頻的至少一幀輸出達所述播放時間。

11.根據權利要求10所述的系統(tǒng)，其中，所述感測姿態(tài)之一的所述點和所述預先記錄的姿態(tài)的所述對應點包括第一模式下所述第一對象和所述第二對象的單個點以及第二模式下所述第一對象和所述第二對象的多個點，其中，提供用戶控件以在所述第一模式和所述第二模式之間選擇，并且對于所述第二模式，選擇所述第一對象和所述第二對象的所述多個點的數量和位置。

12.根據權利要求10所述的系統(tǒng)，其中，所述第一對象包括接收所述視頻的輸出并按順序執(zhí)行姿態(tài)以與所述預先記錄的姿態(tài)協(xié)調的用戶，并且所述第二對象包括顯示在所述視頻中的按順序執(zhí)行所述預先記錄的姿態(tài)的教練，其中，所述運動包括物理治療活動、鍛煉的至少一部分、舞蹈的至少一部分或表演的至少一部分中的一個。