[發明專利]跟蹤式視頻縮放

在審

• 申請號: 201880056247.1
• 申請日: 2018-08-23
• 公開（公告）號: CN111052753A
• 公開（公告）日: 2020-04-21
• 發明（設計）人: 路易斯·克倫斯基;愛德華多·阿斯邦
• 申請（專利權）人: VID拓展公司
• 主分類號: H04N21/4728
• 分類號: H04N21/4728;H04N21/431;H04N21/44
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 馬爽;臧建明

公開了用于由客戶端進行動態畫中畫(PIP)的系統、方法和手段。所述客戶端可以駐留在任何設備上。所述客戶端可以從服務器接收視頻內容，并且使用對象辨識或元數據中的至少一個來識別所述視頻內容內的對象。所述元數據可以包括指示對象在所述視頻內容的幀內的位置的信息。所述客戶端可以接收用戶對所述對象的選擇，并且使用對象辨識或元數據中的至少一個來確定所述對象跨所述視頻內容的多個幀的位置數據。所述客戶端可以在跨越所述視頻內容的多個幀的PIP窗口內顯示所述對象的放大和延時版本。替代地或另外，所述PIP窗口在每一幀內的位置可以是固定的或可以基于所述對象在每一幀內的位置。

相關申請的交叉引用

本申請要求在2017年8月30日提交的美國臨時專利申請No.62/552,032的權益，其內容通過引用而被結合于此。

背景技術

各種數字視頻壓縮技術實現了有效的數字視頻通信、分發和消費。標準化視頻壓縮技術的一些示例是H.261、MPEG-1、MPEG-2、H.263、MPEG-4部分2和H.264/MPEG-4部分10AVC。先進的視頻壓縮技術(例如，高效視頻編碼(HEVC))可以在與H.264/AVC相比相同的視頻質量下提供兩倍的壓縮或一半的比特率。

發明內容

公開了用于由客戶端進行動態畫中畫(PIP)的系統、方法和手段。客戶端可以例如駐留在任何設備上，諸如有線設備(例如，電視(TV))或無線發射/接收單元(WTRU)(例如，智能TV、手持無線設備等)。所述設備可從服務器接收視頻內容，且使用對象辨識或元數據中的至少一者來識別所述視頻內容內的對象。所述元數據可以包括指示對象在所述視頻內容的幀內的位置的信息。所述元數據可以在所述視頻內容中被提供或者與所述視頻內容一起被提供。所述設備可以接收用戶對所述對象的選擇，并且使用對象辨識或元數據中的至少一個來確定所述對象跨所述視頻內容的多個幀的位置數據(例如，夸所述視頻內容的所述多個幀來跟蹤所述對象)。所述設備可跨越所述視頻內容的所述多個幀在PIP內顯示所述對象的經放大和經時間延遲版本。所述PIP在每一幀內的位置可以是固定的(例如，預定的且與所述對象在每一幀內的位置解耦)或可以基于所述對象在每一幀內的位置(例如，基于所述對象的所述位置而“浮動”在每一視頻幀上、位于與所述對象最接近的角落內等)。

在一些示例中，所述設備可以從服務器接收視頻內容，并且使用對象辨識或元數據中的至少一個來識別所述視頻內容內的對象。所述設備可以接收用戶對所述對象的選擇，并且使用對象辨識或元數據中的至少一個來跨所述視頻內容的多個幀確定所述對象的位置數據(例如，跨所述視頻內容的多個幀，跟蹤所述對象)。所述設備可跨越所述視頻內容的所述多個幀在畫中畫PIP內顯示所述對象的放大版本，其中舉例來說，其中所述PIP在所述多個幀內的位置是基于所述對象在所述視頻內容的所述多個幀內的位置數據而確定的(例如，所述PIP基于所述所跟蹤對象的所述位置而跨越所述多個幀“浮動”)。所述PIP可以是所述視頻內容的所述多個幀內的較小窗口。

在一些示例中，所述設備可以從服務器(例如，內容服務器)接收視頻內容。所述設備可基于對象辨識或元數據，確定對象在所述視頻內容的第一幀內的第一位置。例如，所述設備可以識別所述對象(例如，基于對象辨識或元數據)，并且確定所述對象在所述視頻內容的幀的位置(例如，基于對象辨識或元數據)。所述設備可以基于所述對象的第一位置，確定第一窗口的位置。例如，所述第一窗口的所述位置可以與第一視頻幀中的所述對象的位置直接相關(例如，重疊或包含)。所述第一窗口可以包括所述第一幀的視覺放大部分，并且所述第一幀的該視覺放大部分可以包括所述對象。所述設備可以在所述顯示設備上在所述第一幀內顯示所述第一窗口。