[發明專利]一種基于用戶軌跡的多媒體合成方法

有效

• 申請號: 201010201871.1
• 申請日: 2010-06-09
• 公開（公告）號: CN101867730A
• 公開（公告）日: 2010-10-20
• 發明（設計）人: 熊永平;宋崢;王文東
• 申請（專利權）人: 馬明
• 主分類號: H04N5/262
• 分類號: H04N5/262;G06F17/30
• 代理公司: 北京永創新實專利事務所 11121
• 代理人: 趙文利

1.一種基于用戶軌跡的多媒體合成方法，其特征在于，包括以下幾個步驟：

步驟一：建立空間區域資料的索引結構；

將目標場景根據空間區域和功能劃分為若干個空間區域，空間區域的幾何模型為空間區域中點的空間位置集合和空間區域半徑；如果空間區域有相關的視頻、音頻、文字信息，則將相關的視頻、音頻、文字信息與空間區域中的地理位置建立映射關系，構建出空間區域資料的索引結構，通過給定空間區域能檢索到與包含該區域的空間區域相應的多媒體資料；

步驟二：建立監控視頻資料的索引結構；

場景內部署的監控設備都關聯一個空間區域，采集的視頻資料關聯到對應的空間區域和時間坐標，監控視頻資料通過網絡傳輸到服務器；

步驟三：收集用戶移動軌跡；

進入目標場景的用戶攜帶一個定位裝置，定位裝置內設有微處理器、定位模塊和存儲模塊，每隔一個周期觸發一個定時器，定時讀取定位模塊得到的空間位置和時間坐標，然后將空間位置和時間坐標存入定位裝置的存儲模塊中，形成了一個時間和空間位置記錄序列，表示用戶在目標場景內的移動軌跡。將移動軌跡傳到服務器中；

步驟四：接收用戶拍攝的圖片資料；

如果用戶有自身攜帶數碼相機所拍攝的圖片，將照片上傳給服務器，如果相機有定位功能，可通過圖片格式信息得到圖片的拍攝時間和拍攝地點的空間位置，否則，將圖片的拍攝時間與步驟三得到的移動軌跡的時間坐標進行匹配，獲取拍攝圖片的空間位置，最后將每張照片與一組空間位置(x，y，h)和一個時間坐標(t)相關聯，建立索引，其中x，y，h分別為該位置點的經度、緯度和海拔高度；

步驟五：根據用戶移動軌跡檢索多媒體內容；

根據用戶移動軌跡中的空間位置檢索步驟一中與空間位置所在空間區域對應的多媒體資料，根據用戶移動軌跡中的空間位置和時間坐標，檢索步驟二中的監控視頻資料，檢索步驟四中的照片，最后得到符合用戶在目標場景內移動軌跡的多媒體片段序列；

步驟六：多媒體資料合并生成視頻文件；

將步驟五中得到的多個獨立的多媒體片段序列，根據時間坐標順序合成一個包含音頻和視頻內容的完整視頻文件，根據時間坐標順序和資料的類型進行取舍和剪切，并通過一般多媒體內容分析、特征提取和效果合成技術來優化視頻質量。

2.根據權利要求1所述的一種基于用戶軌跡的多媒體合成方法，其特征在于，所述的步驟二中，監控視頻資料包括兩類，一種為空間區域內固定攝像頭拍攝視頻，另外一種為空間區域內工作人員攜帶攝像機拍攝的視頻；

對于空間區域內固定攝像頭，預先采集空間區域內固定攝像頭拍攝有效空間區域的空間位置，然后建立固定攝像頭與拍攝有效空間區域的索引表，通過檢索空間區域內固定攝像頭所拍攝有效空間區域索引表，得到固定攝像頭拍攝視頻的位置與時間信息；對于空間區域內工作人員攜帶攝像機拍攝，空間區域內工作人員攜帶的攝像機上安裝定位裝置，通過定位裝置得到攝像機拍攝的視頻的位置與時間信息。

3.根據權利要求1所述的一種基于用戶軌跡的多媒體合成方法，其特征在于，所述的步驟三中，用戶攜帶定位模塊中存儲的空間位置和時間坐標，通過無線方式傳送至服務器或者當用戶歸還設備后通過有線方式傳到服務器。

4.根據權利要求1所述的一種基于用戶軌跡的多媒體合成方法，其特征在于，所述的步驟五具體為：選出用戶的移動軌跡(t₁，x₁，y₁，h₁)，(t₂，x₂，y₂，h₂)，(t₃，x₃，y₃，h₃)……其中，t為時間；對于第一個時間點(t₁，x₁，y₁，h₁)，搜索步驟一中包含空間位置(x₁，y₁，h₁)的空間區域的背景資料，搜索步驟二中所有包含空間位置(x₁，y₁，h₁)的空間區域，監控視頻起始時間＜t₁＜監控視頻終止時間的監控視頻資料，搜索步驟四中用戶拍攝圖片，檢索出圖片的空間位置和時間坐標分別滿足：x₁-x_u＜x＜x₁+x_u，y₁-y_u＜y＜y₁+y_u，h₁-h_u＜h＜h₁+h_u，t-t_u＜t＜t+t_u的圖片，x_u，y_u，h_u，t_u表示很小的x變化，y變化，h變化和時間變化，由GPS精度和定位設備定位周期決定，然后得到視頻片段的第一個序列file₁，然后搜索下一個時間點(t₂，x₂，y₂，h₂)，直到完成最后一個，得到符合目標用戶在目標場景內移動軌跡的所有多媒體片段序列。