[發明專利]結合人眼跟蹤的立體視頻處理系統及方法

無效

• 申請號: 201310746083.4
• 申請日: 2013-12-30
• 公開（公告）號: CN103747236A
• 公開（公告）日: 2014-04-23
• 發明（設計）人: 楊青;李建軍
• 申請（專利權）人: 中航華東光電有限公司
• 主分類號: H04N13/04
• 分類號: H04N13/04;H04N13/00
• 代理公司: 蕪湖安匯知識產權代理有限公司 34107
• 代理人: 朱圣榮

1.一種結合人眼跟蹤的立體視頻處理系統，其特征在于：包括圖像處理單元、人眼跟蹤識別單元、對應視區圖像處理單元、視頻輸出模塊和攝像頭；

攝像頭：作為捕捉用戶影像的硬件，并將圖像傳給人眼跟蹤識別單元；

人眼跟蹤識別單元：采集攝像頭的數據，計算人眼的3D坐標，并將參數傳送給對應視區圖像處理單元；

圖像處理單元：將視頻文件提取單幀，劃分成N張小圖，采用立體圖像融合算法，得到立體圖像，并將立體圖像傳送給對應視區圖像處理單元；

對應視區圖像處理單元：將人眼跟蹤識別單元和圖像處理單元傳送過來的人眼3D坐標參數和立體圖像進行對比，判斷是否為3D坐標對應視區的立體圖像；

視頻輸出模塊：將對應視區圖像處理單元傳送過來的正確的立體圖像進行播放。

2.根據權利要求1所述的一種結合人眼跟蹤的立體視頻處理方法，其特征在于：包括如下步驟：

步驟一：開啟攝像頭，捕捉用戶的影像，通過圖像處理技術識別人眼區域，給定人眼一個3D坐標；

步驟二：將視頻文件提取單幀，劃分成N張小圖，采用立體圖像融合算法，得到新的立體圖像；

步驟三：根據3D坐標來判斷新的立體圖像是否是對應視區的圖像融合方式，如果是則執行步驟四，否則，將3D坐標和新的立體圖像打包返回到步驟二；

步驟四：輸出融合后的立體圖像。

3.根據權利要求2所述結合人眼跟蹤的立體視頻處理方法，其特征在于：所述步驟一中：人眼3D坐標是由攝像機捕捉到的二維圖像坐標和攝像機標定參數給定。

4.根據權利要求2所述結合人眼跟蹤的立體視頻處理方法，其特征在于：所述步驟二中：調用OpenCV的圖像與視頻處理函數提取原視頻的分辨率與幀率；步驟四中：將新的立體圖像使用OpenCV將其按原始視頻分辨率大小進行顯示，并按原有的幀率數值控制載入幀圖像的間隔時間，將其調整為原始視頻文件的幀率。

5.根據權利要求2所述結合人眼跟蹤的立體視頻處理方法，其特征在于：所述步驟二中：圖像融合的原理為：選定一個子像素(k,l)，根據多視點子像素映射的通用計算公式得到該子像素所對應的RGB分量：

N=(k-3ltanα)modXXNtot]]>

其中：N_tot表示視點數目，(k,l)表示像素點在坐標系中的位置，α表示光柵傾角，X表示片源個數，N表示像素對應某幅視點圖像的序號；將得到各視點圖像的子像素坐標的RGB分量帶入到合成圖的子像素相應的坐標處，通過循環帶入，得到合成圖像。