[發(fā)明專利]一種無有效重疊變結(jié)構(gòu)的定點定向視頻實時拼接方法

在審

• 申請?zhí)枺?/td>: 201510016447.2
• 申請日: 2015-01-13
• 公開（公告）號: CN104506828A
• 公開（公告）日: 2015-04-08
• 發(fā)明（設(shè)計）人: 蔣朝輝;陳致蓬;桂衛(wèi)華;陽春華;鄧康
• 申請（專利權(quán)）人: 中南大學(xué)
• 主分類號: H04N7/18
• 分類號: H04N7/18;H04N5/265
• 代理公司: 北京路浩知識產(chǎn)權(quán)代理有限公司11002
• 代理人: 李相雨

1.一種無有效重疊變結(jié)構(gòu)的定點定向視頻實時拼接方法，其特征在于，所述方法包括以下步驟：

步驟一、安裝多攝像機視頻采集陣列，分別采集不同位置的視頻流信息，并將所述視頻流信息進行模數(shù)轉(zhuǎn)換、同步和壓縮處理；

步驟二、將壓縮后的視頻流信息轉(zhuǎn)換為同一視頻格式，按照時間順序分為多個第一靜態(tài)視頻幀組；其中，每個所述第一靜態(tài)視頻幀組均包括同一時刻的所述多攝像機視頻采集陣列采集的n路視頻流信息；

步驟三、將所述第一靜態(tài)視頻幀組中每一路視頻流信息對應(yīng)的靜態(tài)圖像，根據(jù)側(cè)視圖轉(zhuǎn)俯視圖幾何模型，轉(zhuǎn)換為被拍對象的俯視圖，形成第二靜態(tài)視頻幀組；

步驟四、根據(jù)定位模型，對所述第二靜態(tài)視頻幀組中的每個視頻幀進行定位，進行全景粗拼接，得到全景粗拼接圖；

步驟五、根據(jù)所述定位模型，確定所述全景粗拼接圖中，有重疊區(qū)域拼接縫位置、無縫無洞無重疊區(qū)域拼接縫位置以及有洞或有裂縫區(qū)域拼接縫位置；

步驟六、對于所述有重疊區(qū)域拼接縫或無縫無洞無重疊區(qū)域拼接縫，利用亮度和顏色插值算法，對拼接縫進行融合拼接；

步驟七、對于所述有洞或有裂縫區(qū)域拼接縫的拼接過程如下：

根據(jù)所述定位模塊確定所述第二靜態(tài)視頻幀組中每一視頻幀對應(yīng)的子圖像之間以及子圖像與漏洞或裂縫之間的接壤關(guān)系，并根據(jù)接壤關(guān)系確定漏洞或裂縫子圖像；

提取與漏洞或裂縫子圖像相鄰的子圖像的線特征；

對提取的所述線特征進行匹配，得到線特征對；

利用相鄰區(qū)域線的特征外推邊界點來補償裂縫或漏洞；

對漏洞或裂縫補償后的所述全景粗拼接圖，利用亮度和顏色插值算法，對拼接縫進行融合拼接，獲得全景精拼接后的全景視頻幀；

步驟八、將不同時刻的第一靜態(tài)視頻幀組按照所述步驟三至步驟七進行處理，得到不同時刻的全景視頻幀，按照時間順序?qū)⑺鋈耙曨l幀進行合成，得到實時全景視頻流。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述步驟二在收到同步視頻分割指令后進行，并且所述步驟二運行結(jié)束后，將所述第一靜態(tài)視頻幀按照時間順序進行存儲。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述步驟三中側(cè)視圖變俯視圖幾何模型為：

其中，s為比例因子，f_x,f_y為攝像機的焦距，c_x,c_y為圖像矯正參數(shù)，R_x,R_y,R_z為旋轉(zhuǎn)矩陣的三個列向量，t為平移向量，(x,y,z)為所述靜態(tài)圖像側(cè)視圖的元素坐標(biāo)，(X,Y,Z)為對應(yīng)元素的俯視圖坐標(biāo)。