[發(fā)明專利]一種生成全景圖片的方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201310049193.5
• 申請(qǐng)日: 2013-02-07
• 公開（公告）號(hào): CN103985103A
• 公開（公告）日: 2014-08-13
• 發(fā)明（設(shè)計(jì)）人: 孫振興
• 申請(qǐng)（專利權(quán)）人: 百度在線網(wǎng)絡(luò)技術(shù)(北京)有限公司
• 主分類號(hào): G06T5/50
• 分類號(hào): G06T5/50;G06T3/40;G06T3/60
• 代理公司: 北京鴻德海業(yè)知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11412
• 代理人: 袁媛

【技術(shù)領(lǐng)域】

本發(fā)明涉及計(jì)算機(jī)應(yīng)用技術(shù)領(lǐng)域，特別涉及一種生成全景圖片的方法和裝置。

【背景技術(shù)】

全景圖片指的是通過廣角的表現(xiàn)手段盡可能多的表現(xiàn)出周圍環(huán)境的方式，通常所說的全景圖片是一個(gè)廣義的概念，其包括寬景、360度全景等。全景圖片因其視角寬廣給人帶來十分震撼的視覺效果而逐漸得到用戶的喜愛和廣泛使用，通過拍攝設(shè)備或者具有拍攝功能的移動(dòng)設(shè)備再結(jié)合圖片處理軟件能夠生成全景圖片，并能夠在社交、地圖、旅游等應(yīng)用中得到很好地推廣。

現(xiàn)有生成全景圖片的方式大多是通過用戶拍攝多張不同視角的圖片后，將這些不同視角的圖片進(jìn)行拼接后得到的，但這種方式得到的全景圖片的往往不能產(chǎn)生很好的效果，例如用戶拍攝圖片時(shí)由于姿態(tài)發(fā)生傾斜或者手發(fā)生抖動(dòng)等原因，會(huì)造成拍攝的不同角度的圖片本身質(zhì)量并不優(yōu)，后續(xù)拼接得到的全景圖片的效果也不優(yōu)。

【發(fā)明內(nèi)容】

有鑒于此，本發(fā)明提供了一種生成全景圖片的方法和裝置，以便于提高全景圖片的效果。

具體技術(shù)方案如下：

一種生成全景圖像的方法，該方法包括：

S1、獲取用戶以所在點(diǎn)為中心拍攝的視頻片段，該視頻片段的可視范圍大于拍攝設(shè)備的定點(diǎn)拍攝可視范圍，獲取并記錄拍攝過程中的傳感器參數(shù)序列；

S2、依據(jù)傳感器參數(shù)序列中各拍攝點(diǎn)的朝向信息，從視頻片段中提取2張以上的關(guān)鍵幀；

S3、將提取的關(guān)鍵幀進(jìn)行拼接，得到全景圖片。

根據(jù)本發(fā)明一優(yōu)選實(shí)施例，所述步驟S2具體包括：

從所述視頻片段中提取設(shè)定N個(gè)朝向?qū)?yīng)的圖像作為關(guān)鍵幀，N為2以上的整數(shù)；或者，

將所述視頻片段依據(jù)朝向信息劃分為N1個(gè)區(qū)間，N1為2以上的整數(shù)，從所述N1個(gè)區(qū)間中分別挑選出1張圖像作為關(guān)鍵幀。

根據(jù)本發(fā)明一優(yōu)選實(shí)施例，從所述N1個(gè)區(qū)間中分別挑選出1張圖像作為關(guān)鍵幀具體包括：

S21、從所述N1個(gè)區(qū)間中分別提取出N2張圖像，N2為2以上的整數(shù)；

S22、依據(jù)傳感器參數(shù)序列中對(duì)應(yīng)的拍攝設(shè)備姿態(tài)信息、加速度信息和圖像質(zhì)量中的至少一種，從每一個(gè)區(qū)間的N2張圖像中分別選擇一張圖像作為關(guān)鍵幀。

根據(jù)本發(fā)明一優(yōu)選實(shí)施例，所述S22具體包括以下方式中的至少一種：

方式1）確定所述傳感器參數(shù)序列中每個(gè)區(qū)間的N2張圖像對(duì)應(yīng)的拍攝設(shè)備姿態(tài)信息，從每個(gè)區(qū)間的N2張圖像中分別挑選出對(duì)應(yīng)姿態(tài)信息偏離三軸坐標(biāo)系最小的圖像作為關(guān)鍵幀；

方式2）確定所述傳感器參數(shù)序列中每個(gè)區(qū)間的N2張圖像對(duì)應(yīng)的加速度信息，從每個(gè)區(qū)間的N2張圖像中挑選出對(duì)應(yīng)加速度最小的圖像作為關(guān)鍵幀；

方式3）從每個(gè)區(qū)間的N2張圖像中分別挑選出圖像質(zhì)量最高的圖像作為關(guān)鍵幀；

方式4）依據(jù)對(duì)應(yīng)的姿態(tài)信息、加速度信息和圖像質(zhì)量中的任意組合對(duì)每個(gè)區(qū)間的N2張圖像分別賦予權(quán)值，其中對(duì)應(yīng)姿態(tài)信息偏離三軸坐標(biāo)系越小的圖像權(quán)值越大，對(duì)應(yīng)加速度越小的圖像權(quán)值越大，圖像質(zhì)量越高的圖像權(quán)值越大，從每個(gè)區(qū)間的N2張圖像中分別挑選出權(quán)值最大的圖像作為關(guān)鍵幀。

根據(jù)本發(fā)明一優(yōu)選實(shí)施例，在所述步驟S2和步驟S3之間還包括：

S4、依據(jù)傳感器參數(shù)序列中各關(guān)鍵幀對(duì)應(yīng)的拍攝設(shè)備姿態(tài)信息，對(duì)關(guān)鍵幀進(jìn)行旋轉(zhuǎn)校正。

根據(jù)本發(fā)明一優(yōu)選實(shí)施例，所述步驟S4具體包括以下操作中的至少一種：

操作1）確定關(guān)鍵幀對(duì)應(yīng)的姿態(tài)信息中相對(duì)于Z軸偏轉(zhuǎn)的角度平均值對(duì)各關(guān)鍵幀逐幀在垂直于圖像的平面上旋轉(zhuǎn)度，γ為關(guān)鍵幀對(duì)應(yīng)的姿態(tài)信息中相對(duì)于Z軸偏轉(zhuǎn)的角度；

操作2）確定關(guān)鍵幀對(duì)應(yīng)的姿態(tài)信息中相對(duì)于X軸偏轉(zhuǎn)的角度平均值對(duì)各關(guān)鍵幀逐幀在圖像所在平面上旋轉(zhuǎn)度，α為關(guān)鍵幀對(duì)應(yīng)的姿態(tài)信息中相對(duì)于X軸偏轉(zhuǎn)的角度；

操作3）確定關(guān)鍵幀對(duì)應(yīng)的姿態(tài)信息中相對(duì)于Y軸偏轉(zhuǎn)的角度平均值對(duì)各關(guān)鍵幀逐幀在圖像所在平面上旋轉(zhuǎn)度，β為關(guān)鍵幀對(duì)應(yīng)的姿態(tài)信息中相對(duì)于Y軸偏轉(zhuǎn)的角度。

一種生成全景圖像的裝置，該裝置包括：

視頻片段獲取單元，用于獲取用戶以所在點(diǎn)為中心拍攝的視頻片段；

傳感器參數(shù)記錄單元，用于獲取并記錄所述視頻片段的拍攝過程中的傳感器參數(shù)序列；

關(guān)鍵幀提取單元，用于依據(jù)傳感器參數(shù)序列中各拍攝點(diǎn)的朝向信息，從視頻片段中提取2張以上的關(guān)鍵幀；

圖像拼接單元，用于將所述關(guān)鍵幀進(jìn)行拼接，得到全景圖片。

根據(jù)本發(fā)明一優(yōu)選實(shí)施例，所述關(guān)鍵幀提取單元具體配置為：