[發(fā)明專利]三維視頻融合的方法、裝置及電子設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 202010057759.9
• 申請(qǐng)日: 2020-01-17
• 公開（公告）號(hào): CN111225191B
• 公開（公告）日: 2022-07-29
• 發(fā)明（設(shè)計(jì)）人: 唐曙光;胡娟;黃玉軍
• 申請(qǐng)（專利權(quán)）人: 華雁智能科技（集團(tuán)）股份有限公司
• 主分類號(hào): H04N7/18
• 分類號(hào): H04N7/18;G06T17/00;H04N21/6437;H04N21/472;H04N21/4782;H04N21/858;H04N21/4402
• 代理公司: 北京超凡宏宇專利代理事務(wù)所(特殊普通合伙) 11463
• 代理人: 董艷芳

1.一種三維視頻融合的方法，其特征在于，基于客戶端、實(shí)景三維視頻融合主機(jī)、云臺(tái)和監(jiān)控設(shè)備實(shí)現(xiàn)；所述方法包括：

所述客戶端向?qū)嵕叭S視頻融合主機(jī)發(fā)送WebSocket請(qǐng)求；

所述實(shí)景三維視頻融合主機(jī)根據(jù)所述WebSocket請(qǐng)求，獲取待融合監(jiān)控設(shè)備的設(shè)備信息和位置信息并發(fā)送至客戶端；

所述客戶端獲取用戶配置的監(jiān)控設(shè)備的實(shí)景三維視頻融合參數(shù)；實(shí)景三維視頻融合參數(shù)包括：監(jiān)控設(shè)備的角度、投影到設(shè)備上的尺寸大小和視角以及監(jiān)控設(shè)備的預(yù)設(shè)的預(yù)置位；將實(shí)景三維視頻融合參數(shù)發(fā)送至實(shí)景三維視頻融合主機(jī)；

所述實(shí)景三維視頻融合主機(jī)通過發(fā)起WebService服務(wù)請(qǐng)求將預(yù)設(shè)的預(yù)置位發(fā)送至監(jiān)控設(shè)備對(duì)應(yīng)的云臺(tái)；

所述云臺(tái)控制監(jiān)控設(shè)備旋轉(zhuǎn)到預(yù)設(shè)的預(yù)置位；

所述實(shí)景三維視頻融合主機(jī)接收客戶端瀏覽器發(fā)送的獲取監(jiān)控設(shè)備的視頻請(qǐng)求；基于RTSP服務(wù)向監(jiān)控設(shè)備請(qǐng)求獲取RTP碼流；

所述監(jiān)控設(shè)備將基于RTP承載的ES視頻流數(shù)據(jù)回傳到實(shí)景三維視頻融合主機(jī)中；

所述實(shí)景三維視頻融合主機(jī)獲取所述監(jiān)控設(shè)備的ES視頻流數(shù)據(jù)，并通過ONVIF協(xié)議將其轉(zhuǎn)換為FLV視頻流數(shù)據(jù)；將所述FLV視頻流數(shù)據(jù)與監(jiān)控設(shè)備預(yù)設(shè)的預(yù)置位所確定的實(shí)景三維模型進(jìn)行實(shí)時(shí)融合，將實(shí)景三維視頻融合模型發(fā)送至客戶端。

2.根據(jù)權(quán)利要求1所述的三維視頻融合的方法，其特征在于，所述方法還包括：

客戶端將融合后的實(shí)景三維視頻融合模型以可視化的方式在瀏覽器上展示，以及對(duì)所述實(shí)景三維視頻融合模型進(jìn)行放大或者縮小或者漫游操作。

3.根據(jù)權(quán)利要求1所述的三維視頻融合的方法，其特征在于，所述方法還包括：

所述云臺(tái)控制所述監(jiān)控設(shè)備轉(zhuǎn)動(dòng)，同時(shí)以實(shí)時(shí)的方式改變監(jiān)控設(shè)備視頻投影的位置和視角；

實(shí)景三維視頻融合主機(jī)獲取監(jiān)控設(shè)備發(fā)送的視頻數(shù)據(jù)，并將所述視頻數(shù)據(jù)與轉(zhuǎn)動(dòng)后的所述監(jiān)控設(shè)備的位置和視角確定的實(shí)景三維模型進(jìn)行融合后，將實(shí)景三維視頻融合模型發(fā)送至客戶端；

客戶端以可視化的方式在客戶端瀏覽器對(duì)實(shí)景三維視頻融合模型進(jìn)行展示。

4.一種三維視頻融合的裝置，其特征在于，所述裝置包括：客戶端、實(shí)景三維視頻融合主機(jī)、云臺(tái)和監(jiān)控設(shè)備；

所述客戶端，用于向?qū)嵕叭S視頻融合主機(jī)發(fā)送WebSocket請(qǐng)求，接收實(shí)景三維視頻融合主機(jī)發(fā)送的設(shè)備信息和位置信息，獲取用戶配置的監(jiān)控設(shè)備的實(shí)景三維視頻融合參數(shù)；實(shí)景三維視頻融合參數(shù)包括：監(jiān)控設(shè)備的角度、投影到設(shè)備上的尺寸大小和視角以及監(jiān)控設(shè)備的預(yù)置位；將實(shí)景三維視頻融合參數(shù)發(fā)送至實(shí)景三維視頻融合主機(jī)；

還用于向?qū)嵕叭S視頻融合主機(jī)發(fā)送獲取監(jiān)控設(shè)備的視頻請(qǐng)求，接收實(shí)景三維視頻融合主機(jī)發(fā)送的實(shí)景三維視頻融合模型；

所述實(shí)景三維視頻融合主機(jī)，用于根據(jù)所述WebSocket請(qǐng)求獲取待融合監(jiān)控設(shè)備的設(shè)備信息和位置信息并發(fā)送至客戶端；接收客戶端發(fā)送的實(shí)景三維視頻融合參數(shù)，通過發(fā)起WebService服務(wù)請(qǐng)求將預(yù)設(shè)的預(yù)置位發(fā)送至監(jiān)控設(shè)備對(duì)應(yīng)的云臺(tái)；接收客戶端瀏覽器發(fā)送的獲取監(jiān)控設(shè)備的視頻請(qǐng)求；基于RTSP服務(wù)向監(jiān)控設(shè)備請(qǐng)求獲取RTP碼流；接收所述監(jiān)控設(shè)備的ES視頻流數(shù)據(jù)，并通過ONVIF協(xié)議將其轉(zhuǎn)換為FLV視頻流數(shù)據(jù)，將所述FLV視頻流數(shù)據(jù)與監(jiān)控設(shè)備預(yù)設(shè)的預(yù)置位所確定的實(shí)景三維模型進(jìn)行實(shí)時(shí)融合，將實(shí)景三維視頻融合模型發(fā)送至客戶端；

所述云臺(tái)，用于控制監(jiān)控設(shè)備旋轉(zhuǎn)到預(yù)設(shè)的預(yù)置位；

所述監(jiān)控設(shè)備，用于將基于RTP承載的ES視頻流數(shù)據(jù)回傳到實(shí)景三維視頻融合主機(jī)中。