[發(fā)明專利]三維視頻融合的方法、裝置及電子設(shè)備

有效

• 申請?zhí)枺?/td>: 202010057759.9
• 申請日: 2020-01-17
• 公開（公告）號: CN111225191B
• 公開（公告）日: 2022-07-29
• 發(fā)明（設(shè)計(jì)）人: 唐曙光;胡娟;黃玉軍
• 申請（專利權(quán)）人: 華雁智能科技（集團(tuán)）股份有限公司
• 主分類號: H04N7/18
• 分類號: H04N7/18;G06T17/00;H04N21/6437;H04N21/472;H04N21/4782;H04N21/858;H04N21/4402
• 代理公司: 北京超凡宏宇專利代理事務(wù)所(特殊普通合伙) 11463
• 代理人: 董艷芳

本發(fā)明提供了一種三維視頻融合的方法、裝置及電子設(shè)備，該方法應(yīng)用于實(shí)景三維視頻融合主機(jī)，包括：獲取待融合監(jiān)控設(shè)備的設(shè)備信息和位置信息；基于設(shè)備信息和位置信息，確定監(jiān)控設(shè)備的實(shí)景三維視頻融合參數(shù)；獲取監(jiān)控設(shè)備的實(shí)時(shí)視頻數(shù)據(jù)，并基于視頻融合參數(shù)，將監(jiān)控設(shè)備的實(shí)時(shí)視頻數(shù)據(jù)與監(jiān)控設(shè)備預(yù)設(shè)的預(yù)置位所確定的實(shí)景三維模型進(jìn)行實(shí)時(shí)融合。本發(fā)明的應(yīng)用可以提升變電站智能運(yùn)維、安全管控的水平，同時(shí)改善變電站的監(jiān)測預(yù)警能力。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)視覺技術(shù)領(lǐng)域，尤其是涉及一種三維視頻融合的方法、裝置及電子設(shè)備。

背景技術(shù)

隨著電網(wǎng)規(guī)模不斷擴(kuò)大，變電站的設(shè)備也隨之增加，同時(shí)，無人值守變電站也越來越多。為了保障電力生產(chǎn)安全運(yùn)行，需要對電力設(shè)備進(jìn)行實(shí)時(shí)狀態(tài)確認(rèn)，以便于及時(shí)發(fā)現(xiàn)和處理問題。在變電站的業(yè)務(wù)應(yīng)用場景中，實(shí)景三維建模技術(shù)與視頻智能融合在智能安防、智慧變電站等領(lǐng)域?qū)l(fā)揮著重要的不可替代的作用。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明的目的在于提供一種三維視頻融合的方法、裝置及電子設(shè)備，以提升變電站智能運(yùn)維、安全管控的水平，同時(shí)提高變電站的監(jiān)測預(yù)警能力。

第一方面，本發(fā)明實(shí)施例提供了一種三維視頻融合的方法，方法應(yīng)用于實(shí)景三維視頻融合主機(jī)；方法包括：

獲取待融合監(jiān)控設(shè)備的設(shè)備信息和位置信息；

基于設(shè)備信息和位置信息，確定監(jiān)控設(shè)備的實(shí)景三維視頻融合參數(shù)；

獲取監(jiān)控設(shè)備的實(shí)時(shí)視頻數(shù)據(jù)，并基于實(shí)景三維視頻融合參數(shù)，將實(shí)時(shí)視頻數(shù)據(jù)與監(jiān)控設(shè)備預(yù)設(shè)的預(yù)置位所確定的實(shí)景三維模型進(jìn)行實(shí)時(shí)融合。

在一種實(shí)施方式中，獲取監(jiān)控設(shè)備的實(shí)時(shí)視頻數(shù)據(jù)，并基于實(shí)景三維視頻融合參數(shù)，將實(shí)時(shí)視頻數(shù)據(jù)與監(jiān)控設(shè)備預(yù)設(shè)的預(yù)置位所確定的實(shí)景三維模型進(jìn)行實(shí)時(shí)融合的步驟，包括：

接收客戶端瀏覽器發(fā)送的獲取監(jiān)控設(shè)備的視頻請求；

根據(jù)視頻請求，獲取監(jiān)控設(shè)備的實(shí)時(shí)ES視頻流數(shù)據(jù)，并將其轉(zhuǎn)換為FLV視頻流數(shù)據(jù)；

基于實(shí)景三維視頻融合參數(shù)，將FLV視頻流數(shù)據(jù)與監(jiān)控設(shè)備預(yù)設(shè)的預(yù)置位所確定的實(shí)景三維模型進(jìn)行實(shí)時(shí)融合。

在一種實(shí)施方式中，接收客戶端瀏覽器發(fā)送的獲取監(jiān)控設(shè)備的視頻請求的步驟之前，還包括：

通過云臺控制監(jiān)控設(shè)備旋轉(zhuǎn)到預(yù)設(shè)的預(yù)置位。

在一種實(shí)施方式中，基于實(shí)景三維視頻融合參數(shù)，將FLV視頻流數(shù)據(jù)與監(jiān)控設(shè)備預(yù)設(shè)的預(yù)置位所確定的實(shí)景三維模型進(jìn)行實(shí)時(shí)融合的步驟之后，還包括：

將融合后的實(shí)景三維視頻融合模型，以可視化的方式在瀏覽器上展示，以及對實(shí)景三維視頻融合模型進(jìn)行放大或者縮小或者漫游操作。

在一種實(shí)施方式中，基于設(shè)備信息和位置信息，確定監(jiān)控設(shè)備的實(shí)景三維視頻融合參數(shù)的步驟，包括：

通過客戶端瀏覽器的用戶交互界面，基于設(shè)備信息和位置信息，采用投影算法可視化計(jì)算確定監(jiān)控設(shè)備的實(shí)景三維視頻融合參數(shù)。

在一種實(shí)施方式中，方法還包括：通過云臺控制監(jiān)控設(shè)備轉(zhuǎn)動，同時(shí)以實(shí)時(shí)的方式改變監(jiān)控設(shè)備視頻投影的位置和視角；

獲取轉(zhuǎn)動后的視頻數(shù)據(jù)，并將視頻數(shù)據(jù)與轉(zhuǎn)動后的監(jiān)控設(shè)備的位置和視角確定的實(shí)景三維模型進(jìn)行融合后，以可視化的方式在客戶端瀏覽器進(jìn)行展示。

在一種實(shí)施方式中，方法還包括：獲取監(jiān)控設(shè)備的ES視頻流數(shù)據(jù)，并通過ONVIF協(xié)議將其轉(zhuǎn)換為FLV視頻流數(shù)據(jù)；

將FLV視頻流數(shù)據(jù)通過WebSocket協(xié)議傳送至客戶端瀏覽器播放。

第二方面，本發(fā)明實(shí)施例提供了一種三維視頻融合的裝置，裝置應(yīng)用于實(shí)景三維視頻融合主機(jī)；裝置包括：