[發(fā)明專(zhuān)利]一種醫(yī)療遠(yuǎn)程控制實(shí)現(xiàn)視頻融合的方法

有效

• 申請(qǐng)?zhí)枺?/td>: 202010174550.0
• 申請(qǐng)日: 2020-03-13
• 公開(kāi)（公告）號(hào): CN111294568B
• 公開(kāi)（公告）日: 2020-12-04
• 發(fā)明（設(shè)計(jì)）人: 魯通;翟偉明
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京維卓致遠(yuǎn)醫(yī)療科技發(fā)展有限責(zé)任公司
• 主分類(lèi)號(hào): H04N7/18
• 分類(lèi)號(hào): H04N7/18;H04N21/472;H04N21/44;H04N21/43
• 代理公司: 北京精金石知識(shí)產(chǎn)權(quán)代理有限公司 11470
• 代理人: 張黎

1.一種醫(yī)療遠(yuǎn)程控制實(shí)現(xiàn)視頻融合的方法，其特征在于：包括現(xiàn)場(chǎng)端視頻采集設(shè)備、現(xiàn)場(chǎng)端音頻輸入設(shè)備、現(xiàn)場(chǎng)端音頻輸出設(shè)備、現(xiàn)場(chǎng)端視頻融合顯示設(shè)備、遠(yuǎn)程端視頻采集設(shè)備、遠(yuǎn)程端音頻輸入設(shè)備、遠(yuǎn)程端音頻輸出設(shè)備、遠(yuǎn)程端視頻融合顯示設(shè)備和服務(wù)器；

所述現(xiàn)場(chǎng)端視頻融合顯示設(shè)備分別和所述現(xiàn)場(chǎng)端視頻采集設(shè)備、所述現(xiàn)場(chǎng)端音頻輸入設(shè)備、所述現(xiàn)場(chǎng)端音頻輸出設(shè)備通訊連接，所述現(xiàn)場(chǎng)端視頻融合顯示設(shè)備和所述服務(wù)器通訊連接；

所述遠(yuǎn)程端視頻融合顯示設(shè)備分別和所述遠(yuǎn)程端視頻采集設(shè)備、所述遠(yuǎn)程端音頻輸入設(shè)備、所述遠(yuǎn)程端音頻輸出設(shè)備通訊連接，所述遠(yuǎn)程端視頻融合顯示設(shè)備和所述服務(wù)器通訊連接；

所述現(xiàn)場(chǎng)端視頻采集設(shè)備用于采集現(xiàn)場(chǎng)端視頻畫(huà)面；

所述現(xiàn)場(chǎng)端音頻輸入設(shè)備用于采集現(xiàn)場(chǎng)操作人員的音頻；

所述現(xiàn)場(chǎng)端音頻輸出設(shè)備用于播放遠(yuǎn)程端輸入的音頻；

所述現(xiàn)場(chǎng)端視頻融合顯示設(shè)備包括現(xiàn)場(chǎng)端操作系統(tǒng)，所述現(xiàn)場(chǎng)端視頻融合顯示設(shè)備用于顯示現(xiàn)場(chǎng)端、遠(yuǎn)程端和雙方融合的視頻畫(huà)面；

所述遠(yuǎn)程端視頻采集設(shè)備用于采集遠(yuǎn)程端視頻畫(huà)面；

所述遠(yuǎn)程端音頻輸入設(shè)備用于采集遠(yuǎn)程操作人員的音頻；

所述遠(yuǎn)程端音頻輸出設(shè)備用于播放現(xiàn)場(chǎng)端輸入的音頻；

所述遠(yuǎn)程端視頻融合顯示設(shè)備包括遠(yuǎn)程端操作系統(tǒng)，所述遠(yuǎn)程端視頻融合顯示設(shè)備用于顯示遠(yuǎn)程端、現(xiàn)場(chǎng)端和雙方融合的視頻畫(huà)面；

所述現(xiàn)場(chǎng)端操作系統(tǒng)和所述遠(yuǎn)程端操作系統(tǒng)分別包括融合模塊，所述融合模塊用于融合現(xiàn)場(chǎng)端和遠(yuǎn)程端的視頻；

所述現(xiàn)場(chǎng)端操作系統(tǒng)和所述遠(yuǎn)程端操作系統(tǒng)分別包括虛擬工具模塊，所述虛擬工具模塊用于在雙方顯示的視頻畫(huà)面中顯示一個(gè)雙方都可操作且同步顯示的虛擬工具，所述虛擬工具為虛擬畫(huà)筆或虛擬箭頭；

所述現(xiàn)場(chǎng)端視頻采集設(shè)備和所述遠(yuǎn)程端視頻采集設(shè)備為高清視頻采集設(shè)備，所述高清視頻采集設(shè)備為高清攝像頭，所述現(xiàn)場(chǎng)端音頻輸入設(shè)備和所述遠(yuǎn)程端音頻輸入設(shè)備為無(wú)線麥克風(fēng)或有線麥克風(fēng)，所述現(xiàn)場(chǎng)端音頻輸出設(shè)備和所述遠(yuǎn)程端音頻輸出設(shè)備為多媒體智能音箱；

還包括現(xiàn)場(chǎng)端可移動(dòng)臺(tái)車(chē)和遠(yuǎn)程端可移動(dòng)臺(tái)車(chē)，所述現(xiàn)場(chǎng)端視頻采集設(shè)備、所述現(xiàn)場(chǎng)端音頻輸入設(shè)備、所述現(xiàn)場(chǎng)端音頻輸出設(shè)備和所述現(xiàn)場(chǎng)端視頻融合顯示設(shè)備安裝于所述現(xiàn)場(chǎng)端可移動(dòng)臺(tái)車(chē)，所述遠(yuǎn)程端視頻采集設(shè)備、所述遠(yuǎn)程端音頻輸入設(shè)備、所述遠(yuǎn)程端音頻輸出設(shè)備和所述遠(yuǎn)程端視頻融合顯示設(shè)備安裝于所述遠(yuǎn)程端可移動(dòng)臺(tái)車(chē)；

所述現(xiàn)場(chǎng)端操作系統(tǒng)和所述遠(yuǎn)程端操作系統(tǒng)分別包括畫(huà)面凍結(jié)模塊，所述畫(huà)面凍結(jié)模塊用于根據(jù)現(xiàn)場(chǎng)端人員或遠(yuǎn)程端人員的操作，同步凍結(jié)現(xiàn)場(chǎng)端視頻融合顯示設(shè)備和遠(yuǎn)程端視頻融合顯示設(shè)備顯示的視頻畫(huà)面；

所述現(xiàn)場(chǎng)端視頻融合顯示設(shè)備分別和所述現(xiàn)場(chǎng)端視頻采集設(shè)備、所述現(xiàn)場(chǎng)端音頻輸入設(shè)備與所述現(xiàn)場(chǎng)端音頻輸出設(shè)備電連接，所述遠(yuǎn)程端視頻融合顯示設(shè)備分別和所述遠(yuǎn)程端視頻采集設(shè)備、所述遠(yuǎn)程端音頻輸入設(shè)備與所述遠(yuǎn)程端音頻輸出設(shè)備電連接；

所述現(xiàn)場(chǎng)端視頻融合顯示設(shè)備和所述服務(wù)器通過(guò)內(nèi)部局域網(wǎng)或互聯(lián)網(wǎng)連接，所述遠(yuǎn)程端視頻融合顯示設(shè)備和所述服務(wù)器通過(guò)內(nèi)部局域網(wǎng)或互聯(lián)網(wǎng)連接；

包括以下步驟：

S1.將現(xiàn)場(chǎng)端視頻采集設(shè)備、現(xiàn)場(chǎng)端音頻輸入設(shè)備、現(xiàn)場(chǎng)端音頻輸出設(shè)備和現(xiàn)場(chǎng)端視頻融合顯示設(shè)備安裝于現(xiàn)場(chǎng)端可移動(dòng)臺(tái)車(chē)，將遠(yuǎn)程端視頻采集設(shè)備、遠(yuǎn)程端音頻輸入設(shè)備、遠(yuǎn)程端音頻輸出設(shè)備和遠(yuǎn)程端視頻融合顯示設(shè)備安裝于遠(yuǎn)程端可移動(dòng)臺(tái)車(chē)，將現(xiàn)場(chǎng)端視頻采集設(shè)備、現(xiàn)場(chǎng)端音頻輸入設(shè)備和現(xiàn)場(chǎng)端音頻輸出設(shè)備與現(xiàn)場(chǎng)端視頻融合顯示設(shè)備連接，將遠(yuǎn)程端視頻采集設(shè)備、遠(yuǎn)程端音頻輸入設(shè)備和遠(yuǎn)程端音頻輸出設(shè)備與遠(yuǎn)程端視頻融合顯示設(shè)備連接，將現(xiàn)場(chǎng)端視頻融合顯示設(shè)備和遠(yuǎn)程端視頻融合顯示設(shè)備分別與服務(wù)器通過(guò)網(wǎng)絡(luò)連接；

S2.登錄現(xiàn)場(chǎng)端視頻融合顯示設(shè)備的現(xiàn)場(chǎng)端操作系統(tǒng)，登錄遠(yuǎn)程端視頻融合顯示設(shè)備的遠(yuǎn)程端操作系統(tǒng)，在遠(yuǎn)程端操作系統(tǒng)創(chuàng)建視頻房間，經(jīng)過(guò)服務(wù)器中轉(zhuǎn)，發(fā)送建立音視頻連接通道的邀請(qǐng)，邀請(qǐng)現(xiàn)場(chǎng)端進(jìn)入視頻房間，現(xiàn)場(chǎng)端操作系統(tǒng)接受邀請(qǐng)，經(jīng)過(guò)服務(wù)器中轉(zhuǎn)，成功與遠(yuǎn)程端操作系統(tǒng)建立音視頻連接，并進(jìn)入視頻房間，遠(yuǎn)程端視頻房間與現(xiàn)場(chǎng)端視頻房間建立直接連接；

S3.現(xiàn)場(chǎng)端視頻采集設(shè)備采集現(xiàn)場(chǎng)端視頻畫(huà)面并將現(xiàn)場(chǎng)端視頻畫(huà)面輸出至現(xiàn)場(chǎng)端視頻融合顯示設(shè)備，現(xiàn)場(chǎng)端視頻融合顯示設(shè)備將現(xiàn)場(chǎng)端視頻畫(huà)面?zhèn)鬏斨吝h(yuǎn)程端視頻融合顯示設(shè)備，現(xiàn)場(chǎng)端音頻輸入設(shè)備采集現(xiàn)場(chǎng)操作人員的音頻，并將現(xiàn)場(chǎng)操作人員的音頻輸出至現(xiàn)場(chǎng)端視頻融合顯示設(shè)備，現(xiàn)場(chǎng)端視頻融合顯示設(shè)備將現(xiàn)場(chǎng)操作人員的音頻傳輸至遠(yuǎn)程端視頻融合顯示設(shè)備，現(xiàn)場(chǎng)端音頻輸出設(shè)備播放遠(yuǎn)程端輸入的音頻；

遠(yuǎn)程端視頻采集設(shè)備采集遠(yuǎn)程端視頻畫(huà)面并將遠(yuǎn)程端視頻畫(huà)面輸出至遠(yuǎn)程端視頻融合顯示設(shè)備，遠(yuǎn)程端視頻融合顯示設(shè)備將遠(yuǎn)程端視頻畫(huà)面?zhèn)鬏斨连F(xiàn)場(chǎng)端視頻融合顯示設(shè)備，遠(yuǎn)程端音頻輸入設(shè)備采集遠(yuǎn)程操作人員的音頻，并將遠(yuǎn)程操作人員的音頻輸出至遠(yuǎn)程端視頻融合顯示設(shè)備，遠(yuǎn)程端視頻融合顯示設(shè)備將遠(yuǎn)程操作人員的音頻傳輸至現(xiàn)場(chǎng)端視頻融合顯示設(shè)備，遠(yuǎn)程端音頻輸出設(shè)備播放現(xiàn)場(chǎng)端輸入的音頻；

S4.現(xiàn)場(chǎng)端操作系統(tǒng)中的融合模塊融合現(xiàn)場(chǎng)端視頻畫(huà)面和遠(yuǎn)程端視頻畫(huà)面，并顯示于現(xiàn)場(chǎng)端視頻融合顯示設(shè)備；遠(yuǎn)程端操作系統(tǒng)中的融合模塊融合現(xiàn)場(chǎng)端視頻畫(huà)面和遠(yuǎn)程端視頻畫(huà)面，并顯示于遠(yuǎn)程端視頻融合顯示設(shè)備；

S5.現(xiàn)場(chǎng)端或遠(yuǎn)程端的操作人員可以使用虛擬工具或畫(huà)面凍結(jié)功能進(jìn)行視頻畫(huà)面編輯；

其中，步驟S4中的融合視頻采用正片疊底融合方法。

2.根據(jù)權(quán)利要求1所述的一種醫(yī)療遠(yuǎn)程控制實(shí)現(xiàn)視頻融合的方法，其特征在于：所述正片疊底融合方法為對(duì)現(xiàn)場(chǎng)端視頻A和遠(yuǎn)程端視頻B采用正片疊底融合，A為上層視頻源，B為下層視頻源,取A中的一個(gè)像素點(diǎn)vector4 a，取B中的一個(gè)像素點(diǎn)vector4 b；

用a乘以b，取線性混合的值，得到新的像素點(diǎn)R的值，將像素點(diǎn)R繪制到屏幕上，

R＝vector4(mix(a.rgb,a.rgb*b.rgb,b.alpha),a.alpha)。