[發(fā)明專利]一種用于醫(yī)療遠(yuǎn)程探視系統(tǒng)的醫(yī)療視頻處理系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 202110087905.7
• 申請(qǐng)日: 2021-01-22
• 公開（公告）號(hào): CN113038071B
• 公開（公告）日: 2023-03-10
• 發(fā)明（設(shè)計(jì)）人: 王楚楚;田孝鳴;余小益
• 申請(qǐng)（專利權(quán)）人: 創(chuàng)業(yè)慧康科技股份有限公司
• 主分類號(hào): H04N7/18
• 分類號(hào): H04N7/18;H04N21/2187;H04N21/6437
• 代理公司: 杭州君度專利代理事務(wù)所(特殊普通合伙) 33240
• 代理人: 朱月芬

1.一種用于醫(yī)療遠(yuǎn)程探視系統(tǒng)的醫(yī)療視頻處理系統(tǒng)，其特征在于，包括視頻最優(yōu)處理模塊、視頻傳輸模塊、視頻處理模塊和視頻緩存模塊；

所述的視頻最優(yōu)處理模塊連接醫(yī)療遠(yuǎn)程探視系統(tǒng)的數(shù)據(jù)采集模塊，對(duì)醫(yī)療遠(yuǎn)程探視系統(tǒng)的數(shù)據(jù)采集模塊采集到的視頻段進(jìn)行視頻分段解析，檢測(cè)視頻段是否包含特殊信號(hào)并進(jìn)行相應(yīng)的標(biāo)記，然后將標(biāo)記后的視頻段發(fā)送至視頻緩存模塊；視頻緩存模塊根據(jù)視頻最優(yōu)處理模塊的標(biāo)記對(duì)標(biāo)記后的視頻段進(jìn)行分類，視頻傳輸模塊根據(jù)不同的優(yōu)先級(jí)將視頻段發(fā)送至視頻處理模塊進(jìn)行處理；所述的視頻處理模塊對(duì)接收到的視頻段進(jìn)行處理后，通過視頻緩存模塊進(jìn)行再次緩存；

所述的特殊信號(hào)根據(jù)視頻段采集環(huán)境預(yù)先進(jìn)行設(shè)定，并進(jìn)行重要性分級(jí)；

所述的視頻緩存模塊的緩存區(qū)域包括完整維度和優(yōu)先維度，當(dāng)接收到視頻最優(yōu)處理模塊發(fā)送的標(biāo)記后的視頻段，首先通過判斷視頻段是否存在標(biāo)記，當(dāng)不存在特殊標(biāo)記時(shí)，視頻段通過完整維度直接落入緩存區(qū)域，所述的完整維度將對(duì)視頻段的特殊信號(hào)進(jìn)行二次篩查；當(dāng)視頻段存在特殊標(biāo)記時(shí)，通過優(yōu)先維度根據(jù)不同的標(biāo)記對(duì)視頻段進(jìn)行整合歸類排序；相同的視頻段將均衡落入同一個(gè)緩存區(qū)域，以保證視頻的完整性，視頻緩存模塊將根據(jù)醫(yī)院的實(shí)際業(yè)務(wù)和標(biāo)記的特殊信號(hào)的重要性分級(jí)，進(jìn)行優(yōu)先度劃分，所述的醫(yī)院的實(shí)際業(yè)務(wù)包括預(yù)約業(yè)務(wù)、重點(diǎn)保護(hù)對(duì)象；

視頻緩存模塊將優(yōu)先緩存播放時(shí)間或者實(shí)時(shí)性質(zhì)高的視頻段，通過LFU清空策略，及時(shí)處理冷視頻段，以免緩存服務(wù)崩塌；

所述的視頻傳輸模塊基于RTSP流媒體協(xié)議；視頻傳輸模塊將根據(jù)當(dāng)前網(wǎng)速帶寬切換傳輸方案，所述的傳輸方案包括分塊傳輸以及斷點(diǎn)傳輸，其中斷點(diǎn)傳輸主要用于斷網(wǎng)的情況處理的，網(wǎng)絡(luò)帶寬在一定的警告閾值范圍內(nèi)，需要切換到斷點(diǎn)傳輸；

所述的分塊傳輸：對(duì)接收到的視頻段進(jìn)行分塊，并對(duì)每個(gè)視頻塊標(biāo)記序號(hào)tag即編號(hào)，以鏈表的形式進(jìn)行傳輸；

所述的斷點(diǎn)傳輸：針對(duì)斷網(wǎng)的情況，通過攔截器記錄出現(xiàn)斷網(wǎng)情況時(shí)視頻傳輸模塊的傳輸情況，通過本地服務(wù)器記錄斷網(wǎng)前傳輸未成功的視頻塊的編號(hào)，當(dāng)網(wǎng)絡(luò)恢復(fù)時(shí)，通過記錄的斷網(wǎng)前傳輸未成功的視頻塊的編號(hào)，繼續(xù)完成傳輸操作，以達(dá)到實(shí)時(shí)畫面?zhèn)鬏數(shù)男Ч?/p>

所述的視頻處理模塊，采用ffmpeg多媒體處理工具，根據(jù)用戶需求的不同對(duì)視頻傳輸模塊傳輸?shù)囊曨l段進(jìn)行不同處理；

分塊為根據(jù)預(yù)先設(shè)定的時(shí)間區(qū)間對(duì)視頻段進(jìn)行截取；

所述的不同處理包括通過視頻轉(zhuǎn)碼技術(shù)、SimHD、Sim4K或SimVR算法集，對(duì)接收到的視頻段的畫質(zhì)、分辨率進(jìn)行處理；

所述的視頻最優(yōu)處理模塊檢測(cè)視頻段中的特殊信號(hào)的方法包括：

The UT-interactiondataset的交互行為數(shù)據(jù)庫，包含人人交互的動(dòng)作，抽取了其中推的行為作為研究對(duì)象；

步驟（1）、事先錄入醫(yī)護(hù)人員以及患者的人像圖在樣本庫中，便于識(shí)別黑白名單，

步驟（2）、針對(duì)推的動(dòng)作，將與推相關(guān)的動(dòng)作，包括拍、敲，錄入樣本庫，被打上標(biāo)簽，成為神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)的樣本集，視頻最優(yōu)處理模塊處理視頻時(shí)，將視頻段進(jìn)行分塊，將塊的單位縮小至幀級(jí)別，針對(duì)每一幀圖片，與動(dòng)作樣本庫做對(duì)比學(xué)習(xí)；

步驟（3）、首先將人體部分進(jìn)行拆解，然后將鎖定主要觀察對(duì)象范圍區(qū)間，再將拆解出來的部位分解，輸入神經(jīng)網(wǎng)絡(luò)中進(jìn)行比對(duì)，根據(jù)神經(jīng)網(wǎng)路學(xué)習(xí)的能力找出相似的圖片，針對(duì)此圖片的標(biāo)簽，作為一個(gè)初步的判別，并對(duì)其進(jìn)行級(jí)別定義，所述的級(jí)別為R，包括R1-R9以及Type類型即推動(dòng)作的細(xì)分領(lǐng)域；

步驟（4）、重復(fù)進(jìn)行視頻幀的比對(duì)，直至視頻段處理完，針對(duì)視頻幀前后采用鏈表存儲(chǔ)幀信息，計(jì)算動(dòng)作頻率F，針對(duì)相同的標(biāo)記的以此類推到完整的視頻段處理；

步驟（5）、通過級(jí)別、Type類型和動(dòng)作頻率F劃分優(yōu)先級(jí)，進(jìn)行神經(jīng)網(wǎng)絡(luò)模型參數(shù)的調(diào)整，根據(jù)神經(jīng)網(wǎng)絡(luò)模型進(jìn)行視頻段解析，判斷視頻段中是否存在特殊信號(hào)，并進(jìn)行標(biāo)記。