[發(fā)明專利]一種分布式視頻存儲(chǔ)的文件生命周期管理方法及系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 202111437371.2
• 申請(qǐng)日: 2021-11-30
• 公開(kāi)（公告）號(hào): CN113836094B
• 公開(kāi)（公告）日: 2022-03-01
• 發(fā)明（設(shè)計(jì)）人: 王大川;劉增睿;葉明錦
• 申請(qǐng)（專利權(quán)）人: 成都同步新創(chuàng)科技股份有限公司
• 主分類號(hào): G06F16/16
• 分類號(hào): G06F16/16;G06F16/182;G06F16/51
• 代理公司: 成都厚為專利代理事務(wù)所(普通合伙) 51255
• 代理人: 劉應(yīng)遷

本發(fā)明涉及一種分布式視頻存儲(chǔ)的文件生命周期管理方法及系統(tǒng)，包括錄像文件存儲(chǔ)步驟、錄像文件索引信息及錄像文件查詢獲取步驟和錄像文件索引信息及錄像文件清理步驟。本發(fā)明對(duì)生命周期結(jié)束的海量音視頻文件進(jìn)行分布式集群，動(dòng)態(tài)負(fù)載在不影響整體集群性能的情況下自動(dòng)刪除。海量的音視頻文件信息的生成，對(duì)存儲(chǔ)文件信息的數(shù)據(jù)庫(kù)，進(jìn)行分庫(kù)分表，異步負(fù)載均衡后存儲(chǔ)到數(shù)據(jù)庫(kù)，實(shí)現(xiàn)海量文件信息的存儲(chǔ)，查詢、刪除等。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)存儲(chǔ)技術(shù)領(lǐng)域，尤其涉及一種分布式視頻存儲(chǔ)的文件生命周期管理方法及系統(tǒng)。

背景技術(shù)

在安防和環(huán)境監(jiān)控項(xiàng)目中，視頻監(jiān)控需求越來(lái)越廣泛，呈現(xiàn)從行業(yè)用戶想普通民眾普及的趨勢(shì)；監(jiān)控錄像存儲(chǔ)作為事件回溯的一種方式，不管是普通用戶還是警務(wù)人員對(duì)其的需求都是比較急切的。

現(xiàn)有技術(shù)中一般是通過(guò)網(wǎng)絡(luò)攝像機(jī)實(shí)時(shí)采集音視頻數(shù)據(jù)，然后將數(shù)據(jù)緩存到本地，由本地錄像機(jī)拉取實(shí)時(shí)流數(shù)據(jù)，然后服務(wù)器主動(dòng)拉取錄像機(jī)實(shí)時(shí)流數(shù)據(jù)存儲(chǔ)到云端；通過(guò)本地錄像機(jī)和云端服務(wù)器進(jìn)行數(shù)據(jù)同步來(lái)保證錄像的安全；然而現(xiàn)有技術(shù)中，當(dāng)攝像機(jī)或者錄像機(jī)首次使用時(shí)需要復(fù)雜的配置來(lái)關(guān)聯(lián)錄像機(jī)和攝像機(jī)，這需要一定的專業(yè)知識(shí)且操作也不友好；將本地錄像上傳到云端服務(wù)器需要消耗大量的公網(wǎng)流量；而且現(xiàn)有技術(shù)中海量的攝像機(jī)設(shè)備接入后，海量的視頻文件及文件信息存儲(chǔ)、查詢和刪除等，生命周期管理困難，難以有效提高分布式存儲(chǔ)利用率，也容易造成錄像新查詢速度響應(yīng)慢等問(wèn)題。

發(fā)明內(nèi)容

本發(fā)明的目的在于克服現(xiàn)有技術(shù)的缺點(diǎn)，提供了一種分布式視頻存儲(chǔ)的文件生命周期管理方法及系統(tǒng)，克服了現(xiàn)有技術(shù)中存在的問(wèn)題。

本發(fā)明的目的通過(guò)以下技術(shù)方案來(lái)實(shí)現(xiàn)：一種分布式視頻存儲(chǔ)的文件生命周期管理方法，所述文件生命周期管理方法包括：

錄像文件存儲(chǔ)步驟：將獲取的錄像文件根據(jù)存儲(chǔ)服務(wù)生成錄像文件信息和錄像文件索引信息；將錄像文件索引信息和錄像文件按照設(shè)定規(guī)則寫(xiě)入到高性能數(shù)據(jù)庫(kù)集群并對(duì)數(shù)據(jù)庫(kù)進(jìn)行優(yōu)化；

錄像文件索引信息及錄像文件查詢獲取步驟：根據(jù)查詢請(qǐng)求信息獲取錄像文件索引信息定位錄像文件信息，分離出不同的錄像片段并生成錄像索引文件進(jìn)行存儲(chǔ)后生成錄像索引文件獲取地址；

錄像文件索引信息及錄像文件清理步驟：當(dāng)獲取文件索引信息為空時(shí)刪除其文件索引信息表，解析錄像文件存儲(chǔ)對(duì)應(yīng)存儲(chǔ)集群下發(fā)刪除任務(wù)刪除分布式存儲(chǔ)集群存儲(chǔ)的錄像文件以及文件索引記錄。

所述將獲取的錄像文件根據(jù)存儲(chǔ)服務(wù)生成錄像文件信息和錄像文件索引信息包括：

通過(guò)存儲(chǔ)寫(xiě)入?yún)f(xié)議將錄像文件存儲(chǔ)到分布式存儲(chǔ)介質(zhì)集群中；

以設(shè)定時(shí)間間隔判斷攝像機(jī)設(shè)備是否第一次存儲(chǔ)錄像，如果是第一次則生成錄像文件索引信息并將生成的錄像文件索引信息推送到高性能數(shù)據(jù)庫(kù)集群；

按照設(shè)定規(guī)則生成錄像文件，并生成對(duì)應(yīng)為錄像文件信息，將錄像文件信息推送到高性能數(shù)據(jù)庫(kù)集群。

所述將錄像文件索引信息和錄像文件按照設(shè)定規(guī)則寫(xiě)入到高性能數(shù)據(jù)庫(kù)集群并對(duì)數(shù)據(jù)庫(kù)進(jìn)行優(yōu)化包括：

錄像文件索引信息保存：對(duì)攝像機(jī)設(shè)備id進(jìn)行離散分庫(kù)，按天和錄像存儲(chǔ)周期分表，記錄每臺(tái)攝像機(jī)設(shè)備的id，對(duì)應(yīng)的文件信息數(shù)據(jù)庫(kù)信息；

錄像文件信息保存：通過(guò)離散算法將每臺(tái)攝像機(jī)的錄像信息，離散到對(duì)應(yīng)的數(shù)據(jù)中，分散數(shù)據(jù)庫(kù)單點(diǎn)的訪問(wèn)量；并通過(guò)錄像的生命周期天數(shù)，按天建立數(shù)據(jù)庫(kù)表。

所述錄像文件索引信息及錄像文件查詢獲取步驟包括錄像文件索引信息查詢獲取步驟和錄像文件查詢獲取步驟；所述錄像文件索引信息查詢獲取步驟包括：

解析錄像查詢請(qǐng)求信息從索引信息數(shù)據(jù)庫(kù)中獲取攝像機(jī)的錄像文件索引信息；