[發(fā)明專利]基于深度學(xué)習(xí)的自動化視頻摘要生成方法

有效

• 申請?zhí)枺?/td>: 202210337196.8
• 申請日: 2022-03-31
• 公開（公告）號: CN114710713B
• 公開（公告）日: 2023-08-01
• 發(fā)明（設(shè)計）人: 蘭雨晴;唐霆岳;余丹;邢智渙;王丹星;黃永琢
• 申請（專利權(quán)）人: 慧之安信息技術(shù)股份有限公司
• 主分類號: H04N21/8549
• 分類號: H04N21/8549;H04N21/84;H04N23/698;H04N23/67;H04N23/60;H04N23/90;H04N5/265
• 代理公司: 北京廣技專利代理事務(wù)所(特殊普通合伙) 11842
• 代理人: 張國香

本發(fā)明提供了基于深度學(xué)習(xí)的自動化視頻摘要生成方法，其對同一環(huán)境場合的不同方位區(qū)域進行同步拍攝，得到若干環(huán)境場合子視頻；對環(huán)境場合子視頻進行識別處理，得到關(guān)于環(huán)境場合子視頻出現(xiàn)的不同對象的語義標(biāo)簽，繼而在環(huán)境場合子視頻的預(yù)設(shè)畫面中形成視頻內(nèi)容摘要；最后按照每個環(huán)境場合子視頻的拍攝方位，將所有環(huán)境場合子視頻進行畫面拼接，從而得到相應(yīng)的環(huán)境全景場合視頻，這樣可對不同攝像頭拍攝的環(huán)境場合子視頻進行同步識別分析，對環(huán)境場合子視頻中的對象進行標(biāo)定，并生成相匹配的視頻內(nèi)容摘要，從而對視頻進行全面和準(zhǔn)確的篩選識別，提高對視頻識別處理的自動化和智能化程度。

技術(shù)領(lǐng)域

本發(fā)明涉及視頻數(shù)據(jù)處理的技術(shù)領(lǐng)域，特別涉及基于深度學(xué)習(xí)的自動化視頻摘要生成方法。

背景技術(shù)

目前，在公共場所通常會設(shè)置攝像監(jiān)控設(shè)備對場所進行實時影像采集，對對采集得到的監(jiān)控影像進行識別分析，從而對監(jiān)控影像中存在的異常的人員或情況進行甄別。現(xiàn)有技術(shù)基本是對監(jiān)控影像進行人工篩選識別，這種方式需要依靠大量人員對監(jiān)控影像進行逐幀的篩選識別，并且無法對監(jiān)控影像本身關(guān)于識別結(jié)果的匯總整合，這不僅無法對監(jiān)控影像進行全面和準(zhǔn)確的篩選識別，也無法對監(jiān)控影像進行深度加工處理，降低對監(jiān)控影像識別處理的自動化和智能化程度。

發(fā)明內(nèi)容

針對現(xiàn)有技術(shù)存在的缺陷，本發(fā)明提供基于深度學(xué)習(xí)的自動化視頻摘要生成方法，其對同一環(huán)境場合的不同方位區(qū)域進行同步拍攝，得到若干環(huán)境場合子視頻；對環(huán)境場合子視頻進行識別處理，得到關(guān)于環(huán)境場合子視頻出現(xiàn)的不同對象的語義標(biāo)簽，繼而在環(huán)境場合子視頻的預(yù)設(shè)畫面中形成視頻內(nèi)容摘要；最后按照每個環(huán)境場合子視頻的拍攝方位，將所有環(huán)境場合子視頻進行畫面拼接，從而得到相應(yīng)的環(huán)境全景場合視頻，這樣可對不同攝像頭拍攝的環(huán)境場合子視頻進行同步識別分析，對環(huán)境場合子視頻中的對象進行標(biāo)定，并生成相匹配的視頻內(nèi)容摘要，從而對視頻進行全面和準(zhǔn)確的篩選識別，提高對視頻識別處理的自動化和智能化程度。

本發(fā)明提供基于深度學(xué)習(xí)的自動化視頻摘要生成方法，其包括如下步驟：

步驟S1，通過若干攝像頭分別對同一環(huán)境場合的不同方位區(qū)域進行同步拍攝，從而采集得到若干環(huán)境場合子視頻；根據(jù)所述環(huán)境場合子視頻的拍攝方位，將所有環(huán)境場合子視頻分組保存至區(qū)塊鏈中；

步驟S2，根據(jù)來自視頻處理終端的視頻獲取請求，從所述區(qū)塊鏈中提取相應(yīng)的環(huán)境場合子視頻，并傳送到所述視頻處理終端；再對所述環(huán)境場合子視頻進行識別處理，從而得到關(guān)于所述環(huán)境場合子視頻出現(xiàn)的不同對象的語義標(biāo)簽；

步驟S3，根據(jù)所述語義標(biāo)簽，在所述環(huán)境場合子視頻的預(yù)設(shè)畫面中形成視頻內(nèi)容摘要；再對所述環(huán)境場合子視頻進行數(shù)據(jù)壓縮處理；

步驟S4，按照每個環(huán)境場合子視頻的拍攝方位，將所有環(huán)境場合子視頻進行畫面拼接，從而得到相應(yīng)的環(huán)境全景場合視頻。

進一步，在所述步驟S1中，通過若干攝像頭分別對同一環(huán)境場合的不同方位區(qū)域進行同步拍攝，從而采集得到若干環(huán)境場合子視頻具體包括：

將若干攝像頭的攝像方向分別對準(zhǔn)同一環(huán)境場合沿周向方向的不同方位區(qū)域，同時調(diào)整每個攝像頭的拍攝視場角，使得所有攝像頭的整體拍攝視場角能夠完全覆蓋所述環(huán)境場合的整體周向方位區(qū)域；

再指示所有攝像頭以相同焦距進行同步拍攝，從而采集得到若干環(huán)境場合子視頻。

進一步，在所述步驟S1中，根據(jù)所述環(huán)境場合子視頻的拍攝方位，將所有環(huán)境場合子視頻分組保存至區(qū)塊鏈中具體包括：

獲取每個攝像頭的拍攝方位信息，將所述拍攝方位信息作為視頻索引信息添加至相應(yīng)的環(huán)境場合子視頻中；再將所有環(huán)境場合子視頻分組保存至區(qū)塊鏈中。

進一步，在所述步驟S2中，根據(jù)來自視頻處理終端的視頻獲取請求，從所述區(qū)塊鏈中提取相應(yīng)的環(huán)境場合子視頻，并傳送到所述視頻處理終端具體包括：