[發(fā)明專利]基于測控航跡信息的流媒體視頻編目方法、檢索方法及裝置

有效

• 申請?zhí)枺?/td>: 201711151363.5
• 申請日: 2017-11-18
• 公開（公告）號: CN108419112B
• 公開（公告）日: 2020-07-24
• 發(fā)明（設(shè)計(jì)）人: 楊猛;聶志彪;李尚榮;成功
• 申請（專利權(quán)）人: 天宇經(jīng)緯（北京）科技有限公司
• 主分類號: H04N21/426
• 分類號: H04N21/426;H04N21/435;H04N21/44;H04N21/4402;H04N21/4408;H04N21/8358;G06F16/78
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發(fā)明涉及一種基于測控航跡信息的流媒體視頻編目方法、基于測控航跡信息和傳感器載荷姿態(tài)信息的流媒體視頻快速檢索方法，相應(yīng)的裝置以及計(jì)算機(jī)存儲介質(zhì)。其中基于測控航跡信息和傳感器載荷姿態(tài)信息的流媒體視頻編目方法包括：提取無人機(jī)原始測控航跡數(shù)據(jù)；提取通過無人機(jī)航拍得到的原始流媒體視頻數(shù)據(jù)；基于測控航跡信息和傳感器載荷姿態(tài)信息對所述符流媒體視頻進(jìn)行編目。本發(fā)明將無人機(jī)的遙感測控的數(shù)據(jù)信息與流媒體視頻相結(jié)合，能夠?qū)⒘髅襟w中的地點(diǎn)、場景的地理信息和傳感器姿態(tài)信息同步反映給用戶，也能使得用戶直觀地看到其所感興趣地區(qū)的動態(tài)影像，滿足無人機(jī)視頻編目的自動化和人機(jī)交互需求。

技術(shù)領(lǐng)域

本發(fā)明涉及一種基于測控航跡信息的流媒體視頻編目方法、基于測控航跡信息的流媒體視頻快速檢索方法，相應(yīng)的裝置以及計(jì)算機(jī)存儲介質(zhì)。

背景技術(shù)

目前，現(xiàn)有的地理信息管理系統(tǒng)管理的大都是一些基于衛(wèi)星拍攝得到的靜態(tài)圖片數(shù)據(jù)，如果想要了解某地的地貌詳情只能通過這些圖片和互聯(lián)網(wǎng)搜索引擎給出的文字描述，無法全面、直觀和動態(tài)地了解該地的地貌詳情。現(xiàn)有的百度地圖、高德地圖等地圖引擎雖然也存儲了一些基于地理信息的流媒體數(shù)據(jù)，如點(diǎn)擊某個(gè)城市會彈出該區(qū)域最近的圖片數(shù)據(jù)，但單純的圖片數(shù)據(jù)不能滿足人們生活、研究的需要。目前，基于移動載體的視頻拍攝應(yīng)用越來越多，典型的如無人機(jī)航拍等。無人機(jī)航拍獲取的流媒體視頻雖然具有拍攝點(diǎn)多且跨度大、覆蓋范圍廣、拍攝場景和移動路徑變化快等特點(diǎn)，然而，通常無人機(jī)航拍獲取的流媒體視頻和無人機(jī)的姿態(tài)、航跡信息是相互獨(dú)立的，二者之間缺乏關(guān)聯(lián)，這導(dǎo)致需要依靠人眼對流媒體視頻中的地點(diǎn)和場景進(jìn)行識別。這往往不夠精確，也為后續(xù)的數(shù)據(jù)分析、檢索帶來了不便。

發(fā)明內(nèi)容

本發(fā)明提供了一種基于地理信息的流媒體視頻編目方法，將無人機(jī)的遙感測控的數(shù)據(jù)信息與流媒體視頻相結(jié)合，能夠?qū)⒘髅襟w中的地點(diǎn)和場景的地理信息同步反映給用戶，也能使得用戶直觀地看到其所感興趣地區(qū)的動態(tài)影像，滿足無人機(jī)視頻編目的自動化和人機(jī)交互需求。

本發(fā)明提供的基于地理信息的流媒體視頻編目方法，包括以下步驟：

提取無人機(jī)原始測控航跡數(shù)據(jù)和傳感器載荷姿態(tài)信息，對所述無人機(jī)原始測控航跡數(shù)據(jù)和傳感器載荷姿態(tài)信息的頻率進(jìn)行判斷，若頻率過高，則進(jìn)行降頻處理，得到無人機(jī)測控航跡數(shù)據(jù)；

提取通過無人機(jī)航拍得到的原始流媒體視頻數(shù)據(jù)，對所述原始流媒體視頻數(shù)據(jù)進(jìn)行判斷，若所述原始流媒體視頻數(shù)據(jù)不滿足完整性和/或連續(xù)性要求，則進(jìn)行拼接處理和/或補(bǔ)幀處理，得到流媒體視頻數(shù)據(jù)；

基于所述無人機(jī)測控航跡數(shù)據(jù)對所述流媒體視頻進(jìn)行編目，其中基于所述無人機(jī)測控航跡數(shù)據(jù)對所述流媒體視頻進(jìn)行編目具體包括：

對所述無人機(jī)測控航跡數(shù)據(jù)進(jìn)行編目，生成測控航跡信息；

對所述流媒體視頻數(shù)據(jù)進(jìn)行編目，生成流媒體視頻；

將所述測控航跡信息與所述流媒體視頻關(guān)聯(lián)后進(jìn)行編目，生成測控航跡信息與流媒體視頻關(guān)系數(shù)據(jù)，從而實(shí)現(xiàn)基于測控航跡信息的流媒體視頻編目。

優(yōu)選地，補(bǔ)幀處理的步驟具體包括：

對所述原始流媒體視頻數(shù)據(jù)按照時(shí)間分塊，得到若干個(gè)視頻數(shù)據(jù)塊；

對所述視頻數(shù)據(jù)塊中的每一個(gè)的數(shù)據(jù)量大小進(jìn)行判斷，若該塊的數(shù)據(jù)量小于閾值，則初步確定該視頻數(shù)據(jù)塊存在丟幀情況；

利用二分法在該視頻數(shù)據(jù)塊中進(jìn)行查找，確定具體丟幀位置；

在該丟幀位置進(jìn)行補(bǔ)幀操作。

優(yōu)選地，將所述測控航跡信息與所述流媒體視頻關(guān)聯(lián)后進(jìn)行編目，形成測控航跡信息與流媒體視頻關(guān)系數(shù)據(jù)的步驟具體包括：