[發(fā)明專利]一種數(shù)據(jù)處理方法、裝置、電子設(shè)備和存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201911029239.0
• 申請日: 2019-10-28
• 公開（公告）號: CN110781835B
• 公開（公告）日: 2022-08-23
• 發(fā)明（設(shè)計）人: 靳聰;帖云;嚴(yán)文彩;李小兵;王南蘇;呂欣;宋雷雨;李亞杰
• 申請（專利權(quán)）人: 中國傳媒大學(xué);鄭州大學(xué)
• 主分類號: G06V20/40
• 分類號: G06V20/40;H04N21/44;H04N21/485;H04N21/81
• 代理公司: 北京超凡宏宇專利代理事務(wù)所(特殊普通合伙) 11463
• 代理人: 董艷芳

1.一種數(shù)據(jù)處理方法，其特征在于，包括：

獲取目標(biāo)視頻的關(guān)鍵幀的屬性特征向量；

根據(jù)該關(guān)鍵幀的屬性特征向量，得到該關(guān)鍵幀的特征向量，其中，該關(guān)鍵幀的屬性特征向量包括該關(guān)鍵幀的動態(tài)特征向量、該關(guān)鍵幀的靜態(tài)特征向量和/或該關(guān)鍵幀的光流特征向量；

所述根據(jù)該關(guān)鍵幀的屬性特征向量，得到該關(guān)鍵幀的特征向量，包括：

根據(jù)該關(guān)鍵幀的屬性特征向量，通過全連接層進(jìn)行向量拼接處理，得到該關(guān)鍵幀的特征向量；

將該關(guān)鍵幀的特征向量和用于表示上一關(guān)鍵幀的音符的待排序向量作為輸入?yún)?shù)輸入到解碼模型中，得到用于表示該關(guān)鍵幀的音符的待排序向量；

根據(jù)得到的所有的所述待排序向量，得到所述目標(biāo)視頻的背景音樂；

所述根據(jù)得到的所有的所述待排序向量，得到所述目標(biāo)視頻的背景音樂，包括：

利用預(yù)設(shè)的目標(biāo)音符向量集合對該待排序向量進(jìn)行判斷，以確定該待排序向量是否符合預(yù)設(shè)要求；

按照預(yù)設(shè)的音符排列規(guī)則對所有符合所述預(yù)設(shè)要求的待排序向量進(jìn)行排序，以將排序結(jié)果作為所述目標(biāo)視頻的背景音樂。

2.如權(quán)利要求1所述的方法，其特征在于，所述利用預(yù)設(shè)的目標(biāo)音符向量集合對該待排序向量進(jìn)行判斷，以確定該待排序向量是否符合預(yù)設(shè)要求，包括：

對該待排序向量和預(yù)設(shè)的目標(biāo)音符向量集合進(jìn)行均方差運(yùn)算，得到該待排序向量相對于所述目標(biāo)音符向量的損失函數(shù)值；

當(dāng)所述損失函數(shù)值位于預(yù)設(shè)范圍內(nèi)，則確定該待排序向量符合預(yù)設(shè)所述預(yù)設(shè)要求；

當(dāng)所述損失函數(shù)值未位于所述預(yù)設(shè)范圍內(nèi)，則確定該待排序向量不符合所述預(yù)設(shè)要求。

3.如權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

將所有不符合所述預(yù)設(shè)要求的待排序向量作為訓(xùn)練樣本對所述解碼模型進(jìn)行訓(xùn)練。

4.一種數(shù)據(jù)處理裝置，其特征在于，包括：

獲取單元，用于獲取目標(biāo)視頻的關(guān)鍵幀的屬性特征向量；

第一處理單元，用于根據(jù)該關(guān)鍵幀的屬性特征向量，得到該關(guān)鍵幀的特征向量，其中，該關(guān)鍵幀的屬性特征向量包括該關(guān)鍵幀的動態(tài)特征向量、該關(guān)鍵幀的靜態(tài)特征向量和/或該關(guān)鍵幀的光流特征向量；

所述第一處理單元的配置在用于根據(jù)該關(guān)鍵幀的屬性特征向量，得到該關(guān)鍵幀的特征向量時，包括：

根據(jù)該關(guān)鍵幀的屬性特征向量，通過全連接層進(jìn)行向量拼接處理，得到該關(guān)鍵幀的特征向量；

第二處理單元，用于將該關(guān)鍵幀的特征向量和用于表示上一關(guān)鍵幀的音符的待排序向量作為輸入?yún)?shù)輸入到解碼模型中，得到用于表示該關(guān)鍵幀的音符的待排序向量；

第三處理單元，用于根據(jù)得到的所有的所述待排序向量，得到所述目標(biāo)視頻的背景音樂；

所述第三處理單元的配置用于根據(jù)得到的所有的所述待排序向量，得到所述目標(biāo)視頻的背景音樂時，包括：

利用預(yù)設(shè)的目標(biāo)音符向量集合對該待排序向量進(jìn)行判斷，以確定該待排序向量是否符合預(yù)設(shè)要求；

按照預(yù)設(shè)的音符排列規(guī)則對所有符合所述預(yù)設(shè)要求的待排序向量進(jìn)行排序，以將排序結(jié)果作為所述目標(biāo)視頻的背景音樂。

5.一種電子設(shè)備，其特征在于，包括：處理器、存儲介質(zhì)和總線，所述存儲介質(zhì)存儲有所述處理器可執(zhí)行的機(jī)器可讀指令，當(dāng)電子設(shè)備運(yùn)行時，所述處理器與所述存儲介質(zhì)之間通過總線通信，所述處理器執(zhí)行所述機(jī)器可讀指令，以執(zhí)行如權(quán)利要求1至3中任一項所述的數(shù)據(jù)處理方法的步驟。

6.一種計算機(jī)可讀存儲介質(zhì)，其特征在于，所述計算機(jī)可讀存儲介質(zhì)上存儲有計算機(jī)程序，所述計算機(jī)程序被處理器運(yùn)行時執(zhí)行如權(quán)利要求1至3中任一項所述的數(shù)據(jù)處理方法的步驟。