[發明專利]音視頻匹配剪輯方法及裝置

有效

• 申請號: 201710701832.X
• 申請日: 2017-08-16
• 公開（公告）號: CN107483843B
• 公開（公告）日: 2019-11-15
• 發明（設計）人: 陳杰;徐瀅
• 申請（專利權）人: 成都品果科技有限公司
• 主分類號: H04N5/262
• 分類號: H04N5/262;H04N5/265;G06F16/73;G06F16/43;G06F16/41
• 代理公司: 11371 北京超凡志成知識產權代理事務所(普通合伙)
• 代理人: 蘇勝<國際申請>=<國際公布>=<進入國

1.一種音視頻匹配剪輯方法，其特征在于，所述方法包括：

獲取預先標注有多個切割點的目標音樂，所述目標音樂被所述切割點標記為多個音樂片段；

根據所述音樂片段的時長，將獲得過的至少一個目標視頻切分為多個視頻片段；

從多個視頻片段中選取預設個數的視頻片段作為目標視頻片段；

采用填充算法，根據所述目標視頻片段的權重及填充位置計算該目標視頻片段的填充價值，并根據各個目標視頻片段的填充價值，將所述目標視頻片段填入所述目標音樂相對應的切割點之間，使填入的目標視頻片段與音樂片段匹配組成整體價值最大的新的視頻文件；

其中，所述整體價值為各個目標視頻片段的填充價值之和，所述目標視頻片段的填充價值包括自身價值和離散價值；

計算所述自身價值的方式，包括：

分析各目標視頻片段的特征信息，所述特征信息包括人臉信息、多人場景信息、人臉中的微笑信息以及人為標記信息；

根據所述特征信息，賦予各視頻片段對應的權值作為該目標視頻片段的自身價值；

計算所述離散價值的方式，包括：

若存在至少兩個目標視頻片段在同一目標視頻中時，所述離散價值與所述目標視頻片段對應在目標視頻中的視頻片段與其他目標視頻片段在目標視頻中的視頻片段之間的距離相關聯；

若目標視頻片段不在同一目標視頻中時，所述離散價值為預設值。

2.根據權利要求1所述的方法，其特征在于，所述根據所述目標視頻片段的權重及填充位置計算該目標視頻片段的填充價值，并根據各個目標視頻片段的填充價值，將所述目標視頻片段填入所述目標音樂相對應的切割點之間的步驟，包括：

采用貪心近似算法，迭代計算各個視頻片段作為所述目標視頻片段的自身價值和離散價值，以得到多個對應的視頻文件的整體價值；

從多個整體價值中選取最大整體價值所對應的視頻文件作為新的視頻文件。

3.根據權利要求2所述的方法，其特征在于，填入所述目標音樂相對應的切割點之間的視頻片段在滿足離散性的條件下，按照權值遞減的順序填充。

4.根據權利要求1所述的方法，其特征在于，所述獲取預先標注有多個切割點的目標音樂的步驟之前，所述方法還包括：

從所述目標音樂中提取預設頻域的聲音振幅信息；

選取所述預設頻域中振幅激增的時間點作為所述切割點，使相鄰切割點之間的間隔時長超過預設時長。

5.根據權利要求1所述的方法，其特征在于，所述根據所述音樂片段的時長，將獲得過的至少一個目標視頻切分為多個視頻片段的步驟，包括：

選取所述音樂片段中時長最長的時段作為切割的視頻片段的時長。

6.根據權利要求1所述的方法，其特征在于，填入所述目標音樂的視頻片段數等于所述目標音樂的音樂片段數。

7.根據權利要求1所述的方法，其特征在于，所述將所述目標視頻片段填入所述目標音樂相對應的切割點之間的步驟，包括：

修正每段目標視頻片段的長度，以使目標視頻片段的長度等于所述目標音樂中對應的音樂片段的長度。

8.一種音視頻匹配剪輯裝置，其特征在于，包括：

獲取單元，用于獲取預先標注有多個切割點的目標音樂，所述目標音樂被所述切割點標記為多個音樂片段；

剪切單元，用于根據所述音樂片段的時長，將獲得過的至少一個目標視頻切分為多個視頻片段；

選取單元，用于從多個視頻片段中選取預設個數的視頻片段作為目標視頻片段；

視頻合成單元，用于采用填充算法，根據所述目標視頻片段的權重及填充位置計算該目標視頻片段的填充價值，并根據各個目標視頻片段的填充價值，將所述目標視頻片段填入所述目標音樂相對應的切割點之間，使填入的目標視頻片段與音樂片段匹配組成整體價值最大的新的視頻文件；

其中，所述整體價值為各個目標視頻片段的填充價值之和，所述目標視頻片段的填充價值包括自身價值和離散價值；

所述視頻合成單元計算所述自身價值的方式，包括：

分析各目標視頻片段的特征信息，所述特征信息包括人臉信息、多人場景信息、人臉中的微笑信息以及人為標記信息；

根據所述特征信息，賦予各視頻片段對應的權值作為該目標視頻片段的自身價值；

所述視頻合成單元計算所述離散價值的方式，包括：

若存在至少兩個目標視頻片段在同一目標視頻中時，所述離散價值與所述目標視頻片段對應在目標視頻中的視頻片段與其他目標視頻片段在目標視頻中的視頻片段之間的距離相關聯；

若目標視頻片段不在同一目標視頻中時，所述離散價值為預設值。