[發(fā)明專利]視頻圖像處理方法、計算機可讀存儲介質(zhì)及終端

在審

• 申請?zhí)枺?/td>: 201711481177.8
• 申請日: 2017-12-29
• 公開（公告）號: CN108259984A
• 公開（公告）日: 2018-07-06
• 發(fā)明（設計）人: 危文;袁少龍;周宇濤;丘智鑒;顏樂駒;魏啟征;李敬
• 申請（專利權(quán)）人: 廣州市百果園信息技術(shù)有限公司
• 主分類號: H04N21/439
• 分類號: H04N21/439;H04N21/84;H04N21/431;H04N21/485;H04N21/81
• 代理公司: 北京市立方律師事務所 11330
• 代理人: 劉延喜

1.一種視頻圖像處理方法，其特征在于，包括如下步驟：

獲取欲在播放視頻中播放的音樂的音樂信號；

判斷是否預存有用于保存所述音樂的節(jié)拍點與音樂播放位置的對應關(guān)系的節(jié)拍點描述文件；若是，獲取所述節(jié)拍點描述文件；若否，根據(jù)所述音樂信號檢測出所述音樂的節(jié)拍點，根據(jù)所檢測出的節(jié)拍點與音樂播放位置的對應關(guān)系生成節(jié)拍點描述文件；

根據(jù)所述節(jié)拍點描述文件，確定在播放視頻中播放音樂時，在當前播放位置出現(xiàn)節(jié)拍點；

獲取所述節(jié)拍點對應的特效；根據(jù)所述特效對播放視頻中的圖像進行處理，獲得包含所述特效的視頻圖像。

2.根據(jù)權(quán)利要求1所述的視頻圖像處理方法，其特征在于，所述判斷是否預存有用于保存所述音樂的節(jié)拍點與音樂播放位置的對應關(guān)系的節(jié)拍點描述文件；若是，獲取所述節(jié)拍點描述文件；包括：

判斷本地文件中是否預存有節(jié)拍點描述文件，若是，從本地文件中獲取所述節(jié)拍點描述文件；或

判斷服務器是否預存有節(jié)拍點描述文件，若是，從服務器中下載所述節(jié)拍點描述文件；或

判斷本地文件中是否預存有節(jié)拍點描述文件，若是，從本地文件中獲取所述節(jié)拍點描述文件；若否，判斷服務器是否預存有節(jié)拍點描述文件，若是，從服務器中下載所述節(jié)拍點描述文件。

3.根據(jù)權(quán)利要求1所述的視頻圖像處理方法，其特征在于，所述獲取所述節(jié)拍點描述文件之后，還包括：

若所述節(jié)拍點描述文件為從服務器下載的節(jié)拍點描述文件，根據(jù)所述音樂信號檢測出所述音樂的節(jié)拍點，根據(jù)檢測出的節(jié)拍點對所述節(jié)拍點描述文件進行校對，在本地文件中保存所述校對后的節(jié)拍點描述文件。

4.根據(jù)權(quán)利要求1所述的視頻圖像處理方法，其特征在于，所述根據(jù)所述音樂信號檢測出所述音樂的節(jié)拍點，根據(jù)所檢測出的節(jié)拍點與音樂播放位置的對應關(guān)系生成節(jié)拍點描述文件之后，還包括：

將所述節(jié)拍點描述文件上傳到服務器。

5.根據(jù)權(quán)利要求1所述的視頻圖像處理方法，其特征在于，所述視頻為直播視頻；

所述獲取所述節(jié)拍點對應的特效之前，還包括：

獲取直播端的主播設置的所述音樂的節(jié)拍點對應的特效信息，將節(jié)拍點與音樂播放位置與特效信息的對應關(guān)系保存到所述節(jié)拍點描述文件中；生成包含特效信息的節(jié)拍點描述文件；

所述獲取所述節(jié)拍點對應的特效，包括：

根據(jù)所述包含特效信息的節(jié)拍點描述文件，獲取所述節(jié)拍點對應的特效。

6.根據(jù)權(quán)利要求5所述的視頻圖像處理方法，其特征在于，所述生成包含特效信息的節(jié)拍點描述文件之后，還包括：

向連麥的另一直播端發(fā)送所述音樂、所述包含特效信息的節(jié)拍點描述文件、所述節(jié)拍點對應的特效，以使另一直播端在播放所述音樂時顯示與本直播端相同特效。

7.根據(jù)權(quán)利要求1所述的視頻圖像處理方法，其特征在于，所述節(jié)拍點包括強節(jié)拍點和弱節(jié)拍點；

所述根據(jù)所述音樂信號檢測出所述音樂的節(jié)拍點，包括：

對所述音樂信號進行濾波，濾波后進行短時傅立葉變換，獲得頻譜；

根據(jù)所述頻譜，確定檢測點的能量變化值；

根據(jù)能量變化值，檢測出檢測點出現(xiàn)強節(jié)拍點或弱節(jié)拍點。

8.根據(jù)權(quán)利要求1所述的視頻圖像處理方法，其特征在于，所述節(jié)拍點包括強節(jié)拍點和弱節(jié)拍點；

所述根據(jù)所述音樂信號檢測出所述音樂的節(jié)拍點，包括：

對所述音樂信號進行加權(quán)處理，獲得加權(quán)后的音樂信號；

根據(jù)所述加權(quán)后的音樂信號的能量強度值，檢測出檢測點出現(xiàn)強節(jié)拍點或弱節(jié)拍點。

9.根據(jù)權(quán)利要求1所述的視頻圖像處理方法，其特征在于，所述節(jié)拍點包括強節(jié)拍點；

所述根據(jù)所述音樂信號檢測出所述音樂的節(jié)拍點，包括：

根據(jù)所述音樂信號的能量強度值獲得候選節(jié)拍點；

根據(jù)各候選節(jié)拍點，統(tǒng)計各相鄰兩個候選節(jié)拍點所在幀之間的時間間隔；

根據(jù)所述時間間隔，檢測出候選節(jié)拍點對應檢測點出現(xiàn)強節(jié)拍點。