[發明專利]一種基于內容預測的深度學習視頻解碼方法和裝置

有效

• 申請號: 201810048036.5
• 申請日: 2018-01-18
• 公開（公告）號: CN108289248B
• 公開（公告）日: 2020-05-15
• 發明（設計）人: 廖裕民;羅玉明
• 申請（專利權）人: 福州瑞芯微電子股份有限公司
• 主分類號: H04N21/4402
• 分類號: H04N21/4402;H04N21/488;H04N21/8547;H04N19/42;G06N3/04;G06N3/08
• 代理公司: 福州市景弘專利代理事務所(普通合伙) 35219
• 代理人: 林祥翔;徐劍兵

本發明提供了一種基于內容預測的深度學習視頻解碼方法和裝置，所述方法在接收到視頻流信息后，一邊將解析出的當前幀信息發送至顯示屏進行顯示，另一邊解析當前幀信息對應的下一關鍵幀信息作為預判幀信息，并將預判幀信息送往卷積神經網絡電路進行識別判斷，當檢測到預判幀信息與預設內容匹配時，一方面對當前幀信息添加提示信息；另一方面繼續提取出下一預判幀信息并將其與預設內容進行匹配，如此循環，直至送往送往卷積神經網絡電路進行識別判斷的預判幀信息不再與預設內容匹配，此時就可以根據當前預判幀的時間戳和其與當前幀時間戳的差值，確定需要跳幀的片段。上述方案可以對視頻播放內容提前進行預測判斷，有效滿足了用戶需求。

技術領域

本發明涉及計算機領域，特別涉及一種基于內容預測的深度學習視頻解碼方法和裝置。

背景技術

目前，視頻流數據在播放時，都是由視頻解碼芯片解碼后直接送往顯示器進行播放，對于視頻內容的檢測并沒有一種很好的檢測機制，這就導致當視頻內容存在著一些不堪入目(如色情或暴力)的畫面時，現有方法無法很好地進行及時預警，尤其是在觀眾中有未成年人時，這些畫面一旦播放，將會影響到他們的身心健康，給他們幼小的心靈留下童年陰影。

發明內容

為此，需要提供一種基于內容預測的深度學習視頻解碼的技術方案，導解決現有方法由于無法對視頻內容進行提前檢測預判，導致無法避免未成年人接觸視頻中的色情或暴力等內容的問題。

為實現上述目的，發明人提供了一種基于內容預測的深度學習視頻解碼裝置，所述裝置包括視頻控制單元、視頻解碼單元、幀緩存單元、卷積神經網絡電路、預設內容判定單元、提示信息添加單元、跳幀存儲單元、顯示控制單元和顯示單元；所述幀緩存單元包括當前幀緩存單元和預判幀緩存單元；所述視頻控制單元和視頻解碼單元連接，所述視頻解碼單元分別與當前幀緩存單元、預判幀緩存單元連接，所述當前幀緩存單元與顯示控制單元連接，所述顯示控制單元和顯示單元連接；所述預判幀緩存單元與卷積神經網絡電路連接，所述卷積神經網絡電路與預設內容判定單元連接，所述預設內容判定單元分別與視頻控制單元、提示信息添加單元、跳幀存儲單元連接，所述提示信息添加單元與當前幀緩存單元連接；

所述視頻控制單元用于接收視頻流信息，所述視頻流信息包括多幀圖像信息，所述多幀圖像信息包括當前幀信息和第一預判幀信息，所述第一預判幀信息為當前幀信息對應的下一關鍵幀信息；

所述視頻解碼單元用于對當前幀信息進行解析，將解析后的當前幀信息存儲至當前幀緩存單元中，以及對第一預判幀信息進行解析，將解析后的第一預判幀信息存儲至預判幀緩存單元中；

所述卷積神經網絡電路用于獲取預判幀緩存單元中的第一預判幀信息，判斷第一預判幀信息與預設內容是否匹配，若匹配則預設內容判定單元用于發送第一控制信號至提示信息添加單元，以及用于發送第二控制信號至視頻控制單元；

所述視頻控制單元用于接收第二控制信號，將第二預判幀信息發送至視頻解碼單元進行解析，視頻解碼單元用于將解析后的第二預判幀信息存儲至預判幀緩存單元中；所述第二預判幀信息為第一預判幀信息對應的下一關鍵幀信息；

所述卷積神經網絡電路用于獲取預判幀緩存單元中的第二預判幀信息，判斷第二預判幀信息與預設內容是否匹配，若匹配則預設內容判定單元用于發送第一控制信號至提示信息添加單元，以及用于再次發送第二控制信號至視頻控制單元；重復上述步驟，直至卷積神經網絡電路判定預判幀緩存單元中的預判幀信息與預設內容不匹配，記錄此時預判幀緩存單元中的預判幀信息對應的時間戳；所述預設內容判定單元用于將當前預判幀緩存單元中的預判幀信息對應的時間戳信息、以及該時間戳與首次被判定為與預設內容匹配的預判幀信息的時間戳之間的所有幀信息存儲至跳幀存儲單元中；

所述提示信息添加單元用于在接收到第一控制信號，獲取當前幀緩存單元中的當前幀信息，對當前幀信息添加提示信息，得到當前幀調整信息，并將當前幀調整信息回寫至當前幀緩存單元中；