[發明專利]前景識別方法、裝置、電子設備及存儲介質

有效

• 申請號: 201811520020.6
• 申請日: 2018-12-12
• 公開（公告）號: CN109784164B
• 公開（公告）日: 2020-11-06
• 發明（設計）人: 邊紅昌;鄭文;宋叢禮;郭益林;于永航
• 申請（專利權）人: 北京達佳互聯信息技術有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06T7/194
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 莎日娜

本申請是關于一種前景識別方法、裝置、電子設備及存儲介質，涉及圖像處理技術領域，所述方法，包括：獲取視頻的至少一幀原始圖像；將各幀所述原始圖像輸入語義分割網絡，得到各幀所述原始圖像對應的原始目標前景概率圖；對各幀所述原始目標前景概率圖進行時序平滑，得到各幀第一目標前景概率圖；對各幀所述第一目標前景概率圖進行雙邊濾波，得到各幀第二目標前景概率圖；基于各幀所述第二目標前景概率圖，識別所述視頻各幀所述原始圖像的目標前景。從語義分割網絡得到原始目標前景概率圖后，對該原始目標前景概率圖進行了時序平滑和雙邊濾波，該第二目標前景概率圖中的前景邊界更為準確，能夠更為準確的識別出視頻各幀原始圖像的目標前景。

技術領域

本公開涉及圖像處理技術領域，尤其涉及前景識別方法、裝置、電子設備及存儲介質。

背景技術

視頻表現形式豐富多樣，能夠為用戶提供更多信息，娛樂性能好，因此應用廣泛。

語義分割網絡可以將視頻中每一幀圖像分割為若干個具有某種特定語義含義的像素區域，并識別出每個區域的類別，最終獲得一幅具有像素語義標注的目標前景概率圖，進而便于對視頻中每一幀圖像進行像素級的操作。例如，通過語義分割網絡將視頻中每一幀原始圖像的目標前景識別出來，進行像素級的操作等。

相關技術中，直接采用語義分割網絡，識別視頻中每一幀原始圖像的目標前景，存在識別不準的問題。

發明內容

為克服相關技術中存在的問題，本公開提供一種前景識別及裝置。

根據本公開實施例的第一方面，提供一種前景識別方法，包括

獲取視頻的至少一幀原始圖像；

將從所述視頻中獲取的每一幀所述原始圖像輸入語義分割網絡，得到與從所述視頻中獲取的每一幀所述原始圖像對應的每一幀原始目標前景概率圖；所述原始目標前景概率圖中，每一個像素點的像素值表征了相應的原始圖像中對應像素點為目標前景的概率；

對從所述視頻中獲取的每一幀所述原始圖像對應的每一幀原始目標前景概率圖進行時序平滑，得到所述從視頻中獲取的每一幀所述原始圖像對應的每一幀第一目標前景概率圖；

對每一幀所述第一目標前景概率圖進行雙邊濾波，得到每一幀第二目標前景概率圖；

基于每一幀所述第二目標前景概率圖，識別從所述視頻中獲取的每一幀所述原始圖像的目標前景。

可選的，所述對從所述視頻中獲取的每一幀所述原始圖像對應的每一幀原始目標前景概率圖進行時序平滑，得到所述從視頻中獲取的每一幀所述原始圖像對應的每一幀第一目標前景概率圖，包括：

從所述視頻中，獲取從所述視頻中獲取的每一幀所述原始圖像的參考圖像；所述參考圖像為所述視頻中獲取的每一幀所述原始圖像之前的n幀原始圖像；所述n為大于0的整數；

將每一幀所述參考圖像輸入所述語義分割網絡，得到每一幀所述參考圖像對應的每一幀參考目標前景概率圖；所述參考目標前景概率圖中，每一個像素點的像素值表征了相應的參考圖像中對應像素點為目標前景的概率；

確定每一幀所述參考目標前景概率圖中，每一個像素的第一目標前景概率值；

從每一幀所述原始目標前景概率圖中，獲取每一個像素的第二目標前景概率值；

針對每一幀所述原始目標前景概率圖，將所述每一個像素的第二目標前景概率值與對應像素的n個第一目標前景概率值，按照預設權重加權求和，得到每一幀所述第一目標前景概率圖。

可選的，所述針對每一幀所述原始目標前景概率圖，將所述每一個像素的第二目標前景概率值與對應像素的n個第一目標前景概率值，按照預設權重加權求和，得到每一幀所述第一目標前景概率圖之前，還包括：