[發明專利]模糊隱私遮蔽的編碼方法、系統及存儲介質

有效

• 申請號: 202010904640.0
• 申請日: 2020-09-01
• 公開（公告）號: CN112543330B
• 公開（公告）日: 2022-10-18
• 發明（設計）人: 維克托·埃德帕爾姆;袁嵩
• 申請（專利權）人: 安訊士有限公司
• 主分類號: H04N19/167
• 分類號: H04N19/167;H04N19/177;H04N19/172;H04N19/593;H04N7/18
• 代理公司: 北京德琦知識產權代理有限公司 11018
• 代理人: 康泉;宋志強

本公開涉及模糊隱私遮蔽。具體地，描述了實施并且使用由編碼器對包括多個圖像幀的視頻序列進行編碼的技術的方法，裝置，包括計算機程序產品。從視頻流接收圖像幀。接收輸入，該輸入指示所接收的圖像幀中的應當被施加隱私遮蔽的一個或多個區域。該一個或多個區域由一個或多個編碼單元表示。圖像幀被編碼成輸出幀，其中，用具有設置為零的變換系數的幀內預測編碼單元來代替一個或多個區域中的圖像數據，該幀內預測編碼單元是從編碼器的預測階段中獲得的。

技術領域

本發明涉及視頻編碼，并且更具體地涉及對包括一個或多個隱私遮蔽的視頻流進行編碼。

背景技術

監視相機被用于許多不同的應用中，在室內和在戶外兩者，用于監視各種環境。可以由例如操作者或者警衛來監視描繪捕捉的場景的圖像。在特定情況下，可能需要與一個部分不同處理所捕捉的圖像的另一部分——諸如當例如為了個人誠信而需要排除圖像的一部分時。

在此類實例中，操作者可以在監控裝備的設定期間定義一個或多個隱私遮蔽。隱私遮蔽可以是靜態的或動態的。直到操作者決定移動或去除它們之前，靜態的隱私遮蔽典型地不移位。動態隱私遮蔽可以隨時間而改變，并且操作者也可以定義應當何時施加隱私遮蔽。例如，操作者能夠定義動態隱私遮蔽；使得如果在遮蔽的區域內檢測到面部，則將面部遮蔽出去，否則將不向該區域施加遮蔽。

常常將隱私遮蔽作為覆蓋施加到圖像。隱私遮蔽常常具有多邊形的形狀，但是其他形狀(其更精密地遵循要隱去的區域的形狀)也是可能的。一些隱私遮蔽采取不透明區(例如，均勻黑區)的形式，而其他隱私遮蔽采取其中在隱私遮蔽區域上將圖像數據“涂抹”的模糊的形式，或像素化的形式。像素化是單個像素值(常常是編碼單元內的多個或所有像素的平均值)替換編碼單元中的所有像素的處理。盡管如此，通常，與像素化相比，考慮對隱私遮蔽進行模糊更理想，因為其允許平滑邊緣并且因此更好看。然而，與在硬件塊中當前經濟上可行的相比，模糊更難以實現并且需要更多計算資源來實施。

發明內容

本發明的目的是提供用于對具有多個圖像幀的視頻序列進行編碼的技術，其使得能夠向視頻施加有美感的隱私遮蔽，而不會顯著增加編碼所需要的計算機資源方面的任何成本。此目的以及其他目的通過根據權利要求1所述的方法、根據權利要求8所述的編碼器系統、根據權利要求12所述的計算機程序產品以及根據權利要求14所述的存儲介質來實現。

根據第一方面，在計算機系統中通過用于對具有多個圖像幀的視頻序列進行編碼的方法來全部或至少部分地實現這些和其他目的。該方法包括：

●從視頻流接收圖像幀；

●接收輸入，該輸入指示所接收的圖像幀中的應當被施加隱私遮蔽的一個或多個區域，其中，一個或多個區域由一個或多個編碼單元表示；

●將圖像幀編碼成輸出幀，其中，用具有設置為零的變換系數的幀內預測編碼單元來代替一個或多個區域中的圖像數據，幀內預測編碼單元是從編碼器的預測階段中獲得的。

這提供使用在視頻編碼器的預測階段中可用的信息的方式，并且使用該信息以產生與常規像素化的隱私遮蔽相比更加有美感的模糊的隱私遮蔽。此外，像素化解決方案典型地具有最大尺寸限制，因此它們將僅僅支持高達圖像的某部分的遮蔽。當使用根據本發明的技術時，此類最大尺寸不存在。使用該方法還允許在不要求任何大量附加的計算資源的情況下來產生隱私遮蔽。此外，能夠實現理想的幀同步，并且能夠保證編碼器不以任何方式改變隱私遮蔽。

根據一個實施例，由編碼器自動地執行選擇編碼單元的尺寸的步驟。這允許編碼器選擇其在質量和比特率之間的最佳折衷選擇。

根據一個實施例，由用戶手動地進行選擇編碼單元的尺寸的步驟。能夠接收用戶輸入允許用戶對編碼進行更好的控制，以及覆寫由編碼器確定的任何設置的能力。在特定情況下可以尤其有用，諸如例如滿足特定像素化水平的正式用戶需求。