[發明專利]對齊于參考幀合成圖像

有效

• 申請號: 201780048468.X
• 申請日: 2017-07-26
• 公開（公告）號: CN109565551B
• 公開（公告）日: 2021-01-26
• 發明（設計）人: J·P·格倫;M·O·伊爾莫尼米
• 申請（專利權）人: 微軟技術許可有限責任公司
• 主分類號: H04N5/235
• 分類號: H04N5/235;H04N5/232
• 代理公司: 上海專利商標事務所有限公司 31100
• 代理人: 蔡悅;陳斌

在各種示例中，存在一種圖像合成器，其包括存儲兩個或更多個幀的存儲器，所述幀是描繪相同場景的圖像；以及至少一個處理器。存儲器保存可由處理器執行的指令，以選擇幀中的至少一個并將其指定為參考幀并將其他幀指定為目標幀。指令將目標幀與參考幀對齊，并通過合成參考幀和經對齊的目標幀來計算輸出圖像。選擇參考幀的過程包括以下中的任一個或多個：幀的特征的局部分析、面部檢測、微笑檢測、對象檢測、計算各個幀的信噪比、來自至少一個非相機傳感器的傳感器數據的使用。

背景技術

多個圖像(也被稱為幀)在其已與參考幀對齊之后被合成，用于諸如高動態范圍(HDR)攝影、濾噪之類的應用。高動態范圍攝影是用于表示比使用傳統數字或模擬攝影可以實現的圖像中更大范圍的亮度水平的過程。例如，HDR圖像可以表示包含濃重陰影和明亮陽光兩者的真實場景。通過合成多個圖像來濾噪包括以某種方式計算描繪相同場景的許多幀的聚合，以便減少輸出圖像中的噪聲量。

多個圖像或幀可越來越多地從照相手機、網絡照相機和其他類型的照相機獲得。例如，對于不同的幀使用不同的相機參數來捕獲多個幀的包圍曝光通常被用于HDR攝影。例如，連拍攝影在許多照相手機上是可用的，借助連拍攝影，多個幀以時間順序被快速地捕獲。

以下描述的各實施例不限于解決用于合成圖像的已知系統的缺點中的任一個或全部的實現。

概述

下面呈現了本公開的簡要概述，以便向讀者提供基本理解。本概述并不旨在標識所要求保護主題的關鍵特征或必要特征，也不旨在用于限制所要求保護主題的范圍。其唯一的目的是以簡化形式呈現本文中所公開的概念精選，作為稍后呈現的更詳細描述的序言。

在各種示例中，存在一種圖像合成器，其包括存儲兩個或更多個幀的存儲器，所述幀是描繪相同場景的圖像；以及至少一個處理器。存儲器保存可由處理器執行以選擇幀中的至少一個并將其指定為參考幀并將其他幀指定為目標幀的指令。指令將目標幀與參考幀對齊，并通過合成參考幀和經對齊的目標幀來計算輸出圖像。選擇參考幀的過程包括以下中的任一個或多個：幀的特征的局部分析、面部檢測、微笑檢測、對象檢測、計算各個幀的信噪比、來自至少一個非相機傳感器的傳感器數據的使用。

通過參考結合附圖考慮的以下詳細描述將更易于領會許多附帶特征，因為這些附帶特征變得更好理解。

附圖描述

根據附圖閱讀以下詳細描述將更好地理解本說明書，在附圖中：

圖1是由相機設備捕獲并被合成以生成輸出圖像的多個圖像(也被稱為幀)的示意圖；

圖2是合成多個幀的方法的流程圖；

圖3是適用于在多幀圖像處理中合成多個幀的相機的示意圖；

圖4示出基于計算的示例性設備，其中用于合成兩個或更多個圖像的系統的實施例被實現。

在各個附圖中使用相同的附圖標記來指代相同的部件。

詳細描述

下面結合附圖提供的詳細描述旨在作為本發明示例的描述，而并不旨在表示構建或使用本發明示例的唯一形式。本描述闡述了本發明示例的功能，以及用于構建和操作本發明示例的操作的序列。然而，可通過不同示例來完成相同或等效的功能和序列。

術語幀在本文中被用于指代諸如由彩色相機、單色相機、網絡相機、視頻相機、紅外相機、深度相機、立體相機、飛行時間相機、醫學成像設備或其他圖像傳感器捕獲的數字圖像的圖像。