[發明專利]多角度圖像生成方法、裝置及電子設備

有效

• 申請號: 201910731909.7
• 申請日: 2019-08-09
• 公開（公告）號: CN110555892B
• 公開（公告）日: 2023-04-25
• 發明（設計）人: 鄧啟力
• 申請（專利權）人: 北京字節跳動網絡技術有限公司
• 主分類號: G06T11/00
• 分類號: G06T11/00;G06T11/60
• 代理公司: 北京風雅頌專利代理有限公司 11403
• 代理人: 車英慧

1.一種多角度圖像生成方法，其特征在于，包括：

獲取目標對象的第一視角方向的第一圖像集合，所述第一圖像集合中的圖像包含所述目標對象在第一視角方向上的多個目標元素；

基于預設的多個目標角度，對所述第一圖像集合中的圖像設置與所述多個目標角度相匹配的分散點，所述多個目標角度與所述第一視角不同，每一目標元素上至少設置有一個分散點；

將所述第一圖像集合和所述分散點進行特征化處理后的結果，輸入到包含多個卷積層和池化層的預測網絡中；

利用所述預測網絡，生成與所述多個目標角度相匹配的第二圖像集合；其中，

所述基于預設的多個目標角度，對所述第一圖像集合中的圖像設置與所述多個目標角度相匹配的分散點，包括：

對所述第一圖像集合中的圖像執行關鍵點檢測；

基于所述關鍵點檢測的結果，確定每一目標元素上存在的多個關鍵點；

在每一目標元素上的多個關鍵點中，選擇與所述多個目標角度相匹配的關鍵點，得到關鍵點集合；

將所述關鍵點集合中的關鍵點作為所述與所述多個目標角度相匹配的分散點；

所述利用所述預測網絡，生成與所述多個目標角度相匹配的第二圖像集合，包括：

在所述多個目標角度中選擇與所述第一視角方向不同的第二視角；

基于所述第二視角，確定預測圖像中目標對象存在的預測元素；

利用所述預測網絡，對所述預測元素進行預測；

基于預測后的預測元素組成的圖像，確定為所述第二圖像集合中的圖像。

2.根據權利要求1所述的方法，其特征在于，所述獲取目標對象的第一視角方向的第一圖像集合，包括：

獲取多個具有第一視角方向的目標對象圖像；

對所述目標對象圖像進行色彩調整；

將調整后的多個目標對象圖像作為所述第一圖像集合中的圖像。

3.根據權利要求2所述的方法，其特征在于，所述對所述目標對象圖像進行色彩調整，包括：

計算目標對象圖像中R、G、B分量的均值avgR、avgG和avgB，以及目標對象圖像的總均值avgP；

基于avgR、avgG、avgB和avgP，計算目標對象圖像中R、G、B分量的調整系數aR、aG和aB；

利用aR、aG和aB對目標對象圖像中R、G、B分量值進行色彩調整。

4.根據權利要求1所述的方法，其特征在于，所述將所述第一圖像集合和所述分散點進行特征化處理后的結果，輸入到包含多個卷積層和池化層的預測網絡中，包括：

對所述第一圖像集合中的圖像進行矩陣化處理，得到第一矩陣集合；

基于所述分散點在第一圖像集合上的坐標，確定所述分散點對應的第二矩陣集合，所述第二矩陣集合與所述第一矩陣集合具有相同的尺寸；

將所述第一矩陣集合和所述第二矩陣集合作為特征化處理后的結果，輸入到包含多個卷積層和池化層的預測網絡中。

5.根據權利要求1所述的方法，其特征在于，所述基于預測后的預測元素組成的圖像，確定為所述第二圖像集合中的圖像，包括：

利用所述預測網絡對所述目標對象在所述第二視角下的輪廓進行預測，得到輪廓圖像；

將所述輪廓圖像和所述預測后的預測元素組成的圖像，確定為所述第二圖像集合中的圖像。