[發明專利]一種基于深度相機的滑動變焦方法、裝置以及存儲介質

在審

• 申請號: 202111341984.6
• 申請日: 2021-11-12
• 公開（公告）號: CN114359005A
• 公開（公告）日: 2022-04-15
• 發明（設計）人: 胡剛
• 申請（專利權）人: 北京曠視科技有限公司;北京邁格威科技有限公司
• 主分類號: G06T1/00
• 分類號: G06T1/00;G06T3/40;G06T7/11;G06T7/194;G06T7/80
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 唐正瑜

1.一種基于深度相機的滑動變焦方法，其特征在于，所述滑動變焦方法包括：

獲取場景圖和深度圖；

根據標定數據和所述場景圖對所述深度圖進行標定，得到標定深度圖；

根據所述標定深度圖將所述場景圖劃分為主體區域和背景區域；

獲取多組成對的對所述主體區域的放大子圖和對所述背景區域的縮小子圖，并融合每對放大子圖和縮小子圖得到多幀展示圖像。

2.如權利要求1所述的滑動變焦方法，其特征在于，所述場景圖是通過主攝相機拍攝得到的，所述深度圖是通過深度相機拍攝得到的；

其中，

在所述根據所述場景圖對所述深度圖進行標定之前，所述滑動變焦方法還包括：

獲取所述深度相機到所述主攝相機之間轉換參數標定，得到所述標定數據。

3.如權利要求1-2任一項所述的滑動變焦方法，其特征在于，所述根據所述標定深度圖將所述場景圖劃分為主體區域和背景區域，包括：

將所述標定深圖轉換為視差圖；

從所述視差圖獲取目標對焦點的視差值得到參考視差值，并從所述標定深度圖獲取所述目標對焦點的深度值得到參考深度值；

若確定所述參考深度值小于設定距離閾值時，則將比所述參考視差值大第一設定閾值的所有像素點確認為屬于主體所在像素區域，并將所述場景圖上與所述主體所在像素區域對應位置確認為所述主體區域，所述場景圖上除所述主體區域外的區域為所述背景區域；或者，若確認所述參考深度值大于或等于設定距離閾值時，則將比所述參考視差值大第二設定閾值所有像素點確認為屬于主體所在像素區域，并將所述場景圖上與所述主體所在像素區域對應位置確認為所述主體區域，所述場景圖上除所述主體區域外的區域為所述背景區域。

4.如權利要求3所述的滑動變焦方法，其特征在于，在將所述標定深圖轉換為視差圖之前，所述滑動變焦方法還包括：

從所述標定深度圖或者所述深度圖獲取最大深度值和最小深度值；

確認所述最大深度值大于或等于設定距離，并確認所述最大深度值與所述最小深度值的差值大于或等于設定距離差值。

5.如權利要求1-4任一項所述的滑動變焦方法，其特征在于，所述獲取多組成對的對所述主體區域的放大子圖和對所述背景區域的縮小子圖，包括：

獲取所述主體區域的總放大倍率和所述背景區域的總縮小倍率；

根據所述總放大倍率和合成視頻的總幀數確定每一幀的目標放大倍率，并根據所述總縮小倍率和所述總幀數確定所述每一幀的目標縮小倍率，其中，所述合成視頻的總幀數與所述多幀展示圖像的幀數相等；

根據所述每一幀的目標放大倍率和所述主體區域得到所述每一幀的放大子圖，并根據所述每一幀的目標縮小倍率和所述背景區域得到所述每一幀的縮小子圖。

6.如權利要求5所述的滑動變焦方法，其特征在于，在所述獲取多組成對的對所述主體區域的放大子圖和對所述背景區域的縮小子圖之前，所述滑動變焦方法還包括：

從所述場景圖上獲取感興趣像素點；

其中，

所述根據每一幀的目標放大倍率和所述主體區域得到所述每一幀的放大子圖包括：

根據所述每一幀的目標放大倍率和所述感興趣像素點構造放大轉換矩陣；

根據所述放大轉換矩陣和所述主體區域得到所述每一幀的放大子圖；

所述根據每一幀的目標縮小倍率和所述背景區域得到所述每一幀的縮小子圖，包括：

根據所述每一幀的目標縮小倍率和所述感興趣像素點構造縮小轉換矩陣；

根據所述縮小轉換矩陣和所述背景區域得到所述每一幀的縮小子圖。

7.如權利要求6所述的滑動變焦方法，其特征在于，所述從場景圖上獲取感興趣像素點包括：

根據所述主體區域對應的各像素點的坐標值計算所述主體區域的重心；

確認所述目標對焦點在所述主體區域內，則根據如下公式得到所述感興趣像素點：

c＝w1*p+w2*p1

其中，p1表征與所述重心，p表征所述目標對焦點在所述場景圖上的坐標值，第一權重系數w1的取值大于第二權重系數w2的取值，且第一權重系數和第二權重系數的和為1。