[發(fā)明專利]生成圖像的深度圖的方法及相關(guān)存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201710367433.4
• 申請(qǐng)日: 2013-10-28
• 公開(kāi)（公告）號(hào): CN107277491B
• 公開(kāi)（公告）日: 2019-04-30
• 發(fā)明（設(shè)計(jì)）人: 吳琛;D.穆克赫吉;M.王
• 申請(qǐng)（專利權(quán)）人: 谷歌公司
• 主分類號(hào): H04N13/261
• 分類號(hào): H04N13/261;G06T7/593
• 代理公司: 北京市柳沈律師事務(wù)所 11105
• 代理人: 錢(qián)大勇

1.一種用于生成圖像的深度圖的方法，所述方法包括：

訪問(wèn)所述圖像，所述圖像包括多個(gè)像素，其中每個(gè)像素具有所述圖像中的顏色和位置；

基于圖像中的像素的顏色來(lái)確定圖像的顏色深度圖；

基于像素的位置和用于多個(gè)其他圖像中相似位置的像素的歷史深度信息來(lái)確定圖像的空間深度圖；

基于圖像中的像素運(yùn)動(dòng)確定圖像的運(yùn)動(dòng)深度圖；

確定顏色深度圖權(quán)重、空間深度圖權(quán)重和運(yùn)動(dòng)深度圖權(quán)重，基于多個(gè)其他圖像中相似位置中的像素的歷史深度方差信息確定空間深度圖權(quán)重，歷史深度方差信息描述歷史深度信息的差異；和

從由顏色深度圖權(quán)重加權(quán)的顏色深度圖、由空間深度圖權(quán)重加權(quán)的空間深度圖和由運(yùn)動(dòng)深度圖權(quán)重加權(quán)的運(yùn)動(dòng)深度圖的組合來(lái)生成圖像的組合深度圖。

2.根據(jù)權(quán)利要求1所述的方法，其中確定所述顏色深度圖權(quán)重包括：

確定描述像素的顏色分布的直方圖；和

基于由直方圖描述的顏色的分布來(lái)確定顏色深度圖權(quán)重。

3.根據(jù)權(quán)利要求2所述的方法，其中基于由所述直方圖描述的顏色的分布來(lái)確定所述顏色深度圖權(quán)重包括：

確定與直方圖相關(guān)聯(lián)的熵，所述熵基于顏色分布；

確定所述熵和與所述圖像相關(guān)聯(lián)的最大熵的比值，所述比值描述所述顏色的相對(duì)分布；和

根據(jù)比值確定顏色深度圖權(quán)重，顏色深度圖權(quán)重直接與所述比值成正比例。

4.根據(jù)權(quán)利要求1所述的方法，其中確定所述運(yùn)動(dòng)深度圖權(quán)重包括確定具有局部運(yùn)動(dòng)的圖像中的像素的百分比，所述運(yùn)動(dòng)深度圖權(quán)重基于具有局部運(yùn)動(dòng)的像素的百分比。

5.根據(jù)權(quán)利要求4所述的方法，還包括：

基于具有局部運(yùn)動(dòng)的第二圖像中的像素的百分比來(lái)確定第二圖像的運(yùn)動(dòng)深度圖權(quán)重，第二圖像在視頻序列中的第一圖像之前；

確定第一乘數(shù)，所述第一乘數(shù)具有大于1的值；

確定第二乘數(shù)，所述第二乘數(shù)具有小于1的值；和

將具有局部運(yùn)動(dòng)的第一圖像中的像素的百分比與運(yùn)動(dòng)閾值進(jìn)行比較；

其中確定所述第一圖像的運(yùn)動(dòng)深度圖權(quán)重包括：

響應(yīng)于確定具有局部運(yùn)動(dòng)的第一圖像中的像素的百分比高于運(yùn)動(dòng)閾值，將第二圖像的運(yùn)動(dòng)深度圖權(quán)重乘以第一乘數(shù)；和

響應(yīng)于確定具有局部運(yùn)動(dòng)的第一圖像中的像素的百分比低于運(yùn)動(dòng)閾值，將第二圖像的運(yùn)動(dòng)深度圖權(quán)重乘以第二乘數(shù)。

6.根據(jù)權(quán)利要求1所述的方法，其中基于所述歷史深度方差信息確定所述空間深度圖權(quán)重包括：

檢索與圖像中的位置相關(guān)聯(lián)的歷史深度方差信息；

確定第一乘數(shù)，所述第一乘數(shù)具有大于1的值；

確定第二乘數(shù)，所述第二乘數(shù)具有小于1的值；

將與位置相關(guān)聯(lián)的歷史深度方差信息與方差閾值進(jìn)行比較；

其中確定所述空間深度圖權(quán)重包括：

響應(yīng)于確定與所述位置相關(guān)聯(lián)的歷史深度方差信息高于所述方差閾值，將所述空間深度圖權(quán)重乘以所述第一乘數(shù)；和

響應(yīng)于確定與所述位置相關(guān)聯(lián)的歷史深度方差信息低于所述方差閾值，將所述空間深度圖權(quán)重乘以所述第二乘數(shù)。

7.一種存儲(chǔ)用于生成圖像的深度圖的計(jì)算機(jī)程序指令的非暫時(shí)計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，執(zhí)行所述計(jì)算機(jī)程序指令以便執(zhí)行包括以下步驟的步驟：

訪問(wèn)所述圖像，所述圖像包括多個(gè)像素，其中每個(gè)像素具有所述圖像中的顏色和位置；

基于圖像中的像素的顏色來(lái)確定圖像的顏色深度圖；

基于像素的位置和用于多個(gè)其他圖像中相似位置的像素的歷史深度信息來(lái)確定圖像的空間深度圖；

基于圖像中的像素運(yùn)動(dòng)確定圖像的運(yùn)動(dòng)深度圖；

確定顏色深度圖權(quán)重、空間深度圖權(quán)重和運(yùn)動(dòng)深度圖權(quán)重，基于多個(gè)其他圖像中相似位置中的像素的歷史深度方差信息確定空間深度圖權(quán)重，歷史深度方差信息描述歷史深度信息的差異；和

從由顏色深度圖權(quán)重加權(quán)的顏色深度圖、由空間深度圖權(quán)重加權(quán)的空間深度圖和由運(yùn)動(dòng)深度圖權(quán)重加權(quán)的運(yùn)動(dòng)深度圖的組合來(lái)生成圖像的組合深度圖。