[發(fā)明專(zhuān)利]高動(dòng)態(tài)范圍視頻生成方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201910817877.2
• 申請(qǐng)日: 2019-08-30
• 公開(kāi)（公告）號(hào): CN112449120B
• 公開(kāi)（公告）日: 2022-06-10
• 發(fā)明（設(shè)計(jì)）人: 許亦然;張儷耀;馬靖
• 申請(qǐng)（專(zhuān)利權(quán)）人: 華為技術(shù)有限公司
• 主分類(lèi)號(hào): H04N5/235
• 分類(lèi)號(hào): H04N5/235
• 代理公司: 北京同立鈞成知識(shí)產(chǎn)權(quán)代理有限公司 11205
• 代理人: 榮甜甜;臧建明

本申請(qǐng)?zhí)峁〩DR視頻生成方法及裝置，涉及AI技術(shù)領(lǐng)域，終端設(shè)備接收到用戶(hù)輸入的請(qǐng)求生成HDR視頻的處理請(qǐng)求后，將原始視頻包含的第一圖像幀分割至少兩類(lèi)區(qū)域，不同類(lèi)別區(qū)域的第一圖像特征不同，對(duì)不同類(lèi)別區(qū)域采用對(duì)應(yīng)第一增強(qiáng)處理方式進(jìn)行處理得到增強(qiáng)處理的區(qū)域之后，拼接第一圖像幀增強(qiáng)處理后的多個(gè)區(qū)域得到第二圖像幀，基于該些第二圖像幀得到HDR視頻。該過(guò)程中，無(wú)需對(duì)每個(gè)第一圖像幀拍攝得到多個(gè)不同曝光時(shí)長(zhǎng)的圖像，因此不受限于長(zhǎng)曝光過(guò)程，終端設(shè)備通過(guò)將原始視頻的圖像幀劃分成不同的區(qū)域，不同的區(qū)域分成至少兩類(lèi)區(qū)域，可以根據(jù)每類(lèi)區(qū)域的第一圖像特征確定該類(lèi)區(qū)域的增強(qiáng)方案，使得不同類(lèi)的區(qū)域使用不同的增強(qiáng)方案。

技術(shù)領(lǐng)域

本申請(qǐng)涉及人工智能(artificial intelligence，AI)技術(shù)領(lǐng)域，尤其涉及一種高動(dòng)態(tài)范圍視頻生成方法及裝置。

背景技術(shù)

在圖像處理領(lǐng)域中，動(dòng)態(tài)范圍(dynamic range)指在圖像上最亮的光照亮度和最暗的光照亮度的比值，動(dòng)態(tài)范圍是圖像質(zhì)量評(píng)價(jià)很重要的維度之一。根據(jù)動(dòng)態(tài)范圍可以將圖像分為高動(dòng)態(tài)范圍(high dynamic range，HDR)圖像、低動(dòng)態(tài)范圍(low dynamic range，LDR)圖像等。

一般情況下，為得到HDR圖像，可以短時(shí)間內(nèi)對(duì)同一對(duì)象進(jìn)行多次拍攝，以得到該對(duì)象不同曝光時(shí)長(zhǎng)的LDR圖像，進(jìn)而將該些LDR圖像合成HDR圖像。例如，一個(gè)長(zhǎng)曝光過(guò)程中，獲取該對(duì)象的短曝光圖像、中曝光圖像和長(zhǎng)曝光圖像，然后對(duì)該三張圖像進(jìn)行融合，從而得到HDR圖像。

隨著HDR技術(shù)的發(fā)展以及HDR顯示器的逐步普及，用戶(hù)對(duì)HDR視頻的需求逐步增加，此時(shí)，要求終端設(shè)備具備拍攝HDR視頻的能力或者將LDR視頻轉(zhuǎn)換為HDR視頻的能力。然而，視頻是由一個(gè)個(gè)的圖像幀組成的，若每一圖像幀都由不同曝光時(shí)長(zhǎng)的圖像合成，則需要終端設(shè)備短時(shí)間內(nèi)針對(duì)每個(gè)圖像幀拍攝多張不同曝光時(shí)長(zhǎng)的圖像，再將該些圖像合成圖像幀，進(jìn)而根據(jù)多個(gè)圖像幀得到HDR視頻。顯然，受限于曝光時(shí)長(zhǎng)，終端設(shè)備拍攝到的視頻動(dòng)態(tài)范圍受限。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供一種高動(dòng)態(tài)范圍視頻生成方法及裝置，通過(guò)將圖像幀劃分成不同的區(qū)域，不同區(qū)域使用不同的增強(qiáng)方案，從而得到HDR視頻。

第一方面，本申請(qǐng)實(shí)施例提供一種高動(dòng)態(tài)范圍HDR視頻生成方法，該方法是從終端設(shè)備的角度進(jìn)行說(shuō)明的，該方法包括：終端設(shè)備接收到用戶(hù)輸入的請(qǐng)求生成HDR視頻的處理請(qǐng)求后，將原始視頻包含的各第一圖像幀分割至少兩類(lèi)區(qū)域，不同類(lèi)別區(qū)域的第一圖像特征不同，對(duì)不同類(lèi)別區(qū)域采用對(duì)應(yīng)的第一增強(qiáng)處理方式進(jìn)行處理，得到增強(qiáng)處理后的區(qū)域，之后，拼接各第一圖像幀的增強(qiáng)處理后的多個(gè)區(qū)域，得到各第一圖像幀各自對(duì)應(yīng)的第二圖像幀，基于該些第二圖像幀得到HDR視頻。該過(guò)程中，無(wú)需對(duì)每一個(gè)第一圖像幀拍攝得到多個(gè)不同曝光時(shí)長(zhǎng)的圖像，因此，不受限于長(zhǎng)曝光過(guò)程，終端設(shè)備通過(guò)將原始視頻的圖像幀劃分成不同的區(qū)域，該些不同的區(qū)域分成至少兩類(lèi)區(qū)域，可以根據(jù)每一類(lèi)區(qū)域的第一圖像特征確定該類(lèi)區(qū)域的增強(qiáng)方案，使得不同類(lèi)的區(qū)域使用不同的增強(qiáng)方案。另外，由于本申請(qǐng)實(shí)施例是對(duì)每一圖像幀進(jìn)行處理得到HDR視頻，而無(wú)需拍攝曝光時(shí)長(zhǎng)較長(zhǎng)的圖像，例如，無(wú)需拍攝中曝光時(shí)長(zhǎng)、長(zhǎng)曝光時(shí)長(zhǎng)的圖像，也就是說(shuō)，本申請(qǐng)實(shí)施例不需要終端設(shè)備通過(guò)拉長(zhǎng)曝光得到高動(dòng)態(tài)視頻，因此，得到的HDR視頻不會(huì)有鬼影出現(xiàn)。

一種可行的設(shè)計(jì)中，終端設(shè)備對(duì)多個(gè)區(qū)域中的各區(qū)域分別采用對(duì)應(yīng)的第一增強(qiáng)處理方式進(jìn)行處理，得到增強(qiáng)處理后的多個(gè)區(qū)域之后，還對(duì)第一區(qū)域進(jìn)行語(yǔ)義分割，以將第一區(qū)域分割成多個(gè)子區(qū)域，該多個(gè)子區(qū)域包含至少兩類(lèi)子區(qū)域，不同類(lèi)別子區(qū)域的第二圖像特征不同，第一區(qū)域是多個(gè)區(qū)域中的任意一個(gè)區(qū)域，第一圖像特征和第二圖像特征是不同維度的圖像特征，確定各子區(qū)域的第二增強(qiáng)處理方式，對(duì)多個(gè)子區(qū)域中的每個(gè)子區(qū)域，分別采用對(duì)應(yīng)的第二增強(qiáng)處理方式進(jìn)行處理，拼接增強(qiáng)處理后的多個(gè)子區(qū)域，得到第一區(qū)域。采用該種方案，終端設(shè)備還可以進(jìn)一步的按照第二圖像特征將該區(qū)域劃分為多個(gè)子區(qū)域，對(duì)各子區(qū)域分別確定出第二增強(qiáng)處理方式，并采用第二增強(qiáng)處理方式，對(duì)各子區(qū)域進(jìn)行處理，實(shí)現(xiàn)進(jìn)一步增強(qiáng)處理各子區(qū)域的目的。