[發(fā)明專利]用于內(nèi)容自適應(yīng)的分辨率增強(qiáng)的裝置、系統(tǒng)和方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201710762825.0
• 申請(qǐng)日: 2017-08-28
• 公開（公告）號(hào): CN107801009B
• 公開（公告）日: 2021-03-19
• 發(fā)明（設(shè)計(jì)）人: 亞歷山大·黃;李亞光;馬克·拉姆;希沙姆·斯卡蒂
• 申請(qǐng)（專利權(quán)）人: 科視數(shù)字系統(tǒng)美國(guó)股份有限公司
• 主分類號(hào): H04N9/31
• 分類號(hào): H04N9/31
• 代理公司: 上海漢聲知識(shí)產(chǎn)權(quán)代理有限公司 31236
• 代理人: 封喜彥;胡晶

本發(fā)明提供一種用于內(nèi)容自適應(yīng)的分辨率增強(qiáng)的裝置、系統(tǒng)和方法。從視頻流中生成多個(gè)子幀流；多個(gè)子幀流中的每一個(gè)包括較低分辨率版本、相對(duì)彼此像素偏移的視頻流；以一對(duì)一的關(guān)系從多個(gè)子幀流生成多個(gè)輸出子幀流：對(duì)多個(gè)子幀流中的每一個(gè)應(yīng)用多個(gè)視頻增強(qiáng)濾波器，多個(gè)視頻增強(qiáng)濾波器中的每一個(gè)用于增強(qiáng)視頻流的不同特征；并且，根據(jù)視頻流的一個(gè)或多個(gè)區(qū)域中的數(shù)據(jù)將一個(gè)或多個(gè)所得增強(qiáng)子幀流合并到各自的輸出子幀流中。控制一個(gè)或多個(gè)投影儀投影多個(gè)輸出子幀流，將多個(gè)輸出子幀流合并成更高分辨率的投影視頻流。

技術(shù)領(lǐng)域

本說明書一般涉及顯示設(shè)備和投影儀技術(shù)領(lǐng)域，且具體來說是一種用于內(nèi)容自適應(yīng)的分辨率增強(qiáng)的裝置、系統(tǒng)和方法。

背景技術(shù)

高分辨率投影儀和/或顯示器已經(jīng)變得無處不在，但至少部分由于高清晰度投影儀和/或顯示器的生產(chǎn)成本，當(dāng)前數(shù)碼相機(jī)、數(shù)碼攝像機(jī)和電影攝像機(jī)的分辨率可以采集比這些投影儀和/或顯示器當(dāng)前可提供的圖像高一個(gè)數(shù)量級(jí)的圖像。因此，投影視頻的質(zhì)量在數(shù)字投影機(jī)市場(chǎng)中發(fā)揮著巨大的作用。例如，當(dāng)4K、UHD(超高清)和/或8K視頻可用時(shí)，投影機(jī)通常不能投影這種高分辨率視頻；相反，更低分辨率的WQXGA(wide-quad-extended-graphics-array)投影機(jī)更容易實(shí)現(xiàn)投影。以較低成本提高投影視頻質(zhì)量的計(jì)算方法仍處于起步階段。因此，當(dāng)投影和/或顯示高分辨率視頻時(shí)，使用下采樣程序來降低分辨率，使得高分辨率視頻可以由較低分辨率的投影儀和/或顯示器呈現(xiàn)，這可能導(dǎo)致例如毛皮、頭發(fā)或一般的高頻圖像特征的細(xì)節(jié)丟失，并且可能進(jìn)一步導(dǎo)致額外的運(yùn)動(dòng)偽像(例如，除了可能已經(jīng)在在高分辨率視頻中運(yùn)動(dòng)偽影之外)。

發(fā)明內(nèi)容

一般而言，本發(fā)明公開了用于內(nèi)容自適應(yīng)的分辨率增強(qiáng)的裝置、系統(tǒng)和方法。具體地，將高分辨率視頻流分解成相對(duì)彼此像素偏移、但與高分辨率視頻流相同和/或相似的縱橫比的多個(gè)較低分辨率子流。對(duì)每個(gè)子流應(yīng)用不同的視頻增強(qiáng)濾波器以增強(qiáng)每個(gè)子流中不同類型的特性，例如運(yùn)動(dòng)目標(biāo)、靜止目標(biāo)、文本等；不同視頻增強(qiáng)濾波器的應(yīng)用導(dǎo)致多個(gè)子流中的每個(gè)生成多個(gè)增強(qiáng)子幀流。對(duì)于每個(gè)子流，一個(gè)或多個(gè)所述增強(qiáng)子幀流合并成相應(yīng)輸出子幀流；例如，在一個(gè)具有運(yùn)動(dòng)目標(biāo)的區(qū)域和其他沒有運(yùn)動(dòng)目標(biāo)的區(qū)域的視頻流中，具有增強(qiáng)的運(yùn)動(dòng)目標(biāo)的第一增強(qiáng)子幀流的一部分與具有增強(qiáng)的靜止目標(biāo)的第二增強(qiáng)子幀流的一部分合并，以生成相應(yīng)輸出子幀流。每個(gè)相應(yīng)輸出子幀流(例如多個(gè)低分辨率子流中的每一個(gè))由一個(gè)或更多投影儀投影以將相應(yīng)輸出子幀流合并成更高分辨率的投影視頻流。例如，每個(gè)投影儀用不同的像素配準(zhǔn)以投影相應(yīng)輸出子幀流，相應(yīng)輸出子幀流在它們投影到的表面上合并形成與原始高分辨率視頻流類似分辨率的更高分辨率視頻流。或者，相應(yīng)輸出子幀流可以以其他方式合并，例如使用振動(dòng)顯示裝置(vibrating display device)和/或具有光機(jī)械移位器(opto-mechanical shifters)的顯示器和/或投影儀。

在本說明書中，元件可以被描述為“配置以”執(zhí)行一個(gè)或多個(gè)功能或“配置用于”這些功能。一般來說，配置以執(zhí)行或配置用于執(zhí)行一種功能的元件能夠執(zhí)行該功能，或者適用于執(zhí)行該功能，或適應(yīng)于執(zhí)行該功能，或者可以用來執(zhí)行該功能，或者以其他方式能夠執(zhí)行該功能。

應(yīng)當(dāng)理解的是，就本發(fā)明的目的而言，“X，Y和Z中的至少一個(gè)”和“X，Y和Z中的一個(gè)或多個(gè)”的表述可以被解釋為僅X，僅Y，僅Z，或X、Y和Z中的兩個(gè)或多個(gè)的任意組合(例如，XYZ，XY，YZ，XZ等)。類似的邏輯可以應(yīng)用于任何情況下出現(xiàn)的兩個(gè)或多個(gè)的“至少一個(gè)...”和“一個(gè)或多個(gè)...”的表述。