[發(fā)明專利]一種濾波360度視頻邊界的方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201780037830.3
• 申請(qǐng)日: 2017-07-14
• 公開（公告）號(hào): CN109716766B
• 公開（公告）日: 2021-02-23
• 發(fā)明（設(shè)計(jì)）人: 許曉中;劉杉
• 申請(qǐng)（專利權(quán)）人: 聯(lián)發(fā)科技股份有限公司
• 主分類號(hào): H04N19/117
• 分類號(hào): H04N19/117;H04N19/136;H04N19/182;H04N19/86;G06T3/00
• 代理公司: 北京市萬慧達(dá)律師事務(wù)所 11111
• 代理人: 王蕊;白華勝

本發(fā)明提供一種用于編碼或者解碼360度虛擬現(xiàn)實(shí)視頻的視頻系統(tǒng)。該系統(tǒng)執(zhí)行濾波操作以減少全向圖像的投影圖像中的編碼偽影和非連續(xù)性。該視頻系統(tǒng)確定該投影圖像的第一邊緣和第二邊緣。該第一邊緣和該第二邊緣物理上相關(guān)聯(lián)而作為該全向圖像中的公共邊緣，但在該投影圖像中不是物理連接。該系統(tǒng)基于位于該第一邊緣附近的第一像素集和位于第二邊緣附近的第二像素集計(jì)算濾波像素集。

交叉引用

本發(fā)明主張?jiān)?016年07月15日提出的申請(qǐng)?zhí)枮?2/362,613的美國臨時(shí)專利申請(qǐng)的優(yōu)先權(quán)，主張?jiān)?016年09月08日提出的申請(qǐng)?zhí)枮?2/384,768的美國臨時(shí)專利申請(qǐng)的優(yōu)先權(quán)，主張?jiān)?017年07月12日提出的申請(qǐng)?zhí)枮?5/647,630的美國臨時(shí)專利申請(qǐng)的優(yōu)先權(quán)，其內(nèi)容以引用方式整體并入本文中。

技術(shù)領(lǐng)域

本發(fā)明涉及視頻處理。更具體而言，本發(fā)明涉及一種濾波圖像以用于360度虛擬現(xiàn)實(shí)(360-degree virtual reality，360VR)視頻呈現(xiàn)的方法。

背景技術(shù)

除非此處另有說明外，本部分所描述的方法相對(duì)于權(quán)利要求而言不是現(xiàn)有技術(shù)，并且本部分包含的內(nèi)容不被承認(rèn)是現(xiàn)有技術(shù)。

360度虛擬現(xiàn)實(shí)是變化的、增強(qiáng)的或者替代的環(huán)境的視聽模擬。視覺實(shí)境視頻環(huán)繞著用戶，使得用戶在向任何方向或者在任何任意視野角度上朝周圍看時(shí)，感覺他或者她處于現(xiàn)實(shí)生活中。360度虛擬現(xiàn)實(shí)視頻產(chǎn)生獨(dú)特的高質(zhì)量且高分辨率的全景視頻，以在用于各種應(yīng)用的打印和全景虛擬旅游產(chǎn)業(yè)中的使用，例如，娛樂、導(dǎo)向訓(xùn)練(pilot training)、手術(shù)和在空間或者深水中的勘探。

發(fā)明內(nèi)容

以下發(fā)明內(nèi)容僅是說明性的，不打算以任何方式加以限制。也就是說，以下發(fā)明內(nèi)容被提供以介紹此處所描述的新且非顯而易見的技術(shù)的概念、重點(diǎn)、好處和優(yōu)勢(shì)。選擇而不是所有的實(shí)施方式在下面的詳細(xì)說明中進(jìn)行進(jìn)一步描述。因此，以下發(fā)明內(nèi)容不用于確定所要求主題的本質(zhì)特征，也不用于確定所要求主題的范圍。

本發(fā)明的一些實(shí)施例提供了一種用于編碼或者解碼360度虛擬現(xiàn)實(shí)視頻的視頻系統(tǒng)。該系統(tǒng)執(zhí)行濾波操作以減少全向圖像的投影圖像中的編碼偽影和非連續(xù)性。該視頻系統(tǒng)確定該投影圖像的第一邊緣和第二邊緣。該第一邊緣和該第二邊緣物理上相關(guān)聯(lián)而作為該全向圖像中的公共邊緣，但在該投影圖像中不是物理連接。該系統(tǒng)然后基于位于該第一邊緣附近的第一像素(pixels)集和位于第二邊緣附近的第二像素集計(jì)算濾波像素集本發(fā)明的一些實(shí)施例提供了一種用于編碼或者解碼360度虛擬現(xiàn)實(shí)視頻的視頻系統(tǒng)。該系統(tǒng)執(zhí)行濾波操作以減少全向圖像的投影圖像中的編碼偽影和非連續(xù)性。該視頻系統(tǒng)確定該投影圖像的第一邊緣和第二邊緣。該第一邊緣和該第二邊緣物理上相關(guān)聯(lián)而作為該全向圖像中的公共邊緣，但在該投影圖像中不是物理連接。該系統(tǒng)然后基于位于該第一邊緣附近的第一像素集和位于第二邊緣附近的第二像素集計(jì)算濾波像素集。

在一些實(shí)施例中，該全向圖像是具有多個(gè)面的多面體，并且，該投影圖像包括該多面體的該多個(gè)面的布局。該第一邊緣是該多面體的第一面的邊緣，第二邊緣是該多面體的第二面的邊緣，該第一像素集位于該多面體的該第一面中，且該第二像素集位于該多面體的該第二面中。作為其濾波操作的一部分，該視頻系統(tǒng)根據(jù)該第一面和該第二面之間的幾何關(guān)系重新排列該多面體的第二面的多個(gè)像素。該幾何關(guān)系由該投影圖像中的該多面體的該多個(gè)面的布局定義。重新排列該第二面的多個(gè)像素可以包括基于該第一面和該第二面之間的該幾何關(guān)系旋轉(zhuǎn)或者跳過該第二面的多個(gè)像素。在一些實(shí)施例中，該第二面的該重新排列的多個(gè)像素被存儲(chǔ)在該投影圖像的與該第一邊緣相鄰的空白區(qū)域。在一些實(shí)施例中，該第二面的該重新排列的多個(gè)像素被存儲(chǔ)在臨時(shí)緩存器中，其中該臨時(shí)緩存器不存儲(chǔ)來自于該投影圖像的空白區(qū)域的多個(gè)像素。該視頻系統(tǒng)基于該第一面的多個(gè)像素和該第二面的該重新排列的多個(gè)像素計(jì)算用于該第一像素集和該第二像素集的濾波值集。

附圖說明