[發(fā)明專利]基于視頻圖像分割優(yōu)化電視畫質(zhì)方法、裝置、終端及介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011181779.3
• 申請日: 2020-10-29
• 公開（公告）號: CN112351336A
• 公開（公告）日: 2021-02-09
• 發(fā)明（設(shè)計(jì)）人: 余海超
• 申請（專利權(quán)）人: 南京創(chuàng)維信息技術(shù)研究院有限公司;深圳創(chuàng)維-RGB電子有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;G06T7/11
• 代理公司: 深圳市君勝知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44268
• 代理人: 朱陽波

1.一種基于視頻圖像分割優(yōu)化電視畫質(zhì)方法，其特征在于，所述方法包括：

獲取待播放視頻流，其中，所述待播放視頻流為視頻播放前預(yù)加載的視頻流；

將所述預(yù)加載的視頻流中按不同物體場景進(jìn)行分割，分割出視頻流中同一畫面的不同物體，得到同一畫面分割出不同物體坐標(biāo)的視頻流；

對分割后的視頻流中不同物體坐標(biāo)區(qū)域設(shè)置對應(yīng)的畫質(zhì)優(yōu)化屬性，進(jìn)行畫質(zhì)優(yōu)化；

輸出優(yōu)化后的視頻流并播放顯示。

2.根據(jù)權(quán)利要求1所述的基于視頻圖像分割優(yōu)化電視畫質(zhì)方法，其特征在于，所述獲取待播放視頻流的步驟包括：

實(shí)時(shí)采集并獲取待播放視頻流；

將所述待播放視頻流進(jìn)行播放前的預(yù)加載，為預(yù)加載的視頻流。

3.根據(jù)權(quán)利要求1所述的基于視頻圖像分割優(yōu)化電視畫質(zhì)方法，其特征在于，所述將所述預(yù)加載的視頻流中按不同物體場景進(jìn)行分割，分割出視頻流中同一畫面的不同物體，得到同一畫面分割出不同物體坐標(biāo)的視頻流的步驟包括：

讀取所述預(yù)加載的視頻流；

將所述預(yù)加載的視頻流輸入至預(yù)先訓(xùn)練的視頻分割模型中按不同物體場景進(jìn)行分割，實(shí)時(shí)分割出視頻流中同一畫面的不同物體，得到同一畫面分割出不同物體坐標(biāo)的視頻流；

其中，所述視頻分割模型為基于同一畫面不同物體特征對應(yīng)的不同場景物體類別訓(xùn)練得到的。

4.根據(jù)權(quán)利要求3所述的基于視頻圖像分割優(yōu)化電視畫質(zhì)方法，其特征在于，所述預(yù)先訓(xùn)練的視頻分割模型通過以下步驟生成：

預(yù)先定義需要優(yōu)化的場景物體類別，根據(jù)類別下載視頻訓(xùn)練素材；

根據(jù)下載的視頻素材、通過標(biāo)注工具對視頻中的物體類別進(jìn)行分類標(biāo)注，分類標(biāo)注出不同的標(biāo)簽；

將分類標(biāo)注的視頻數(shù)據(jù)進(jìn)行輸出為模型輸入的數(shù)據(jù)源、進(jìn)行訓(xùn)練：分類標(biāo)注的視頻數(shù)據(jù)轉(zhuǎn)換為模型的訓(xùn)練數(shù)據(jù)進(jìn)行訓(xùn)練；

模型訓(xùn)練完成，轉(zhuǎn)換為智能設(shè)備系統(tǒng)支持的tflite模型，并進(jìn)行tflite模型轉(zhuǎn)換輸出，提供給設(shè)備加載識別。

5.根據(jù)權(quán)利要求1所述的基于視頻圖像分割優(yōu)化電視畫質(zhì)方法，其特征在于，所述將所述預(yù)加載的視頻流中按不同物體場景進(jìn)行分割，分割出視頻流中同一畫面的不同物體，得到同一畫面分割出不同物體坐標(biāo)的視頻流的步驟包括：

通過視頻分割的深度學(xué)習(xí)模型，通過視頻分割A(yù)I技術(shù)，訓(xùn)練不同視頻中不同的物體場景，生成預(yù)先訓(xùn)練的視頻分割模型，用于實(shí)時(shí)識別分割出當(dāng)前設(shè)備播放的視頻畫面中的物體坐標(biāo)。

6.根據(jù)權(quán)利要求1所述的基于視頻圖像分割優(yōu)化電視畫質(zhì)方法，其特征在于，所述對分割后的視頻流中不同物體坐標(biāo)區(qū)域設(shè)置對應(yīng)的畫質(zhì)優(yōu)化屬性，進(jìn)行畫質(zhì)優(yōu)化的步驟包括：

視頻播放時(shí)實(shí)時(shí)的分析出視頻中的物體場景，對分割后的視頻流中不同物體坐標(biāo)區(qū)域設(shè)置對應(yīng)的畫質(zhì)優(yōu)化屬性，根據(jù)不同的分割物體場景進(jìn)行局部分割針對性的畫質(zhì)調(diào)優(yōu)。

7.根據(jù)權(quán)利要求1所述的基于視頻圖像分割優(yōu)化電視畫質(zhì)方法，其特征在于，所述對分割后的視頻流中不同物體坐標(biāo)區(qū)域設(shè)置對應(yīng)的畫質(zhì)優(yōu)化屬性，進(jìn)行畫質(zhì)優(yōu)化的步驟還包括：

加載讀取視頻分割tflite模型轉(zhuǎn)型轉(zhuǎn)換后的模型，等待需要識別的視頻流；

如果當(dāng)前正在播放視頻，則獲取當(dāng)前播放的視頻流實(shí)時(shí)的轉(zhuǎn)換為模型的輸入數(shù)據(jù)傳輸?shù)揭曨l分割tflite模型中識別，根據(jù)當(dāng)前傳入的視頻流數(shù)據(jù)，實(shí)時(shí)分析出當(dāng)前視頻中訓(xùn)練過的物體的分類坐標(biāo)；

獲得到當(dāng)前的視頻經(jīng)過模型分析的結(jié)果后，把結(jié)果傳輸給視頻優(yōu)化模塊，對分割后的視頻流中不同物體坐標(biāo)區(qū)域設(shè)置對應(yīng)的畫質(zhì)優(yōu)化屬性，進(jìn)行畫質(zhì)優(yōu)化。