[發(fā)明專利]人物圖像處理方法、裝置、相應(yīng)終端及存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 202010432534.7
• 申請日: 2020-05-20
• 公開（公告）號: CN111614925B
• 公開（公告）日: 2022-04-26
• 發(fā)明（設(shè)計）人: 謝新林;鄒超洋;張書瑞;何卓鵬
• 申請（專利權(quán)）人: 廣州視源電子科技股份有限公司
• 主分類號: H04N7/14
• 分類號: H04N7/14;H04N7/15;G06K9/62
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本申請公開了人物圖像處理方法、裝置、相應(yīng)終端及存儲介質(zhì)。該方法包括從攝像頭捕獲的當(dāng)前實景圖像幀中截取主講人的當(dāng)前人物圖像幀；根據(jù)當(dāng)前人物圖像幀結(jié)合預(yù)確定的基準(zhǔn)人物圖像及基準(zhǔn)卡通圖像，確定用于卡通化顯示主講人的當(dāng)前狀態(tài)形變信息；將當(dāng)前狀態(tài)形變信息反饋給聽講終端，以使聽講終端根據(jù)當(dāng)前狀態(tài)形變信息確定主講人對應(yīng)的當(dāng)前卡通圖像幀并顯示。利用該方法，主講終端側(cè)為主講人在聽講終端側(cè)的卡通化顯示提供了狀態(tài)形變信息，而在聽講終端側(cè)卡通化顯示主講人降低了主講人身份信息的泄漏風(fēng)險，同時也增強了視頻內(nèi)容活躍性的效果，且相比于現(xiàn)有高維圖像傳輸，本方案僅傳輸狀態(tài)形變信息，有效保證了網(wǎng)絡(luò)帶寬較低時云視頻的圖像傳輸質(zhì)量。

技術(shù)領(lǐng)域

本申請涉及圖像處理技術(shù)領(lǐng)域，尤其涉及人物圖像處理方法、裝置、相應(yīng)終端及存儲介質(zhì)。

背景技術(shù)

隨著科技的發(fā)展，手機、電腦等設(shè)備已成為人們?nèi)粘Ｉ钪袑崟r通訊必不可少的工具。其中，隨著高速的5G網(wǎng)絡(luò)投入應(yīng)用，云會議以及云課堂等云視頻業(yè)務(wù)也得到廣泛應(yīng)用，使得大家足不出戶就可享受到更多的云網(wǎng)絡(luò)資源。

目前的云視頻業(yè)務(wù)中，其業(yè)務(wù)模式中的視頻終端可以是作為主講人一方的主講終端，以及作為聽講人一方的聽講終端，且聽講終端可以為多個，現(xiàn)有的云視頻業(yè)務(wù)中，大多直接將主講方的真實人像直接展示給聽講方，相當(dāng)于主講人與聽講人通過云視頻業(yè)務(wù)的“坦誠相見”。

然而，在一些云課堂或者云會議等云視頻業(yè)務(wù)中，作為講課老師或者一個會議主講人的主講方擔(dān)心個人身份信息泄露并不想將自己的真實人像呈現(xiàn)給聽講方；同時，老師授課或者長時間的會議可能導(dǎo)致聽講方感到乏味無聊，使得云課堂或者云會議的效率大打折扣；此外，目前的云視頻業(yè)務(wù)中多為高清視頻圖像幀的傳輸，其對網(wǎng)絡(luò)帶寬的要求非常高，在網(wǎng)絡(luò)帶寬有限時將會影響云視頻的圖像傳輸質(zhì)量。

發(fā)明內(nèi)容

有鑒于此，本申請實施例提供了人物圖像處理方法、裝置、相應(yīng)終端及存儲介質(zhì)，實現(xiàn)了云視頻業(yè)務(wù)中主講一方的人物圖像在聽講一方的卡通化顯示。

第一方面，本申請實施例提供了一種人物圖像處理方法，應(yīng)用于主講終端，包括：

從攝像頭捕獲的當(dāng)前實景圖像幀中截取主講人的當(dāng)前人物圖像幀；

根據(jù)所述當(dāng)前人物圖像幀結(jié)合預(yù)確定的基準(zhǔn)人物圖像及基準(zhǔn)卡通圖像，確定用于卡通化顯示所述主講人的當(dāng)前狀態(tài)形變信息；

將所述當(dāng)前狀態(tài)形變信息反饋給聽講終端，以使所述聽講終端根據(jù)所述當(dāng)前狀態(tài)形變信息確定所述主講人對應(yīng)的當(dāng)前卡通圖像幀并顯示，其中，所述聽講終端與所述主講終端保持云視頻通信。

進一步地，所述根據(jù)所述當(dāng)前人物圖像幀結(jié)合預(yù)確定的基準(zhǔn)人物圖像及基準(zhǔn)卡通圖像，確定用于卡通化顯示所述主講人的當(dāng)前狀態(tài)形變信息，包括：

檢測所述當(dāng)前人物圖像幀中的關(guān)鍵點，形成相應(yīng)的當(dāng)前關(guān)鍵點序列；

根據(jù)所述當(dāng)前關(guān)鍵點序列，結(jié)合預(yù)確定的所述基準(zhǔn)人物圖像的人物圖像處理信息以及基準(zhǔn)卡通圖像的卡通圖像處理信息，確定用于卡通化顯示所述主講人的當(dāng)前狀態(tài)形變信息。

進一步地，所述檢測所述當(dāng)前人物圖像幀中的關(guān)鍵點，形成相應(yīng)的當(dāng)前關(guān)鍵點序列，包括：

對所述當(dāng)前人物圖像幀進行關(guān)鍵點檢測，形成包含第一設(shè)定個數(shù)人臉關(guān)鍵點以及第二設(shè)定個數(shù)標(biāo)識關(guān)鍵點的第一采集關(guān)鍵點序列；

對所述第一采集關(guān)鍵點序列進行關(guān)鍵點平滑處理，獲得所述當(dāng)前人物圖像幀的第一當(dāng)前關(guān)鍵點序列。

進一步地，所述人物圖像處理信息包括對所述基準(zhǔn)人物圖像基于第三設(shè)定個數(shù)關(guān)鍵點三角剖分形成的第一人物剖分數(shù)組，所述卡通圖像處理信息包括對所述基準(zhǔn)卡通圖像基于第三設(shè)定個數(shù)關(guān)鍵點三角剖分形成的第一卡通剖分數(shù)組，所述第三設(shè)定個數(shù)為所述第一設(shè)定個數(shù)與第二設(shè)定個數(shù)之和；