[發(fā)明專利]虛擬交互實(shí)現(xiàn)控制方法、裝置、計(jì)算機(jī)設(shè)備及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 201910064419.6
• 申請日: 2019-01-23
• 公開（公告）號: CN111476903A
• 公開（公告）日: 2020-07-31
• 發(fā)明（設(shè)計(jì)）人: 眭一帆
• 申請（專利權(quán)）人: 北京奇虎科技有限公司
• 主分類號: G06T19/00
• 分類號: G06T19/00;G06F3/01;G06F3/16
• 代理公司: 北京市立方律師事務(wù)所 11330
• 代理人: 劉延喜

本發(fā)明實(shí)施例公開了一種虛擬交互實(shí)現(xiàn)控制方法、裝置、計(jì)算機(jī)設(shè)備及存儲介質(zhì)，包括下述步驟：獲取與第一用戶端相對應(yīng)的第一用戶的交互信息，其中，交互信息包括第一用戶的圖像數(shù)據(jù)信息以及聲音數(shù)據(jù)信息；根據(jù)圖像數(shù)據(jù)信息和聲音數(shù)據(jù)信息進(jìn)行計(jì)算生成與交互信息相對應(yīng)的虛擬人物交互信息；根據(jù)預(yù)設(shè)的協(xié)同傳輸通道將虛擬人物交互信息發(fā)送至至少一個第二用戶端，以使至少一個第二用戶端同步展示虛擬人物交互信息。本發(fā)明實(shí)施例通過獲取第一用戶的圖像數(shù)據(jù)信息和聲音數(shù)據(jù)信息，計(jì)算生成虛擬人物交互信息，并發(fā)送至多個第二用戶端使得第二用戶端同步驅(qū)動虛擬人物的運(yùn)動和說話，能有效提高虛擬交互的真實(shí)感受程度，提高用戶體驗(yàn)。

技術(shù)領(lǐng)域

本發(fā)明實(shí)施例涉及電子技術(shù)領(lǐng)域，尤其是一種虛擬交互實(shí)現(xiàn)控制方法、裝置、計(jì)算機(jī)設(shè)備及存儲介質(zhì)。

背景技術(shù)

科技的進(jìn)步給人們的生活和工作帶來了巨大的便利，例如視頻會議系統(tǒng)，能方便處于不同地區(qū)的人通過視頻的方式進(jìn)行互動和溝通，而不用人們聚在同一個地方才能進(jìn)行會議。

但是，傳統(tǒng)的視頻會議主要是通過視頻圖像和語音的交流，會議者沒有坐在一起進(jìn)行會議的真實(shí)感受，參與會議的積極性不高，體驗(yàn)較差。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供一種通過虛擬人物同步用戶的動作和語音以增強(qiáng)真實(shí)感受的虛擬交互實(shí)現(xiàn)控制方法、裝置、計(jì)算機(jī)設(shè)備及存儲介質(zhì)。

為解決上述技術(shù)問題，本發(fā)明創(chuàng)造的實(shí)施例采用的一個技術(shù)方案是：提供一種虛擬交互實(shí)現(xiàn)控制方法，包括下述步驟：

獲取與第一用戶端相對應(yīng)的第一用戶的交互信息，其中，所述交互信息包括所述第一用戶的圖像數(shù)據(jù)信息以及聲音數(shù)據(jù)信息；

根據(jù)所述圖像數(shù)據(jù)信息和聲音數(shù)據(jù)信息進(jìn)行計(jì)算生成與所述交互信息相對應(yīng)的虛擬人物交互信息；

根據(jù)預(yù)設(shè)的協(xié)同傳輸通道將所述虛擬人物交互信息發(fā)送至至少一個第二用戶端，以使所述至少一個第二用戶端同步展示所述虛擬人物交互信息。

可選地，所述獲取與第一用戶端相對應(yīng)的第一用戶的交互信息的步驟，包括如下述步驟：

采集所述第一用戶的圖片信息，其中，所述圖片信息包括人體圖片和人臉圖片；

對所述人體圖片和人臉圖片分別進(jìn)行識別生成包括所述第一用戶的人體姿態(tài)信息和人臉表情信息的所述圖像數(shù)據(jù)信息。

可選地，所述對所述人體圖片和人臉圖片分別進(jìn)行識別生成包括所述第一用戶的人體姿態(tài)信息和人臉表情信息的所述圖像數(shù)據(jù)信息的步驟，包括如下述步驟：

將所述人體圖片和人臉圖片輸入至預(yù)設(shè)的深度學(xué)習(xí)檢測模型中，所深度學(xué)習(xí)檢測模型是訓(xùn)練至收斂的卷積神經(jīng)網(wǎng)絡(luò)模型；

獲取所述深度學(xué)習(xí)檢測模型輸出的分別與所述人體圖片和人臉圖片相對應(yīng)的人體姿態(tài)信息和人臉表情信息。

可選地，所述深度學(xué)習(xí)檢測模型包括分別用于識別人體圖片和人臉圖片的人體識別模型和人臉識別模型。

可選地，所述根據(jù)預(yù)設(shè)的協(xié)同傳輸通道將所述虛擬人物交互信息發(fā)送至至少一個第二用戶端，以使所述至少一個第二用戶端同步展示所述虛擬人物交互信息的步驟，包括如下述步驟：

獲取與所述第一用戶端關(guān)聯(lián)的所述至少一個第二用戶端的接口信息；

將所述接口信息和所述虛擬人物交互信息向預(yù)設(shè)的代理服務(wù)器轉(zhuǎn)發(fā)，以使所述代理服務(wù)器根據(jù)所述接口信息將所述虛擬人物交互信息轉(zhuǎn)發(fā)至所述至少一個第二用戶端。

可選地，所述根據(jù)預(yù)設(shè)的協(xié)同傳輸通道將所述虛擬人物交互信息發(fā)送至至少一個第二用戶端，以使所述至少一個第二用戶端同步展示所述虛擬人物交互信息的步驟之前，還包括如下述步驟：

獲取所述第一用戶端的網(wǎng)絡(luò)質(zhì)量信息；