[發(fā)明專利]一種基于VR技術(shù)的遠程在線教育系統(tǒng)

有效

• 申請?zhí)枺?/td>: 202210060213.8
• 申請日: 2022-01-19
• 公開（公告）號: CN114385013B
• 公開（公告）日: 2022-09-16
• 發(fā)明（設(shè)計）人: 吳佳文
• 申請（專利權(quán)）人: 英才（廣州）在線教育科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06T19/00;G06V40/10;G06V40/16;G06V40/20
• 代理公司: 北京冠和權(quán)律師事務(wù)所 11399
• 代理人: 陳彥朝

1.一種基于VR技術(shù)的遠程在線教育系統(tǒng)，其特征在于，包括：

教師終端，用于供教師進行授課，并在教師授課過程中采集教師的授課板書和授課音頻；

傳輸模塊，用于將所述授課板書和所述授課音頻傳輸?shù)教幚砟K；

所述處理模塊，用于建立虛擬授課場景，將所述授課板書和所述授課音頻進行同步處理后輸入到所述虛擬授課場景，構(gòu)建同步授課場景；

學(xué)生終端，用于接受并播放所述同步授課場景；

所述學(xué)生終端，包括：

顯示單元，用于顯示所述同步授課場景中的虛擬圖畫；

播放單元，用于播放所述同步授課場景中的音頻；

讀寫單元，用于供學(xué)生進行書寫和閱讀，并在指定情況下采集對應(yīng)學(xué)生的閱讀書寫狀況傳輸?shù)剿鼋處熃K端；

采集單元，用于獲取對應(yīng)學(xué)生的當(dāng)前姿態(tài)；

識別單元，用于獲取所述當(dāng)前姿態(tài)，建立對應(yīng)的虛擬動作狀態(tài)，并將所述虛擬動作狀態(tài)傳輸?shù)剿鼋處熃K端；

識別單元，用于根據(jù)所述當(dāng)前姿態(tài)，建立對應(yīng)的虛擬動作狀態(tài)，包括：

所述識別單元，用于獲取授課單元的課件，獲取接受課程學(xué)生的年級，并在預(yù)設(shè)年級-年齡列表中獲取接受課程學(xué)生的年齡范圍；

在所述當(dāng)前姿態(tài)中獲取對應(yīng)學(xué)生的頭部裝飾物特征、衣物色彩特征，判斷所述學(xué)生的性別；

根據(jù)所述年齡范圍以及對應(yīng)的性別構(gòu)建初級虛擬人物；

在所述當(dāng)前姿態(tài)中篩選一幀含有學(xué)生面部的第一圖像，并在所述第一圖像上獲取對應(yīng)面部子圖像；

將所述面部子圖像輸入到預(yù)設(shè)骨骼框架中，獲取所述面部子圖像中的骨骼點；

根據(jù)每一所述骨骼點在所述面部子圖像上的位置，為每一所述骨骼點構(gòu)建對應(yīng)的骨骼調(diào)節(jié)參數(shù)；

在所述面部子圖像上標(biāo)記額頭骨骼點和下巴骨骼點，連接所述額頭骨骼點和下巴骨骼點，將所述面部子圖像劃分為左圖像與右圖像；

分別將所述左圖像和右圖像進行軸對稱，獲取對應(yīng)的第一檢驗圖像、第二檢驗圖像；

獲取所述第一檢驗圖像上的五官骨骼點，建立第一五官合集；

獲取所述第二檢驗圖像上的五官骨骼點，建立第二五官合集；

利用預(yù)設(shè)匹配順序為所述第一五官合集中的每一五官匹配對應(yīng)的第一虛擬五官；

利用預(yù)設(shè)匹配順序為所述第二五官合集中的每一五官匹配對應(yīng)的第二虛擬五官；

根據(jù)所述第一虛擬五官、第二虛擬五官的對應(yīng)關(guān)系，建立五官匹配表格；

獲取剩余骨骼點在所述面部子圖像上的第一位置，建立特點參數(shù)；

同時，基于所述五官匹配表格建立對應(yīng)的面部融合層；

將同一五官對應(yīng)的第一虛擬五官、第二虛擬五官輸入到對應(yīng)面部融合層，將所述第一虛擬五官、第二虛擬器官進行五官融合，生成融合虛擬面部；

利用所述骨骼調(diào)節(jié)參數(shù)和所述特點參數(shù)調(diào)節(jié)所述融合虛擬面部，將調(diào)節(jié)后的融合虛擬面部輸入到所述初級虛擬人物的面部區(qū)域，建立中級虛擬人物；

根據(jù)所述當(dāng)前姿態(tài)持續(xù)獲取對應(yīng)學(xué)生的手位置、腳位置，獲取所述學(xué)生的虛擬當(dāng)前動作；

將所述融合虛擬面部和所述虛擬當(dāng)前動作輸入到所述中級虛擬人物對應(yīng)的位置上，建立對應(yīng)的虛擬人物。

2.如權(quán)利要求1所述的一種基于VR技術(shù)的遠程在線教育系統(tǒng)，其特征在于，所述教師終端，包括：

授課單元，用于供教師提前輸入課件，同時供教師在所述課件上進行書寫，生成當(dāng)前授課板書；

圖像采集單元，用于采集所述授課單元上的當(dāng)前授課板書；

音頻采集單元，用于采集教師的授課音頻；

執(zhí)行單元，用于供教師查看學(xué)生學(xué)習(xí)情況。

3.如權(quán)利要求1所述的一種基于VR技術(shù)的遠程在線教育系統(tǒng)，其特征在于，所述處理模塊，包括：

場景處理單元，用于供教師選擇授課場景，生成對應(yīng)的虛擬授課場景；

同步處理單元，用于將所述授課板書和所述授課音頻在同一時間域中展開，建立同步狀態(tài)；

綜合處理單元，用于將所述同步狀態(tài)輸入到所述虛擬授課場景中，構(gòu)建同步授課場景。