[發(fā)明專利]一種在線教育直播回放方法和系統(tǒng)

有效

• 申請?zhí)枺?/td>: 202210716485.9
• 申請日: 2022-06-23
• 公開（公告）號: CN114885187B
• 公開（公告）日: 2023-08-08
• 發(fā)明（設(shè)計(jì)）人: 朱立平;黃琛
• 申請（專利權(quán)）人: 深圳市必提教育科技有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/231;H04N21/433;H04N21/472;G06V20/40;G06V40/10;G06V40/20;G06V10/764;G06F16/33;G06F16/35;G06N3/0464;G06N20/00;G09B5/06;G0
• 代理公司: 深圳漢林匯融知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44850
• 代理人: 吳洪波

1.一種在線教育直播回放方法，其特征在于，包括：

在直播過程中確定已經(jīng)啟動(dòng)在后臺(tái)對直播進(jìn)行錄制；

確定講師在直播過程中做出了預(yù)定行為，其中，所述預(yù)定行為是預(yù)先約定好的行為；

記錄所述講師做出所述預(yù)定行為的第一時(shí)間，并且查找所述預(yù)定行為對應(yīng)的指令；

在對所述直播進(jìn)行錄制結(jié)束之后，生成視頻文件，其中，所述視頻文件是對所述直播錄制后得到的視頻文件；

在所述視頻文件的時(shí)間軸中查找所述第一時(shí)間對應(yīng)的時(shí)間點(diǎn)，在查找到的時(shí)間點(diǎn)增加所述預(yù)定行為對應(yīng)的指令的指令標(biāo)記，其中，所述指令標(biāo)記用于對所述視頻文件的回放進(jìn)行控制；所述指令包括第一指令，其中，所述第一指令用于指示暫停播放當(dāng)前回放的視頻文件，調(diào)用另一個(gè)視頻文件進(jìn)行播放；在確定所述講師在直播過程中做出對應(yīng)與所述第一指令的行為之后，獲取所述講師調(diào)用的另一視頻文件；將所述另一視頻文件進(jìn)行保存在視頻回放服務(wù)器中，其中，所述視頻回放服務(wù)器上用于保存回放的視頻文件；獲取所述另一視頻文件在所述視頻回放服務(wù)器中的存儲(chǔ)地址；在所述第一指令中增加所述存儲(chǔ)地址，在回放到具有所述第一指令的指標(biāo)標(biāo)記的時(shí)間點(diǎn)時(shí)，暫停回放錄制的視頻文件，根據(jù)所述存儲(chǔ)地址調(diào)用所述另一視頻文件，并播放所述另一視頻文件，在所述另一視頻文件播放完畢之后，繼續(xù)回放錄制的所述視頻文件；在進(jìn)行第一次回放時(shí)，對回放過程進(jìn)行錄制得到第三視頻文件，所述第三視頻文件對回放增加指令標(biāo)記后的視頻文件進(jìn)行錄制得到的文件；將所述第三視頻文件保存在所述視頻回放服務(wù)器中；在接收到回放請求時(shí)，獲取所述回放請求的IP地址并保存該IP地址，判斷來自所述IP地址的所述回放請求為第幾次回放，在不是第一次回放的情況下，從所述視頻回放服務(wù)器中獲取所述第三視頻文件，并使用所述第三視頻文件進(jìn)行回放；在對所述直播進(jìn)行錄制結(jié)束之后，生成視頻文件之后，對視頻文件進(jìn)行復(fù)制得到第一視頻文件和第二視頻文件，其中，所述第一視頻文件和第二視頻文件內(nèi)容相同；對第二視頻文件進(jìn)行保存作為原始文件；對第一視頻文件查找所述第一時(shí)間對應(yīng)的時(shí)間點(diǎn)，在查找到的時(shí)間點(diǎn)增加所述預(yù)定行為對應(yīng)的指令的指令標(biāo)記，其中，所述指令標(biāo)記用于對所述視頻文件的回放進(jìn)行控制；在進(jìn)行回訪的界面提供選擇回放第一視頻文件或者選擇回放第二視頻文件，在選擇回放所述第一視頻文件時(shí)，回放到具有指令標(biāo)記的時(shí)間點(diǎn)時(shí)，根據(jù)所述指令標(biāo)記所對應(yīng)的指令進(jìn)行播放控制；在選擇回放所述第二視頻文件時(shí)，對所述第二視頻文件進(jìn)行完整回放；

在回放增加指令標(biāo)記后的視頻文件時(shí)，回放到具有指令標(biāo)記的時(shí)間點(diǎn)時(shí)，根據(jù)所述指令標(biāo)記所對應(yīng)的指令進(jìn)行播放控制。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，確定講師在直播過程中做出了預(yù)定行為包括：

對所述講師在直播過程中的語音進(jìn)行提取，確定所述講師說出了預(yù)先配置的關(guān)鍵詞或者關(guān)鍵句；

在確定所述講師說出了所述關(guān)鍵詞或者關(guān)鍵句之后，對所述講師做出的動(dòng)作進(jìn)行識(shí)別；

在識(shí)別出所述講師做出預(yù)先配置的多個(gè)動(dòng)作中的之一時(shí)，確定所述講師在直播過程中做出了預(yù)定行為。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，對所述講師在直播過程中的語音進(jìn)行提取確定所述講師說出了預(yù)先配置的關(guān)鍵詞包括：

將所述講師在直播過程中錄制下來的語音輸入到第一機(jī)器學(xué)習(xí)模型中，其中，所述第一機(jī)器模型是使用多組第一訓(xùn)練數(shù)據(jù)訓(xùn)練得到的，每組第一訓(xùn)練數(shù)據(jù)均包括一段語音和該語音對應(yīng)的文本；

從所述第一機(jī)器學(xué)習(xí)模型中獲取所述第一機(jī)器學(xué)習(xí)模型輸出的文本；

從所述文本中查找是否存在所述預(yù)先配置的關(guān)鍵詞或關(guān)鍵句以確定所述講師是否說出了預(yù)先配置的關(guān)鍵詞或關(guān)鍵句。

4.根據(jù)權(quán)利要求2所述的方法，其特征在于，對所述講師做出的動(dòng)作進(jìn)行識(shí)別包括：

在確定所述講師說出了所述關(guān)鍵詞或關(guān)鍵句之后，從直播錄制得到的視頻文件中復(fù)制出預(yù)定時(shí)長的第一視頻，其中，所述第一視頻的起點(diǎn)是識(shí)別出所述關(guān)鍵詞或關(guān)鍵句的時(shí)間點(diǎn)，所述第一視頻的時(shí)長為預(yù)定時(shí)長，所述預(yù)定時(shí)長為預(yù)先配置的；

從所述第一視頻中提取關(guān)鍵幀，判斷提取得到的關(guān)鍵幀中是否包括預(yù)先配置的多個(gè)動(dòng)作中的至少之一，以對所述講師做出的動(dòng)作進(jìn)行識(shí)別。