[發(fā)明專利]一種在線教育直播回放方法和系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 202210716485.9
• 申請(qǐng)日: 2022-06-23
• 公開（公告）號(hào): CN114885187B
• 公開（公告）日: 2023-08-08
• 發(fā)明（設(shè)計(jì)）人: 朱立平;黃琛
• 申請(qǐng)（專利權(quán)）人: 深圳市必提教育科技有限公司
• 主分類號(hào): H04N21/2187
• 分類號(hào): H04N21/2187;H04N21/231;H04N21/433;H04N21/472;G06V20/40;G06V40/10;G06V40/20;G06V10/764;G06F16/33;G06F16/35;G06N3/0464;G06N20/00;G09B5/06;G0
• 代理公司: 深圳漢林匯融知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44850
• 代理人: 吳洪波

本申請(qǐng)公開了一種在線教育直播回放方法和系統(tǒng)，該方法包括：確定講師在直播過程中做出了預(yù)定行為；記錄講師做出預(yù)定行為的第一時(shí)間，查找預(yù)定行為對(duì)應(yīng)的指令；在對(duì)直播進(jìn)行錄制結(jié)束之后生成視頻文件；在視頻文件的時(shí)間軸中查找第一時(shí)間對(duì)應(yīng)的時(shí)間點(diǎn)，在查找到的時(shí)間點(diǎn)增加預(yù)定行為對(duì)應(yīng)的指令的指令標(biāo)記；在回放增加指令標(biāo)記后的視頻文件回放到具有指令標(biāo)記的時(shí)間點(diǎn)時(shí)，根據(jù)指令標(biāo)記所對(duì)應(yīng)的指令進(jìn)行播放控制。通過本申請(qǐng)解決了現(xiàn)有技術(shù)中對(duì)講師在直播時(shí)進(jìn)行的影響直播回放的操作需要人工來進(jìn)行記錄和標(biāo)識(shí)所導(dǎo)致效率低的問題，能夠根據(jù)講師在直播過程中做出的預(yù)定行為自動(dòng)在回放中增加指令標(biāo)記來對(duì)回放進(jìn)行控制，提高了視頻回放的編輯效率。

技術(shù)領(lǐng)域

本申請(qǐng)涉及到直播領(lǐng)域，具體而言，涉及一種在線教育直播回放方法和系統(tǒng)。

背景技術(shù)

隨著直播技術(shù)的快速發(fā)展，用戶越來越多通過網(wǎng)絡(luò)觀看各種直播節(jié)目。但是，由于直播的特殊性，用戶一旦錯(cuò)過直播的時(shí)間點(diǎn)，就無法再進(jìn)行回看，只能等到直播完之后以回放方式來進(jìn)行觀看。

在在線教育的直播過程中，講師需要進(jìn)行相應(yīng)的操作，例如講師停留幾分鐘的時(shí)間來等到學(xué)習(xí)者完成相應(yīng)的任務(wù)，又例如，講師需要播放另一段視頻等等。這些操作均會(huì)在時(shí)間軸上打破直播錄制后的視頻文件的完整性，因此，對(duì)于這種情況的出現(xiàn)，需要進(jìn)行直播的工作人員與講師來進(jìn)行配合，記錄講師進(jìn)行相應(yīng)操作的時(shí)間，然后在后期對(duì)視頻文件進(jìn)行編輯的時(shí)候根據(jù)工作人員人工記錄下的時(shí)間點(diǎn)進(jìn)行剪輯操作。這種需要人工配合進(jìn)行相應(yīng)時(shí)間點(diǎn)記錄，效率比較低而且容易出現(xiàn)錯(cuò)誤。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供了一種在線教育直播回放方法和系統(tǒng)，以至少解決現(xiàn)有技術(shù)中對(duì)講師在直播時(shí)進(jìn)行的影響直播回放的操作需要人工來進(jìn)行記錄和標(biāo)識(shí)所導(dǎo)致效率低容易出錯(cuò)的問題。

根據(jù)本申請(qǐng)的一個(gè)方面，提供了一種在線教育直播回放方法，包括：在直播過程中確定已經(jīng)啟動(dòng)在后臺(tái)對(duì)直播進(jìn)行錄制；確定講師在直播過程中做出了預(yù)定行為，其中，所述預(yù)定行為是預(yù)先約定好的行為；記錄所述講師做出所述預(yù)定行為的第一時(shí)間，并且查找所述預(yù)定行為對(duì)應(yīng)的指令；在對(duì)所述直播進(jìn)行錄制結(jié)束之后，生成視頻文件，其中，所述視頻文件是對(duì)所述直播錄制后得到的視頻文件；在所述視頻文件的時(shí)間軸中查找所述第一時(shí)間對(duì)應(yīng)的時(shí)間點(diǎn)，在查找到的時(shí)間點(diǎn)增加所述預(yù)定行為對(duì)應(yīng)的指令的指令標(biāo)記，其中，所述指令標(biāo)記用于對(duì)所述視頻文件的回放進(jìn)行控制；在回放增加指令標(biāo)記后的視頻文件時(shí)，回放到具有指令標(biāo)記的時(shí)間點(diǎn)時(shí)，根據(jù)所述指令標(biāo)記所對(duì)應(yīng)的指令進(jìn)行播放控制。

進(jìn)一步地，確定講師在直播過程中做出了預(yù)定行為包括：對(duì)所述講師在直播過程中的語音進(jìn)行提取，確定所述講師說出了預(yù)先配置的關(guān)鍵詞或者關(guān)鍵句；在確定所述講師說出了所述關(guān)鍵詞或者關(guān)鍵句之后，對(duì)所述講師做出的動(dòng)作進(jìn)行識(shí)別；在識(shí)別出所述講師做出預(yù)先配置的多個(gè)動(dòng)作中的之一時(shí)，確定所述講師在直播過程中做出了預(yù)定行為。

進(jìn)一步地，對(duì)所述講師在直播過程中的語音進(jìn)行提取確定所述講師說出了預(yù)先配置的關(guān)鍵詞包括：將所述講師在直播過程中錄制下來的語音輸入到第一機(jī)器學(xué)習(xí)模型中，其中，所述第一機(jī)器學(xué)習(xí)模型是使用多組第一訓(xùn)練數(shù)據(jù)訓(xùn)練得到的，每組第一訓(xùn)練數(shù)據(jù)均包括一段語音和該語音對(duì)應(yīng)的文本；從所述第一機(jī)器學(xué)習(xí)模型中獲取所述第一機(jī)器學(xué)習(xí)模型輸出的文本；從所述文本中查找是否存在所述預(yù)先配置的關(guān)鍵詞或關(guān)鍵句以確定所述講師是否說出了預(yù)先配置的關(guān)鍵詞或關(guān)鍵句。

進(jìn)一步地，對(duì)所述講師做出的動(dòng)作進(jìn)行識(shí)別包括：在確定所述講師說出了所述關(guān)鍵詞或關(guān)鍵句之后，從直播錄制得到的視頻文件中復(fù)制出預(yù)定時(shí)長(zhǎng)的第一視頻，其中，所述第一視頻的起點(diǎn)是識(shí)別出所述關(guān)鍵詞或關(guān)鍵句的時(shí)間點(diǎn)，所述第一視頻的時(shí)長(zhǎng)為預(yù)定時(shí)長(zhǎng)，所述預(yù)定時(shí)長(zhǎng)為預(yù)先配置的；從所述第一視頻中提取關(guān)鍵幀，判斷提取得到的關(guān)鍵幀中是否包括預(yù)先配置的多個(gè)動(dòng)作中的至少之一，以對(duì)所述講師做出的動(dòng)作進(jìn)行識(shí)別。