[發(fā)明專利]一種會(huì)議信息智能檢索方法

有效

• 申請(qǐng)?zhí)枺?/td>: 202110603641.6
• 申請(qǐng)日: 2021-05-31
• 公開(kāi)（公告）號(hào): CN113326387B
• 公開(kāi)（公告）日: 2022-12-13
• 發(fā)明（設(shè)計(jì)）人: 孟強(qiáng)祥;田俊麟;宋昱
• 申請(qǐng)（專利權(quán)）人: 引智科技（深圳）有限公司
• 主分類號(hào): G06F16/483
• 分類號(hào): G06F16/483;G06F16/438
• 代理公司: 北京棘龍知識(shí)產(chǎn)權(quán)代理有限公司 11740
• 代理人: 李改平

本發(fā)明公開(kāi)了一種會(huì)議信息智能檢索方法，涉及會(huì)議記錄技術(shù)領(lǐng)域，包括以下步驟：會(huì)議信息記錄，全程實(shí)時(shí)以多媒體方式記錄、提取會(huì)議視頻內(nèi)容的音頻流，再將音頻流發(fā)送到語(yǔ)音識(shí)別模塊將語(yǔ)音轉(zhuǎn)換為文字信息并存儲(chǔ)、按會(huì)議進(jìn)行的時(shí)間進(jìn)行標(biāo)記，輸入文本信息或者語(yǔ)音信息進(jìn)行查詢，并與先前存儲(chǔ)的會(huì)議信息匹配、查詢，并返回對(duì)應(yīng)的音頻或視頻信息。本發(fā)明通過(guò)以多媒體方式記錄會(huì)議信息，通過(guò)多級(jí)處理，對(duì)檢索信息與會(huì)議信息進(jìn)行匹配、查詢，當(dāng)匹配到會(huì)議記錄，則顯示對(duì)應(yīng)記錄所在時(shí)間軸的信息，同時(shí)播放讓用戶直觀聽(tīng)到當(dāng)時(shí)會(huì)議說(shuō)話的音頻信息，從而使得會(huì)議后期分析以及了解更加便捷，極大的提升了會(huì)議記錄檢索的體驗(yàn)。

技術(shù)領(lǐng)域

本發(fā)明涉及會(huì)議記錄技術(shù)領(lǐng)域，具體涉及一種會(huì)議信息智能檢索方法。

背景技術(shù)

隨著技術(shù)進(jìn)步，很多自動(dòng)記錄會(huì)議內(nèi)容的產(chǎn)品不斷被推出。從最早的錄音機(jī)，到自動(dòng)化語(yǔ)音轉(zhuǎn)文字的設(shè)備。而這些記錄方法記錄的內(nèi)容會(huì)很多，因?yàn)橥_(kāi)會(huì)都會(huì)持續(xù)幾個(gè)小時(shí)。從而導(dǎo)致查閱或者檢索會(huì)議記錄費(fèi)時(shí)費(fèi)力。雖然有些高級(jí)產(chǎn)品按照人的生物特征如聲紋、指紋等方式為會(huì)議參與者加注標(biāo)簽，之后通過(guò)標(biāo)簽快速定位會(huì)議記錄內(nèi)容，甚至使用地理信息、行政級(jí)別的方式標(biāo)注，但還是有不夠人性化的缺點(diǎn)，例如：會(huì)議記錄無(wú)法按照內(nèi)容進(jìn)行查詢和檢索，查詢記錄的方式單一，只能人為的回看，回聽(tīng)，不能快速定位。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種會(huì)議信息智能檢索方法，以解決現(xiàn)有技術(shù)中的上述不足之處。

為了實(shí)現(xiàn)上述目的，本發(fā)明提供如下技術(shù)方案：一種會(huì)議信息智能檢索方法，包括以下步驟：

步驟一、會(huì)議信息記錄，全程實(shí)時(shí)以多媒體方式記錄，包含會(huì)議整個(gè)視頻、音頻以及文本等形式的歸檔；

步驟二、提取會(huì)議視頻內(nèi)容的音頻流，從視頻流提取音頻流通常使用解復(fù)用(demux)將音頻流從媒體文件或者流文件的容器(Container)復(fù)制一份出來(lái)，而原始視頻文件保持不變，再將音頻流發(fā)送到語(yǔ)音識(shí)別模塊將語(yǔ)音轉(zhuǎn)換為文字信息并存儲(chǔ)；

步驟三、對(duì)會(huì)議記錄的視頻、音頻、文本按會(huì)議進(jìn)行的時(shí)間進(jìn)行標(biāo)記，通過(guò)說(shuō)話檢測(cè)技術(shù)或者靜音檢測(cè)技術(shù)為起始和結(jié)束判斷依據(jù)，再進(jìn)一步結(jié)合NLP(自然語(yǔ)言處理)的上下文判斷技術(shù)包括且不限于SBD(Sentence boundary disambiguation)以及粒度更細(xì)小的WS(Word Segmentation)將說(shuō)話內(nèi)容按照句子為單元，或者詞為單元進(jìn)行處理，處理的后的會(huì)議記錄內(nèi)容被分別按句以及按詞添加標(biāo)記并存儲(chǔ)；

步驟四、用戶搜索會(huì)議記錄，輸入文本信息或者語(yǔ)音信息進(jìn)行查詢，若接收到語(yǔ)音信息，則通過(guò)語(yǔ)音轉(zhuǎn)文本模塊將語(yǔ)音轉(zhuǎn)換為文本，并與先前存儲(chǔ)的會(huì)議信息匹配、查詢，并返回對(duì)應(yīng)的音頻或視頻信息，并附帶語(yǔ)音轉(zhuǎn)換而成的文本信息；

步驟五、用戶在查看返回結(jié)果時(shí)，可以快速檢索上下文的記錄內(nèi)容，即用戶可同時(shí)查看被檢索時(shí)間段之前與之后的會(huì)議信息，且記錄內(nèi)容以文本、音頻或者視頻信息通過(guò)高亮展示給用戶，用戶可直觀的定位、選取以及修改對(duì)應(yīng)的內(nèi)容。

優(yōu)選的，所述步驟一中，如果會(huì)議為網(wǎng)絡(luò)視頻會(huì)議，則會(huì)議信息直接通過(guò)網(wǎng)絡(luò)獲取，如會(huì)議為非網(wǎng)絡(luò)會(huì)議，則通過(guò)錄音、錄像等多媒體設(shè)備將會(huì)議進(jìn)行錄制，并進(jìn)行提取轉(zhuǎn)換。

優(yōu)選的，所述步驟二中語(yǔ)音轉(zhuǎn)換的文字信息在存儲(chǔ)的同時(shí)，也可被用于實(shí)時(shí)會(huì)議字幕展示，以及被記錄。

優(yōu)選的，所述步驟三中標(biāo)記的時(shí)間間隔以音頻中包含說(shuō)話內(nèi)容的一句話、或者一個(gè)停頓為標(biāo)記。

優(yōu)選的，所述步驟三中被標(biāo)記的視頻段、音頻段以及文字段是分別設(shè)置時(shí)間順序表一一對(duì)應(yīng)存儲(chǔ)，其中視頻段按照時(shí)間順序被記錄在列表VSRL(Video SegmentsRecording List)中，音頻段按時(shí)間順序被記錄在列表SSRL(Speech Segments RecordingList)，文字段信息按時(shí)間順序記錄在列表TSRL(Text Segments Recording List)中。