[發(fā)明專利]一種聲控建筑信息模型三維顯示系統(tǒng)和方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201911265714.4
• 申請(qǐng)日: 2019-12-11
• 公開（公告）號(hào): CN110889161B
• 公開（公告）日: 2022-02-18
• 發(fā)明（設(shè)計(jì)）人: 林佳瑞
• 申請(qǐng)（專利權(quán)）人: 清華大學(xué)
• 主分類號(hào): G06F30/13
• 分類號(hào): G06F30/13;G06F30/20;G06T17/00;G10L15/22;G10L15/26
• 代理公司: 北京紀(jì)凱知識(shí)產(chǎn)權(quán)代理有限公司 11245
• 代理人: 孫楠

1.一種聲控建筑信息模型三維顯示系統(tǒng)，其特征在于，包括：語音輸入模塊、語音識(shí)別及處理模塊、命令處理模塊和三維顯示模塊；

所述語音輸入模塊用于采集用戶語音，并將所述用戶語音以標(biāo)準(zhǔn)語音數(shù)據(jù)格式傳輸給所述語音識(shí)別及處理模塊；

所述語音識(shí)別及處理模塊將所述語音輸入模塊采集的所述用戶語音轉(zhuǎn)換成建筑信息模型能夠識(shí)別的命令，并將所述命令傳輸至所述命令處理模塊；

所述命令處理模塊對(duì)接收的所述命令進(jìn)行解析和執(zhí)行，并將所述命令的執(zhí)行結(jié)果傳輸至所述三維顯示模塊；

所述三維顯示模塊根據(jù)接收的所述命令的執(zhí)行結(jié)果，對(duì)所述建筑信息模型的三維顯示效果進(jìn)行更新與實(shí)時(shí)輸出；

所述語音識(shí)別及處理模塊包括建筑信息模型元數(shù)據(jù)庫，所述建筑信息模型元數(shù)據(jù)庫存儲(chǔ)建筑信息模型數(shù)據(jù)的元數(shù)據(jù)模型，所述元數(shù)據(jù)模型包括建筑信息模型中包含的數(shù)據(jù)實(shí)體及其類型、屬性，以及建筑信息模型元數(shù)據(jù)與所述三維顯示命令數(shù)據(jù)庫中三維顯示命令的對(duì)應(yīng)關(guān)系；

所述語音識(shí)別及處理模塊通用機(jī)器學(xué)習(xí)或深度學(xué)習(xí)的語音識(shí)別模型，實(shí)現(xiàn)用戶語音輸入向文字的轉(zhuǎn)換，并結(jié)合建筑信息模型元數(shù)據(jù)及三維顯示命令數(shù)據(jù)對(duì)語音輸入生成的文本進(jìn)行處理；將處理后的文本進(jìn)行語法分析，并對(duì)生成的語法樹進(jìn)行初步檢核，確保用戶語音輸入生成有效的三維顯示控制及交互命令。

2.根據(jù)權(quán)利要求1所述的聲控建筑信息模型三維顯示系統(tǒng)，其特征在于，所述語音識(shí)別及處理模塊包括三維顯示命令數(shù)據(jù)庫，所述三維顯示命令數(shù)據(jù)庫存儲(chǔ)有關(guān)建筑信息模型的三維顯示命令及命令相應(yīng)的操作對(duì)象。

3.根據(jù)權(quán)利要求1所述的聲控建筑信息模型三維顯示系統(tǒng)，其特征在于，所述命令處理模塊包括命令解析模塊和命令執(zhí)行模塊，所述命令解析模塊以所述語音識(shí)別及處理模塊的輸出命令為基礎(chǔ)，根據(jù)三維顯示命令及其操作對(duì)象的相互關(guān)系，生成建筑信息模型數(shù)據(jù)或視圖、視點(diǎn)的過濾命令序列，同時(shí)生成三維顯示命令調(diào)用序列，并將所述過濾命令序列和所述三維顯示命令調(diào)用序列構(gòu)建為建筑信息模型的數(shù)據(jù)處理及命令調(diào)用命令流，并將所述命令流傳輸至所述命令執(zhí)行模塊。

4.根據(jù)權(quán)利要求3所述的聲控建筑信息模型三維顯示系統(tǒng)，其特征在于，所述命令執(zhí)行模塊將執(zhí)行所述命令解析模塊輸出的所述命令流，獲取和查詢與所述命令流相關(guān)數(shù)據(jù)，并將所述命令流作用于所述相關(guān)數(shù)據(jù)，將命令執(zhí)行結(jié)果發(fā)送至所述三維顯示模塊。

5.一種聲控建筑信息模型三維顯示方法，其特征在于，通過如權(quán)利要求1-4任一項(xiàng)所述聲控建筑信息模型三維顯示系統(tǒng)實(shí)現(xiàn)，包括如下步驟：

S1實(shí)時(shí)獲取語音輸入，并將所述語音輸入轉(zhuǎn)換為標(biāo)準(zhǔn)語音數(shù)據(jù)格式傳輸?shù)较乱徊剑?/p>

S2將所述語音輸入模塊采集的所述用戶語音轉(zhuǎn)換成建筑信息模型能夠識(shí)別的命令，并將所述命令傳輸至所述命令處理模塊；

S2.1采用機(jī)器學(xué)習(xí)或深度學(xué)習(xí)等算法模塊實(shí)現(xiàn)用戶語音輸入向文本的自動(dòng)轉(zhuǎn)換，生成語音輸入相對(duì)應(yīng)的文本輸入；

S2.2采用統(tǒng)計(jì)模型、機(jī)器學(xué)習(xí)模型或深度學(xué)習(xí)模型對(duì)文本進(jìn)行分詞；

S2.3采用自然語音處理模型和算法對(duì)分詞結(jié)果進(jìn)行詞性標(biāo)注；

S2.4文本消歧：對(duì)停用詞進(jìn)行清理，并將同義詞統(tǒng)一為一個(gè)標(biāo)準(zhǔn)詞；

S2.5基于步驟S2.3中詞性標(biāo)注與步驟S2.4中文本消歧結(jié)果，采用自然語音處理算法構(gòu)建用戶輸入文本的語法樹；

S2.6導(dǎo)入三維顯示命令數(shù)據(jù)庫和建筑信息模型元數(shù)據(jù)庫中數(shù)據(jù)，根據(jù)所述數(shù)據(jù)庫中數(shù)據(jù)調(diào)整所述步驟S2.2中分詞結(jié)果，將所述分詞結(jié)果及所述語法樹構(gòu)建結(jié)果與讀入的所述數(shù)據(jù)庫中數(shù)據(jù)進(jìn)行對(duì)比分析，核對(duì)并確認(rèn)所述語法樹各部分均可轉(zhuǎn)換為三維顯示控制命令及其操作對(duì)象信息；如不能轉(zhuǎn)換為三維顯示控制命令則終止語音控制流程，等待下一次用戶語音輸入；

S3所述命令處理模塊對(duì)接收的所述命令進(jìn)行解析和執(zhí)行，生成建筑信息模型數(shù)據(jù)或視圖、視點(diǎn)的過濾命令序列以及三維顯示命令調(diào)用序列，構(gòu)建建筑信息模型的數(shù)據(jù)處理及命令調(diào)用命令流；執(zhí)行所述數(shù)據(jù)處理及命令調(diào)用命令流，自動(dòng)獲取和查詢與所述命令流相關(guān)數(shù)據(jù)，并將所述命令流作用于所述相關(guān)數(shù)據(jù)，將命令執(zhí)行結(jié)果發(fā)送至所述三維顯示模塊；

S4基于所述命令執(zhí)行結(jié)果，自動(dòng)更新所述三維顯示模塊的顯示結(jié)果，實(shí)現(xiàn)與用戶的動(dòng)態(tài)交互與顯示結(jié)果呈現(xiàn)。