[發(fā)明專利]一種基于AR眼鏡的智能化現(xiàn)場記錄用交互系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202110019223.2
• 申請日: 2021-01-07
• 公開（公告）號: CN112738443A
• 公開（公告）日: 2021-04-30
• 發(fā)明（設(shè)計(jì)）人: 鄧銳
• 申請（專利權(quán)）人: 浙江德維迪亞數(shù)字科技有限公司
• 主分類號: H04N5/76
• 分類號: H04N5/76;G10L15/22;G06T19/00;G06F3/16;G06F40/186
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于AR眼鏡的智能化現(xiàn)場記錄用交互系統(tǒng)，其特征在于：包括現(xiàn)場記錄助手系統(tǒng)，所述現(xiàn)場記錄助手系統(tǒng)用于對設(shè)備返廠維修、設(shè)備現(xiàn)場維護(hù)、產(chǎn)品檢測以及多站點(diǎn)巡檢等進(jìn)行記錄，所述現(xiàn)場記錄助手系統(tǒng)具體為基于智能AR計(jì)算機(jī)HMT-1的小程序、公共服務(wù)號或者APP軟件，所述現(xiàn)場記錄助手系統(tǒng)載體端為AR眼鏡

記錄報(bào)告定制系統(tǒng)：管理員可根據(jù)現(xiàn)場使用需求，定制記錄報(bào)告的表頭和內(nèi)容框架形成標(biāo)準(zhǔn)模板，并將定制模板下發(fā)給指定設(shè)備，以便現(xiàn)場統(tǒng)一部署；

AR虛擬顯示系統(tǒng)：所述AR虛擬顯示系統(tǒng)用于將現(xiàn)場記錄助手系統(tǒng)的界面實(shí)時(shí)顯示至操作人員眼前；

語音識別系統(tǒng)：所述語音識別系統(tǒng)用于對操作人員發(fā)出語音進(jìn)行識別，并將識別內(nèi)容反饋至現(xiàn)場記錄助手系統(tǒng)或?qū)⒆R別內(nèi)容匹配成相應(yīng)文字反饋至現(xiàn)場記錄助手系統(tǒng)；

智能拍攝系統(tǒng)：所述智能拍攝系統(tǒng)用于根據(jù)操作人員發(fā)出的語音指令進(jìn)行畫面拍攝，并將拍攝畫面反饋至現(xiàn)場記錄助手系統(tǒng)；

報(bào)告生成系統(tǒng)：所述報(bào)告生成系統(tǒng)用于將現(xiàn)場記錄助手系統(tǒng)所生成的現(xiàn)場記錄報(bào)告匹配至選定記錄模板中，形成現(xiàn)場工作記錄報(bào)告，并將此報(bào)告通過信息交互系統(tǒng)發(fā)送至現(xiàn)場記錄助手PC伴侶系統(tǒng)；

現(xiàn)場記錄助手PC伴侶系統(tǒng)：所述現(xiàn)場記錄助手PC伴侶系統(tǒng)用于對現(xiàn)場記錄助手系統(tǒng)生成的現(xiàn)場記錄報(bào)告進(jìn)行接收并存儲，所述現(xiàn)場記錄助手PC伴侶系統(tǒng)具體為基于windows系統(tǒng)的軟件程序，所述現(xiàn)場記錄助手PC伴侶系統(tǒng)載體端為筆記本或平板電腦，所述現(xiàn)場記錄助手PC伴侶系統(tǒng)包括報(bào)告接收和報(bào)告存儲系統(tǒng)；

文本轉(zhuǎn)換系統(tǒng)：所述文本轉(zhuǎn)換系統(tǒng)用于對信息交互系統(tǒng)發(fā)送的現(xiàn)場記錄報(bào)告進(jìn)行相應(yīng)端文本轉(zhuǎn)換且提供下載文件，并將經(jīng)過相應(yīng)端文本轉(zhuǎn)換的現(xiàn)場記錄報(bào)告發(fā)送至報(bào)告存儲系統(tǒng)；

報(bào)告存儲系統(tǒng)：所述報(bào)告存儲系統(tǒng)用于對現(xiàn)場記錄報(bào)告進(jìn)行壓縮整理并存儲在現(xiàn)場記錄助手PC伴侶系統(tǒng)載體端的設(shè)定存儲文件中；

信息交互系統(tǒng)，所述信息交互系統(tǒng)用于將現(xiàn)場記錄助手系統(tǒng)的數(shù)據(jù)進(jìn)行交互轉(zhuǎn)換并輸送至現(xiàn)場記錄助手PC伴侶系統(tǒng)。

2.根據(jù)權(quán)利要求1所述的一種基于AR眼鏡的智能化現(xiàn)場記錄用交互系統(tǒng)，其特征在于：所述現(xiàn)場記錄助手系統(tǒng)和所述現(xiàn)場記錄助手PC伴侶系統(tǒng)鏈接方式包括5G模塊、4G模塊、藍(lán)牙模塊、WiFi模塊、LORA模塊、GSM模塊和TD-SCDMA模塊中一種或幾種的組合。

3.根據(jù)權(quán)利要求1所述的一種基于AR眼鏡的智能化現(xiàn)場記錄方法，其特征在于：

S1:啟動現(xiàn)場記錄助手系統(tǒng)，AR虛擬顯示系統(tǒng)將現(xiàn)場記錄助手系統(tǒng)的界面實(shí)時(shí)顯示至操作人員眼前，操作人員根據(jù)界面提示發(fā)出相應(yīng)語音，語音識別系統(tǒng)對操作人員發(fā)出語音進(jìn)行識別，并將識別內(nèi)容反饋至現(xiàn)場記錄助手系統(tǒng)或?qū)⒆R別內(nèi)容匹配成相應(yīng)文字反饋至現(xiàn)場記錄助手系統(tǒng)，智能拍攝系統(tǒng)根據(jù)操作人員發(fā)出的語音指令進(jìn)行畫面拍攝，并將拍攝畫面反饋至現(xiàn)場記錄助手系統(tǒng)，操作人員即時(shí)檢測文字反饋和畫面反饋，若內(nèi)容正確，則進(jìn)行下一項(xiàng)檢測，若內(nèi)容錯(cuò)誤，則重新進(jìn)行此項(xiàng)檢測，檢測完成后，報(bào)告生成系統(tǒng)將現(xiàn)場記錄助手系統(tǒng)所生成的現(xiàn)場記錄報(bào)告匹配至選定記錄模板中，并將此報(bào)告通過信息交互系統(tǒng)發(fā)送至現(xiàn)場記錄助手PC伴侶系統(tǒng)；

S2:將所述現(xiàn)場記錄助手系統(tǒng)和所述現(xiàn)場記錄助手PC伴侶系統(tǒng)通過5G模塊、4G模塊、藍(lán)牙模塊、WiFi模塊、LORA模塊、GSM模塊或TD-SCDMA模塊進(jìn)行鏈接；

S3:啟動現(xiàn)場記錄助手PC伴侶系統(tǒng)，文本轉(zhuǎn)換系統(tǒng)對信息交互系統(tǒng)發(fā)送的現(xiàn)場記錄報(bào)告進(jìn)行相應(yīng)端文本轉(zhuǎn)換且提供下載文件，并將經(jīng)過相應(yīng)端文本轉(zhuǎn)換的現(xiàn)場記錄報(bào)告發(fā)送至報(bào)告存儲系統(tǒng)，報(bào)告存儲系統(tǒng)對現(xiàn)場記錄報(bào)告進(jìn)行壓縮整理并存儲在現(xiàn)場記錄助手PC伴侶系統(tǒng)載體端的設(shè)定存儲文件中，根據(jù)需要對現(xiàn)場記錄報(bào)告進(jìn)行下載或在線查看。