[發(fā)明專利]視障輔助智能眼鏡、系統(tǒng)及其控制方法

在審

• 申請?zhí)枺?/td>: 202011385491.8
• 申請日: 2020-12-01
• 公開（公告）號: CN112370240A
• 公開（公告）日: 2021-02-19
• 發(fā)明（設(shè)計(jì)）人: 盧國慶;蕭啟穎;劉蔚旻
• 申請（專利權(quán)）人: 創(chuàng)啟社會科技有限公司
• 主分類號: A61F9/08
• 分類號: A61F9/08;G06N3/04;G06N3/08
• 代理公司: 深圳市壹壹壹知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44521
• 代理人: 阮帆

1.一種視障輔助智能眼鏡，包括眼鏡本體，其特征在于，眼鏡本體內(nèi)集成有微處理器、耳骨傳導(dǎo)耳機(jī)、無線通訊模塊、CCD光學(xué)模塊、DSP圖像處理模塊、攝像鏡頭、內(nèi)存模塊、電源模塊、充電電池、I/O數(shù)據(jù)端口，攝像鏡頭設(shè)在眼鏡本體前端，CCD光學(xué)模塊將從攝像鏡頭采集的光學(xué)影像轉(zhuǎn)換為高解像壓縮數(shù)據(jù)發(fā)送至DSP圖像處理模塊，微處理器通過I/O數(shù)據(jù)端口與耳骨傳導(dǎo)耳機(jī)、無線通訊模塊、DSP圖像處理模塊電連接，內(nèi)存模塊、電源模塊與微處理器電連接，充電電池與電源模塊電連接。

2.如權(quán)利要求1所述的視障輔助智能眼鏡，其特征在于，無線通訊模塊為wifi模塊、藍(lán)牙模塊、5G模塊中的一種或多種。

3.一種視障輔助智能眼鏡系統(tǒng)，其特征在于，包括如權(quán)利要求1-2中任一項(xiàng)所述的視障輔助智能眼鏡，還包括手機(jī)端、服務(wù)器、服務(wù)終端，其中，

視障輔助智能眼鏡通過無線通訊模塊與手機(jī)端連接通信，實(shí)時采集視障用戶面前的圖像，并將圖像發(fā)送至手機(jī)端，同時通過耳骨傳導(dǎo)耳機(jī)輸出手機(jī)端回傳的信息；

手機(jī)端：將視障輔助智能眼鏡發(fā)送的圖像實(shí)時進(jìn)行預(yù)處理，將預(yù)處理連續(xù)與數(shù)字化目標(biāo)默認(rèn)值進(jìn)行對比，當(dāng)相似度達(dá)到閾值時，將結(jié)果發(fā)送至視障輔助智能眼鏡；若未比對到相似度達(dá)到閾值時或用戶選擇進(jìn)入人工模式時，則將當(dāng)前的圖像上傳至服務(wù)器，同時將服務(wù)器回傳的信息發(fā)送至視障輔助智能眼鏡；

服務(wù)器：將手機(jī)端上傳的圖像分配至服務(wù)終端，將服務(wù)終端上傳的識別結(jié)果回傳至對應(yīng)的手機(jī)端；或通過網(wǎng)絡(luò)實(shí)時連接視障輔助智能眼鏡和服務(wù)終端；

服務(wù)終端：對應(yīng)的志愿者通過服務(wù)終端接收手機(jī)端上傳的圖像，再將志愿者人工識別結(jié)果發(fā)送至服務(wù)器；或與視障輔助智能眼鏡連接通信，使志愿者與視障用戶直接實(shí)時通訊，實(shí)時為視障用戶提供人工幫助。

4.如權(quán)利要求3所述的視障輔助智能眼鏡系統(tǒng)，其特征在于，手機(jī)端中采用卷積神經(jīng)網(wǎng)絡(luò)模型對圖像進(jìn)行預(yù)處理，所述圖像數(shù)據(jù)依次進(jìn)入卷積神經(jīng)網(wǎng)絡(luò)模型的第一個卷積層、第二個卷積層、池化層、第一個完全連接層以及第二個完全連接層后輸出結(jié)果。

5.如權(quán)利要求3所述的視障輔助智能眼鏡系統(tǒng)，其特征在于，手機(jī)端還包括文字識別模塊：識別圖像中的文字，并將識別結(jié)果發(fā)送至視障輔助智能眼鏡。

6.一種視障輔助智能眼鏡系統(tǒng)的控制方法，其特征在于，包括：

步驟1：視障輔助智能眼鏡實(shí)時采集視障用戶面前的圖像，并將圖像發(fā)送至手機(jī)端；

步驟2：手機(jī)端將視障輔助智能眼鏡發(fā)送的圖像實(shí)時進(jìn)行預(yù)處理，將預(yù)處理連續(xù)與數(shù)字化目標(biāo)默認(rèn)值進(jìn)行對比，當(dāng)相似度達(dá)到閾值時，將結(jié)果發(fā)送至視障輔助智能眼鏡；若未比對到相似度達(dá)到閾值時或用戶選擇進(jìn)入人工模式時，則將當(dāng)前的圖像上傳至服務(wù)器；

步驟3：服務(wù)器將手機(jī)端上傳的圖像分配至服務(wù)終端，將服務(wù)終端上傳的識別結(jié)果回傳至對應(yīng)的手機(jī)端；或通過網(wǎng)絡(luò)實(shí)時連接視障輔助智能眼鏡和服務(wù)終端；

步驟4：服務(wù)終端接收手機(jī)端上傳的圖像，再將志愿者人工識別結(jié)果發(fā)送至服務(wù)器；或與視障輔助智能眼鏡連接通信，使志愿者與視障用戶直接實(shí)時通訊，實(shí)時為視障用戶提供人工幫助。

7.如權(quán)利要求6所述的視障輔助智能眼鏡系統(tǒng)的控制方法，其特征在于，步驟1中采用卷積神經(jīng)網(wǎng)絡(luò)模型對圖像進(jìn)行預(yù)處理，所述圖像數(shù)據(jù)依次進(jìn)入卷積神經(jīng)網(wǎng)絡(luò)模型的第一個卷積層、第二個卷積層、池化層、第一個完全連接層以及第二個完全連接層后輸出結(jié)果。

8.如權(quán)利要求6所述的視障輔助智能眼鏡系統(tǒng)的控制方法，其特征在于，步驟1還包括文字識別子步驟：識別圖像中的文字，并將識別結(jié)果發(fā)送至視障輔助智能眼鏡。