[發(fā)明專利]低視力助視智能眼鏡系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201811559129.0
• 申請日: 2018-12-19
• 公開（公告）號(hào): CN109670445B
• 公開（公告）日: 2023-04-07
• 發(fā)明（設(shè)計(jì)）人: 高飛;馬秋收;杜杰;曾祥健;蔡杰波
• 申請（專利權(quán)）人: 宜視智能科技（蘇州）有限公司
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01;H04N1/387;H04N1/393;H04N5/14;G02B27/01;G06F3/14;G06T3/40;G06T5/00;G06V10/764;G06V40/16;G06V20/62
• 代理公司: 深圳市世紀(jì)恒程知識(shí)產(chǎn)權(quán)代理事務(wù)所 44287
• 代理人: 胡海國

1.一種低視力助視智能眼鏡系統(tǒng)，其特征在于，所述低視力助視智能眼鏡系統(tǒng)包括智能眼鏡及助視終端；所述智能眼鏡與所述助視終端通過type-c接口連接；其中，

所述智能眼鏡，用于采集初始圖像，將所述初始圖像進(jìn)行預(yù)處理，獲得預(yù)處理圖像，將所述預(yù)處理圖像發(fā)送至所述助視終端，并接收和顯示所述助視終端返回的待顯示圖像；

所述助視終端，用于接收用戶的控制指令，根據(jù)所述控制指令對(duì)所述預(yù)處理圖像進(jìn)行圖像處理，獲得待顯示圖像；

其中，所述助視終端包括控制模塊及圖像增強(qiáng)模塊，所述圖像增強(qiáng)模塊用于對(duì)所述預(yù)處理圖像進(jìn)行放大、縮小、亮度調(diào)節(jié)、對(duì)比度調(diào)節(jié)、反色及色彩模式選擇中的至少一種處理，獲得待顯示圖像；

其中，對(duì)所述預(yù)處理圖像進(jìn)行放大的步驟包括：對(duì)所述預(yù)處理圖像進(jìn)行光學(xué)放大處理，獲得第一圖像，并將所述第一圖像進(jìn)行基于插值算法的數(shù)字放大處理，獲得待顯示圖像；

所述圖像增強(qiáng)模塊，還用于從所述待顯示圖像中提取各像素點(diǎn)的坐標(biāo)，根據(jù)用戶輸入的放大倍數(shù)及目標(biāo)像素點(diǎn)的目標(biāo)坐標(biāo)確定所述目標(biāo)像素點(diǎn)在所述第一圖像中對(duì)應(yīng)的當(dāng)前坐標(biāo)，根據(jù)當(dāng)前像素點(diǎn)的當(dāng)前坐標(biāo)及所述當(dāng)前像素點(diǎn)N*N鄰域內(nèi)的N2個(gè)像素點(diǎn)的鄰近坐標(biāo)計(jì)算行插值系數(shù)及列插值系數(shù)，根據(jù)所述當(dāng)前像素點(diǎn)N*N鄰域內(nèi)的N2個(gè)像素點(diǎn)的鄰近像素值、所述行插值系數(shù)及所述列插值系數(shù)獲得所述目標(biāo)像素點(diǎn)的目標(biāo)像素值，根據(jù)所述目標(biāo)像素值及所述目標(biāo)坐標(biāo)構(gòu)建待顯示圖像；其中，N取值為4，將距離當(dāng)前像素點(diǎn)最近的16個(gè)像素點(diǎn)作為計(jì)算待顯示圖像的像素值的參數(shù)，通過以下基函數(shù)獲得行插值系數(shù)及列插值系數(shù)：

其中，x為鄰近像素點(diǎn)到當(dāng)前像素點(diǎn)的距離；所述當(dāng)前像素點(diǎn)在所述待顯示圖像中對(duì)應(yīng)的目標(biāo)像素值為16個(gè)像素點(diǎn)的加權(quán)疊加；

通過以下公式獲得目標(biāo)像素值：

其中，aij為鄰近點(diǎn)的鄰近像素值，W(i)為行插值系數(shù)，W(j)為列插值系數(shù)。

2.如權(quán)利要求1所述的低視力助視智能眼鏡系統(tǒng)，其特征在于，所述智能眼鏡，還用于通過UVC協(xié)議將所述預(yù)處理圖像發(fā)送至所述助視終端，并通過DP協(xié)議接收所述助視終端返回的待顯示圖像。

3.如權(quán)利要求2所述的低視力助視智能眼鏡系統(tǒng)，其特征在于，所述智能眼鏡包括圖像采集模塊、語音采集模塊、信號(hào)處理模塊及圖像顯示模塊。

4.如權(quán)利要求3所述的低視力助視智能眼鏡系統(tǒng)，其特征在于，所述圖像采集模塊用于采集初始圖像，并將所述初始圖像進(jìn)行去噪、視頻防抖、連續(xù)自動(dòng)對(duì)焦及寬動(dòng)態(tài)中的至少一種處理，獲得預(yù)處理圖像。

5.如權(quán)利要求1所述的低視力助視智能眼鏡系統(tǒng)，其特征在于，所述助視終端還包括云端服務(wù)模塊，所述云端服務(wù)模塊用于根據(jù)所述控制指令調(diào)用云端圖像算法對(duì)所述預(yù)處理圖像進(jìn)行圖像處理，獲得待顯示圖像。

6.如權(quán)利要求5所述的低視力助視智能眼鏡系統(tǒng)，其特征在于，所述助視終端還包括OCR文字識(shí)別模塊，所述OCR文字識(shí)別模塊用于將所述預(yù)處理圖像進(jìn)行文字識(shí)別，獲得文字信息，通過TTS語音合成技術(shù)把所述文字信息轉(zhuǎn)化為語音信息，并對(duì)所述語音信息進(jìn)行播放。

7.如權(quán)利要求5所述的低視力助視智能眼鏡系統(tǒng)，其特征在于，所述助視終端還包括人臉識(shí)別模塊，所述人臉識(shí)別模塊用于從所述預(yù)處理圖像中進(jìn)行人臉提取，獲得人臉信息，將所述人臉信息與人臉庫進(jìn)行比對(duì)，獲得人臉識(shí)別結(jié)果，并輸出所述人臉識(shí)別結(jié)果。

8.如權(quán)利要求5所述的低視力助視智能眼鏡系統(tǒng)，其特征在于，所述助視終端還包括圖像理解模塊，所述圖像理解模塊用于提取所述預(yù)處理圖像中的物品，獲得物品信息，將所述物品信息進(jìn)行識(shí)別，并輸出物品信息識(shí)別結(jié)果。

9.如權(quán)利要求5至8中任一項(xiàng)所述的低視力助視智能眼鏡系統(tǒng)，其特征在于，所述低視力助視智能眼鏡系統(tǒng)還包括藍(lán)牙手柄，用于通過所述助視終端進(jìn)行實(shí)時(shí)畫面調(diào)節(jié)。