[實(shí)用新型]一種圖像傳感器及控制系統(tǒng)

有效

• 申請?zhí)枺?/td>: 202223036783.8
• 申請日: 2022-11-15
• 公開（公告）號: CN218920548U
• 公開（公告）日: 2023-04-25
• 發(fā)明（設(shè)計）人: 嚴(yán)睿;邢志翔;李純洲;張君通;邵科
• 申請（專利權(quán)）人: 思特威（上海）電子科技股份有限公司
• 主分類號: H04N25/00
• 分類號: H04N25/00
• 代理公司: 深圳中一聯(lián)合知識產(chǎn)權(quán)代理有限公司 44414
• 代理人: 李艷麗

1.一種圖像傳感器，其特征在于，包括：像素陣列、模擬處理電路、存儲器以及神經(jīng)網(wǎng)絡(luò)處理器；

所述模擬處理電路與所述像素陣列連接，被配置為將所述像素陣列逐行曝光后的像素信號量化讀取，以獲取圖像信息；

所述存儲器與所述模擬處理電路連接，被配置為存儲所述圖像信息及人工智能程序；

所述神經(jīng)網(wǎng)絡(luò)處理器與所述存儲器連接，被配置為執(zhí)行所述存儲器中的人工智能程序以提取所述圖像信息中的語義信息并進(jìn)行預(yù)處理，以輸出第一有效信息，其中，所述第一有效信息的數(shù)據(jù)流小于所述圖像信息中的語義信息的數(shù)據(jù)流。

2.如權(quán)利要求1所述的圖像傳感器，其特征在于，所述人工智能程序包括BP神經(jīng)網(wǎng)絡(luò)算法、卷積神經(jīng)網(wǎng)絡(luò)算法、深度自動編碼器中至少一種。

3.如權(quán)利要求1所述的圖像傳感器，其特征在于，所述神經(jīng)網(wǎng)絡(luò)處理器包括數(shù)據(jù)模塊，所述數(shù)據(jù)模塊連接于所述存儲器，用于從所述存儲器中下載數(shù)據(jù)至所述神經(jīng)網(wǎng)絡(luò)處理器，或者存儲所述神經(jīng)網(wǎng)絡(luò)處理器中數(shù)據(jù)至所述存儲器；

神經(jīng)網(wǎng)絡(luò)處理器還至少包括：

矩陣模塊，用于進(jìn)行矩陣卷積運(yùn)算；

和/或，矢量模塊，用于進(jìn)行矢量運(yùn)算或加法運(yùn)算；

和/或，混合模塊，用于執(zhí)行人工智能的通用功能；

和/或，指令模塊，連接于所述存儲器，用于按順序加載相關(guān)指令至對應(yīng)的執(zhí)行模塊。

4.如權(quán)利要求1所述的圖像傳感器，其特征在于，還包括：系統(tǒng)控制模塊，被配置為進(jìn)行任務(wù)規(guī)劃和資源加載；

所述系統(tǒng)控制模塊分別與所述像素陣列、所述模擬處理電路、所述存儲器以及所述神經(jīng)網(wǎng)絡(luò)處理器連接。

5.如權(quán)利要求1所述的圖像傳感器，其特征在于，還包括：

并串轉(zhuǎn)換器，連接于所述神經(jīng)網(wǎng)絡(luò)處理器，所述并串轉(zhuǎn)換器被配置為將所述神經(jīng)網(wǎng)絡(luò)處理器輸出的第一有效信息轉(zhuǎn)換成第二有效信息，并傳輸至電子控制單元。

6.如權(quán)利要求5所述的圖像傳感器，其特征在于，所述神經(jīng)網(wǎng)絡(luò)處理器與所述并串轉(zhuǎn)換器之間采用A-PHY協(xié)議建立連接。

7.如權(quán)利要求5所述的圖像傳感器，其特征在于，還包括：系統(tǒng)控制模塊，被配置為進(jìn)行任務(wù)規(guī)劃和資源加載；

所述系統(tǒng)控制模塊通過I2C總線連接至所述并串轉(zhuǎn)換器。

8.一種控制系統(tǒng)，其特征在于，所述控制系統(tǒng)包括：如權(quán)利要求1-4任一項(xiàng)所述的圖像傳感器、串行器、解串器以及電子控制單元；

所述電子控制單元由微控制器、控制存儲器、傳輸接口、模數(shù)轉(zhuǎn)換器以及整形與驅(qū)動集成電路組成；

所述串行器和所述解串器之間采用GMSL2協(xié)議建立通訊連接。

9.一種控制系統(tǒng)，其特征在于，所述控制系統(tǒng)包括：如權(quán)利要求5-7任一項(xiàng)所述的圖像傳感器、解串器以及電子控制單元；

所述電子控制單元由微控制器、控制存儲器、傳輸接口、模數(shù)轉(zhuǎn)換器以及整形與驅(qū)動集成電路組成；

所述圖像傳感器和所述解串器之間采用A-PHY協(xié)議建立通訊連接。

10.一種控制系統(tǒng)，其特征在于，所述控制系統(tǒng)包括：如權(quán)利要求5-7任一項(xiàng)所述的圖像傳感器以及電子控制單元；

所述電子控制單元由串并轉(zhuǎn)換器、微控制器、控制存儲器、傳輸接口、模數(shù)轉(zhuǎn)換器以及整形與驅(qū)動集成電路組成；

所述圖像傳感器和所述電子控制單元之間采用A-PHY協(xié)議建立通訊連接。