[發明專利]一種Camera中間層圖像處理方法及片上系統

有效

• 申請號: 201710493813.2
• 申請日: 2017-06-26
• 公開（公告）號: CN109120938B
• 公開（公告）日: 2021-07-09
• 發明（設計）人: 趙丙山
• 申請（專利權）人: 深圳市中興微電子技術有限公司
• 主分類號: H04N19/42
• 分類號: H04N19/42;H04N19/44;H04N19/80;G06F9/54
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種Camera中間層圖像處理方法，其特征在于，步驟包括：

第一步，接收調用請求；

第二步，響應所述調用請求，對軟件資源與硬件資源進行初始化；其中，軟件資源與硬件資源進行初始化包括：待編碼隊列的初始化、容錯隊列的初始化、過濾隊列的初始化以及相應線程的創建和CPU的綁定；

第三步，根據所述初始化結果判斷是否支持硬件解碼，根據所述調用請求中的視頻數據判斷是否進行容錯處理，若進行所述容錯處理，則跳轉至第四步；否則，跳轉至第五步；

第四步，分析所述視頻數據，判斷是否存在數據丟失或異常，若不存在數據丟失或異常，則直接跳轉至第五步；否則，先進行數據修復，再跳轉至第五步；

第五步，若所述第三步中判斷支持硬件解碼，則調用解碼器接口，由所述解碼器對所述視頻數據進行硬件解碼；否則，調用軟件庫對所述視頻數據進行軟件解碼；獲得解碼數據；

第六步，過濾處理，分析第五步中獲得的所述解碼數據，檢測是否存在數據異常，若存在數據異常，則丟棄存在數據異常的所述解碼數據，跳轉至第七步；否則，直接跳轉至第七步；

第七步，輸出所述解碼數據至幀緩沖設備；或將所述解碼數據進行OMX框架層編碼后，輸出至網絡層。

2.如權利要求1所述的Camera中間層圖像處理方法，其特征在于，所述第四步中，所述容錯處理根據所述視頻數據的編碼標準協議，解析所述視頻數據，并判斷所述視頻數據的字段信息是否符合所述編碼標準協議；對不符合所述編碼標準協議的所述視頻數據的字段信息進行修復；

所述修復包括補充缺失信息或者跳過多余信息。

3.如權利要求1所述的Camera中間層圖像處理方法，其特征在于，所述第六步中，所述過濾處理包括通過分塊探測方法檢測數據異常；

所述分塊探測方法包括檢測所述解碼數據中Y、U、V分量中的一個或者多個。

4.一種用于圖像處理的Camera中間層，其特征在于，包括依次連接的接收單元、初始化單元、判斷單元、解碼單元、過濾單元和輸出單元，還包括容錯單元；

所述接收單元用于接收應用層的調用請求，獲取所述調用請求中攜帶的視頻數據以及處理任務；

所述初始化單元用于響應所述處理任務，對所述Camera中間層進行初始化，獲得配置信息，根據所述配置信息配置所述的Camera中間層的軟件資源和硬件資源；

所述判斷單元用于根據所述配置信息判斷是否支持硬件解碼，根據所述調用請求中攜帶的視頻數據判斷是否進行容錯處理，若進行容錯處理，則調用所述容錯單元，否則，調用所述解碼單元；

所述容錯單元連接于所述判斷單元與所述解碼單元之間，用于對丟失或異常的所述視頻數據進行修復；

所述解碼單元用于對所述視頻數據進行解碼，輸出解碼數據；

所述過濾單元用于檢測所述解碼數據是否存在異常，丟棄存在異常的所述解碼數據；

所述輸出單元用于緩沖所述過濾單元輸出的所述解碼數據，將所述解碼數據進行本地顯示；所述輸出單元還用于對所述解碼數據進行OMX框架層編碼，對所述編碼后的數據進行打包，將打包后的數據輸出至網絡層；

其中，所述解碼單元包括硬件解碼器和軟件解碼單元；

所述解碼單元在所述判斷單元判斷支持硬件解碼時，調用硬件解碼器進行硬件解碼；在所述判斷單元判斷不支持硬件解碼時，或在所述硬件解碼器反饋的響應信息報錯時調用軟件解碼單元進行軟件解碼。

5.如權利要求4所述的用于圖像處理的Camera中間層，其特征在于，所述軟件解碼單元包括FFMPEG開源庫或LIBJPEG開源庫中的一種或多種。

6.如權利要求4所述的用于圖像處理的Camera中間層，其特征在于，所述解碼單元解碼輸出所述解碼數據的格式包括NV12、RGB888、RGB565或YUV中的一種或多種。