[發(fā)明專利]車輛違章預(yù)警方法、裝置、系統(tǒng)及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 201911119813.1
• 申請(qǐng)日: 2019-11-15
• 公開（公告）號(hào): CN112818726A
• 公開（公告）日: 2021-05-18
• 發(fā)明（設(shè)計(jì)）人: 于春娜
• 申請(qǐng)（專利權(quán)）人: 杭州海康威視數(shù)字技術(shù)股份有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G08G1/01;B60R1/00
• 代理公司: 北京三高永信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 李珂珂

1.一種車輛違章預(yù)警方法，其特征在于，所述方法包括：

獲取車輛周圍的多張場(chǎng)景圖像；

對(duì)所述多張場(chǎng)景圖像進(jìn)行環(huán)視拼接，得到所述車輛的全景環(huán)視圖像；

對(duì)待處理圖像進(jìn)行目標(biāo)檢測(cè)，以檢測(cè)所述待處理圖像中是否存在預(yù)設(shè)目標(biāo)，所述待處理圖像包括所述全景環(huán)視圖像和多張指定圖像中的至少一張，所述多張指定圖像為所述車輛的車載相機(jī)拍攝的圖像，所述預(yù)設(shè)目標(biāo)為交通指示標(biāo)識(shí)、交通監(jiān)控設(shè)備和障礙物中的至少一種；

當(dāng)檢測(cè)到所述待處理圖像中存在所述預(yù)設(shè)目標(biāo)時(shí)，從所述待處理圖像中提取所述預(yù)設(shè)目標(biāo)的目標(biāo)圖像，根據(jù)所述目標(biāo)圖像確定與所述車輛所處場(chǎng)景匹配的違章預(yù)警信息；

對(duì)所述目標(biāo)圖像、所述違章預(yù)警信息和所述全景環(huán)視圖像進(jìn)行顯示，以對(duì)駕駛員進(jìn)行違章預(yù)警。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述從所述待處理圖像中提取所述預(yù)設(shè)目標(biāo)的目標(biāo)圖像，根據(jù)所述目標(biāo)圖像確定與所處場(chǎng)景匹配的違章預(yù)警信息之前，還包括：

根據(jù)所述待處理圖像的目標(biāo)檢測(cè)結(jié)果，以及所述車輛的駕駛行為和路況信息中的至少一種，通過預(yù)設(shè)預(yù)警策略判斷所述車輛所處場(chǎng)景是否符合違章預(yù)警條件；

當(dāng)確定所述車輛所處場(chǎng)景符合違章預(yù)警條件時(shí)，觸發(fā)執(zhí)行從所述待處理圖像中提取所述預(yù)設(shè)目標(biāo)的目標(biāo)圖像，根據(jù)所述目標(biāo)圖像確定與所處場(chǎng)景匹配的違章預(yù)警信息的步驟。

3.如權(quán)利要求1所述的方法，其特征在于，所述對(duì)待處理圖像進(jìn)行目標(biāo)檢測(cè)，包括：

將所述待處理圖像作為深度學(xué)習(xí)檢測(cè)模型的輸入，通過所述深度學(xué)習(xí)檢測(cè)模型檢測(cè)所述待處理圖像中是否存在所述預(yù)設(shè)目標(biāo)，所述深度學(xué)習(xí)檢測(cè)模型是根據(jù)存在所述預(yù)設(shè)目標(biāo)的多張樣本圖像進(jìn)行訓(xùn)練得到。

4.如權(quán)利要求1所述的方法，其特征在于，所述從所述待處理圖像中提取所述預(yù)設(shè)目標(biāo)的目標(biāo)圖像，包括：

從所述待處理圖像中確定至少一張存在所述預(yù)設(shè)目標(biāo)的備選圖像；

確定每張備選圖像中存在的所述預(yù)設(shè)目標(biāo)的置信度；

基于每張備選圖像中存在的所述預(yù)設(shè)目標(biāo)的置信度，從所述至少一張備選圖像中提取所述目標(biāo)圖像。

5.如權(quán)利要求4所述的方法，其特征在于，所述基于每張備選圖像中存在的所述預(yù)設(shè)目標(biāo)的置信度，從所述至少一張備選圖像中提取所述目標(biāo)圖像，包括：

若所述至少一張備選圖像中存在的所述預(yù)設(shè)目標(biāo)為同一目標(biāo)，則從所述至少一張備選圖像中確定存在的所述預(yù)設(shè)目標(biāo)的置信度最大的目標(biāo)備選圖像，對(duì)所述目標(biāo)備選圖像中所述預(yù)設(shè)目標(biāo)所在的部分區(qū)域圖像進(jìn)行提取，基于提取的圖像，確定所述目標(biāo)圖像；

若所述至少一張備選圖像中存在的所述預(yù)設(shè)目標(biāo)兩兩不同，則從所述至少一張備選圖像中確定存在的所述預(yù)設(shè)目標(biāo)的置信度大于置信度閾值的備選圖像，對(duì)確定的備選圖像中所述預(yù)設(shè)目標(biāo)所在的部分區(qū)域圖像進(jìn)行提取，基于提取的圖像，確定所述目標(biāo)圖像；

若所述至少一張備選圖像中包括m張第一備選圖像和n張第二備選圖像，則從所述m張第一備選圖像中選擇存在的所述預(yù)設(shè)目標(biāo)的置信度最大的第一備選圖像，從所述n張第二備選圖像中選擇存在的所述預(yù)設(shè)目標(biāo)的置信度大于置信度閾值的第二備選圖像，對(duì)選擇的第一備選圖像和第二備選圖像中所述預(yù)設(shè)目標(biāo)所在的部分區(qū)域圖像分別進(jìn)行提取，基于提取的圖像，確定所述目標(biāo)圖像，所述m張第一備選圖像中存在的所述預(yù)設(shè)目標(biāo)為同一目標(biāo)，所述n張第二備選圖像是指除所述m張第一備選圖像之外的且存在的所述預(yù)設(shè)目標(biāo)兩兩不同的備選圖像，所述m和所述n均為正整數(shù)。

6.如權(quán)利要求5所述的方法，其特征在于，所述基于提取的圖像，確定目標(biāo)圖像，包括：

對(duì)提取的圖像進(jìn)行預(yù)處理，得到所述目標(biāo)圖像，所述預(yù)處理包括放大處理和增強(qiáng)處理中的至少一種。