[發(fā)明專利]視覺盲區(qū)的場景圖像的生成方法、裝置、系統(tǒng)及終端設(shè)備

在審

• 申請?zhí)枺?/td>: 201711377917.3
• 申請日: 2017-12-19
• 公開（公告）號(hào): CN109934076A
• 公開（公告）日: 2019-06-25
• 發(fā)明（設(shè)計(jì)）人: 黃亮;齊新迎
• 申請（專利權(quán)）人: 廣州汽車集團(tuán)股份有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06T3/40
• 代理公司: 廣州華進(jìn)聯(lián)合專利商標(biāo)代理有限公司 44224
• 代理人: 黃曉慶

本申請涉及一種視覺盲區(qū)的場景圖像的生成方法、裝置、系統(tǒng)、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)及終端設(shè)備，所述方法包括獲取目標(biāo)視覺盲區(qū)對應(yīng)的盲區(qū)場景圖像，所述盲區(qū)場景圖像是基于觀察者的當(dāng)前視線方向?qū)λ瞿繕?biāo)視覺盲區(qū)對應(yīng)的三維場景圖像進(jìn)行投影變換獲得；獲取所述觀察者的當(dāng)前視野圖像，所述當(dāng)前視野圖像包含形成所述目標(biāo)視覺盲區(qū)的遮擋物對應(yīng)的圖像；基于所述遮擋物對應(yīng)的圖像在所述當(dāng)前視野圖像中確定與所述盲區(qū)場景圖像匹配的目標(biāo)位置；基于所述匹配的目標(biāo)位置對所述當(dāng)前視野圖像與所述盲區(qū)場景圖像進(jìn)行合成處理，顯示合成處理后的圖像。本申請?zhí)峁┑姆桨改軌驇椭^察者準(zhǔn)確地對環(huán)境情況進(jìn)行判斷。

技術(shù)領(lǐng)域

本申請涉及圖像處理領(lǐng)域，特別是涉及一種視覺盲區(qū)的場景圖像的生成方法、裝置、系統(tǒng)、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)及終端設(shè)備。

背景技術(shù)

視覺盲區(qū)一般是指，觀察者視線被障礙物遮擋，而不能直接觀察到的區(qū)域。例如，駕駛員的視線易被位于車體上的部件(如A柱)遮擋，從而形成相應(yīng)的視覺盲區(qū)。視覺盲區(qū)的存在，會(huì)給觀察者帶來諸多不利影響，例如，在車輛行駛過程中，駕駛員無法觀察到視覺盲區(qū)內(nèi)的環(huán)境情況，容易引發(fā)安全事故。因此，有必要生成視覺盲區(qū)的場景圖像，以幫助觀察者觀察視覺盲區(qū)內(nèi)的環(huán)境情況。

傳統(tǒng)方法是，在視覺盲區(qū)附近布置攝像頭，通過攝像頭拍攝視覺盲區(qū)內(nèi)的場景圖像。例如，在車體的相應(yīng)位置布置攝像頭，以拍攝相應(yīng)視覺盲區(qū)內(nèi)的場景圖像，后續(xù)，則可以通過車載顯示屏顯示拍攝獲得的場景圖像，在此情況下，觀察者可以通過觀察車載顯示屏的顯示界面，來觀察相應(yīng)視覺盲區(qū)中的環(huán)境情況，倒車影像系統(tǒng)則是一個(gè)典型的示例。然而，基于傳統(tǒng)方法獲得的場景圖像，觀察者難以對環(huán)境情況進(jìn)行準(zhǔn)確判斷。

發(fā)明內(nèi)容

基于此，有必要針對傳統(tǒng)方法中觀察者難以對環(huán)境情況進(jìn)行準(zhǔn)確判斷的技術(shù)問題，提供一種視覺盲區(qū)的場景圖像的生成方法、裝置、系統(tǒng)、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)及終端設(shè)備。

一種視覺盲區(qū)的場景圖像的生成方法，包括：

獲取目標(biāo)視覺盲區(qū)對應(yīng)的盲區(qū)場景圖像，所述盲區(qū)場景圖像是基于觀察者的當(dāng)前視線方向?qū)λ瞿繕?biāo)視覺盲區(qū)對應(yīng)的三維場景圖像進(jìn)行投影變換獲得；

獲取所述觀察者的當(dāng)前視野圖像，所述當(dāng)前視野圖像包含形成所述目標(biāo)視覺盲區(qū)的遮擋物對應(yīng)的圖像；

基于所述遮擋物對應(yīng)的圖像在所述當(dāng)前視野圖像中確定與所述盲區(qū)場景圖像匹配的目標(biāo)位置；

基于所述匹配的目標(biāo)位置對所述當(dāng)前視野圖像與所述盲區(qū)場景圖像進(jìn)行合成處理，顯示合成處理后的圖像。

在一個(gè)實(shí)施例中，確定所述觀察者的當(dāng)前視線方向的方式，包括：

獲取觀察者的當(dāng)前狀態(tài)圖像，所述當(dāng)前狀態(tài)圖像用于表征所述觀察者當(dāng)前的眼部情況及頭部姿態(tài)；

基于所述當(dāng)前狀態(tài)圖像確定所述觀察者的內(nèi)眼角當(dāng)前所處的第一位置、外眼角當(dāng)前所處的第二位置、以及當(dāng)前頭部姿態(tài)；

基于所述第一位置、所述第二位置以及所述當(dāng)前頭部姿態(tài)，計(jì)算所述觀察者的眼球中心當(dāng)前所處的第三位置；

對所述當(dāng)前狀態(tài)圖像進(jìn)行識(shí)別，獲得所述觀察者的虹膜中心當(dāng)前所處的第四位置；

基于所述第三位置和所述第四位置確定所述觀察者的當(dāng)前視線方向。

在一個(gè)實(shí)施例中，基于觀察者的當(dāng)前視線方向?qū)λ瞿繕?biāo)視覺盲區(qū)對應(yīng)的三維場景圖像進(jìn)行投影變換的方式，包括：

基于所述觀察者的當(dāng)前視線方向確定當(dāng)前投影線的方向；

確定當(dāng)前投影平面，所述投影平面為形成所述目標(biāo)視覺盲區(qū)的遮擋物所在的平面；

基于所述當(dāng)前投影線的方向與所述當(dāng)前投影平面，對所述三維場景圖像進(jìn)行投影變換。