[發(fā)明專(zhuān)利]一種振動(dòng)圖像生成方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202211618610.9
• 申請(qǐng)日: 2022-12-15
• 公開(kāi)（公告）號(hào): CN116091415A
• 公開(kāi)（公告）日: 2023-05-09
• 發(fā)明（設(shè)計(jì)）人: 高大帥;李健;陳明;武衛(wèi)東
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京捷通華聲科技股份有限公司
• 主分類(lèi)號(hào): G06T7/00
• 分類(lèi)號(hào): G06T7/00;G06T7/11;G06V40/16;G06V10/44;G06V10/774
• 代理公司: 北京潤(rùn)澤恒知識(shí)產(chǎn)權(quán)代理有限公司 11319
• 代理人: 蘇培華

本發(fā)明提供了一種振動(dòng)圖像生成方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)，涉及機(jī)器視覺(jué)技術(shù)領(lǐng)域。該方法包括：獲取待處理圖像數(shù)據(jù)；將待處理圖像數(shù)據(jù)劃分為多個(gè)單位待處理圖像數(shù)據(jù)；針對(duì)每個(gè)單位待處理圖像數(shù)據(jù)，獲取單位待處理圖像數(shù)據(jù)中的目標(biāo)物體區(qū)域；根據(jù)連續(xù)至少兩個(gè)單位待處理圖像數(shù)據(jù)中的目標(biāo)物體區(qū)域，獲取目標(biāo)物體的振動(dòng)圖像。本發(fā)明通過(guò)根據(jù)連續(xù)至少兩個(gè)目標(biāo)物體區(qū)域獲取目標(biāo)物體的振動(dòng)圖像，考慮了連續(xù)多個(gè)物體區(qū)域的輸入，使得獲得的物體振動(dòng)圖像精度更高，解決了生成物體振動(dòng)圖像精度較低的技術(shù)問(wèn)題。

技術(shù)領(lǐng)域

本發(fā)明涉及機(jī)器視覺(jué)領(lǐng)域，特別是涉及一種振動(dòng)圖像生成方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)

物體的振動(dòng)圖像是指微小位移的物體上每個(gè)像素點(diǎn)振動(dòng)的振幅及頻率圖像，能夠反映待測(cè)量物體的內(nèi)在變化，例如：使用人臉振動(dòng)圖像捕捉內(nèi)在情緒的變化、使用物體的振動(dòng)圖像來(lái)捕獲工業(yè)設(shè)備的異常等等。

現(xiàn)有技術(shù)中，物體振動(dòng)圖像的生成過(guò)程一般為：對(duì)輸入的連續(xù)兩幀圖像進(jìn)行物體特征點(diǎn)提取；使用連續(xù)兩幀的物體特征點(diǎn)計(jì)算出相應(yīng)的變換矩陣(如剛性變換、仿射變換等)；根據(jù)變換矩陣獲得物體特征點(diǎn)的位移信息，從而內(nèi)插獲得物體的振動(dòng)圖像。

然而，在上述過(guò)程中，由于采用的是連續(xù)兩幀圖像之間的物體特征點(diǎn)位移偏差來(lái)計(jì)算物體的振動(dòng)圖像，會(huì)使得前后兩幀圖像之間的物體特征點(diǎn)的跟蹤及一一對(duì)應(yīng)存在誤差，導(dǎo)致獲得變換矩陣存在誤差，進(jìn)而會(huì)造成生成的物體振動(dòng)圖像精度較低的問(wèn)題。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明旨在提出一種振動(dòng)圖像生成方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)，通過(guò)根據(jù)連續(xù)至少兩個(gè)目標(biāo)物體區(qū)域獲取目標(biāo)物體的振動(dòng)圖像，考慮了連續(xù)多個(gè)物體區(qū)域的輸入，使得獲得的物體振動(dòng)圖像精度更高，解決了生成物體振動(dòng)圖像精度較低的問(wèn)題。

依據(jù)本發(fā)明的第一方面，提供了一種振動(dòng)圖像生成方法，該方法包括：

獲取待處理圖像數(shù)據(jù)；

將所述待處理圖像數(shù)據(jù)劃分為多個(gè)單位待處理圖像數(shù)據(jù)；

針對(duì)每個(gè)單位待處理圖像數(shù)據(jù)，獲取所述單位待處理圖像數(shù)據(jù)中的目標(biāo)物體區(qū)域；

根據(jù)連續(xù)至少兩個(gè)單位待處理圖像數(shù)據(jù)中的目標(biāo)物體區(qū)域，獲取目標(biāo)物體的振動(dòng)圖像。

可選地，在所述獲取待處理圖像數(shù)據(jù)的步驟之前，還包括：

預(yù)先生成物體區(qū)域分割模型，以及，物體振動(dòng)圖像生成模型。

可選地，所述預(yù)先生成物體區(qū)域分割模型，包括：

獲取訓(xùn)練樣本，所述訓(xùn)練樣本包括樣本圖像和所述樣本圖像的物體分割區(qū)域；

將所述樣本圖像作為輸入，將所述樣本圖像的物體分割區(qū)域作為輸出的目標(biāo)，對(duì)預(yù)設(shè)的初始模型進(jìn)行訓(xùn)練，將訓(xùn)練完成的模型確定為物體區(qū)域分割模型。

可選地，所述預(yù)先生成物體振動(dòng)圖像生成模型，包括：

獲取訓(xùn)練樣本，所述訓(xùn)練樣本包括樣本物體分割區(qū)域和所述樣本物體分割區(qū)域的振動(dòng)圖像；

將連續(xù)至少兩個(gè)樣本物體分割區(qū)域作為輸入，將所述樣本物體分割區(qū)域的振動(dòng)圖像作為輸出的目標(biāo)，對(duì)預(yù)設(shè)的初始模型進(jìn)行訓(xùn)練，將訓(xùn)練完成的模型確定為物體振動(dòng)圖像生成模型。

可選地，所述針對(duì)每個(gè)單位待處理圖像數(shù)據(jù)，獲取所述單位待處理圖像數(shù)據(jù)中的目標(biāo)物體區(qū)域，包括：

分別將每個(gè)單位待處理圖像數(shù)據(jù)輸入至預(yù)先生成的物體區(qū)域分割模型，生成每個(gè)所述單位待處理圖像數(shù)據(jù)中的目標(biāo)物體區(qū)域，其中，所述物體區(qū)域分割模型用于分割出每個(gè)所述單位待處理圖像數(shù)據(jù)中的目標(biāo)物體區(qū)域。

可選地，所述根據(jù)連續(xù)至少兩個(gè)單位待處理圖像數(shù)據(jù)中的目標(biāo)物體區(qū)域，獲取目標(biāo)物體的振動(dòng)圖像，包括：