[發(fā)明專利]一種圖像處理系統(tǒng)、方法及介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202310246476.2
• 申請(qǐng)日: 2023-03-15
• 公開(kāi)（公告）號(hào): CN116309998A
• 公開(kāi)（公告）日: 2023-06-23
• 發(fā)明（設(shè)計(jì)）人: 張劉燦;袁若芝;丁佳偉;黃鵬;于秋燕;明小凱
• 申請(qǐng)（專利權(quán)）人: 杭州若夕企業(yè)管理有限公司
• 主分類號(hào): G06T13/40
• 分類號(hào): G06T13/40;G06T13/80;G06V20/40
• 代理公司: 安徽思爾六知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 34244
• 代理人: 賈鳳儀

1.一種圖像處理系統(tǒng)，其特征在于，包括：

動(dòng)作捕捉模塊，其用于動(dòng)作捕捉獲得第一運(yùn)動(dòng)數(shù)據(jù)；建模模塊，其用于建立三維人物模型；模型驅(qū)動(dòng)模塊，其基于第一運(yùn)動(dòng)數(shù)據(jù)驅(qū)動(dòng)三維人物模型生成三維動(dòng)畫(huà)圖像；

第一圖像處理模塊，其將生成的三維動(dòng)畫(huà)圖像進(jìn)行二維化處理獲得二維空間內(nèi)的第一人物數(shù)據(jù)；第二圖像處理模塊，其用于從二維動(dòng)漫中提取二維動(dòng)畫(huà)圖像，然后處理獲得二維空間內(nèi)的第二人物數(shù)據(jù)；第三圖像處理模塊，其基于第一人物數(shù)據(jù)和第二人物數(shù)據(jù)生成圖像節(jié)點(diǎn)；

二維性判斷模塊，其用于判斷人物數(shù)據(jù)序列的二維性，定義二維隨機(jī)場(chǎng)，二維隨機(jī)場(chǎng)的節(jié)點(diǎn)集合表示為V，節(jié)點(diǎn)之間的邊的集合表示為E；

該二維隨機(jī)場(chǎng)的能量函數(shù)為：

其中X為圖像節(jié)點(diǎn)集合，θ_px_p為節(jié)點(diǎn)p的勢(shì)函數(shù)，θ_pqx_p,x_q為節(jié)點(diǎn)p與q之間的邊的勢(shì)函數(shù)，x_p為節(jié)點(diǎn)p映射的圖像節(jié)點(diǎn)的二維性值，x_q為節(jié)點(diǎn)q映射的圖像節(jié)點(diǎn)的二維性值；二維性值為0表示圖像節(jié)點(diǎn)對(duì)應(yīng)的人物數(shù)據(jù)與真實(shí)人物偏差較大；二維性值為1表示圖像節(jié)點(diǎn)對(duì)應(yīng)的人物數(shù)據(jù)接近真實(shí)人物；

其中，

dist_p,q表示x_p與x_q映射的圖像節(jié)點(diǎn)的第二距離；

其中，

S₁為設(shè)定的移動(dòng)熵閾值，Sx_p為x_p映射的圖像節(jié)點(diǎn)的移動(dòng)熵，計(jì)算公式如下：

Sx_p＝∑_c∈Kcosθ_c1,c2，其中K為人體骨架模型的肢體的集合，其中θ_c1,c2表示x_p映射的圖像節(jié)點(diǎn)的第c個(gè)肢體與標(biāo)準(zhǔn)姿態(tài)模型中第c個(gè)肢體的夾角；

計(jì)算能量函數(shù)最小化時(shí)，二維隨機(jī)場(chǎng)的各個(gè)節(jié)點(diǎn)的二維性值作為人物數(shù)據(jù)序列的二維性；

序列匹配模塊，其用于計(jì)算第一人物數(shù)據(jù)和第二人物數(shù)據(jù)對(duì)應(yīng)的人物數(shù)據(jù)序列二維性之間的第三距離，提取第三距離最小的前N個(gè)第二人物數(shù)據(jù)作為參考人物數(shù)據(jù)；

原圖像提取模塊，提取參考人物數(shù)據(jù)的圖像節(jié)點(diǎn)映射的二維動(dòng)畫(huà)圖像，并將提取的二維動(dòng)畫(huà)圖像的時(shí)間節(jié)點(diǎn)之間的二維動(dòng)畫(huà)圖像連續(xù)的提取出來(lái)生成二維動(dòng)畫(huà)圖集作為推薦圖集。

2.根據(jù)權(quán)利要求1所述的一種圖像處理系統(tǒng)，其特征在于，通過(guò)圖像識(shí)別的方式從三維動(dòng)畫(huà)圖像中識(shí)別人物以及人物運(yùn)動(dòng)姿態(tài)。

3.根據(jù)權(quán)利要求1所述的一種圖像處理系統(tǒng)，其特征在于，第一人物數(shù)據(jù)和第二人物數(shù)據(jù)包括人物ID和人物運(yùn)動(dòng)姿態(tài)參數(shù)。

4.根據(jù)權(quán)利要求1所述的一種圖像處理系統(tǒng)，其特征在于，生成圖像節(jié)點(diǎn)的方法包括：

步驟101，基于人物數(shù)據(jù)生成人物數(shù)據(jù)序列；

需要說(shuō)明的是：人物數(shù)據(jù)是由連續(xù)的三維動(dòng)畫(huà)圖像或二維動(dòng)畫(huà)圖像生成的，因此可以為人物數(shù)據(jù)標(biāo)記生成該人物數(shù)據(jù)的動(dòng)畫(huà)圖像的時(shí)間節(jié)點(diǎn)來(lái)生成包含多個(gè)人物數(shù)據(jù)的序列數(shù)據(jù)；

步驟102，從人物數(shù)據(jù)序列的第一個(gè)人物數(shù)據(jù)開(kāi)始向后遍歷，遍歷終止的條件是：當(dāng)前遍歷的人物數(shù)據(jù)與第一個(gè)人物數(shù)據(jù)的第一距離大于設(shè)定的第一距離閾值，并將遍歷終止的人物數(shù)據(jù)標(biāo)記為突變?nèi)宋飻?shù)據(jù)；

步驟103，從上一次遍歷終止的突變?nèi)宋飻?shù)據(jù)開(kāi)始向后遍歷尋找人物數(shù)據(jù)；遍歷終止的條件是：當(dāng)前遍歷的人物數(shù)據(jù)與突變?nèi)宋飻?shù)據(jù)的第一距離大于設(shè)定的第一距離閾值，并將遍歷終止的人物數(shù)據(jù)標(biāo)記為突變?nèi)宋飻?shù)據(jù)；

步驟104，迭代執(zhí)行步驟103，獲取所有的突變?nèi)宋飻?shù)據(jù)；

步驟105，將突變?nèi)宋飻?shù)據(jù)一一映射生成圖像節(jié)點(diǎn)，并將突變?nèi)宋飻?shù)據(jù)作為圖像節(jié)點(diǎn)的參數(shù)。

5.根據(jù)權(quán)利要求4所述的一種圖像處理系統(tǒng)，其特征在于，第一距離的計(jì)算公式如下：

其中k為人體骨架模型的肢體數(shù)量，θ_i1為一個(gè)人物數(shù)據(jù)的第i個(gè)肢體與標(biāo)準(zhǔn)姿態(tài)模型中第i個(gè)肢體的夾角；θ_i2為另一個(gè)人物數(shù)據(jù)的第i個(gè)肢體與標(biāo)準(zhǔn)姿態(tài)模型中第i個(gè)肢體的夾角。