[發(fā)明專利]模型訓(xùn)練、關(guān)鍵點定位及圖像處理方法、系統(tǒng)及電子設(shè)備

在審

• 申請?zhí)枺?/td>: 201611080382.9
• 申請日: 2016-11-30
• 公開（公告）號: CN108133220A
• 公開（公告）日: 2018-06-08
• 發(fā)明（設(shè)計）人: 王晉瑋;錢晨;欒青
• 申請（專利權(quán)）人: 北京市商湯科技開發(fā)有限公司
• 主分類號: G06K9/62
• 分類號: G06K9/62;G06K9/00;G06N3/08;G06Q30/02
• 代理公司: 北京天健君律專利代理事務(wù)所(普通合伙) 11461
• 代理人: 張雪飛;劉潔

1.一種用于定位關(guān)鍵點的模型訓(xùn)練方法，其特征在于，包括：

獲取第一樣本集，所述第一樣本集包括多個未標(biāo)注樣本圖像；

基于深度神經(jīng)網(wǎng)絡(luò)，對所述第一樣本集中的各所述未標(biāo)注樣本圖像進(jìn)行關(guān)鍵點位置標(biāo)注，得到第二樣本集，其中，所述深度神經(jīng)網(wǎng)絡(luò)用于對圖像進(jìn)行關(guān)鍵點定位；

至少根據(jù)所述第二樣本集中的部分樣本圖像及第三樣本集，調(diào)整所述深度神經(jīng)網(wǎng)絡(luò)的參數(shù)，其中，所述第三樣本集包括多個已標(biāo)注樣本圖像。

2.根據(jù)權(quán)利要求1所述的用于定位關(guān)鍵點的模型訓(xùn)練方法，其特征在于，所述基于深度神經(jīng)網(wǎng)絡(luò)，對所述第一樣本集中的各所述未標(biāo)注樣本圖像進(jìn)行關(guān)鍵點位置標(biāo)注，得到第二樣本集，包括：

對所述第一樣本集中的各所述未標(biāo)注樣本圖像進(jìn)行圖像變換處理，得到第四樣本集，其中，所述圖像變換處理包括：旋轉(zhuǎn)、平移、縮放、加噪及加遮擋物中的任意一項或任意組合；

基于所述深度神經(jīng)網(wǎng)絡(luò)，對所述第四樣本集以及所述第一樣本集中的各樣本圖像進(jìn)行關(guān)鍵點位置標(biāo)注，得到所述第二樣本集。

3.一種關(guān)鍵點定位方法，其特征在于，包括：

獲取目標(biāo)圖像；

采用權(quán)利要求1或2所述的方法訓(xùn)練而得的用于定位關(guān)鍵點的模型，對所述目標(biāo)圖像進(jìn)行關(guān)鍵點定位。

4.一種圖像處理方法，其特征在于，包括：

獲取待處理圖像；

采用權(quán)利要求1或2所述的方法訓(xùn)練而得的用于定位關(guān)鍵點的模型，確定所述待處理圖像中的至少一個關(guān)鍵點；

基于所述至少一個關(guān)鍵點，對所述待處理圖像進(jìn)行處理。

5.一種用于定位關(guān)鍵點的模型訓(xùn)練系統(tǒng)，其特征在于，包括：

樣本集獲取模塊，用于獲取第一樣本集，所述第一樣本集包括多個未標(biāo)注樣本圖像；

關(guān)鍵點位置標(biāo)注模塊，用于基于深度神經(jīng)網(wǎng)絡(luò)，對所述第一樣本集中的各所述未標(biāo)注樣本圖像進(jìn)行關(guān)鍵點位置標(biāo)注，得到第二樣本集，其中，所述深度神經(jīng)網(wǎng)絡(luò)用于對圖像進(jìn)行關(guān)鍵點定位；

網(wǎng)絡(luò)參數(shù)調(diào)整模塊，用于至少根據(jù)所述第二樣本集中的部分樣本圖像及第三樣本集，調(diào)整所述深度神經(jīng)網(wǎng)絡(luò)的參數(shù)，其中，所述第三樣本集包括多個已標(biāo)注樣本圖像。

6.一種關(guān)鍵點定位系統(tǒng)，其特征在于，包括：

目標(biāo)圖像獲取模塊，用于獲取目標(biāo)圖像；

關(guān)鍵點定位模塊，用于采用權(quán)利要求5所述的系統(tǒng)訓(xùn)練而得的用于定位關(guān)鍵點的模型，對所述目標(biāo)圖像進(jìn)行關(guān)鍵點定位。

7.一種圖像處理系統(tǒng)，其特征在于，包括：

圖像獲取模塊，用于獲取待處理圖像；

關(guān)鍵點確定模塊，用于采用權(quán)利要求5所述的系統(tǒng)訓(xùn)練而得的用于定位關(guān)鍵點的模型，確定所述待處理圖像中的至少一個關(guān)鍵點；

圖像處理模塊，用于基于所述至少一個關(guān)鍵點，對所述待處理圖像進(jìn)行處理。

8.一種電子設(shè)備，其特征在于，包括：處理器、存儲器、通信接口和通信總線，所述處理器、所述存儲器和所述通信接口通過所述通信總線完成相互間的通信；

所述存儲器用于存放至少一可執(zhí)行指令，所述可執(zhí)行指令使所述處理器執(zhí)行如權(quán)利要求1或2所述的用于定位關(guān)鍵點的模型訓(xùn)練方法對應(yīng)的操作。

9.一種電子設(shè)備，其特征在于，包括：處理器、存儲器、通信接口和通信總線，所述處理器、所述存儲器和所述通信接口通過所述通信總線完成相互間的通信；

所述存儲器用于存放至少一可執(zhí)行指令，所述可執(zhí)行指令使所述處理器執(zhí)行如權(quán)利要求3所述的關(guān)鍵點定位方法對應(yīng)的操作。

10.一種電子設(shè)備，其特征在于，包括：處理器、存儲器、通信接口和通信總線，所述處理器、所述存儲器和所述通信接口通過所述通信總線完成相互間的通信；

所述存儲器用于存放至少一可執(zhí)行指令，所述可執(zhí)行指令使所述處理器執(zhí)行如權(quán)利要求4所述的圖像處理方法對應(yīng)的操作。