[發(fā)明專利]機(jī)器學(xué)習(xí)輔助的圖像預(yù)測(cè)

在審

• 申請(qǐng)?zhí)枺?/td>: 201980070345.5
• 申請(qǐng)日: 2019-11-27
• 公開(kāi)（公告）號(hào): CN112912896A
• 公開(kāi)（公告）日: 2021-06-04
• 發(fā)明（設(shè)計(jì)）人: C·E·格斯特林;L·A·加蒂斯;S·V·喬希;G·M·勞森;K·R·沃森;S·斯瑞達(dá);K·P·維加;S·R·斯庫(kù)利;T·格諾特;O·C·哈姆希茨
• 申請(qǐng)（專利權(quán)）人: 蘋果公司
• 主分類號(hào): G06K9/20
• 分類號(hào): G06K9/20;G06K9/62
• 代理公司: 北京市金杜律師事務(wù)所 11256
• 代理人: 黃倩

1.一種方法，包括：

由設(shè)備捕獲被攝體的紅外圖像；

由所述設(shè)備獲取所述被攝體的參考RGB圖像；

將所述紅外圖像和所述參考RGB圖像作為輸入提供給機(jī)器學(xué)習(xí)模型，所述機(jī)器學(xué)習(xí)模型已被訓(xùn)練為基于被攝體的紅外圖像和對(duì)應(yīng)的RGB圖像來(lái)輸出所述被攝體的預(yù)測(cè)的RGB圖像；以及

基于所述機(jī)器學(xué)習(xí)模型的輸出來(lái)提供所述被攝體的預(yù)測(cè)的RGB圖像。

2.根據(jù)權(quán)利要求1所述的方法，其中在捕獲所述紅外圖像的同時(shí)，由RGB圖像傳感器捕獲所述被攝體的所述參考RGB圖像。

3.根據(jù)權(quán)利要求1所述的方法，其中所述被攝體的所述參考RGB圖像是在捕獲所述紅外圖像之前捕獲的所述被攝體的RGB圖像。

4.根據(jù)權(quán)利要求1所述的方法，其中所述預(yù)測(cè)的RGB圖像對(duì)應(yīng)于所述紅外圖像的顏色表示。

5.根據(jù)權(quán)利要求1所述的方法，還包括：

由所述設(shè)備基于環(huán)境勒克斯水平從多個(gè)機(jī)器學(xué)習(xí)模型中選擇所述機(jī)器學(xué)習(xí)模型。

6.根據(jù)權(quán)利要求5所述的方法，其中已基于對(duì)應(yīng)被攝體的同時(shí)捕獲的紅外圖像和RGB圖像來(lái)訓(xùn)練所選擇的機(jī)器學(xué)習(xí)模型。

7.根據(jù)權(quán)利要求6所述的方法，其中捕獲所述RGB圖像的環(huán)境的勒克斯水平低于預(yù)定義的勒克斯水平。

8.根據(jù)權(quán)利要求5所述的方法，其中已基于紅外圖像和在所述紅外圖像之前捕獲的對(duì)應(yīng)的RGB圖像來(lái)訓(xùn)練所選擇的機(jī)器學(xué)習(xí)模型。

9.根據(jù)權(quán)利要求8所述的方法，其中捕獲所述對(duì)應(yīng)的RGB圖像的環(huán)境的勒克斯水平高于預(yù)定義的勒克斯水平。

10.根據(jù)權(quán)利要求1所述的方法，其中所述機(jī)器學(xué)習(xí)模型已基于目標(biāo)RGB圖像被進(jìn)一步訓(xùn)練，在勒克斯水平高于預(yù)定義的勒克斯水平的環(huán)境中與捕獲對(duì)應(yīng)的IR圖像同時(shí)地捕獲所述目標(biāo)RGB圖像。

11.根據(jù)權(quán)利要求1所述的方法，其中所述機(jī)器學(xué)習(xí)模型被配置為接收與面部分割或皮膚分割中的至少一者對(duì)應(yīng)的估計(jì)的面部特征，并且

其中所述機(jī)器學(xué)習(xí)模型的所述輸出至少部分地基于所估計(jì)的面部特征。

12.根據(jù)權(quán)利要求1所述的方法，還包括：

在將所述紅外圖像和所述參考RGB圖像提供給所述機(jī)器學(xué)習(xí)模型之前，相對(duì)于所述被攝體執(zhí)行背景減除。

13.根據(jù)權(quán)利要求1所述的方法，還包括：

在將所述紅外圖像和所述參考RGB圖像提供給所述機(jī)器學(xué)習(xí)模型之前，對(duì)所述紅外圖像或所述參考RGB圖像中的至少一者執(zhí)行焦距調(diào)節(jié)。

14.根據(jù)權(quán)利要求1所述的方法，還包括：

在將所述紅外圖像和所述參考RGB圖像提供給所述機(jī)器學(xué)習(xí)模型之前，對(duì)所述紅外圖像或所述參考RGB圖像中的至少一者執(zhí)行分辨率調(diào)節(jié)。

15.一種設(shè)備，包括：

紅外圖像傳感器；

至少一個(gè)處理器；和

存儲(chǔ)器，所述存儲(chǔ)器包括指令，所述指令當(dāng)由所述至少一個(gè)處理器執(zhí)行時(shí)，使所述至少一個(gè)處理器：

由所述紅外圖像傳感器捕獲被攝體的紅外圖像；

獲取所述被攝體的參考RGB圖像；

將所述紅外圖像和所述參考RGB圖像提供給機(jī)器學(xué)習(xí)模型，所述機(jī)器學(xué)習(xí)模型已被訓(xùn)練為基于被攝體的紅外圖像和對(duì)應(yīng)的RGB圖像來(lái)輸出預(yù)測(cè)的RGB圖像；以及

基于所述機(jī)器學(xué)習(xí)模型的輸出來(lái)提供所述被攝體的預(yù)測(cè)的RGB圖像。