[發明專利]跨模態人臉識別的方法、裝置、設備和存儲介質

有效

• 申請號: 202011027564.6
• 申請日: 2020-09-25
• 公開（公告）號: CN112016523B
• 公開（公告）日: 2023-08-29
• 發明（設計）人: 田飛
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V10/774;G06N20/20
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本申請公開了跨模態人臉識別的方法、裝置、設備和存儲介質，涉及人工智能技術領域，具體為深度學習和計算機視覺技術。具體實現方案為：針對至少兩種模態中的每一種模態，采用樣本用戶的該種模態的人臉圖像數據對人臉識別模型進行單模態訓練；采用樣本用戶的所述至少兩種模態的人臉圖像數據，對所述人臉識別模型進行跨模態訓練；其中，單模態訓練過程與跨模態訓練過程共享模型參數；將經單模態訓練和跨模態訓練的人臉識別模型，作為待使用的跨模態人臉識別模型。本申請能夠提高跨模態人臉識別的準確度。

技術領域

本申請涉及人工智能技術領域，具體涉及深度學習和計算機視覺技術，具體涉及一種跨模態人臉識別的方法、裝置、設備和存儲介質。

背景技術

人臉與人體的諸如指紋和虹膜之類的其它生物特征一樣與生俱來，具有唯一性和不易復制性，因此可以基于人的臉部特征信息進行身份識別即人臉識別。人臉識別技術已經廣泛應用于工作和生活的各個領域。

通過不同種類的圖像采集器可以采集不同模態的人臉圖像，如何對不同模態的人臉圖像進行識別是業內重要問題。

發明內容

本公開提供了一種用于跨模態人臉識別的方法、裝置、設備以及存儲介質。

根據本公開的一方面，提供了一種跨模態人臉識別的方法，包括：

針對至少兩種模態中的每一種模態，采用樣本用戶的該種模態的人臉圖像數據對人臉識別模型進行單模態訓練；

采用樣本用戶的所述至少兩種模態的人臉圖像數據，對所述人臉識別模型進行跨模態訓練；其中，單模態訓練過程與跨模態訓練過程共享模型參數；

將經單模態訓練和跨模態訓練的人臉識別模型，作為待使用的跨模態人臉識別模型。

根據本公開的一方面，提供了一種跨模態人臉識別的裝置，包括：

單模態訓練模塊，用于針對至少兩種模態中的每一種模態，采用樣本用戶的該種模態的人臉圖像數據對人臉識別模型進行單模態訓練；

跨模態訓練模塊，用于采用樣本用戶的所述至少兩種模態的人臉圖像數據，對所述人臉識別模型進行跨模態訓練；其中，單模態訓練過程與跨模態訓練過程共享模型參數；

模型確定模塊，用于將經單模態訓練和跨模態訓練的人臉識別模型，作為待使用的跨模態人臉識別模型。

根據第三方面，提供了一種電子設備，該電子設備包括：

至少一個處理器；以及

與所述至少一個處理器通信連接的存儲器；其中，

所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被所述至少一個處理器執行，以使所述至少一個處理器能夠執行如本申請實施例中任一項所述的跨模態人臉識別的方法。

根據第四方面，提供了一種存儲有計算機指令的非瞬時計算機可讀存儲介質，所述計算機指令用于使所述計算機執行如本申請實施例中任一項所述的跨模態人臉識別的方法。

根據本申請的技術能夠提高跨模態人臉識別的準確度。

應當理解，本部分所描述的內容并非旨在標識本公開的實施例的關鍵或重要特征，也不用于限制本公開的范圍。本公開的其它特征將通過以下的說明書而變得容易理解。

附圖說明

附圖用于更好地理解本方案，不構成對本申請的限定。其中：

圖1a是根據本申請實施例提供的一種跨模態人臉識別的方法的流程示意圖；

圖1b是根據本申請實施例提供的一種人臉識別模型的結構示意圖；

圖2是根據本申請實施例提供的另一種跨模態人臉識別的方法的流程示意圖；