[發明專利]數字人訓練數據清洗方法、裝置、電子設備及存儲介質

在審

• 申請號: 202010773938.2
• 申請日: 2020-08-04
• 公開（公告）號: CN111966671A
• 公開（公告）日: 2020-11-20
• 發明（設計）人: 常向月
• 申請（專利權）人: 深圳追一科技有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/583
• 代理公司: 深圳市智圈知識產權代理事務所(普通合伙) 44351
• 代理人: 呂靜

1.一種數字人訓練數據清洗方法，其特征在于，所述方法包括：

獲取數字人訓練數據中的待處理片段，所述待處理片段基于目標對象對目標臺詞信息進行錄制生成；

基于所述目標臺詞信息獲取標準人物特征信息；

從所述待處理片段中獲取所述目標對象的待測人物特征信息；

判斷所述待測人物特征信息與所述標準人物特征信息是否匹配；

若所述待測人物特征信息與所述標準人物特征信息不匹配，則將所述待處理片段進行刪除。

2.根據權利要求1所述的方法，其特征在于，所述若所述待測人物特征信息與所述標準人物特征信息不匹配，則將所述待處理片段進行刪除，包括：

若所述待測人物特征信息與所述標準人物特征信息不匹配，則基于所述待測人物特征信息與所述標準人物特征信息生成異常信息；

通過所述異常信息以及所述待處理片段對所述數字人訓練數據進行標記，得到標記信息；

基于所述標記信息對所述待處理片段進行刪除。

3.根據權利要求1所述的方法，其特征在于，所述方法還包括：

確定所述待處理片段中是否存在包括異常物體的圖像；

若所述待處理片段中存在包括異常物體的圖像，則執行所述將所述待處理片段進行刪除的步驟；或者

若所述待處理片段中不存在包括異常物體的圖像，則執行所述判斷所述待測人物特征信息與所述標準人物特征信息是否匹配的步驟。

4.根據權利要求1所述的方法，其特征在于，所述標準人物特征信息包括標準嘴型信息，所述待測人物特征信息包括待測嘴型信息，所述判斷所述待測人物特征信息與所述標準人物特征信息是否匹配，包括：

判斷所述標準嘴型信息和所述待測嘴型信息是否匹配；

所述若所述待測人物特征信息與所述標準人物特征信息不匹配，則將所述待處理片段進行刪除，包括：

若所述標準嘴型信息和所述待測嘴型信息不匹配，則將所述待處理片段進行刪除。

5.根據權利要求4所述的方法，其特征在于，所述標準嘴型信息的數量為多個，所述若所述標準嘴型信息和所述待測嘴型信息不匹配，則將所述待處理片段進行刪除，包括：

獲取所述待測嘴型信息對應的臺詞進度，并獲取與所述臺詞進度對應的臺詞；

基于所述臺詞從多個所述標準嘴型信息中選取出目標標準嘴型信息；

若所述目標標準嘴型信息和所述待測嘴型信息不匹配，則將所述待處理片段進行刪除。

6.根據權利要求5所述的方法，其特征在于，所述若所述目標標準嘴型信息和所述待測嘴型信息不匹配，則將所述待處理片段進行刪除，包括：

獲取所述目標標準嘴型信息對應的第一關鍵點；

獲取所述待測嘴型信息對應的第二關鍵點；

若所述第一關鍵點與所述第二關鍵點之間的距離大于距離閾值，則確定所述目標標準嘴型信息與所述待測嘴型信息不匹配，并將所述待處理片段進行刪除。

7.根據權利要求6所述的方法，其特征在于，所述第一關鍵點的數量為多個，所述第二關鍵點的數量為多個，多個第一關鍵點和多個第二關鍵點一一對應，所述若所述第一關鍵點與所述第二關鍵點之間的距離大于距離閾值，則確定所述目標標準嘴型信息與所述待測嘴型信息不匹配，包括：

獲取所述多個第一關鍵點中每個第一關鍵點與其對應的第二關鍵點的距離，得到多個目標距離；

獲取所述多個目標距離相加的和，并確定所述多個目標距離相加的和是否超過預設距離；

若所述多個目標距離相加的和超過預設距離，則確定所述第一關鍵點與所述第二關鍵點之間的距離大于距離閾值，并確定所述目標標準嘴型信息與所述待測嘴型信息不匹配。