[發明專利]數據訓練方法、裝置及系統、計算機設備

有效

• 申請號: 201711377963.3
• 申請日: 2017-12-19
• 公開（公告）號: CN109948632B
• 公開（公告）日: 2021-03-26
• 發明（設計）人: 鄭星
• 申請（專利權）人: 杭州海康威視數字技術股份有限公司
• 主分類號: G06K9/62
• 分類號: G06K9/62;G06N20/00
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 江崇玉

1.一種數據訓練方法，其特征在于，用于數據訓練系統中的第一訓練主機，所述數據訓練系統中包括多個訓練主機，所述第一訓練主機為所述多個訓練主機中的一個，每個所述訓練主機中存儲有相同的訓練數據集以及包括所述訓練數據集中所有數據的名稱的相同的文件名集合，所述方法包括：

與其他訓練主機獲取同一偽隨機數種子，所述其他訓練主機為所述多個訓練主機中除所述第一訓練主機以外的訓練主機；

執行至少一次訓練過程，直至所述訓練過程的執行結果滿足預設停止條件，所述訓練過程包括：

基于所述偽隨機數種子，對所述文件名集合進行隨機化處理，得到更新后的文件名集合，

基于所述更新后的文件名集合，對所述訓練數據集中的第一數據子集進行訓練，直至所述多個訓練主機完成本次對所述訓練數據集的訓練后，再次執行所述訓練過程，所述第一數據子集包括所述訓練數據集中所述第一訓練主機對應的數據；

其中，所述數據訓練系統中的所有訓練主機在執行同一次訓練過程時，所得到的更新后的文件名集合均相同。

2.根據權利要求1所述的方法，其特征在于，所述第一訓練主機為管理訓練主機，所述與其他訓練主機獲取同一偽隨機數種子，包括：

生成某一偽隨機數種子；

向所述其他訓練主機發送所述某一偽隨機數種子。

3.根據權利要求2所述的方法，其特征在于，所述方法還包括：

接收第二訓練主機發送的所述訓練數據集中的第二數據子集的訓練進度信息，所述第二訓練主機為所述其他訓練主機中的任一訓練主機，所述第二數據子集包括所述訓練數據集中所述第二訓練主機對應的數據；

在確定所述數據訓練系統中的所有訓練主機完成本次對所述訓練數據集的訓練后，執行新一次的訓練過程，并向所述其他訓練主機發送訓練啟動指示信息，所述訓練啟動指示信息用于指示所述其他訓練主機執行新一次的訓練過程。

4.根據權利要求1所述的方法，其特征在于，所述方法還包括：

在完成對所述第一數據子集的訓練后，向所述其他訓練主機發送所述第一數據子集的訓練進度信息；

接收第二訓練主機發送的所述訓練數據集中的第二數據子集的訓練進度信息，所述第二訓練主機為所述其他訓練主機中的任一訓練主機，所述第二數據子集包括所述訓練數據集中所述第二訓練主機對應的數據；

在確定所述數據訓練系統中的所有訓練主機完成本次對所述訓練數據集的訓練后，執行新一次的訓練過程。

5.根據權利要求4所述的方法，其特征在于，所述向所述其他訓練主機發送所述第一數據子集的訓練進度信息，包括：

在所述數據訓練系統中廣播所述第一數據子集的訓練進度信息。

6.根據權利要求1所述的方法，其特征在于，所述基于所述偽隨機數種子，對所述文件名集合進行隨機化處理，包括：

基于所述偽隨機數種子，采用隨機洗牌算法對所述文件名集合進行隨機化處理；

其中，所述數據訓練系統中的所有訓練主機在執行同一次訓練過程時，所采用的隨機洗牌算法的迭代次數相同。

7.根據權利要求1所述的方法，其特征在于，所述文件名集合由多個文件名子集合組成，所述多個文件名子集合與所述多個訓練主機一一對應，所述多個文件名子集合中任意兩個文件名子集合中的所有數據名稱均不相同；

所述基于所述更新后的文件名集合，對所述訓練數據集中的第一數據子集進行訓練，包括：

獲取所述更新后的文件名集合中的第一文件名子集合，所述第一文件名子集合為所述第一訓練主機對應的文件名子集合；

基于所述第一文件名子集合，從所述訓練數據集中獲取所述第一數據子集；

對所述第一數據子集進行訓練。

8.根據權利要求7所述的方法，其特征在于，

所述文件名集合以文件名列表的形式表征。