[發明專利]一種充電樁分配方法及其相關設備

在審

• 申請號: 202011337712.4
• 申請日: 2020-11-25
• 公開（公告）號: CN112465338A
• 公開（公告）日: 2021-03-09
• 發明（設計）人: 劉美億
• 申請（專利權）人: 東軟睿馳汽車技術（沈陽）有限公司
• 主分類號: G06Q10/06
• 分類號: G06Q10/06;G06Q30/02;G06Q50/06;G06N20/00
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 馮柳偉

1.一種充電樁分配方法，其特征在于，所述方法包括：

獲取至少一個目標車輛的當前狀態數據和至少一個目標充電樁的當前充電數據；

將所述至少一個目標車輛的當前狀態數據和至少一個目標充電樁的當前充電數據輸入到強化學習模型，得到所述強化學習模型輸出的充電樁分配結果；其中，所述充電樁分配結果用于記錄所述至少一個目標車輛與所述至少一個目標充電樁之間的匹配關系；

獲取所述至少一個目標車輛的充電反饋結果；

根據所述至少一個目標車輛的充電反饋結果，更新所述強化學習模型，并繼續執行所述獲取至少一個目標車輛的當前狀態數據和至少一個目標充電樁的當前充電數據以及后續步驟，直至達到預設停止條件。

2.根據權利要求1所述的方法，其特征在于，所述根據所述至少一個目標車輛的充電反饋結果，更新所述強化學習模型，包括：

根據所述至少一個目標車輛的充電反饋結果，確定所述充電樁分配結果的獎懲結果；

根據所述充電樁分配結果的獎懲結果，更新所述強化學習模型。

3.根據權利要求2所述的方法，其特征在于，若所述充電反饋結果包括充電等待時長和充電結果，則所述根據所述至少一個目標車輛的充電反饋結果，確定所述充電樁分配結果的獎懲結果，包括：

根據所述至少一個目標車輛的充電等待時長，確定第一獎勵參數；

根據所述至少一個目標車輛的充電結果，確定至少一個已充電車輛和第二獎勵參數；

根據所述至少一個已充電車輛的充電等待時長和所述至少一個已充電車輛的充電概率，確定第三獎勵參數；

將所述第一獎勵參數、所述第二獎勵參數和所述第三獎勵參數進行加權求和，得到所述充電樁分配結果的獎懲結果。

4.根據權利要求1所述的方法，其特征在于，所述當前狀態數據包括：當前工況、當前位置、當前剩余電量、當前充電次數、當前充電所需時長、當前行駛里程和當前行駛速度中的至少一個；和/或，所述當前充電數據包括當前排隊車輛數量、當前排隊車輛的充電總時長、當前供電效率和當前充電等候時長。

5.根據權利要求1至4中任一項所述的方法，其特征在于，所述方法還包括：

獲取所述至少一個目標車輛的充電參數；

所述將所述至少一個目標車輛的當前狀態數據和至少一個目標充電樁的當前充電數據輸入到強化學習模型，得到所述強化學習模型輸出的充電樁分配結果，包括：

將所述至少一個目標車輛的當前狀態數據、所述至少一個目標車輛的充電參數和至少一個目標充電樁的當前充電數據輸入到強化學習模型，得到所述強化學習模型輸出的充電樁分配結果。

6.根據權利要求1至4中任一項所述的方法，其特征在于，所述方法還包括：

獲取所述至少一個目標充電樁的供電參數；

所述將所述至少一個目標車輛的當前狀態數據和至少一個目標充電樁的當前充電數據輸入到強化學習模型，得到所述強化學習模型輸出的充電樁分配結果，包括：

將所述至少一個目標車輛的當前狀態數據、至少一個目標充電樁的當前充電數據和所述至少一個目標充電樁的供電參數輸入到強化學習模型，得到所述強化學習模型輸出的充電樁分配結果。

7.根據權利要求1所述的方法，其特征在于，所述將所述至少一個目標車輛的當前狀態數據和至少一個目標充電樁的當前充電數據輸入到強化學習模型，得到所述強化學習模型輸出的充電樁分配結果，包括：

將所述至少一個目標車輛的當前狀態數據、所述至少一個目標車輛的歷史狀態數據、至少一個目標充電樁的當前充電數據和所述至少一個目標充電樁的歷史充電數據輸入到強化學習模型，得到所述強化學習模型輸出的充電樁分配結果。

8.根據權利要求1所述的方法，其特征在于，當目標區域包括所述至少一個目標車輛和所述至少一個目標充電樁時，所述預設停止條件為所述目標區域內在預設時間段內未出現觸發充電請求的目標車輛；或者，所述預設停止條件為所述目標區域內觸發充電請求的目標車輛的個數低于第一閾值。