[發明專利]一種基于深度強化學習的智能充電站優化選擇系統

有效

• 申請號: 202010310702.5
• 申請日: 2020-04-20
• 公開（公告）號: CN111523722B
• 公開（公告）日: 2022-04-12
• 發明（設計）人: 林海;劉威
• 申請（專利權）人: 武漢大學
• 主分類號: G06Q10/04
• 分類號: G06Q10/04;G06Q50/06;G06N3/04;G06N3/08
• 代理公司: 武漢科皓知識產權代理事務所(特殊普通合伙) 42222
• 代理人: 許蓮英

本發明提出了一種基于深度強化學習的智能充電站優化選擇系統。本發明構建充電站的排隊狀態；根據用戶車輛的經緯度判定用戶車輛所屬區域；且將當前時刻轉換成時間損耗。中心服務器將用戶車輛所屬區域、用戶車輛已使用電量、時間損耗、所有充電站排隊狀態作為深度神經網絡輸入，估計充電站的未來總收益，得到推薦充電站。待用戶車輛在推薦充電站充電完成計算充電收益，并等待下一次用戶充電請求構建四元組，保存到經驗池中；中心服務器隨機提取四元組進行訓練，計算損失函數，優化深度神經網絡的參數。本發明能夠處理大規模的充電站推薦管理場景，通過神經網絡優化平均用戶充電時間最短和各充電站的負載均衡量。

技術領域

本發明涉及充電站推薦領域，具體涉及一種基于深度強化學習的智能充電站優化選擇系統。

背景技術

隨著環境與能源問題越來越受人們關注，環保設施和清潔能源的使用將成為大的趨勢。純電動汽車完全采用電力作為動力源，真正實現了污染零排放，備受人們關注。其基礎充電設施也在進一步推廣，為解決電動汽車出行與使用問題提供了便利。

目前用戶充電，通常通過導航軟件行駛最近充電站處。由于用戶無法獲取充電站信息、電動汽車充電時間較長、熱點區域等因素，將導致充電用戶在充電站的分配不合理，從而影響用戶體驗。

發明內容

本發明的目的在于提供一種基于深度強化學習的智能充電站優化選擇系統，利用深度強化學習算法，從充電系統的整體性能出發，推薦不同的電動車到不同的充電站，從而實現用戶平均等待時間最短、充電站負載均衡等目的。

基于深度強化學習的智能充電站優化選擇系統包括：基于深度強化學習的智能充電站優化選擇裝置、基于深度強化學習的智能充電站優化選擇方法。

本發明裝置的技術方案是一種基于深度強化學習的智能充電站優化選擇裝置，包括：微處理器、觸摸屏、GPS定位模塊、電量檢測模塊、車輛無線通信模塊、車輛識別系統、充電樁檢測模塊、信息獲取終端、充電站無線通信模塊、中心服務器；

所述GPS定位模塊與所述微處理器通過有線方式連接；所述電量檢測模塊與所述微處理器通過有線方式連接；所述觸摸屏與所述微處理器通過有線方式連接；所述微處理器與所述車輛無線通信模塊通過有線方式連接；所述車輛無線通信模塊與所述中心服務器通過無線方式連接；所述充電樁檢測裝置與所述信息獲取終端通過有線方式連接；所述車輛識別系統與所述信息獲取終端通過有線方式連接；所述信息獲取終端與所述充電站無線通信模塊通過有線方式連接；所述充電站無線通信模塊與中心服務器通過無線方式連接；

所述的微處理器、觸摸屏、GPS定位模塊、電量檢測模塊、車輛無線通信模塊部署于用戶車輛上；所述充電樁檢測裝置部署于充電樁上；所述的車輛識別系統、信息獲取終端、充電站無線通信模塊均部署于充電站里。

所述微處理器協調控制所述的GPS定位模塊、電量檢測模塊、車輛無線通信模塊；所述微處理器控制所述的觸摸屏實現人機交互；

所述GPS定位模塊采集用戶車輛的經度、用戶車輛的緯度，將用戶車輛的經度、用戶車輛的緯度傳輸至所述微處理器；

所述電量檢測模塊實時采集用戶車輛的已使用電量，將用戶車輛的已使用電量傳輸至所述微處理器；

在用戶車輛需要充電時，用戶通過所述觸摸屏輸入用戶充電請求并傳輸至所述微處理器，所述微處理器將用戶充電請求、用戶車輛的經度、用戶車輛的緯度、用戶車輛的已使用電量通過車輛無線通信模塊無線傳輸至所述中心服務器。

所述充電樁檢測模塊實時檢測可用充電樁數量，將可用充電樁數量有線傳輸到信息獲取終端；

所述車輛識別系統，以站內攝像頭加圖像處理為主，刷卡入站為輔的方式識別進出站車輛，將站內車輛變化有線傳輸到信息獲取終端；