[發明專利]一種儲能參與調頻輔助服務優化的控制方法及其系統

在審

• 申請號: 202110337216.7
• 申請日: 2021-03-29
• 公開（公告）號: CN113011101A
• 公開（公告）日: 2021-06-22
• 發明（設計）人: 肖云鵬;白楊;劉思捷;蔡秋娜;關玉衡;張蘭
• 申請（專利權）人: 廣東電網有限責任公司電力調度控制中心
• 主分類號: G06F30/27
• 分類號: G06F30/27;G06Q10/04;G06Q10/06;G06Q50/06;H02J3/00;G06N3/04;G06N3/08
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 陳旭紅;呂金金

本發明公開了一種儲能參與調頻輔助服務優化的控制方法及其系統，包括：獲得調頻市場的歷史調頻信號數據，其中，歷史調頻信號數據包括訓練數據集和測試數據集；構建基于深度強化學習算法的儲能參與調頻輔助服務模型；根據儲能的當前狀態、當前動作、當前動作的即時收益、下個時刻的狀態以及調度周期結束標志建立經驗回放池；根據訓練數據集和經驗回放池訓練儲能參與調頻輔助服務模型；根據測試數據集檢測訓練完畢的儲能參與調頻輔助服務模型；根據儲能參與調頻輔助服務模型對儲能進行優化控制。如此，能夠通過優化儲能的實時控制策略，提高儲能的調頻績效收入，從而提高儲能運營商的市場收益水平，優化儲能設備的投資回報率，促進儲能建設。

技術領域

本發明涉及電力系統儲能技術領域，尤其涉及一種儲能參與調頻輔助服務優化的控制方法、系統、終端設備及其可讀存儲介質。

背景技術

儲能可以和傳統電源一樣參與能量市場、調頻市場和備用市場，以價格接受者方式在市場出清，提供服務獲取收益。但因為儲能不能發電，所以在能量市場中只能利用不同時段的電價差進行電能套利，收益十分微薄。在當前的電池成本水平下，僅僅參與能量市場很難收回投資成本。為了促進儲能發展，尋找能夠使其盈利的商業應用和模式至關重要。電池儲能是一類優質的快速響應資源。讓電池儲能為電網提供備用、調頻等輔助服務，一方面可以充分利用電池容量，增加其市場收益，改善其經濟性，另一方面可以緩解電網的調峰調頻壓力。調頻市場收益一般分為調頻容量收益和調頻績效收益兩部分，其中調頻績效收益是儲能在調頻輔助服務市場中的主要收益來源。調頻績效收益主要是通過調頻設備響應功率與調頻信號的重合程度來衡量的。對于快速調頻信號，一般都是以秒級周期來更新響應信號。因此，設計儲能在秒級時序上的優化控制策略，可以滿足儲能參與調頻市場的需求，對于完善儲能參與電力市場機制、促進儲能設備發展具有重要意義。

發明內容

本發明目的在于，提供一種儲能參與調頻輔助服務優化的控制方法及其系統，通過優化儲能的實時控制策略，提高儲能的調頻績效收入，從而提高儲能運營商的市場收益水平，同時也能優化儲能設備的投資回報率，促進儲能建設。

為實現上述目的，本發明提供一種儲能參與調頻輔助服務優化的控制方法，包括：

獲得調頻市場的歷史調頻信號數據，其中，所述歷史調頻信號數據包括訓練數據集和測試數據集；

構建基于深度強化學習算法的儲能參與調頻輔助服務模型；

根據儲能的當前狀態、當前動作、當前動作的即時收益、下個時刻的狀態以及調度周期結束標志建立深度強化學習的經驗回放池；

根據所述訓練數據集和所述經驗回放池訓練所述儲能參與調頻輔助服務模型；

根據所述測試數據集檢測訓練完畢的所述儲能參與調頻輔助服務模型；

根據所述儲能參與調頻輔助服務模型對所述儲能進行優化控制。

優選地，所述深度強化學習算法包括深度確定性策略梯度(DDPG)算法。

優選地，所述構建基于深度強化學習的儲能參與調頻輔助服務模型，包括：