本發(fā)明涉及一種綠電臺(tái)區(qū)能源高效利用的控制方法。特別是涉及一種針對(duì)微電網(wǎng)群的綠電臺(tái)區(qū)能源高效利用的控制方法。
背景技術(shù):
1、在微電網(wǎng)中光儲(chǔ)微電網(wǎng)是一種小型局域網(wǎng),它與大電網(wǎng)有一個(gè)連接點(diǎn),可以根據(jù)外界條件選擇自身獨(dú)立運(yùn)行或者連入大電網(wǎng)使用。光儲(chǔ)微電網(wǎng)本身是由分布式光伏,儲(chǔ)能裝置,本地負(fù)荷組成,具有清潔,智能,自治,可靠,靈活,互動(dòng)等優(yōu)點(diǎn),能夠根據(jù)農(nóng)網(wǎng)外界環(huán)境調(diào)整自身運(yùn)行策略。
2、從目前光儲(chǔ)微電網(wǎng)發(fā)展階段來看,還存在以下一些問題。第一,由于光伏滲透率不高,在光儲(chǔ)微電網(wǎng)進(jìn)行發(fā)電時(shí),極易出現(xiàn)消納困難和并網(wǎng)的現(xiàn)象,光能利用率較低。第二,由于光伏發(fā)電受到天氣等其他不可調(diào)控因素的影響造成其具有較強(qiáng)的不穩(wěn)定性,間歇性及波動(dòng)性,在接入時(shí)會(huì)沖擊大電網(wǎng)造成影響。第三,用戶側(cè)的行為對(duì)光儲(chǔ)微電網(wǎng)有影響,同時(shí)電網(wǎng)負(fù)荷峰谷差值較大,電網(wǎng)設(shè)施使用效率較低。綜上所述,對(duì)于農(nóng)村微電網(wǎng)中光儲(chǔ)互補(bǔ)運(yùn)行策略研究能夠是更好的調(diào)用能源,來提高電網(wǎng)穩(wěn)定性。
技術(shù)實(shí)現(xiàn)思路
1、本發(fā)明所要解決的技術(shù)問題是,為克服現(xiàn)有技術(shù)的不足,提供一種可訓(xùn)練智能體在與環(huán)境交互的過程中學(xué)習(xí)到最優(yōu)調(diào)度策略,并克服傳統(tǒng)優(yōu)化方法對(duì)模型的依賴的針對(duì)微電網(wǎng)群的綠電臺(tái)區(qū)能源高效利用的控制方法。
2、本發(fā)明所采用的技術(shù)方案是:一種針對(duì)微電網(wǎng)群的綠電臺(tái)區(qū)能源高效利用的控制方法,包括如下步驟:
3、1)構(gòu)建綠電臺(tái)區(qū)微電網(wǎng)群有功無功協(xié)調(diào)優(yōu)化調(diào)度模型,將調(diào)度周期內(nèi)的網(wǎng)損最小作為模型的目標(biāo)函數(shù),將潮流約束、光伏出力約束、靜止無功補(bǔ)償器約束、支路傳輸功率約束、電壓幅值約束、儲(chǔ)能約束、有載分接開關(guān)和斷路器動(dòng)作次數(shù)限制作為模型的約束條件;
4、2)通過確定智能體觀察空間和智能體動(dòng)作空間,以及定義智能體獎(jiǎng)勵(lì)函數(shù),將所述的綠電臺(tái)區(qū)微電網(wǎng)群有功無功協(xié)調(diào)優(yōu)化調(diào)度模型描述為馬爾可夫博弈問題;
5、3)用改進(jìn)的分布式多智能體軟演員-評(píng)論家算法和遷移強(qiáng)化學(xué)習(xí)方法對(duì)轉(zhuǎn)化為馬爾可夫博弈問題的綠電臺(tái)區(qū)微電網(wǎng)群有功無功協(xié)調(diào)優(yōu)化調(diào)度模型進(jìn)行訓(xùn)練。
6、本發(fā)明的一種針對(duì)微電網(wǎng)群的綠電臺(tái)區(qū)能源高效利用的控制方法,可訓(xùn)練智能體在與環(huán)境交互的過程中學(xué)習(xí)到最優(yōu)調(diào)度策略,并克服傳統(tǒng)優(yōu)化方法對(duì)模型的依賴。相較于已有基于“集中訓(xùn)練”框架的多智能體深度強(qiáng)化學(xué)習(xí)方法,該方法無須收集全局信息,能夠更好地保障各子微網(wǎng)信息的隱私,減輕通信壓力,并且在訓(xùn)練和執(zhí)行階段均表現(xiàn)出對(duì)通信故障的魯棒性。并考慮到微網(wǎng)群存在拓?fù)渥兓鴱?qiáng)化學(xué)習(xí)模型泛化能力差,提出一種遷移強(qiáng)化學(xué)習(xí)方法,利用已有智能體知識(shí)為每種拓?fù)涓咝в?xùn)練一組智能體。最后,驗(yàn)證了所提方法在解決微網(wǎng)群分布式有功無功協(xié)調(diào)優(yōu)化調(diào)度問題上的有效性。
1.一種針對(duì)微電網(wǎng)群的綠電臺(tái)區(qū)能源高效利用的控制方法,其特征在于,包括如下步驟:
2.根據(jù)權(quán)利要求1所述的一種針對(duì)微電網(wǎng)群的綠電臺(tái)區(qū)能源高效利用的控制方法,其特征在于,步驟1)所述的目標(biāo)函數(shù)表示為:
3.根據(jù)權(quán)利要求1所述的一種針對(duì)微電網(wǎng)群的綠電臺(tái)區(qū)能源高效利用的控制方法,其特征在于,步驟1)所述的:
4.根據(jù)權(quán)利要求1所述的一種針對(duì)微電網(wǎng)群的綠電臺(tái)區(qū)能源高效利用的控制方法,其特征在于,步驟2)中所述的:
5.根據(jù)權(quán)利要求1所述的一種針對(duì)微電網(wǎng)群的綠電臺(tái)區(qū)能源高效利用的控制方法,其特征在于,步驟3)包括: