国产日韩欧美一区二区三区三州_亚洲少妇熟女av_久久久久亚洲av国产精品_波多野结衣网站一区二区_亚洲欧美色片在线91_国产亚洲精品精品国产优播av_日本一区二区三区波多野结衣 _久久国产av不卡

?

基于二維卷積特征提取的雙向LSTM短期電力負荷預測

2021-12-13 12:54:56沈俊豪沈艷霞
電子元器件與信息技術 2021年8期
關鍵詞:雙向特征提取卷積

沈俊豪,沈艷霞

(江南大學物聯網技術應用教育部工程研究中心,江蘇 無錫 214122)

0 引言

準確的負荷預測能夠供電企業(yè)的電力調度、電力設施建設等提供重要依據,同時也是確保電力系統(tǒng)安全穩(wěn)定運行的重要手段之一[1-2]。

然而電力負荷受多個因素的影響,如時間、氣溫等,具有高維非線性的特點,許多預測模型難以貼切地描述負荷變化,嚴重影響了預測精度[3-4]。

文中考慮短期電力負荷預測,將CNN模型自動提取隱式特征能力以及LSTM解決時間序列長時間依賴問題的能力相結合,提出采用基于二維CNN特征提取的雙向LSTM預測模型,即Conv2D-LSTM預測模型。區(qū)別于Conv1D-LSTM模型,文中對時間序列重新排列,變換其數據流通方向,保證其充分提取其高維特征。把CNN提取到的深層特征重新變換為時間序列,再對新的時間序列應用雙向LSTM進行預測,提高負荷預測的精度。

1 Conv2D-LSTM負荷預測模型

Conv2D-LSTM模型的流程圖如圖1所示,圖1(a)為輸入的歷史時間序列,包含實際功率和實際的氣象特征,圖1(e)為待預測日的氣象預報特征。將圖1(a)中輸入的長時間序列以一天的采樣點數為周期轉換為二維的圖片,采取二維卷積提取序列的周期性特征。接著,將提取到的特征重新轉換為長時間序列并與圖1(e)中的序列在序列的最后一個維度上進行拼接,輸入至雙向LSTM中,實現最終的負荷預測。圖中,n為輸入歷史序列的天數,T為一天的采樣點數。

圖1 Conv2D-LSTM模型流程圖

1.1 卷積層

CNN網絡能夠有效提取圖片的特征[5],二維輸入的卷積運算可表示為。

式中,Vl+1為第l層輸出的特征圖,i和j 為像素坐標,w為第l層的權重矩陣,b為第l層的偏移量,Ll為第l層輸出的特征圖尺寸,p為填充層數,s0為卷積步長,f為卷積核大小,Kf為通道數。

可見,CNN網絡應用在電力負荷序列轉換的圖片中時,可以提取上一個周期和下一個周期的周期性特征,也可以提取上一個時間點和下一個時間點的時序特征,加強了模型的特征提取能力。

1.2 長短期記憶神經網絡

循環(huán)神經網絡都具有一連串重復循環(huán)單元[6],這種循環(huán)單元有如圖2所示結構。

圖2 LSTM網絡結構

其迭代計算公式可表示為。

公式(3~8)為LSTM網絡的結構公式,[ht-1,Xt]為上一時刻的輸出ht-1和當前時刻的輸入Xt兩個向量的連接,符號?號為向量的點乘,符號*號為向量按位相乘。ft、it、ot分別為遺忘門、輸入門、輸出門,Wf、Wi、Wc、Wo為對應門的權重,bf、bi、bc、bo為相應向量的偏置量,為當前輸入的單元狀態(tài),Ct為當前時刻的單元狀態(tài),Ct-1為上一時刻的單元狀態(tài),ht為當前時刻的輸出,σ為sigmoid函數。

如圖1(g)中從左至右箭頭所示,LSTM的輸出ht只與之前的輸入有關而與之后輸入無關,為此,將LSTM的遞歸反向,如圖1(g)中從右向左的箭頭,通過雙向循環(huán)神經網絡的疊加,可以使ht與所有時刻的輸入有關,從而提高預測的精度。最后將LSTM的輸出連接到全連接層,輸出預測值。

2 仿真實驗

2.1 模型運行環(huán)境及參數設置

文中使用2006年1月1日至2010年12月31日澳大利亞電價與電力負荷數據集,以半小時為采樣周期,每天采樣48組數據,共87648條數據。將2006年1月1日至2009年12月31日的數據作為訓練集,將2010年1月1日至2010年12月31日的數據作為測試集,每次通過過去7天的歷史數據預測未來一天的48個時間點數據。

訓練的損失函數為均方根誤差,優(yōu)化器為Adam,學習率設置為0.001,隨機失活20%。設置LSTM的神經元個數為64個,激活函數為tanh,全連接層的神經元個數為48個,激活函數為relu。

為了評估預測模型的準確度,使用平均絕對百分比誤差(MAPE)和均方根誤差(RMSE),計算公式如下。

其中,Ytrue為真實值,Ypred為預測值,n為預測樣本數量。

2.2 實驗結果

借鑒VGGNet模型的思想,選擇多個小卷積核能夠達到一個大卷積核同樣的感受野,在固定模型其他結構不變的情況下,使用3×3的小卷積核,對不同卷積層數對模型精度的影響進行測試[7],結果如表1所示。

表1 不同卷積層數對模型精度的影響

可見,使用二層卷積層時,特征提取能力不足,四層和五層卷積層時,誤差變大,反應出模型過度學習。綜上,三層卷積層的效果最佳。

經過實驗確定模型參數后,對LSTM模型、GRU模型、Conv1D-LSTM模型以及文中的Conv2D-LSTM模型進行訓練和仿真驗證。對每個模型訓練,取得各個模型中表現最佳的模型,對2010年全年進行連續(xù)日負荷預測,

由于季節(jié)變化和節(jié)假日等日類型均會對負荷預測產生較大的影響,文中對各模型隨不同日類型的日負荷進行對比,其結果如表2所示。

表2 各模型隨不同日類型的預測結果對比

在全年誤差上,Conv2D-LSTM模型相比LSTM模型、GRU模型和Conv1D-LSTM模型,MAPE分別降低0.7、0.77和0.27個百分點,RMSE分別降低121.64MW、118.1MW和36.37MW,預測精度更高。

在隨日類型變化方面,4種模型在休息日的誤差均有增大,而Conv1D-LSTM模型和Conv2D-LSTM混合模型表現較為平穩(wěn)且MAPE較低,表現出CNN結構較強的適應能力。

整體而言,Conv2D-LSTM混合模型在全年負荷預測的MAPE均保持在較低的水平,體現文中所提模型具有較好的魯棒性和準確性。

3 結語

分析了CNN及LSTM模型的原理,提出了二維CNN和雙向LSTM的組合電力負荷預測模型,算例分析表明文中所提模型通過二維CNN和雙向LSTM融合,提高了模型對季節(jié)變化、節(jié)假日類型等不同日類型負荷預測的準確性。相比于LSTM模型、GRU模型和Conv1D-LSTM模型,該方法更具實際應用價值。

猜你喜歡
雙向特征提取卷積
雙向度的成長與自我實現
出版人(2022年11期)2022-11-15 04:30:18
基于3D-Winograd的快速卷積算法設計及FPGA實現
從濾波器理解卷積
電子制作(2019年11期)2019-07-04 00:34:38
基于Daubechies(dbN)的飛行器音頻特征提取
電子制作(2018年19期)2018-11-14 02:37:08
基于傅里葉域卷積表示的目標跟蹤算法
Bagging RCSP腦電特征提取算法
一種軟開關的交錯并聯Buck/Boost雙向DC/DC變換器
一種工作頻率可變的雙向DC-DC變換器
電源技術(2015年9期)2015-06-05 09:36:07
基于MED和循環(huán)域解調的多故障特征提取
一種基于卷積神經網絡的性別識別方法
電視技術(2014年19期)2014-03-11 15:38:20
扬中市| 古丈县| 岗巴县| 涟源市| 东城区| 安溪县| 岱山县| 舒兰市| 岳普湖县| 山西省| 昌江| 论坛| 二连浩特市| 门头沟区| 绍兴县| 邳州市| 富锦市| 东明县| 东阿县| 治县。| 封丘县| 蒙阴县| 郑州市| 木兰县| 林口县| 海淀区| 四会市| 灵寿县| 凤庆县| 浮梁县| 靖远县| 嘉鱼县| 阳泉市| 崇左市| 仙桃市| 合山市| 久治县| 克东县| 永济市| 故城县| 灵寿县|