欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

PSO-Elman回歸預(yù)測實戰(zhàn):多變量輸入與R2評估指南

PSO-Elman回歸預(yù)測實戰(zhàn):多變量輸入與R2評估指南 簡介粒子群算法PSO與Elman遞歸神經(jīng)網(wǎng)絡(luò)相結(jié)合的回歸預(yù)測建模方案面向需要處理多變量輸入回歸預(yù)測任務(wù)的研究人員與高年級學生尤其適用于希望借助智能優(yōu)化算法提升傳統(tǒng)神經(jīng)網(wǎng)絡(luò)預(yù)測精度、又不想從零搭建代碼框架的讀者。壓縮包共含7個文件以Matlab腳本為主另附1個Excel格式數(shù)據(jù)集整體僅37KB結(jié)構(gòu)緊湊輕量。已有120人下載學習屬于輕量級實用型代碼包。代碼按模塊清晰拆分涵蓋主程序、粒子群優(yōu)化核心、適應(yīng)度函數(shù)、數(shù)據(jù)初始化與預(yù)測誤差評估等環(huán)節(jié)評價指標覆蓋R2、MAE、MSE、RMSE與MAPE配合附帶的Excel測試數(shù)據(jù)即可直接運行也便于替換成自己的數(shù)據(jù)集以對比不同模型的預(yù)測效果。1. PSO-Elman 回歸預(yù)測:多變量輸入能落地,不是所有時序都要上 LSTM剛接觸回歸預(yù)測的人,常常一頭扎進 LSTM。但真拿到多變量的小樣本數(shù)據(jù)、現(xiàn)場又要快速出結(jié)果時,LSTM 調(diào)起來很痛苦,而 PSO-Elman 這個組合往往更省心:粒子群算法(PSO)負責全局搜索,Elman 遞歸神經(jīng)網(wǎng)絡(luò)負責帶記憶的非線性映射,評價直接看 R2。我最早是在一批工業(yè)傳感器數(shù)據(jù)上用的,幾十個變量、幾千條樣本,把 PSO-Elman 跑通后,R2 能穩(wěn)在 0.85 以上,比純 BP 穩(wěn)定不少。這篇把我拆過的 PSO-Elman 回歸預(yù)測流程完整留下來:模型怎么從原理上立住、數(shù)據(jù)怎么組織、參數(shù)怎么設(shè)、R2 怎么看、哪些是常見的坑,以及最后我怎么判斷這個模型到底能不能上線。適合做多變量時序回歸預(yù)測、有 MATLAB 基礎(chǔ)、想要可解釋結(jié)果的你。2. 為什么用 PSO 訓練 Elman:遞歸結(jié)構(gòu)、梯度困境與參數(shù)選擇2.1 Elman 的價值:一條承接層讓網(wǎng)絡(luò)記住歷史Elman 神經(jīng)網(wǎng)絡(luò)和普通 BP 網(wǎng)絡(luò)的最大區(qū)別,在于它對每個隱藏層神經(jīng)元加了一條承接層(context layer)。這條承接層保存的是隱藏層上一時刻的輸出,再作為這一時刻的額外輸入送回隱藏層。用大白話說,網(wǎng)絡(luò)不是只看當前這一拍的數(shù)據(jù),它還能摸到上一拍自己的反應(yīng),于是天然適合帶時間依賴的序列回歸。它的記憶是短時記憶,不像 LSTM 有輸入門、遺忘門那么細致,但好處也很直接:結(jié)構(gòu)簡單、訓練參數(shù)少、小樣本場景不容易過擬合。在我拆過的項目里,幾千條樣本的多變量數(shù)據(jù),LSTM 往往還沒走到 epoch 收斂,就已經(jīng)在驗證集上飄了;而 Elman 收斂快、結(jié)果也平滑。配合好的初始化,預(yù)測曲線不會抖得像心電圖。再往深一層說,承接層讓 Elman 對噪聲有一定的天然容忍度。普通前饋網(wǎng)絡(luò)把每個時刻的輸入當成獨立樣本,看到一個尖峰就跟著跳;而 Elman 因為承接層保留了上一拍的狀態(tài),瞬時毛刺會被下一拍的狀態(tài)變化抵消一部分,預(yù)測輸出平滑。這對現(xiàn)場傳感器數(shù)據(jù)來說很實用,現(xiàn)場數(shù)據(jù)基本不可能像公開數(shù)據(jù)集那樣干凈。2.2 為什么不用反向傳播直接訓練Elman 可以用 BP 訓練,但這里有個尷尬:它是遞歸結(jié)構(gòu),誤差通過時間展開往回傳,層數(shù)一多梯度要么爆炸要么消失。系統(tǒng)辨識這種老派任務(wù)里,工程師通常人為加動量、調(diào)學習率,一把鼻涕一把淚。臨床試驗、工業(yè)現(xiàn)場的時序數(shù)據(jù)往往還有噪聲、缺失值,BP 很容易陷進局部極小——跑十次,五次結(jié)果都不一樣,而且說不清哪個可信。PSO 的思路完全不同。它不靠梯度,而是把每一組網(wǎng)絡(luò)參數(shù)(我優(yōu)化的是隱藏層神經(jīng)元數(shù)和學習率)當成一個粒子。每個粒子在解空間里飛,根據(jù)自身歷史最優(yōu) pbest 和種群歷史最優(yōu) gbest 不斷修正速度,迭代若干次之后,整個種群就聚集到了適應(yīng)度最好的區(qū)域。這意味著它對梯度的要求很低,對初始點不敏感,尤其適合像 Elman 這樣結(jié)構(gòu)固定但訓練過程脆弱的網(wǎng)絡(luò)。我在代碼里看到很多項目把 PSO 當成黑匣子一樣套,粒子位置直接映射到神經(jīng)網(wǎng)絡(luò)的全部權(quán)值,這樣做的代價是維度爆炸:一個 10 個隱藏層神經(jīng)元的 Elman,權(quán)值數(shù)量隨輸入維度增長,PSO 的搜索空間可能就是幾百維,粒子再多也覆蓋不過來。所以我的做法是讓 PSO 去選擇網(wǎng)絡(luò)結(jié)構(gòu)和學習率這類更少但更關(guān)鍵的參數(shù),把權(quán)值訓練留給train內(nèi)部去做。這樣 PSO 收斂快,可解釋性也強。2.3 PSO 的四個參數(shù)怎么選我用的慣性權(quán)重 w 起點 0.6,終點 0.2,線性遞減;學習因子 c1、c2 都取 1.5;種群規(guī)模 20~30,迭代次數(shù) 30~50。不要上來就 100 個粒子 200 次迭代,那對每輪都要訓練一次 Elman 的場景太奢侈了。參數(shù)常用范圍我的默認值說明種群規(guī)模 nPop15~4030太小容易早熟,太大迭代耗時翻倍最大迭代 iterMax20~8040粒子和網(wǎng)絡(luò)是嵌套訓練,不貪多慣性權(quán)重 w0.2~0.90.6→0.2線性遞減,前期全局搜索,后期局部收斂c1 / c21.0~2.01.5 / 1.5兩個加速常數(shù),控制向個體最優(yōu)和全局最優(yōu)學習的速度速度上限 vmax0.1~1.00.3取值空間已歸一化,限速防止粒子飛出為什么要線性遞減 w?因為迭代前期粒子應(yīng)該在更大范圍里跑,把有希望的隱藏層神經(jīng)元數(shù)目、學習率組合都摸一遍;到后期再往 gbest 附近慢慢壓,收斂才有力度。要是 w 恒定偏大,粒子會繞著最優(yōu)解畫圈、遲遲不落地,這個現(xiàn)象我后面會專門寫。嵌套訓練的時間成本也要提前算:30 個粒子、40 次迭代,每個粒子內(nèi)部要訓練 200 個 epoch 的 Elman,這個開銷大概相當于單次 Elman 訓練的 1200 倍。如果你的單次 Elman 訓練就要 20 秒,整套 PSO 就要 6 個小時以上。所以要給內(nèi)部訓練加早停,不能讓它把 200 個 epoch 全部跑滿,我一般用驗證集連續(xù) 6 次不降就提前停。2.4 有人問:小波-Elman 是不是更好做信號類時序的人常聽說小波-Elman:先對原始序列做小波分解,把高頻、低頻分量分別建模,再拼接預(yù)測。這個思路在處理強噪聲信號時確實有效,因為小波相當于先做了個帶通濾波,把噪聲和趨勢撕開。但要注意,它距離至少多出幾層預(yù)處理,還要面對小波基函數(shù)和分解層數(shù)的選擇問題,這兩個選擇一樣靠試錯。如果你現(xiàn)在的數(shù)據(jù)不是強非平穩(wěn)、不是高頻噪聲突出,直接用 PSO-Elman 就夠了,不要一上來給自己加戲——我自己的項目里,現(xiàn)場傳感器噪聲并不劇烈,多花一周做了小波分解,帶來的 R2 提升只有 0.02,后來就把那部分果斷砍掉了。3. 數(shù)據(jù)與評價指標:R2 到底代表什么,0.3~0.5 怎么解釋3.1 多變量輸入怎么組織,時序步長怎么切多變量輸入的意思是,模型不只是看被預(yù)測變量自己。比如要預(yù)測鍋爐煙氣含氧量,輸入可以包括送風量、引風量、給煤量、爐膛溫度等好幾路信號,每一路都是過去和當前時刻的觀測。我把數(shù)據(jù)整理成矩陣 X,每一行是一個樣本,每一列是一個變量;標簽 y 是對應(yīng)時刻的目標值。時序切片上,我一般用滑窗法而不是裸樣本。窗口長度從 3 到 10 都有可能,具體要看采樣周期和響應(yīng)速度:采樣快、變量響應(yīng)慢,窗口可以長一點,但窗口長度不宜超過樣本數(shù)的一半。窗口太短,模型看不到趨勢,預(yù)測輸出滯后明顯。窗口太長,輸入維度膨脹,Elman 承接層的那點記憶優(yōu)勢被稀釋。實際代碼里,我會先歸一化再做滑窗。原因是 R2、RMSE 都依賴數(shù)值尺度,如果某個輸入變量是溫度(幾百),另一個是流量(幾十),單位不統(tǒng)一,PSO 在計算粒子距離時會偏向大尺度變量,等于自己給自己設(shè)坑?;皹?gòu)造的代碼其實不難,關(guān)鍵是邊界別算錯。下面這個buildWindow函數(shù)的核心邏輯是:對第 i 個樣本,取從 i 到 iwinLen-1 的多變量矩陣塊,把它拉平成一行,預(yù)測目標取 iwinLen 時刻的值。這樣生成的行數(shù)等于總樣本數(shù)減窗口長度,少掉的尾部樣本是沒法做預(yù)測的。function [XWin, yWin] buildWindow(X, y, winLen) n size(X, 1); dimX size(X, 2); rowNum n - winLen; XWin zeros(rowNum, winLen * dimX); yWin zeros(rowNum, 1); for i 1:rowNum block X(i : i winLen - 1, :); XWin(i, :) block(:); yWin(i) y(i winLen); end end邏輯說明:這里block(:)是按列把窗口內(nèi)的二維數(shù)據(jù)拉平成向量,順序是先取第一列變量從第 1 到第 winLen 時刻,再取第二列變量。這個順序要和訓練、預(yù)測時的輸入格式完全一致,否則模型學到的時間對應(yīng)關(guān)系在部署時會錯位。rowNum n - winLen是為了保證X(i : iwinLen-1)不會越界,同時y(iwinLen)還能取到值。參數(shù)說明:winLen 是第一個需要根據(jù)數(shù)據(jù)調(diào)的超參數(shù)。如果數(shù)據(jù)采樣周期是 10 秒,系統(tǒng)響應(yīng)時間大約 1 分鐘,窗口取 6 比較合理;如果響應(yīng)要幾分鐘,窗口就得拉到 15 甚至 20。窗口并不是越大越好,窗口長了,行數(shù)減少,訓練樣本量會被砍掉。我一般會對比 winLen3、5、8、12 四組,直接看驗證集 R2 的變化趨勢。3.2 R2 的計算與解讀評價指標包括 R2,那就先把公式寫清楚。對每個樣本 i 有真實值 yi 和預(yù)測值 y^i,先算殘差平方和 SS_res,再算真實值相對均值的離差平方和 SS_tot,R2 1 - SS_res / SS_tot。這個式子表示模型相對直接用均值做預(yù)測好多少,R2 越大,說明預(yù)測方差被解釋的部分越多。有一個來自醫(yī)學研究中的說法經(jīng)常被引用:在醫(yī)學研究中,R2 達到 0.3~0.5 即認為模型具有一定的解釋能力。這個基準在流行病學和社會科學里是合理的,因為人的行為、遺傳、環(huán)境因素太雜,能解釋三成變異已經(jīng)算有發(fā)現(xiàn)。但放到工程回歸預(yù)測上,你不能照搬:同一套設(shè)備、同一批傳感器,R2 如果只有 0.3,基本沒法用于控制,頂多做個趨勢提示。我做設(shè)備數(shù)據(jù)時,如果 R2 低于 0.7,會直接懷疑特征沒選對或者數(shù)據(jù)有泄漏,而不是嫌指標苛刻。場景R2 參考我的判斷標準醫(yī)學/流行病學研究0.3~0.5 可接受解釋性模型,重在變量顯著性工程回歸/軟測量0.7~0.85 可用能看出趨勢,可做輔助決策控制/閉環(huán)場景0.9 以上否則偏差會累積到控制環(huán)路里R2 為負也不要慌。當模型預(yù)測比直接取均值還要差,或者測試集分布和訓練集差異極大,R2 就會是負的。我見過不少人第一次看到 R2-0.2 就以為是腳本寫錯了,其實只是沒固定隨機種子、沒做數(shù)據(jù)同分布校驗。用 MATLAB 算 R2 很簡單,但要注意分母不能是零,而且樣本量小于 30 時 R2 的方差會很大。我會在計算之前打印一句SS_res和SS_tot的數(shù)值,如果SS_tot接近零,說明測試集的目標值本身幾乎不變,這時 R2 沒有參考意義,應(yīng)該改用 MAE 匯報。3.3 數(shù)據(jù)劃分里的一個原則回歸預(yù)測模型最怕時間泄露。如果我不做洗牌,直接用前 70% 訓練、后 30% 測試,在非平穩(wěn)數(shù)據(jù)上會得到一個虛高的 R2——因為測試集緊挨著訓練集,趨勢都延續(xù)下來了。反過來,如果做純隨機洗牌,序列的時間相關(guān)性會被打散,模型學到的東西在真實部署時又未必有效。我的做法是:先用隨機分組做一個交叉驗證報告,監(jiān)督模型有沒有過擬合;最后再用時間順序劃分一份上線模擬集,單獨看 R2 掉了多少。兩個結(jié)果一起貼在報告里,誰追問生產(chǎn)環(huán)境表現(xiàn),就拿時間切分的這份說事。這里還有一個容易被忽略的點:滑窗后的相鄰樣本本身高度相關(guān)。第 100 行和第 101 行樣本,除了往后滑動了一步,前面大部分窗口內(nèi)容是重疊的。如果隨機把這兩行分到訓練集和驗證集,驗證集評估就失真了。我后來學到的做法是:按時間塊劃分,讓驗證集是完整的一個連續(xù)時間片段,而不是從總體里隨機抽百分之三十的行。這樣得到的結(jié)果才接近真實部署。4. 項目源碼拆解:MATLAB 完整流程與可改參數(shù)4.1 文件結(jié)構(gòu)與運行順序這套 PSO-Elman 項目我建議按下面結(jié)構(gòu)放,順序和依賴關(guān)系都理清了:main.m:入口,讀數(shù)據(jù)、歸一化、滑窗、調(diào)用 PSOpsoTrain.m:粒子群優(yōu)化主循環(huán)elmanFitness.m:每個粒子對應(yīng)的適應(yīng)度評估,內(nèi)部訓練 Elman 并返回驗證集誤差trainFinalElman.m:用最優(yōu)參數(shù)訓練最終模型,輸出 R2、RMSEbuildWindow.m:滑窗數(shù)據(jù)構(gòu)造函數(shù)運行時只要改 main.m 里的文件路徑和幾個參數(shù)。我不會把數(shù)據(jù)和網(wǎng)絡(luò)初始化相關(guān)的邏輯散落各文件,免得復(fù)現(xiàn)時來回跳轉(zhuǎn)。4.2 主程序:讀數(shù)據(jù)、歸一化、滑窗% main.m 入口 data readmatrix(sample_multivar.csv); % 每列一個變量,最后一列為目標 X data(:, 1:end-1); y data(:, end); % 歸一化到 [0,1],保存最大最小矩陣供后續(xù)還原 [X_norm, X_min, X_max] mapminmax(X, 0, 1); [y_norm, y_min, y_max] mapminmax(y, 0, 1); X_norm X_norm; y_norm y_norm; % 滑窗:窗口長度 winLen,預(yù)測單步 winLen 5; [XWin, yWin] buildWindow(X_norm, y_norm, winLen); % 按時間塊劃分:前70%訓練,后30%測試 trainNum round(size(XWin, 1) * 0.7); XTrain XWin(1:trainNum, :); yTrain yWin(1:trainNum); XTest XWin(trainNum1:end, :); yTest yWin(trainNum1:end); rng(42); bestParams psoTrain(XTrain, yTrain, XTest, yTest); fprintf(最優(yōu)參數(shù): hidden%d, lr%.4f\n, ... round(bestParams(1)), bestParams(2));邏輯說明:用mapminmax對每個變量獨立歸一化,保存最大最小值矩陣,預(yù)測完還要用mapminmax(reverse,...)還原真實尺度。滑窗函數(shù) buildWindow 把多變量時序轉(zhuǎn)換成一個二維矩陣:行數(shù)是樣本數(shù)減窗長加一,列數(shù)是窗長乘變量數(shù)。time-based 劃分保證驗證集是時間上更晚、模型沒見過的片段。rng(42)放的位置也講究,必須在 PSO 之前,讓粒子初始化可復(fù)現(xiàn)。參數(shù)說明:winLen是可調(diào)的第一級超參數(shù),mapminmax的上下界可以改成 -1 到 1,配合 tansig 激活函數(shù)效果更好。我通常在 Elman 隱藏層用 tansig、輸出層用 purelin,所以 [0,1] 也夠用。如果數(shù)據(jù)總量特別少,可以把 trainNum 改為 0.8,但驗證集樣本數(shù)少于 100 時,R2 波動會很大,PSO 的適應(yīng)度比較就沒有意義。4.3 適應(yīng)度函數(shù):每個粒子就是一組超參數(shù)function fitness elmanFitness(params, XTrain, yTrain, XVal, yVal) % params(1):隱藏層神經(jīng)元個數(shù) params(2):學習率 hiddenNum max(2, round(params(1))); lr min(1, max(0.001, params(2))); net elmannet(1:2, hiddenNum, traingdx); net.trainParam.lr lr; net.trainParam.epochs 200; % 內(nèi)部訓練不必太長 net.trainParam.showWindow false; net train(net, XTrain, yTrain); yPred sim(net, XVal); mse mean((yVal - yPred).^2); fitness mse; % PSO 要找最小的適應(yīng)度 end邏輯說明:每個粒子乘載兩個維度——隱藏層神經(jīng)元個數(shù)和學習率。round是為了讓第一個維度落在整數(shù)上,第二個維度限制在 [0.001,1] 之間,防止 PSO 越界報錯。訓練函數(shù)選了traingdx,這是帶動量、自適應(yīng)學習速率的訓練函數(shù),對 Elman 比較友好;用trainlm雖然快,但在小樣本容易過擬合訓練集,導致不同粒子的適應(yīng)度大量平局,粒子群沒法比較優(yōu)劣。參數(shù)說明:elmannet(1:2, hiddenNum, ...)的意思是輸入延遲取 1 和 2 兩個時刻,讓網(wǎng)絡(luò)同時看到當前輸入和上一時刻的輸入;如果你的滑窗已經(jīng)包含了歷史信息,這個 1:2 也可以改成 1:1,但別改成 0:0,那就把 Elman 的遞歸特性丟掉了。epochs 設(shè) 200 是為了在粒子迭代里控制單次訓練時間,不要設(shè) 1000,否則 30 個粒子跑 40 代等于 1200 次網(wǎng)絡(luò)訓練,時間會讓你懷疑人生。4.4 PSO 主循環(huán)function bestParams psoTrain(XTrain, yTrain, XVal, yVal) nPop 30; iterMax 40; dim 2; w 0.6; wEnd 0.2; c1 1.5; c2 1.5; vmax 0.3; % 位置邊界:hidden 2~30, lr 0.001~1 ub [30, 1]; lb [2, 0.001]; for k 1:nPop pos(k, :) lb rand(1, dim) .* (ub - lb); vel(k, :) -vmax 2 * vmax * rand(1, dim); fit(k) elmanFitness(pos(k, :), XTrain, yTrain, XVal, yVal); pbest(k, :) pos(k, :); pbestFit(k) fit(k); end [gbestFit, idx] min(fit); gbest pos(idx, :); for t 1:iterMax wNow w - (w - wEnd) * t / iterMax; for k 1:nPop velNow wNow * vel(k, :) ... c1 * rand(1, dim) .* (pbest(k, :) - pos(k, :)) ... c2 * rand(1, dim) .* (gbest - pos(k, :)); velNow max(-vmax, min(vmax, velNow)); posNew pos(k, :) velNow; posNew max(lb, min(ub, posNew)); newFit elmanFitness(posNew, XTrain, yTrain, XVal, yVal); if newFit fit(k) pos(k, :) posNew; vel(k, :) velNow; fit(k) newFit; end if fit(k) pbestFit(k) pbest(k, :) pos(k, :); pbestFit(k) fit(k); end if fit(k) gbestFit gbest pos(k, :); gbestFit fit(k); end end fprintf(iter %d: fbest%.4f hidden%.1f lr%.4f\n, ... t, gbestFit, gbest(1), gbest(2)); end bestParams gbest; end邏輯說明:粒子更新用標準速度公式,但我只在新位置適應(yīng)度更優(yōu)時才替換舊位置,相當于給粒子加了一層貪婪篩選,防止它在最優(yōu)解附近震蕩。越界反彈和速度鉗制都做了,posNew max(lb, min(ub, posNew))這行是保護網(wǎng),velNow限制在 ±vmax 內(nèi)是防止粒子一步跳出解空間。參數(shù)說明:ub和lb要覆蓋數(shù)據(jù)集下 Elman 的表現(xiàn)范圍。隱藏層 2~30 對大部分回歸數(shù)據(jù)夠用,如果輸入維度特別多(比如超過 50),把 ub 拉到 50;學習率 0.001~1 是經(jīng)驗上不會踩穿訓練穩(wěn)定性的區(qū)間。每次迭代那行 fprintf 不是廢話,它用來觀察全局最優(yōu)的 fit 下降趨勢,后面我會講怎么從這條曲線判斷 PSO 有沒有早熟。4.5 訓練最終模型并輸出 R2% trainFinalElman.m hiddenNum round(bestParams(1)); lr bestParams(2); net elmannet(1:2, hiddenNum, traingdx); net.trainParam.lr lr; net.trainParam.epochs 500; net train(net, XTrain, yTrain); ypredTrain sim(net, XTrain); ypredTest sim(net, XTest); % 還原尺度 ypredTrain mapminmax(reverse, ypredTrain, y_min); ypredTest mapminmax(reverse, ypredTest, y_min); yTrainReal mapminmax(reverse, yTrain, y_min); yTestReal mapminmax(reverse, yTest, y_min); R2 1 - sum((yTestReal - yPredReal).^2) / sum((yTestReal - mean(yTestReal)).^2); RMSE sqrt(mean((yTestReal - yPredReal).^2));邏輯說明:確定最優(yōu)超參數(shù)后,把內(nèi)部訓練 epoch 從 200 拉回 500,讓最終模型多學一會兒。還原尺度這一步容易被遺漏——如果拿歸一化后的 y 算 R2,結(jié)果和真實尺度算數(shù)值相同,但畫圖時縱坐標是 0~1,跟現(xiàn)場對不上,領(lǐng)導看著會懵。所以要還原。參數(shù)說明:mapminmax(reverse, ...)需要的是訓練時保存的y_min、y_max。如果你的代碼里把 readmatrix 讀進來的 y 轉(zhuǎn)置成行向量再歸一化,還原時時序維度要對應(yīng)一致,否則 MATLAB 會做隱式擴展,出來的序列是錯的,這類維度 bug 我見無數(shù)次。算 R2 時如果yTestReal的均值接近零,說明測試集目標值變化很小,這時 R2 會失真,要同時看 RMSE。5. 避坑:PSO-Elman 常見問題與排查記錄5.1 訓練集 R2 0.99,測試集 R2 0.3現(xiàn)象:PSO 優(yōu)化完,固定種子的幾次復(fù)現(xiàn)里訓練集 R2 都很漂亮,一到測試集就崩,甚至測試集 R2 為負。原因:數(shù)據(jù)劃分有問題。要么是沒做滑窗但用了連續(xù)切分,導致訓練/測試樣本間有時間重疊;要么是原始表里有重復(fù)或相鄰記錄被分到了兩側(cè),模型等于記住了答案。另外,PSO 在驗證集上選參數(shù),如果驗證集本身太小(少于 100 條),選出來的參數(shù)就是噪聲的自適應(yīng)。解決:先畫出測試集的殘差圖看有沒有周期性跳變;然后改用時間塊切分,并且訓練集和測試集之間留一個保溫段間隔,例如跳過 5 個樣本再切測試集。這樣能逼模型靠規(guī)律預(yù)測,而不是靠時間連續(xù)性。5.2 每個粒子適應(yīng)度幾乎一樣,PSO 不下降現(xiàn)象:fprintf 輸出的 gbest 從第 3 代開始就平著走,fit 數(shù)值基本不變,迭代結(jié)束回頭發(fā)現(xiàn) pbest 全是一伙的。原因:適應(yīng)度函數(shù)里網(wǎng)絡(luò)每次都是同一個初始化,PSO 無論怎么換參數(shù),同一組超參數(shù)在固定初始化上的表現(xiàn)本來就是一個常數(shù),粒子群學不到區(qū)分度。另一個常見原因是rng沒動,所有粒子的數(shù)據(jù)洗牌結(jié)果一模一樣,訓練集相同,自然適應(yīng)度雷同。解決:在每個elmanFitness調(diào)用前,根據(jù)粒子索引和當前迭代次數(shù)設(shè)置隨機種子,比如rng(k * 1000 t),這樣不同粒子之間的網(wǎng)絡(luò)初始化不同,適應(yīng)度才有區(qū)分度。如果嫌麻煩,至少保證每次 train 前網(wǎng)絡(luò)對象是新建的,不要復(fù)用上一個粒子訓練完的舊 net,否則舊網(wǎng)絡(luò)的權(quán)值會影響新粒子的評估結(jié)果。5.3 PSO 后期收斂不夠,總在 gbest 附近亂跳現(xiàn)象:迭代 30 代以后,fit 還在小幅度波動,沒有穩(wěn)定下降;最終參數(shù)兩次復(fù)現(xiàn)差別很大。原因:慣性權(quán)重 w 恒定為 0.6,粒子即使到收斂后期仍然有隨機修正力,繞著最優(yōu)解畫圈。還有一個可能:vmax 設(shè)為 1,而解空間已經(jīng)歸一化到 [0,1] 左右,粒子一步就跨過大半個搜索空間。解決:把 w 改成線性遞減,配合wNow w - (w-wEnd) * t / iterMax這種寫法;vmax 限制在 0.1~0.3。最后 5 代如果 fit 還在高頻抖動,可以給位置更新加一個閾值:兩次迭代的位置差小于 1e-4 時,直接用 gbest 覆蓋當前位置,強制它收斂。5.4 MATLAB 報錯 Undefined function elmannet現(xiàn)象:把腳本拷到另一臺機器,直接報Undefined function or variable elmannet;或者提示要用newelm。原因:elmannet需要 Neural Network Toolbox,而且不同版本 API 有差異。老項目的newelm在較新版本里已經(jīng)走向棄用,而同一個名字在不同工具箱里可能被遮蔽。解決:先跑ver(nnet)確認工具箱安裝。如果網(wǎng)絡(luò)工具箱還在,用help elmannet看當前版本簽名,確認 delays 參數(shù)的寫法;如果不想依賴工具箱,就把 Elman 的前向計算寫成自定義函數(shù),用承接層手寫遞歸,代碼也就 40 行。手寫版本反而沒有 API 兼容問題,對復(fù)現(xiàn)更友好。5.5 R2 為負或者忽高忽低現(xiàn)象:一次跑完 R20.85,重啟 MATLAB 再跑變成 0.2;或測試集 R2 直接是負數(shù)。原因:網(wǎng)絡(luò)初始化、數(shù)據(jù)劃分、PSO 速度生成三處都有隨機因素,任何一處不固定都會造成結(jié)果漂移。負 R2 說明預(yù)測比直接用均值還差,通常測試集分布和訓練集差別太大,或者存在 NaN/缺失值被readmatrix默認處理掉了。解決:在 main.m 開頭固定rng(42),把劃分、初始化全部放在這句之后;對缺失值不要依賴默認跳過,自己檢查any(isnan(X))并決定填充或剔除。R2 為負時,畫出真實值和預(yù)測值的散點圖,如果看到點分布在 yx 兩側(cè)但相關(guān)性很差,基本就是特征和時間對齊出了問題。6. 調(diào)參進階:用 R2、殘差和收斂曲線驗證模型可用性6.1 判斷 PSO 是否早熟,看收斂曲線每次迭代我都把 gbestFit 打出來,做成一條適應(yīng)度下降曲線。合格的曲線大概分兩段:前 10~15 代快速下降,后 20 代緩慢收斂。如果 5 代之內(nèi)就貼地不動,說明粒子多樣性不足,種群規(guī)模該加到 40;如果 40 代還沒壓平,說明解空間里有多個局部最優(yōu),把慣性權(quán)重起點提到 0.7 再跑。剛才說到的適應(yīng)度有時平、有時抖,也可以用這條曲線區(qū)分:抖動說明 w 衰減太快,粒子后面還在大范圍游走;平且紋絲不動則更像每個粒子等敏感、需要重新看適應(yīng)度函數(shù)。這兩種情況肉眼就能辨出來,不需要額外寫診斷代碼。6.2 殘差分析比 R2 數(shù)字更可靠R2 是個聚合指標,它掩蓋了局部打歪的情況。我會把測試集每個樣本的殘差畫成時序圖,看三件事:殘差有沒有偏向正或負——有系統(tǒng)性偏置說明 y 歸一化出問題或反向還原錯了。殘差在某一段突然變大——那段可能是某種工況沒有出現(xiàn)在訓練數(shù)據(jù)里。殘差和預(yù)測值有沒有喇叭形關(guān)系——預(yù)測越大偏差越大,說明 Elman 對高值區(qū)間學習不足,隱藏層要往上加。殘差特征可能原因動作殘差均值明顯非零輸出層偏置缺失檢查 elmannet 輸出層是否帶 bias殘差周期波動滑窗覆蓋不到主要周期增大 winLen 到 10 或 15殘差與預(yù)測值強相關(guān)模型欠擬合高值區(qū)隱藏層從 10 加到 20,同時調(diào)小 lr訓練/測試殘差分布差異大數(shù)據(jù)分布漂移或泄漏按時間塊切分并留保溫段6.3 上線前最后一步:固定基線對比我不會直接把 PSO 的結(jié)果當成最終答案。習慣是固定同一份數(shù)據(jù)、同一個隨機種子,先跑一個普通 Elman 記錄默認初始化下的訓練/測試 R2,再跑 PSO-Elman。如果 PSO 只提升了 0.01,我不會用 PSO,因為多出的復(fù)雜度和訓練時長不值得;如果提升了 0.08 以上,再考慮把 PSO 納入正式流程。這樣一來,以后每次看到別人的 R2 報告,我都會先問一句:你的基線是誰,數(shù)據(jù)怎么切的,窗口多長。那次在驗證集上被過擬合坑了整整一周后,我每次跑 PSO-Elman 都強制走一遍:固定種子、時間切分、基線對比、殘差檢查,四步缺一不可。這條流程我也整理在資源里了,對應(yīng)腳本和數(shù)據(jù)都在你看到的下載頁面里,按 README 順序跑,就能在自己那份數(shù)據(jù)上復(fù)現(xiàn)出 R2 報告。希望幫到你。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧美 日韩 成人 在线| 99久视频| 超碰不卡在线| 激情综合在线观看| 天天五月丁香五月| 超碰免费人人| 丁香婷婷久久老熟女综合网| 色婷婷色和| 五月深爱激情网| 婷婷在线五月综合| 性色天| 天天爽,夜夜爽| 涩综合婷婷| 性色欲情 网站| 精品色| 天天爱天天做天天日| 色综合丁香| 激情久久五月天| www激情| 九月色婷婷| 日日夜夜婷婷| 丁香月五月天婷婷久久| 99热亚州综合| 婷婷丁香花五月天| 亚洲欧洲色色| 99爱操| 亚洲欧州色情在线观看| 99资源人人| 激情五月,激情综合网| 97操在线资源| 天天干电影| 五月婷婷五月天激情视频| 婷婷五月成人| 999热这里只有精品| 99毛片| 亚洲1区| 婷色人人狠| 亚洲欧美在线观看| 九九干视频| 6月丁香婷婷| 人妻丰满精品一区二区A片| site:esunnet.com| www91精品| 丁香五月日韩| 国产寻花在线| 大香蕉狠狠爱主页| 韩国真做片在线观看| 天天草天天日| 青草网在线观看| 大战熟女丰满人妻AV| 天天草比天天爽| 开心五月婷婷婷美女| 久久激情五月婷婷| www.五月天婷婷| 91seav| 一点色成人网| 五月激情网站| 99热亚洲精品66| 五月丁香激情婷婷| 国产黄色在线观看| Av大香蕉| 天天干 夜夜爽| 久久九九99| 成人无码精品1区2区3区免费看 | 美国十月色婷婷在线观看| 成人网站高清无码| 青草视频在线观看视频| 97精品自拍| 开心五月婷婷六月丁香| 亚洲天堂爱爱| 天综合日日夜综合7799| av高清无码| 久久五月天视频| 婷婷六月激情啪啪| 狠狠色婷婷7777久| 玖玖99精品视频| 国产67194| 米奇影视资源777狠狠色婷婷五月天激情网| 婷婷激情四射五月天| AV操操操| 五月丁香啪啪激情| 超碰人人99| 天天婷婷操| 国产精品国产| 丁香婷婷影院| 欧美成人AAA片一区国产精品| 天天做天天爱| 婷婷五月花丁香| 激情综合网络插| 国产九九一区二区三区| 91丨九色丨国产| 欧美99热| 99在线视频播放| 国产色五月| 激情小说五月天社区丁香| 一区=区操屄高清大全av| 五月婷婷综合激情| 色综合久久88色综合天天99| 色噜噜狠噜噜视频| 色情婷婷五月天| 激情婷婷五月黑人| site:picc-up.com| 掩去也综合五月视频| 91日视频| 国产无人区大片| 日本波多野结衣视频| 国产亚洲在线| 九九热精品视频在线观看| 玖玖资源站中文| 激情伊人五月婷婷久久| 色六月丁香婷婷啪啪啪| 色婷婷综合网| 丁香五月网站| 色色综合成人网| 五月婷婷三级| 国产成人高清| 久久久香| 色婷视频| 婷婷丁香人妻天久久| 欧美日韩成人在线网站| 久久久jd| 亚洲成人综合在线| 五月丁香综合激情| 色色激情五月天| 黄网在线观看免费| 激情综合区| av操一操| 99综合| 亚洲色在线观看| 3www激情| 激情五月婷婷五月| 五月丁香好婷婷A片网| 天天骑天天操| 狠狠99| 色激情五月| 亚洲国产色色| 丁五月激情视频免费| 亚洲婷婷六月天| 激情五婷精品网在线观看网址| 日韩成人AV在线| 久久婷婷亚洲| 激情精品久久| 丁香六月激情蜜桃| 色五开心五月五月深深爱| 欧美激情五月| 99性色| 精品国产va久久久| 成人综合AV| AV操逼网| 亚洲操人| 欧美黄色一级| 狠狠色五月| 欧美三级黄色片久久| 婷婷五月丁香91| 91大神操美女| 日日操夜夜操狠狠操| 久久综合热17c| 狠狠狠人妻| 色五月五月丁香| 五月香六月婷| 丁香婷婷九月| 国产乱人偷精品人妻A片| 婷婷五月花| 男男野外做爰全过程69| 色婷婷丁香AV综合| 九九热中文| 色五月婷婷中文字幕在线观看| 激情5月舔| 无码地址| 97色色在线视频| 第四色婷婷丁香五月| 97碰人人操| 91五月天| 久久久久久久久久久久久久久久一道本| 超级碰碰碰久久网站视频| 在线看黄色| 天天射综合网站| 狠狠夜夜五月丁香| 五月丁香六月婷婷姐| 丁香五月中文字幕色播| 五月激情小说| 综合激情在线观看| 欧美激情五月天婷婷| 开心五月婷婷99| 丁香五月天色婷婷| 狠狠色噜噜狠狠狠狠综合| 色色色综合| 成人免费超碰| 天天人人综合| 99乱视频| 狠狠色综合网| 欧美色色干| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 五月天天天综合| 五月丁香九九九综合| 婷婷九月丁香| 色五月五月婷婷| 久久受www免费人成| 大香蕉人在线65| 第二色AⅤ| 欧美色爱五月天| 婷婷久月| 欧美婷婷综合网| 色色是色N一| www.狠狠干com| 婷婷大乡焦噜噜| 成人午夜视频精品一区| 91人操| 六月欧美综合色情| 婷婷九月激情| 婷婷中文网站| 丁香五月av在线| 丁香九九九九| 99久热在线精品99re6热| 97婷婷五月激情六月丁香伊人| 六月丁香狠狠爱| 婷婷五月天直播| 天天爽天天爽| 久久精彩视频18| 久九色| 深爱激情网五月天| 丁香婷婷激情| 91尤物九色在线| 久久婷婷五月天激情唯美| 色综合com| 亚洲影院婷婷色| 五月婷婷新网站| 天天操天天干天天日| 丰满人妻一区二区三区| 丁香五月天堂网| 九九热思思| 欧美日韩欧美| 婷婷激情肏屄网| 五月婷婷亚洲色视频| 最近中文字幕2019视频1| 大香蕉五月| 亚洲激情区| 五月婷婷开心网| 新激情综合| 五月天婷爱综合| 婷婷综合五月天| 久久新| 伊人AV五月婷| 在线综合亚洲欧美65| 丁香六月AV| 97影院一级片| 91久久综合亚洲鲁鲁五月天| 99热综合色图| 99热99极品观看| 色在线视频网2025| 六月婷婷操逼| 99热这里只有精品官网| 男人大jjc女人免费视频| 无码一区二区日韩| 国产激情综合| 九九热九九| 九九热免费| 免费播放片大片| 日本成人噜噜| 夜色.cnm| 五月天婷婷丁香| 一本到不卡高清DVD| 激情五月亚洲综合网| 色五月网址| 中文字幕黄色片| 日韩av在线电影| 成人网页在线观看| 91se在线观看| 99riAv1国产在线观看| 99视频激情四射| 日本在线视频看se99| 欧美久久婷婷| 丁香五月久久社区| 综合色色婷婷| 国产成人综合在线| 婷婷丁香五月麻豆| 日本熟女视频一区二区| 国产SUV精品一区二区6| 天天爽综合| 依人大香蕉在钱1| 午夜婷婷五月天| 五月丁香亚州综合网| 久婷婷久草| 婷婷91视频| 99精品久久久久久久婷婷久久| 91人在线观看| 婷婷五月天开心网| 综合久久综合久久| AA丁香综合激情| 久久综合丁香| 色爱综合网| 亚洲综合新99视频| 色天使久久综合| 国产精品视频久久99| 91 久热| 亚洲欧美另类在线23p| 久久婷婷综合五月| 丁香婷婷六月| 天天色综合天天| 人妻精品一区二区三区| 婷婷丁香五月欧美人| 91在线97视频| 九九色欲网| 97久久视频| www.天天干| 亚洲精品操一操、噜一噜、摸一摸、爽 | 亚洲AV网址| 天天操婷婷| 色婷婷五月天激情在线播放| 精品国产a| 大香蕉久热| 九月婷婷久久| 五月丁香色婷婷| 久久久久网站| 国产亚洲精品久久久久久豆腐| 丁香婷婷啪啪啪| 婷婷色色宗合网| 99热主页日本| 另类小说五月天综合网| 色综合久久8| 久久作爱| 中文字幕性爱丰满| 亚洲成人高清在线| 黄色片久久| 青草五月天| 色婷婷玖玖影院| 日本色色色| 人妻熟妇六区| 99色视频在线观看最新| 中文字幕丰满孑伦无码专区| 综合色影院| 六月五月丁香五月欧美| 97人人操人人操人人操人人| 91丨九色丨国产打屁股| 亚洲综合色网| 在线综合婷婷| 婷婷久久性爱| 国产成人精品一区二区三区视频| 婷婷丁香色无五月| 秋霞电影一级黄| 在线播放 精品| 99碰超| 色婷五月| 桃色Av色哟哟| 四月婷婷五月丁香| 久久艹 五月天| 伊人色综合网| www,五月天激情| 91九色国产| 日韩av在线播放综合网| 亚洲综合成人网| 亚洲男女激情| 襙比视频| 色色吧综合| 丝袜熟女一区二区三区| 性爱视频久久| 操骚货在线| 91碰碰碰| 天堂网操| 人妻22p| 久久精彩视频| 九九热精品6| 丁香色六月| 丁香深五月婷婷| 99热官网| 大香蕉五月天婷婷| 婷婷中文字幕| 草逼大片| 国产成人va在线| 91丨九色丨国产打屁股| 99网址在线看| 热99在线精品| 五月丿香啪啪| 青青久久91| 蜜桃五月天| 国产成人AV在线| 色五月激情五月天| 这里只有精彩视| 99re热视频这里只有综合亚洲| 99日视频在线| 丁香五月婷婷国产av| 丁香色婷婷| 99精品在线| 这里只有精品视频一区| 思思热再线视频| 国产在线6| 婷婷 伊人 久久| 丁香五月桃花在线激情综合| 久久99人人| 婷婷中文字幕| 日日夜夜干| 久久激情网| 激情另类综合| 日日噜噜夜夜狠狠久久丁香六月| 99热这里只有精品9| 久久久久人妻中文| 亚洲五月天天| 九九这里有精品视频| 久久婷婷影院| 色婷婷网| 激情网战码亚洲A| 一逼色综合| 婷婷五月综激情| 六月大香蕉| www.ywav| 超碰丁香五月| 丁香五月婷婷99| 激情婷婷五月综合| 婷婷综合av| 黄色成人AV在线| 一本色道久久88加勒比| 熟女色色一区二区| 熟妇国产| 婷婷丁香91| 亚洲视频1区| 九九精品少妇| 婷香狠狠爱五月| 久久综合九色综合88i| 国产婷婷色综合AV蜜臀AV| 久久激情网| 综合久久婷婷| 欧美性爱五月天| 久热婷婷| 免费超碰在线观看| 91美女啪啪| 风流少妇A片一区二区蜜桃| 国产精品国产成人国产三级| 99热久久这里只有精品| 在线不卡AC| 国产人妻777人伦精品HD| www,黄色在线,con| 久热9热| 亚洲精品中文字幕成人片| 十区av| 丁香五月婷婷偷拍| 亚洲综合在线伊人婷| 人人澡天天色天天做| 婷婷丁香五月天色播网站| 深爱激情五月天色婷婷| 五月婷婷在线播放| 五月激情婷婷国产精品久久久久久| 婷婷亚洲综合| 丁香婷婷色五月| 欧美性爱五月天| 无码AV久久久久久久久| 久久婷婷五月天丁香| 懂色av粉嫩AV蜜臀AV| 亚洲热久| 色婷婷五月天中文字幕| 婷婷天天综合| 六月婷婷色色色| 婷婷五月天丁香| 无码AV免费精品一区二区三区 | 久久偷拍综合五月天| 色五月中文网| 26UUU欧美| 激情小说五月天| 雪千夏麻豆| 九九精彩久久| www.99热国产| 激情五月婷婷丁香| 五月婷婷激情综合| 久9久视频精品| 99碰| 五月天婷婷青青| 亚洲天天| 色优久久| 99精品视频推荐| 色五月婷婷色| 激情五月婷婷中文字幕| 日韩在线99| 亚洲天堂久久| 熟美女麻豆| 五月激情五月丁香| 99热综合网| 狠狠操狠狠| 亚洲国产网址| 成人精品一区二区三区四区五区 | 六九色综合婷婷五月天| 丁香久久| 极品色丁香| 久久久99视频| 性日本精品| 婷婷香蕉| 亚洲婷婷免费| 九月婷婷| 99热亚洲| 女高怪谈在线观看| 激情五月婷婷| 九九色欲网| 99小精品| 91无码视频| 日本一级淫| 丁香花五月天激情| 婷婷色五月丁香六月欧美啪| 色色热| 九九精品热播| 色综合久久88色综合天天| 99热97| 免费一区二区三区| 天天干夜夜操A片| 亚洲综合另类| 日本97在线看片| se色99| www..999热久| 色黄啪啪| 91人妻视频| 婷婷五月天网| 久久婷婷网站| 丁香婷婷五月天色综合| 99热综合在线| 91亚洲免费片| 天天做天天摸| 五月天sesese| 日韩成人网站精品久久大全| 东京热免费视频| 在线超碰91| 六月丁香婷啪射| AV中文在线| 久久婷婷五月综合啪| 性生活久久人妻| 五月天婷婷综合| 人伦30P| www.99热视频| 日韩成人无码片| 亚洲激情无码久久| www.亭亭五月天| 九九热免费视频| 九九综合久久| 五月丁香综合激情| 伊人超碰| 日日噜狠狠| 9l视频自拍9l视频自拍九色学生| 五月婷婷综合视频| 婷婷丁香www视频日本韩国| 久久99色色| 久久精品99国产精品日本| 92国产福利| 天天激情欧美美女| av第一二区| 综合五月网| 中文字幕在线视频播放| 天天天天天天噜| 天堂呦 呦百度搜索-百度搜索| 婷婷五月成年人| 激情综合五| 激情五月婷婷丁香六月| 五月丁香啪啪综合| 成人色五月天婷婷| 五月丁香激情综合| 可以免费看av网站| 国产精品久久久久久久久久免费| 人人舔人人色人人高潮| 69精品人人人人人人人人人| 色五月丁香激情| 国产精品久久欧美久久一区| 三级成人网站| 久草九一| 婷婷激情视频欧美视频自拍视频欧美剧| 在线色婷婷| 色五月六月| 婷婷五月丁香性爱| 婷婷国产成人| 99在线视频资源| 激情综合区| 综合久久婷婷| 精品亚洲国产成AV人片传媒| 99色看这里只有精品| 内射爽无广熟女亚洲| 五月激情偷拍婷婷| 婷婷丁香色女人| 色色色免费视频| 丁香五月婷婷婷桃花影院| 久久人妻精品| 久热大香蕉| 99热婷婷| 五月天色网站| 免费人人操| 亚洲精品成人| 中文久久久人妻| 99婷婷精品推荐在线视频| 丁香五月婷婷骚视屏| 99碰在线视频| 天天看A片| 激情桃色网| 五月J香蕉婷婷| 亚洲婷婷成人五月天| 大香人妻| 五月激情婷婷在线| 五月丁香久久网| 丁香五月天天久久综合小说| 五月丁香婷婷AV| 六月丁香婷婷综合狠狠爱夜夜爱| 日韩aaa| 99热这里只有精品23| 九九激情| 色色色色色综合| 欧洲激情五月天| 9在线9在线婷婷在线国产| 日本一级一片免费视频| 日韩成人五月天| 天天综合区| 五月天伊人| 婷婷免费精品视频| 一级韩国产精品毛| 五月婷婷激情综合网| 婷婷五月天99| 精品在线网站| 欧州婷婷五月天综合| 五月天最新网| 久久五月天婷婷视频| 任我干视频在线观看| 激情色色色| 开心五月六月婷婷| 欧美日本国产| 五月婷六月| 夜夜爽天天日| 丁香九月激情| 丁香五月综合激情久久潮喷| 亚洲最大视频| 欧美成人网99网| 九九熱最新視頻| 精品久久久中文字幕大豆网推荐理由| 日本天堂免费99| 青青热久精品视频在线观看| 欧美色偷拍| 无码99| 天天日综合| 亚洲激情图文小说| 激情性爱婷婷| 69精品人人人人| 色婷婷伊人| 日本熟女三区| 激情床戏| 97人人操com| 9久热免费视频99| 综合五月天天天天天五月| WWW.久久久久久久| 人妻在线观看视频| 欧美成人AAA片一区国产精品| 欧美色宗和激情| 久8色色| 秋霞三级色戒| 99噜噜| 色播激情婷婷| 图片区 小说区 区 亚洲五月 | 97干网站| 激情六月综合| 五月丁香色狠狠干大屄| 五月丁香婷婷无码中文| 亚洲精品一区中文字幕乱码| 五月激情视频| 色激情五月| 久久精品永久免费| 久久亚洲色导航| 99ri国产在线| 亚洲色夜| 丁香色影院| 狠狠爱青青草| 婷婷九月| 五月丁香啪综合| 99热这里只有精品86| 婷婷五月天少妇| 99er这里只有精品| 日本色色图| 绿色小导航AV| 九 九九九AV| 久久丁香五月天| 五月婷婷六月丁香| 国産精品| 亚洲99在线| 操骚货在线| 久久思思精品| 开心婷婷五月中文字幕组| 五月色导航| 亚洲视频在线观看99| 激情五月婷婷综合| 色婷婷综合网站| 久热中文字幕| 另类图片色五月| 超碰成人av| 激情久久综合网| 天花AV无码| 996re热精品视频| 无码激情AAAAA片-区区| 欧美搡BBBBB摔BBBBB| 97av在线视频| 99热只有| 国外亚洲成AV人片在线观看| 少妇大叫太大太粗太爽了A片| 色色国产| 丰满人妻妇伦又伦精品国产| 99婷婷| 久久久天堂国产精品女人| 婷婷久久网| 丁香婷婷色五月| 色五月婷婷网| 日韩精品AV一区二区三区| 色播丁香| www.色五月| 日韩一级一片内射视频4K| 久久婷婷五月综合色丁香花| 日本婷婷色| 日本nghangse中文字幕| 99精品偷拍视频| 99九九热视频| 婷婷天堂综合| 婷婷六月丁香在线| 天天干天天干天天干天天干天天干天天| 婷婷成人综合免费视频| 欧美性丁香色色五月天| 深爱激情网综合| 99久久网站| 五月婷婷久久大香蕉| 999热在线视频| 日韩AAAAA| 69精品人人人人| 99热在线观看| 日本操B片| 色情婷婷。| 五月综合久久| 五月丁香婷婷综合激情基地| 人妻尝试久久久久久久久久久久| 99热这里只有精品18| 99精品免费视频| 色五月婷婷基地| 狠狠色丁香| 激情九月丁香婷婷| 婷婷五月欧美| 五月婷婷丁香啪啪| 五月天天丁香婷婷在线中| 六月丁香五月亭亭| 色五婷婷开心缴| 91AV婷婷| 无遮挡国产高潮视频免费观看| 中国无码av| 久艹伊| 国产成人网| 亚洲综合婷婷| 9热在线观看| 九九无码| 综合久久五月| 色狠狠综合| www.五月激情红色| 永久免费一区二区三区| 中文字幕永久在线| 婷婷香草网| 欧美色色色色色色| 亚洲激情免费久久| 欧美婷婷成人| 婷婷五月激情网| 美女爆乳18禁www久久久久久| 丁香六月婷婷开心婷婷网| 激情综合色| 有哪些A片网站| 色综合色综合网| 97大香蕉五月天| 高清视频一区| 国产精品激情五月天色婷婷| 欧美啪啪9| 98国产精品综合一区二区三区| 免费人人操| 婷婷丁香五月精品| 永久免费一区二区三区| 香蕉AV777XXX色综合一区| 色9月| 日日婷婷不卡| 97狠狠色| 五月丁香久久激情综合| 狠狠色丁香五月婷巨| 激情婷婷啪啪| 婷婷色网| 大香蕉五月天婷婷丁香91| 青青热久精品视频在线观看| 99re热在线视频观看| 亚洲情综合五月天| 在线中文av| 五月丁香六月婷婷网站| 五月亭亭开心网| 国产伊人大香蕉| 欧美99热| 国产九九一区二区三区| 日本色99网站| 草综合网| 久久免费操| 五月天丁香色色| 五月婷婷综合网| 这里只有精品视频在线| 97五月婷| 99爱在线| 超碰在线人妻| 狠狠色大香蕉| 天天做天天爱天天综合| 久青草影院| 九九热欧美| 99热这里只有精品免费| 色综合久久久综合久久网| 五月丁香激情片| www.五月天婷婷| 色婷婷丁香女女| 五月天婷a在线| 9久久久久久久久久久| 久久99久久99久久99| 五月综合视频在线| 婷婷五月天av| 国产综合婷婷| 色综合久久88色综合天天99| 激情玖玖综合网| 26UUU在线观看| 婷婷久久综合| 影音先锋一区二区三区| 久久思思热| 五月婷婷 自拍| 青青草视频福利| 最近中文字幕大全免费版在线 | 色狠狠综合| 婷婷六月丁香欧美视频在线| 九九精品大香蕉| 天天综合插插| 色一情一乱一伦一区二区三区| www.婷婷五月天,com| 丁香五月婷婷亚洲色图| 91人碰| 亚洲操B视频| 深爱开心激情| 91操在线| 婷婷五月天综合网| 久9精品视频| 色99在线看| 天天干天天插| 九九色院| 性生活视频98791| 九九精品热播| 日韩在线一级| 亚洲精品在线视频| 五月天狠狠色| 天天综合色99| 5月丁香婷婷激情网| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 国产毛片欧美毛片久久久| 99色色热| 嫩BBB槡BBBB搡BBBB| 好好日激情五月天| 丁香六月激情综合| 天天爱天天做综合| 中文字幕日本最新乱码视频| 九九九九九无码| 六月丁香网| AV 3P| 欧美综合五月天婷婷tin| 天天色天天色天天色天天色天天色| 丁香婷婷六月| 五月天社区婷婷丁香社区| 久热黄色| 久久婷婷色| 欧美日本综合网| 中国丰满熟女A片免费观| 99久久综合精品五月天| 久9草在线观看视频| 99在线小视频| 久久色五月| 99色性爰网络| 九月婷婷综合八月丁香在线观看| 性欧美大战久久久久久久83| 天天爽天天做| 婷婷丁香五月色偷偷| 丁香激情网| 丁香激惜男女| 亚洲人操亚洲人| 天天射色五月天| 狠狠se| 岛国AV网| 婷婷五月免费在线| 久久久久九九九九视屏小说88| 激情五月天色播| 久久精典| 99免费在线视频| 久久 视频这里只有精总| 色五月婷婷影视| 国产成人AV在线| 色色99色色| 噢美99| 激情五月天综合| 色综合婷婷| 国产精品久久久久9999小说| 激情深爱五月| 99九色视频在线观看| 97色色色| 直接看的AV网站| 毛片新网地| 99激情视频| 激情婷婷啪啪| 色色五月天丁香| 色噜噜狠狠色综无码久久合欧美| 丁香五月激情啪啪| 99精品在线观看| 久久五月天激情| 超碰人人干| 国产伦理精品高清在线观看网站一区二区 | 亚洲AV无码成人精品区电影网| 日本久热| 99精品无码网站| 9久国产| 成人做爰A片免费看视频| 99热99re6国产在线播放| 婷婷五月天激情综合| 91Chinese在线| 五月天社区狠狠| 五月天堂色| 欧美大片免费播放器| 免费亚洲婷婷| 五月色欧洲| 内射综合网| 久久久全国免费视频| 激情伊人五月天| 丁香五月婷婷手机| 99热这里只有精品国产免费| 婷婷亚洲久久| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 日韩人妻无码精品| 亚洲AV日韩在线观看| 色五月婷婷中文字幕| 婷婷丁香五月天亚洲| 激情婷婷五月久久| 国产44页| 久久综合66| 五月天激情国产综合婷婷| 婷婷欧美| 久久久久人无码人妻| 99在线观看视频免费| 超碰伊人碰婷婷五月| 一区二区三区四日本| 开心五月激情网| 亚洲无码色色| 激情狠狠丁香月| 激情综合网络插| 免费AV在线| 99热97美女| 全部老头和老太XXXXX| 99免费| 色婷久| 婷婷丁香色情五月天| 九九操综合网| 婷婷五月天受日本法律保护| AV在线大香蕉| 色99免费视频中文| 精品九九久久| 9热网站| 天天干天天拍| 色情五月婷婷| 中文字幕在线日亚州9| 婷婷五月天天天| 99热这里只有精品搜| 69午夜成人影片| 日本在线视频手机播放五月婷| 9|无码久久久久久| 久久精品99久久| 日韩激情网站| 97色碰碰公开视频| 久操乱| 久久婷婷五月丁香蜜桃网| 黄桃AV无码免费一区二区三区| 色婷婷五月综合| 激情婷婷色色| 中文字幕av久久爽一区| 热99免费在线| 丁香六月婷婷色播| 五月天婷婷乱论小说| 欧美激情综合五月色丁香| 综合久久五月| 狠狠色 综合色区| 亚洲看av的网站| 欧洲综合视频在线观看。欧洲,亚洲综合食品在线观看。 | 97人人搞| 亚洲碰碰碰| 久久92| 成人综合视频在线| 亚洲黄色精品| 99碰网站| 日本三级黄色大片| 亚洲中文av| 97热这里只有精品| 亚洲综合在线播放| 大香蕉五月丁香| 97色在线| 激情五月天影院| 91精品久久久久久综合五月天| 婷婷五月天电影网| 天天操天天插| 少妇性按摩无码中文A片| 日韩乱轮AV| 97人碰人操| 精品视频网| 九九超碰人人| 色偷偷色婷婷| 99热青青草| 丁香婷婷六月激情文学| 91丨熟女丨首页| 先锋男人99资源| 丁香五月亚洲婷婷| 亚洲a色| 久久这里只有精品8| 国产精品久久久海的味道| 99视频在线精品| 强伦轩人妻一区二区电影| 色丁香婷婷| 五月婷婷影院| 国产精品久久久久9999小说| 综合五月激情| 久久免费试看120秒| 日韩在线视频网站| 色色色色欧洲| 狠狠色丁香婷婷综合久久97AV| 互月天综合| 五月婷婷免费在线视频| 久青操| 久久99热这里只频精品6学生| 五月丁香| 色婷婷中文| 久久婷婷五月综合啪| 亚洲综合婷婷五月| 丁香五月成人论坛| 日日夜夜小色哥| 亚洲人妻Av| 五月丁香五月婷婷| 91九色超碰| 婷婷娌伦网| 色色网站免费在线视频| 五月天自拍视频| 激情六月婷婷| 天天搞天天爽| 欧美日本不卡黄色片| 五月婷婷激情日本| 天天操夜夜啊| 日日舔夜夜操| 五月丁香操婷逼| 一本大道熟女人妻中文字幕在线 | 色激情五月天| 思思热视频| 182.t午在线观看| 夜色综合网| ,99视频久久| 久久这里有精品99| 99资源在线视频| 色欲一区二区三区精品A片| 操比激情五月| 人人爽天天莫| 99热这里只有精品最新| 色婷婷综合网站| 精品成人在线| 99操中文视频| 六月丁香五月激情网| 美欧日韩国产成人在战| 99热在线观看| 强奸幻女毛片| 激情婷婷内射| 五月天婷婷基地| 婷婷五月天伊人| 婷五月天六| 婷婷的激情五月| 丁香婷婷六月| 99re6在线视频精品免费| 五月婷婷日| 五月婷深深爱激情网| 色情五月婷| 五月停停大香蕉| 超碰成人电影| 99综合色| 99热超碰在线| 99爽视频| 精品三区影院| 婷婷91| 9热在线观看| 清色五月天| 久久久8| 大香蕉网 久久| 台湾综合丁香五月蜜桃| 激情五月天婷婷五月天| 欧美性生交A片免费看| 激情五月综合网最新| 五月天成人在线播放丁香| 狠狠干五月天| 久久婷婷夜| 五月丁香花开综合网| 五月天激情图片| 久久伊人9| 五月婷婷开心综合| 五月丁香六月| 色婷婷狠狠18禁| 五月丁香另类图片| 婷婷在线中文字幕| 久热这里只有精品6官网亚洲| 最新va在线播放| 超碰2021| 一根材五月婷成人| 强伦轩人妻一区二区电影| 五月丁香六月婷婷的女人| 99热这里只有精品50| 久久久久这里只有精品| 91丨九色丨丰满人妖| 色五月天成人| 亚洲黄色网址| 久久久久综合激动五月天| 日韩啪啪视频| 超碰97免费在线| 五月天精品视频| 亚洲V国产V欧美V久久久久久| 熟女色专区| 91丨九色丨白浆秘| 九9九9无码| 激情小说视频图片网| αv中文字幕在线观| 五月久久噜噜| 天天色综网| 粉嫩av懂色av蜜臀av熟妇| 亚洲婷婷五月天激情| 岛囯综合激情网| 亚洲综合视频一下| 综合网色| 99色这里| 久热婷婷| 97人妻碰碰碰久| 色色五月天网站| 婷婷久久精品| 婷婷丁香五月综合| 久草嫩草在线观看| 久久久久久五月天| 5月丁香综合图区| 五月社区婷婷激情| 国产乱妇乱子在线播视频播放网站| 久久激情视频99| 婷婷激情四射| 超碰chaompinm| 色丁香久久| 伊人久久婷婷| 久久久久9| 99操视频| 久久丁香五月婷婷| 99精品在线| 婷婷色九月| 久9热视频在线观看| 日本啪啪网| 婷婷五月天Av| 九九RE视频在线精品| 99久视频| 五月丁香狠狠爱| 婷婷在线播放av| 天天狠天天叉| 天天弄天天爽| 噼里啪啦完整版中文在线观看| 五月色情婷婷开心五月天| 国产精品18久久久| 丁香五月另类小说在线阅读| 免费无码毛片一区二区A片 | 亚洲十月婷婷综合| 人妻激情久久| 五月丁香花激情综合网| 婷综合六月| 天天檫天天爽| 婷婷五月精品中文| www.色综合.com| 色婷| 婷婷综合久久| 99性爱无码| 九色在线五月婷婷网址| 亚洲色爱综合| 婷婷五月18永久免费网站| 九月激情综合| 97色干| 久久久中文| 国产精品国产VA片国产| 艹色18p| 五月亭亭开心网| 在线婷婷| 亚洲欧洲另类| 五月婷婷欲色| 狠狠情色| 亚洲高清在线| 干婷婷五月天| 香蕉色色网| www.五月天婷婷| sS丁香五月婷婷| 亚洲午夜成人av电影网| 色日本五月天| 99九色视频在线观看| 婷婷久久五月| 五月婷婷丁香在线视频| 婷婷趴趴| 色婷婷综合网| 五月伊人视频在线看| 黄网在线免费观| 天天噜| 激情五月天在线观看色婷婷| 欧美S码亚洲码精品M码| 99九九精品| 日韩成人免费电影| 欧美性生交A片免费看| www色五月| 欧洲永久精品| 99热10在线高清播放| 综合五月丁香六月婷婷| 亚洲婷婷视频| 无码成人播放器| 婷婷大乡焦噜噜| 成人五月天在线观看| 91怕怕网| 丁香六月五月天| 亚洲婷婷五月天| 婷婷五月小说色综合| 无码激情AAAAA片-区区| 草五月| 夜夜骑日日操| 在线sebiav精品视频| 色色激情五月天| 欧美va欧美va差| 九九亚洲综合| 久久久一级AAA| 六月久久婷婷| 同性gv国产精品一区二区| 国产成人亚洲综合亚洲| AA丁香综合激情| 午夜婷婷五月天| 日韩色色网| 日韩aⅴ视频| 色综合色色| 色色色色色综合| 久久久久久久综合狠狠综合| 97超碰在线观看免费| 日本三级大片| 99在线观看精品视频| 丁香狠狠| 97视频.干com| 无码 av电影| 99黄色性生活| 狠狠五月激情丁香六月| 五月婷婷黄色| www五月天com| 极品少妇XXXX精品少妇偷拍| 天天干天天拍| 亚洲尤物在线| 日韩999| 婷婷五月丁香性爱| 亚洲欧洲另类| 久久激情五月天| 亚洲激情色色| 狠狠色丁香五月婷巨| 99啊精典免费视频| 九九综合久久| 激情婷婷丁香五月天| 色情五月停停丁香| 成人av在线电影| 秋霞少妇毛片| 逼特逼在线免费播放| 国产在这里只有精品| 日韩三级高清无码| 五月天成人手机在线视频| 婷婷五月天综合激情| 久婷自拍视频| 五月婷婷 婷婷五月 一区二区 久久久| 亚州操人在线视频| 欧美婷婷成人| 操一操| 丁香五月深爱五月婷婷| 丁香五月性| 大香蕉中文| 亚洲AV无码成人精品电影|