欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

分布式事務(wù)與一致性算法:CAP、Raft及工程選型全解析

分布式事務(wù)與一致性算法:CAP、Raft及工程選型全解析 兄弟們?cè)谧龇植际较到y(tǒng)的時(shí)候一定遇到過(guò)這種場(chǎng)景單機(jī)數(shù)據(jù)庫(kù)里的本地事務(wù)跑得挺順結(jié)果一拆成微服務(wù)、一上分布式數(shù)據(jù)庫(kù)數(shù)據(jù)就各種對(duì)不上。訂單狀態(tài)改了庫(kù)存卻扣重了用戶支付成功了積分系統(tǒng)卻查不到記錄。這些問(wèn)題歸根結(jié)底就倆字一致性。而一致性背后是分布式事務(wù)模型和一致性算法在撐著。今天這篇不是教科書復(fù)讀我盡量用干活的視角把CAP、分布式事務(wù)模型、還有Raft這套東西捋清楚講明白它們到底怎么落到工程里踩過(guò)哪些坑選型的時(shí)候該怎么權(quán)衡。這篇內(nèi)容適合真正在做微服務(wù)拆分、分布式數(shù)據(jù)庫(kù)選型、或者自己動(dòng)手寫共識(shí)模塊的工程師。不需要你數(shù)學(xué)多好但最好對(duì)分布式系統(tǒng)的基本概念有點(diǎn)體感。我會(huì)把整個(gè)鏈路拆成四塊來(lái)講先回到問(wèn)題源頭看一致性的本質(zhì)再展開CAP這個(gè)不可能三角然后擼一遍分布式事務(wù)的主流模型和選型依據(jù)最后把從Paxos到Raft的演進(jìn)邏輯以及Raft的核心機(jī)制逐層扒開。全程有類比、有場(chǎng)景、有參數(shù)、有對(duì)比盡量讓你看完能直接拿來(lái)用。1. 分布式系統(tǒng)的一致性問(wèn)題根源1.1 從單機(jī)事務(wù)到分布式事務(wù)問(wèn)題是怎么產(chǎn)生的單機(jī)數(shù)據(jù)庫(kù)里ACID事務(wù)是數(shù)據(jù)庫(kù)自己通過(guò)鎖、日志、回滾段來(lái)保證的。你執(zhí)行一條UPDATE要么成功要么失敗中間狀態(tài)外部不可見(jiàn)異常了還能回滾。這套機(jī)制在單機(jī)上是天經(jīng)地義的因?yàn)樗袛?shù)據(jù)和操作都在同一個(gè)進(jìn)程、同一塊磁盤上數(shù)據(jù)庫(kù)自己就能把控全局。但分布式系統(tǒng)不一樣。你的服務(wù)拆成了多個(gè)節(jié)點(diǎn)數(shù)據(jù)分散到多臺(tái)機(jī)器甚至分布在多個(gè)數(shù)據(jù)中心。這時(shí)候要完成一個(gè)跨節(jié)點(diǎn)的業(yè)務(wù)操作比如創(chuàng)建訂單扣庫(kù)存加積分這個(gè)操作涉及三個(gè)不同的服務(wù)每個(gè)服務(wù)又各自連著自己的數(shù)據(jù)庫(kù)。如果按照單機(jī)思路每個(gè)服務(wù)干自己的事、提交自己的事務(wù)問(wèn)題馬上就來(lái)了訂單建好了庫(kù)存扣減失敗了或者積分服務(wù)超時(shí)了這時(shí)怎么辦最直接的辦法就是讓這三個(gè)操作保持同生共死要么全成功要么全回滾。這就是分布式事務(wù)要解決的問(wèn)題。跟單機(jī)事務(wù)最大的不同在于單機(jī)事務(wù)有統(tǒng)一的協(xié)調(diào)者數(shù)據(jù)庫(kù)自身有全局可見(jiàn)的鎖狀態(tài)有可靠的本地日志而分布式系統(tǒng)里協(xié)調(diào)者需要自己設(shè)計(jì)節(jié)點(diǎn)間的通信是不可靠的網(wǎng)絡(luò)可能延遲、亂序、斷連節(jié)點(diǎn)可能宕機(jī)根本不存在一個(gè)上帝視角能一眼看清全局狀態(tài)。所以分布式事務(wù)的核心難點(diǎn)不是怎么做操作而是怎么讓多個(gè)節(jié)點(diǎn)達(dá)成共識(shí)并且容忍各種故障。1.2 分布式環(huán)境下的新挑戰(zhàn)網(wǎng)絡(luò)分區(qū)與節(jié)點(diǎn)故障分布式系統(tǒng)里兩個(gè)最棘手的問(wèn)題一個(gè)是節(jié)點(diǎn)故障宕機(jī)、進(jìn)程崩潰一個(gè)是網(wǎng)絡(luò)分區(qū)網(wǎng)絡(luò)不通、消息丟失、消息延遲。這兩種故障還不是互斥的經(jīng)常疊加出現(xiàn)。網(wǎng)絡(luò)分區(qū)特別惡心人的一點(diǎn)在于它讓判斷一個(gè)節(jié)點(diǎn)是否真的死了變得非常困難。假設(shè)你的訂單服務(wù)向庫(kù)存服務(wù)發(fā)送一條扣減請(qǐng)求超時(shí)了。這個(gè)超時(shí)代表什么可能是庫(kù)存服務(wù)真的掛了可能是網(wǎng)絡(luò)斷了幾秒鐘可能是消息在隊(duì)列里堵了也可能是庫(kù)存服務(wù)處理完但響應(yīng)丟了。你根本沒(méi)法區(qū)分。在這個(gè)不確定面前任何全局一致的企圖都會(huì)受挫。所以在分布式事務(wù)和一致性算法的設(shè)計(jì)里你到處都能看到對(duì)故障的明確假設(shè)。CAP定理把所有可能的系統(tǒng)分成了三類就是對(duì)這種不確定性最經(jīng)典的抽象表達(dá)。理解了這個(gè)前提后面再看兩階段提交的協(xié)調(diào)者超時(shí)處理、看Raft的領(lǐng)導(dǎo)者選舉、看各種一致性模型的取舍你就知道每一項(xiàng)設(shè)計(jì)都是在跟不可靠網(wǎng)絡(luò)做斗爭(zhēng)。2. CAP定理深度拆解分布式系統(tǒng)的不可能三角2.1 CAP三個(gè)字母到底在說(shuō)什么CAP是Consistency一致性、Availability可用性、Partition Tolerance分區(qū)容錯(cuò)性的縮寫。這套理論最早是Eric Brewer在2000年提出的后來(lái)由Gilbert和Lynch給出了形式化證明簡(jiǎn)單說(shuō)就是在網(wǎng)絡(luò)分區(qū)發(fā)生時(shí)一個(gè)分布式系統(tǒng)無(wú)法同時(shí)保證強(qiáng)一致性和高可用性只能在兩者之間做取舍。先把三個(gè)概念摳清楚不然很多討論都是在雞同鴨講。一致性Consistency在這里指的是線性一致性Linearizability也就是強(qiáng)一致性??蛻舳俗x取數(shù)據(jù)時(shí)如果某個(gè)寫操作已經(jīng)成功返回那么后續(xù)任何讀操作都必須讀到這個(gè)新值并且所有節(jié)點(diǎn)對(duì)數(shù)據(jù)的讀取順序在全球范圍內(nèi)完全一致。你可以把它理解為整個(gè)系統(tǒng)就像只有一份數(shù)據(jù)、一個(gè)操作順序所有并發(fā)操作被串行化了??捎眯訟vailability指的是每次請(qǐng)求都能在有限時(shí)間內(nèi)得到回應(yīng)。這里不要求回應(yīng)的內(nèi)容一定是最新的但必須是一個(gè)合法的結(jié)果成功或失敗都行不能無(wú)限掛起。換句話說(shuō)系統(tǒng)不能因?yàn)槟硞€(gè)節(jié)點(diǎn)故障或網(wǎng)絡(luò)問(wèn)題就拒絕服務(wù)。分區(qū)容錯(cuò)性Partition Tolerance指的是系統(tǒng)在網(wǎng)絡(luò)分區(qū)節(jié)點(diǎn)間消息丟失或延遲無(wú)限大的情況下仍能繼續(xù)運(yùn)行。注意P不是一種選擇而是分布式系統(tǒng)的必然屬性——只要你的系統(tǒng)部署在網(wǎng)絡(luò)上分區(qū)就是不可避免的。所謂三選二其實(shí)是個(gè)偽命題正確的理解是在分區(qū)發(fā)生時(shí)C和A只能保留一個(gè)。2.2 為什么最多只能滿足兩個(gè)用一個(gè)特別經(jīng)典的例子來(lái)解釋。假設(shè)有兩個(gè)副本節(jié)點(diǎn)N1和N2初始值都是X0?,F(xiàn)在客戶端向N1發(fā)起一個(gè)寫請(qǐng)求把X改成1并且N1成功執(zhí)行了這個(gè)寫操作。但緊接著N1和N2之間的網(wǎng)絡(luò)斷開了分區(qū)發(fā)生。這時(shí)客戶端向N2發(fā)起讀請(qǐng)求問(wèn)題來(lái)了如果N2返回X0那就沒(méi)有滿足一致性因?yàn)榭蛻舳藙倢懭氲闹凳?但讀到的卻是舊值。如果為了滿足一致性N2必須停下來(lái)等待與N1同步等待期間無(wú)法響應(yīng)——那就沒(méi)有滿足可用性。你看在分區(qū)這個(gè)前提下C和A出現(xiàn)了不可調(diào)和的沖突。那如果不發(fā)生分區(qū)呢當(dāng)然可以同時(shí)滿足C和A但那只是單機(jī)或無(wú)故障的特例沒(méi)有討論意義。在真實(shí)生產(chǎn)環(huán)境中分區(qū)是常態(tài)所以每個(gè)分布式系統(tǒng)實(shí)際都在做選擇題要CP還是AP。2.3 CP與AP的工程取舍實(shí)際系統(tǒng)怎么選選CP還是AP沒(méi)有絕對(duì)的對(duì)錯(cuò)完全看業(yè)務(wù)場(chǎng)景。CP系統(tǒng)在分區(qū)發(fā)生時(shí)選擇暫停服務(wù)拒絕寫入、拒絕讀取或部分拒絕以換取數(shù)據(jù)絕對(duì)的強(qiáng)一致。典型代表是ZooKeeper、etcd、HBase、Google Spanner。適用場(chǎng)景是那些數(shù)據(jù)錯(cuò)了比暫時(shí)不可用更可怕的業(yè)務(wù)比如金融交易、分布式鎖、配置中心、元數(shù)據(jù)存儲(chǔ)。舉個(gè)例子分布式鎖如果出現(xiàn)兩個(gè)節(jié)點(diǎn)同時(shí)拿到鎖那可能引發(fā)嚴(yán)重的資源競(jìng)爭(zhēng)或數(shù)據(jù)損壞所以鎖服務(wù)寧可短暫不可用也不能給客戶端分發(fā)出錯(cuò)的結(jié)果。AP系統(tǒng)在分區(qū)發(fā)生時(shí)選擇繼續(xù)服務(wù)允許各分區(qū)臨時(shí)出現(xiàn)數(shù)據(jù)不一致但通過(guò)異步補(bǔ)償機(jī)制在分區(qū)恢復(fù)后逐步收斂到一致狀態(tài)。典型代表是Cassandra、DynamoDB、CouchDB以及大量微服務(wù)架構(gòu)中的業(yè)務(wù)系統(tǒng)。適用場(chǎng)景是那些短暫讀到舊數(shù)據(jù)可以接受但必須一直能用的業(yè)務(wù)比如商品列表、用戶會(huì)話、社交動(dòng)態(tài)、購(gòu)物車。電商大促時(shí)你看到商品庫(kù)存多顯示了幾件這個(gè)可以忍但如果你因?yàn)閹?kù)存服務(wù)不可用導(dǎo)致連商品詳情都刷不出來(lái)那損失就大了去了。我在實(shí)際項(xiàng)目里的感受是大部分業(yè)務(wù)系統(tǒng)的核心矛盾不是強(qiáng)一致而是高可用。真正需要強(qiáng)一致的地方往往是元數(shù)據(jù)層、配置層和資金流轉(zhuǎn)的核心環(huán)節(jié)其他業(yè)務(wù)全部走最終一致就夠用了。這也是為什么微服務(wù)架構(gòu)落地時(shí)分布式事務(wù)越往業(yè)務(wù)側(cè)越軟用最終一致性的方案越來(lái)越多。3. 分布式事務(wù)模型的分類與選型前面講了理論這一節(jié)來(lái)點(diǎn)實(shí)際能用的東西。分布式事務(wù)模型目前主流的有這么幾類2PC兩階段提交、3PC三階段提交、TCCTry-Confirm-Cancel、Saga長(zhǎng)事務(wù)、本地消息表事務(wù)消息。它們對(duì)一致性的保障強(qiáng)度不同實(shí)現(xiàn)復(fù)雜度也天差地別。3.1 強(qiáng)一致路線2PC兩階段提交2PC是最經(jīng)典的分布式事務(wù)協(xié)議也最能體現(xiàn)強(qiáng)一致的思路。它引入一個(gè)協(xié)調(diào)者Coordinator節(jié)點(diǎn)把整個(gè)事務(wù)分成兩個(gè)階段階段一準(zhǔn)備階段協(xié)調(diào)者向所有參與者比如訂單庫(kù)、庫(kù)存庫(kù)、積分庫(kù)發(fā)送準(zhǔn)備提交的請(qǐng)求各參與者執(zhí)行本地事務(wù)到可提交狀態(tài)但不提交把事務(wù)寫入本地日志然后向協(xié)調(diào)者回復(fù)就緒或失敗。階段二提交階段協(xié)調(diào)者收集所有參與者的回復(fù)。如果全部就緒就廣播提交命令各參與者正式提交本地事務(wù)如果任一參與者回復(fù)失敗或超時(shí)未響應(yīng)協(xié)調(diào)者就廣播回滾命令各參與者撤銷本地操作。這個(gè)方案聽起來(lái)邏輯清晰但工程實(shí)現(xiàn)里全是坑。最大的問(wèn)題是同步阻塞所有參與者在準(zhǔn)備好之后持有資源鎖直到第二階段結(jié)束才能釋放。如果協(xié)調(diào)者宕機(jī)所有參與者都要一直阻塞著整個(gè)系統(tǒng)就卡住了。另外協(xié)調(diào)者是單點(diǎn)它掛了整個(gè)事務(wù)就沒(méi)法推進(jìn)極端情況下甚至?xí)霈F(xiàn)各參與者狀態(tài)不一致協(xié)調(diào)者廣播提交時(shí)崩潰一部分節(jié)點(diǎn)收到消息提交了另一部分沒(méi)收到就回滾了。所以純2PC在分布式數(shù)據(jù)庫(kù)內(nèi)部用得比較多比如TiDB的PD調(diào)度、MySQL XA因?yàn)閿?shù)據(jù)庫(kù)可以在內(nèi)部通過(guò)超時(shí)、重試和節(jié)點(diǎn)恢復(fù)機(jī)制來(lái)兜底。但在微服務(wù)架構(gòu)中跨服務(wù)調(diào)用鏈上直接裸用2PC非常痛苦——網(wǎng)絡(luò)超時(shí)、服務(wù)重試、事務(wù)狀態(tài)丟失都是麻煩這也是后來(lái)TCC和Saga被大量應(yīng)用的原因。3.2 最終一致路線TCC、Saga、本地消息表TCC的思想是把一個(gè)業(yè)務(wù)操作拆成三個(gè)動(dòng)作Try資源檢查和鎖定、Confirm確認(rèn)執(zhí)行、Cancel取消回滾。它比2PC更貼合業(yè)務(wù)因?yàn)門ry階段做的不是數(shù)據(jù)的物理變更而是預(yù)留資源。比如扣庫(kù)存Try階段只是凍結(jié)庫(kù)存數(shù)量Confirm階段才真正扣減Cancel階段解凍。TCC解決了2PC的同步阻塞問(wèn)題——Try階段完成就可以釋放資源鎖Confirm和Cancel都是異步補(bǔ)償。但TCC對(duì)業(yè)務(wù)代碼侵入非常強(qiáng)每個(gè)操作都得寫三套邏輯而且Confirm和Cancel要做到冪等否則重復(fù)調(diào)用會(huì)產(chǎn)生臟數(shù)據(jù)。這里我說(shuō)一個(gè)TCC落地最常見(jiàn)的坑Confirm和Cancel的觸發(fā)順序在某些異常場(chǎng)景下不可控。比如協(xié)調(diào)者在發(fā)送Confirm前宕機(jī)恢復(fù)后重發(fā)但業(yè)務(wù)方因?yàn)橹耙呀?jīng)執(zhí)行過(guò)Confirm且網(wǎng)絡(luò)丟了響應(yīng)重復(fù)執(zhí)行就不能報(bào)錯(cuò)必須能識(shí)別這已提交過(guò)。Saga則是把一個(gè)長(zhǎng)事務(wù)拆成一系列本地事務(wù)每個(gè)本地事務(wù)完成后都發(fā)布一個(gè)事件由后續(xù)的本地事務(wù)響應(yīng)事件繼續(xù)推進(jìn)。如果某個(gè)步驟失敗Saga會(huì)反向執(zhí)行補(bǔ)償事務(wù)把之前的操作逐步回滾。Saga的典型實(shí)現(xiàn)方式是Choreography編排式和Orchestration編排中心式。前者靠事件驅(qū)動(dòng)各服務(wù)自己訂閱發(fā)布適合流程簡(jiǎn)單的情況后者有一個(gè)中心化的Saga執(zhí)行器來(lái)串聯(lián)整個(gè)事務(wù)流程復(fù)雜性可控適合業(yè)務(wù)邏輯較長(zhǎng)的場(chǎng)景。本地消息表事務(wù)消息的思路也很實(shí)用把某個(gè)核心操作和發(fā)消息放在同一個(gè)本地事務(wù)里。比如訂單服務(wù)在創(chuàng)建訂單的同時(shí)往本地消息表插入一條扣減庫(kù)存的事情記錄提交事務(wù)后再異步發(fā)送消息到MQ。消息隊(duì)列確保至少投遞成功下游消費(fèi)成功后再回調(diào)確認(rèn)。如果本地事務(wù)提交了但消息發(fā)送失敗后臺(tái)任務(wù)會(huì)定時(shí)掃描消息表把未確認(rèn)的消息重新投遞。這個(gè)方案最大的優(yōu)勢(shì)是簡(jiǎn)單、不侵入業(yè)務(wù)落地成本低而且各服務(wù)解耦。3.3 事務(wù)模型選型對(duì)比為了讓你選型時(shí)有概念我直接整理了一張對(duì)比表方案一致性強(qiáng)度性能開銷實(shí)現(xiàn)復(fù)雜度業(yè)務(wù)侵入適用場(chǎng)景2PC強(qiáng)一致高鎖持續(xù)時(shí)間長(zhǎng)中低數(shù)據(jù)庫(kù)內(nèi)部事務(wù)、小規(guī)??鐜?kù)操作TCC最終一致Confirm階段業(yè)務(wù)保證中高高資金、庫(kù)存等核心資源操作需精細(xì)控制資源狀態(tài)Saga最終一致中低中中長(zhǎng)流程業(yè)務(wù)如訂單創(chuàng)建支付出庫(kù)允許中間狀態(tài)本地消息表/事務(wù)消息最終一致低低低消息驅(qū)動(dòng)的異步流程跨服務(wù)解耦注意事務(wù)模型的選擇不能脫離業(yè)務(wù)單獨(dú)談。我在實(shí)際項(xiàng)目里一般先畫一張事務(wù)邊界圖把每個(gè)核心操作的數(shù)據(jù)寫入路徑梳理出來(lái)判斷每個(gè)路徑對(duì)一致性的真實(shí)容忍度再?zèng)Q定哪一段用TCC、哪一段走Saga、哪一段只靠MQ解耦。不存在銀彈只有適不適合當(dāng)前場(chǎng)景。4. 一致性算法的演進(jìn)從Paxos到Raft搞清楚了分布式事務(wù)再看一致性算法就順了。因?yàn)榉植际绞聞?wù)的強(qiáng)一致方案比如2PC本質(zhì)上需要一個(gè)讓多個(gè)節(jié)點(diǎn)對(duì)某個(gè)決策達(dá)成一致的機(jī)制而真正健壯、能容錯(cuò)的共識(shí)算法一直到Paxos才算是有了突破。4.1 Paxos為什么難懂又難實(shí)現(xiàn)Paxos是Leslie Lamport在1990年提出、1998年正式發(fā)表的共識(shí)算法也是歷史上第一個(gè)被廣泛認(rèn)可的容錯(cuò)共識(shí)算法。它解決的問(wèn)題是在異步通信、節(jié)點(diǎn)可能宕機(jī)的環(huán)境下如何讓多個(gè)節(jié)點(diǎn)對(duì)同一個(gè)值比如某條日志記錄的序號(hào)、某個(gè)配置項(xiàng)的值達(dá)成一致。Paxos的核心設(shè)計(jì)是引入提議者Proposer、接受者Acceptor和學(xué)習(xí)者Learner三種角色通過(guò)兩輪RPCPrepare和Accept來(lái)保證一旦某個(gè)值被選定后續(xù)所有提議都只能提議同樣的值。安全性Safety由法定人數(shù)Quorum機(jī)制保證——任何兩個(gè)法定人數(shù)的交集不為空所以不會(huì)被同時(shí)選出兩個(gè)不同的值。但Paxos的臭名昭著在于它極其抽象工程實(shí)現(xiàn)的門檻極高。Lamport原始的論文用議會(huì)提案做類比理解起來(lái)簡(jiǎn)直是一種折磨。而且Paxos本身只解決單值共識(shí)真實(shí)系統(tǒng)要復(fù)制日志、選主、做成員變更還得在Paxos之上疊加大量工程細(xì)節(jié)。多PaxosMulti-Paxos雖然實(shí)際應(yīng)用很廣Google的Chubby、Spanner內(nèi)部都用了類Paxos協(xié)議但因?yàn)闆](méi)有一篇公認(rèn)的、可以直接照著寫的權(quán)威實(shí)現(xiàn)文檔各家實(shí)現(xiàn)五花八門團(tuán)隊(duì)之間交流起來(lái)特別費(fèi)勁。4.2 Raft的重新設(shè)計(jì)可理解性優(yōu)先Raft的作者Diego Ongaro和John Ousterhout在2014年發(fā)表論文《In Search of an Understandable Consensus Algorithm》開頭就直說(shuō)了Paxos正確但不夠可理解所以我們?cè)O(shè)計(jì)了一個(gè)更容易理解、更適合教學(xué)和工程實(shí)現(xiàn)的共識(shí)算法。目標(biāo)就是可理解性優(yōu)先把共識(shí)問(wèn)題拆成相對(duì)獨(dú)立的子問(wèn)題逐一解決。Raft跟Paxos最大的區(qū)別是先選主再?gòu)?fù)制。Raft把節(jié)點(diǎn)分成Leader、Follower、Candidate三種狀態(tài)正常情況下只有一個(gè)Leader所有寫請(qǐng)求都經(jīng)過(guò)Leader由Leader把日志條目復(fù)制給Follower提交后返回成功。這樣整個(gè)共識(shí)過(guò)程從多個(gè)提議者互相競(jìng)爭(zhēng)變成了單一Leader負(fù)責(zé)推進(jìn)邏輯線特別清晰。下面我詳細(xì)拆Raft的幾個(gè)核心機(jī)制這部分建議你找個(gè)本子記一下面試和實(shí)戰(zhàn)都經(jīng)???。5. Raft算法核心機(jī)制逐層拆解5.1 領(lǐng)導(dǎo)者選舉Raft的班長(zhǎng)機(jī)制Raft把時(shí)間劃分成一個(gè)個(gè)任期Term每個(gè)任期最多對(duì)應(yīng)一個(gè)Leader。所有節(jié)點(diǎn)啟動(dòng)時(shí)都是Follower如果在一段時(shí)間內(nèi)沒(méi)收到Leader的心跳Heartbeat它就會(huì)變成Candidate給自己currentTerm加1然后發(fā)起選舉。選舉過(guò)程這樣的Candidate先投自己一票然后向其他節(jié)點(diǎn)廣播RequestVote RPC。每個(gè)節(jié)點(diǎn)在一個(gè)任期里只能投一票收到投票請(qǐng)求時(shí)如果對(duì)方的日志至少不比自己舊后面會(huì)細(xì)說(shuō)并且自己還沒(méi)有投過(guò)票就投給對(duì)方。候選人拿到大多數(shù)節(jié)點(diǎn)N/21的票數(shù)就當(dāng)選Leader成為L(zhǎng)eader后立即開始周期性發(fā)送心跳Heartbeat告訴其他節(jié)點(diǎn)我活著繼續(xù)保持Follower身份。選舉的關(guān)鍵參數(shù)是隨機(jī)超時(shí)時(shí)間。每個(gè)節(jié)點(diǎn)的選舉超時(shí)是在固定區(qū)間論文推薦150ms到300ms內(nèi)隨機(jī)選擇的。為什么要隨機(jī)如果所有節(jié)點(diǎn)同時(shí)超時(shí)就會(huì)同時(shí)發(fā)起選舉票數(shù)分散誰(shuí)都當(dāng)不上Leader然后反復(fù)選舉系統(tǒng)一直震蕩。隨機(jī)化之后總有一個(gè)節(jié)點(diǎn)先超時(shí)它發(fā)起選舉時(shí)其他節(jié)點(diǎn)還在等待票基本都會(huì)投給它這樣就能快速穩(wěn)定地選出Leader。這里有個(gè)工程細(xì)節(jié)實(shí)際的超時(shí)時(shí)間不能離心跳間隔太近否則網(wǎng)絡(luò)抖動(dòng)就會(huì)引發(fā)頻繁選舉。我推薦心跳間隔在100ms到500ms之間選舉超時(shí)設(shè)為心跳間隔的3到5倍。比如心跳200ms選舉超時(shí)600ms到1000ms之間隨機(jī)。調(diào)得太小一有網(wǎng)絡(luò)毛刺就觸發(fā)選舉調(diào)得太大Leader掛了之后的恢復(fù)時(shí)間又變長(zhǎng)。5.2 日志復(fù)制讓所有節(jié)點(diǎn)保持同步選出了Leader接下來(lái)就是日志復(fù)制??蛻舳说乃袑懻?qǐng)求都發(fā)送給LeaderLeader先把請(qǐng)求封裝成一條日志條目Log Entry里面包含任期號(hào)、索引、命令等字段然后并行發(fā)給所有Follower。Follower收到AppendEntries RPC日志復(fù)制請(qǐng)求做一系列一致性檢查它會(huì)確認(rèn)前一條日志的任期和索引是否跟自己的日志匹配只有匹配才接受新日志條目。為什么這么嚴(yán)格因?yàn)槿罩颈仨毐3謬?yán)格有序任何跳號(hào)或沖突都可能導(dǎo)致狀態(tài)機(jī)應(yīng)用出問(wèn)題。這里有個(gè)重點(diǎn)日志提交Commit才意味著生效。Leader只有確認(rèn)某條日志已經(jīng)被復(fù)制到了大多數(shù)節(jié)點(diǎn)Quorum才能更新commitIndex并把這條日志應(yīng)用到狀態(tài)機(jī)Apply然后才向客戶端返回成功。也就是說(shuō)只要一個(gè)寫操作被大多數(shù)節(jié)點(diǎn)接收了即使其他節(jié)點(diǎn)暫時(shí)落后這條日志也已經(jīng)穩(wěn)了——因?yàn)楹罄m(xù)任何新的Leader選舉出來(lái)它的日志一定包含這條記錄。我在實(shí)際調(diào)試Raft實(shí)現(xiàn)時(shí)最常遇到的問(wèn)題就是日志覆蓋Overwrite。Raft允許Leader通過(guò)檢查日志的任期和索引讓Follower刪除并覆蓋掉那些沖突的日志條目。很多人剛學(xué)的時(shí)候不理解刪日志不是破壞一致性嗎其實(shí)不會(huì)。因?yàn)闆_突的日志本來(lái)就沒(méi)被提交過(guò)未提交的日志是不穩(wěn)定的刪掉它們不會(huì)影響已提交的狀態(tài)。這個(gè)機(jī)制保證了最終所有節(jié)點(diǎn)日志收斂到和Leader一致。5.3 安全性保證為什么不會(huì)選錯(cuò)日志復(fù)制看起來(lái)簡(jiǎn)單但有個(gè)致命問(wèn)題怎么保證新選出的Leader一定擁有所有已提交的日志如果沒(méi)有這個(gè)保證新Leader可能會(huì)覆蓋掉已經(jīng)提交的數(shù)據(jù)導(dǎo)致系統(tǒng)丟失數(shù)據(jù)。Raft用兩個(gè)規(guī)則解決了這個(gè)問(wèn)題。第一是選舉限制Candidate在發(fā)起選舉時(shí)必須帶上自己日志的最新任期和索引。收到投票請(qǐng)求的節(jié)點(diǎn)會(huì)比較自己和對(duì)方的日志新鮮度如果對(duì)方的最后一條日志任期比自己的新或者任期相同但索引更大說(shuō)明對(duì)方日志更完整就把票投給它。這樣日志更完整的節(jié)點(diǎn)更容易勝出確保新Leader至少不落后于大多數(shù)節(jié)點(diǎn)。第二是提交限制Leader只能直接提交當(dāng)前任期的日志對(duì)于之前任期的日志必須等當(dāng)前任期有一條日志提交了才能間接提交之前的日志。這個(gè)規(guī)則比較繞但非常關(guān)鍵。假設(shè)Leader在Term 2復(fù)制了一條日志到大多數(shù)節(jié)點(diǎn)但隨后宕機(jī)了Term 3的新Leader可能并不包含這條日志因?yàn)樗侵叭纹谖刺峤坏?。如果Term 3的Leader擅自把Term 2的日志標(biāo)記為提交就相當(dāng)于提交了一個(gè)自己都沒(méi)有的日志這絕對(duì)不行。所以Raft規(guī)定舊日志只能通過(guò)當(dāng)前任期的日志間接確認(rèn)提交。這兩個(gè)規(guī)則配在一起Raft就具備了完整的安全性Safety任何已提交的日志條目一定存在于之后任意任期的Leader的日志中。這就保證了數(shù)據(jù)不會(huì)丟也不會(huì)被覆蓋。5.4 成員變更生產(chǎn)環(huán)境繞不開的難題Raft的另一個(gè)關(guān)鍵機(jī)制是成員變更Membership Change。這在生產(chǎn)環(huán)境里是真的繞不開——你要擴(kuò)縮容、替換故障節(jié)點(diǎn)都涉及成員變更。Raft論文里給出的是**聯(lián)合共識(shí)Joint Consensus**方案把成員變更拆成兩個(gè)階段。第一階段新老配置同時(shí)生效任何決策都需要老配置的Quorum和新配置的Quorum都同意第二階段確認(rèn)穩(wěn)定后完全切換到新配置。這個(gè)方案理論上很完美但實(shí)現(xiàn)起來(lái)還是有點(diǎn)復(fù)雜。工程上更常用的簡(jiǎn)化版本是單節(jié)點(diǎn)變更Single-Server Membership Change每次只添加或刪除一個(gè)節(jié)點(diǎn)不搞聯(lián)合共識(shí)。論文后續(xù)附錄證明了在每次只變更一個(gè)節(jié)點(diǎn)的情況下系統(tǒng)的安全性依然能得到保證。etcd、Hashicorp Raft庫(kù)基本都是走這個(gè)路線。我在實(shí)踐里建議優(yōu)先選單節(jié)點(diǎn)變更實(shí)現(xiàn)復(fù)雜度低出問(wèn)題的概率小得多。6. 工程實(shí)踐分布式事務(wù)與一致性算法在真實(shí)系統(tǒng)中的配合聊了這么多理論最后落到工程上。很多人有個(gè)誤解學(xué)了Raft是不是就該自己寫一個(gè)共識(shí)模塊我的建議是除非你想造輪子否則生產(chǎn)環(huán)境千萬(wàn)別自己實(shí)現(xiàn)Raft。Raft的難度不在算法本身而在邊角場(chǎng)景——磁盤故障、網(wǎng)絡(luò)抖動(dòng)、時(shí)鐘漂移、快照、配置變更任何一個(gè)都能讓一個(gè)看似正確的實(shí)現(xiàn)翻車。實(shí)際工程中Raft早就被封裝成了可靠的基礎(chǔ)組件。etcd的raft庫(kù)Go、Hashicorp的Raft庫(kù)Go、百度的braftC、螞蟻的sofa-jraftJava都是成熟選擇。你在業(yè)務(wù)代碼里要做的不是重寫Raft而是基于這些庫(kù)把共識(shí)組的能力用起來(lái)。比如用etcd做分布式鎖、用ZooKeeper做元數(shù)據(jù)管理、用TiKV或CockroachDB做分布式數(shù)據(jù)庫(kù)這些系統(tǒng)內(nèi)部都用了Raft或類Paxos算法你不需要操心內(nèi)部實(shí)現(xiàn)但要理解它們的行為模型什么操作是線性的、什么操作是最終一致的、分區(qū)時(shí)會(huì)發(fā)生什么。另外分布式事務(wù)模型在微服務(wù)架構(gòu)里很少單獨(dú)使用一般會(huì)配合本地消息表重試對(duì)賬的組合拳。比如我做過(guò)的一個(gè)供應(yīng)鏈項(xiàng)目訂單創(chuàng)建走本地消息表發(fā)事件庫(kù)存扣減走Saga編排資金扣減走TCC。外圍架設(shè)一套定時(shí)對(duì)賬任務(wù)每隔一段時(shí)間掃描兩邊數(shù)據(jù)發(fā)現(xiàn)不一致就告警并自動(dòng)補(bǔ)償。這套組合下來(lái)絕大多數(shù)數(shù)據(jù)不一致問(wèn)題都能在秒級(jí)到分鐘級(jí)內(nèi)收斂關(guān)鍵時(shí)刻用對(duì)賬兜底比純追求強(qiáng)一致要穩(wěn)妥得多。7. 常見(jiàn)問(wèn)題與排查經(jīng)驗(yàn)7.1 Raft集群頻繁選舉Leader怎么辦這是Raft集群最常見(jiàn)的問(wèn)題。先看心跳間隔和選舉超時(shí)配置是否合理——心跳太慢或超時(shí)太短都會(huì)導(dǎo)致誤判。其次是網(wǎng)絡(luò)延遲和抖動(dòng)如果節(jié)點(diǎn)間延遲超過(guò)心跳間隔Follower就會(huì)認(rèn)為L(zhǎng)eader掛了。排查手段包括查CPU和磁盤IORaft需要持久化日志磁盤慢會(huì)導(dǎo)致心跳RPC處理延遲、抓包看心跳間隔的P99延遲、檢查是否存在GC停頓JVM進(jìn)程Full GC會(huì)卡住心跳響應(yīng)。7.2 2PC協(xié)調(diào)者宕機(jī)事務(wù)卡死怎么辦生產(chǎn)環(huán)境里2PC協(xié)調(diào)者宕機(jī)是最惡心的場(chǎng)景之一因?yàn)樗袇⑴c者都在等協(xié)調(diào)者發(fā)最終決定。解決思路一般是超時(shí)回查。協(xié)調(diào)者把每個(gè)事務(wù)的狀態(tài)持久化到本地存儲(chǔ)恢復(fù)后根據(jù)事務(wù)日志重新決策參與者在等待協(xié)調(diào)者響應(yīng)超時(shí)后主動(dòng)向協(xié)調(diào)者發(fā)起狀態(tài)查詢。在MySQL XA等實(shí)現(xiàn)里這個(gè)機(jī)制是內(nèi)置的。如果你的自研方案沒(méi)有狀態(tài)持久化和回查那這個(gè)2PC根本不具備上線條件。7.3 Saga補(bǔ)償操作沒(méi)有冪等導(dǎo)致重復(fù)扣款Saga的補(bǔ)償執(zhí)行不保證只執(zhí)行一次網(wǎng)絡(luò)重試、執(zhí)行器重啟都可能讓同一個(gè)補(bǔ)償動(dòng)作被執(zhí)行多次。解決方案是對(duì)每個(gè)補(bǔ)償操作打上全局唯一的事務(wù)ID在數(shù)據(jù)庫(kù)里用唯一索引去重或者在操作前先查詢補(bǔ)償記錄是否已存在。這里我推薦一個(gè)實(shí)踐所有補(bǔ)償操作必須是冪等的而且要能處理補(bǔ)償本身也失敗的情況——需要把失敗的補(bǔ)償記錄下來(lái)交給人工或?qū)~任務(wù)處理不能讓它無(wú)限重試打到下游。7.4 常見(jiàn)問(wèn)題速查表問(wèn)題可能原因排查方法Raft選主頻繁心跳間隔過(guò)短、網(wǎng)絡(luò)抖動(dòng)、磁盤慢檢查心跳配置、抓包統(tǒng)計(jì)延遲、觀察GC停頓數(shù)據(jù)短暫不一致AP系統(tǒng)正常特性確認(rèn)業(yè)務(wù)容忍度檢查補(bǔ)償任務(wù)是否運(yùn)行正常TCC的Confirm重復(fù)觸發(fā)報(bào)錯(cuò)缺乏冪等控制用事務(wù)ID唯一索引做冪等重復(fù)執(zhí)行返回成功本地消息表中的消息始終投遞不成功MQ異常、序列化失敗、消息體過(guò)大查看MQ是否可用、檢查消息表狀態(tài)、增加重試退避Saga事務(wù)回滾后業(yè)務(wù)流程中斷補(bǔ)償時(shí)序不對(duì)、補(bǔ)償未執(zhí)行梳理補(bǔ)償依賴順序補(bǔ)充補(bǔ)償失敗告警和人工介入機(jī)制7.5 一致性排查的通用方法論排查數(shù)據(jù)一致性問(wèn)題時(shí)我有一套固定的三段法先確認(rèn)時(shí)間線哪個(gè)操作先發(fā)生哪個(gè)后發(fā)生操作順序?qū)Σ粚?duì)再確認(rèn)狀態(tài)線每條數(shù)據(jù)在各個(gè)節(jié)點(diǎn)的當(dāng)前狀態(tài)是什么是否有版本號(hào)或時(shí)間戳輔助判斷最后確認(rèn)日志線操作日志、事務(wù)日志、消息投遞記錄是否完整有沒(méi)有丟失或重復(fù)。把三條線疊在一起比對(duì)80%的不一致問(wèn)題都能定位到具體環(huán)節(jié)。剩下的20%往往是某些節(jié)點(diǎn)狀態(tài)機(jī)應(yīng)用邏輯的bug那就需要靠對(duì)賬系統(tǒng)跑批來(lái)兜底了。8. 從理論到落地我的幾點(diǎn)體會(huì)說(shuō)到底CAP定理、分布式事務(wù)模型、Raft算法這些東西從來(lái)都不是孤立的知識(shí)點(diǎn)。它們串起來(lái)其實(shí)是一條完整的決策鏈先認(rèn)清分布式系統(tǒng)的故障模型再想清楚業(yè)務(wù)到底需要什么程度的一致性然后選擇合適的事務(wù)模型最后用讀寫路徑上的核心組件數(shù)據(jù)庫(kù)、消息隊(duì)列、共識(shí)服務(wù)把模型落地。我自己踩過(guò)最大的坑就是一開始總想一步到位搞強(qiáng)一致覺(jué)得最終一致是偷懶。后來(lái)在真實(shí)的電商支付鏈路里做壓測(cè)才發(fā)現(xiàn)強(qiáng)一致方案的代價(jià)不只是性能還有運(yùn)維復(fù)雜度——你要處理協(xié)調(diào)者狀態(tài)持久化、處理故障恢復(fù)、處理網(wǎng)絡(luò)分區(qū)下的僵局。業(yè)務(wù)側(cè)根本等不起。反而是Saga加消息補(bǔ)償?shù)姆桨概浜贤晟频膶?duì)賬監(jiān)控既保證了最終不丟數(shù)據(jù)又扛得住高并發(fā)流量。Raft那套東西真正吃透之后有個(gè)額外的好處你能讀懂etcd、TiKV這些基礎(chǔ)組件在極端情況下的行為邏輯了。比如為什么etcd在Leader選舉期間不能寫、為什么TiKV的分區(qū)容錯(cuò)行為是優(yōu)先保證已提交數(shù)據(jù)的安全這些都能從Raft的機(jī)制里找到答案。知其所以然排查問(wèn)題的時(shí)候就不慌。最后分享一個(gè)小技巧學(xué)習(xí)分布式事務(wù)和一致性算法別只看理論一定要親手搭一個(gè)環(huán)境實(shí)驗(yàn)一下。用Docker拉一個(gè)三節(jié)點(diǎn)的etcd停掉一個(gè)節(jié)點(diǎn)看看讀寫表現(xiàn)再停掉兩個(gè)節(jié)點(diǎn)看看或者起一個(gè)Seata服務(wù)把一個(gè)TCC事務(wù)跑到一半斷掉網(wǎng)絡(luò)看看補(bǔ)償怎么觸發(fā)。這些實(shí)驗(yàn)比讀十篇博客都管用。理論給你地圖實(shí)驗(yàn)給你腳感兩者都到位了分布式系統(tǒng)里的這片坑你才算是真正趟明白了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
狠狠色丁香久久综合婷婷亚洲成人福利| 亚洲精品久久久久久久久久吃药| 9999三级片| 91九色国产在线| 久99热| 色五月在线观看| 五月天桃色深爱网| 丁香五月综合狠狠| 久久久99婷婷久久久久久| 日韩超碰在线| 五月丁香综合久久| 五月丁香六月激情| 丁香六月激情综合| 96精品国产综合久久久久久| 五月婷亚洲精品AV天堂| 这里只有精品视频看看| 1024操逼视频| 中文字幕在线日亚州9| 国产欧美性成人精品午夜| 人碰人人人玩91| 色99婷婷五月天| 色域五月婷婷丁香| 丁香五月老师| 99在线视频资源| 成人网址在线观看| 日韩一级| 91久久久久久| 婷婷六月五月天综合| 99九九视频| 激情婷婷丁香五月天| 欧美精品999| 婷婷伊人久久无码色五月| 奇米色大香蕉| 婷婷五月天在线观看av| 丁香激情五月天| www.婷婷五月| 色偷偷人人| 婷综合| 色色色在线播放| 丁香五月天在线| 九九伊人网| 久久视9精| 丁香六月婷婷久久亚洲天堂| 热99精品视频观看| 99这里有精品视频| 亚洲偷| 日韩色色一区| 欧美婷婷五月激情| 五月丁香影院| 99免费在线视频| 在线sebiav精品视频| 91久久精品国产91性色TV| 99在线资源| 婷婷综合久久| 色五月激情| 97热这里只有精品| 大天天伊人| 丁香五月婷婷五月天在线| 美英法精品无码免费视频| 婷婷内射视频在线| 91精品激情9| 婷婷五月天亚洲综合| 天天天天天操| www.zbzhongsen.com| 国产欧美熟妇另类久久久 | 国产女人十八水真多1| 九九伊人网| 色欲AV导航| AV中文在线| 色综合色| 99热6这里只有精品| 99视频精品在线| 婷婷五月丁香综合瑟瑟| 婷色成人| 五月激情视频| 蜜臀丁香黄色婷婷五月天| 99热日本| 另类少妇人与禽zOZZ0性伦| 日本三级片片| 五月婷色激情五月| 99色视频| 欧美婷婷| 久久五月激情| 67194中文字幕| 99热这里只有精品1998| 六月 丁香 视频| 久艹久| 婷婷五月开心中文字幕色| 色综合久久44| 综合色影院| 九九精品视频在线6| 五月丁香大香蕉| 丁香五月人妻| 色五月亚洲开心网| 国产亚洲成AV人片在线观黄桃| 久久综合中文字幕| 日日干日日| 日本在线观看99| 五月婷婷大香蕉| 日屌日日操日日色| 五月天六月婷婷| 国产精品久久欧美久久一区| 91精品刘玥| www久久艹| 玖玖@三月天天丁香婷婷| 激情丁香五月天综合| 综合色影院| 永久天堂日本| 精品人妻久久久久久久| co超碰在线观看| 人妻AV在线| 九热免费视频| 亚洲AV无码成人精品电影| 五月丁香激情在线| 超碰av在| 全国最新疫情| 99久久综合狠狠综合久久| 99在线观看视频蜜臀| 五月激情啪啪啪| 日本精品干| 色五月婷婷色五月| 久久日婷婷| 另类丁香综合| 久久精品66| 天天草女人| 五月婷婷新网站| 婷婷无码视频| 久久婷婷五月综合97色一本| 五月丁香色综合| 婷婷丁香九色| 丁香婷婷色五月| 99草在线免费观看视频| 五月天婷婷久久综合| 五月天社区| 丁香五月婷婷黑人妻黄色电影院| 婷婷五月天堂| 天天射综合网天天插| 久久久久久激情| 在线超碰精品| 播五月开心婷婷欧美综合| 丁香五月婷婷六月婷婷| 婷婷激情丁香五月婷婷激情丁香五月婷婷 | 综合久| 中文精品在| 亚洲色99| 五月婷婷丁香大陆免费| 日本天天操| 久久这里这里有精品免费视频| 深爱五月激情五月| 久色中文| 99九九中文字幕视频| 99热在线观看精品| 熟女色专区| 九九 激情 网| 九九综合精品| 伊人婷婷福利网| 天天干天天射综合网| 97超碰免费超级在线观看| 99er6| 95精品区一区二| 1024亚洲无码| 五月天最新网| 久久久久妻| 天堂成人A片永久免费网站| 五月香蕉婷婷| 色五月丁香A欧美com| 五月激情网络| 色色色婷婷五月| 色五月丁香网| 天天色色天天| 操操综合网婷婷| 丁香月六月| ′久久99一| 99热18| 九九热再线九九视频免费在线观看 | 色婷婷综合网站| 婷婷久久天堂网| www,超碰| 国产精品五月丁香| 丁香五夜激情四射夜夜夜| 狠狠爱婷婷丁香| 五月婷婷xxx| AA片在线观看视频在线播放| 天天日综合| 五月丁香婷中文| 99视频精品在线| 激情狠狠丁香月| 五月丁香婷婷综合网色欲| 激情爱爱网站| 久久99热精品a片在线观看| 五月天丁香欧美激情| 亚洲啪啪视频| 激情美女五月天激情在线| 99久久五月丁香野外| 亚洲五月丁香综合网| 色墦五月丁香| 婷婷九月在线| 日日干干天天干| 五月婷久草| 日韩成人电影在线播放| 国产亚洲精品人人| 伊人成综合五月婷婷| 日日夜夜狠狠| 艹| xxxx久| 九九亚洲| 色一情一乱一乱一区91| 亚洲欧美999| 五月天婷婷色| 欧美性爱中文字幕| 九九爱精品网站| 色色色色色色色色五月先| 翔田千里无码| 日韩操逼大片| 五月天综合视频| 色婷婷五月综合激情中文字幕| 色欲午夜无码久久久久久张津瑜 | 另类少妇人与禽zOZZ0性伦| 深爱激情丁香| 婷婷丁香五月噜噜噜| 狠狠人妻色综合| 清纯唯美 激情四射| 26UUU| bukadeavzaixian| 大香蕉啪啪啪| 亚洲网视屏| 丁香五月婷婷欧美成人色图| 99热香港| 色色激情| 色色色综合色| 九九re视频在线视频| 极品少妇高潮啪啪AV无码| 婷婷婷久久久| 夜夜操天天干| 色婷婷丁香中文在线播放| 丁香五月色| 久久婷中文字幕| 激情五月丁香五月色| 久久久激情| 五月丁香中文字幕| 99色色网站| 影音先锋色婷婷| 欧美日本99| 国产肥白大熟妇BBBB视频| 九九操操| 91综合国免费久入| 丁香婷婷色九月| 26uuu另类亚洲欧美日本一| 五月婷丁香花| 日本色频| 天天日天天舔天天摸| 69人人操人人爽| 国产肥白大熟妇BBBB视频| 5月丁香啪啪啪| 色五婷婷在线视频| 五月丁香六月在线| 久久爱婷婷| 日日夜夜爽爽| 色婷婷五月天综合网| 国产 A片 自拍| 啪啪啪综合网| 五月天激情黄色小说在线观看| 久久精品婷婷五月丁香| 天堂爱啪啪| 五月婷婷,六月婷婷| 影音 五月 婷婷 久久| 激情五月天网| 97人人干人人操| 欧美成人A片AAA片在线播放| 久久久com| 色五月婷婷色| 丁香五月区| 97超碰在线免费观看| 色婷婷最新域名 | 国产婷婷色综合AV蜜臀AV| 好好干av| 中文乱子伦视频| 这里只有精品视频一区| 色婷婷五月天不卡| 久久丁香五月婷| 综合性视频99| 色播丁香婷婷五月激情| 婷婷五月天欧美图片在线播放电驴| 777精品久无码人妻蜜桃| 久婷婷五月激情| 7月婷婷六月丁香| 在线视频你懂得| 久久精品五月天| 91精品婷婷国产综合| 99久热精品在线| 性爱网六月丁香| 五月开心色| 妇激情基地| 日本欧特黄色刺激一区影视久精品无码| 精品99*| 日韩av手机在线观看| 婷婷伊人綜合中文字幕小说| 国产高清av黄色看片| AA片在线观看视频在线播放| 天天干天天av天天射| 99热思思| 啪啪 综合网| 99天堂网| 成人无码精品1区2区3区免费看| AA片在线观看视频在线播放| 天天操天天插天天射| 久久色午夜在线导航| 99热在线观看99| 色色九九五月天| 97艹| 婷婷操逼| 深爱婷婷色| 婷婷五月天免费| 欧美色爱五月天| 色色com| 99在线视频播放| 成熟妇人A片免费看网站| 狠狠色狠狠操| 激情五月丁香五月色| 久久婷综合| 吾爱AV导航| 久草a片| 91丁香五月| 婷婷性爱影院| 99热骚货| 天天射影院| 操操碰| 五月丁香综合| 亚洲成人在线观看网址| 9191avse| 五月丁香六月色情网欧美| 色婷婷在线视频综合| 天天爱综合网| 久热伊人| 久久92| 色综合五月天| 丁香五月伊人| 狠狠爱综合网| 五月天激情婷婷丁香| 第四色五月天| 天天爽夜夜操| 狠狠久久婷婷| 九九综合精品| 五月天色婷婷综合| 丁香五月婷婷啪啪| 99re青青草| 91欧美| 中文字幕日韩无码制服诱或| 久操97| 激情综合五月丁香| 欧美婷婷九月| 2025中文在线视频字幕免费观看| 六月丁香五月天| 五月婷婷在线视频| 97婷婷久久丁香| 超碰在线人妻| 精品久久久人妻| 99riAV国产精品视频| 久久在线视频免费观看| 偷拍91九色| 日韩黄黄| www.99婷婷| 久久一级AV| 偷拍91九色| 亚洲综合干| 婷婷五月天国产在线播放| 天天干天天干天天| 偷拍九九五月丁香婷婷| 色五月开心开心五月激情五月| www.五月丁香| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 色婷婷超碰| 亚洲精品久久久久AV无码| 九九久久污| 激情深爱婷婷网| 五月天 无码| 99热精品在线观看| 婷婷狠狠18禁久久| 色婷婷基地| 99热精品在线| 婷婷的99视频网站| 色五月在线观看| 色婷婷成人做爰A片免费看网站| 《久久综合九色综合97婷婷| 五月婷婷在线观看| 成人精品一区日本无码网 | 丁香5月婷婷| 夜夜撸日日操| a九九热www| 婷婷久久六月费| 一级性爱视频| 啪啪99| 婷婷激情五月天小说校园| 五月丁香婷婷综合网| 婷婷性爱视频在线| 九九无码视屏| 国产精产国品一二三在观看| 青草网在线观看| 成人色图情色成人网 www.5b5b5bcom 五月天| 欧洲MV日韩MV国产| 色综合爽| 色婷婷成人丁香| 丁香五月六月| 九九九九无码| 国产精品香蕉| 婷婷五月天A V| 丁香五月天激情婷婷丁香六月 | 丁香五月天影院| 亚洲精品五十一区| 丁香五月电影| 91狠狠综合久久| 天天弄天天操| 亚洲精品成人片在线播| 狠狠色综合精品视频在线| 色九九综合色| 99.色| 五月丁香综合| 五月天婷婷黄色视频| 超碰成人在线观看| 五月婷婷人人人操| www.久久久久久久| 国产.亚洲.欧洲视频在线| 国产在这里只有精品| 91综合网| 天天日天天插| 97久久人人| 亚洲成人免费电影| 99性视频| 99在线小视频| 97色色色色| 色欲天天综合网| 日本精品99| 五月天综合激情网| 久久六月天| 熟女激情网| 五月婷婷婷综合网| 精品国产va久久久久| www.婷婷| 丁香综合婷婷开心激情网| 99热老司机| 色色色在线| 99干日本| 青青操丝袜美腿| 色五月播五月| 另类视频在线| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 久草性爱| 天天肏屄夜夜爽| 免费观看全黄做爰的视频| 激情五月天小说视频| 丁香亚洲色综合| 五月婷婷成人| 婷婷激情伍月网| 少妇被躁爽到高潮无码文 | 综合久久婷婷| 欧美成人网婷婷综合在线| av在线免费播放观看| 思思热视频在线| 五月天婷婷影院| 欧洲色| 日日狠狠久久偷偷四色综合免费| 久久久.COM| 天天综合精品| 五月婷婷综合久久| 97人人干人人操| 最近中文字幕在线中文视频| www.99热视频| 婷婷 久综合| 精品爱欲五| 九九热最新视频| 天天爽在线视频| 9久热精品在线视频| www.henhengan| 九月婷婷久久| 五月天基地| 欧美日比视频| 日本强伦片中文字幕免费看| 日日干日日| 亚洲视频码| 大胆伊人久久| 婷婷五月成人| 五月开心深深爱激情综合 | 色综合色色色色色| 秋霞成人毛片一级A片| 丁香五月天激情综合| 99热在线免费观看精品| 婷婷五月电影| 四虎婷婷五月天| 久久婷婷的综合色丁香五月| 亚洲综合色网| 天天操夜夜橾| 色五月成人婷婷| 久久38视频| 久久99久久99精品免视看婷婷| 色高清无码视频| 亚洲超级碰| 天天操夜夜操| 久久免费操| 婷婷丁香五月天综合网| 99热丁香五月| 国产免费性爱| 91chinese在线| 色婷婷九月| 欧美日韩91| 91九九九色在| 五月天激情小说| 色香欲综合| 青青草搞屄视频网站| 九九99九九99偷拍视频免费看| 欧美在线骚货| 欧美人久久| 激情性爱五月天网页| 日韩成人AV在线| 思思久久青草热| 日韩色色色色色| 久久伊人婷| 被男人添B超爽视频| 天天综合五月天| 天天操天天谢| 中文字幕婷婷五月天| 大胆伊人久久| 七月丁香婷婷 色色| 26uuu在线观看| 五月天激情小说欧美激情| 热这里只有精| 色婷婷久久综合| 国产女人十八水真多1| 免费AV播放| www.久久爱.com| 五月丁香黄色| 婷婷五月天激情在线观看| 99九九在线精品热动漫| 综合激情九月婷婷,激情综合婷婷中文字| 日本九九九九| 五月婷婷色色| 久久人人九九| 99色视频| 夜夜操天天干| 99综合激情久久精品久久| 婷婷五月天成人娱乐| 九九re精品视频在线观看| 亚洲视频另类| 天天干天天av天天射| 丁香六月婷| 色婷婷久久| 久色大| 色婷婷五月天天天干天天操天天爽| .操區COm| 99热这里在线精品| 免费无码毛片一区二区A片| 婷婷五月综合网| 99色网站| 五月色影院| 狠狠色精品综合| 婷婷五月开心中文字幕色| 婷婷成人综合| 五月丁香六月婷综合成人综合 | 99视频内射三四| 亚洲天堂大香蕉| 五月激情婷婷国产精品久久久久久| 婷婷丁香五月天中文字幕| 天天操夜夜夜拍拍拍| 久久99激情| 亚洲小视频免费看| 欧美色狠婷久| 乱女乱妇熟女熟妇综合网站| 激情综合4月| 日韩欧美五月丁综合| 五月丁香啪啪网| 色丁香久久| 中文字幕综合网| AV在线观看网站| 欧美五月婷婷| 99热最新| 色色精品色| 激情五月深爱五月观看| 激情六月丁香综合| 五月人人丁香婷婷五月人人丁香| 婷婷国产日本欧美| 亚洲色婷婷网站| 丁香五月激情综合网激情五月| 色婷婷视频| 国产永久一二一起草| 婷婷色女| 婷色成人| 国产精品久久久久久五月天加勒比| 99热这里只是精品| 五月天婷婷丁香社区| 久久丁香五月婷| 丁香六月情| 五月婷婷六月情| 在线观看婷婷5月| 婷婷激情性爱| 五月天色婷婷综合| WWW.国产| 日韩AC在线免费观看| 亚洲成人综合网在线免费观看| 丁香五月天堂亚洲社区| av操一操| 婷婷色五月激情| anquye伊人| 色婷婷成人影片| 天天模,夜夜模夜夜爽| 五月综合精品| 天天日天天插| 操一操干一干| 9久久狠狠的| 婷婷五月天最新网址| 99热99| 玖玖爱综合网| 五月天六月天| 婷婷色正月| 久久与婷婷| 婷婷五月激情中文字幕| 亚洲综合色婷| 大香蕉五月| 色优久久| 极品五月天| 五月婷婷丁香五月 | 伊人春天av| 日韩av大全| 激情五月婷婷开心网| WWW.99热| 尤物一区二区| 欧美成人日韩| 人妻性爱| 丁香久久| 天天舔天天爽| 五月丁香激情综合网官网| 激情啪啪五月| 婷婷深爱五月天在线| 五月天色婷婷激情| 久热这里只有精品6| 午夜天天精品视频| 亚洲色图五月丁香| 人妻久久久久久久久妻久久久久| 九九在线精品| 午夜婷婷| 9999热在线观看| 亚洲综合视频天天精品| 天天爽天天日天天舔| 67194成I人在线观看线路1| 成人免费120分钟啪啪| 成年视频免费观看| site:minyis.com| 激情文学五月丁香六月婷婷| www.夜夜操| 五月激情久久| 天天肏屄夜夜爽| 欧美婷婷成人| 国产99久久久国产精品免费看| 99色在线视频观看| 激情五月天婷婷久久久久久久久久久| 五月草视频| www.色五月| 国产亚洲色婷婷久久99精品9j| 亚洲五月天综合色| 欧美精品18| 婷婷爱五月| 免费看成人747474九号视频在线观看| 婷婷丁香人妻| 五月丁香免费视频| 在线播放 精品| 久久久这里都是精品| 色婷久| 亚洲五月婷婷在线| 碰碰女| 日本eVa一区=区视频| 性欧美日本| 亚洲丁香五月在线观看| 九色视频91| 久久婷婷五月综合啪| 五月激情婷婷色| 91婷婷在线| 丁香五月桃花在线激情综合| 人人操Av| 97视频久久| 久久久.www| 激情99热| 久久久com| 成人午夜在线视频| 日韩激情人伦人| 激情伊人五月天| 久久综合播放| 五月丁香在线婷婷美女| 免费视频无码| 狠狠搞五月天| 婷婷五月综合社区| 亚洲视频1区| 色婷婷五月网| 九九碰九九爱97| 久久激情五月婷婷| 九九热在线观看视频| 五月婷A V在线| 色七色九九| 激情视频网址| 亚洲无码11| 婷婷五月色播放| 五月天婷a在线| 99热成人精品| 色婷婷色99国产综合精品| 人妻aV在线| 可以看的AV| 婷婷五月天av小说| 亚洲人妻一区二区 | 日韩一本操| 天天搽天天射| 婷香五月激情视频| 婷婷色在线观看| 色婷婷五月天成人网| 色婷狠狠| 婷婷六月五月天综合| 婷婷在线中文字幕| 天天摸日日舔狠狠添婷婷婷| 成人综合网站| 天天网站天天爽| 五月婷婷综合视频| 五月六月播婷婷| 婷婷五月天AV| 色激情综合| 538任你爽| 91碰在线| 欧美人人操| 五月激情婷婷综合| 超碰色色综合| 中文资源在线a| 人人九色| 成人在线不卡| 91九九| 超碰成人免费| 久久久精品人妻| 色色综合色视频| 久久婷婷亚洲| 婷婷六月色丁香视频在线观看| 丁香婷婷久久 | AVV黄| 99在线免费观看| 日本色久| 97色久| 五月丁香婷婷中文| 亚洲精品婷婷| 99精品视频在线免费观看| 人妻久久久久久| 提提热五月天婷婷| 久久R激情| 天天夜夜操| 色原狠狠综合| 日韩综合久| 91操片| 激情五月天综合| 丁香激惜男女| 人妻熟女一区二区AV| 丁香五月色情| 卡视频1区2区| 9久热在线视频精品| 粉嫩av蜜桃av蜜臀av| 婷婷丁香18| 丁香五月婷婷六月婷| 黄色国久久| 深爱激情五月婷婷| 日韩日比视频| 五月丁香在线观看| 五月婷婷开心激情六月蜜桃| 校园春色亚洲色| 色综合色综合色综合色综合| 91九色无码日韩 | 夜夜干夜夜操| 天天综合情| www激情| 影音先锋噜一噜| 极品另类| 婷婷激情区| AA片在线观看视频在线播放| 开心综合激情综合| 久久婷婷综合拍| 精品久久久999| 五月天激情小说| 欧美日韩国产一二区| 成人做爰A片免费看视频| 色5月婷婷| 天天射影院| 五月婷婷免费看| 婷婷狠狠五月综合| 思思久久精品视频| 丁香五月情色| 超碰九九热| 日韩国产在线免费观看| 99精品丰满| 99燥99日| 国产高潮A片羞羞视频涩涩| 婷婷性爱| 91热在线| 欧美99视频| 五月婷婷之婷婷| 婷婷五月丁香网| 国产片色| 四虎婷婷五月天| 丁香色情五月天| 色婷婷狠狠| 激情四射网| 久久9久久| 色婷婷影| 91久久免费| 99久高清视频| 69人人操人人爽| 亚洲欧洲美女在线观| 婷婷无五月无码视频| 久久精品99国产精品日本| 亚洲操逼网| 天堂A∨在线| 婷婷五月天色色| 六月婷婷八月丁香| 亚洲情a| 色婷婷在线视频久| 丁香五月天天哦| 五月婷成人| 噜噜噜狠狠色综合| 我爱大香蕉| 激情五月天色网站| 国产成人av在线播放| 婷婷97碰碰| 91超碰在线播放| 久久久香| 久久ww| www.激情.com.| 婷婷丁香五月天综合AV| 久久久久久久丁香五月天婷婷| 色五月色五天色情网| 九九热av| 99re在线视频精品,这里只有精品18,| www.99热| 五月天婷婷三级黄| 99区视频| 天天日夜夜草进麻麻的子宫| 99热这里只有精品33| 婷婷开心综合人妻小说网址| 久99久热只有精品国产99| 艹| 99热只有这里才是精品| 婷婷五月天激情丁香| 婷婷久久草| 狠狠色噜噜狠狠狠888| 另类图片五月天| 中文字幕,综合,91| 五月丁香网中文字幕| 激情综合网,五月| 色婷婷五月网| 蜜桃五月天| 日本va欧美va欧美精品88| 六月婷婷八月丁香| 噜噜干日本| 日日干天天| 99精品偷自拍| 国产精女同一区二区三区久| 久久婷婷五月综合网| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 综合丁香婷婷五月天| 婷婷五月天中文字幕.| 桃色Av色哟哟| 爱爱色五月天| 丁香六月婷婷综合麻豆| 99热这里只有精品69| 亚洲色色色色| 丁香月六月| 丁香五月激情婷婷婷婷在线观看| 999热这里只有精品| 五月天婷婷成人网| 182TV大香蕉| 亚洲欧美婷婷五月色综合| 婷婷伊人綜合中文字幕| 五月综合久久| AA片在线观看视频在线播放| 欧美性生交xXxX久久久| 人人操人人妻| 五月丁香视频色色| 熟女网站久久| 丁香五月天导航| 亚洲色色图片| 26UUU精品一区二区Com| 五月激情偷拍| 在线成人视频免费| 人妻中文在线| 天天爽天天操| 91久久日日| 91人人妻人人操人人爽| 操人精品| 丁香六月婷婷久久综合| 日韩按摩二区| 天天爽天天| 色五月综合在线| 国产操碰| 婷婷五月天av网| 米奇影视资源777狠狠色婷婷五月天激情网| 五月天啪啪| 丁香色婷婷| 99久久99综合| www.日本91| 色色色色色色色综合| 欧美人人草| 色婷婷av在线观看| 五月天丁香色色| 欧美啪啪9| 丁香五月日啪| 夜夜谢天天干| 久久色情| 99热这里只有精品33| 99热66| 亚洲日日操| 青草青草视频2免费观看| 国产亚洲成AV人片在线| 婷婷成人网五月天| 色欲天天综合| 欧美日韩成人| 久久婷五月影院| 中文字幕婷婷| 天天天天做夜夜夜夜做| 丁香六月色婷婷| 中文成人在线| 99手机在线精品视频| 天天 日综合| 天天在线XXX| 婷婷五月色| 五月天丁香婷婷社区| 99热6这里之有精品| 狠狠干五月天| 五月激情小说| 婷婷玖玖五月天| 九九九午夜影院成人| 中文色婷婷| 久久您您综合网| 91超级碰碰碰| 天天草比天天爽| 人妻AV在线| 热热99爱爱| 五月丁香啪啪激情| 天天天天操| 婷婷五月天基地| 六月婷婷AV| 婷婷五月综合婷婷| 婷婷五月天成人小说| 一起草AV| 超碰在线免费观看3 9| 狼人狠狠操| 五月丁香六月合| 婷婷久久99| 日韩黄色影院| 五月丁香色| 中文不卡一二区| 亚洲人妻AV| 91呦呦呦| 淫荡家庭AV| 99亚洲精品视频| 成人精品在线观看| 91精品久久久久久| 五月丁香激情综合网官网| 深爱激情综合网| www.婷婷五月天.com| 亚洲精品V天堂中文字幕| 色色丁香婷婷| 丁香六月婷婷综合缴| 91肏肏肏| 久久欧洲久久| 亚洲综合草草| www99xxxx五月丁| 色色aⅤ網| 桃色五月天| 色五月色图| 激情五月,色播五月| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 99在线精品免费视频| 第九色区av天堂| 五月婷婷激情网| av性爱在线| 亚洲妇女熟BBW| 婷婷亚洲日本| 91热视频色网站| 激情五月瑟瑟| 日本不卡五月婷婷丁香| 国产亚洲精品久久久久久郑州| 91在线日| 先锋资源91| www.刺激色网站www.| 伊人午夜综合色啪| 国产69久久久欧美黑人A片| 欧美婷婷六月丁香综合色| 婷婷丁香花五月天| 影音先锋偷偷色男人站| 婷婷六月天亚州| 99操碰| 91精品国产99久久久久久天美| 五月天色婷婷伊人网| 99亚洲精品| 五月婷婷婷| 久久久久人妻精选| .精品久久久麻豆国产精品| 激情综合无码| 精品人妻伦一二三区久久| 精品九九九久| 99成人网站| se99视频| 婷婷综合视频| 五月丁香偷拍| 久久婷婷网址| 亚洲精品小视频| 91性高潮久久久久久久久| 92久久| 99∨VTV| 中文字幕久久婷九女同| 亚洲人成人五月天| A片天天| 五月天开心网| aaa久久久| 天天草天天日| 99综合五月免费视频色婷婷| 婷婷五月丁香色情| 久九男女天堂| 九九热在这里只有精品| 桃色五月婷婷| 综合色色婷婷| 高清a片基地| 狠狠色噜噜狠狠| 久久久亚洲成人无码A片| 骚货艹网站视频| 一级黄色片看看| 五月草影视| 97偷拍对白视频| 国产精品色婷婷AV综合色色| 91丨九色丨国产打屁股网站| 婷婷五月情天| 婷婷伊人五月丁香天堂网| 色色色无码| 五月天基地| 丁香六月激情| 婷婷少妇激情| 91中文在线| 久久婷婷五月国产色综合激情| 91丨九色丨大屁股| 丁香五月婷婷成人色区| 婷婷99狠狠躁天天久久久九九九| 五月丁香欧美| 变态另类色图| 丁香美女五月天婷婷| 丁香六月婷| 九九九九国产| 五月丁香爱婷婷深深| 99这里有精品视频| 人人摸人人射| 天堂呦 呦百度搜索-百度搜索| 五月丁香激情深爱婷婷| 婷婷不卡基地| 丁香五月婷婷五月天| 五月婷婷中文字幕| 99热精品无码| 五月婷婷色综图片| 激情婷婷五月丁香啪啪啪| 色色网站免费| 激情啪啪五月| 亚洲热热视频| 婷婷五月天综合蜜桃| 狠狠一日| 伊人在线视频| 久久久8| 人人操AV| 久久精品女人天堂AAA| 天天操夜夜操| 天天搡日日搡aaaaⅩ| 操操啪| 五月天激情综合网站| 精品夜夜澡人妻无码AV| 男女99免费视频| 91精品久久久久久77777| 丁香五月激情婷婷视频| 婷婷99狠狠| 99色热视频| 五月色婷丁香| 欧美丁香五月| 99性视频| 婷婷五月天伊人| 丁香五月综合在线播放 | 久久久精品人妻| 99精品视频在线免费观看| 欧美成人一区二区三区在线视频| 色婷婷五月天综合网| 五月婷婷丁香综合,亚洲天堂| 激情五月天视频| YJLZZJLZZ亚洲乱熟无码| 婷婷五月天成人网| 开心激情网五月| 日本一级特黄大片AAAAA级| 婷婷久久五月| 激情五月婷婷综合色播小说| 玖玖激情五月天| 欧洲色区| 舔色婷婷| 色狠狠色| 婷婷五月天VI| 97在线刺激| 婷婷舔| 91pornav在线| 激情小说五月天| 五月婷婷无码| 狠狠色丁香| av网站免费在线| 国产成人网站在线观看| 2025天天爽天天摸| 激情啪啪五月| 丰满少妇猛烈A片免费看观看| 五月丁香偷拍| 六月丁婷婷| 婷婷六月色情| 丁香六月激情| 色五月欧美| 在线视频色五月| 五月天丁香看婷婷| 丁香五月在线| www、色色色| 婷婷放心五日爱| 欲色人妻| 九九热在线精品视频| 激情内射p| 婷婷激情五月天网站| 久久9热综合| 九九热视频在线观看| 这里只有精品在线视频在线观看| 激情五月天婷婷激情| 一区二区三区四区牛| www99热| 99这里都是精品| 五月丁香六月婷婷亚洲激情综合| 91在线日本| 九九视频在线观看视频6| 日韩成人AV在线播放| 五月婷婷色吧!| 色婷婷免费观看| 蜜臀av 粉嫩av 懂色av| 久久亚洲婷婷| 思思热AV| 日本va网站| 五月婷六月| 任你弄在线视频免费| 色色色综合色| 橾逼网| 五月天婷婷色播| 久久伊人婷婷| 五月天综合色| 日韩成人综合网| 丁香五月av| 成人AV中文字幕| α久久| 五月丁香啪啪| 十区AV| AV成人在线网站| www.色五月| 五月天综合在线观看视频| 五月婷婷综合色拍| 国产日产成人亚洲欧美国产VA| 一起操 91N.com| 免费看欧美成人A片无码| 日韩欧美一级大黄网站| 亚洲最大视频| 亚州视频九九99| 只有精品视频在线观看| 在线观看免费狠狠色丁香香综合| www.91热久久| 99这里都是精品| 五月婷婷欧美| 丁香午夜天| 精品久久久久久久久久久久人妻| 久久九九怡红院| 久久 婷婷 五月天| 毛片蕉地一二| 五月天丁香婷婷久久九| 久久99综合| 99碰超| 色色国产| 日日日日操| 青青草六月丁香| 六月欧美综合色情| 色综合九九| 91九色精品| 区啪精品| 99热热热天天人人人超超碰| 激情丁香五月| 色五月激情五月| 影音先锋噜一噜| 五月婷婷视频| 99热这里只有精品18| 婷婷婷五月天最新综合你懂的| 另类五月婷婷| 亚洲国产婷婷色五月| 五月天丁香网站| 超碰人人99| 国产操逼网站| 天天操天天插天天射| 五月丁香婷婷欧美色图视频五月丁香777电影 | 久久只有精品| 激情五月天久久丁香| 九色91国产| 欧美99视频| 嫩草视频观看| 人人看人人97| 丁香五月婷婷高清| 成人国产网| 久久综合五月天激情小说网站| 青草青草视频2免费观看| 亚洲色婷婷| 久久久久9999| 丁香五月综合| 51国精产品自偷自偷综合| 久久激情视频| 丁香五月欧美激情| 欧美综合五月丁香六月婷| 天天综合五月天| 综合网啪| 天天操天天插| 色99色| 五月婷婷六月天| 深爱激情综合| 久久精彩视频| www.婷婷五月天| 色五婷婷开心缴| 婷婷无码五月天| 日欧大屏操| 天天色噜| 97碰碰视频| 97色色综合| 欧美视频五区| 色五月91| 五月丁香大香蕉| 色婷婷婷婷| 五月综合色| 五月天综合| 日日做A爰片久久毛片A片英语 | 激情四射五月天| 久久人妻视频| 无码激情AAAAA片-区区| JAPANRCEP老熟妇乱子伦视频| 狠狠情色| 大香蕉人妻| 久99热| 97婷婷五月天| 色五月视频,小说| 亚洲色亚洲精品| 国产精品香蕉| 日本五月婷| 可以免费观看的av| 久久伦乱| 久草天堂| 人人操AV| 无码AV免费精品一区二区三区| 天天色天天操天天射| 蒲京久久无码视频| 99热在线网站| 97资源碰碰在线| 国产成人AV在线| 亚洲小视频免费看| 久久五月网| 欧美成人精品一区二区| 五月激情婷婷丁香| 五月天婷婷伊人| 五月婷婷色| 国产乱子轮XXX农村| 春色激情| 狠狠色丁香婷婷| 一级性感黄色内射视频| 亚洲国产色婷婷|