欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Spring事務(wù)失效的7個坑與底層原理:從JDBC到分布式事務(wù)

Spring事務(wù)失效的7個坑與底層原理:從JDBC到分布式事務(wù) 1. 事務(wù)失效的七宗罪我踩過的坑你大概率也會踩先講個真實事故。幾年前我維護過一個電商訂單系統(tǒng)線上出了一個詭異的bug用戶支付成功后訂單狀態(tài)正常更新但庫存卻莫名其妙多扣了一次。代碼看起來完全沒問題——service方法上明明白白標著Transactional數(shù)據(jù)庫也確認是InnoDB。查了兩天才定位到根因同一個類里方法A調(diào)用方法BB的事務(wù)注解根本沒生效。這就是Spring事務(wù)最經(jīng)典的坑之一自調(diào)用繞過代理。Transactional依賴AOP代理生效而Spring的代理機制決定了一個類內(nèi)部的方法調(diào)用是不會經(jīng)過代理對象的。this.orderService.update()拿到的這個this根本不是Spring容器里那個被代理過的bean而是原始對象。原始對象上的注解Spring根本看不見。結(jié)果就是你以為開啟了事務(wù)實際上沒有。庫存扣減在無事務(wù)狀態(tài)下執(zhí)行訂單那邊一旦報錯回滾庫存早就提交了。1.1 自調(diào)用問題最隱蔽的事務(wù)殺手自調(diào)用這個坑的隱蔽之處在于它不會報錯不會警告日志里什么都看不出來只有數(shù)據(jù)對不上賬的時候才會暴露。Service public class OrderService { Transactional public void createOrder(OrderDTO dto) { // 扣庫存 stockService.deduct(dto.getSkuId(), dto.getQuantity()); // 插入訂單 orderMapper.insert(buildOrder(dto)); // 這里調(diào)用了自身方法事務(wù)注解失效 this.sendNotification(dto); } Transactional(propagation Propagation.REQUIRES_NEW) public void sendNotification(OrderDTO dto) { // 通知邏輯 } }上面這段代碼里sendNotification的REQUIRES_NEW完全無效。因為this.sendNotification()走的是原始對象不是代理。解決辦法有三個把需要事務(wù)的方法挪到另一個Service類——最推薦職責也最清晰。注入自身代理Autowired private OrderService self;然后調(diào)用self.sendNotification()。使用AopContext.currentProxy()需要開啟EnableAspectJAutoProxy(exposeProxy true)然后((OrderService) AopContext.currentProxy()).sendNotification()。方案2最實用但要注意循環(huán)依賴問題——Spring 4.3之后字段注入的循環(huán)依賴是允許的但構(gòu)造器注入就不行。方案3代碼看著別扭但確實有效。1.2 非public方法注解白寫了Transactional用在private或者protected方法上Spring容器啟動時根本不報錯但方法執(zhí)行時事務(wù)就是沒開。原理不復(fù)雜Spring AOP生成代理的時候JDK動態(tài)代理基于接口只代理public方法CGLIB雖然能代理非public方法但Spring官方明確說了Transactional只支持public方法。最騷的是如果你把Transactional放在public方法上、但里面調(diào)用了private方法private方法里的事務(wù)注解同樣無效——因為事務(wù)邊界已經(jīng)在public方法的代理上確定了內(nèi)層調(diào)用不會再開啟新事務(wù)除非傳播行為是REQUIRES_NEW。我見過不少項目把Transactional加到private方法上然后一臉疑惑地說為什么回滾了沒生效。排查方法很簡單看日志里有沒有TransactionInterceptor的getTransaction記錄沒有就是代理沒走。1.3 異常被吞回滾了個寂寞這是最常見也最無語的一種。Java的檢查型異常checked exception默認不會觸發(fā)Spring事務(wù)回滾但很多人不知道這一點隨手寫了個throws Exception然后事務(wù)就失效了。Transactional public void transfer(Account from, Account to, BigDecimal amount) throws Exception { accountMapper.decrease(from.getId(), amount); accountMapper.increase(to.getId(), amount); // 業(yè)務(wù)校驗不通過拋了個業(yè)務(wù)異常 throw new BizException(余額不足); }BizException如果是繼承Exception而不是RuntimeException上面這個事務(wù)不會回滾錢就憑空消失了。Spring的默認回滾策略是只回滾RuntimeException和Error。檢查型異常如IOException不會觸發(fā)回滾因為Spring認為你既然顯式聲明了這個異常說明你可以處理它事務(wù)繼續(xù)提交是合理的。解決方案兩個方向業(yè)務(wù)異常統(tǒng)一繼承RuntimeException——大多數(shù)項目的做法最簡單。在Transactional上顯式指定Transactional(rollbackFor Exception.class)——最穩(wěn)一勞永逸。我個人的習(xí)慣是兩者都做自定義業(yè)務(wù)異常繼承RuntimeException同時在Transactional上寫rollbackFor Exception.class。雖然看起來冗余但團隊里總有人會寫檢查型異常。1.4 多線程子線程異常主線程事務(wù)照樣提交Transactional的事務(wù)上下文存在ThreadLocal里子線程拿不到父線程的事務(wù)上下文。Transactional public void batchProcess(ListOrder orders) { orders.parallelStream().forEach(order - { // 這里拋異常父線程事務(wù)不會感知 processOne(order); }); }如果一定要在多線程里用事務(wù)只能每個線程自己開事務(wù)用TransactionTemplate包住子線程的任務(wù)代碼然后在線程池層面做異常聚合——子線程里有任何失敗主線程如何決定是否整體回滾需要自己實現(xiàn)協(xié)調(diào)邏輯。這個問題在批量導(dǎo)入、報表生成、定時任務(wù)場景里非常常見。我的建議是批量任務(wù)盡量不用Transactional包整段而是每條或每批用TransactionTemplate單獨開事務(wù)配合失敗記錄表做補償。這樣既能保證數(shù)據(jù)一致又不會因為一個線程失敗導(dǎo)致大批量回滾。1.5 數(shù)據(jù)庫引擎不支持事務(wù)這個坑現(xiàn)在少了但老項目中還能見到。MySQL的MyISAM引擎根本不支持事務(wù)你注解標得再多也沒用。確認方法很簡單SHOW TABLE STATUS WHERE Name your_table;看Engine字段InnoDB支持事務(wù)MyISAM不支持。另外如果表是MyISAMSpring事務(wù)管理器初始化時也不報錯執(zhí)行時DataSourceTransactionManager還是會調(diào)setAutoCommit(false)但引擎層面不認等于白忙。1.6 final類或final方法CGLIB也救不了Spring事務(wù)默認用AOP代理。如果目標類配置了JDK動態(tài)代理基于接口那沒問題如果走CGLIB基于類繼承生成子類那么final類無法被繼承final方法無法被重寫代理自然失效。Spring Boot 2.x之后默認proxyTargetClasstrue走CGLIBfinal問題就浮出水面了。很多人把service類寫成final為了防繼承結(jié)果事務(wù)全失效。排查方法啟動時看日志里是JdkDynamicAopProxy還是CglibAopProxy再看你的類和方法有沒有final修飾符。1.7 事務(wù)管理器沒配置或配置錯了Spring Boot的DataSourceAutoConfiguration會自動配置DataSourceTransactionManager但你如果引入了多數(shù)據(jù)源或者自定義了DataSource而沒有配套注冊PlatformTransactionManager那Transactional就會失效。另外EnableTransactionManagement注解在Spring Boot里默認開啟不需要你重復(fù)添加。但如果你用了Spring MVC非Boot項目忘了加EnableTransactionManagement事務(wù)也會靜默失效。排查清單很簡單Transactional方法執(zhí)行的線程棧里有沒有TransactionInterceptor有就是代理生效了沒有就是代理沒生效。2. Spring事務(wù)的底層運作機制從JDBC到動態(tài)代理很多人用Transactional用了好幾年但完全不知道它背后發(fā)生了什么。面試被問Spring事務(wù)是怎么實現(xiàn)的只會答AOP兩個字就再也說不出更多了。其實底層鏈路沒那么玄拆開看就三層JDBC的事務(wù)能力、Spring的事務(wù)抽象、AOP的代理包裝。2.1 第一層JDBC的事務(wù)基石萬事萬物都離不開JDBC。Spring事務(wù)再花哨落到底層就是這三行代碼Connection conn dataSource.getConnection(); conn.setAutoCommit(false); // 關(guān)閉自動提交 conn.commit(); // 提交 conn.rollback(); // 回滾setAutoCommit(false)的意思是之后的SQL不會立即生效必須等commit()才真正寫入數(shù)據(jù)庫MySQL的binlog和redolog層面是另一套機制。如果中途異常調(diào)用rollback()之前的所有操作全部撤銷。所以Spring事務(wù)的本質(zhì)就是幫你管理Connection在合適的時機調(diào)用commit或rollback。就這么簡單。2.2 第二層PlatformTransactionManager抽象Spring抽象了一個接口——PlatformTransactionManager核心方法就三個public interface PlatformTransactionManager { TransactionStatus getTransaction(TransactionDefinition definition); void commit(TransactionStatus status); void rollback(TransactionStatus status); }getTransaction獲取或創(chuàng)建事務(wù)。注意這里的措辭——如果你已經(jīng)在事務(wù)里根據(jù)傳播行為決定是復(fù)用當前事務(wù)還是掛起后新建。commit提交事務(wù)。但提交前會檢查TransactionStatus里的rollbackOnly標記如果之前有人標記了只回滾這里會拋UnexpectedRollbackException。rollback回滾事務(wù)。常用的實現(xiàn)是DataSourceTransactionManager針對Hibernate有HibernateTransactionManager針對JPA有JpaTransactionManager。DataSourceTransactionManager的doBegin方法做了幾件事從DataSource拿一個Connection。如果當前Connection是自動提交模式關(guān)閉它并記下來方便事務(wù)結(jié)束恢復(fù)。設(shè)置隔離級別如果TransactionDefinition指定了。設(shè)置只讀標志readOnlytrue會走Connection.setReadOnly對MySQL的InnoDB來說這能優(yōu)化一些查詢路徑。把這個Connection綁定到TransactionSynchronizationManager的ThreadLocal里。后面的DAO操作拿到的Connection就是從TransactionSynchronizationManager里取的。這就是同一個事務(wù)里所有SQL共用同一個數(shù)據(jù)庫連接的原理——ThreadLocal綁定。2.3 第三層AOP代理的切入點Spring事務(wù)的AOP基于TransactionInterceptor它實現(xiàn)了MethodInterceptor攔截所有被Transactional標記的方法。調(diào)用鏈是這樣的外部調(diào)用orderService.createOrder()實際調(diào)用的是代理對象的方法。TransactionInterceptor.invoke()被觸發(fā)先調(diào)用TransactionAspectSupport的createTransactionIfNecessary。根據(jù)Transactional上的配置傳播行為、隔離級別、超時等調(diào)用PlatformTransactionManager.getTransaction()。執(zhí)行業(yè)務(wù)方法。方法正常返回提交事務(wù)方法拋異常根據(jù)rollbackFor配置決定是否回滾。清理ThreadLocal中的連接恢復(fù)自動提交狀態(tài)。所以Transactional加在哪個方法上代理就攔哪個方法——事務(wù)邊界就是方法邊界。方法跑多久事務(wù)就開多久。2.4 只讀事務(wù)與UnexpectedRollbackException的真相熱詞里有一條UnexpectedRollbackException: transaction rolled back because it has been marked as rollback-only這是個非常經(jīng)典的問題。場景是這樣的方法A開啟事務(wù)調(diào)用方法BB標記了rollback-onlytrue比如B捕獲了異常但內(nèi)部回滾邏輯已運行。然后A繼續(xù)執(zhí)行正常返回時調(diào)用commit()此時Spring發(fā)現(xiàn)事務(wù)被標記為rollback-only直接拋UnexpectedRollbackException事務(wù)回滾。換句話說你代碼里沒拋異常但事務(wù)已經(jīng)注定要回滾了。這經(jīng)常出現(xiàn)在try-catch吃了異常但沒重新拋出的情況下。排查時看日志里有沒有Transaction rolled back because it has been marked as rollback-only的WARN告警跟著調(diào)用棧就能找到是哪個方法把事務(wù)標記了。3. 事務(wù)傳播行為與隔離級別什么時候用哪個別背口訣網(wǎng)上關(guān)于傳播行為的口訣一大堆什么REQUIRED默認用REQUIRES_NEW記日志NESTED做嵌套背下來容易用對難。我把這幾個傳播行為逐個講透配上真實場景你就能理解了。3.1 傳播行為詳解Spring定義了7種傳播行為大部分項目用到的不超過4種但理解每一種的原理仍然重要。傳播行為含義典型場景REQUIRED有事務(wù)就復(fù)用沒有就新建默認值99%的場景用它SUPPORTS有事務(wù)就加入沒有就無事務(wù)執(zhí)行查詢方法可選MANDATORY必須在事務(wù)中執(zhí)行否則拋異常強制事務(wù)的方法REQUIRES_NEW掛起當前事務(wù)永遠新建一個寫日志、異步通知NOT_SUPPORTED掛起當前事務(wù)以無事務(wù)方式執(zhí)行導(dǎo)出大數(shù)據(jù)量文件NEVER如果有事務(wù)就拋異常強制無事務(wù)的執(zhí)行NESTED嵌套事務(wù)基于保存點Savepoint大批量循環(huán)處理單條失敗不影響整體REQUIRED是默認值理解起來很簡單Spring檢查當前ThreadLocal里有沒有綁定事務(wù)有就加入沒有就新建一個。注意加入意味著共用一個事務(wù)、一個Connection、一套commit/rollback。內(nèi)層方法拋異?;貪L外層也一起回滾。REQUIRES_NEW的核心是掛起。邏輯是從TransactionSynchronizationManager里把當前事務(wù)的Connection解綁、掛起然后新建一個完全獨立的事務(wù)持有獨立的Connection。內(nèi)層事務(wù)提交/回滾不影響外層事務(wù)。外層事務(wù)回滾內(nèi)層已經(jīng)提交的數(shù)據(jù)不會跟著回滾。典型場景就是操作日志業(yè)務(wù)方法開啟事務(wù)日志記錄要獨立提交——不管業(yè)務(wù)成功還是失敗日志都要寫進去。如果你用REQUIRED業(yè)務(wù)回滾時日志也跟著回滾那排查問題的時候就看不到錯誤日志了。NESTED跟REQUIRES_NEW的區(qū)別要講清楚。REQUIRES_NEW是物理事務(wù)獨立的Connection、獨立的commit/rollbackNESTED是邏輯事務(wù)基于Savepoint保存點。內(nèi)層方法失敗回滾到保存點外層可以繼續(xù)執(zhí)行外層最終提交時一起提交所有保存點之前的操作。但注意NESTED需要底層數(shù)據(jù)庫支持保存點。MySQL的InnoDB支持但有些數(shù)據(jù)庫不支持且JpaTransactionManager對NESTED的支持有限。實際項目中能用REQUIRES_NEW解決的就別用NESTED少踩坑。3.2 隔離級別臟讀、不可重復(fù)讀、幻讀Spring事務(wù)隔離級別有五種對應(yīng)JDBC的隔離級別隔離級別臟讀不可重復(fù)讀幻讀說明DEFAULT---使用數(shù)據(jù)庫默認MySQL默認REPEATABLE_READREAD_UNCOMMITTED會會會讀未提交不推薦READ_COMMITTED不會會會Oracle默認REPEATABLE_READ不會不會會MySQL InnoDB下不會MySQL默認SERIALIZABLE不會不會不會串行化性能最差臟讀讀到別的事務(wù)未提交的數(shù)據(jù)。不可重復(fù)讀同一事務(wù)內(nèi)兩次讀取同一數(shù)據(jù)結(jié)果不一樣因為別的事務(wù)提交了更新。幻讀同一事務(wù)內(nèi)兩次查詢返回的記錄數(shù)不一樣因為別的事務(wù)插入了新記錄。MySQL的InnoDB在REPEATABLE_READ級別下通過MVCC多版本并發(fā)控制 Gap Lock間隙鎖實際上消除了幻讀問題。所以MySQL默認的REPEATABLE_READ比Oracle的READ_COMMITTED在某些場景下更嚴格。實際項目中我見過很多團隊把隔離級別統(tǒng)一設(shè)成READ_COMMITTED理由是MySQL的RR有間隙鎖并發(fā)插入容易死鎖。這個說法有一定道理但不是絕對的。如果你的系統(tǒng)沒有復(fù)雜的范圍查詢并發(fā)插入場景RR不會成為瓶頸如果你確實遇到死鎖頻繁再降級也不遲。3.3 事務(wù)超時與回滾策略Transactional(timeout 5)表示事務(wù)最多執(zhí)行5秒超時則強制回滾。底層實現(xiàn)是JDBC的Connection.setNetworkTimeout或者由Spring在每次SQL執(zhí)行前檢查時間不同實現(xiàn)有差異。但要注意timeout是從事務(wù)開始到最后一次SQL執(zhí)行的時間不是方法總耗時。如果你的方法在事務(wù)前做了一堆耗時操作比如遠程調(diào)用這部分不計入事務(wù)超時。所以不要指望timeout能保護整體方法執(zhí)行時間。關(guān)于回滾策略我再強調(diào)一次// 推薦寫法 Transactional(rollbackFor Exception.class) // 或者只回滾特定異常 Transactional(rollbackFor BizException.class, noRollbackFor IllegalStateException.class)noRollbackFor用的場景不多但有一種情況很實用某些非關(guān)鍵數(shù)據(jù)比如統(tǒng)計緩存的更新失敗不應(yīng)該讓主事務(wù)回滾可以列在noRollbackFor里。4. 編程式事務(wù)當Transactional真的不合適時Transactional是聲明式事務(wù)用起來方便但有三個致命弱點事務(wù)粒度太大整個方法一個事務(wù)如果方法里有網(wǎng)絡(luò)調(diào)用或批量循環(huán)事務(wù)會長時間占用數(shù)據(jù)庫連接。自調(diào)用失效前面已經(jīng)講過了。無法精確控制提交時機想先做幾步提交再繼續(xù)做Transactional實現(xiàn)不了。這時候就該上手編程式事務(wù)了。Spring提供了TransactionTemplate。4.1 TransactionTemplate的用法Service public class OrderService { private final TransactionTemplate transactionTemplate; public OrderService(PlatformTransactionManager transactionManager) { this.transactionTemplate new TransactionTemplate(transactionManager); // 可以設(shè)置默認配置 this.transactionTemplate.setPropagationBehavior(TransactionDefinition.PROPAGATION_REQUIRED); this.transactionTemplate.setIsolationLevel(TransactionDefinition.ISOLATION_READ_COMMITTED); } public void createOrder(OrderDTO dto) { transactionTemplate.executeWithoutResult(status - { stockMapper.deduct(dto.getSkuId(), dto.getQuantity()); orderMapper.insert(buildOrder(dto)); }); } }TransactionTemplate.execute回調(diào)里你可以在任何地方開啟事務(wù)塊粒度完全由自己控制。更重要的是它徹底繞開了自調(diào)用問題——因為你是直接調(diào)用事務(wù)管理器不走代理。還有一個場景強烈推薦用TransactionTemplate大批量循環(huán)插入。如果用Transactional包住整個for循環(huán)幾萬條數(shù)據(jù)一個事務(wù)提交時數(shù)據(jù)庫壓力巨大一旦失敗全部回滾代價太高。改成循環(huán)內(nèi)用TransactionTemplate每100條一個事務(wù)失敗了只回滾這一批配合日志記錄失敗批次整體效率和可靠性都高很多。4.2 手動控制TransactionStatus如果execute回調(diào)不適合你比如需要事務(wù)中間做分支判斷、需要中途提交可以用更底層的PlatformTransactionManagerAutowired private PlatformTransactionManager transactionManager; public void complexBiz() { DefaultTransactionDefinition def new DefaultTransactionDefinition(); def.setPropagationBehavior(TransactionDefinition.PROPAGATION_REQUIRED); TransactionStatus status transactionManager.getTransaction(def); try { // 業(yè)務(wù)邏輯1 dao.update(...); // 到這里先提交一次 transactionManager.commit(status); // 開啟新事務(wù) TransactionStatus status2 transactionManager.getTransaction(def); try { // 業(yè)務(wù)邏輯2 dao.insert(...); transactionManager.commit(status2); } catch (Exception e) { transactionManager.rollback(status2); throw e; } } catch (Exception e) { transactionManager.rollback(status); throw e; } }這段代碼展示了如何手動控制多段事務(wù)但我強烈不建議在業(yè)務(wù)代碼里寫這種底層代碼——容易出錯而且代碼很難讀。99%的場景TransactionTemplate夠用了。4.3 編程式事務(wù)的注意點TransactionTemplate是線程安全的可以做成Bean注入不要每次new一個。executeWithoutResult和execute的區(qū)別后者可以返回業(yè)務(wù)結(jié)果前者只能執(zhí)行不能返回。需要返回值就用execute。事務(wù)回調(diào)里拋出的異常RuntimeException會觸發(fā)回滾檢查型異常默認不會。要回滾檢查型異常需要手動status.setRollbackOnly()或者包裝成RuntimeException。5. 多數(shù)據(jù)源與分布式事務(wù)跳出單庫思維的邊界單庫單事務(wù)的好日子總有到頭的時候。微服務(wù)一拆、分庫一搞Transactional就管不住跨庫的數(shù)據(jù)一致性了。我先講清楚Spring事務(wù)在多數(shù)據(jù)源下的表現(xiàn)再展開分布式事務(wù)。5.1 多數(shù)據(jù)源下的事務(wù)各管各的如果你配置了兩個DataSource比如一個主庫一個從庫Spring里注冊了對應(yīng)的兩個PlatformTransactionManager同一個Transactional方法里操作了兩個庫——那這兩個庫的事務(wù)是互相獨立的。主庫提交成功、從庫提交失敗你沒有任何辦法通過單機事務(wù)解決。Spring Boot里處理多數(shù)據(jù)源的常規(guī)姿勢是Transactional(transactionManager xxxTransactionManager)指定用哪個事務(wù)管理器。方法里操作另一個庫那份數(shù)據(jù)不在事務(wù)保護范圍內(nèi)。所以多數(shù)據(jù)源場景下的策略是一個事務(wù)只操作一種數(shù)據(jù)源。跨數(shù)據(jù)源的業(yè)務(wù)要么拆分方法要么引入分布式事務(wù)方案不要指望Transactional救你。5.2 分布式事務(wù)的主流方案對比分布式事務(wù)是個大話題我只挑主流方案講給個選型思路。XA協(xié)議兩階段提交2PCXA是最正統(tǒng)的分布式事務(wù)協(xié)議分兩步準備階段所有參與者執(zhí)行SQL但不提交各自保留Undo/Redo log和提交階段協(xié)調(diào)者發(fā)提交指令各參與者提交。問題在于準備階段會一直持有數(shù)據(jù)庫鎖高并發(fā)場景下鎖沖突嚴重性能非常差。Java里典型的實現(xiàn)是Atomikos、Bitronix。說實話互聯(lián)網(wǎng)高并發(fā)場景用XA的很少了更多出現(xiàn)在金融等強一致性要求的內(nèi)部系統(tǒng)。TCCTry-Confirm-CancelTCC把每個操作拆成三個階段Try預(yù)留資源、Confirm確認執(zhí)行、Cancel取消釋放。優(yōu)點是業(yè)務(wù)層面控制粒度性能比XA好很多缺點是侵入性極強每個業(yè)務(wù)都要寫三套邏輯。典型場景賬戶轉(zhuǎn)賬。Try階段凍結(jié)轉(zhuǎn)出金額Confirm階段扣款Cancel階段解凍。這個方案需要深入理解業(yè)務(wù)才能寫得對如果你只是想快速實現(xiàn)一個分布式事務(wù)TCC的學(xué)習(xí)成本挺高的。消息事務(wù) 最終一致性這是目前最常用、成本最低的方案。思路很簡單利用本地事務(wù)把業(yè)務(wù)操作和發(fā)消息綁定在同一次數(shù)據(jù)庫事務(wù)里通過消息中間件RocketMQ/RabbitMQ最終把數(shù)據(jù)變更同步給其他服務(wù)。舉個訂單和積分的例子開啟本地事務(wù)插入訂單表同時插入積分消息表。本地事務(wù)提交后后臺任務(wù)或MQ的事務(wù)消息機制把積分消息表里未發(fā)送的記錄發(fā)到MQ。積分服務(wù)從MQ消費消息給用戶加積分。如果積分服務(wù)失敗消息進入重試隊列直到成功。這種方案做不到強一致中間會有一段數(shù)據(jù)不一致的時間窗口但絕大多數(shù)業(yè)務(wù)都能接受。核心機制是本地消息表實現(xiàn)成本低、不用引入重量級中間件是目前國內(nèi)互聯(lián)網(wǎng)公司的首選方案。Seata的AT模式Seata是阿里開源的分布式事務(wù)框架AT模式的思路是代理你的SQL記錄Before Image和After Image數(shù)據(jù)快照在全局提交時自動執(zhí)行補償SQL。對業(yè)務(wù)代碼侵入性很小但性能有一定損耗每行數(shù)據(jù)要記錄前后快照。如果你的系統(tǒng)需要跨服務(wù)事務(wù)、又不想太動代碼Seata AT是可以考慮的。5.3 選擇建議場景推薦方案單體應(yīng)用單數(shù)據(jù)庫什么都不用本地事務(wù)夠用微服務(wù)對一致性要求不高本地消息表 MQ最終一致微服務(wù)強一致要求高Seata AT 或 TCC金融級強一致低并發(fā)XA/2PC非核心數(shù)據(jù)可以容忍短暫不一致MQ異步 對賬補償分布式事務(wù)沒有銀彈。選型的核心不是哪個方案高級而是你的業(yè)務(wù)能容忍多大程度的不一致。6. 事務(wù)排查工具箱從日志到監(jiān)控的一整套姿勢事務(wù)的問題一旦出現(xiàn)往往都是線上的、隱性的、難復(fù)現(xiàn)的。所以一定要有一套預(yù)防和排查的手段而不是等出了問題再手忙腳亂。6.1 日志配置把事務(wù)邊界打印出來Spring的事務(wù)日志默認是DEBUG級別不打開根本看不到。在application.yml里配置logging: level: org.springframework.transaction: DEBUG org.springframework.jdbc.datasource.DataSourceTransactionManager: DEBUG org.springframework.jdbc.datasource.JdbcTransactionManager: DEBUG打開后你會看到類似這樣的日志Obtained JDBC transaction from DataSource [HikariDataSource (HikariPool-1)] Participating in existing transaction Initiating transaction commit Initiating transaction rollback這些日志的排列能幫你快速判斷事務(wù)有沒有開啟、是新建還是復(fù)用、提交還是回滾、有沒有因為rollback-only被強制回滾。6.2 ThreadLocal狀態(tài)的運行時監(jiān)控如果你懷疑某個方法執(zhí)行時事務(wù)狀態(tài)不對可以在代碼里手動檢測import org.springframework.transaction.support.TransactionSynchronizationManager; boolean isInTransaction TransactionSynchronizationManager.isActualTransactionActive(); System.out.println(當前是否在事務(wù)中: isInTransaction);isActualTransactionActive()返回true說明當前線程確實有數(shù)據(jù)庫事務(wù)處于活動狀態(tài)。如果外面標了Transactional但這里返回false說明代理沒生效——自調(diào)用、final方法、私有方法逐個排查。還可以查看當前事務(wù)名Object name TransactionSynchronizationManager.getCurrentTransactionName();這能幫你快速定位當前事務(wù)是哪個方法開啟的。6.3 監(jiān)控事務(wù)耗時與連接占用事務(wù)另一個容易忽略的問題是連接泄漏和長事務(wù)。一個事務(wù)如果執(zhí)行了幾十秒連接就占用了幾十秒連接池很快被打滿。建議做法在DataSource層加慢SQL日志HikariCP有connectionTimeout、validationTimeout配置同時開啟leakDetectionThreshold檢測連接泄漏。用TransactionSynchronizationManager.registerSynchronization注冊事務(wù)同步回調(diào)統(tǒng)計每個事務(wù)的耗時。Transactional public void bizMethod() { long start System.currentTimeMillis(); TransactionSynchronizationManager.registerSynchronization(new TransactionSynchronization() { Override public void afterCompletion(int status) { long cost System.currentTimeMillis() - start; if (cost 1000) { log.warn(事務(wù)耗時過長: {}ms, status{}, cost, status); } } }); }這個方法能精確定位哪個事務(wù)方法最耗時但它需要每一個業(yè)務(wù)方法都加一遍侵入性強。更好的方案是寫一個AOP切面統(tǒng)一攔截Transactional方法做耗時統(tǒng)計。6.4 事務(wù)失效排查的標準操作流程如果線上出現(xiàn)了疑似事務(wù)失效的問題我的排查順序是這樣的看日志打開事務(wù)DEBUG日志確認方法執(zhí)行時有沒有Obtained JDBC Transaction記錄。沒有就是代理沒生效走第2步有就繼續(xù)看提交/回滾記錄走第5步??捶椒ê灻遣皇莗ublic類或方法有沒有final看調(diào)用方是不是同一個類內(nèi)部調(diào)用是不是沒有被Spring管理的對象比如new出來的看注解Transactional有沒有寫對rollbackFor有沒有配多數(shù)據(jù)源下transactionManager指對了沒有看異常異常有沒有被try-catch吞掉異常類型是不是RuntimeException看數(shù)據(jù)庫表引擎支不支持事務(wù)連接是不是走到了正確的DataSource這套流程走一遍90%的事務(wù)問題都能定位。7. 最后的實戰(zhàn)建議事務(wù)規(guī)范從我做起寫到這里我把這些年跟事務(wù)打交道沉淀下來的幾條規(guī)矩放在最后算是個人的實戰(zhàn)總結(jié)也是新項目啟動時的檢查清單。事務(wù)方法要短小精悍。事務(wù)范圍之內(nèi)不要做遠程調(diào)用、不要做復(fù)雜的文件IO、不要進行大批量循環(huán)。否則連接池遲早被打死。把非數(shù)據(jù)庫操作移到事務(wù)外或者拆成多個事務(wù)塊。事務(wù)邊界要盡可能晚開啟盡可能早提交。前置校驗、參數(shù)組裝這些放事務(wù)外真正需要數(shù)據(jù)庫原子性的操作才放進事務(wù)塊。很多人習(xí)慣方法一進來就開事務(wù)其實很多操作根本不需要事務(wù)保護?;貪L配置要顯式寫。Transactional(rollbackFor Exception.class)這行字雖然啰嗦但它能擋住95%的回滾失效問題。自定義的業(yè)務(wù)異常統(tǒng)一繼承RuntimeException省得每個方法都要考慮這個異常會不會回滾。批量處理用TransactionTemplate而不是Transactional。循環(huán)里的事務(wù)一定要用編程式事務(wù)精確控制粒度Transactional包整個循環(huán)就是把數(shù)據(jù)庫往死里逼。分布式事務(wù)不要貪多求全。能靠業(yè)務(wù)流程設(shè)計規(guī)避的就盡量規(guī)避比如通過本地消息表做最終一致性比引入一套重量級分布式事務(wù)框架劃算得多。選型之前先想清楚你的數(shù)據(jù)不一致容忍度。事務(wù)這個東西說到底是數(shù)據(jù)庫連接和錯誤處理時機的管理藝術(shù)。理解底層機制比背多少面試題都管用。希望這篇文章里踩過的坑、總結(jié)的思路能讓你少走幾條彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月欧美色播| 99热资源在线| 久久人人九九| 丁香婷婷欧美综合| 国产激情综合五月久久| 来吧亚洲综合网| 激情五月天第四色| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 久热最新视频| 97碰人人操| 99九九精品| 五月丁香六月婷婷综合伊人| 婷婷五月激情的图片| 操日本99| 专区无日本视频高清8| 亚洲激情淫网| 久婷| 超碰9在| www.色婷婷| 婷婷五月天第四色| 伊人五月婷婷| 91操熟女| www.maotanji.com| 99色综合| 五月丁香啪啪网| 快色t v在线入口| 99日本精品视频热| 97碰碰电影| 少妇人妻人伦A片| 天天干天天插| 天天日天天干天天操| 99色这里| 超碰九色| 激情五月综合第一页| 亚洲va成人va成人va在线观看| 涩五月色婷婷| 襙比视频| 思思热性操| 久久婷婷热| 亚洲成人综合网在线免费观看| 99热综合| 婷婷综合激情| 婷婷伊人五月天| 狠狠搞狠狠操| 中文av网| 伊人五月天婷婷| 久久五月婷婷电影| 色波激情五月天| www.婷婷,com| 伊人9在线| 99热在线极品极品| 亚洲六月色| AV人人操| 午夜婷婷久久| 色婷婷88| 亚洲天堂99| 啪啪操超碰| 久久视频这里有精品99| 五月亭亭直播| 丁香五月av| 久久人妻人人槡| www·五月天| 99rewww| www.五月婷婷久久.com| 97久久久| 久久这里都是精品免费| 秋霞午夜理论| 丁香六月视频| 狠狠草综合网| 91婷婷五月天综合视频| 六月婷婷私欲| 婷婷日日天天| 日本狠狠网| 九九热这里只有精品在线观看| 精品成人无码A片观看香草视频 | 五月婷丁香久久综合| 中文字幕视频色婷婷| 啪啪一区| 日韩精品AV一区二区三区| 免费黄色片子| 国产欧美日韩综合精品一区二区| 久久九九激情五月天| 99人妻碰碰久久久禁片| 婷色天堂| 色婷婷瘦婷婷日韩| 人人爱操| 婷婷五月伦理| 五月丁查人人| 噜一噜在线| 丁香五月五月婷婷| 成人无码髙潮喷水A片| 久久激情五月婷婷| 婷婷丁香中文字幕| 色色狼人综合| 五月天激情网图片 - 百度| 婷婷五月开心中文字幕在线| 五月亭亭直播| 婷婷网五月天| 丁香五月婷婷综合激情哟哟哟| 影音先锋五月天婷婷丁香在线观看| 九九九九无码| 天天色·欧美| 亚洲欧美999| 天天操天天操天天操天天操天天操| 另类 在线| 这里只有精品无码| 五月婷婷av| 97热这里精品在线视频| 99视频在线观看地址| 99精品久久久久久久久| 久久综合激情| 婷婷97| WwW色婷婷| 婷婷综合九月| 人人色性网| 色丁香婷婷| 久久五月天色婷婷| WwW色婷婷| 五月婷A V在线| 五月丁香偷拍| 婷婷一本和五月丁香| 激情五月天激情综合网| 成人网站在线观看视频| 超碰99成人在线| 玖玖婷婷五月| 99成人无码| 色婷五月婷婷| 激情五月六月| 91男同视频| 九九偷拍网| 97精品欧美91久久久久久久| 26uuu国产激情视频| 日本九九九九| 99热99| .操區COm| 色婷婷影院| 九九色插| 日韩成人综合网| 久久婷婷五月草视频| 丁香六月亚洲| 99热这里有精品6| 青青草蜜臀| 五月婷婷激情网| 欧洲亚洲免费视频9| 色婷婷六月开心中文字| 9999久久久久| 亚洲美女高潮久久久久久69| 日本婷婷| 99色在线观看视频者| 超碰人人在线| 五月天婷婷綜合院| 色色色九九九五月婷婷| 亚洲区1| 超碰人人在线| 久久综合丁香| 色五月婷婷综合在线| 99热日| 九九综合久久| 99热国内精品| 丁香五月婷婷综合精品素人| 婷婷激情97| 久这里只有精品| AV在线不卡播放| 91ncm视频| 天天做天天要天天爽| 91超级碰在线| 天啪色| 五月婷婷丁香色播网| 婷婷狠狠操| 99欧州偷拍视频| 狠狠色噜噜色狠狠狠综合久久成人波| 五月天丁香啪啪网| 91精品国产综合久久密臀| 综合激情网激情五月。| 国成人网| 欧美色爱五月天| 桃色成人网| 欧美丁香婷婷天天操| 五月丁香网站| 五月婷婷综合视频| 久久九九99视频| 色噜噜狠狠色综合AV兰草影视| 中文久久婷婷| 久99综合婷婷| 狠狠爱激情网| 丁香六月婷婷激情综合| 亚洲午夜av| 五月丁香久| 真实亲子乱子伦高清在线观看| 欧美一级a | 中文资源在线a| 精品久久穴| 亚洲Va成人| 欧美97色| 夜夜爽天天| 五月婷在线| 婷婷丁香五月91| 五月婷婷色播| 色综合色| 欧美性生交A片免费看| 五月天激情小说电影| 五月婷精品| www色色色com| 噼里啪啦完整版中文在线观看| 婷婷五月丁香综合激情小说| 俺来也狠狠| 亚洲小视频| 婷婷久久爱| 五月天天天色| 久久色天堂| 99视频在线精品免费观看2| 最新日韩久热免费视频看看| 91狠狠综合久久| 日韩色色网| 大香蕉婷婷色| 人人草成人视频| 婷婷综合激情| 亚洲AV色婷婷人禽五月天| 日噜噜色| 五月婷婷激情久久| 久热久色| www久久99| www.婷婷.com| 婷婷五月天首页| 丁香五月很很肏| 伊人婷婷五月天| 五月丁香婷婷婷激情爱爱| 亚洲欧美一区二区三区爱爱动图| 五月丁香色色| 婷婷五月,综合伊人| 人人摸人人搞| 久久婷婷激情五月天一区二区| 色婷婷久久| 五月婷在线色视频| 一区二区乱码视频| 在线播放人妻| 4399亚洲视频| 五月久久婷婷天堂视频| 97色婷婷| 五月天婷婷青青草| 99这里精品| 天天色一道本综合婷婷| 强辱丰满人妻HD中文字幕| 五月婷婷伊人网| 五月丁香六月婷婷在线观看| 婷婷色丁香五月| 人人爽天天莫| 婷婷丁香成人| 五月丁香香蕉| 9久久久久久久久久久| 亚洲精品又粗又大又爽A片| 这里只有精9| 99热爆在线| 在线网黄| 色色色色色色色色网站| 色情五月天首页| 九九九激情综合| 久婷久婷| 激情五月天www| 色综合久久之分久久| 伊人在线视频| 久久久久人无码人妻| 色九月国产| 欧亚成人A片一区二区| 九色视频九色九色91jiuseshipin| 五月天激情国产综合婷婷婷| 五月丁香六月综合激情网| 台湾无码A片一区二区| www.狠狠操| 六月合五月婷| 97丁香五月天| 激情婷婷五月久久| 五月天婷婷AV| 96精品国产综合久久久久久| 老师的粉嫩小又紧水又多A片视频| 在线观看免费狠狠色丁香香综合| 色综合天天网| 亚洲第一色色色| 五月天伊人久久久久| 久久久国产精品黄毛片| 激情五月天色色网| 思思热久久久久思思热| 狠狠色综合777| 丁香五月欧美激情| 久久婷婷五月综合啪| 婷婷五月天 丁香五月天 裸体| 丁香五月香蕉| 99热免费在线| 99精品网| 五月激情小说| 五月花免费视频| 久久婷网| 久久综合丁香| 国产精品成人AV在线| 午夜色丁香| 春色激情第四色| 三级三久久线久久99久目本WW| 六月婷婷最新网址| 亚洲爱婷婷| 97精品人人A片免费看| 大香蕉婷婷色| 婷婷成人综合| 婷婷综合五月天| 五月丁香六月婷婷的女人| 丁香婷婷五月综合欧美另类| 亚洲天堂色| 艳妇野外情欲放荡HD| 午夜爱爱网站| 午夜丁香婷婷| 色一情一乱一乱一区91Av| 九九aV| 五月婷丁香| 综合色色婷婷| 婷婷丁香五月综合| 高清资源站日A美A欧亚…| 97色在线| 五月激情在线| 色色亚洲| 665566 无码| 激情色五月天| 亚洲AV成人无码电影| 岛囯综合激情网| 激情6月| 成人中文网| 91av传媒高清在线视频网| 无码激情AAAAA片-区区| av五月丁香| 99免费偷拍视频| 99免费在线视频| 日熟女| 九九草草逼| 国内9l视频自拍老熟女九色| 色婷婷久久综| 安息电影在线观看完整版| 婷婷五月天.com| 人人干Av| 五月婷婷成人| 色婷婷电影网| 五月婷无码| 91九色成人原创视频| 色综合色综合色综合| 五月婷天堂视频| 激情AV在线| 噜噜视频| 潘金莲AAAAAAAAAA| 欧美va视频| 性色播| 久久99这里只有精品视频| 色情五月综合婷婷| m色激情网| 人人爽天天爽| 婷婷精品视频| 丁香婷婷五月人体| 天天射美女| 精品网站99| 亚洲激情五月丁香久久久久| 色婷婷五月天视频网站| 婷婷亚洲综合| 国产真人做爰视频免费| 4438成人电影| 久久婷婷丁香五月一二三| 久8色色| 99毛片| 五月激情小说| 丁香五月婷婷大香蕉| 五月丁香久久网| 99re这里只有精品免费| 色噜噜五月天| 中日韩美欧成人一区二区精品在线| 超碰人人摸人人操| 婷婷性爱网| 秋霞电影一级黄| 五月涩涩网| 精品人妻久久久久久| 婷婷五月色播放| 91精品91久久久久77777| 六月丁香成人| 青青五月天婷婷| 婷婷五月六| 日韩啪啪网| 亚洲传媒在线观看| 精品九九在线观看| 亚洲操精品| 丁香五月天大香蕉啪啪| 精品视频这里只有精品| 99热免费| 在线观看视频1区| 色墦五月丁香| 丁香五月天.com| 国产一级片色色| 黄网免费观看| AV网址大全在| 亚洲另类婷婷五月综合| 九九伊人网| 涩九九九九| 欧美一区二区三区不卡影视| 深爱激情五月网| 色开心五月丁香| 五月青青草综合| 六月婷婷色宗合| 婷婷少妇激情| 婷婷玖玖丁香| 丁香五月色欲| 伊人大综合| 五月丁香综合| 欧美综合123区| 色婷婷综合丁香五月天| 婷婷精品性性性性性性性| 97人人干| 婷婷久月| 久久久97| 六月婷婷综合| 丁香婷婷网| 综合色婷婷| www,婷婷五月天,com| 五月婷婷啪啪| 综合亚洲六月婷婷在线| 久久久五月天| 亚洲精品无码久久| 91久操| 色婷婷91| 六月丁丁香| 中文字幕成人日韩| 激情网第四色| 无码激情AAAAA片-区区| 夜夜做天天爽| 91919191919久久成人视频| 狠狠夜夜五月丁香| 国外亚洲成AV人片在线观看| 99热精在线九九久久保| 少妇高潮呻吟A片免费看软件 | 久久色五月| 26UUU欧美| 在线成人网址| 国产亚洲色婷婷久久99精品91| 九九热啪啪| 激情五月亚洲| 久久天堂色| 五月婷婷丁香在线| 成人色图情色成人网 www.5b5b5bcom 五月天| 丁香婷婷视频| 97婷婷五月丁香| 深爱激情六月| 午夜福利8055| 色婷婷a v| 超碰成人在线观看| 日本九九九九| 五月天天丁香婷婷在线中| 亚洲热视频| 色五月激情问网站| 天天爱天天天射AV| 九九操综合网| 亚洲视频在线网| 五月天激情国产综合婷婷| 亚洲成人av中文| 婷婷天天综合| 五月丁香婷婷啪啪综合| 综合色久| 色婷綜合网| 婷婷综合| 久久视频这里99| 久久99精品久久久| 五月天播播| 视频这里只有精品16| av免费在线看不卡无毒| 狠狠五月激情婷婷直播片| 日本一区二区三区精品视频| 色婷婷亚洲| 亚洲VA欧美VA| 色色色1网址| 天天狠狠色| 丁香六月婷婷社区| 婷婷丁香六月| va婷婷| 五月狠狠| 五月婷婷丁香| h在线看免费版在线看| 九九热精品99| 久久九九爽| 天天草天天舔| 日韩激情网站| 99性爱视频| 五月天色婷婷基地| 97超级碰碰碰久久久| 色综合综合色| 丁香五月天殴美激情| 西西4r午夜剧场| 生活片五区| 五月综合婷婷网| 色九月婷婷| 天天日,天天插| 久久曰曰| 九九成人视频| 九月婷婷色色| 五月丁香人人婷婷在线观看| 九九99九九99偷拍视频免费看| 中字幕视频在线永久在线观看免费 | www.狠狠| 99热久久日本| 韩日另类| 天天日天天爽夜夜爽| 九色色| 天天摸天天肏| 亚洲国产网站| 国产欧美熟妇另类久久久| 中文av网站| 色五月丁香总合网| 六月婷婷啪啪| 久操乱| 亚洲人妻Av| 久久狠狠高潮亚洲精品 天天摸夜夜摸夜夜狠狠摸 | 五月天激情久久| 99热这里只有精品3| 久久这里只精品66| 久久婷婷七月丁香| 色情综合| 婷婷五月天成人| 九九九午夜影院成人| 五月久久婷婷天堂视频| 极品嫩草| 天天色综网| 99在线观看| 天天天日天天天干| 亚洲爱爱无码婷婷色五月| 狠狠色丁香久久| 91狼友视频在线观看| 丁香六月AV| 9久久狠狠的| 婷婷久久大香蕉| 开心五月婷婷婷美女| 久久有码| 色婷久久| 六月丁香婷婷综合影院| www.婷婷五月.com| 久久R激情| 91婷婷| 色播婷婷五月天| 五月天婷婷丁香| 亚洲激情网站| 五月丁香色婷婷综合| 人妻久热| 丁香婷婷色九月| 99视频在线观看视频| 狠狠五月婷婷| 中文字幕无码AV| 99热这里只有精| 99re6久热只有精品6在线直播| 美欧成人视频| 9热精品| 久久婷婷五月综合啪| 色欲资源网| 少妇激情五月婷婷| 婷婷五月天激情亚洲小说| 欧洲亚洲免费视频9| 婷婷色亚洲| 操操碰| 九九色图| 婷婷五月天综合激情| 99视频在线啪| 色久影院| 热99.com婷婷| 国产精品国产| 操逼综合网| 色五月婷婷激情基地| 五月天激情日色在线| 99情色五月天| 一级二级色大片| 亚洲免费av在线| 免费婷婷| 麻豆科斗777| www超碰| 996er在线观看| 天天插天天插天天插天天插| 99热一区| www.色五月| 97操在线| 婷婷丁香五月天之开心少妇| 色 五月 天 婷婷 丁香 九月| 91|九色|动漫| 专区无日本视频高清8| 亚洲AV在线免费看| 中国女人内射6XXXXX| 五月丁香啪啪网| 五月天综合| 综合av在线| 色婷婷aV四虎| 丁香五月婷婷亚洲综合精品| 亚洲小说五月婷婷| 激情九九这里只有精品| 天天综合五月| 五月婷婷丁香六月| 色婷婷AV在线| 久艹久| 五月丁香激情四射综合| 九月婷婷激情| 激情丁香社区| 五月丁香六月情婷婷久久| 亚洲色色香蕉| 欧美Va婷色| 99精品视频在线观看| 欧美成人猛片AAAAAAA| 噜噜五月天综合| 五月久久丁香| 97丁香婷婷| 色色网站在线免费观看视频| 26uuu精品国产| 国产精品爽爽久久久久久| 婷婷综合激情| 色色色色色色色色色色色色色色,网站| 六月婷婷色色色| 色播激情| 天天久久人人| 狠狠色噜噜狠狠| 日本色爽| 日日夜夜干| 丁香五月婷婷亚洲另类| 色爱综合视频| www.婷婷五月天| 六月丁香啪啪啪| 综合99在线| www.久久久久久久| 欧美猛片| 思思热AV| 全部老头和老太XXXXX| 九九久久高清| 婷婷五月丁香婷婷| 日本片日本片祼观看网站在线看中文版网页在线看 | 91婷婷视频| 婷婷激情综合网| 97激情五月天| 色色色五月婷婷| 国产av第一专区| 色婷视频| 另类视频五月天| 99精品在线观看| 精品香蕉99久久久久网站| 九月综合| 欧美综合激情五月丁香| 五月婷婷天天| 丁香88AV五月婷婷| 丁香五月天色综合| 日本不卡中文字幕| 91人人爽人人操| 色婷婷丁香五月天在线视频| 狠狠色婷婷777| 婷婷五月欧美| 色操b| 色婷婷超碰| 五月天啪啪网| 91碰| 人人九色| 午夜丁香六月婷| 日韩欧美骚货| 五月丁香花成人社区| 最新色色五月天| 天天久| 狠狠干综合| 久热超碰91| 五月婷在线播放| 操操操B| 思思99精品视频在线观看| 五月天播播| 日本97在线看片| 在线视频色五月| 另类激情五月| 婷婷五月综合久久中文字幕| 可以免费观看的AV| 久久久久久18| 5月丁香六月婷婷| 丁香 婷婷五月| 久久久天天啊| 丁香六月激情毛片| 丁香婷婷六月| 欧美三级大片AA在线看| 热99只有里视频| 9热在线| 人妻操操色| 色五月婷婷老师| 狠狠爱综合网| 91婷婷搞| 六月婷婷综合| 激情深爱五月天| 久99久视频免费观看| 色欲一二三| 日本久久9| 日婷婷| 婷婷狠狠青青| 色色网站| 久久大香蕉视频| 99精品在线观看视频| 五月婷精品| 色婷婷99| 99热6这里之有精品| 丁香婷婷五月六月久久| a在线观看| 婷婷五月色色| 91日韩在线| 99色色| 99热99免费| 91色综合网站在线| 丰满熟女人妻一区二区三| 久久久久久久久久婷婷| 亚洲五月丁香六月婷婷| 五月婷丁香| 日日夜夜干| 亚洲第一黄网| 99热这里有精品| 精品一二三区视频立| 综合AV网| 激情网婷婷五月天| 日本99视频| 五月丁香在线| 久鲁鲁色网 | 亚洲日韩一页精品发布| www.狠狠操.con| 岛国AAAV| 激情图片婷婷丁香五月| 九热精品| 国产乱子轮XXX农村| 另类激情五月天| 久久婷婷激情| 综合视频久久| www.婷婷五月| 综合五月天婷婷色| 五月婷婷偷拍| 99热| 思思热在线精品视频| 久久久久婷婷| 9热超碰| 偷拍91九色| 99丁香五月婷| 亚洲无码www| 噜噜视频| 精品久久艹| 久久久久婷婷| 丁香狠狠色婷婷久久无码视频| 天堂在线9| 先锋资源996| 九色激情网| 成人精品一区日本无码网 | 亚洲第一第二网站| www.夜夜.com| 色婷婷88| 最近中文字幕大全免费版在线| 婷婷天天日婷婷| 人人色婷婷五月天| 91九色中文| JAPANRCEP老熟妇乱子伦视频| 懂色AⅤ| 成人av播放| 欧美十二区| 五月丁香综合网| 狠狠草在线观看| 26uuu青青| 九九在线精品| 色五月五月天色婷婷色五月| 日本一级特黄大片AAAAA级| 激情五月综合| 色五月婷婷啪啪五月| 综合大香蕉| 亚洲精品久久久无码| 色五月婷婷亚洲最大| 婷婷的五月天另类视频| 欧美月久久| 国产美女无遮挡裸体毛片A片| 99热亚洲| 五月婷婷久| 五月丁香色欲| 婷婷五月丁香五月| 日本色久| 2025色婷婷| 成人欧美Va| 怕怕視頻| 久久综合中文| 五月天天堂久久| 俺去婷婷 丁香| 欧美黑人巨大猛烈cuckold| 超碰在线观看成人视| 4399无码视频| 婷婷在线精品| 九九性视频| 99啪啪网| A色色| 深爱激情四射| 玖玖伦理电影| 五月婷丁香花| 亚洲高清在线| 九九热啪啪| 另类视屏| 色九月国产| 色综啪啪啪啪啪啪| WWW色色色COM| yw国产AV| 欧美电影在线观看| 色欲一区二区三区精品A片| 能看的av| 婷婷丁香五月在线播放| 丁香六月天堂| 六月丁香婷婷色综合| 激情小说五月天社区丁香 | 婷婷色播婷婷| 婷婷丁香91| 免费操超碰| 色婷婷综合影院| 欧美性生交xXxX久久久| 久久艹 五月天| tingtingcaobi| 涩丁香| 色色草97| 九九99在线| 久久综合影院| 日本三级中国三级99| 一区二区乱码视频| 欧美99热| 色色五月天婷婷| 性色欲情 网站| aaaaaa片| 亚洲综合婷婷| 激情深爱综合网| 五月天 综合 在线| www.婷婷网| 婷色成人| 五月开行婷婷色五月| 噜噜色噜噜网| 超碰在线观看9| 亚洲操逼网| 99热在线只有精品| 五月综合色| 色色色网站| 日日干日日| 亚洲九九夜夜| 极品人妻VIDEOSSS人妻| 天天天天天久久久久久| 这里只有精品在线视频在线观看| 天天日夜夜爽| 日日天天干| 国产精品久久久60086| 五月丁香婷婷激情澎湃四射| 中文av网| 色屌丝中文字幕| 影音先锋91在线资源站| 99热亚洲综合| 99色色网| 久久精品永久免费| 婷婷五月天激情五月天深爱五月天| 激情99| 丁香五月成人社区| 91男人操女人视频| 久久9RE热视频精品98| 99re6热在线精品视频播放速度 | 色婷婷五月婷婷五月婷婷五月| 激情五月天小说| 天天久久狠狠色综合| 日日日日日| av在线免费播放观看| 久久久久久99精品无码| 色婷婷五月六月丁香综合视频| 五月天激情黄色小说在线观看| www.粉嫩av.com| 深爱五月亚洲| 九九热视频99| 日本视频不卡123区| 色播播婷婷| 五月婷婷六月天| 教师性爱毛片| 中文字幕在线资源| 丁香五月天综合网| 中文无码婷婷| 97操在线| A在线观看| 99热这里精| 亚洲AV人人操| 色色色色欧美| 亚洲第一成人无码A片| 99re在线精品视频| 热的国产,热的综合,热的有码| 九九这里都是精品| 亚洲五月婷婷| av成人在线播放| 凹凸探花电影| 涩五月婷婷| 色狠狠色噜噜AV天堂五区| 亚洲综合一区二区| 五月婷婷之六月丁香| 99riAV国产精品视频| 亚洲欧美日韩VIP| 丁香激情网| 99色免费视频| 久久er99热精品一区二区| 超碰在线超碰| 丁香美女主播视频在线观看| 亚洲无码色色| 五月丁香A片| 九九热10| 欧美色色色色色色色| 中文不卡av| 热热久久精品视频| 日日爱激情| AA片在线观看视频在线播放| 亚洲小视频免费播放| 狠狠五月天| 欧美性生交XXXXX无码小说| 玖玖婷婷五月天| www.五月天婷婷| 五月天丁香婷婷视频网址| 爱之国产色情综合| 婷婷永久在线| 丁香五月欧美色综合| 婷婷伊人久久综合| 婷色天堂| 丁香八月综合激情| 欧美激情综合色综合啪啪五月| 99热99精品| 日韩啊啊啊| 秋霞少妇毛片| 丁香五月在线观看完整版| 丁香网站| 丁香五月视频在线观看| 开心激情网在线| 99爱在线| 97五月天婷婷| 碰超亚洲| 国产高清RV综合aVa| 五月综合视频| 色婷婷在线视频久| 五月丁香激情综合| 婷婷激情丁香五月婷婷激情丁香五月婷婷 | 五月天五月天激情网| 九九亚洲天堂| 天天色官网| 男人大jjc女人免费视频| 五月天激情婷婷五月天久久| 黄网在线免费观| 欧洲高清免费久久| 久久婷婷一级片| 99热这里只有精品1998| 欧美久久九九| 婷婷五月中文在线视频| 婷婷五月综合免费在线| 日本成人噜噜噜| 婷婷五月中文字幕| 成人一级片| 久99热| 丁香五月伊人| 五月婷婷少妇之| 国产成人精品一区二三区熟女在线| 影音先锋按摩| 丁香婷婷综合激情五月色| 五月天堂婷婷| 五月婷婷黄网站大全| 99性视频| 婷婷激情久久| 九九这里有精品| wWW九九在线播放| 国产亚洲色婷婷久久99精品91| www.色五月| 五月婷婷中文字幕| 久色视频首页| 1024AV视频| 夜夜爱伊人| 亚洲激情综合色站| 999热这里只有美国精品| 狠狠干夜夜干| 丁香五月大香蕉AV| 天天弄天天操| 婷婷五月婷婷五月天| 久久婷婷激情久久| 高清不卡一区| 99色热视频| 亚洲天堂九九九| 五月丁香六月色| 婷婷免费精品视频| 亚洲操女| 色五月天丁香| 五月婷婷成人w| 色综合香蕉| 五月丁香婷婷色| 99热在线这里| 97人人操人人爽| 精品欧美一区二区三区久久久 | 色色激情| 超碰69天堂| 五月天久久婷婷| SS丁香五月婷婷| 99久扒热| 色婷婷成人做爰A片免费看网站| 亚洲日日日| 99这里只有精品视频免费| WWW久久99久久99久久| 啪啪综合网| 五月婷婷免费看| 色999;丁香五月| 热99.com婷婷| 人人摸人人摸| 五月天伊人综合| 在线视频色五月| 人人操人| 色一情一乱一伦一区二区三区| 六月婷婷开心| 五月激情婷婷六月丁香| 婷婷九色| 人碰人人人玩91| 99自拍视频在线观看| 久久精品亚洲热| 综合欧美五月婷婷| 99色.com| 99热个人在线| www.99视频| 丁香六月婷婷综合缴| 亚洲色婷婷激情| 97碰| 色婷婷五月丁香色| 六月色婷婷| 婷色五月| 开心五月网 | www99精品日韩| 五月丁香综合啪啪| 99久久精品国产色欲| 激情五月天色婷婷| 婷婷第六色| 欧美日本国产欧美日本韩国99| 婷婷99视频在线| 激情99| 欧美97色| 狠狠做深爱婷婷久久综合一区| 亚洲综合五月天综合| 99自拍网| 性热视频99精品| 淫视馆av三区| 欧美性色A片免费免费观看的| 热久久91| 婷婷婷久久久| 激情婷婷色五月| 激情桃色网 | 99色天堂| 99碰超| 久久艹99| 色色网站| 五月天色婷婷网| 亚洲婷婷六月天| 天天成人综合| 性色欲情 网站| 67194成I人在线观看线路1 | 五月婷天天搞视频| 精品九九视频| 色欲丁香久久| 樱花99视频| 久99久视频免费观看| 日都一级A片| 激情婷婷护士激情| 99热综合在线观看| 98国产精品综合一区二区三区| 久久综合婷婷| 在线观看中文字幕| 超碰在线综合| 99综合| 丁香五月六月婷婷综合| 六月丁香五月天| 亚洲激情综合免费| 天天射综合网夜夜操| www.99热. com这里只有精品| 这里只有在线精品| 青青草a在线| 婷婷丁香久久五月综合| 激情婷婷内射| 久久五月天精品视频| 青青草原中文字幕| 五月香蕉综合| 日本婷婷综合精品| 五月丁香婷中文字幕| 五月婷婷在线网站| 五月丁婷婷| 五月丁香色婷婷基地| 激情九九综合网| 婷婷色婷婷亚洲成人| 婷婷色五月激情| 久久五月天激情美女| 99热这里只有精品国产免费| 密黄站| 六月五月久久丁香| 久久婷婷欧美| 五月综合色播播丁香婷婷| www99热| 久9热视频| 91干| 无码日本精品XXXXXXXXX| 先锋影音av色五月天资源站| 婷婷五月综合中文字幕| 激情五月天色色色| 丁香婷婷色色| 婷婷色丁香五月| 这里只有精品亚洲| 婷婷丁香五月天在线视频| 亚洲无码九九| 色99视频| 琪琪色五月天| 成人AV在线电影| 婷婷影院A成人| 美女视频图片久久91| 97色女人在线| 丁香五月激情综合| 成人色色综合| 99r这里| 丁香蜜臀黄色婷婷五月天| WWW.婷婷| 国内一级片| www.色色com| 狠狠爱综合网| 99热精品在线播放观看| 激情五月,激情综合网| 国产成人高清| 欧美电影在线播放| 国产亚洲99久久精品熟| 久久在这里99| 狠狠色丁香99| 久色资源网| 色婷操逼| 91妻人人爽人人看片| 婷婷五月天首页激情| 99在线视频资源| 这里只精品| 99热在线观看免费精品| 99re8在这里只有精品| 伊人喵咪a V| 99A级片| 九九热99精品在线| 天天夜夜操| 看片视频在线免费日产在线看| 国产乱轮一区二区三区| 久久婷婷五月天激情| 成人婷婷五月天| 丁香五月婷婷香| 日本色婷婷| 九月大香蕉| 亚洲激情五月婷婷日日| 亚洲欧州色情在线观看| 色色免费网站| 91中文狠狠综合| 成人片在线免费看| 996er在线观看| 思思 热 99| 99热色精品| 丁香花五月天社区| 婷婷五月丁香91| 6080av| 午夜爱爱网站| 青青草伊人婷婷| 欧美啪啪五月天| 亚洲色婷婷色| 激情婷婷六月天| 激情五月成年| 综合一区二区三区| 99热这里只有精品官网| 丁香九月婷婷| 色情五月天。| 亚洲成人电影aaaa| 超碰人人艹| 天天久久婷婷| 思思99热热热99| 99热亚洲精品| 在线看AV| 另类丁香五月天区图| 翔田千里 50岁 无码| 婷婷激情综合色五月久久91| 九九热这里只有精品23| 五月婷婷视频在线观看| 无码成人AAAAA毛片AI换脸| 久久99久久99精品免视看婷| 丁香成人五月天| 激情5月婷婷| 欧美天天草人人草| 久久婷婷人人| 色综合久网| 天天橾日日橾夜夜橾17| 老司机日日夜夜青草| 亚洲综合在线播放| 五月婷婷av| 天天做夜夜爽| 99手机在线精品视频| 亚洲天堂aaa| 少妇水多A片太爽了| www.久久爱| 国产三级片91| 婷婷五月天综合AV| 深爱激情综合网| 九九九九精品精| 狠狠 婷婷| 激情五月丁香婷婷| 他改变了拜占庭| 情色婷婷五月天| 久久新| 丁香婷婷色色| 99啪在线| 天天天天天色| 97操操| 色五月婷婷少妇人妻| 超碰在线91| 婷婷久久99| 综合激情视频| 久xxxx| 在线只有精品| 2013AV天堂| 婷婷五月天综合久久| 丁香五月激情五月色综合| 激情九九综合网| 在线另类| 中海油常州环保涂料有限公司| 99亚洲精品视频| 99操碰| 色噜噜狠狠色综合日日| 97色在线| 激情五月色婷婷| 天天爽夜夜爽夜夜爽精| 五月激情天| 久久久思思热| 人人草人人爱| 婷婷丁香五月天综合网| 丁香五月花影院| 99re这里只有精品免费| 国产精品久久久久久久久久| 婷婷欧美色| 疯狂做受XXXX高潮A片| 婷婷色丁香五月| 五月天久久久| 色婷婷超碰| 久激情网| 五月天国产成人| 国产毛片欧美毛片久久久| 六月狠狠综合| 思思热AV| www激情网站| 伊人婷婷五月天| 99精品久久| 色婷婷综合网站| sewuyue第四色| 狠狠色综合久久久久| 成人va视频| 色九九综合热99| 天天综合在线网| 九九精品这里只有| 琪琪色网址| www.婷婷.com| 久操人妻| 成人国产欧美大片一区| 亚洲天堂AV免费片| 中文不卡av| 久久久性爱视频| 日本色天堂| 亚洲中文字幕在线观看| 激情五月六月婷婷综合啪啪| 久久激情四射| 2020日日干| 婷婷五月天成人在线视频| 亚洲午夜在线视频| 停停五月色宗合| 综合久久99| 久久综合66| 欧美日比视频| 人人舔人人色人人高潮| www.1024久久| 久久久久亚洲AV无码网影音先锋| 深爱五月激情综合| 亚洲妇女熟BBW| 五月丁香成人| 99热这里只有精品33| 婷香狠狠爱五月|