欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Java微服務(wù)架構(gòu)在跨境電商平臺(tái)中的設(shè)計(jì)與實(shí)踐

Java微服務(wù)架構(gòu)在跨境電商平臺(tái)中的設(shè)計(jì)與實(shí)踐 簡(jiǎn)介本資源是一套基于Java技術(shù)棧開(kāi)發(fā)的跨境電商平臺(tái)ECO完整源碼面向Java后端開(kāi)發(fā)者、電商平臺(tái)學(xué)習(xí)者及微服務(wù)架構(gòu)實(shí)踐者旨在提供可運(yùn)行、可擴(kuò)展的企業(yè)級(jí)電商系統(tǒng)參考實(shí)現(xiàn)。壓縮包共444個(gè)文件總大小1.84MB涵蓋346個(gè)Java業(yè)務(wù)邏輯與控制器類(lèi)、57個(gè)XML配置與Mapper映射文件、14個(gè)YML環(huán)境配置、7個(gè)Dockerfile支持多環(huán)境容器化部署、以及SQL建表腳本、Maven構(gòu)建腳本和基礎(chǔ)前端靜態(tài)資源等體現(xiàn)典型Spring Boot MyBatis Docker的現(xiàn)代電商技術(shù)組合。已有208人學(xué)習(xí)下載讀者可直接導(dǎo)入IDE運(yùn)行調(diào)試深入理解用戶(hù)中心、商品管理、訂單流程、國(guó)際支付對(duì)接、多語(yǔ)言適配等核心模塊的設(shè)計(jì)與集成方式并借鑒其分層架構(gòu)、RESTful接口規(guī)范及CI/CD初步實(shí)踐。1. 項(xiàng)目緣起為什么選擇Java重寫(xiě)一個(gè)跨境電商平臺(tái)幾年前我接手了一個(gè)用PHP和Node.js混合技術(shù)棧搭建的跨境電商項(xiàng)目。項(xiàng)目初期為了快速上線技術(shù)選型比較隨意隨著業(yè)務(wù)量從日均幾百單增長(zhǎng)到幾萬(wàn)單各種問(wèn)題開(kāi)始集中爆發(fā)訂單處理延遲、庫(kù)存同步錯(cuò)亂、支付回調(diào)丟失、系統(tǒng)在高并發(fā)下頻繁宕機(jī)。更頭疼的是由于早期架構(gòu)設(shè)計(jì)缺乏規(guī)劃代碼耦合嚴(yán)重加一個(gè)促銷(xiāo)活動(dòng)功能可能得改五六個(gè)服務(wù)牽一發(fā)而動(dòng)全身。那段時(shí)間團(tuán)隊(duì)大部分精力都耗在了“救火”和“打補(bǔ)丁”上新業(yè)務(wù)需求根本排不上期。痛定思痛我們決定推倒重來(lái)啟動(dòng)一個(gè)代號(hào)為“ECO”的新平臺(tái)項(xiàng)目。這次我們選擇了Java作為核心開(kāi)發(fā)語(yǔ)言。很多人可能會(huì)問(wèn)現(xiàn)在Go、Python、Node.js不都很火嗎為什么還要用“老牌”的Java這背后是我們基于業(yè)務(wù)特性做的深度權(quán)衡。首先跨境電商的核心是“交易”而交易系統(tǒng)對(duì)一致性、穩(wěn)定性和事務(wù)處理能力的要求是極高的。Java生態(tài)中成熟的ORM框架如MyBatis、JPA和聲明式事務(wù)管理Spring的Transactional能讓我們以相對(duì)低的認(rèn)知成本構(gòu)建出強(qiáng)一致性的業(yè)務(wù)邏輯。其次跨境電商涉及復(fù)雜的供應(yīng)鏈、清關(guān)、多幣種支付、多語(yǔ)言客服等模塊系統(tǒng)本身就是由數(shù)十個(gè)微服務(wù)構(gòu)成的龐大體系。Spring Cloud Alibaba這一套成熟的微服務(wù)全家桶在服務(wù)治理、配置管理、流量控制等方面提供了開(kāi)箱即用的解決方案能極大降低分布式系統(tǒng)的復(fù)雜度。最后團(tuán)隊(duì)成員的技能棧也是重要考量我們有一批經(jīng)驗(yàn)豐富的Java工程師選擇Java能最大化利用現(xiàn)有的人力資源快速推進(jìn)項(xiàng)目。所以ECO項(xiàng)目不是一個(gè)簡(jiǎn)單的Demo它是一個(gè)基于真實(shí)業(yè)務(wù)痛點(diǎn)用Java技術(shù)棧重構(gòu)的、面向高并發(fā)與復(fù)雜業(yè)務(wù)的跨境電商平臺(tái)解決方案。今天我就把這個(gè)項(xiàng)目的核心架構(gòu)設(shè)計(jì)、關(guān)鍵技術(shù)選型以及我們踩過(guò)的那些“坑”分享出來(lái)希望能給正在規(guī)劃或重構(gòu)類(lèi)似系統(tǒng)的朋友一些參考。2. 核心架構(gòu)設(shè)計(jì)如何用微服務(wù)支撐全球電商業(yè)務(wù)一個(gè)健康的電商平臺(tái)架構(gòu)就像人的骨骼系統(tǒng)它決定了平臺(tái)的承載力、靈活性和未來(lái)的成長(zhǎng)空間。ECO平臺(tái)采用了經(jīng)典的前后端分離與微服務(wù)架構(gòu)整體上可以劃分為五層接入層、網(wǎng)關(guān)層、業(yè)務(wù)服務(wù)層、數(shù)據(jù)層和基礎(chǔ)設(shè)施層。2.1 微服務(wù)拆分與領(lǐng)域驅(qū)動(dòng)設(shè)計(jì)DDD微服務(wù)不是拆得越細(xì)越好胡亂拆分只會(huì)帶來(lái)災(zāi)難性的分布式事務(wù)和運(yùn)維復(fù)雜度。我們借鑒了領(lǐng)域驅(qū)動(dòng)設(shè)計(jì)DDD的思想來(lái)指導(dǎo)服務(wù)邊界劃分。DDD的核心是圍繞業(yè)務(wù)領(lǐng)域而非技術(shù)層面進(jìn)行建模。我們組織了多次“事件風(fēng)暴”工作坊邀請(qǐng)產(chǎn)品、運(yùn)營(yíng)、業(yè)務(wù)專(zhuān)家和開(kāi)發(fā)一起通過(guò)梳理“用戶(hù)下單”這個(gè)核心業(yè)務(wù)流程識(shí)別出了多個(gè)限界上下文。例如“訂單”是一個(gè)核心領(lǐng)域。用戶(hù)創(chuàng)建訂單時(shí)需要檢查庫(kù)存庫(kù)存上下文、計(jì)算優(yōu)惠促銷(xiāo)上下文、生成支付單支付上下文。如果把這些邏輯都塞進(jìn)一個(gè)“訂單服務(wù)”它很快就會(huì)變得臃腫不堪。因此我們拆分了用戶(hù)中心服務(wù)負(fù)責(zé)會(huì)員、收貨地址、安全認(rèn)證。商品服務(wù)負(fù)責(zé)商品、類(lèi)目、品牌、庫(kù)存的管理。這里特別注意庫(kù)存管理本身又分為可售庫(kù)存、實(shí)際庫(kù)存、在途庫(kù)存等是一個(gè)復(fù)雜的子域。訂單服務(wù)負(fù)責(zé)訂單生命周期的核心流轉(zhuǎn)如創(chuàng)建、狀態(tài)變更、履約。它不直接操作庫(kù)存而是通過(guò)發(fā)布“訂單已創(chuàng)建”領(lǐng)域事件由庫(kù)存服務(wù)來(lái)異步扣減。購(gòu)物車(chē)服務(wù)一個(gè)輕量的、有時(shí)效性的服務(wù)與訂單服務(wù)解耦。促銷(xiāo)服務(wù)管理優(yōu)惠券、滿(mǎn)減、折扣等活動(dòng)提供統(tǒng)一的優(yōu)惠計(jì)算引擎。支付服務(wù)對(duì)接多個(gè)第三方支付網(wǎng)關(guān)支付寶、微信、PayPal、Stripe處理支付、退款、對(duì)賬。清關(guān)服務(wù)這是跨境電商特有的負(fù)責(zé)組裝報(bào)關(guān)單、與海關(guān)系統(tǒng)對(duì)接。物流服務(wù)對(duì)接多家物流商API實(shí)現(xiàn)運(yùn)單追蹤。每個(gè)服務(wù)對(duì)應(yīng)一個(gè)獨(dú)立的Git倉(cāng)庫(kù)有自己獨(dú)立的數(shù)據(jù)庫(kù)遵循數(shù)據(jù)庫(kù)私有原則通過(guò)API或領(lǐng)域事件進(jìn)行通信。這樣當(dāng)促銷(xiāo)規(guī)則需要頻繁變動(dòng)時(shí)我們只需要修改和部署促銷(xiāo)服務(wù)不會(huì)影響到穩(wěn)定的訂單服務(wù)。2.2 技術(shù)棧選型與Spring Cloud生態(tài)確定了服務(wù)邊界接下來(lái)就是技術(shù)選型。我們以Spring Boot作為每個(gè)微服務(wù)的開(kāi)發(fā)框架它約定大于配置的理念能讓我們快速搭建一個(gè)可獨(dú)立運(yùn)行的服務(wù)。微服務(wù)治理方面我們選擇了Spring Cloud Alibaba原因在于它功能齊全、中文文檔豐富并且在國(guó)內(nèi)經(jīng)過(guò)大量實(shí)踐驗(yàn)證。服務(wù)注冊(cè)與發(fā)現(xiàn)Nacos。對(duì)比Eureka和ConsulNacos不僅提供了服務(wù)注冊(cè)發(fā)現(xiàn)還集成了配置中心功能一舉兩得。它的控制臺(tái)UI友好服務(wù)健康狀態(tài)一目了然。配置中心Nacos Config。將所有服務(wù)的配置數(shù)據(jù)庫(kù)連接、Redis地址、開(kāi)關(guān)配置等集中管理。在Nacos控制臺(tái)修改一個(gè)配置項(xiàng)相關(guān)服務(wù)能近乎實(shí)時(shí)地感知并刷新無(wú)需重啟。這對(duì)線上問(wèn)題排查和功能灰度發(fā)布至關(guān)重要。網(wǎng)關(guān)Spring Cloud Gateway。作為所有流量入口它負(fù)責(zé)路由轉(zhuǎn)發(fā)、權(quán)限校驗(yàn)、限流熔斷、日志記錄。我們編寫(xiě)了全局過(guò)濾器用來(lái)驗(yàn)證JWT令牌、將用戶(hù)信息放入請(qǐng)求頭傳遞給下游服務(wù)。熔斷與降級(jí)Sentinel。在“雙十一”大促期間如果支付服務(wù)響應(yīng)緩慢大量訂單請(qǐng)求堆積會(huì)拖垮整個(gè)系統(tǒng)。Sentinel可以實(shí)時(shí)監(jiān)控服務(wù)間的調(diào)用當(dāng)失敗率達(dá)到閾值或響應(yīng)時(shí)間過(guò)長(zhǎng)時(shí)自動(dòng)進(jìn)行熔斷快速失敗并返回一個(gè)友好的降級(jí)結(jié)果如“系統(tǒng)繁忙請(qǐng)稍后再試”保護(hù)系統(tǒng)不被雪崩。分布式事務(wù)Seata。這是微服務(wù)架構(gòu)下最棘手的問(wèn)題之一。比如“下單扣庫(kù)存”這個(gè)操作就涉及訂單服務(wù)和庫(kù)存服務(wù)。我們采用了Seata的AT模式。它的原理是攔截業(yè)務(wù)SQL生成前后鏡像保存到undo_log表中。在全局事務(wù)提交時(shí)各個(gè)分支事務(wù)正常提交如果需要回滾Seata會(huì)根據(jù)undo_log中的前后鏡像數(shù)據(jù)生成反向SQL進(jìn)行補(bǔ)償。對(duì)于大部分業(yè)務(wù)場(chǎng)景這已經(jīng)足夠。但對(duì)于極致性能要求的場(chǎng)景我們也會(huì)結(jié)合使用本地消息表、最終一致性方案。注意Seata的AT模式對(duì)數(shù)據(jù)庫(kù)支持有要求并且會(huì)帶來(lái)一定的性能損耗。在選型時(shí)一定要根據(jù)業(yè)務(wù)對(duì)一致性的要求級(jí)別強(qiáng)一致、最終一致來(lái)權(quán)衡。我們內(nèi)部有一條原則能用異步和最終一致性解決的就不用分布式事務(wù)。2.3 數(shù)據(jù)一致性設(shè)計(jì)從CAP理論到實(shí)踐在分布式系統(tǒng)中數(shù)據(jù)一致性是靈魂。我們根據(jù)業(yè)務(wù)場(chǎng)景采用了混合策略強(qiáng)一致性場(chǎng)景核心交易鏈路如創(chuàng)建訂單時(shí)扣減庫(kù)存。我們使用Seata的AT模式來(lái)保證。雖然性能有損耗但保證了資金的絕對(duì)正確這個(gè)代價(jià)是值得的。最終一致性場(chǎng)景大部分場(chǎng)景如訂單支付成功后發(fā)送短信通知、更新用戶(hù)積分、同步數(shù)據(jù)到數(shù)據(jù)分析平臺(tái)。我們使用RocketMQ作為消息中間件。訂單服務(wù)在本地事務(wù)提交后發(fā)送一條“訂單已支付”消息到RocketMQ。積分服務(wù)、短信服務(wù)作為消費(fèi)者訂閱該消息各自處理。即使某個(gè)消費(fèi)者暫時(shí)失敗消息也會(huì)在Broker中重試直到成功從而保證數(shù)據(jù)最終一致。讀寫(xiě)分離與數(shù)據(jù)同步對(duì)于商品詳情、用戶(hù)查詢(xún)這類(lèi)讀多寫(xiě)少的場(chǎng)景我們使用主從數(shù)據(jù)庫(kù)寫(xiě)操作走主庫(kù)讀操作走從庫(kù)用Canal監(jiān)聽(tīng)主庫(kù)的binlog近乎實(shí)時(shí)地同步數(shù)據(jù)到Elasticsearch提供復(fù)雜的商品搜索和篩選功能。這套混合架構(gòu)讓我們?cè)诒WC核心交易穩(wěn)定的前提下兼顧了系統(tǒng)的吞吐量和擴(kuò)展性。3. 核心業(yè)務(wù)模塊實(shí)現(xiàn)深度解析有了穩(wěn)固的架構(gòu)我們來(lái)深入幾個(gè)最具挑戰(zhàn)的業(yè)務(wù)模塊看看代碼是如何落地的。3.1 商品與庫(kù)存服務(wù)如何應(yīng)對(duì)高并發(fā)秒殺商品服務(wù)看似簡(jiǎn)單但庫(kù)存管理是電商的“命門(mén)”。我們?cè)O(shè)計(jì)了多層庫(kù)存模型可售庫(kù)存前臺(tái)用戶(hù)可見(jiàn)、可購(gòu)買(mǎi)的數(shù)量。鎖定庫(kù)存用戶(hù)下單后從可售庫(kù)存中扣除放入鎖定庫(kù)存防止超賣(mài)。實(shí)際庫(kù)存?zhèn)}庫(kù)中的物理庫(kù)存。當(dāng)用戶(hù)下單時(shí)扣減庫(kù)存的偽代碼邏輯如下Service public class InventoryServiceImpl implements InventoryService { Autowired private RedisTemplateString, String redisTemplate; Autowired private InventoryMapper inventoryMapper; Transactional(rollbackFor Exception.class) Override public boolean reduceStock(Long skuId, Integer quantity) { // 1. 校驗(yàn)參數(shù) if (skuId null || quantity 0) { throw new BizException(參數(shù)錯(cuò)誤); } // 2. Redis預(yù)減庫(kù)存應(yīng)對(duì)超高并發(fā) String key stock:cache: skuId; Long result redisTemplate.opsForValue().decrement(key, quantity); if (result ! null result 0) { // 庫(kù)存不足回滾Redis redisTemplate.opsForValue().increment(key, quantity); throw new BizException(庫(kù)存不足); } // 3. 數(shù)據(jù)庫(kù)扣減保證最終正確性 int updatedRows inventoryMapper.reduceActualStock(skuId, quantity); if (updatedRows 0) { // 數(shù)據(jù)庫(kù)扣減失敗回滾Redis redisTemplate.opsForValue().increment(key, quantity); throw new BizException(庫(kù)存扣減失敗請(qǐng)重試); } // 4. 異步更新其他庫(kù)存數(shù)據(jù)如鎖定庫(kù)存 // 發(fā)送MQ消息... return true; } }關(guān)鍵點(diǎn)解析Redis預(yù)減這是應(yīng)對(duì)秒殺的核心。所有請(qǐng)求先走Redis利用其單線程和內(nèi)存操作的特性快速判斷庫(kù)存是否充足將絕大部分無(wú)效請(qǐng)求攔截在數(shù)據(jù)庫(kù)之外。Redis中的庫(kù)存數(shù)可以略少于實(shí)際庫(kù)存作為緩沖。數(shù)據(jù)庫(kù)兜底R(shí)edis可能會(huì)因?yàn)榫W(wǎng)絡(luò)分區(qū)、重啟等原因丟失數(shù)據(jù)因此數(shù)據(jù)庫(kù)是庫(kù)存數(shù)據(jù)的最終權(quán)威存儲(chǔ)。任何Redis操作都要有對(duì)應(yīng)的數(shù)據(jù)庫(kù)操作和補(bǔ)償機(jī)制。異步化扣減實(shí)際庫(kù)存后更新鎖定庫(kù)存等操作可以通過(guò)消息隊(duì)列異步進(jìn)行避免長(zhǎng)事務(wù)提升響應(yīng)速度。我們?cè)谶@個(gè)環(huán)節(jié)踩過(guò)一個(gè)大坑早期我們只用了Redis做庫(kù)存扣減在一次Redis集群主從切換導(dǎo)致數(shù)據(jù)短暫不一致時(shí)發(fā)生了少量超賣(mài)。教訓(xùn)就是緩存只能用于加速和緩沖不能作為唯一可信數(shù)據(jù)源。3.2 訂單服務(wù)狀態(tài)機(jī)與分布式ID生成訂單的狀態(tài)流轉(zhuǎn)非常復(fù)雜從“待付款”、“已付款”、“待發(fā)貨”、“已發(fā)貨”到“已完成”或“已取消”中間還可能穿插“退款中”等狀態(tài)。如果用簡(jiǎn)單的if-else來(lái)控制狀態(tài)變更代碼會(huì)很快變成一團(tuán)亂麻。我們引入了狀態(tài)模式并配合使用Spring StateMachine框架。我們將訂單狀態(tài)和可能觸發(fā)狀態(tài)變更的事件如“用戶(hù)支付”、“商家發(fā)貨”定義出來(lái)在配置文件中清晰地描述狀態(tài)轉(zhuǎn)換規(guī)則Configuration EnableStateMachine(name orderStateMachine) public class OrderStateMachineConfig extends EnumStateMachineConfigurerAdapterOrderStatus, OrderEvent { Override public void configure(StateMachineStateConfigurerOrderStatus, OrderEvent states) throws Exception { states .withStates() .initial(OrderStatus.PENDING_PAYMENT) .states(EnumSet.allOf(OrderStatus.class)); } Override public void configure(StateMachineTransitionConfigurerOrderStatus, OrderEvent transitions) throws Exception { transitions .withExternal() .source(OrderStatus.PENDING_PAYMENT).target(OrderStatus.PAID) .event(OrderEvent.PAY_SUCCESS) .and() .withExternal() .source(OrderStatus.PAID).target(OrderStatus.TO_BE_SHIPPED) .event(OrderEvent.MERCHANT_CONFIRM) .and() // ... 更多轉(zhuǎn)換規(guī)則 } }這樣業(yè)務(wù)代碼里只需要stateMachine.sendEvent(OrderEvent.PAY_SUCCESS)狀態(tài)機(jī)就會(huì)自動(dòng)根據(jù)當(dāng)前狀態(tài)和事件判斷能否轉(zhuǎn)換并執(zhí)行相應(yīng)的動(dòng)作如支付成功后觸發(fā)發(fā)送短信的動(dòng)作監(jiān)聽(tīng)器。代碼清晰且不易出現(xiàn)非法狀態(tài)流轉(zhuǎn)。另一個(gè)關(guān)鍵點(diǎn)是訂單號(hào)生成。單調(diào)遞增的數(shù)據(jù)庫(kù)自增ID會(huì)暴露業(yè)務(wù)量也不適合分庫(kù)分表。我們采用了Snowflake雪花算法的變體來(lái)生成全局唯一的訂單號(hào)。算法生成的ID是64位的Long型數(shù)字包含時(shí)間戳、工作機(jī)器ID、序列號(hào)等信息趨勢(shì)遞增、高性能、無(wú)需中心化協(xié)調(diào)。我們對(duì)其做了小幅改造將一部分位用于表示業(yè)務(wù)類(lèi)型如普通訂單、秒殺訂單方便日后根據(jù)訂單號(hào)快速路由。3.3 支付與清關(guān)處理跨境業(yè)務(wù)復(fù)雜性支付是資金入口必須穩(wěn)如磐石。我們抽象了一個(gè)統(tǒng)一的支付網(wǎng)關(guān)服務(wù)內(nèi)部定義了PaymentStrategy策略接口針對(duì)支付寶、微信、PayPal等不同支付渠道實(shí)現(xiàn)不同的策略類(lèi)。這樣當(dāng)需要接入一個(gè)新的支付方式時(shí)只需要新增一個(gè)策略實(shí)現(xiàn)即可對(duì)主流程代碼無(wú)侵入。支付回調(diào)處理是重中之重必須做到冪等。第三方支付平臺(tái)可能會(huì)因?yàn)榫W(wǎng)絡(luò)問(wèn)題多次發(fā)送相同的回調(diào)通知。我們的處理邏輯是回調(diào)接口首先根據(jù)第三方支付單號(hào)查詢(xún)本地是否已處理過(guò)該筆回調(diào)。如果已處理并成功直接返回“success”。如果未處理則在一個(gè)分布式鎖的保護(hù)下進(jìn)行訂單狀態(tài)更新、記賬等操作。處理完成后將第三方支付單號(hào)和處理結(jié)果記錄到“支付回調(diào)日志表”。無(wú)論成功失敗都記錄日志并做好監(jiān)控告警。對(duì)于跨境電商清關(guān)是另一個(gè)復(fù)雜環(huán)節(jié)。不同國(guó)家、不同品類(lèi)的商品申報(bào)要求、稅率都不同。我們?cè)O(shè)計(jì)了一個(gè)可配置的“清關(guān)模板”系統(tǒng)。商品上架時(shí)運(yùn)營(yíng)人員需要填寫(xiě)HS編碼、原產(chǎn)地、申報(bào)要素等。當(dāng)訂單生成后清關(guān)服務(wù)會(huì)根據(jù)收貨地址國(guó)家、商品信息自動(dòng)匹配模板組裝成符合海關(guān)要求的報(bào)文格式通過(guò)第三方清關(guān)代理系統(tǒng)進(jìn)行申報(bào)。這個(gè)過(guò)程也是異步的通過(guò)消息隊(duì)列驅(qū)動(dòng)避免阻塞主訂單流程。4. 性能優(yōu)化與穩(wěn)定性保障實(shí)戰(zhàn)系統(tǒng)能跑起來(lái)只是第一步能在大流量下穩(wěn)定運(yùn)行才是真本事。我們?cè)谶@方面投入了巨大的精力。4.1 緩存策略與數(shù)據(jù)庫(kù)優(yōu)化緩存是提升性能的銀彈但用不好就是炸彈。我們制定了多級(jí)緩存策略一級(jí)緩存本地緩存使用Caffeine或Guava Cache緩存一些極少變更的數(shù)據(jù)如國(guó)家地區(qū)編碼、貨幣匯率短期。設(shè)置合理的過(guò)期時(shí)間如5分鐘和最大容量防止內(nèi)存溢出。二級(jí)緩存分布式緩存使用Redis集群緩存熱點(diǎn)數(shù)據(jù)如商品詳情頁(yè)信息、用戶(hù)會(huì)話、購(gòu)物車(chē)數(shù)據(jù)。這里的關(guān)鍵是緩存鍵的設(shè)計(jì)和過(guò)期策略。例如商品詳情緩存的Key可以設(shè)計(jì)為product:detail:{skuId}:{lang}包含語(yǔ)言維度。我們大量使用Hash結(jié)構(gòu)來(lái)存儲(chǔ)對(duì)象減少網(wǎng)絡(luò)傳輸?shù)男ey數(shù)量。緩存穿透、擊穿、雪崩應(yīng)對(duì)穿透對(duì)于不存在的商品ID查詢(xún)將空值null也緩存一小段時(shí)間如30秒避免惡意請(qǐng)求直接打到數(shù)據(jù)庫(kù)。擊穿對(duì)于熱點(diǎn)Key如爆款商品使用Redis的setnx命令實(shí)現(xiàn)分布式互斥鎖。當(dāng)緩存失效時(shí)只有一個(gè)線程能去數(shù)據(jù)庫(kù)加載數(shù)據(jù)其他線程等待或返回舊數(shù)據(jù)。雪崩給緩存Key設(shè)置隨機(jī)的過(guò)期時(shí)間避免大量Key在同一時(shí)刻失效。數(shù)據(jù)庫(kù)層面除了主從讀寫(xiě)分離我們對(duì)單表數(shù)據(jù)量過(guò)大的表如訂單表進(jìn)行了分庫(kù)分表。使用ShardingSphere-JDBC作為中間件按照用戶(hù)ID的哈希值進(jìn)行分片。這里要特別注意涉及分片鍵的查詢(xún)效率很高但非分片鍵的查詢(xún)?nèi)绨从唵螘r(shí)間范圍查詢(xún)就會(huì)很麻煩。我們的做法是建立訂單創(chuàng)建時(shí)間的月度歸檔表或者將這類(lèi)查詢(xún)導(dǎo)向Elasticsearch。4.2 全鏈路監(jiān)控與告警系統(tǒng)復(fù)雜了出問(wèn)題是難免的關(guān)鍵是要能快速發(fā)現(xiàn)、定位、解決。我們搭建了基于Prometheus Grafana Alertmanager的監(jiān)控告警體系。應(yīng)用指標(biāo)每個(gè)Spring Boot服務(wù)都通過(guò)micrometer暴露JVM內(nèi)存、GC、線程池、HTTP請(qǐng)求量、耗時(shí)、錯(cuò)誤率等指標(biāo)給Prometheus。業(yè)務(wù)指標(biāo)我們自定義了業(yè)務(wù)埋點(diǎn)如下單量、支付成功率、庫(kù)存扣減失敗次數(shù)等同樣上報(bào)到Prometheus。鏈路追蹤集成SkyWalking每個(gè)外部請(qǐng)求都會(huì)生成一個(gè)唯一的traceId貫穿經(jīng)過(guò)的所有微服務(wù)。在Grafana上可以清晰地看到一個(gè)請(qǐng)求的完整調(diào)用鏈每個(gè)環(huán)節(jié)的耗時(shí)一目了然。當(dāng)接口變慢時(shí)我們能迅速定位是哪個(gè)服務(wù)、甚至是哪個(gè)數(shù)據(jù)庫(kù)查詢(xún)拖了后腿。日志收集所有服務(wù)的日志統(tǒng)一輸出為JSON格式通過(guò)Filebeat收集發(fā)送到Elasticsearch用Kibana進(jìn)行查看和搜索。通過(guò)traceId可以把一次請(qǐng)求的所有相關(guān)日志串聯(lián)起來(lái)排查問(wèn)題效率倍增。告警規(guī)則我們?cè)O(shè)置得很細(xì)致比如某個(gè)服務(wù)的錯(cuò)誤率在5分鐘內(nèi)持續(xù)高于1%某個(gè)接口的P99響應(yīng)時(shí)間超過(guò)1秒數(shù)據(jù)庫(kù)連接池使用率超過(guò)80%等。告警會(huì)通過(guò)釘釘、短信第一時(shí)間通知到值班人員。4.3 容器化部署與CI/CD為了提升部署效率和資源利用率我們將所有服務(wù)都進(jìn)行了Docker容器化。每個(gè)服務(wù)對(duì)應(yīng)一個(gè)Dockerfile里面定義了運(yùn)行所需的基礎(chǔ)鏡像、JVM參數(shù)、時(shí)區(qū)等。我們利用Jenkins搭建了完整的CI/CD流水線。開(kāi)發(fā)人員提交代碼到Git分支后Jenkins自動(dòng)觸發(fā)代碼質(zhì)量檢查運(yùn)行SonarQube掃描檢查代碼規(guī)范、漏洞和壞味道。單元測(cè)試運(yùn)行項(xiàng)目的單元測(cè)試確保覆蓋率。構(gòu)建鏡像通過(guò)Maven打包然后執(zhí)行docker build生成鏡像并推送到私有的Harbor鏡像倉(cāng)庫(kù)。部署到測(cè)試環(huán)境通過(guò)調(diào)用Kubernetes的API更新測(cè)試環(huán)境的Deployment滾動(dòng)更新服務(wù)。集成測(cè)試自動(dòng)運(yùn)行一組接口測(cè)試用例。人工確認(rèn)后一鍵部署生產(chǎn)。生產(chǎn)環(huán)境我們使用Kubernetes進(jìn)行編排管理。Kubernetes的Deployment保證了服務(wù)的高可用多副本Service提供了內(nèi)部服務(wù)發(fā)現(xiàn)Ingress作為外部流量入口。配合HPA水平Pod自動(dòng)擴(kuò)縮容我們?cè)O(shè)置了基于CPU利用率的自動(dòng)伸縮規(guī)則在大流量來(lái)臨前系統(tǒng)就能自動(dòng)擴(kuò)容實(shí)例流量低谷時(shí)自動(dòng)縮容極大地節(jié)省了服務(wù)器成本。5. 開(kāi)發(fā)與運(yùn)維中的“血淚”經(jīng)驗(yàn)談最后這部分分享一些在ECO項(xiàng)目開(kāi)發(fā)和運(yùn)維過(guò)程中用“學(xué)費(fèi)”換來(lái)的經(jīng)驗(yàn)這些在官方文檔里通常找不到。經(jīng)驗(yàn)一接口設(shè)計(jì)要“笨”一點(diǎn)兼容性要強(qiáng)一點(diǎn)。早期我們?cè)O(shè)計(jì)接口時(shí)追求“優(yōu)雅”經(jīng)常使用枚舉類(lèi)型作為參數(shù)或返回值。后來(lái)發(fā)現(xiàn)當(dāng)需要新增一個(gè)枚舉值時(shí)所有調(diào)用方包括前端、其他服務(wù)都必須同步升級(jí)否則就會(huì)反序列化失敗。后來(lái)我們定下規(guī)矩核心對(duì)外的API盡量使用字符串或整型常量并在文檔中明確其含義。這樣服務(wù)端可以向后兼容地添加新?tīng)顟B(tài)舊的調(diào)用方雖然不認(rèn)識(shí)新值但不會(huì)崩潰。內(nèi)部服務(wù)間通信可以使用Protobuf等強(qiáng)類(lèi)型協(xié)議但也要有版本管理意識(shí)。經(jīng)驗(yàn)二數(shù)據(jù)庫(kù)字段寧寬勿緊。在設(shè)計(jì)商品表時(shí)有個(gè)字段是“商品特性標(biāo)簽”產(chǎn)品經(jīng)理說(shuō)最多就三五個(gè)標(biāo)簽。我們圖省事就定義了一個(gè)varchar(50)。結(jié)果業(yè)務(wù)發(fā)展起來(lái)運(yùn)營(yíng)希望給商品打上幾十個(gè)標(biāo)簽還要支持搜索。改字段類(lèi)型是痛苦的涉及數(shù)據(jù)遷移和停服?,F(xiàn)在的做法是對(duì)于可能擴(kuò)展的、非核心的文本字段直接使用varchar(255)甚至text類(lèi)型。存儲(chǔ)成本在今天已經(jīng)很低但線上修改數(shù)據(jù)結(jié)構(gòu)的風(fēng)險(xiǎn)極高。經(jīng)驗(yàn)三異步消息一定要有補(bǔ)償和監(jiān)控。我們?cè)驗(yàn)橐粋€(gè)促銷(xiāo)活動(dòng)向消息隊(duì)列里狂發(fā)消息導(dǎo)致消費(fèi)者處理不過(guò)來(lái)消息大量堆積。更糟的是有些消息格式錯(cuò)誤消費(fèi)者一直報(bào)錯(cuò)、重試形成死循環(huán)拖垮了整個(gè)隊(duì)列。教訓(xùn)是生產(chǎn)端必須做流量控制不能無(wú)節(jié)制地發(fā)。消費(fèi)端一定要做好冪等和異常處理對(duì)于格式錯(cuò)誤、處理失敗的消息不能無(wú)限重試應(yīng)該轉(zhuǎn)移到死信隊(duì)列并發(fā)出告警讓人工介入處理。必須監(jiān)控消息隊(duì)列的堆積情況設(shè)置堆積告警閾值。經(jīng)驗(yàn)四不要過(guò)度設(shè)計(jì)但要為擴(kuò)展留好“錨點(diǎn)”。微服務(wù)不是萬(wàn)能解藥。在項(xiàng)目初期如果業(yè)務(wù)邊界還不清晰盲目拆分微服務(wù)只會(huì)增加運(yùn)維和聯(lián)調(diào)成本。我們的策略是初期可以做成一個(gè)“單體”但要在代碼層面做好模塊化隔離比如清晰的包結(jié)構(gòu)領(lǐng)域?qū)印?yīng)用層分離。同時(shí)在可能未來(lái)需要拆分的模塊之間優(yōu)先通過(guò)領(lǐng)域事件或API進(jìn)行通信而不是直接調(diào)用內(nèi)部方法。這樣當(dāng)這個(gè)模塊真的需要獨(dú)立成服務(wù)時(shí)遷移成本會(huì)低很多。這個(gè)通信接口就是預(yù)留的“錨點(diǎn)”。ECO項(xiàng)目從零到一再到穩(wěn)定支撐百萬(wàn)級(jí)用戶(hù)整個(gè)過(guò)程充滿(mǎn)了挑戰(zhàn)。技術(shù)選型沒(méi)有銀彈架構(gòu)設(shè)計(jì)也總是在做權(quán)衡。最重要的是團(tuán)隊(duì)要形成一套適合自己業(yè)務(wù)節(jié)奏和人員能力的方法論在追求技術(shù)先進(jìn)性的同時(shí)更要保證系統(tǒng)的穩(wěn)定和可維護(hù)性。這套源碼和其中蘊(yùn)含的設(shè)計(jì)思想是我們團(tuán)隊(duì)過(guò)去幾年經(jīng)驗(yàn)的結(jié)晶希望能為你帶來(lái)啟發(fā)。如果你在搭建類(lèi)似系統(tǒng)時(shí)遇到具體問(wèn)題歡迎交流探討。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
26uuu丁香婷婷五月| 天天操五月天| 超碰成人av| 99re热在线视频| 日本色婷婷| 五月婷丁香久久久| 玖玖综合色| 色情五月综合婷婷| 九月婷婷色色| 激情五月天无人视频在线| 欧美亚洲成人在线| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | www.五月天婷婷姐姐| 九 九九九AV| 性一交一乱一交A片久久四色| 99热大片| 久久五月丁香激情综合| 丁香六月激情综合| 久久伦乱| 亚洲有码在线视频| 伊人在线另类| www.五月天| 五月播播| 日韩在线婷婷五月天综合| 久久 婷婷 五月天| 午夜婷婷久久| 九热电影av| 久久小说| BBWCUCKOLD精品熟妇| 91九色视频在线观看| 激情婷婷五月天伊人在线观看| 欧美激情久| 国产小精品| 99热这里都是精品| 久99久99精品免| 噜噜噜噜在线| 2020久久婷婷五月| 五月婷婷天天色| 丁香五月老师| eeuus五月婷| 人妻激情视频| 九九综合九九| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 欧美英丁香开心快乐六月天网| 五月婷婷久久综合| 婷婷色综合| 天堂五月婷婷| 翔田千里 50岁 无码| 99re久热| 丁香五月婷婷综合激情啪啪啪啪啪啪啪 | 一区二区成人电影| jiujiu热在线视频| 久久综合综合久久| 精品国产va久久久久| 第五婷婷伊人丁香色| 丁香久久在线| 丁香婷婷浪潮AV久久综合| 97在线观视频免费观看| 九月丁香八月婷婷久久综合久97| 99re欧美精品| AV在线不卡网站| 91婷婷视频| 中文字幕无码人妻少妇免费视频| 婷婷丁香九色| 影音先锋综合网| 日韩三十六页| 婷婷丁香成人五月天| ady狠狠入| 伊人久久大香线蕉亚洲五月天,| 久久久久久久久久久久久久久久一道本| 97色吧| 丁香五月成人| 男同色五月开心五月激情五月| 少妇水多A片太爽了| 99精品视频免费观看| jiZZdr| 日本婷婷五月天| 深爱激情四射| 丁香婷婷色五月| 婷婷五月中文在线视频| 婷婷99视频精品| 综合久久影院| 国产99精品免费视频| 色婷婷成人网| 激情五月天色婷婷综合| 97色在线观看视频| 乱岳熟女50岁| 精品久久9| 99色在线观看免费| 天天艹夜夜艹| 超碰在线人妻| 9九色首页| 猫咪伊人久久| 婷婷色爱| 九九热在线视频| 超碰狠狠干99| 激情九月综合| 婷婷色成人| 99啪啪网| 影音先锋女人AA鲁色资源| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 亚洲乱码日产精品BD在线观看| 少妇性BBB搡BBB爽爽爽视頻| 五月婷婷婷综合网| 伊人久久五月天综合| 五月激情婷婷国产精品久久久久久 | 久久人操-久草婷婷-成人AV| 大香蕉天堂| 亚洲精品乱码久久久久久按摩观| 色婷婷狠狠色| 五月丁香六月婷婷啪啪| 香蕉大综综综合久久| wwwss在线观看| 深爱丁香激情| 色墦五月丁香| 日日噜狠狠| 国产日日夜夜操| 色视频五月天| 国产欧美日韩综合精品一区二区| 日本综合色色| 色99视频| 中文成人在线| 色婷婷中文字母五月丁香| Www.狠狠| 丁香五月之久操视频| 天堂网啪啪| 狠狠看狠狠| 五月婷婷片| 99无码黄色视频| 99亚洲无码| 国产精品色| 天天操综合网| 影音先锋一区| 都市激情五月婷婷亚洲| 丰满人妻妇伦又伦精品国产| 天天日天天舔天天摸| 丁香六月天堂| AAA级久久久精品| 国产激情av| 岛国av网| www.minyis.com【JT】实力收量可预付QQ2101460746 | 婷婷金品综合视频| 99ER热精品视频| 婷婷丁香色情| 久99久99精品免| 国产精产国品一二三在观看| 超碰人人草| 狠狠五月激情丁香六月| 我淫我色婷婷五月天激情四射| 99ri视频在线播放| 很很干夜夜干| 黄色AAAAAAA| www。狠狠干。com| 婷婷五月天影院| 91免费看片| 天天xxxxxx天天日| 7777国产盗摄农村女人| www 五月天 com| 丁香五月婷婷基地| eeuss人妻| 五月丁香综合中文| 2017人人操| 色色色色色色综合| 九九热超碰| 久婷| 九九青青草成人| 色婷婷综合在线| 777精品成人a v久久| 精品激情| 亚洲五月天,激情视频| 伊人五月婷婷| 婷婷丁香97| 九九九午夜视频| 九九色视频| 久久久天堂国产精品女人| 久热这里只有精品6官网亚洲| 五月天激情综合网| 中文字幕,综合,91| 色五月五月天| 狠狠爱深色婷婷综合| 丁香五月天无码AV| 婷婷丁香社区| 五月丁香基地| 999九九九久久久99HD| 丁香五月在线视频黑人| 99视频热99| 99惹精品视频| 婷婷综合偷拍| 丁香婷婷六月天| 丁香五月天.com| 五月综合激情视频在线| 四射综合网| 激情5月婷婷| 久草婷妨| 中文在线成人| 激情综合色网| 天天色天天操天天射| 99热这里只有精品23| 婷婷婷五月天最新综合你懂的| 男女啪啪做爰高潮无遮挡| 天天操天天操天天操| 成熟妇人A片免费看网站| 婷婷五月情色| 天天插天天日| 99热啪啪| 男人先锋久久| 五月久久婷婷成人网| 欧美激情中文字幕| 激情五月综合网| 天天干夜夜b| 一本到不卡高清DVD| 激情综合色播| 五月天综合久久| 色香蕉影院| 狠狠色无码| 五月丁香色欲| 婷婷五月花| 超碰成人在线观看| 国产黄色在线| 最新va在线播放| 超碰免费成人| 天堂久热| 色色色色色色网站| 亚洲五月天婷婷在线| 亚洲图色五月天| 免费看欧美成人A片无码 | 91紱請| 婷婷色情五月| 99热播放| 91热久88| 91久久婷婷| 五月丁香婷婷激情在线视频| 大香人妻| 婷婷成人五月天成人文学| 婷婷丁香五月天小说| 色婷婷丁香社综合| 大伊香蕉精品视频在线| 99久久久免费| 亚洲丁香五月在线观看| 狠狠搞五月天| 九月大香蕉| 激情爱爱网站| 五月丁香久久久| 综合色婷婷| 婷婷丁香在线| 在线观看亚洲视频影院| 丁香五月av在线| 日本欧美国产| 婷婷五月色花丁香社区| 91狠狠色丁香婷婷综合久久精品| 嫩草AV久久伊人妇女超级a| 欧洲S级在线观看| 天天爽天天| 国产美女视频久| 伊人六月丁香婷婷| 99re这里只有精品9| 超碰啪啪网| 亚洲激情婷婷| 美女精品一级不卡视频| 思思热精品在线观看| 91精品无码| 亚洲AV日韩在线观看| 五月婷婷激情| 亚洲操B| 激情综合网激情五月网| 丁香五月天在线观看视频| 婷婷成人av| 激情综合网色播五月| 婷婷五月综合激情免费| 五月天色婷婷基地| 夜夜做天天爽| 日日日,com| 亚洲AV免费国产电影| 久久久天堂国产精品女人| 久久性爱视频| 久久超视频| 狠狠干五码| 色愛综合网| 蜜臀99久久精品久久久久| 欧美S码亚洲码精品M码| 日本天天操| 91视频一起草| 精品人人操| 思思热视频| 天天草天天日| 狠狠干青青草| 久久综合激情五月天| 色综合丁香婷婷| 色yeye色综合| 色色五月丁香婷婷综合| 综合久久六月| 91一道本| 9l视频自拍九色9l视频在线观看| 一区三区视频有限公司| 激情五月婷婷综合网| 九九精品热| 亚洲成人在线播放| 99这里都是精品6| 91九色|疯狂|高潮|对白|| 婷婷五月天国产| 人人人va亚洲视频在线| 色爱终和网| 6080av| 性爱在线播放av| 婷婷激情小说网| 激情五月综合网| 91精品久久久久久综合五月天| 99精品人人| 9热在线观看| 日韩无码系列| 任你日视频| 五月天操逼网| 五月丁香久久精品在线观看| oumeisesewang| 中海油常州环保涂料有限公司| 97久久草草超级碰碰碰| 成人啪啪色婷婷久| 五月玖玖| 色婷婷丁香六月| 欧韩性爱| 久久99这里只有精品视频| 97涩涩丁香五月天| 99热6色| 中文av网| 婷婷综合| 日韩一本操| 欧美 色婷婷| 色婷婷在线视频观看| 色色热日| 色五月婷婷av| 狠狠色婷婷丁香六月| 97婷婷丁香五月天激情图片| 夜夜操,天天撸| 婷婷婷婷婷婷婷五月丁香| 亚洲色99| 偷拍五月丁香| 日本韩国视频在线观看社区免费的9| 亚洲第一成人无码A片| 99色视频| 日本在线观看91| 99久久www| 久久精彩综合视频| 婷婷五月天综合色| 九九re精品视频在线观看| 亚洲精品国产成人AV在线| 噜噜噜狠狠色综合| 微拍92| 97资源碰碰在线| site:xiongshengzz.com| 99在线观看免费精品视频| www激情网| 91九色欧美| 这里只有精彩视频| 色九九一二| www.97干视频| 九九视频这里是精品五月| 欧美草久久五月天91| 区美毛片子| 欧美交换配乱吟粗大25P| 久久男人网婷婷| 九九偷拍网| 色亚洲无码| 九九热视频思思| 色婷婷大香蕉| 婷婷丁香五月社区亚洲| 成人婷婷| 丁香五月激情啪啪| 开心激情站| www.婷婷.com| 激情婷婷六月天| 丰满少妇猛烈A片免费看观看 | 五月婷久久| 五月天婷婷深深爱| 五月激情小说| 五月婷婷偷拍| 五月丁香花开综合网| 色婷婷五月在线| www免费在线视频| 五月天堂婷婷| 国产密乳av一区二区三区四区| 99热网站| 182.t午在线观看| 免费看成人747474九号视频在线观看| w婷婷五月婷婷w| 91精品久久久久久| 丁香九色不卡aaa| 欧美大奶熟女噜噜噜噜| 成人版视频在线观看| 99热国品| 六月婷婷深深爱| 色婷婷五月天偷拍| 九九爱精品网站| 高清无码.com| 日本欧美在线| 久久99精品日本| 色五月天成人在线| 亚洲色五月| 日本啪啪天堂| 99这里热| 国产99久9在线| 国产精品色色色色| 丁香九月婷婷| 天天人人综合| 开心五月激情网| 丁香六月激情毛片| 五月丁香在线观看| 人妻丰满精品一区二区A片| 婷婷丁香久久| 色婷婷大香蕉| 国产avapp 网| 九九色综合网| 欧日韩成人| 丁香六月欧美| 91热手机在线| 99视频这里有精品| 99草视频在线观看| 五月婷色啪| 丁香激情五月天| 九九久久精品| 俺去也五月天| 九九免费精品在线视频| 开心五月深爱五月| 婷婷啪啪| 第四色五月激情网| 第九色区av天堂| 丁香五月婷婷激情小说| 欧美日综合| 五月丁香欧美综合| 色五月天激情| 91丨九色丨东北熟女| 久99视频在线观看| 无码se| 婷婷色在线| 婷婷黄色| 色五月婷婷老师| 五月网激情| 色色性爱视频| www.婷婷五月天啪啪| 五月婷婷综合激情| 亚洲成人在线免费| 五月天大香蕉| 亚洲乱码成人| 久久久精品99| 99精品热视频| 婷婷色五月综合丁香| 综合色久| 国产另类综合| 97电影99热| 大天天伊人| 久操人妻| 亚洲亚洲人成综合网络| 五月天亚洲色| 五月总合激情网| 嫩草AV久久伊人妇女超级A| 丁香六月狠狠| av操B网站| 精品无吗va视频免费观看| 4399高清无码视频| 日日操天天操| 五月情婷婷五月| 秋霞av吧| 激情综合色图| 狠狠狠狠狠狠草| 影音 五月 婷婷 久久| 婷婷五月综合激情小说| 五月婷激情影院| 日日夜夜天天综合| 少妇人妻凹凸视频| 精品99在线看| 精品夜夜澡人妻无码AV| 天天热夜夜操| 91九色中文字幕女在线观看| 色色国产| 日日噜狠狠色综合久| 大香蕉啪啪| 色爆五月| 婷婷五月天堂| 欧美成人五月天| 色婷婷影| 亚洲亚洲人成综合网络| 五月丁香好婷婷A片网| 欧美群妇大交乱婬网| 久久综合9| 99久久婷婷国产综合精品草原| 伊人色欲五月天| 91人人操.COM| 99综合色| 99热大全在线观看| 五月丁香中文婷婷中文| 日韩久久成人| 亚洲永久四色| 五月天成人综合| 亚洲 日韩色色| 亚洲成人AV在线| 亚洲妇女熟BBW| 综合色影院| 久久机只有这里精品| av色婷婷| 伊人大香蕉在线视频| 三男玩一女三A片| 99综合自拍| renre人人操国产超碰在线| 婷婷久久丁香五月| 中文字幕黄色电影网址| 国产99久| 久久综合99综合| 草草操操| 五月天婷婷基地综合网| 丁香六月激情蜜桃| 一级七香蕉| 天天做天天爱天天玩| 亚洲99视频| 久久婷五月婷| 日本一级| 五月久久| 91在线人| 极品嫩草| 97搞在线| 色婷婷丁香女女| 亚洲成av人影院| 狠狠色婷婷7777久| 丁香五月香蕉| 激情五月天天狠狠久久| 少妇人妻人伦A片| 情久久综合五月天| 26uuu国产激情视频| 亚洲热综合网在线观看| 狠狠狠狠免费| 亚洲色五月天在线| 就要爱综合| 九色七七| 五月婷婷与六月丁香图片激情| 9色免费网| 思思热99er| 九九99精品| 日狠狠| 亚洲六月色| 亚欧州精品视频| 97性视频| 噜噜噜狠狠色综| 97极品在线| 99乱视频| 六月丁香综合| 综合激情站| 五月天婷婷在线AN| 伊人久久婷婷| 亚洲99手机免费看视频| 六月香五月婷| 97韩国久久电影院| 噜噜色com| 色婷婷亚洲五月天| 粉嫩av懂色av蜜臀av熟妇| 在线观看免费狠狠色丁香香综合| 久久98热re| 色99在线观看| 六月丁香网| 色情综合| 五月婷婷久久大片| 亚洲无码www| 黄色一级影片| 久久久色婷婷五月天| 五月亭亭六月色| 五月婷婷中文网| 婷婷娱乐丁香综合网| 丁香五月婷婷色偷偷| 婷婷社区五月天| 六月婷婷久久| 中文激情网| 少妇出轨做爰高潮A片| 超碰人人摸AV| 色色五月婷婷久久| 欧美亚洲999| 婷婷丁香综合| 日本不卡中文字幕| 国产精品天天狠天天看| 久久久久久久久久久jjjj| 五月天婷婷色情| 亚洲免费观看高清完整版AV线| 日本一级一片免费视频| 亚洲欧洲色色| 亚洲色99| 亚洲黄色影视| 九热视频在线伦| 玖玖九九9999在线观看视频精品| 九热久| 色五月婷婷中文字幕在线观看| va中文资源在线观看| 久久精品66| 婷婷六月天天| 秋霞av吧| 亚洲综合久| 婷婷色5月天在线。| 久久精品只有这| 天天爽人人综合免费7799| 亚洲乱码日产精品BD| 婷五月天| 看黄的网站18禁| 丁香五月六月激情久久| 激情六月综合| 9999热精品| 日韩操人| 欧美日本一区二区三区| 性爱综合网| 久久婷婷免费| 丁香五月在线视频| 99热这里都是精品| 五月婷婷色| 综合亚洲AV| 操逼三区| 婷婷丁香五月天色色| 丁香综合网| 婷婷五月天免费| 婷婷九月丁香| 怡春院天天干| 丁香五月婷婷丫| 玖玖午夜视频| 色色色色色九九九九九| Se.婷婷五月天| 五月婷视屏在线观看| 狠狠操狠狠爱| 99视频91| 色婷婷五月亚洲| 另类天堂| 久久的爱大香蕉| 精国产品一区二区三区A片| 日本3级片一区2区| 思思久久96热在精品国产,| 婷婷99视频精品| 久久婷婷一级片| 天天爱天天做天天舔| 伊人激情综合网| 91啦丨九色丨刺激中文| 五月激情偷拍婷婷| 天天色视频| 五月天婷婷色色网| 婷婷五月天亚洲| 男人先锋久久| 婷婷久久国产视频| wwwss在线观看| 91色干| 97韩国久久电影院| 五月丁香花成人社区| site:xmssd.com| 婷婷少妇激情| av无码电影| 停停五月丁香| 9色天堂| 丁香五月 六月婷婷首页| 色吧综合网| 97碰久久| 黄色五月婷婷| www99精品| 精品色色| 久久刺激网| 中国激情网| 男人的天堂婷婷色五月| 婷婷开心综合人妻小说网址| 黑人糟蹋人妻HD中文字幕| 色色是色N一| 久久久精品色| 五月天丁香网站| 武则天精品久久| 久久人人九| 色婷婷五月天在线观看| 久99久视频精选| 日本va欧美va国产激情| 色五月中文字幕| 五月丁香婷婷综合视频| 色色综合院| 五月天婷婷在线AN| 中文字幕,综合,91| 午夜成人AV在线| 91九色精品女同系列| 亚洲视频五区| 少妇高潮一区二区三区99欧美| 久久9视频| 91干| 婷婷综合网| 色七色九九| 99爱视频| 激情黄色小说色五月| 久久久91| 激情 五月 婷婷 丁香| 开心五月婷婷| 校园激情 亚洲| www.第四色99| 99re这里只有精品视频了| 丁香九色不卡aaa| 丁香五月婷婷视频| 五月天综合在线| 色婷婷丁香五月| 色色色在线播放| 六月五月天婷婷涩播在线| 婷婷六月天激情影院| 亚洲中文AV| 岛国av网站| 丁香花五月天激情| 国产成人精品一区二三区熟女在线| 99这里只有精品在线观看| OYIWbGcPu8H| 十一月婷婷激情四射| 99热精品在线观看| 无码免费人妻A片AAA毛片西瓜| 综合一本道| 99精品一二三四视频| 天天天天天天操| 5月色亭亭视频| 青青操日本摸摸看看| 日本在线99| 丁香五月激情天AV无码| 亚洲综合色成丁香五月色| 亚洲精品国产精品乱码视99| 久久99免费视屏| 思思re最新视频| 激情久久久久久久久久久| 开心婷婷五月激情网小说| 无码少妇高潮喷水A片免费| 九九热视频精品| 国产精品久久久久久白浆色欲| 色色婷婷五月| 精品乱码久久久久| 综合五月草| 国产精品A片在线| 激情五月婷黄版| 亚洲丁香婷婷五月天综合色| WWW.五月com| 天天射综合网站| www,色中色| 五月丁香成人| www.ywav| 久热这里只有精品99re| 五月天亭亭俺也| 丁香五月综合激情久久潮喷| 狠狠色狠狠爱| 风流少妇A片一区二区蜜桃| www.夜夜| 色五月婷婷视频| 密视AV综合在线| 久久激情视频| 啪啪综合| 六月婷婷久久大全| 五月天激情综合网站| 九九热99熟女| 色五月 婷婷, 大香蕉| 色婷五月| 噜噜吧天天爱| 激情 婷婷 丁香五月天| 天天开心天天色| 激情图片久久| 伊人喵咪a V| 国产精品第一国产精品| 日韩成人AV在线| 另类激情五月| 丁香五月天信号| 色五婷婷| 日韩成人综合| 丁香婷婷成年| 婷婷丁香社区| 九九视频在线观看| 五月伊人网| 日韩五月丁香| 五月天激情婷婷丁香| 99 热| 成人亚洲精品| 超碰97久久| 丁香六月成人网| 亚洲三A| 99热6这里只有精品| 人人爱摸视频| 99综合色| 亚洲精品国产精品乱码不99| 天天干天天日日| 六月激情婷婷色| 99精品视频在线观看免费| 99热e| 26.uuu丁香五月婷婷| 久久综合九色综合88i| 国外亚洲成AV人片在线观看| 九九aV| 丁香五月婷婷大香蕉| 五月天婷婷丁香社区| 色五月婷婷激情五月| 久久精品系列| 97黑人精品区| 伊人网啪啪| 婷婷丁香五月天影院| 4399高清无码视频| 久久99网址| 久99久精品视频| 另类 在线| 久久五月天网| 久久网日本| 日韩一级片| 久久99热只有精品| 操人妻90p| 色五月成人婷婷| 九九视频免费| 五月丁香综合伦理片| 丁香五月天色| 五月深爱婷婷| 久久成人天| 色婷婷五月天视频在线| 日本狠狠网| 超碰色综合| 欧美丁香五月97色| 狠狠色婷婷7777久| 久久这里有精品| 综合婷婷五月天| 久久久人妻| 激情综合九月| 99碰碰| 人妻熟女一区二区AV| 狠狠婷婷综合| 亚洲成人AV在线| 97热久久五月婷婷| 婷婷五月天久久久| 婷婷五月天色综合翘| 激情五月丁香色婷婷| www国产亚洲色婷婷com| 九九热思思| 五月丁香性爱| 色色五月天激情| 五月丁香色停停啪啪啪| 色婷婷另类| www999日韩精品| 性爱先锋AV| 欧美va| 色偷偷五月天| 久久五月丁香| 国产高清av黄色看片| 色五月婷婷91在线| 色婷婷av在线| 色五月天成人在线| 99re这里只有| 五月天成人综合| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 久久激丁香| 蜜臀99久久精品久久久久| www.99婷婷| 99热精这里只有精品| 夜夜骑天天操| 五月丁香六月激情综合| 五月停视频天堂| 99热1| 激情图片婷婷| 天天综合五月| 无码人妻少妇色欲AV一区二区| 亚洲精品九九| 久热大香蕉| 婷婷五月天综合中文| 91久久精品无码一区二区三区| 国产精品a无线| 亚洲无码九九九| 天天五月丁香五月| 色婷婷AV久久久久久久| 丁香五月自拍| 99综合成人视频在线观看| 超碰久热| 精品51XX| 99热国产| 久久久久99精品成人网站| 色视五月天婷婷| 久久婷网| 激婷网| 色五月首页| 日韩五月丁香| 免费无码毛片一区二区A片| 99久精品| 五月停停丁香| 久久五月天综合| 一级黄色操B| 丁香五月成人论坛| 99熟女| 五月激情久久| 噜噜噜色噜噜| www.久热| 99色热视频| 久色国产| 久久久国产精品黄毛片| 92久久| 激情婷婷色五月| 久久99网站| 91色在线/日韩| 精品成人无码A片观看香草视频| 色爱综合网| 98热精品| 五月香六月婷| 五月丁香影视| 五月天婷婷操逼视频| 天天天天天日| 中文字幕成人网站| 五月婷婷六月丁香综合视频在线| 久久久27操| 婷婷六月天| 99色热视频| 被强行糟蹋的女人A片| 99在线观看| 婷婷成人视频| 黄色AAAAAAA| 日本va欧美va欧美| 国产欧美日韩综合精品一区二区| 色五月网址| 激情五月色婷婷| 欧美色碰| 天天色综合综合| 91中文狠狠综合| 五月丁香综合伦理片| 99成人| 久草五月| 日本色色色| 婷婷色九月| 噜噜操操| 91操片| 婷婷五月电影| 五月丁香操婷逼| 六月久久婷婷| 九色91美女| 久色网址| 色色色色色色五月婷婷| 欧美丁香五月| 99在线视频喷水| 婷婷五月天激情文学| 在线日韩av| 色婷婷丁香五月天在线观看| 久久月天堂| 激情五月天婷婷丁香| 婷婷激情五月天激情小说| 五月丁六月香| 国产日韩精品SUV| 五月天色官网| 久久受www免费人成| 人人看人人摸人人| 日韩啪图| www.婷婷| 中文字幕在线日亚洲9| 开心五月婷婷激情| 98毛片| 色狠狠色| 能看的av片| 午夜]香婷婷深深爱| 97色色在线视频| 青996青| 五月婷婷偷拍| 亚洲人妻av| 国产超碰在线| 国产精品激情五月天色婷婷| 日韩久久成人| 99热手机在线精品| 强伦轩人妻一区二区电影| 婷婷91| 色六月丁香婷婷狠狠干| 色婷婷网大全在线| www.婷婷五月| 9久国产精品| www久久久| 婷婷成人小说综合| 久久婷婷五| 99久久99久久综合| 色婷婷视频| 99色在线观看视频者| 五月天婷婷激情在线色图| 情色五月天网站| 丁香五月电影| 天天日,夜夜爽| 色婷婷丁香社综合| 五月天激情四射| 婷婷 久综合| 五月丁香婷婷五月色| 久久九精品| 丁香五月性爱| 久久97久久99久久综合欧美| 丁香五月在线播放| 色综天天综合| 91fuliwang| 91精品久久久久| 色五月色五天色情网| 夜夜资源站| 少妇AB又爽又紧无码网站| 婷婷色基地| 新97人人上人人| 99久久婷婷综合| 九九亚洲综合| 色播五月丁香综合| 久久超级碰碰| 久热在线中文字幕色999舞| 天堂五月婷婷| 九九精品片一| 色玖玖玖| 嫩BBB槡BBBB搡BBBB| 99在线精品视频| 亚洲精品乱码久久久久久综合| 婷婷五月欧美AA片免费| 五月天婷婷久久视频| 涩婷婷五月天| 成人五月天在线观看| 欧美成人AAA片一区国产精品| 91久久五月天| 五月婷婷开心爱| 婷婷99丁香| 成人av在线网| 日韩狠狠色| 久久欧洲综合网| 996热| 狠狠狠狠草草| 97五月天| 91久久精品无码一区二区三区| 五月激情综合五月| 丁香六月色| 一本大道嫩草AV无码专区| 五月天婷婷AV| 日本熟女一区二区| 色色色99韩| 任你爽在线视频| 五月婷婷六月色| 99操免费视频| 九九热这里只有精品31| 久久久久亚洲A∨成人乱码电影| 亚洲人成网站999综合| 99热在线观看| 亚洲国产99| 日韩aaaaa| 丁香五月狠狠综合欧美| 91久久久久久久久18| 蜜乳人妻一区二区三区| 九一娱乐在线观看视频| 丁香六月婷| 99热老网站| 天天色视频| 六月丁香成人网| 日本va网站| 99精品久久久久久久婷婷| 日本视频欧美观看免费| 久久久国产精品黄毛片| 色色色热热热| 九九久久综合| 91日视频| 噜噜狠狠色综合久| www,99热| 天天透天天摸天天舔| 色婷婷国色天香综合| 99热9| 97中文在线| 日韩在线成人电影| 国内久久久精品99| 五月婷婷丁香网| 色在线免费观看| 丁香五月婷婷免费视频| 男同91 | 五月丁香六月婷婷亚洲视频| 婷婷丁香六月影视| 久久婷婷五月国产激情综合片| 久99| 久久网日本| av在线免费播放| 丁香 久久| 啪啪丁香五月| 亲子乱AV一区二区三区下载| 久久婷中文字幕| 丁香五月婷婷欧美成人色图| 色级停停| 67久久| 久草婷婷视频| 9色在线视频精品观看| 五六月婷婷久久| 婷婷基地成人五月天| 中文字幕91,综合| 丁香婷婷老司机久操| 五月天婷婷网站| 91综合在线观看首页| 停停五月色宗合| 97热久久| 777久久久| 变态另类色图| 久久9999| 超碰AV在线| 色色婷| 色婷婷婷av| 天天操天天操天天操| 色宗合久久五月婷婷| 久热这里只有精品视频免费观看| 久机视频这只有精品| 99热只有| 亚洲热久久| 97福利视频| 五月天婷婷丁香成人网| 五月停视频天堂| 亚洲AV电影美洲AV电影| 国产三级片91| 亚洲色色色色色| 六月米奇色综合| 亚洲性图一区二区| 五月婷婷精品视频| 99色网站| 天天天干夜夜夜操| BBWCUCKOLD精品熟妇| 玖玖九九超碰| 婷婷色情五月| 99九九99九九九视频精彩| 激情桃色网| dingxiangtingtingliuyue| 丁香色婷婷| 久婷婷婷| www.五月天| 久久婷青青草原| 丁香五月六月综合激情| 97黑人精品区| 色噜噜狠狠色综| 久久九九在线视频| 五月花婷婷| 婷婷午夜| 久久33视频| 热99精品视频五月| 九九热这里有精品23| 夜夜爽天操| 丁香色综合| 国产精产国品一二三在观看| www.婷婷com| 亚洲啪啪视频| A色色| 人人干女人| 五月丁香啪啪网| 欧美色色色色色色色色| 五月丁香婷婷色色| 综合图区激情| 成人综合AV| 嫩草AV久久伊人妇女超级A| 99热插| 亚洲网站在线鸭子av| 丁香网五月天激情| 婷婷五月激情丁香| 色婷婷激情视频| 久久综合中文| 九月婷婷久久久| 日本熟女内射| 婷婷五月天激情开心网| 丁香五月在线| 狠狠色九月| 广东99色在线| 人妻九九九九| 亚洲六月色| 久久东京热婷婷五月| 丁香五月婷婷激情中文| 外国碰视频网站97| 日韩av变天就操逼不卡区| 精品人人操| 99热日韩| 五月婷在线| 3p久久| 极品五月天| 五月色婷婷综合| 中文字幕av网站| 成人欧美一区二区三区在线观看| 亚洲va成人va成人va在线观看| 大伊香蕉精品视频在线| 久婷婷五月天影院| 丁香六月AV| 久久久人妻| 91国产精品视频播放| 日本女va| 9l视频自拍九色9l视频自拍九色9l社区 | 九九 激情 网| 日逼免费视频 | 99激情| 91聚色综合网| 六月婷婷五月丁香首页| 婷婷久久五月丁香| 91趴趴| 国产乱妇乱子伦| 国产小精品| 亚洲精久久| 国产.亚洲.欧洲视频在线| 就去色色五月丁香婷婷久久久| 夜夜涩涩涩| 综合久久影院| 激情婷婷综合网| site:publishdd.com| 久久精品99国产精品日本| 六月丁香激情综合网| 日日操日日撸| 欲求不满的人妻| 天天干天天叉| 麻豆AV一区二区三区| 欧美天天爽| 美日韩成人| WWW久久久| 97碰碰视频| 色欧美日| 丁香婷婷婷五月| 九九视频在线观看视频6| 六月五月丁香五月欧美| 亚洲天天操| 99热这里都是精品| 天天爽天天操| 丁香花五月天社区| 五月天久久婷| 亚洲免费av观看| www激情| 亚洲黄色操逼| 国产资源91在线| 中文字幕在线观看视频www| 自拍偷窥99热| 欧美日韩999| www.zbzhongsen.com| 久久五月天激情| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 六月婷婷日| 精品一区二区三区免费毛片爱| 久久丁香| 免费亚洲婷婷| 天天爽爽日日做做| 大香蕉五月天| 天天日人人| 裸睡玩奶头(高H)| 婷婷五月天在线综合导航| 五月天精品| 26uuu欧美亚洲日韩| 成人做爰黄A片免费看直播室男男| 国产1区2区3区在线观| a久久| 激情五月丁香在线观看直播| 婷婷五月丁香激情| 天天射夜夜骑| 久久您您综合网| 婷婷在线免费| 五月丁香九九| w婷婷五月婷婷w| 亚洲操逼网| 三男玩一女三A片| 狠狠草婷婷| 97在线观视频免费观看| 这里只有免费的精品| 涩玖玖免费视频| 九九热10| site:hcxsz888.com| 桃色五月天| 五月深爱激情网| 超碰色婷婷| 丁香六月五月天| 天天爽曰日爽| WWW、日本色丁香、co m| 色色a| 大香蕉久久伊人婷婷五月丁香| 成人综合网站| 精品无码99| 97婷婷狠狠久久综合9色| 激情九九六月激情免费视频| 99日韩| 俺去也婷婷| 久久天堂婷婷五月| 麻豆WWWCOM内射软件| 久久激情综合| 第四色婷婷日本| www.丁香六月婷婷久久天堂影院.con| 久久久人妻系列| 五月天天堂久久| 亚洲激情网| 99热这里只有精品无码| 五月天停婷基地| 嫩BBB槡BBBB搡BBBB| 色五月六月| 久婷久婷激情肉| 中文字幕日产A片在线看| 五月婷婷色激情| 丁香五月天婷婷在线视频| 老师的粉嫩小又紧水又多A片视频 欧美三级巜人妻互换 | 毛片网站谁有|