欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Canal Docker部署性能調(diào)優(yōu):從單容器到K8s的實戰(zhàn)指南

Canal Docker部署性能調(diào)優(yōu):從單容器到K8s的實戰(zhàn)指南 1. 項目概述為什么我們需要關(guān)注Canal的Docker啟動方式在數(shù)據(jù)同步和實時數(shù)據(jù)處理的領(lǐng)域里Canal這個名字對于很多后端和數(shù)據(jù)處理工程師來說已經(jīng)不再陌生。它扮演著數(shù)據(jù)庫“搬運工”的角色悄無聲息地監(jiān)聽MySQL的binlog然后將數(shù)據(jù)變更事件實時推送到下游的Kafka、RocketMQ或者直接給到應(yīng)用消費。我最早接觸Canal是在一個微服務(wù)架構(gòu)的訂單系統(tǒng)中當(dāng)時需要將訂單狀態(tài)的變更實時同步到Elasticsearch里做搜索和報表手動解析binlog的復(fù)雜度和維護(hù)成本讓我望而卻步Canal的出現(xiàn)直接解決了這個痛點。隨著容器化技術(shù)的普及Docker幾乎成了應(yīng)用部署的標(biāo)配。把Canal塞進(jìn)Docker容器里好處顯而易見環(huán)境隔離、一鍵部署、版本管理和資源控制都變得異常簡單。但問題也隨之而來——Canal在Docker里怎么啟動才最合適是簡單跑個單機(jī)版還是用Docker Compose編排一套帶管理界面的抑或是為了生產(chǎn)環(huán)境的高可用上Kubernetes不同的啟動方式在資源占用、性能表現(xiàn)、運維復(fù)雜度上差異巨大。直接影響到數(shù)據(jù)同步的延遲、吞吐量以及整個系統(tǒng)的穩(wěn)定性。我見過不少團(tuán)隊在開發(fā)環(huán)境用docker run命令跑得挺好一到生產(chǎn)環(huán)境面對稍大的數(shù)據(jù)流量容器就頻繁O(jiān)OM內(nèi)存溢出或者CPU被打滿同步延遲飆升。這往往不是因為Canal本身不行而是啟動方式和資源配置沒摸對門道。所以今天我們就來深挖一下Canal在Docker下的三種主流啟動方式單容器命令啟動、Docker Compose編排啟動、以及面向生產(chǎn)的Kubernetes部署。我會結(jié)合真實的壓測數(shù)據(jù)和調(diào)優(yōu)經(jīng)驗告訴你每種方式適合什么場景背后的性能關(guān)鍵點在哪里以及如何通過調(diào)整JVM參數(shù)、容器資源限制和Canal自身配置把它的性能榨干確保你的數(shù)據(jù)同步流水線既快又穩(wěn)。2. 三種Docker啟動方式深度解析與選型選擇哪種Docker啟動方式絕不是拍腦袋的決定它需要綜合考慮你的團(tuán)隊規(guī)模、項目階段、運維能力和性能要求。下面我們就來逐一拆解看看它們各自的“脾性”。2.1 方式一單容器命令啟動——快速驗證與開發(fā)利器這是最直接、最快速的方式適合個人學(xué)習(xí)、功能驗證或者開發(fā)測試環(huán)境。你只需要一條docker run命令一個Canal服務(wù)就起來了。docker run -d --name canal-server \ -p 11111:11111 \ -e canal.instance.master.address192.168.1.100:3306 \ -e canal.instance.dbUsernamecanal \ -e canal.instance.dbPasswordcanal \ -e canal.instance.filter.regex.*\\..* \ canal/canal-server:latest這條命令做了幾件事以后臺模式運行一個名為canal-server的容器將容器內(nèi)的11111管理端口映射到宿主機(jī)通過環(huán)境變量傳入MySQL主庫地址、賬號密碼以及要監(jiān)聽的表過濾規(guī)則這里是監(jiān)聽所有庫所有表最后指定使用官方的canal-server鏡像。它的核心優(yōu)勢在于“快”和“簡”。無需編寫任何配置文件對于想快速體驗Canal功能、測試某個MySQL實例的binlog解析是否正?;蛘唛_發(fā)階段需要臨時搭建一個數(shù)據(jù)同步源這種方式是首選。你可以在一分鐘內(nèi)完成部署并開始測試。注意這種方式將所有配置通過環(huán)境變量傳遞雖然方便但只適用于最基礎(chǔ)的配置。對于復(fù)雜的配置如定義多個數(shù)據(jù)源destination、調(diào)整網(wǎng)絡(luò)參數(shù)、設(shè)置ZooKeeper地址等就顯得力不從心了。而且容器內(nèi)的配置是“一次性”的容器刪除后配置就沒了不適合需要持久化的場景。性能與資源考量在默認(rèn)情況下這樣啟動的Canal容器其JVM參數(shù)也是默認(rèn)的。對于小數(shù)據(jù)量的測試沒問題但如果突然來一波大的數(shù)據(jù)更新可能會因為GC垃圾回收頻繁或內(nèi)存不足導(dǎo)致同步卡頓。在開發(fā)階段我建議即使這樣啟動也最好加上資源限制為后續(xù)調(diào)優(yōu)做個鋪墊docker run -d --name canal-server \ --memory2g --cpus1 \ -p 11111:11111 \ ...其他環(huán)境變量這里限制了容器最多使用2GB內(nèi)存和1個CPU核心防止測試時它占用過多宿主機(jī)資源影響其他服務(wù)。2.2 方式二Docker Compose編排啟動——標(biāo)準(zhǔn)化團(tuán)隊協(xié)作與集成部署當(dāng)你的項目需要將Canal與MySQL、ZooKeeper用于Canal Server高可用和管理、管理界面Canal Admin等組件一起部署時單條命令就變得冗長且難以管理。這時Docker Compose的優(yōu)勢就體現(xiàn)出來了。它通過一個docker-compose.yml文件定義和運行多容器的應(yīng)用。version: 3.8 services: zookeeper: image: zookeeper:3.8 container_name: zookeeper ports: - 2181:2181 restart: unless-stopped canal-server: image: canal/canal-server:latest container_name: canal-server depends_on: - zookeeper ports: - 11111:11111 environment: - canal.zkServerszookeeper:2181 - canal.admin.managercanal-admin:8089 - canal.admin.useradmin - canal.admin.passwdadmin # 更多實例配置可通過volume掛載 volumes: - ./canal-server/conf:/home/admin/canal-server/conf - ./canal-server/logs:/home/admin/canal-server/logs restart: unless-stopped deploy: resources: limits: memory: 4G cpus: 2 canal-admin: image: canal/canal-admin:latest container_name: canal-admin depends_on: - canal-server ports: - 8089:8089 environment: - server.port8089 - spring.datasource.urljdbc:h2:./conf/canal-admin.h2;MODEMYSQL - canal.admin.useradmin - canal.admin.passwdadmin volumes: - ./canal-admin/conf:/home/admin/canal-admin/conf - ./canal-admin/logs:/home/admin/canal-admin/logs restart: unless-stopped這個編排文件定義了一個典型的Canal微服務(wù)集群先啟動ZooKeeper作為協(xié)調(diào)服務(wù)然后啟動Canal Server它依賴ZooKeeper并且通過卷volumes將本地的配置目錄和日志目錄掛載到容器內(nèi)實現(xiàn)了配置和日志的持久化最后啟動Canal Admin提供一個Web管理界面。這種方式的核心價值在于“聲明式”和“可復(fù)用”。配置文件即文檔新成員加入項目一看docker-compose.yml就知道整個Canal棧的構(gòu)成和依賴關(guān)系。通過docker-compose up -d一鍵啟動所有服務(wù)docker-compose down一鍵清理極大地簡化了環(huán)境搭建和銷毀的流程非常適合中小型團(tuán)隊的測試、預(yù)發(fā)布甚至生產(chǎn)環(huán)境。性能調(diào)優(yōu)的切入點配置持久化通過volumes掛載conf目錄允許你在宿主機(jī)上精細(xì)地編輯canal.properties和instance.properties。這是性能調(diào)優(yōu)的基礎(chǔ)你可以修改線程池大小、批處理尺寸、網(wǎng)絡(luò)超時等關(guān)鍵參數(shù)。資源預(yù)定義在Compose文件中直接使用deploy.resources.limits或老版本的mem_limit,cpus為容器預(yù)設(shè)資源上限。這比在docker run時指定更清晰也便于版本管理。依賴管理depends_on確保了服務(wù)啟動順序避免了因依賴服務(wù)未就緒而導(dǎo)致的啟動失敗提升了部署的可靠性。2.3 方式三Kubernetes部署——面向生產(chǎn)的高可用與彈性伸縮對于大規(guī)模、高可用的生產(chǎn)環(huán)境Kubernetes (K8s) 是更專業(yè)的選擇。它將Canal的每個組件Server, Admin都視為一個微服務(wù)通過Deployment、StatefulSet、Service、ConfigMap等資源對象進(jìn)行管理。為什么生產(chǎn)環(huán)境需要考慮K8s核心就兩點高可用HA和彈性伸縮。單點運行的Canal Server一旦掛掉整個數(shù)據(jù)同步就會中斷。在K8s里你可以輕松地為Canal Server部署多個副本Replicas并通過Service實現(xiàn)負(fù)載均衡和故障轉(zhuǎn)移。當(dāng)監(jiān)控發(fā)現(xiàn)同步延遲增加或資源使用率過高時可以基于HPAHorizontal Pod Autoscaler自動擴(kuò)容Canal Server的實例數(shù)。一個簡化的Canal Server Deployment配置可能如下apiVersion: apps/v1 kind: Deployment metadata: name: canal-server spec: replicas: 2 # 兩個副本實現(xiàn)高可用 selector: matchLabels: app: canal-server template: metadata: labels: app: canal-server spec: containers: - name: canal image: canal/canal-server:latest ports: - containerPort: 11111 env: - name: canal.zkServers value: zookeeper-service:2181 resources: requests: memory: 2Gi cpu: 500m limits: memory: 4Gi cpu: 2 volumeMounts: - name: canal-config mountPath: /home/admin/canal-server/conf volumes: - name: canal-config configMap: name: canal-server-config --- apiVersion: v1 kind: ConfigMap metadata: name: canal-server-config data: canal.properties: | # 這里放入你的canal.properties完整內(nèi)容 canal.zkServerszookeeper-service:2181 canal.serverMode kafka ... example-instance.properties: | # 這里放入一個實例的配置 canal.instance.master.addressmysql-master:3306 ...這種方式的挑戰(zhàn)與優(yōu)勢挑戰(zhàn)在于復(fù)雜度高需要團(tuán)隊具備一定的K8s運維能力。優(yōu)勢則是提供了企業(yè)級應(yīng)用所需的全部特性服務(wù)發(fā)現(xiàn)、配置集中管理ConfigMap、密鑰安全管理Secret、滾動更新、資源配額與監(jiān)控集成。性能調(diào)優(yōu)在這里變成了對Pod資源請求requests和限制limits的精確把控以及對整個K8s集群資源的合理規(guī)劃。選型總結(jié)單容器命令啟動適用于個人學(xué)習(xí)、快速概念驗證PoC、臨時調(diào)試。追求極致的簡單和速度。Docker Compose啟動適用于中小型項目、團(tuán)隊開發(fā)測試環(huán)境、CI/CD流水線。平衡了易用性、可維護(hù)性和一定的生產(chǎn)就緒能力。Kubernetes部署適用于大型生產(chǎn)環(huán)境、需要高可用和彈性伸縮的場景。雖然前期投入大但為系統(tǒng)的長期穩(wěn)定和可擴(kuò)展性提供了堅實基礎(chǔ)。3. 核心性能調(diào)優(yōu)參數(shù)與實踐指南確定了部署方式只是萬里長征第一步。要讓Canal在Docker里跑出最佳性能必須深入其內(nèi)部從JVM、容器資源、Canal自身配置三個層面進(jìn)行精細(xì)調(diào)優(yōu)。這部分內(nèi)容是區(qū)分“能用”和“好用”的關(guān)鍵。3.1 JVM層調(diào)優(yōu)給Canal一個穩(wěn)健的“心臟”Canal是Java應(yīng)用JVM參數(shù)直接決定了其內(nèi)存使用效率和垃圾回收行為。在Docker環(huán)境中尤其需要注意內(nèi)存參數(shù)的設(shè)置因為容器有明確的內(nèi)存限制。關(guān)鍵參數(shù)解析-Xms 和 -Xmx堆內(nèi)存初始與最大大小這是最重要的參數(shù)。必須設(shè)置為相同的值。為什么在容器環(huán)境中如果Xms和Xmx不同JVM會嘗試根據(jù)使用情況在兩者之間調(diào)整堆大小這個調(diào)整過程Resize本身是STWStop-The-World的會導(dǎo)致應(yīng)用暫停。更嚴(yán)重的是當(dāng)內(nèi)存使用增長時如果容器內(nèi)存限制Cgroup limit已經(jīng)接近XmxJVM嘗試擴(kuò)容堆可能會觸發(fā)容器OOM Killer直接殺掉進(jìn)程。因此固定堆大小可以避免運行時調(diào)整也讓內(nèi)存規(guī)劃更清晰。# 在Docker run命令中設(shè)置 -e JAVA_OPTS-Xms4g -Xmx4g # 或者在Dockerfile或entrypoint腳本中設(shè)置JAVA_OPTS環(huán)境變量-XX:MaxMetaspaceSize元空間上限存放類元數(shù)據(jù)。如果不設(shè)置默認(rèn)是無限使用受限于容器內(nèi)存存在耗盡容器內(nèi)存的風(fēng)險。建議設(shè)置一個上限如256m或512m。垃圾回收器選擇對于Canal這類延遲敏感的后臺服務(wù)推薦使用G1Garbage-First收集器。它在延遲和吞吐量之間取得了較好的平衡尤其適合堆內(nèi)存較大的情況。-e JAVA_OPTS-Xms4g -Xmx4g -XX:MaxMetaspaceSize256m -XX:UseG1GC -XX:MaxGCPauseMillis200-XX:MaxGCPauseMillis200是給G1的一個目標(biāo)希望每次GC暫停時間不超過200毫秒G1會努力達(dá)成這個目標(biāo)但不保證。容器內(nèi)存與JVM內(nèi)存的關(guān)系這是一個極易踩坑的點。容器的內(nèi)存限制-m 4g或 K8s中的limits.memory是硬上限。JVM的堆內(nèi)存Xmx是JVM向操作系統(tǒng)申請的一部分。Xmx必須顯著小于容器內(nèi)存限制。因為除了堆JVM進(jìn)程本身、線程棧、本地內(nèi)存Direct Buffer、元空間、還有Canal可能依賴的本地庫如網(wǎng)絡(luò)緩沖區(qū)都需要內(nèi)存。一個經(jīng)驗法則是容器內(nèi)存限制 Xmx 1GB ~ 2GB。例如你給容器分配了4GB那么Xmx設(shè)置為2.5GB到3GB是比較安全的。設(shè)置得過于接近很容易觸發(fā)容器OOM。3.2 容器資源層調(diào)優(yōu)劃定清晰的“邊界”Docker通過Cgroups控制容器的資源使用。不合理的資源限制會成為性能瓶頸。CPU限制--cpus或--cpuset-cpus。對于Canal Server它需要足夠的CPU來解析binlog、序列化數(shù)據(jù)、進(jìn)行網(wǎng)絡(luò)傳輸。如果限制過緊在數(shù)據(jù)高峰期會導(dǎo)致解析和發(fā)送隊列積壓延遲增加。建議根據(jù)實際負(fù)載監(jiān)控來調(diào)整。在K8s中requests.cpu是調(diào)度依據(jù)limits.cpu是硬限制。內(nèi)存限制如上所述需要與JVM參數(shù)配合設(shè)置。務(wù)必設(shè)置防止單個容器拖垮宿主機(jī)。I/O與網(wǎng)絡(luò)Canal需要頻繁讀寫本地文件日志、元數(shù)據(jù)和網(wǎng)絡(luò)通信。在物理機(jī)或云主機(jī)上確保容器使用的磁盤是SSD以獲得更好的日志寫入性能。網(wǎng)絡(luò)方面確保容器與MySQL、下游消息隊列如Kafka之間的網(wǎng)絡(luò)延遲低、帶寬足。在Docker Compose或K8s中讓這些服務(wù)部署在同一個網(wǎng)絡(luò)或可用區(qū)可以減少網(wǎng)絡(luò)開銷。3.3 Canal應(yīng)用層調(diào)優(yōu)精準(zhǔn)控制數(shù)據(jù)流這是最體現(xiàn)業(yè)務(wù)特性的調(diào)優(yōu)層面主要修改canal.properties和instance.properties。canal.serverMode與下游發(fā)送如果下游是Kafka (canal.serverMode kafka)重點調(diào)優(yōu)canal.mq.*參數(shù)。例如canal.mq.flatMessage true發(fā)送扁平化的JSON消息通常解析效率更高。canal.mq.canalBatchSize和canal.mq.canalFetchTimeout控制一次從Canal Server獲取消息的批大小和超時時間。增大canalBatchSize可以提高吞吐但會增加單次處理的延遲和內(nèi)存占用。需要根據(jù)下游消費者的消費能力平衡。canal.mq.maxRequestSize控制發(fā)送到Kafka的單個請求最大字節(jié)數(shù)需要匹配Kafka Broker的message.max.bytes配置。canal.instance相關(guān)參數(shù)canal.instance.parser.parallel是否啟用并行解析。對于有多個數(shù)據(jù)庫schema或大量表的情況開啟并行true可以充分利用多核CPU提升解析速度。canal.instance.parser.parallelThreads并行解析的線程數(shù)建議設(shè)置為容器分配的CPU核心數(shù)或略少。canal.instance.transaction.size事務(wù)合并的大小。Canal會嘗試將多個小事務(wù)合并后投遞。增大此值可以減少下游消息數(shù)量提升吞吐但會略微增加端到端延遲。需要根據(jù)業(yè)務(wù)對實時性的要求來定。網(wǎng)絡(luò)與超時canal.instance.network.receiveBufferSize/canal.instance.network.sendBufferSizeTCP緩沖區(qū)大小。在高吞吐場景下適當(dāng)調(diào)大如1048576可以減少網(wǎng)絡(luò)I/O次數(shù)。canal.instance.detecting.interval檢測MySQL主庫是否存活的間隔。生產(chǎn)環(huán)境可以適當(dāng)調(diào)低如5秒以便更快感知主庫故障。canal.instance.detecting.timeoutThreshold檢測超時閾值。如果網(wǎng)絡(luò)不穩(wěn)定可以適當(dāng)調(diào)大。調(diào)優(yōu)實踐步驟基準(zhǔn)測試在調(diào)整任何參數(shù)前先用一個代表性的數(shù)據(jù)流量進(jìn)行測試記錄當(dāng)前的吞吐量TPS/QPS、同步延遲、CPU和內(nèi)存使用率作為基準(zhǔn)。一次只改一個參數(shù)這是黃金法則。同時修改多個參數(shù)你無法知道是哪個參數(shù)起了作用或引發(fā)了問題。監(jiān)控與觀察調(diào)整后運行壓力測試密切監(jiān)控GC日志通過-Xloggc輸出、Canal自身日志、以及容器資源使用情況docker stats或 K8s Metrics。迭代優(yōu)化根據(jù)監(jiān)控結(jié)果判斷是CPU瓶頸、內(nèi)存瓶頸還是I/O瓶頸然后有針對性地調(diào)整相應(yīng)層次的參數(shù)。4. 實戰(zhàn)部署與性能壓測對比理論說再多不如實際跑一跑。我搭建了一個測試環(huán)境MySQL 8.0生成持續(xù)增刪改的流量Canal Server 1.1.7下游對接一個Kafka集群。分別用三種方式部署Canal并施加相同的負(fù)載來觀察它們的表現(xiàn)。測試環(huán)境統(tǒng)一宿主機(jī)4核CPU16GB內(nèi)存SSD磁盤。MySQL持續(xù)以約5000 TPS的速率產(chǎn)生binlog。Kafka3節(jié)點集群Topic配置3分區(qū)。監(jiān)控工具使用docker stats、jstat、Canal Admin界面、Kafka監(jiān)控。4.1 單容器命令啟動壓測啟動命令如前所述并賦予容器2核CPU、4GB內(nèi)存限制JVM堆內(nèi)存設(shè)置為2.5GB。表現(xiàn)在負(fù)載平穩(wěn)期同步延遲可以穩(wěn)定在100毫秒以內(nèi)資源使用正常。但當(dāng)模擬MySQL出現(xiàn)一個短暫的大事務(wù)批量更新10萬行時問題出現(xiàn)了。Canal解析這個大事務(wù)消耗了大量內(nèi)存由于是單容器無高可用整個過程延遲飆升到數(shù)秒并且docker stats顯示容器內(nèi)存使用率長時間超過90%接近OOM邊緣。結(jié)論這種方式抗突發(fā)流量的能力較弱。適合流量平穩(wěn)、無高可用要求的場景。一旦出現(xiàn)大事務(wù)或流量尖峰風(fēng)險較高。4.2 Docker Compose啟動壓測使用前面給出的Compose文件Canal Server同樣配置2核/4GB并掛載了優(yōu)化后的配置文件主要調(diào)整了canal.mq.canalBatchSize1000默認(rèn)500和canal.instance.parser.paralleltrue。表現(xiàn)平穩(wěn)期延遲與單容器類似。在面對同樣的大事務(wù)時由于開啟了并行解析CPU利用率更高解析速度有所加快大事務(wù)導(dǎo)致的延遲峰值從數(shù)秒降低到1-2秒。通過掛載的日志可以清晰看到GC情況G1收集器表現(xiàn)平穩(wěn)未出現(xiàn)長時間的Full GC。最大的優(yōu)點是通過Canal Admin可以圖形化地監(jiān)控各個實例destination的同步位點和延遲運維體驗大幅提升。結(jié)論Docker Compose方式在可維護(hù)性和可觀測性上優(yōu)勢明顯。通過配置文件調(diào)優(yōu)也能有效提升一定的性能。是測試和中小規(guī)模生產(chǎn)的理想選擇。4.3 Kubernetes啟動壓測在Minikube中部署了2副本的Canal Server Deployment每個Pod請求1核/2GB限制2核/4GB。通過ConfigMap管理配置并通過Service暴露。表現(xiàn)這是最穩(wěn)健的一種。首先兩個Pod提供了高可用能力雖然測試中未主動殺死Pod。其次K8s的調(diào)度器保證了Pod分配到的資源。在壓測工具突然將TPS提高到10000時雖然單個Pod的CPU使用率接近極限但整個服務(wù)依然能維持延遲增長在可接受范圍內(nèi)500毫秒左右。如果配置了HPA此時可以自動觸發(fā)擴(kuò)容。結(jié)論K8s部署方式在資源隔離、高可用和彈性方面具有不可替代的優(yōu)勢。它能更好地應(yīng)對流量波動和節(jié)點故障為生產(chǎn)環(huán)境的穩(wěn)定性保駕護(hù)航。當(dāng)然復(fù)雜度也最高。壓測數(shù)據(jù)對比摘要啟動方式平均延遲 (平穩(wěn)期)大事務(wù)延遲峰值資源利用率運維復(fù)雜度高可用性單容器命令~80ms 5000ms高易觸及限制極低無Docker Compose~80ms1000-2000ms中等可控中需額外配置Kubernetes~90ms500-1000ms均衡彈性高內(nèi)置5. 常見問題排查與運維技巧實錄在實際運維中你會遇到各種各樣的問題。這里記錄了幾個我踩過的坑和對應(yīng)的解決方案。5.1 容器啟動失敗Virtualization Support Not Detected這個問題在Windows或Mac上使用Docker Desktop時常見尤其是第一次安裝后。錯誤信息通常是“Docker Desktop failed to start because virtualisation support wasnt detected”。原因與解決這通常是因為宿主機(jī)的虛擬化功能如Intel VT-x或AMD-V在BIOS/UEFI中被禁用或者被其他軟件如某些安卓模擬器、舊版Hyper-V占用。重啟進(jìn)入BIOS/UEFI確保CPU的虛擬化技術(shù)VT-x/AMD-V是Enabled狀態(tài)。關(guān)閉沖突軟件徹底關(guān)閉或卸載VMware Workstation、VirtualBox、以及各種安卓模擬器。Windows用戶確?!癢indows功能”中的Hyper-V、Windows Subsystem for Linux (WSL)和虛擬機(jī)平臺已啟用。WSL 2是Docker Desktop推薦的后端。使用wsl --update更新WSL內(nèi)核。5.2 Canal連接MySQL失敗Access DeniedCanal容器日志中報錯ERROR c.a.otter.canal.parse.inbound.mysql.tsdb.MemoryTableMeta - executor failed when dumping table : xxxxxx. Access denied for user canal% to database xxxxxx。原因與解決這通常是MySQL賬號權(quán)限不足。Canal需要的權(quán)限比普通應(yīng)用賬號多。創(chuàng)建專屬賬號不要使用root賬號。專門為Canal創(chuàng)建一個用戶例如canal。授予足夠權(quán)限這個賬號需要SELECT、REPLICATION SLAVE、REPLICATION CLIENT權(quán)限。如果是MySQL 8.0可能還需要顯式授予SHOW VIEW權(quán)限。CREATE USER canal% IDENTIFIED BY your_strong_password; GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT, SHOW VIEW ON *.* TO canal%; FLUSH PRIVILEGES;檢查防火墻與網(wǎng)絡(luò)確保Canal容器所在網(wǎng)絡(luò)能夠訪問MySQL的3306端口。5.3 同步延遲高CPU/內(nèi)存飆升這是性能問題中最常見的現(xiàn)象。排查思路看日志首先查看Canal Server日志是否有大量的ERROR或WARN特別是解析錯誤或網(wǎng)絡(luò)超時。查監(jiān)控CPU高使用docker stats或kubectl top pod。如果CPU持續(xù)接近限制可能是canal.instance.parser.parallelThreads設(shè)置過高或者遇到了非常復(fù)雜的SQL解析如沒有主鍵的全表更新??梢試L試適當(dāng)降低并行度或者檢查MySQL側(cè)是否有不合理的批量操作。內(nèi)存高結(jié)合JVM GC日志分析。如果頻繁Full GC說明堆內(nèi)存不足需要調(diào)大-Xmx同時等比例調(diào)大容器內(nèi)存限制。如果堆內(nèi)存使用正常但容器總內(nèi)存高可能是堆外內(nèi)存Direct Buffer泄漏常見于網(wǎng)絡(luò)傳輸大量數(shù)據(jù)時。可以嘗試在JVM參數(shù)中添加-XX:MaxDirectMemorySize進(jìn)行限制。下游瓶頸延遲可能不是Canal造成的。檢查下游Kafka的堆積情況。如果Kafka消費者消費慢Canal發(fā)送的消息就會積壓在內(nèi)存隊列里導(dǎo)致內(nèi)存上漲和延遲增加。需要優(yōu)化下游消費者的性能或增加分區(qū)數(shù)。大事務(wù)這是延遲飆升的常見元兇。一個事務(wù)包含數(shù)十萬次修改Canal需要將其解析、組裝再發(fā)送這個過程非常耗時??梢酝ㄟ^Canal日志看到大事務(wù)的警告。解決方案通常是在業(yè)務(wù)端避免如此大的事務(wù)或者調(diào)整canal.instance.transaction.size讓Canal不要等待太久而是分批發(fā)送。5.4 配置文件不生效或掛載權(quán)限錯誤在Docker Compose或K8s中通過Volume掛載了本地的配置文件但啟動后Canal還是使用了鏡像內(nèi)的默認(rèn)配置。解決檢查掛載路徑確保volumes映射的宿主機(jī)路徑和容器內(nèi)路徑完全正確。容器內(nèi)路徑通常是/home/admin/canal-server/conf。檢查文件權(quán)限D(zhuǎn)ocker容器通常以非root用戶如admin運行。確保宿主機(jī)上的配置文件對這個用戶是可讀的??梢杂胏hmod 644 your-config.properties修改權(quán)限。檢查文件內(nèi)容確保配置文件語法正確沒有中文亂碼或格式錯誤。最簡單的驗證方法是先啟動一個臨時容器用cat命令查看容器內(nèi)掛載的文件內(nèi)容是否正確。對于K8s ConfigMap確保ConfigMap已正確創(chuàng)建并掛載。使用kubectl describe pod canal-server-xxxx查看Pod的事件和Volume掛載狀態(tài)使用kubectl exec -it canal-server-xxxx -- cat /home/admin/canal-server/conf/canal.properties查看容器內(nèi)的實際文件內(nèi)容。5.5 鏡像源與版本選擇建議直接使用canal/canal-server:latest雖然方便但在生產(chǎn)環(huán)境存在風(fēng)險因為latest標(biāo)簽會變動。最佳實踐使用具體版本標(biāo)簽例如canal/canal-server:v1.1.7。這保證了部署的一致性便于回滾和問題追蹤??紤]自建鏡像如果網(wǎng)絡(luò)環(huán)境拉取Docker Hub鏡像慢可以先將官方鏡像推送到私有的鏡像倉庫如Harbor或者基于官方鏡像在Dockerfile中添加一些公司特定的工具或配置構(gòu)建自己的業(yè)務(wù)鏡像。版本升級關(guān)注Canal的GitHub Release頁面。升級前務(wù)必在測試環(huán)境充分驗證新版本與當(dāng)前MySQL版本、下游組件的兼容性。特別注意配置項是否有變更。最后關(guān)于性能調(diào)優(yōu)我的體會是它永遠(yuǎn)是一個動態(tài)平衡的過程。沒有一套放之四海而皆準(zhǔn)的參數(shù)。最好的方法是建立完善的監(jiān)控容器資源、JVM GC、Canal日志、同步延遲設(shè)定明確的性能基線SLA然后根據(jù)實際業(yè)務(wù)負(fù)載的變化持續(xù)地觀察、分析和小步調(diào)整。從簡單的單容器開始隨著業(yè)務(wù)增長平滑過渡到Compose或K8s架構(gòu)每一步都做到心中有數(shù)你的Canal數(shù)據(jù)同步鏈路才能真正成為業(yè)務(wù)穩(wěn)定可靠的“大動脈”。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
AV在线不卡播放| 久久五月天色婷婷| 先锋资源91| AAA久久久| 五月6香色婷婷视频| 风流少妇A片一区二区蜜桃| 九九久久五月天综合伊人| 午夜AV网| 蜜桃人妻无码AV天堂三区 | 成人视频在线免费播放| 丁香五月天成人| 色五月丁香网| 五月五丁香婷婷| 国产AV不卡福利| 色999亚洲人成色| www.ppypp| www.五月天色色色| 4438亚洲欧美| 五月丁香啪啪激情| 五月综合婷婷五月| 日日狠狠久久偷偷四色综合免费| 丁香色影院| 99热碰碰热| 天天做天天爱天天爽在| 一月婷婷色色| 国内久久亭亭| 91成人看| 99日热在线视频| 五月丁香啪啪激情| 另类视频丁香五月| 丁香五月在线伊人| 激情五月,激情综合网| 日本三级日本三级99| 国产乱妇乱子伦| 日91高清无玛| 99视频这里有精品免费观看| 思思99re这里只有| 五月婷婷丁香五月亚洲色| 色青五月天| 99视频在线观看地址| 婷婷天堂综合| 色综合久久44| 日韩人妻无码精品| 99久在线视频| 欧美色图天堂网| 婷婷色五月丁香六月欧美啪| www.婷婷五月| 泰州成人视频| WWW.17C亚洲精品| 五月天激情婷婷小说| 那里有AV网址| 婷婷五月深深的爱| 五月开心婷婷| 久久视频这里有精品99| 丁香婷婷视频在线| 欧美色色色色色色| 精品乱码久久久久| 色爱99| 亚洲五月天婷婷在线| 久久er免费视频| 97色碰| 亚韩在线视频| 精a品a视a频| 中文无码婷婷| 久热这里有精品视频| 激情久久久久久| 天天插天天插天天插天天插| 色综合九九| 亚洲色另类| 超碰成人电影| 激情AV| 丁香五月天啪啪| 婷婷九月综合| 91蜜桃婷婷狠狠久久综合9色| 中文不卡一二区| 色五月成人网| 九九久久偷拍| 亚洲六月色婷婷| 婷婷精品综合| www.com亚洲网站在线免费| 日本丰满久久| 99久在线精品99re8热| 婷婷色五月激情强奸四射| 91久久久久久久91| 婷婷五月激情的图片| 丁香五月天在线观看视频| 桃色五月婷婷| 五月婷AV| 男女99免费视频| 涩婷婷五月天在线精品视频 | site:xiongshengzz.com| 99精品热视频只有精品10| 久久久精品视频79| 五月色色激情网| 天天碰夜夜爽| 五月色影院| 大学生高潮无套内谢视频| 国产成人精品一区二三区熟女在线| 丁香五月天.com| 色综合色| 99热精品网| 五月激情综合网| 欧美日韩大黄| 大香蕉天堂| 天天做天天爱天天高潮| 日韩美女在线视频19| 色五月色图| WWW五月天| 五月丁香六月激情啪| 五月婷婷综合丁香视频| 国产亚洲精品久久久久久郑州| 99操视频| 人妻免费网站| 激情婷婷五月天网址| 这里只有精彩亚洲视频推荐| 开心五月婷婷激情| 日本97在线视频| va中文资源在线观看| www.99成人视频| YJLZZJLZZ亚洲乱熟无码| 久久婷婷亚洲| 综合99久久天天综合| 亚洲sesesese| 亚洲在线综合| 久久精99| 色婷婷亚洲在线| 五月天丁香成人| 99精品偷自拍| 91成人电影| 久久人妻系列| 人人草人人舔| 九九av| 伊人五月成人| 五月婷庭丁香在线| 天天射综合网站| 色99久草在线| 六月亭亭久久综合激情| 热久久这里只有精品| 国产亚洲精品AAAAAAA片 | 青草网在线观看| 丁香六月视频免费观看| 天天日天天肏天天奸| www.五月婷婷| 婷婷色网站| 国内久久婷婷| 婷婷五月天在线综合| 丁香成人五月天| 97五月天婷婷综合激情网| 都市激情五月婷婷综合| 色色色热| 热无码A∨| 久婷| 玖玖婷婷五月天| 伊人婷婷五月天| WWW久久99久久99久久| 亚洲无码成人网| 97色久| 一起操 91N.com| 天天激情夜夜干| 99视频久久| 五月丁香婷婷综合| 色婷婷成人在线| 俺去也婷婷| 五月丁香激情四射综合| 丁香五月在线| 久久黄色网扯| 99riAV成人在线视频| 欧美va国产va| 91a片爽| 伊人综合网4| 五月婷婷丁香六月| 精品综合久久久久久五月天| 偷拍九九热| 97色伦另类图片小说视频 | 国产小精品| 天堂AV三级| 久热这里只有精品6| 一区二区你懂的| www.金莲av| 激情五月综合ì香亚洲| 色综合中文综合网| 色五月成人| www.AV在线| 久久人人妻| 婷婷久久影院| 色五月婷婷五月| 色婷婷成人丁香| 亚洲精品V天堂中文字幕| 五月人妻婷婷| 97干在线看| 99热丁香| 人人干天天操五月丁香| 永久热91| 国产人妻777人伦精品HD| 亚洲婷婷丁香五月亚洲| 久久影视婷婷五月| 92久久精品一区二区| 综合五月天天天天天五月| 国产真实乱对白精彩| 激情综合激情五月| 婷婷色中文| 婷婷开心激情| 99热这里只有精品搜| 丁香久月| 五月网站| 五月婷婷激情久久| 天天爽天天干天天| 熟女乱论网| yjzz亚洲国产| 五月婷婷六月丁香综合| 天天擼久久擼在线| 婷婷 久综合| 性做爰1一7伦| 亚洲激情综合网| 开心五月婷婷六月丁香| 五月停停色色丁香| 色婷婷yy久| 美欧成人视频| 六月婷婷激情小说网| 一起草av在线观看| 92久久精品一区二区| 综合在线丁香五月| 97人人草| 五月天丁香成人| 三十熟女| 96丁香六月婷婷蜜桃综合久久| a九九热www| 九九亚洲视频| 欧美99| 99视频精品8| 婷婷五月丁香综合| 久久九九国产| 五月天婷婷色综合| 国自产拍偷拍精品啪啪一区二区| 丁香狠狠| 免费色色色| www.五月天色色色| 加勒比久热| 久久久国产精品黄毛片| 久久a热| 五月婷婷丁香综合网| 亚洲综合字幕色色| 影音先锋一区| 99热费观看| 内射 无码 伊人| 婷婷狠狠操| 天天插天天爱| 夜夜干天天操| 免费亚洲婷婷| 天天色天天日天天舔| 五月婷丁香亚洲| 国产色色在线| 久久网站免费亚洲| 亚洲成人网站在线观看| 一起草Av| 九九黄色网| 久久激情五月网| aaaa久久| 91久久精品视频| www.97视频| 丁香五月天婷婷激情| 五月停停999| 99视频这里只有精品10| 国产色色色色| 性爱久久| 久色网| 久久综合影院 | 99热丁香五月| 欧美日韩成人免费在线| 人人妻人人澡| 日本熟女视频一区二区| 国产精品成人在线| 狠狠色噜噜狠狠色噜噜噜999| 久久密臀婷婷| 国产美女无遮挡裸体毛片A片| 久久网思思| 开心五月丁香综合久久| 天天色天天舔天天爱天天爽| www.99成人视频| 思思精品久久艹| 九九热思思热| 五月婷婷丁香俺日污视频| 99色一| 日本九九热| 手机激情网| 色五月六月婷婷| 26uuu国产精品| 色婷婷五月天综合网| 婷婷五月天com| 综合久久五月| 色欲久久久久久综合网综合网| 人人干AV| 五月天婷婷小说| 色爱99| 色婷婷六月天在线| 夜夜骑天天操| 狠狠干综合| 激情综合五月丁香| 91性高潮久久久久久久久| 99re热在线视频观看| 亚洲免费av在线| 91色综合| 色五月在线综合| 色月丁| 日韩人妻在线观看| 日日操日日干| 综合久久综合久久| 久在线88综合| 色五月综合激情| 天天射夜夜爽| 五月综合激情网| 99精品视频网站| 国产精品天天狠天天看| www.婷婷六月天| 色六月天天激情综合网| 可以免费观看的AV| 极品人妻VIDEOSSS人妻| 五月丁香婷婷啪啪综合| 天天摸日日舔狠狠添婷婷婷| 色婷婷免费观看| 国产精品久久久久久久久久免费 | 婷婷丁香综合网| 九月色婷婷婷| 亚洲AV激情五月综合网| 日韩淑女人妻luan伦激情精品一区二| 可以免费观看的av| 亚洲视频综合网| 97碰成超视频免费视频| 婷婷成人丁香色情基地30| 婷婷五月天综合久久| 深爱综合网| 久久3级片| 99色在线| 婷婷五月天丁香久久| 9色视频在线| 99性爱无码| 91色五月| 五月天激情图片网| www激情com| 久99| 婷婷亚洲综合| 中文字幕激情综合| 免费V片在线| 色五月丁香总合网| 久久久com| 激情淫乱男女| 91久久婷婷人人澡草| 天天做天天爱| 婷婷五月天堂| 黄网在线免费观看| 婷婷综合影院| 色五月五月婷婷| 婷婷视频在线碰| 精品视频这里只有精品| 能直接看的av网站| 97资源碰碰| 丁香五月手机在线| 99ri国产精品| www激情婷婷com| 日韩在线观看网址| 99综合99| 精品99*| 六月丁香深深爱| 99这里有精品| 亚洲精品va| 日本91在线| 久久网婷婷| 婷婷中文字幕版| 中文字幕欧美日韩VA免费视频| 9久热精品在线视频| 99热婷婷| 狠狠干综合| 一区色色色色网| 亚洲成人AV在线观看| 久久五月天网| 欧美97色| 五月天色婷婷激情综合| 国产精品色色| 热这里| 丁香婷婷狠狠97| 人人天堂操| 国产精品美女久久久久AV超清 | 九九精品在线视频观看| 五月丁香成人网| 色婷婷久久| 久久五月丁香| 亚洲超碰在线| 久久久这里有精品| 亚洲AV免费国产电影| 九九热99热| 99热99日天天干| 播五月丁香六月| 97婷婷久久丁香| 五月婷婷在线免费| 欧美日朝成人| 丰满少妇猛烈A片免费看观看| 国产成人在线不卡AV| 99热99在线| 婷婷人人操| 九九热这里| 99成人网站| 最近中文字幕2019视频1| 丰满人妻一区三区三区| 青青操丝袜美腿| 欧美在线视频免费播放| 深爱激情网五月| www.9操| 色XX综合网| 97色热| 九九色综合| 人人视频色| a在线免费v| 亚洲日日日| 丁香五月第九色| 国产AV一区二区三区最新精品| 任你艹| AⅤ网站在线看| 五月天亚洲色| 亚州激情在线视频| 激情性爱网站| 欧美大片免费播放器| av免费人人| 五月丁香六月婷婷成人| 九九综合九| 五月丁香婷婷深深爱| 婷婷丁香色五月亚洲| 久9综合| 九九热10| www,99热| 色五月av伊人| 99精品自拍视频| 超碰人人摸人人操| 丁香五月婷婷六月| 岛国av网站| 亚洲色婷婷99一9|| 另类国产欧美视频| 精品一二三区久久AAA片| 噜噜网免费视频| www.婷婷五月天| 玖玖爱伊人网| 丁香啪啪| 久久九九视频| 亚洲久久婷婷| 丁香五月天人体| 9福利性视频欧美| 五月综合激情久久| 色婷婷成人做爰A片免费看网站| 婷婷国产综合| 99re在线精品视频| 亚洲一二三网| 激情综合久久| 欧美乱码国产一级A片| 天堂爱爱| 五月婷婷六月丁香激情深爱| 婷婷久久性爱| 色综合中文色综合网| 亚洲狠9| 日本婷婷| 91丨九色丨东北熟女| 思思re视频在线| 五月天激情综合网俺也去| 视频1区2区| 亚洲成人电影在线免费观看| 五月婷婷色欲| 国产精品久久久爽爽爽麻豆色哟哟 | www狠狠爱com| 色色热日| 日本 色综合| 激情6月| 免费看欧美成人A片无码| 久久久激情| 亚洲色夜| 在线视频你懂得| 9久热在线视频精品| 五月天婷婷社区| 狠狠干思思热| 五月五婷婷| www.狠狠艹| 激情综合五月色丁香婷婷| 天天上天天爽| 成人欧美Va| 甈你aaaaa| 操逼福利视频| www.丁香五月| 天天综合网在线| www.minyis.com【JT】实力收量可预付QQ2101460746 | 先锋影音av色五月天资源站| 激情98色婷婷五| 九九黄色网| 激情色播| 无码人妻少妇色欲AV一区二区 | 国产av天天插天天操天天爽| 久久婷婷超碰| 久久综合五月婷婷| 人人操插| 婷婷久久五月天亚洲欧美国产日韩在线观看| 色综合久久8| 1024AV视频| 五月综合激情网| 国产古装妇女野外A片| 乱精品一区字幕二区| 免费无码毛片一区二区A片| 五月天激情国产综合婷婷婷| 久久婷婷一级片| 天啪天啪天啪天啪| 欧美日韩国产一区| av婷婷丁香 六月| 色综合五月在线| 色99欧洲色19| 香蕉狠狠爱视频| 91操熟女| 超碰成人公开| 99热热这里只精品996小说| 97操视频| 五月天色网站| 九九aV| 狠狠色综合网| wwww.9免费视频| 色综合久久中文| 激情深愛五月視頻| 五月婷婷在线免费观看| 色色色网站| 色婷婷五月天av在线| 无码动漫av| 色婷婷成人丁香| 激情五月综合网最新| 亚洲在线综合| 天堂在线伊久| 91性高潮久久久久久久久| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 综合久| 97伦乱| 9久国产精品| 丁香涩涩五月天| 婷婷五月电影| 成人国产网| 91 九色 熟女| 天天日日夜夜爽。| 狠狠干狠狠干| 另类精品视频在线观看| www,26uuu,c0m,色情| 97色色视频| 玖玖热99| 婷婷激情丁五月| 综合色99| 97色啪| 夜夜天天久久婷婷| 国产亚洲99久久精品| 99久久国产综合精品五月天喷水\| 天天碰夜夜操| 五月婷婷开心亚洲无| 丰满熟女人妻一区二区三| 激情五月婷婷| 亚洲五月婷婷| 欧美视频五区| 五月天丁香综合在线| 天天操夜夜夜拍拍拍| 五月丁香激情六月| 激情五月天婷婷丁香| 婷婷97C| 包操45分钟网站| 人妻九九九九| 激情五月婷婷色综合| 亚洲人人96@| 成人婷99最新| 99精品一二三四视频| 丁香六月亭亭久久综合| 青青草青青草五月天| 欧美天天爽| 99热国产精品| 97资源碰碰| 午夜婷婷久久 | 天天摸.天天mo| 4399在线日本A片| 丁香五月ⅤA久久久| 婷婷操久久| 九九视频这里有精品| 亚洲精品又粗又大又爽A片| 色色操| 成人在线网| 亚州操逼网| 五月婷婷六月色| 久久99免费视屏| 丁香婷婷五月基地| 丁香九月激情在线视频| 五月婷婷啪啪啪啪| 日hao1区| 丁香五月91| 97人人操人人| 五月婷在线| 華人性愛AV在線| 激情婷婷丁香| 99er在线观看| 操b视频在线观看一区二区| 夜丁香五月婷婷| 操操熟女| 成人在线视频网| 国产亚洲色婷婷久久99精品91| 婷婷五月天首页| 久久五月天激情| 无码中文一区二区三区| 69超碰在线| 丁香五月婷婷手机| 超碰高清在线| 色色色9| 人人爱干人人爱草| 久久5 9视频免费观看| 日本在线免费中文com.| 91人人人人人| 第五色婷婷| 激情另类综合| 少妇2做爰HD韩国电影| 思思热精品在线| 天天爽日日搞| 99精品女人天堂| www,99热| 草综合网| 日韩AV在线电影| 久艹大香蕉| 五月婷婷开心深| 天天爱天天天射AV| 涩综合网| 97婷婷丁香五月天激情图片| 婷五月天六| 久久a热| 热的无码综合视频| 五月天婷婷操逼视频| 日韩无码专区| 丁香婷婷五月| VA日本视频| 狠狠综合| 99爱视频在线| 久婷婷五月激情| 一区二区三区四区牛| 色色网站| 婷婷六月丁| 婷婷偷拍网| 久久久久久久久18久久| 久热91精品| 丁香六月爱综合| 外国碰视频网站97| 五月丁香色停停啪啪啪| 激情五月天在线视频| 丁香五月在线观看完整版| 婷婷五月天堂| 强辱丰满人妻HD中文字幕| 激情五月影院| 婷婷五月天在线观看av| 97欧美在线| 久久黄色片| 国产精品爽爽久久久久久| 久久与婷婷| 七七久久综合| 性无码专区无码| 久久大香蕉同僚| 俺去也在线视频| 伦乱美欧| 丁香五月激情宗合网| 97婷婷丁香五月天激情图片| 在线中文AV| 亚洲碰碰碰| 天天爽夜夜爽| 丁香花五月天| 亚洲激情无码久久| 色九九综合| 丁香五月激情综合婷综| 亚洲激情六月丁香| 超碰在线免费观看3 9| 欧美激情五月天| www99精品| AVDV久久| 色婷婷小说网| 婷婷六月天激情| 亚州精品久久久久AV无码| 激情综合五月激情| 97碰碰视频在线观看| 任你日热视频| 婷婷娌伦网| 操日本色| 久啪欧美| 夜夜爱影院| 国产精品视频网| 亚洲无码九九九| 月丁香久久久| 九九激情视频| 狠狠干在线| 色噜噜五月丁香婷婷| Www.Av网9| 久久人人添人人爽添人人片αV| 天天日天天插| 激情五月婷婷五月丁香五月开心五月| site:xmssd.com| 久久天堂色| 岛国AAAV| 伊人久久丁香狠狠婷婷综合香蕉 | 九热免费视频| 丁香婷婷五月激情| 亚洲在线资源| 97自拍视频在线| 婷婷久久五月| 日韩人妻在线观看| 久操激情| 五月天综合缴情网网站0| 婷婷五月蜜桃成人桃色丁香| 婷婷六月丁香色| 婷婷五月天亚洲图片| 日日狠狠久久偷偷四色综合免费 | 96精品成人无码A片观看金桔 | 天天色天天射天天日| 日韩成人av在线| 九九热只有精品6| 就爱操www com| 丁香婷婷五月天色播| 可以直接看的av网站| 国模淫穴色图| 夜色综合网| 国产激情久久| 99精品国产在热久久| 97luluse| 激情啪啪五月| 五月婷婷亚洲天堂激情在线| 人人色AV| 亚洲丁香五月美女| 丁香六月色婷婷| 综合激情在线| 激情小说五月天| 97luluse| 无码动漫av| 成人五月天在线观看| 日本特黄aaaaa| 五月丁香六月婷婷姐| 思思热99热| 日韩青青| 亚洲区视频| 蜜臀av在线成人电影| 婷婷九月亚洲| 亚洲精品V天堂中文字幕| 艹天天射| 森林影视大全,最好看的2019年视频| 色五月丁香总合网| 99精品视频网| 婷婷五月花| 婷婷操超碰| 亚洲性爱99在线| 色色五月天丁香| 丰满女老板BD高清A片| 色色五月综合| 色婷婷伦理| 超碰免费人妻| 大香蕉视频婷婷| a网站免费观看| 综合色五月| 99热这里只有精品免费| 综合超碰熟| WWW、日本色丁香、co m| 五月婷婷丁香五月| 日韩黄在免| 97人妻碰碰碰碰碰久久久久久| 31色区视频免费看| 日韩无码一区二区三区四区| 97九色视频| 影音先锋91网站在线观看| 久9热在线视频| 五月综合婷婷五月| 五月伊人91| 九九热九九| 亚洲啪啪啪啪| 91啪啪啪啪| 五月精品免费XXX| 99热这里只有精| 久久激情五月婷婷| 丁香五月婷婷香| 9热在线| 丁香婷婷免费| 综合五月天| 色婷婷www| 婷婷丁香五月网| 91九色 熟| 亚洲日韩人妻操逼| 婷婷狠狠干| 操操国产| 久久婷婷综合网| www91久久| 婷婷五月天堂| 亚洲啪啪精品| 99无吗| 狠狠精品干练久久久无码中文字幕 | 五月婷婷开心亚州在线| 婷婷五月花.97| 五月丁香六月婷婷中合网| 女人天堂AV| 在线另类| www色婷婷| 五月婷婷激情日本| 人人爽亚洲| 伊人大香蕉毛片| 天天日夜夜夜操操操操| 五月天色色色| 九九精品自拍| 激情网五月天| 丁香婷婷色色| 色99视频| 婷婷在线观看五月天在线视频| 99热12| 天天色凹凸| 婷婷五月天黄色小说| 91国产精品视频播放| 日韩十国产极品久久| 99操网站| 亚洲va综合va国产va中文| 99爱在线| 久久99精品久久久久久三级| 99精品一二三四视频| 91婷婷搞| 丁香六月亚洲| 婷婷丁香精品视频在线观看| 人人干人人操人人摸| 狠狠色色综合| 99热这里都是精品| 色高清无码视频| 色色六月| 五月丁香婷婷深深爱| 欧美影院婷婷| 久机视频这只有精品| 久久中文人妻系列| 双性美人被调教到喷水A片| 老司机午夜福利视频金瓶梅| av高清无码| 日日操夜夜骑| 91黄操| 亚洲爆乳无码精品AAA片蜜桃| 亚洲啪视频| 免费视频WWW在线观看网站| 亚洲五月情| 激情五月天的婷婷| 丁香五月婷婷基地| 丁香六月激情蜜桃| 亚洲免费av在线| 日韩成人电影AV| 五月天色婷婷视频| 婷婷色色欧美| 国外亚洲成AV人片在线观看| 婷婷五月色情天| 久久精彩综合视频| 麻豆WWWCOM内射软件| 天天干夜夜欢| 天天射综合网站| 大香蕉久久视频久久视频 | 开心五月深爱五月丁香五月激情五月| 夜夜嗨一区二区三区直播内容| 噜噜噜噜噜日本视频| 影音先锋91男人资源在线播放| 日日操日日爽| 丁香五月婷婷久久综合激情网| 久久婷婷91| 人人干天天操五月丁香| 色色9 9| 天天综合久久| 五月婷在线| 九九九干精品| 99欧州偷拍视频| 婷婷丁香五月天综合AV| 中文字幕在线人妻| 五月香婷婷| 久久婷婷人人| 久久久久久丁香五月| 九九色99| 91日在线视频| 99在线热| 五月天精品综合| 99爽视频| 国内在线99视频| 亚洲中文字幕在线观看| 欧美精产国品一二三区| 丁香婷婷久久综合在线| 色五月涩涩婷婷蜜桃| 五月天综合久久丁香91| www.色欲丁香婷婷| 亚洲无AV在线中文字幕| 人妻AV在线| 九九热精品| 直接看的AV网站| 婷婷中文无码| 蜜臀av 粉嫩av 懂色av| 五月天综合久久| 99热丁香| 四月丁香五月婷婷久久| 激情网五夜婷婷| www.99热视频| 欧美色图天堂网色| 亚州第一A片| 日韩日比视频在线| 国产69精品久久久久999小说| 国产精品五月天婷婷| 五月婷婷香蕉| 凹凸探花电影| 色狠狠激情五月| 噜噜狠狠| AV九九| 五月丁香六月香香蕉| 色私五月婷婷| 91婷婷搞| 色一情一乱一乱一区91| 婷色视频| 五月婷婷丁香日韩在线| 亚洲欧洲中文日韩久久AV乱码| 韩国天天婷婷| 久久性爰视频这里只有精品| 密桃激情五月天综合网| 开心五月综合激情综合五月| 五月综合激情图片 | av网址在线| 色99在线| 色婷婷伊人| 久久性爱视频| 激情综合网五月婷婷| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 深爱开心五月天| 五月天婷婷三级黄| 日本va欧美va精品发布视频| 99热精在线九九久久保| 欧美99热| 五月丁香少妇网| 久久九色| 新99思思视频| 五月人妻婷婷| 婷婷香五月综合激情| 男人的天堂五月丁香| 五月丁香色六月激情干大屄| 99亚洲精品| 色色亚洲| 久久九九免费视频| 国产欧美日韩综合精品一区二区| 日本久热| 99热99在线| 91人久| 色综合99色| 六月丁香色色色| 婷婷丁香社区网| 5月丁香综合网| 五月婷天天搞视频| 播五月开心婷婷欧美综合| 久色激情| 中文字幕在线资源| 情欲禁地| 玖玖爱导航| 人妻操逼视频。| A A色色| 丁香婷婷五月天在线视频| 天天久久狠狠色综合| 五月丁香影视| 天天色凹凸| 久99久在线| 色狠狠六月| 亚洲美女网Va| 婷婷五月天成人网| 色五月噜噜| 婷婷亚洲色| 色区域网站视频| 色婷婷亚洲| 精品久久久中文字幕大豆网推荐理由 | 激情五月天在线视频| 色色99| 婷婷9月天| 亚韩在线视频| 另类激情五月| 日韩综合久久| 久9综合| 久久婷婷伊人| 五月婷婷无码| 五月丁香啪啪| 五月丁香五月丁香五月丁香五月丁香91| 色护士综合| 99热都是精品| 五月天婷婷色色| 日日夜夜爽| 天天日夜夜爽| 久9精品| 久青青久| 五月婷婷丁香五月 | 亚洲中文丁香| 99热精品在线在线| 91男人操女人视频| www.婷婷五月天.com| 婷婷六月色播| 大香蕉伊人久久| 人人操人人爽成人AV| 六月丁香婷婷色综合| 狠狠干在线| 婷婷丁香五月社区亚洲| 丁香色五月 97干| 这里只有精品免费视频| 欧美性猛交99久久久久99按摩| 苗黎美女四级成人版一级二级毛片| 婷婷综合中文| 琪琪理论片| www.五月天婷婷| 极品人妻VIDEOSSS人妻| 操一区| 超碰男人色| 91日综合欧美| 六月丁香激情婷婷| 91色婷婷综合久久中文字幕二区| 七月婷婷色香综合网| 色久婷婷五月| 伊人五月婷婷| 玖玖色资源| 五月天.com| 免费观看高清无码| 亚洲另类久久| 99热最新网址| 久久婷婷五月综合97色一本| 涩综合网| 五月天丁香成人| 色丁香五月婷婷在线| 丰满老熟妇BBBBB搡BBB| 人人人操Av| 超碰99在线观看| 91婷婷在线| 久久精品婷婷| 激情久久肏屄视频| 五月天婷婷基地综合网| 97操| 99热在线只有精品| 久久国产AV| 色播五月网| 久久久噜噜噜操操操| 婷婷五月丁香综合人妻| 大香蕉综合网| 日本精品。999| 欧美成人精品A片免费一区99 | 成人 在线 日韩| 色婷婷偷拍| 色五月婷婷AV| 色婷婷丁香五月天在线观看| 91AV视频| 五月婷婷影| 超碰人人干| 婷婷五月在线观看| 亚洲性爱干干| 91人人人人人| 精品久久66| 男人的天堂av俄罗斯热| 天天色天天爱天天爱天天爱y| 色色色综合网| 免费亚洲婷婷中文字幕| 99热精品在线观看| 狠狠夜夜五月丁香| 婷婷色导航| 色青五月天| 9 9热这里有精品| 亚洲欧美婷婷五月色综合| 久婷婷婷| 色播五月婷婷| 五月玖玖| 亚洲亚洲人成综合网络| 色播丁香婷婷五月激情| 亚洲丁香婷婷| 久艹大香蕉| 久久五月天精品视频| 狠狠操狠狠插| 五月婷深深爱激情网| 涩五月丝袜婷婷| 尔尔AV一区| 婷婷五月色色| 久久丁香五月天| 五月婷婷啪啪网| 99在线视频免费| 丁香婷婷激情| 久久A V无码视频| 久久五月激情综合| 色爱五月天| www夜夜操wwwcon| 丁香五月在线自慰| 久草A片| 成人色站,在线视频,看片-SS1AV| 久久女婷| 色丁香五月综合网| 综合99综合久久久久久久| 高清无码视频网址| 少妇人妻凹凸视频| 91碰在线| 五月婷A V在线| 强伦轩人妻一区二区电影| 五月停停色色丁香| 精品成人在线| 中文字幕不卡+婷婷五月| 婷婷五月丁香激情色情| 国产九九一区二区三区| 婷婷五月天视频| 亚洲99热| 人妻系列久久久久久久久久久| 成人做爰A片免费看视频| 五月天桃色深爱网| 天天做天天爰天天爽天天无遮挡| 久久婷婷五月综合色奶水99啪| 91视频综合网| 久热这里| 啪啪色区| 五月婷婷少妇之| WWW色色色COm| 五月天丁香网| 日韩成人影片网站 | 99视频这里只有精品10| 中文字幕,综合,91| 色色色五月婷婷| 婷婷五月天天爽| 丁香欧美| 丁香婷婷六月激情文学| 亚洲AV成人无码电影| 国产SUV精品一区二区883| 成人国产综合| 亚洲精品大片| 午夜不卡成人一区二区| 久久伦乱| 久久久人人操A V| 9久热精品在线视频| 99热这里只有精彩| 久久久久网站| 91色情播放| 亚洲色情一区二区三区四区| 九九碰九九爱97超碰| yazhochengrenavwang| 影音先锋高清无码资源网| 婷婷五月激情小说| 亚洲婷婷91丁香| 99riAV国产精品视频| 99精彩视频| 激情小说在线视频| 激情五月天小说|五月天开心激情网|亚洲精品国产自在现线|黄色五月天 | 色婷婷久久天天性爱| 丁香六月综合| 六月色婷婷| 五月激情综合网| 色婷婷电影| 五月丁香婷中文| 偷拍91九色| 激情五月综合亚洲另类| 欧美α√| 日韩九九| 开心色五月天久久久久久久| 337p午夜影院| 五月天色狠狠| 激情文学久久| 99精品自拍| 婷婷天堂综合| 91久久久久久久久18| 超碰91在线| 色情综合网| 婷婷五月丁香av网站| www狠狠| www.99色| 五月丁香色婷婷婷基地| 狠狠狠婷婷五月综合| WWW.五月天9999| 综合久色五月| 夜夜操夜夜姧| 天天免费日日夜夜夜夜| 激情五月天在线| 亚洲国产精品五月天| 天天综合亚洲综合网天天αⅴ| 综合色网站| 人人性久久| 欧美婷婷精品激情| 五月丁香六月婷| 夜夜久久综合网| 六月丁香av| 欧美精品18| 亚洲精品无人区| 99精品视频播放| 狠狠色婷婷7777久综合| 亚洲色图五月丁香| 丁香 久久| 日本久久婷婷| 色五月婷婷激情综合网| 色色精品色| 亚洲AV成人无码电影| 天天综合久久| 午夜丁香综合婷婷| 婷婷免费无马| 99色在线视频观看| 人人色AV| 中文字幕性爱丰满| 亚洲va欧美va天堂v国产综合| 99re久热只有精品6在线直播| 丁香花色色网| 狠狠色官网| 99久久性爱| 一起草Av| 另类少妇人与禽zOZZ0性伦| 激情婷婷激情在线不卡| 激情人妻综合| 久热这里只有国产| 停停五月天激情网| www.99热| 99九九99九九九视频精品| 色综合婷婷| 五月六月激情| 久久五月丁香| 99精品综合在线| 色五月综合婷婷久久综合婷婷久久综合婷婷久久综合婷婷久久 | 97碰碰在线观看视频| 婷婷六月爽| www.久久爱.com| 色综合99无码| 天天肏视频| 丁香五月婷婷色偷偷| 人人草人人爱| 亚洲AV无码成人精品电影| 婷婷久久五月天亚洲欧美国产日韩在线观看| 色婷婷手机在线| www,26uuu,c0m,色情| 色综合久| 生活片五区| 亚洲aV写真天天综合网久久| 色情五月综合婷婷| 婷婷色吧| 久久视频在线| 欧美成人精品A片免费一区99| www,99视频| 婷婷 久综合| 久久婷五月综合| 人妻在线观看视频| 99热热九九| 成人亚洲精品| 激情五月婷婷啪啪| 激情九九综合网| 日日干夜夜干| 99自拍视频| 婷婷情色五月天| 超碰免费电影| 欧洲综合色| 欧美电影在线播放| 丁香婷婷人妻| 欧美日韩123| 玖玖婷婷色| se影音资源在线观看| 亚洲精品一二三| 美女要搞搞天天搞搞搞网站| 亚洲综合五月天婷婷丁香| 色婷婷综合久久久久| 久色| 操逼国产91| 婷婷色五月在线视频| 97伦色婷婷| 俺去也在线视频| 影音先锋美国A| 涩涩涩婷婷| 精品夜夜澡人妻无码AV| 国产伊人五月天| 婷婷五月天久久久| 中文字幕AV在线播放| 99九九在线精品热动漫| 99操免费视频| 日韩在线一级| 2020日日干| 亚洲精品在线视频| 中文字幕欧美久久| 狠狠色97| 激情六月婷婷| 99色热视频| 色丁香婷婷| 综合婷婷| caopeng超碰| 亚洲A片成人无码久久精品青桔| 五月婷婷|欧美|