欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Linux下Tomcat開機(jī)自啟:systemd配置與排障全指南

Linux下Tomcat開機(jī)自啟:systemd配置與排障全指南 如果你手頭有一臺(tái)跑著生產(chǎn)業(yè)務(wù)的 Linux 服務(wù)器上面部署了 Tomcat那你大概率經(jīng)歷過這種時(shí)刻機(jī)房斷電、服務(wù)器自動(dòng)重啟或者運(yùn)維例行升級內(nèi)核 reboot 之后同事過來說“網(wǎng)站打不開了”。SSH 上去一看MySQL、Nginx 都活著唯獨(dú) Java 進(jìn)程沒了——Tomcat 沒有開機(jī)自啟。后來我專門整理過一套在 linux 上設(shè)置 tomcat 開機(jī)啟動(dòng)的完整方法才把這件回頭看并不復(fù)雜、踩坑時(shí)卻相當(dāng)折磨人的事徹底理順。這篇內(nèi)容適合手里有 Linux 服務(wù)器、用 Tomcat 跑著 Java Web 項(xiàng)目、且經(jīng)受不起下次重啟后服務(wù)靜默消失的開發(fā)或運(yùn)維朋友。文章不會(huì)只給你一段能用的配置我會(huì)把方案選型、單元文件每個(gè)參數(shù)的作用、驗(yàn)證方式、常見坑的完整排查鏈路以及配套的 JVM 參數(shù)、日志切割、多實(shí)例部署這些細(xì)節(jié)一并講清楚。1. 為什么 Linux 服務(wù)器上的 Tomcat 必須配置開機(jī)自啟1.1 先說一個(gè)讓我凌晨爬起來加班的場景我印象特別深有一年某個(gè)測試環(huán)境因?yàn)闄C(jī)房變更要重啟一臺(tái)老應(yīng)用服務(wù)器上面跑著 Tomcat 8.5 和幾個(gè)客戶對接用的 JSP 系統(tǒng)。重啟完成、網(wǎng)絡(luò)通了之后用客戶端工具一連——接口直接報(bào)連接超時(shí)。SSH 上去看Memcached 是起的Nginx 是起的唯獨(dú)java進(jìn)程一個(gè)都看不到Tomcat 壓根沒有跟著系統(tǒng)起來。當(dāng)時(shí)這臺(tái)機(jī)器的 Tomcat 是同事手動(dòng)startup.sh拉起來的配置里也沒有任何開機(jī)自啟的邏輯。更要命的是沒人記得具體配置細(xì)節(jié)JAVA_HOME、CATALINA_BASE 全靠/etc/profile里的環(huán)境變量撐腰。我后來花了大半夜把環(huán)境全部摸了一遍才意識(shí)到配置 Tomcat 開機(jī)啟動(dòng)這件事不只是寫一行命令那么簡單它需要把啟動(dòng)方式、環(huán)境變量、用戶權(quán)限、服務(wù)依賴全部理順。從那以后我在任何一臺(tái)要長期跑 Tomcat 的 Linux 機(jī)器上做的第一件事就是先把開機(jī)自啟搞定。1.2 開機(jī)自啟的三種主流方案先做個(gè)了斷到目前為止我在不同年代、不同發(fā)行版的機(jī)器上實(shí)際用過的方案主要有三種方案原理適用場景維護(hù)成本systemd 服務(wù)單元通過/etc/systemd/system/tomcat.service聲明服務(wù)由 systemd 托管生命周期當(dāng)前幾乎所有主流發(fā)行版CentOS 7、Debian 8、Ubuntu 15低管理命令統(tǒng)一SysV init 腳本在/etc/init.d/放腳本通過update-rc.d或chkconfig注冊老系統(tǒng)、最小化容器、嵌入式環(huán)境中依賴順序全手動(dòng)crontab reboot用戶 crontab 里寫reboot /path/startup.sh臨時(shí)性、實(shí)驗(yàn)性環(huán)境低但服務(wù)狀態(tài)和重啟策略幾乎沒有我見過不少生產(chǎn)環(huán)境的服務(wù)器還在用第三種方式就是reboot掛一條啟動(dòng)命令。你說它不行它確實(shí)能在重啟后把 Tomcat 拉起來。但問題在于沒有服務(wù)狀態(tài)管理如果想用systemctl查狀態(tài)、自動(dòng)重啟、看失敗次數(shù)、做資源隔離它什么都給不了。而且reboot的 cron 任務(wù)經(jīng)常踩環(huán)境變量坑——crontab 的執(zhí)行環(huán)境不是登錄式 Shell/etc/profile里定義的 JAVA_HOME 它根本讀不到啟動(dòng)一個(gè)失敗一個(gè)。SysV init 腳本在 CentOS 6 時(shí)代是絕對主力我現(xiàn)在也還會(huì)遇到基于老鏡像的機(jī)器。它的邏輯就是啟動(dòng)時(shí)按 rc.d 里的腳本順序調(diào)用#!/bin/sh從頭寫一套 start/stop/restart 邏輯還要考慮鎖文件、PID 文件。能用但確實(shí)繁瑣而且很多長期沒人維護(hù)的 init 腳本里連注釋都過期了。1.3 為什么我最終把生產(chǎn)環(huán)境的 Tomcat 全部切到 systemd如果機(jī)器發(fā)行版支持 systemd我的建議非常直接別折騰其他方案直接用 systemd。理由不復(fù)雜就三條。第一服務(wù)狀態(tài)可觀測。systemctl status tomcat看到的是active (running)、activating、failed這些明確狀態(tài)結(jié)合journalctl -u tomcat能看到服務(wù)日志定位速度比在/var/log/tomcat/里翻半天快得多。第二依賴和資源控制原生支持。我可以聲明Afternetwork.target等網(wǎng)絡(luò)就緒也可以設(shè)置MemoryLimit、CPUQuota對 Tomcat 這種占內(nèi)存大頭、容易出現(xiàn)內(nèi)存泄漏的 Java 進(jìn)程這是實(shí)實(shí)在在的護(hù)欄。第三失敗重啟策略。Restarton-failure加上RestartSec讓 Tomcat 意外退出后自動(dòng)拉起。相比在 crontab 里反復(fù)跑pgrep去判斷進(jìn)程存在與否systemd 的處理方式又干凈又可靠。現(xiàn)在主流發(fā)行版幾乎都跑 systemd所以下面的配置全部圍繞 systemd 展開同時(shí)穿插說明一些老方案里的對應(yīng)做法。2. 手把手把 Tomcat 配成 systemd 開機(jī)自啟服務(wù)2.1 動(dòng)手前先體檢目錄、賬號(hào)、路徑這三個(gè)事別跳過配置前我會(huì)先確認(rèn)三件事任何一件沒確認(rèn)清楚后面都會(huì)回來找麻煩。第一JDK 的真實(shí)路徑。在命令行里執(zhí)行which java readlink -f $(which java)后一條命令會(huì)把/usr/bin/java這類軟鏈接一路解析到真實(shí)路徑比如/usr/local/java/jdk-17/bin/java那 JAVA_HOME 就是/usr/local/java/jdk-17。千萬別想當(dāng)然寫成/usr/lib/jvm/...以readlink解析出來的為準(zhǔn)。第二Tomcat 安裝目錄和版本。通常我會(huì)用/usr/local/tomcat作為 CATALINA_HOME。要注意目錄里有沒有完整的bin、conf、lib結(jié)構(gòu)缺少文件大概率是以前解壓到一半或者路徑被改過??梢詧?zhí)行/usr/local/tomcat/bin/version.sh看版本前提是 JAVA_HOME 已經(jīng)在當(dāng)前 Shell 導(dǎo)出。第三運(yùn)行賬號(hào)。強(qiáng)烈建議不要用 root 直接跑 Tomcat。一旦進(jìn)程被利用或者 war 包出問題root 權(quán)限的 Java 進(jìn)程會(huì)造成更大的麻煩。我通常新建一個(gè)系統(tǒng)用戶useradd -r -s /bin/false tomcat chown -R tomcat:tomcat /usr/local/tomcat-r表示系統(tǒng)賬戶-s /bin/false讓它無法交互登錄對 Tomcat 運(yùn)行來說足夠。大家常問的“Tomcat 啟動(dòng)閃退”有相當(dāng)一部分就是目錄權(quán)限不對啟動(dòng)腳本寫不了日志或 PID 文件導(dǎo)致進(jìn)程退出。2.2 寫一個(gè)能打的 tomcat.service 單元文件在/etc/systemd/system/tomcat.service創(chuàng)建文件這是 systemd 管理 Tomcat 的入口。我先把一份經(jīng)過生產(chǎn)驗(yàn)證的配置完整貼出來再做逐行解釋。[Unit] DescriptionApache Tomcat 9 Web Application Container Afternetwork.target Wantsnetwork.target [Service] Typeforking Usertomcat Grouptomcat EnvironmentJAVA_HOME/usr/local/java/jdk-17 EnvironmentCATALINA_HOME/usr/local/tomcat EnvironmentCATALINA_BASE/usr/local/tomcat EnvironmentCATALINA_PID/usr/local/tomcat/logs/tomcat.pid PIDFile/usr/local/tomcat/logs/tomcat.pid ExecStart/usr/local/tomcat/bin/startup.sh ExecStop/usr/local/tomcat/bin/shutdown.sh Restarton-failure RestartSec10 TimeoutStartSec60 TimeoutStopSec30 [Install] WantedBymulti-user.target這個(gè)文件里的[Unit]部分描述服務(wù)是什么、啟動(dòng)順序上的依賴[Service]部分是核心定義了進(jìn)程類型、用哪個(gè)用戶運(yùn)行、執(zhí)行什么腳本[Install]段決定了它掛載到哪個(gè)啟動(dòng)目標(biāo)multi-user.target表示這臺(tái)機(jī)器進(jìn)入正常的非圖形化運(yùn)行級別時(shí)啟動(dòng)。2.3 單元文件里這些參數(shù)每一行都在解決什么問題很多人習(xí)慣網(wǎng)上復(fù)制一份配置能用就行出了問題就完全不知道往哪里看。我建議把幾個(gè)關(guān)鍵參數(shù)吃透。Typeforking。Tomcat 的startup.sh啟動(dòng) Java 進(jìn)程后會(huì)立即返回退出真正的 Tomcat 主進(jìn)程是被 fork 出來的子進(jìn)程所以對 systemd 來說必須聲明Typeforking。如果不聲明或聲成simplesystemd 會(huì)把短暫駐留的啟動(dòng) Shell 當(dāng)成主服務(wù)導(dǎo)致狀態(tài)判斷完全錯(cuò)亂。PIDFile 與 CATALINA_PID。systemd 需要跟蹤 Tomcat 實(shí)際主進(jìn)程的 PID 來管理它。Tomcat 自身通過 CATALINA_PID 來寫 PID 文件。單元文件里我把 PID 指向/usr/local/tomcat/logs/tomcat.pid。這里有一個(gè)非常典型的坑很多發(fā)行版默認(rèn) Tomcat 配置里沒有導(dǎo)出 CATALINA_PID啟動(dòng)時(shí)根本沒有 PID 文件可讀systemd 在 stop 和 status 時(shí)的判斷會(huì)對不上。解決辦法就是顯式在服務(wù)里設(shè)置同時(shí)寫上PIDFile讓 systemd 知道去哪里讀。Environment。這一步我要特別強(qiáng)調(diào)。systemd 通過ExecStart啟動(dòng)的服務(wù)不會(huì)讀取/etc/profile、~/.bashrc這些 Shell 初始化文件。不少人的 Tomcat 平時(shí)手動(dòng)啟動(dòng)沒問題一配 systemd 就報(bào)JAVA_HOME is not defined correctly十有八九是這個(gè)原因。所以我把 JAVA_HOME、CATALINA_HOME、CATALINA_PID 統(tǒng)統(tǒng)用 Environment 寫進(jìn)去不依賴任何全局 Shell 變量。After / Wants。Afternetwork.target表示網(wǎng)絡(luò)目標(biāo)完成后才會(huì)啟動(dòng) Tomcat避免在網(wǎng)絡(luò)接口沒有就緒時(shí)就去綁定端口。如果你的項(xiàng)目強(qiáng)依賴數(shù)據(jù)庫或 Redis也可以追加Aftermysql.service之類的聲明。注意After不產(chǎn)生啟動(dòng)依賴它只是順序約束要用Requires或Wants來真正拉起依賴服務(wù)最常見的組合就是Wants...加After...。Restart 策略。Restarton-failure搭配RestartSec10進(jìn)程異常退出時(shí) 10 秒后自動(dòng)重試。on-failure只處理非正常狀態(tài)如果你自己調(diào)systemctl stop tomcat它不會(huì)去重啟這也是我推薦這個(gè)值的原因。TimeoutStopSec。Tomcat 關(guān)閉時(shí)可能要優(yōu)雅停掉應(yīng)用和連接池時(shí)間給太短會(huì)被 systemd 強(qiáng)殺。我設(shè)了 30 秒大多數(shù) Web 應(yīng)用足夠。如果線上應(yīng)用有長事務(wù)、連接池回收慢可以再調(diào)大一點(diǎn)。2.4 啟用自啟、驗(yàn)證生效一次做過配置寫完以后執(zhí)行systemctl daemon-reload systemctl enable tomcat systemctl start tomcat每次修改 service 文件必須重新執(zhí)行daemon-reload這是新手最容易漏掉的動(dòng)作。enable會(huì)在/etc/systemd/system/multi-user.target.wants/下生成符號(hào)鏈接下次開機(jī)時(shí)自動(dòng)啟動(dòng)start是立即啟動(dòng)并不是必須和enable一起執(zhí)行但先手動(dòng)啟動(dòng)一次能盡早發(fā)現(xiàn)配置錯(cuò)誤。啟動(dòng)后一定要做到驗(yàn)證閉環(huán)systemctl status tomcat systemctl is-enabled tomcat ss -lntp | grep 8080 curl -sI http://127.0.0.1:8080 | head -n 3如果看到enabled、狀態(tài)是active (running)、8080 端口監(jiān)聽正常這一步就完成了。我自己的習(xí)慣還會(huì)再補(bǔ)一句journalctl -u tomcat -n 50 --no-pager確認(rèn)日志沒有異常然后找個(gè)時(shí)間真正 reboot 一次驗(yàn)證自啟——這一步必須有下面會(huì)解釋為什么。3. 配置自啟途中踩過的坑和完整排查鏈路3.1 環(huán)境變量丟失systemd 說這不是它的鍋癥狀很典型手動(dòng)執(zhí)行startup.sh一切正常systemctl start tomcat后過幾秒狀態(tài)變成failedjournalctl -u tomcat里能看到類似Neither the JAVA_HOME nor the JRE_HOME environment variable is defined At least one of these environment variable is required to run this program原因就是我前面說的systemd 啟動(dòng)的進(jìn)程不加載 Shell 環(huán)境文件。很多教程讓你把 JAVA_HOME 寫進(jìn)/etc/profile這只會(huì)影響交互式 Shell不會(huì)影響 systemd。排查鏈路按順序走systemctl show tomcat -p Environment看 systemd 實(shí)際傳給進(jìn)程的環(huán)境變量。如果沒有 JAVA_HOME去單元文件里補(bǔ)上EnvironmentJAVA_HOME...絕對路徑以readlink -f $(which java)解析出來的為準(zhǔn)。XShell 里敲的java -version能用不代表 Tomcat 腳本能用腳本看的是 JAVA_HOME/JRE_HOME不是 PATH 里的 java 命令。3.2 PID 文件缺失狀態(tài)一直卡在 activating有一個(gè)場景我遇到不止一次Tomcat 其實(shí)已經(jīng)起來了8080 端口也在監(jiān)聽業(yè)務(wù)能通但systemctl status顯示的卻是activating (start-pre)或者反復(fù)failed用systemctl stop還停不下來。根因基本可以鎖定在 PID 文件上。Typeforking加 PIDFile 時(shí)systemd 會(huì)用 PID 文件里的主進(jìn)程號(hào)來判斷服務(wù)是否成功啟動(dòng)。如果 CATALINA_PID 沒有導(dǎo)出startup.sh 不寫 PID 文件或者寫的路徑進(jìn)程沒權(quán)限寫就會(huì)卡在狀態(tài)判斷上。排查方式ls -l /usr/local/tomcat/logs/tomcat.pid cat /usr/local/tomcat/logs/tomcat.pid如果沒有這個(gè)文件檢查單元文件里 CATALINA_PID 是否配置如果文件存在但權(quán)限是 root檢查chown -R tomcat:tomcat /usr/local/tomcat因?yàn)?Tomcat 運(yùn)行用戶寫不了這個(gè)文件同樣會(huì)導(dǎo)致 systemd 狀態(tài)不對。SELinux 開啟時(shí)如果目錄上下文不對也可能拒絕寫權(quán)限這個(gè)下面單獨(dú)說。3.3 啟動(dòng)閃退排查先在前臺(tái)跑一次 catalina.sh配了自啟之后閃退日志往往被 systemd 收走反而不如直接前臺(tái)啟動(dòng)看得快。排查閃退我最順手的動(dòng)作是把 Tomcat 開到前臺(tái)sudo -u tomcat /usr/local/tomcat/bin/catalina.sh runcatalina.sh run是前臺(tái)運(yùn)行日志直接打到終端報(bào)錯(cuò)一眼能看到。常見閃退原因端口被占用。ss -lntp | grep 8080看是不是別的服務(wù)占著或上一次啟動(dòng)的殘留進(jìn)程占著端口。war 包解壓失敗、webapps 下的應(yīng)用啟動(dòng)異常導(dǎo)致線程啟動(dòng)時(shí)報(bào)錯(cuò)退出。內(nèi)存不足或 JVM 參數(shù)非法比如-Xmx設(shè)置超出物理內(nèi)存啟動(dòng)直接報(bào)Could not reserve enough bytes for object heap。系統(tǒng)服務(wù)對進(jìn)程數(shù)量、文件句柄有限制journalctl -u tomcat里能看到句柄耗盡的跡象。定位到根因后按對應(yīng)的方式改配置改完再systemctl start tomcat驗(yàn)證。不要反復(fù)無腦重啟日志不會(huì)騙人。3.4 端口能通但外網(wǎng)訪問不了防火墻與 SELinux 兩個(gè)兄弟自啟配好了本機(jī) curl 127.0.0.1:8080 有響應(yīng)外面怎么都訪問不到這時(shí)候要懷疑防火墻和 SELinux。firewalld 在 CentOS/RHEL 系機(jī)器上默認(rèn)可能攔截了外部到 8080 的訪問firewall-cmd --permanent --add-port8080/tcp firewall-cmd --reloadSELinux 則是另一個(gè)容易忽略的環(huán)節(jié)。Tomcat 安裝到非標(biāo)準(zhǔn)目錄后進(jìn)程寫日志、寫臨時(shí)文件可能被 SELinux 策略擋住。先看當(dāng)前模式getenforce如果是Enforcing可以用restorecon -RF /usr/local/tomcat恢復(fù)目錄的 SELinux 上下文如果 Tomcat 確實(shí)需要連接外部網(wǎng)絡(luò)或端口可能需要設(shè)置對應(yīng)的 boolean。這里不展開講 SELinux 策略撰寫但要記住遇到進(jìn)程行為異常、日志中帶著Permission denied又說不清權(quán)限問題時(shí)八成和 SELinux 有關(guān)。注意不建議圖省事直接在生產(chǎn)上永久關(guān)閉 SELinux。造成的問題應(yīng)該用策略去解決頂多臨時(shí)setenforce 0驗(yàn)證確認(rèn)后再定位是哪條策略。3.5 journalctl 里最值得記住的五類關(guān)鍵線索配自啟的排查基本繞不開journalctl -u tomcat我總結(jié)過幾類最常出現(xiàn)的日志線索看到就知道往哪里查日志線索指向的問題JAVA_HOME is not defined環(huán)境變量沒配置或路徑不對去 [Service] 段補(bǔ) Environmentpid file write failedPID 文件路徑不可寫檢查目錄權(quán)限、SELinux 上下文Address already in use端口被占用找占用進(jìn)程或改 server.xml 端口Broken pipe、Connection reset通常是反向代理/防火墻/長連接資源問題優(yōu)先看 Nginx 和網(wǎng)絡(luò)側(cè)OutOfMemoryError、GC overhead limit exceededJVM 或堆內(nèi)存不足調(diào) CATALINA_OPTS每次排查都從日志入手按鏈路一層層往下通常能比東翻西找快一半時(shí)間。4. 開機(jī)自啟配好之后順手把這些運(yùn)維細(xì)節(jié)也安排上4.1 JVM 參數(shù)放哪最干凈用 setenv.sh 而不是硬塞 service設(shè)置好自啟之后很多人會(huì)問我想調(diào) JVM 堆內(nèi)存、GC 參數(shù)怎么辦兩個(gè)選擇一是全部懟在 service 文件的 Environment 里二是在/usr/local/tomcat/bin/下創(chuàng)建setenv.sh。Tomcat 每次啟動(dòng)都會(huì)自動(dòng)加載bin/setenv.sh里導(dǎo)出的環(huán)境變量。這是官方預(yù)留的擴(kuò)展機(jī)制比在 systemd 單元文件里寫一長串 Environment 干凈得多也更方便維護(hù)。我通常在 setenv.sh 里寫export CATALINA_OPTS-Xms512m -Xmx2048m -XX:MetaspaceSize256m -XX:UseG1GC -XX:HeapDumpOnOutOfMemoryError注意兩個(gè)變量的區(qū)別CATALINA_OPTS只作用于 Tomcat 啟動(dòng)的 JVM不影響它內(nèi)部的輔助工具JAVA_OPTS會(huì)作用于所有基于 Java 的進(jìn)程包括啟動(dòng)腳本里的輔助程序。針對 Tomcat 的堆和 GC 配置優(yōu)先用 CATALINA_OPTS。修改 setenv.sh 后不用重寫 servicesystemctl restart tomcat即可生效這個(gè)先后順序建議固定下來。4.2 catalina.out 無限增長一個(gè) logrotate 配置解決Tomcat 的catalina.out會(huì)越滾越大尤其線上打了大量訪問日志或異常棧時(shí)一個(gè)季度漲到幾個(gè) GB 很常見。有些項(xiàng)目把日志輸出在 catalina.out 里不處理遲早拖垮磁盤。我在生產(chǎn)上通常用 logrotate 做每日切割配置放在/etc/logrotate.d/tomcat/usr/local/tomcat/logs/catalina.out { daily rotate 7 copytruncate compress missingok notifempty }這里最需要注意的參數(shù)是copytruncate。因?yàn)?Java 進(jìn)程一直持有 catalina.out 這個(gè)文件句柄直接mv重命名會(huì)導(dǎo)致 Tomcat 繼續(xù)寫舊句柄肉眼看到的是日志“消失”實(shí)際磁盤空間沒釋放。copytruncate先復(fù)制再清空原文件雖然極端情況下會(huì)丟一點(diǎn)點(diǎn)新日志但比重啟 Tomcat 去切日志劃算得多。4.3 多實(shí)例部署用模板化 service 文件省一半配置如果一臺(tái)服務(wù)器上要跑多個(gè) Tomcat 實(shí)例比如按項(xiàng)目名隔離的web1、web2完全不需要為每個(gè)實(shí)例各寫一份 service 文件。systemd 支持模板單元tomcat.service通過%i引用實(shí)例名[Unit] DescriptionTomcat instance %i Afternetwork.target [Service] Typeforking Usertomcat Grouptomcat EnvironmentCATALINA_HOME/opt/tomcat-appserver EnvironmentCATALINA_BASE/opt/tomcat-%i EnvironmentCATALINA_PID/opt/tomcat-%i/logs/tomcat.pid PIDFile/opt/tomcat-%i/logs/tomcat.pid ExecStart/opt/tomcat-appserver/bin/startup.sh ExecStop/opt/tomcat-appserver/bin/shutdown.sh Restarton-failure [Install] WantedBymulti-user.target然后一行命令注冊并啟動(dòng)對應(yīng)實(shí)例systemctl enable tomcatweb1 systemctl start tomcatweb1需要注意多實(shí)例場景里CATALINA_HOME可以共用一份 Tomcat 程序但CATALINA_BASE必須每個(gè)實(shí)例各自獨(dú)立conf/、webapps/、logs/、temp/放在各自的 BASE 目錄下。這會(huì)讓自啟配置的復(fù)雜度大大下降也方便后續(xù)單獨(dú)重啟某個(gè)實(shí)例而不影響其他應(yīng)用。4.4 升級 Tomcat 版本時(shí)自啟配置怎么平滑過渡Tomcat 大版本升級時(shí)最容易踩的雷就是解壓新版到新目錄然后忘了改自啟單元文件里指向 CATALINA_HOME 的路徑重啟回來發(fā)現(xiàn)啟動(dòng)的還是老版本。我的做法一般是先用軟鏈接固定路徑ln -s /usr/local/tomcat-9.0.85 /usr/local/tomcatservice 文件里始終只寫/usr/local/tomcat升級時(shí)解壓新版目錄停服務(wù)換軟鏈接指向再啟動(dòng)。如果出問題就回退軟鏈接整個(gè)過程可逆可控。升級前記得備份conf/server.xml、conf/web.xml和webapps下需要保留的業(yè)務(wù)應(yīng)用。Tomcat 10 把javax.*換成jakarta.*的兼容差異比較大升級時(shí)要么代碼同步遷移要么先確認(rèn)業(yè)務(wù)是否接受這個(gè)改動(dòng)。4.5 順便提一句安全加固manager 后臺(tái)別裸奔很多網(wǎng)站在 Tomcat 配置完成后conf/tomcat-users.xml里寫死了一個(gè)manager-gui角色賬號(hào)用于后臺(tái)部署 war 包。我的建議是兩步走一是 manager 相關(guān)角色盡量不開放公網(wǎng)訪問至少在防火墻層或 Nginx 層限制來源 IP二是如果確實(shí)需要遠(yuǎn)程管理配合 Tomcat 的 Valve 配置做來源地址白名單而不要只靠一個(gè)弱口令頂著。這個(gè)不屬于自啟范圍但既然聊到線上的 Tomcat順手提醒總比出了安全事件再補(bǔ)要省心。5. 我總結(jié)的幾個(gè)實(shí)操習(xí)慣照著做能少走很多彎路配置和排障都講完了最后分享幾個(gè)我自己養(yǎng)成的習(xí)慣都是踩過坑后留下的。第一配置完自啟后一定要找時(shí)間重啟一次機(jī)器驗(yàn)證。很多人配完enable就覺得萬事大吉等真重啟才發(fā)現(xiàn)某個(gè)依賴順序或環(huán)境變量在純引導(dǎo)環(huán)境里根本不生效。重啟后確認(rèn)進(jìn)程在、端口在、systemctl status是 active才算完成閉環(huán)。第二每次都先daemon-reload再改狀態(tài)。改 service 文件卻不 reloadsystemd 仍在用舊配置這會(huì)浪費(fèi)大量時(shí)間。我自己的流程是改完文件 →systemctl daemon-reload→systemctl restart tomcat→journalctl -u tomcat -n 30收尾。第三寫文檔比記憶可靠。Tomcat 版本、JAVA_HOME 路徑、實(shí)例名、端口、依賴關(guān)系這些信息散落在不同人腦子里最危險(xiǎn)。我會(huì)在機(jī)器上放一個(gè)/etc/systemd/system/README-tomcat.txt或者同步到私有維基記錄每次變更前后的狀態(tài)和原因下次不管誰接手都能快速接上。第四盡量用 systemd 統(tǒng)一管理減少“手藝人腳本”。手寫 shell 腳本輪詢進(jìn)程、在 rc.local 里追加啟動(dòng)命令這些方式應(yīng)急時(shí)可以但長期維護(hù)下來狀態(tài)不可觀測、失敗不自愈的代價(jià)會(huì)越來越高。把 Tomcat、Nginx、MySQL 這些服務(wù)通通納入 systemd 視角后一條命令就能看清整臺(tái)機(jī)器的服務(wù)圖譜排障思路也會(huì)清晰很多。配置 Tomcat 開機(jī)自啟本質(zhì)上并不難難的是把方案選對、把細(xì)節(jié)做扎實(shí)。希望這篇實(shí)踐筆記能讓你下次面對“重啟后服務(wù)消失”的時(shí)候不再手忙腳亂。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月天激情美女久久| 亚洲成人在线观看网址| 99精品无码| 秋霞成人毛片一级A片| 专区无日本视频高清8| 天天透天天爱| 另类激情网| 婷婷伊人网| 青青久久五月| 国产精品日本一区二区在线播放| 99热这里精品| 激情另类综合| 爽极品色| 久久狼人天堂| 偷拍91九色| www.亚洲激情| 精品综合五月| 5月婷婷性视频| 国产成人网| 亚洲XX网| 亚洲激情综| 婷婷丁香成人色综合| 99精品久久| 日本色五月婷婷| 色五月丁香一区在线| 色婷婷在线影院| 久cao香蕉影院| 欧美日韩91| 婷婷基地爱| 激情五月丁香在线观看直播| 五月婷婷综合网在线播放| 色婷| 亚洲AV综合在线观看| 九九九九九九九九九九九九九九九九九九九在线视频 | 五月丁香婷婷啪啪| 天天插天天干| 99这里只有精品| 67194国产| 色欲午夜无码久久久久久张津瑜| 色色色99| 国产精品社区| 五月激情影院| 97精品人人A片免费看| 操碰91| 久久亚洲天堂| 97碰| 九月婷婷久久| 久久色六月| 99热综合| 色啪久| 五月天电影网| 成人 九九九九| 久久久亚洲成人无码A片| 亚洲欧洲中文日韩久久AV乱码| 五月成人网站| 天天久综合网永久入口18| 中文字幕网伦射乱中文| 91色综合久久| 五月丁香六月激情综合| 快乐婷婷五月天| 99re思思| 五月网网站| 色永久| 亚洲va欧洲va国产va不卡| 婷婷五月花西瓜| 五月天婷婷婷| 超碰免费成人| 五月天开心色色网| 久草丁香婷婷五月天婷| 这里只有精品视频222| 激情五月深爱五月| 激情小说五月欧美亚洲丁香| 五月天伊人综合| 伊人网大香| 亚州色婷婷| 亚洲综合网 665566| 日日天天干| 色99视频| 色婷婷无吗| 色婷婷91| 99热日本| 丁香五月网址| 91夫妻视频| 97成人在线视频| 91嫩草久久| www98日本小时间到了| 婷婷五月天AV| 99久久免费精品| 99热手机在线精品| 丁香五月婷婷基地| 日韩一级网站| 色大综合| 成人网址在线观看| 色五月开心久久网| 久久久久婷婷五月热综合| 婷婷在线午夜| 97狠狠色| 久久九九99.www| 精品99在线| 亚洲 25P| 色五月激情| 亚洲中文字幕av| 操操操97| 青青热视频| 六月丁香婷婷尤物| 九九婷婷网五月天| 99热99天堂| 五月丁香啪| 五月天婷爱综合| 人人摸人人澡人人| 欧美十二区| 亚洲XX网| 亚洲五月色| 久久98| 久久久婷丁香五月| 99热这是里只有精品| 九九色综合九九色| 春色激情| 五月婷婷丁香五月亚洲色| 无码操B| 噼里啪啦在线观看免费完整版视频| 色情婷婷久久五月天| 日本三级黄色大片| 五月花婷婷| 老师的粉嫩小又紧水又多A片视频 粉嫩AV久久一区二区三区 | 天天干天天操天天爽| 亚洲区在线| 亚洲婷婷视频| 欧美久久婷婷| 久久99三级在线视频| 色婷丁香五月| 色色色9| 久久九九经典| 丁香五月天天高清在线| 久久久av久av久片一区二区| ,99视频久久| 91丨九色丨白浆秘| 99亚洲视频| 这里只有精品视频一区| 亚洲中文字幕在线观看| 婷婷 激情 五月| 99久久综合网| 色色丁香婷婷综合| 色婷婷9| 久9草在线观看视频| 五月综合激情久久| 97操在线视频| 成人版视频在线观看| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 五月天激日本色情在线| 五月婷婷婷| 色玖玖玖| 丁香九月综合| 伊人干综合| 欧美视频五区| 91狠狠综合久久| 人人摸人人澡人人| 色五月婷婷综合在线| 五月丁香六月合| 乱岳熟女50岁| 97久久香草精品视频| 日韩一级片| 丁香 婷婷 激情 综合 五月| 亚洲精品字幕在线观看| 2025中文在线视频字幕免费观看| 亚洲视频在线观看| 97五月天婷婷| 五月丁香久久色| 亚洲视频伍月婷婷| 69久久99精品久久久久婷婷| 久草热在线视频| 97综合在线| 99综合| 婷婷天堂综合| 黄桃AV无码免费一区二区三区| 中文字幕婷婷五月天| 99精品综合视频| 六月丁香激情综合网| 99热这里只有精品2| 大香蕉五月天| 日日鲁鲁鲁夜夜爽爽狠狠视频97 | 婷婷丁香基地在线| 丁香五月最新网址| 99综合免费视频| 啊v视频在线观看| 激情五月丁香五月| 色丁香综合影院| 国产XXXX搡XXXXX搡麻豆 | 9l视频自拍9l九色9l成人| 天天日日夜夜| 夜夜操夜夜爽| 婷婷WWW久久| 逼里香不卡| 啪啪 综合网| 无码啪啪| 五月天婷婷开心| 婷婷五月色丁香在线看| 丁香五月婷婷99| 色色色在线观看| 九色视频91疯狂| 午夜丁香| 久久性爱视频| 激情综合网五月天天| 国产成人AV| 天天橾夜夜爽| 婷婷久久网| 五月天开心网| 色五月婷婷九月| 色碰碰| 天天爽天天爽| 韩国激情五月天综合网| 爱之国产色情综合| 操人精品| 欧洲MV日韩MV国产| 操操国产| 亚洲精品V天堂中文字幕| 这里都是精品99| 日韩一级网站| 亚洲婷婷激情综合激情999精品| 亚洲成人无码网站| 桃色五月天| 丁香五月天色综合| 久9免费视频| 丁香五月婷婷激情网| 久久99婷婷| http:色情日本com| 日本三级韩三级99久久| 婷婷开心久久| 久久婷婷五月草视频在线播放| 9久热视频| www.99在线| 伊人色欲五月天| 色播播婷婷| 久久久婷| 人妻九九九九| 99热6色| 99热在线精品播放| 天天日日爽| 婷婷五月综合久久中文字幕| 草榴视频黄色网| 色婷婷丁香| 亚洲色综合性| 色综合五月婷婷狠狠干| 91精品无码| 久热婷婷综合| 中文av网| 噜噜操操| 狠狠干在线| 色综天天综合| 热99精品视频| 亚洲第一成人AV| 激情五月综合| 婷婷99狠狠| www.色窝| 99热国产这里只有| 婷婷性爱| 九九综合伊人| 欧美在线视频9| 五月婷婷色色| 五月婷婷激情性爱| 婷婷五月免费视频| 激情综合六月| 五月婷婷m| 久久婷综合| 五月婷婷,六月婷婷| 欧美激情综合色综合啪啪五月| 99综合免费视频| 综合激情在线| 久久99三级在线视频| 丁香九月综合激情| 日韩久热| 六月婷婷七月丁香| 7777激情基地| 九九色影视| 九色婷婷| 天天色综和网| 66精品国产成人| 国产肏屄大片| 99视频| 天天艹夜夜爽| 开心婷婷五| 久久精品系列| 操人视频91| www.色多多婷| 91婷婷视频| av国产精品| 91超碰在线观看| 五月婷婷六月丁香在线| 亚洲激情97五月天| 99成人免费视频| 色综合色综合色综合高潮| 久热九九| 午夜婷婷丁香| 国产xxxxx在线观看| 色欲九区| 久久丁香五月婷婷| WWW,激情五月天,COM| 九色自拍| 色色五月丁香婷婷| 婷婷激情肏屄网| 欧美大香蕉视频| 蜜臀av粉嫩av懂色av| 婷婷D区| 五月桃花网综合| 欧洲色区| 99久久欧美| 狠狠久久婷五月综合色| 色爱综合五月| 啪啪婷婷五月天激情| 色婷婷五月在线| 国产在线黄色| 狠狠狠婷婷五月综合| 日日噜狠狠色综| 五月婷婷偷| 婷婷五月天 偷拍| 99热这里只有精品13| 色婷婷婷综合五月天| 深爱激情九九五月天 | 五月天偷拍| 99久久婷婷国产综合| 亚洲综合婷婷| 五月天激情综合网| 久热久re| 人人操97| 天天综合五月| 26uuu| 性综合网| 99爱视频在线| 亚洲99一级无嗎特制在线| 五月丁香婷婷综合网色欲| 婷婷狠狠97| 日韩狠狠色| 黄色AV日韩| 开心五月婷婷五月| 五月激情婷婷开心| 五月丁香啪啪啪综合网| 国产特级毛片AAAAAAA高清| 三级片AAA久久久AAA久久久AAA | se99视频| 99在线资源视频| 国产免费av在线| 超碰精品在线| 99这里只有精品99| 丁香色婷婷| 精品夜夜澡人妻无码AV| 百度4399有码精品V在线观看 | 日本爆乳片手机在线播放| 婷婷五点亚洲| 激情丁香五月| 亚洲免费电影2| 97人妻碰碰碰久| 激情综合激情五月| 97色热| WWW.国产| 色呦呦美女| 久热婷婷| 亭亭玉月丁香| 五月天婷婷在线观看精品男人| 色五月婷婷亚洲| 婷婷激情四射| 五月婷婷色白丝| 成人电影一区| 五月天婷婷丁香| 久久婷婷五月综合色奶水99啪| 国产又爽又猛又粗的视频A片| 激情五月天色色色| 丁香久色| 久久精品视频99| 成人午夜天| www.色色五月天.com| 99热在线免费观看精品| 婷婷的99视频网站| 婷婷五月娱乐在线| 午夜青草资源| 六月色婷婷| 少妇人妻丰满做爰XXX| 色综合视频| 天天做天天双| 99热这里只有精品66| 国产精品 的国产| 26UUU精品一区二区Com| 五月婷激情| 9久操| 99热这里只有精品98| 丁香六月激情综合| 天堂久热| 丁香五月激情澎湃一区| 五月丁香久久| 激情综合网五月在线播放| 婷婷激情五月天在线| 思思热在线视频精品| 丁香五月婷婷激情尤物| 激情丁香五月天| 老美AA片| 怡红院院久久| 亚洲成av人影院| 99热大香蕉| 九九这里有精品| 婷婷五月综合激情免费| 亚洲三A| 怕怕視頻| WWW.婷婷| 五月丁香六月色婷婷综合五月天| 色久女| 婷婷色五月天色| 婷婷五月天第四色| 久久婷青青草原| 天天草天天爱| 国产成人精品一区二区三区视频| 丁香五月激情宗合| 综合激情站| 婷婷五月天Av| 九九热99热| www.91在线观看| 五月天开心婷婷激情网站| 91/九色黑人| 99精品爱| 五月做爱| 久99久99精品免| 婷婷色一二三区波多野结衣| 色播五月婷婷| 五月天婷婷基地综合网| 99精品色| 97碰人人操| 狠狠干五月天| 一起草Av| 色色色色色网| www天天干| 五月丁香婷婷成人网| 五月丁香狠狠爱婷婷综合| 国外亚洲成AV人片在线观看| 午夜爱爱爱成人| 久久婷婷五月天大香蕉| 九九色综合视频| 99视频综合网| 久久综合中文字幕| 桃色成人网| www.五月激情红色| 青青操成人福利| 五月天国产婷婷精品视频在线| 久久综合综合综合| 91视频一起草| 五月天婷婷在线观看精品男人| 激情小说五月天| 五月天成人网婷婷| 丁香97综合| 婷婷色五月开心五月| 久久婷婷色| 久久9视频| 婷婷五日b| 日韩在线观看网址| 五月天天天天天天天天天天天天天天天婷婷婷 | 综合噜噜| 91性高潮久久久久久久久| 国产在这里只有精品| 国产va在线视频| 久久九九热re6这里有精品| 玖玖热视频| 久久综合无| a在线观看| 亚洲A色| 五月丁香网站| 激情五月天综合网| 色色色色色色色色综合网| 久久视频婷婷| AA片在线观看视频在线播放| 免费精品99| 如何安全看伊人婷婷| 欧美性生交XXXXX无码小说| 五月丁香无码视频| 7月婷婷六月丁香| 99热网精品| 五月婷婷亚洲| 久久久久久天天日天天爱| 丁香五月激情视频| 99re在线观看| 久久ri精品视频| 激情综合婷婷| 99这里是精品| 久久久97| 欧美六月婷婷| 无码色| 色婷婷亚洲五月天| 翔田千里aV中文字幕| 美国不卡视频| 极品人妻VIDEOSSS人妻| 日本高清久| 亚洲婷婷开心五月| 综合另类视频| 亚洲超级碰| 69精品人人人人| 色噜噜狠噜噜视频| 五月婷丁香亚洲| 五月丁香久久| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 六月丁AV| 激情五月丁香色婷婷| www.99精品视频| 久久九九爽| 99热99这里只有精品| 91超级碰碰碰| 一二区成人电影| 精品少妇人妻AV无码专区偷人 | 久久亚洲网| 嫩草AV久久伊人妇女超级A| 久99热在线观看| 丁香五月网在线观看| 欧美色图天堂网| 色九综合| 国产免费一区二区在线A片视频| 日本乱论99| 老师高潮流白浆喷水的A片| 超碰在线人妻| 99热精品99| 精品久久久人妻| 丁香六月天色婷婷| 色五月久久成人婷婷| 亚洲不卡欧洲| 很很色丁香久久停停| 亚洲九九99精品视频在线播放| 婷婷五月丁香六月| 久久综合中文| 猫咪伊人久久| 99色干| 人人干人人看| 五月丁香婷婷综合视频| 色五月在线视频观看| 丁香亚洲婷婷五月| yazhouzonghesese| 天天色伊人| 综合五月天亚洲婷婷| 五月丁香久久网| 99热99| 抽插特写| 九月婷婷激情久久| 嫩草哈哈操| 久草视频大香蕉99| 天色色综合网| 99精品偷拍视频| 丁香影院五月综合| 操逼综合网| 色综合久久无码| 亚洲AV久久久久久久久久久久久久久久| 全部老头和老太XXXXX| 天天玩夜夜操| 天天天天干| CHINESE熟女老女人HD视频| 另类小说色婷婷| 久热这里只有精品6| 99热最新| 丁香五月手机在线| 激情四射五月天| 超碰在线看| 五月婷综合| 色播五月丁香婷婷| 婷婷六月伊人| 综合激情视频| 991精品在线视频| 婷香五月| 国产精品电影| 久久大大香| 亚洲天堂青草| 亚洲视频五区| 欧美成人热| 激情婷婷另类| 激情丁香五月天图片| 亚洲欧美999| 思思热在线精品视频| 激情五月天婷婷五月天| 婷婷丁香激情综合色情| 日本色婷婷| 亚洲狠狠色丁香婷婷综合久久| 丁香五月狠狠在线观看| 天堂网色色| 黄色片区子| 丁香婷婷五月天色播| 婷婷五月天成人基地| 婷婷五月天激情免费在线观看| 亚洲婷婷五月天| 色五月婷婷色| 色激情网| 97精品综合久久| 婷婷开心青青草| 伊人五月天在线| 97精品在线| 欧美婷婷| 亭亭丁香97| 99热9| 99久久综合网| 1024操逼视频| 国产性爱在线| 91男同| 天天干天天操天天干天天操天天干天天操 | www色哟哟| 丁香五月影视| 亚洲五月天狠狠| 操操自拍| 五月激情网综合| 天天干天天拍| 精品夜夜澡人妻无码AV| 91色在线 | 日韩| 天天摸.天天mo| 五月婷婷丁香狠狠撸久久| 亚洲性爱电影| 思思干精品| 色热久| 婷婷五月天日日日干干干| 丁香激情网| 婷婷五月天国产传媒| 丁香五月婷婷激情四射| 天天橾日日橾夜夜橾17| 五月丁香综合啪啪| 日日操无码| 欧美成人Va| 亚洲激情婷婷| 精品香蕉99久久久久网站| 久久精典| 丁香婷婷成人网站| 91 九色大美女| 婷婷久久五月天中文字幕在线观看| 另类图片激情五月天| 五月综合激情网| 日日影院 | 五月婷啪| 色欲午夜无码久久久久久张津瑜| 变态 另类 在线| 日本三级中国三级99人妇网站| 五月婷婷之六月丁香| 97人人操人人干| 伊人在线视频| 丁香无月在线观看| 亚洲婷婷91丁香| 1024在线视频| 六月天六月婷| 天天综合色| 香蕉久久国产AV一区二区| 亚洲狠狠干| 亚洲熟妇AV乱码在线观看| www.五月天色色.com| 色婷婷www| 日韩丁香涩| 婷婷AV丁香| 日本一级一级一级一级| 黄网免费观看| 91要啪| 高清国产一级婬片a免费| 另类五月婷婷| 少妇性按摩无码中文A片| 日良久久| 五月丁香婷中文| 99久久天堂婷婷| 操操操操操电影网| 亚洲视频在线网站| 五月天激情社区| 九九热手机在线视频| 97人妻碰碰中文无码久热丝袜| 婷婷五月激情欧美| 91综合国免费久入| 91超碰九色| 丁香花五月天激情| 九九九九综合| 99热免费精品| 天天操天天爱天天日| 91久久1118| 色婷婷五月影院| 久狠狠| 丁香九月激情久久| 这里只有精品视频| 日本三级日本三级三级人妇四虎| 9久久婷婷国产综合精品性色| 亚洲一区二区无遮挡A片| 天天综合中文| www.日韩国产| 激情五月婷婷综合| 丁香五月天信号| 色六月婷婷| 欧美性二区| 色婷视频| 开心色播色五月婷婷| 色婷婷香蕉在线| 五月婷婷在线观看| 狠狠色丁香久久综合婷婷亚洲成人福利 | 97超碰婷婷五月天| www.亭亭五月天| 日笨久久网| 超碰免费人妻| 色婷婷婷av| 校花娇喘呻吟校长陈若雪视频| 五月六月丁香激情视频| 丁香婷婷老熟女综合网| 狠狠草狠狠草| 在线视频另类| 欧美顶级少妇做爰HD | 99热这里只要精品免费| 9有码中文| 五月天婷婷久久视频| 五月婷婷久久综合| 五月天综合色| 五月激情偷拍| 五月丁香婷婷人体| AVV黄| 五月天婷婷久久| 69er小视频| 婷婷中文字幕在线| 丁香婷婷网| 亚洲婷婷五月天激情综合| 男人視頻站| 久久久网站| 先锋av性爱成人电影| 婷婷黄色五月| 色色99| 五月天俺去也| 五月天婷婷激情网| 激情精品久久| 热99在线| 可以直接看的av| 色色色色热热| 色婷婷亚洲综合av| 五月天大香蕉| 五月丁香天堂网| 色色五月婷| 婷婷丁香成人色综合| 色婷婷婷婷| 国产性色蜜乳| 婷婷99中文字幕| 色婷婷激情Av久久久| 九月激情综合| 激情婷婷五月天在线观看| 噜噜五月天综合| 日本三级大片| 182TV大香蕉| 婷婷久久六月天| 五月天婷婷綜合院| 婷婷在线网| 日本超碰在线| 操骚货在线| 五月婷婷播| 99网址在线看| 97久久超级| 亚洲妇女熟BBW| 亚洲无码成人| 色婷婷六月丁香综合欲精品| 欧美激情xxxXX| 婷婷五月电影| 夜色爱爱亚洲| 日韩人妻白浆视频系列| 九九精品免费| 色噜噜五月天| 久久机热/这里只有精品| 婷婷色五月激情| 丁香久久五月婷综合| 色约约视频一区二区三区四区五区 | 色色cOm| 五月丁香综合伦理片| 色五月激情| 久久99日本精品视频免费观看| 九热免费视频| 婷婷狠狠干| 欧美亚洲操逼| 亚洲俩性性爱图片久久第六页| 亚洲精品国产setv| 亚洲有码在线视频| 国内9l视频自拍老熟女九色| 色五月亚洲| 国产精品18久久久| 99视频| 五月激情婷婷丁香| 97碰| 操操自拍| 欧洲综合视频| 国产色网站| 五月天精品| 三级大香蕉网| 淫水导航| 五月婷婷精品视频| www。五月天。com| 欧美丁香六月激情视频| 国产成人VA| 色婷婷久久综合久色| 丁香五月综合久久八| 色情丁香五月婷婷精品| 欧美日本黄色| 97色婷婷成人综合在线观看| 超碰色综合| 成人AV中文字幕| 98色花堂98t.R| 无码髙清| 婷婷五月丁香欧洲| 大香蕉婷婷五月天| 婷婷九月丁香| 丁香五月电影| 99在线观看视频蜜臀| 五月天伊人av| 激情性爱五月天网页| 丁香五月 六月婷婷首页| 狠狠色大香蕉| 无码AV免费精品一区二区三区| 97碰碰碰免费公开在线视频| 少妇真实被内射视频三四区| 日韩AV无码影片| 另类激情五| 婷婷欧美色| 99re思思精品视频在线观看| 国产亚洲99| 色婷婷丁香花五月天| AV性爱在线| 99久久五月婷婷| 婷婷射综合| 91久久久久久久久久久| 婷婷伊人网| 国产精品99久久久久久久女警| 99精品偷自拍| www99精品日韩| 九月大香蕉| 91九色|疯狂|高潮|对白|| 五月天激情影院| 99精品视频在线6| 亚洲久久婷婷| 激情五月婷婷丁香| 五月丁香影院| 欧美性生交XXXXX无码小说| 婷婷五月天桃花网| 日韩在线观看亚洲| 激情欧美婷婷| 色五月婷婷开心| 五月丁香婷婷导航视频| 啪啪啪大香蕉| 疯狂做受XXXX高潮A片| 男人天堂AV在线一区二区| 丁香婷婷色色| 成人视频九九| 99热97| 9久精品视频| 26uuu精品一区二区| 婷婷五月激情基地| 日本九九网| 成人电影AV在线观看| 99热99热在线观看| 婷婷成人五月天成人文学小说| 色婷久久| 9久久精品| 就爱日五月天| www,五月天com| 狠狠色激情综合| 超碰99资源站| 欧类av怡春院| 九九色院| 色婷婷丁香五月天在线视频| 婷婷五月花| 婷婷五月天成人网| 99热99| 天天插天天草人人玩| 激情五月天综合| www.色综合| 99久久.www| 激情99。| 日本啪啪网| 欧美五月停| 九热免费视频| 婷婷激情五月天小说校园| 丁香五月激情啪啪| 九热av| 色综久久AV| 日本婷久久| 久久久全国免费视频| 五月婷在线观看| 久久婷婷成人综合色怡春院| 天天爱天天操| 婷婷va| 久香草视频在线观看| 九九综合伊人| 天花AV无码| 婷五月天在线草| 九色91视频| 国产a视频| 夜夜噜夜夜奇| 日韩999| 99人人操| 开心五月综合| 丰满少妇乱A片无码| 猫咪伊人久久| 九九性视频| 亚洲精品国产A久久久久久| 99ri国产| 五月天色五月| 婷婷干六月综合旧址| 婷婷五六日| 亚洲五月婷婷| 色婷婷久久天天性爱| 天天爽免费视频| 97成人丁香| 色婷婷丁香五月在线| 色播五月丁香| 色5月婷婷色| 色99网站| 丁香五月综合狠狠| 天天草天天爱| 激情婷婷五月| 97人人射| 亚洲天堂爱爱| 人妻激情视频| 九九在线精品| 久久全色| 五月六月婷| 色播激情婷婷| 开心五月色婷婷综合开心网| 万月丁香狠狠爱| 狠狠狠狠狠狠狠狠草| 五月丁香久久久久| 亚洲 视频 导航 一区| AV性爱网| 好色婷婷| 婷婷五月天AV| 99热99| 99这里都是精品| 色噜噜五月丁香婷婷| 99色在线视频| 五月天婷婷久草丁香| 九九热99热| 日韩无码系列| 九九在线精点品| 五月婷婷色欲| 欧美日本一区二区三区| 狠狠爱深色婷婷综合| 久色五月| 香蕉久久五月| 五月丁香淫淫婷婷婷| 婷五月天| 欧美色性色好| 久久久久久激情| WWW,五月| 亚洲色色在线| 性爱网五月婷婷| 5月婷婷五月天| 99超碰在线免费| 五月丁香婷婷婷激情爱爱| 91人人澡人人爽人人看| 久久久久久久久久8888| 久久久中文| 无码日本精品XXXXXXXXX | 色五月天综合| 五月天另类小说久久小说网| 天天色综网| 黑人无码一区| 亭亭色网| 丁香五月天偷拍| 鲁鲁色五月| 五月丁香啪啪综合| 精品亚洲国产成AV人片传媒| 五月在线| 五月丁香婷婷婷婷综合网| 色欲色欲久久宗合网| 日日操日日撸| 丁香激情久久| 欧美这里只有精品| www.五月婷婷久久.com| 亚洲人成网站999综合| 成人电影AV在线观看| 亚洲国产精品成人免费一区久久久在线观看AAAA | 在线伦子99热| 日韩狠狠色| 天天舔夜夜操www com| 五月丁香婷婷欧美色图视频五月丁香777电影 | 我淫我色婷婷五月天激情四射| 五月之婷婷| 99人人干人人| 日韩免费视频| 久久婷婷五月综合色和| 99ri在线观看视频| 亚洲乱码日产精品BD| 十月色综合| 大香蕉九九| 久久久久久久11111111111| 色五月 五月婷婷| 久久这里只有精品5| 丁香五月婷婷图片综合| 99日在线视频| 激情丁香五月激情婷婷| 超碰男人色| 少妇AB又爽又紧无码网站| 狠狠婷婷爱| 六月丁香六月婷婷欧美| 激情五月综合网| 狠狠色综合网| 婷婷六月丁香综合| 天天综合91入口| 婷婷色五月激情| va亚洲中文在线| 五月天狠狠网站| WWW.五月com| 婷婷五月天影院| 天天日天天干天天天| 日熟女| 色六月 婷婷| a在线观看| 五月婷婷六月少妇激情| 五月婷婷xxx| 99在线热视频| 国产午夜精品一区二区三区四区| 婷婷综合五月天| 婷婷天天综合| 婷婷综合五月天| 日本欧美999久久久三级片| 噜噜在线| 婷婷精品在线| 六月久久狠狠| 另类A片| 狠狠色综合网站久久久久| 日日爽夜夜爽| 超碰AV在线| 亚洲va在线∨a天堂va欧美va| 午夜 外网 精品 在线| 五月丁香六月成人| 大战熟女丰满人妻AV| 狠狠做婷婷| 天天拍天天操| 精品色色色| 久久99热这里| 思思热这里只有精品视频666| 久婷视频| 五月婷护士| 国产这里只有精品| 激情综合无码| 国产婷婷五月天| 综合五月丁香六月婷婷| 久久这里只有精品无码| 99开心五月五月丁香激情| 黄网免费观看| 在线伦子99热| 月色色综合婷婷网| 99天堂在线观看免费视频| 婷婷综合五月| 久久9久| 天天干一干| 99视频在线观看网址| 天天爽天天摸| 丁香九月婷婷色| 色五月亚洲五月天| 欧美综合激情五月丁香| 超碰av在线| 99啪99| 人人叉久| 丁香婷婷五月人体| 婷婷五月综合色中文字幕| 九九精品丁香花| av网站免费在线| 丁香五月天AV在线 | 国产激情久久久| 亚洲欧洲国产精品| www.色五月.com| 色狠狠999综合| 丁香五月色色婷| 亚洲av午夜精品一区二区| 亚洲一二三网| 97se在线视频| 婷婷热色| 日本三级色| 激情婷婷丁香色五月| www五月天com| 天堂亚洲 在线| 爆乳熟女一区二区三区爆乳| 视频久久9| 色噜噜狠狠色综合成人网| 五月天婷婷綜合院| 丁香色五月AV在线| 91chinese 在线| 色护士综合| 第四色五月婷婷| 日韩99视频| 婷婷中文字幕| 中文字幕黄色片| 99热在线观看| 99视频| 色婷婷丁香AV综合| 激情五月天色色色| 丁香五月综合激情性爱| 五月天婷婷香蕉狠狠超碰综合| 婷婷天堂综合| 99er这里只有精品| 色综合播放| 亚洲五月丁| 婷婷丁香五月天在线| 欧美日本va| 啪啪激情网| 思思热在线视频精品| 激情五月天影院| 欧美日本日韩| 国产精女同一区二区三区久| 东北熟女高潮99综合99| 久久综合中文字幕| 黄色99视频| 啪啪干伊人婷婷| 99热在线观看免费| 色五月激情五月| 色婷婷www| 国产无遮挡又黄又爽免费网站| 六月婷婷操逼| 天天肏在线观看| Xx色综合| 久久亚洲婷婷| 五月婷婷影| 久久久久人妻| av婷婷丁香| 婷婷欧美综合| 色五月婷婷开心| 六月丁香五月天| 天天做天天爽| a免费在线| 婷婷伊人网| 日日想日日夜日日操| 婷婷色综合| 久草热在线视频| 综合色五月亭亭| 日本人人草草| 精品综合久久久久久五月天| 欧美人妻一区二区| 99色亚洲| 综合网精品99| 五月激情啪啪| AV79| 色综合色色| 午夜微拍福利| 日本成人内射| 久久婷五月| 五月婷婷婷婷网| 色五月激情网| 国产av一区二区三区| 99久久精品国产色欲| 婷婷丁香久久五月综合| 日韩AAAAA| 激情五月婷婷| 天天操五月天| 五月丁香色婷婷基地| 婷婷五月丁香综合激情| 色综合色香蕉网| 五月婷精品| 激情综合网激情五月丁香| 99久久久久| 五月婷天堂视频| 综合五月草| 五月丁香色综合| 久久伊人五月天| 五月亭大香蕉| av激情在线| site:publishdd.com| 91成人性爱视频| 香蕉色色网| caopeng超碰| 99热综合色图| 香蕉99网| 蜜桃婷婷丁香五月天狠狠久久综合| 激情五月丁香亭亭| 欧美性生交A片免费看| 九九激情综合| 深爱激情丁香| 无码少妇高潮喷水A片免费| 亚洲视频二区| 天天做天天爱天天玩| 操操操B| 色欲操| 操骚货在线| 九九综合九色欧美狠狠| 99er国产| 丁香六月婷婷综合激情欧美| 丁香天堂夜| 婷婷丁香五月欧美人| 欧美性爱五月天| 亚洲网站999| 99精品综合| 丁香六月婷婷基地| 五月天小说激情| 综合网亚洲| 碰碰91| www.99成人视频| 色色色五月天婷婷| 婷婷五月丁香基| 亚洲操人| 亚洲成人免费在线| 操逼视频一区| 五月天婷婷綜合院| 狠狠人人婷婷| 丁香五月玖玖| 激情五月天婷婷视频| 成人做爰A片免费看视频| 婷婷五月天久久综合88| 五月丁香成人小说| 超碰精品国产首页| 色色网五月激情| 九97免费视频| 五月色网| 婷婷97C| 久久五月激情| 国产精品24r| 色噜噜狠狠插综合| 日本色99网站| 国产婷婷五月天| 久草丁香婷婷1024| 99色在线观看| 色噜噜丁香| 久久久久久丁香五月| 五月天激情小说网| 青青草a在线| 乱精品一区字幕二区| 99亚洲综合| 久草热久草在线视频| 热久久99视频| 国产精品美女久久久久AV超清| 99热在线爱| 成人小说色图婷婷五月| 激情五月综合网最新| 激情都市另类| 亚洲亚洲亚洲AAAAAA| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 涩九九九九| 播五月开心婷婷欧美综合| 九九色之九九色88| 91九色丨国产丨爆乳| 97人人草| 色色激情五月天| 激情五月丁香激情综合网| 婷婷五月天性色| 色亚洲欧洲| 9999三级片| 综合激情婷婷| 五月丁香日本在线视频观看| 九九色色| 日韩欧美一级大黄网站| 五月丁香婷婷综合网色欲| 婷婷五月综合视频| 婷久久高清| 丁香婷婷月| 丁香色色网| 日本色婷婷| 色大综合| 超碰A V在线| 自拍偷窥99热| 色婷婷五月基地在线| 五月婷婷电影院| 五月激情综合网| 色婷婷色99国产综合精品| 怡红院AV亚洲一区二区三区H | 9久久精品| 深爱五月中文字幕| 毛片九九九九九九九九18| 99视频精品在线| 亚洲婷婷五月天在线激情综合网| 日日日日日| 五月天婷婷无码| 色啪影院| BBWCUCKOLD精品熟妇| 天天玩夜夜操| 九九Av| 风流少妇A片一区二区蜜桃| 激情婷婷五月| 色亚洲无码| 久久久久久婷| 97操碰视频| 丁香五月视频在线观看| 久久码久久无清| 天天色宗合| 九九精品视频在线6| 五月丁香激情四射| 精品一区二区三区免费毛片爱| 色综合久久久久久久久五月| 婷婷六月综合| 五月丁香六月片|