欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

深入Linux內(nèi)核TCP狀態(tài)機(jī):從TIME_WAIT到CLOSE_WAIT的故障排查與調(diào)優(yōu)

深入Linux內(nèi)核TCP狀態(tài)機(jī):從TIME_WAIT到CLOSE_WAIT的故障排查與調(diào)優(yōu) 在實(shí)際網(wǎng)絡(luò)編程和系統(tǒng)調(diào)優(yōu)中理解 TCP 連接的生命周期是診斷網(wǎng)絡(luò)超時(shí)、連接池耗盡、端口占用等問題的基石。很多開發(fā)者熟悉三次握手和四次揮手的概念但面對(duì)netstat命令輸出的TIME_WAIT、CLOSE_WAIT、FIN_WAIT_2等狀態(tài)時(shí)往往難以快速定位問題根因。這些狀態(tài)的產(chǎn)生、轉(zhuǎn)換和超時(shí)都源于 Linux 內(nèi)核中 TCP 協(xié)議棧對(duì) RFC 793 標(biāo)準(zhǔn)狀態(tài)機(jī)的具體實(shí)現(xiàn)。僅僅記住狀態(tài)轉(zhuǎn)換圖是不夠的必須結(jié)合內(nèi)核源碼、系統(tǒng)配置和實(shí)際網(wǎng)絡(luò)包交互才能理解為什么連接會(huì)卡在某個(gè)狀態(tài)以及如何安全地干預(yù)。本文將從工程實(shí)踐角度深入 Linux 內(nèi)核的 TCP 狀態(tài)機(jī)。我們不會(huì)停留在理論狀態(tài)圖而是結(jié)合netstat、ss命令的輸出解讀內(nèi)核源碼以穩(wěn)定版 5.x 為例中的關(guān)鍵邏輯并分析常見故障狀態(tài)如大量TIME_WAIT、CLOSE_WAIT的產(chǎn)生場景和解決方案。通過本文你將能清晰地回答當(dāng)服務(wù)器出現(xiàn)大量CLOSE_WAIT時(shí)是應(yīng)用程序的問題還是內(nèi)核參數(shù)的問題調(diào)整tcp_fin_timeout或tcp_tw_reuse究竟影響了狀態(tài)機(jī)的哪個(gè)環(huán)節(jié)1. TCP 狀態(tài)機(jī)從 RFC 到內(nèi)核實(shí)現(xiàn)的理解框架TCP 狀態(tài)機(jī)定義了一個(gè)連接從建立到終止所有可能的狀態(tài)以及狀態(tài)間的轉(zhuǎn)換規(guī)則。RFC 793 標(biāo)準(zhǔn)定義了 11 種狀態(tài)CLOSED,LISTEN,SYN_SENT,SYN_RECEIVED,ESTABLISHED,FIN_WAIT_1,FIN_WAIT_2,CLOSE_WAIT,LAST_ACK,TIME_WAIT, 以及理論上瞬間的CLOSING。Linux 內(nèi)核的 TCP 實(shí)現(xiàn)嚴(yán)格遵循此狀態(tài)機(jī)但增加了更多細(xì)粒度的內(nèi)部狀態(tài)以適應(yīng)高性能和復(fù)雜網(wǎng)絡(luò)環(huán)境。理解狀態(tài)機(jī)的關(guān)鍵不在于背誦所有箭頭而在于掌握三個(gè)核心視角主動(dòng)視角與被動(dòng)視角發(fā)起連接的一方客戶端和接受連接的一方服務(wù)器經(jīng)歷的狀態(tài)序列不同。報(bào)文驅(qū)動(dòng)所有狀態(tài)轉(zhuǎn)換都由接收或發(fā)送特定的 TCP 報(bào)文段SYN, ACK, FIN, RST觸發(fā)。超時(shí)機(jī)制每個(gè)非穩(wěn)定狀態(tài)都關(guān)聯(lián)著定時(shí)器防止連接無限期掛起。一個(gè)常見的誤解是將狀態(tài)機(jī)視為應(yīng)用程序控制的。實(shí)際上狀態(tài)機(jī)主要由內(nèi)核 TCP/IP 協(xié)議棧維護(hù)。應(yīng)用程序通過socket()、connect()、accept()、close()等系統(tǒng)調(diào)用向內(nèi)核發(fā)出指令內(nèi)核根據(jù)指令和網(wǎng)絡(luò)報(bào)文來驅(qū)動(dòng)狀態(tài)變遷。因此排查狀態(tài)異常時(shí)需要同時(shí)審視應(yīng)用程序的代碼邏輯和內(nèi)核的協(xié)議棧行為。2. 環(huán)境準(zhǔn)備與觀察工具在深入狀態(tài)轉(zhuǎn)換之前我們需要準(zhǔn)備好觀察狀態(tài)的環(huán)境和工具。任何 Linux 發(fā)行版均可但內(nèi)核版本建議在 4.x 以上以便使用更現(xiàn)代的觀測工具。2.1 核心觀測命令netstat和ss是查看 TCP 連接狀態(tài)最直接的工具。ss來自iproute2包性能更好信息更詳細(xì)是netstat的現(xiàn)代替代品。# 安裝 ss (通常系統(tǒng)已預(yù)裝) sudo apt-get install iproute2 # Debian/Ubuntu sudo yum install iproute # RHEL/CentOS # 查看所有 TCP 連接及其狀態(tài) ss -tna關(guān)鍵輸出列解釋State: 連接狀態(tài)即我們關(guān)注的狀態(tài)機(jī)狀態(tài)。Local Address:Port: 本地 IP 和端口。Peer Address:Port: 對(duì)端 IP 和端口。-n參數(shù)禁用域名解析顯示更快。2.2 內(nèi)核參數(shù)與日志TCP 狀態(tài)機(jī)的行為受一系列/proc/sys/net/ipv4/下的內(nèi)核參數(shù)控制。了解它們對(duì)于調(diào)優(yōu)和排錯(cuò)至關(guān)重要。# 查看與 TCP 狀態(tài)超時(shí)相關(guān)的關(guān)鍵參數(shù) cat /proc/sys/net/ipv4/tcp_fin_timeout # FIN_WAIT_2 和 TIME_WAIT 狀態(tài)超時(shí)時(shí)間 cat /proc/sys/net/ipv4/tcp_tw_reuse # 是否允許復(fù)用 TIME_WAIT 狀態(tài)的 socket cat /proc/sys/net/ipv4/tcp_max_tw_buckets # 系統(tǒng)允許的 TIME_WAIT 連接最大數(shù)量 cat /proc/sys/net/ipv4/tcp_keepalive_time # 保活探測起始時(shí)間內(nèi)核日志 (dmesg或/var/log/kern.log) 有時(shí)會(huì)記錄 TCP 的異常事件如重傳超時(shí)、無效段等是排查復(fù)雜問題的輔助手段。2.3 簡易測試環(huán)境搭建我們可以使用nc(netcat) 和telnet快速創(chuàng)建 TCP 連接并配合ss觀察狀態(tài)變化。# 在終端1啟動(dòng)一個(gè)監(jiān)聽服務(wù)器 nc -l 8080 # 在終端2使用 ss 觀察監(jiān)聽狀態(tài) ss -tna | grep :8080 # 輸出應(yīng)類似: LISTEN 0 1 *:8080 *:* # 在終端3連接該服務(wù)器 telnet localhost 8080 # 立即在終端2再次運(yùn)行 ss會(huì)看到 ESTABLISHED 狀態(tài)的連接3. 連接建立與終止?fàn)顟B(tài)轉(zhuǎn)換詳解與內(nèi)核源碼映射本節(jié)我們以一次完整的 TCP 連接為例跟蹤每個(gè)狀態(tài)并簡要關(guān)聯(lián)內(nèi)核源碼中的處理邏輯基于 Linux 5.10 內(nèi)核。3.1 三次握手與狀態(tài)轉(zhuǎn)換場景客戶端 (10.0.0.1:50000) 連接服務(wù)器 (10.0.0.2:80)。LISTEN服務(wù)器端應(yīng)用程序調(diào)用listen()后socket 進(jìn)入此狀態(tài)等待 SYN 報(bào)文。內(nèi)核源碼net/ipv4/tcp.c中的tcp_v4_rcv函數(shù)是 TCP 報(bào)文入口。當(dāng)收到 SYN 報(bào)文且找到對(duì)應(yīng)的LISTENsocket 時(shí)會(huì)調(diào)用tcp_conn_request處理連接請(qǐng)求。觀察ss -tna | grep :80顯示LISTEN。SYN_SENT客戶端調(diào)用connect()后內(nèi)核發(fā)送 SYN 報(bào)文socket 進(jìn)入此狀態(tài)等待服務(wù)器的 SYN-ACK。內(nèi)核源碼connect()系統(tǒng)調(diào)用最終會(huì)調(diào)用tcp_connect函數(shù)初始化序列號(hào)并發(fā)送 SYN。觀察在客戶端機(jī)器上連接成功后此狀態(tài)瞬間消失。如果卡在此狀態(tài)通常是對(duì)端未響應(yīng)防火墻丟棄、服務(wù)未監(jiān)聽。SYN_RECEIVED(常被縮寫為SYN_RECV)服務(wù)器端收到 SYN 后回復(fù) SYN-ACK并進(jìn)入此狀態(tài)等待客戶端的 ACK。這是“半連接”狀態(tài)是 SYN Flood 攻擊的目標(biāo)。系統(tǒng)用syn backlog隊(duì)列存放這些連接。內(nèi)核參數(shù)net.ipv4.tcp_max_syn_backlog控制隊(duì)列大小。觀察通常很難用ss直接看到因?yàn)檗D(zhuǎn)換很快。但在高并發(fā)連接或遭受攻擊時(shí)netstat -n -p TCP | grep SYN_RECV可能會(huì)看到大量此類連接。ESTABLISHED雙方客戶端收到 SYN-ACK 后發(fā)送 ACK服務(wù)器收到此 ACK。至此雙方連接建立進(jìn)入數(shù)據(jù)傳輸狀態(tài)。內(nèi)核源碼對(duì)于被動(dòng)方服務(wù)器在tcp_rcv_state_process函數(shù)中處理第三次握手的 ACK將連接狀態(tài)置為ESTABLISHED并移入accept隊(duì)列。關(guān)鍵排查點(diǎn)如果服務(wù)器accept()調(diào)用太慢ESTABLISHED連接會(huì)在內(nèi)核的accept隊(duì)列中堆積。隊(duì)列長度由listen()的backlog參數(shù)和內(nèi)核參數(shù)net.core.somaxconn共同決定。隊(duì)列滿后新連接可能被丟棄。3.2 四次揮手與狀態(tài)轉(zhuǎn)換場景客戶端主動(dòng)關(guān)閉連接。FIN_WAIT_1主動(dòng)關(guān)閉方客戶端應(yīng)用程序調(diào)用close()或shutdown(SHUT_WR)內(nèi)核發(fā)送 FIN 報(bào)文進(jìn)入此狀態(tài)。等待對(duì)端的 ACK或?qū)Χ说?FIN如果兩端同時(shí)關(guān)閉。內(nèi)核源碼tcp_close函數(shù)會(huì)啟動(dòng)關(guān)閉流程發(fā)送 FIN。CLOSE_WAIT被動(dòng)關(guān)閉方服務(wù)器收到對(duì)端的 FIN 后內(nèi)核回復(fù) ACKsocket 狀態(tài)變?yōu)镃LOSE_WAIT。這是一個(gè)明確的應(yīng)用程序問題指示器。該狀態(tài)表示對(duì)端已關(guān)閉發(fā)送通道但本端應(yīng)用程序尚未調(diào)用close()來關(guān)閉本端連接。本質(zhì)連接處于“半關(guān)閉”狀態(tài)服務(wù)器仍可以發(fā)送數(shù)據(jù)給客戶端但不會(huì)再收到客戶端數(shù)據(jù)。觀察與危害ss -tna | grep CLOSE_WAIT。大量CLOSE_WAIT會(huì)耗盡文件描述符導(dǎo)致服務(wù)無法新建連接。FIN_WAIT_2主動(dòng)關(guān)閉方客戶端收到對(duì)端對(duì)自己 FIN 的 ACK 后進(jìn)入此狀態(tài)。等待對(duì)端的 FIN 報(bào)文。超時(shí)由net.ipv4.tcp_fin_timeout控制默認(rèn) 60 秒。超時(shí)后連接直接銷毀。LAST_ACK被動(dòng)關(guān)閉方服務(wù)器當(dāng)應(yīng)用程序終于調(diào)用close()后內(nèi)核發(fā)送本端的 FIN 報(bào)文進(jìn)入此狀態(tài)。等待對(duì)端對(duì)這個(gè) FIN 的 ACK。TIME_WAIT(2MSL 狀態(tài))主動(dòng)關(guān)閉方客戶端收到對(duì)端的 FIN 后發(fā)送最終的 ACK并進(jìn)入TIME_WAIT。目的可靠地終止連接確保最后的 ACK 能到達(dá)對(duì)端如果丟失對(duì)端會(huì)重傳 FIN。讓舊連接的重復(fù)報(bào)文在網(wǎng)絡(luò)中消逝防止具有相同四元組源IP、源端口、目的IP、目的端口的新連接收到屬于舊連接的延遲報(bào)文。持續(xù)時(shí)間2 倍 Maximum Segment Lifetime (MSL)。Linux 默認(rèn) MSL 為 60 秒因此TIME_WAIT默認(rèn)持續(xù)120 秒。該值由net.ipv4.tcp_fin_timeout間接影響它控制FIN_WAIT_2和TIME_WAIT的超時(shí)但TIME_WAIT固定為 2MSL。觀察在高性能短連接服務(wù)如 HTTP 服務(wù)器上作為主動(dòng)關(guān)閉方的服務(wù)器會(huì)產(chǎn)生大量TIME_WAIT連接。這是正?,F(xiàn)象但可能耗盡端口或內(nèi)存。CLOSING一種較少見的狀態(tài)雙方幾乎同時(shí)發(fā)送 FIN。此時(shí)雙方都處于FIN_WAIT_1收到對(duì)方的 FIN 后都進(jìn)入CLOSING等待對(duì)方的 ACK。收到 ACK 后進(jìn)入TIME_WAIT。CLOSED連接完全關(guān)閉資源已釋放。這是一個(gè)理論狀態(tài)ss或netstat不會(huì)顯示。4. 典型故障狀態(tài)分析與實(shí)戰(zhàn)排查理解了狀態(tài)轉(zhuǎn)換我們就可以系統(tǒng)地分析生產(chǎn)環(huán)境中常見的連接狀態(tài)異常。4.1 案例一服務(wù)器存在大量CLOSE_WAIT現(xiàn)象服務(wù)器監(jiān)控顯示CLOSE_WAIT連接數(shù)持續(xù)增長最終導(dǎo)致“Too many open files”錯(cuò)誤新連接無法建立。根因分析 根據(jù)狀態(tài)機(jī)CLOSE_WAIT出現(xiàn)在被動(dòng)關(guān)閉方且需要等待應(yīng)用程序調(diào)用close()。因此根本原因一定是服務(wù)器應(yīng)用程序沒有正確關(guān)閉 socket。常見代碼缺陷未捕獲異常在 try-catch 塊中打開了 socket但異常發(fā)生時(shí)跳過了close()調(diào)用。// 錯(cuò)誤示例 (Java) try { Socket socket new Socket(host, port); // ... 業(yè)務(wù)邏輯可能拋出異常 socket.close(); // 如果上面拋出異常這行不會(huì)執(zhí)行 } catch (IOException e) { // 僅打印日志socket 未關(guān)閉 e.printStackTrace(); }未使用 try-with-resources 或 finally 塊Java或using語句C#。長連接場景下邏輯缺陷導(dǎo)致close()在某些分支未被調(diào)用。使用了連接池但歸還連接時(shí)未正確重置或關(guān)閉。排查步驟確認(rèn)現(xiàn)象ss -tan state close-wait查看連接數(shù)量和對(duì)應(yīng)的進(jìn)程 PID (-p參數(shù))。定位進(jìn)程ss -tanp state close-wait | grep PID或lsof -iTCP:CLOSE_WAIT。分析代碼找到對(duì)應(yīng)進(jìn)程的源代碼檢查所有使用 Socket 的地方確保在任何路徑正常、異常、分支下socket 最終都被關(guān)閉。使用資源自動(dòng)管理// 正確示例 (Java) try (Socket socket new Socket(host, port); OutputStream out socket.getOutputStream(); InputStream in socket.getInputStream()) { // ... 業(yè)務(wù)邏輯 } catch (IOException e) { // 無需手動(dòng) close try-with-resources 會(huì)自動(dòng)處理 e.printStackTrace(); }內(nèi)核參數(shù)誤區(qū)CLOSE_WAIT是應(yīng)用程序行為導(dǎo)致的調(diào)整內(nèi)核 TCP 參數(shù)如tcp_fin_timeout無法解決此問題。必須修復(fù)應(yīng)用程序代碼。4.2 案例二服務(wù)器存在大量TIME_WAIT現(xiàn)象作為 HTTP 服務(wù)器如 Nginx、Tomcat在承受高并發(fā)短連接請(qǐng)求后ss -tan state time-wait顯示數(shù)量極多??赡馨殡S“無法分配本地端口”的錯(cuò)誤。根因分析TIME_WAIT出現(xiàn)在主動(dòng)關(guān)閉連接的一方。在 HTTP/1.0 或未開啟 Keep-Alive 的 HTTP/1.1 協(xié)議中服務(wù)器處理完請(qǐng)求后會(huì)主動(dòng)關(guān)閉連接從而成為主動(dòng)關(guān)閉方產(chǎn)生TIME_WAIT。這是 TCP 協(xié)議設(shè)計(jì)的正常部分目的是保證可靠終止和防止報(bào)文混淆。影響占用資源每個(gè)TIME_WAIT連接占用一個(gè)四元組本地IP、本地端口、遠(yuǎn)端IP、遠(yuǎn)端端口。在極端情況下可能耗盡可用端口特別是當(dāng)客戶端IP和端口固定時(shí)。內(nèi)存開銷每個(gè) socket 結(jié)構(gòu)體占用少量內(nèi)核內(nèi)存。解決方案與內(nèi)核參數(shù)調(diào)優(yōu) 首先需要判斷TIME_WAIT是否真的成為了瓶頸例如端口不足的錯(cuò)誤日志。不要盲目優(yōu)化。解決方案原理與操作風(fēng)險(xiǎn)與注意事項(xiàng)1. 啟用 HTTP Keep-Alive讓客戶端和服務(wù)器復(fù)用同一個(gè) TCP 連接處理多個(gè)請(qǐng)求減少連接建立和關(guān)閉的次數(shù)。這是應(yīng)用層首選方案。需要客戶端和服務(wù)器同時(shí)支持??赡茉黾臃?wù)器并發(fā)連接持有時(shí)間。2. 調(diào)整net.ipv4.tcp_tw_reuse允許內(nèi)核復(fù)用處于TIME_WAIT狀態(tài)的 socket 用于新的出向連接。echo 1 /proc/sys/net/ipv4/tcp_tw_reuse僅適用于客戶端出向連接。復(fù)用需滿足安全條件時(shí)間戳機(jī)制??赡芙邮张f連接的延遲報(bào)文但概率極低。3. 調(diào)整net.ipv4.tcp_tw_recycle已廢棄該參數(shù)在較新內(nèi)核中已移除。它曾用于快速回收TIME_WAIT但會(huì)破壞 NAT 環(huán)境下的連接切勿使用。Linux 4.12 內(nèi)核已移除此參數(shù)。在老版本中設(shè)置也極其危險(xiǎn)。4. 調(diào)整net.ipv4.tcp_max_tw_buckets系統(tǒng)允許的TIME_WAIT連接最大數(shù)量。超出后系統(tǒng)會(huì)直接銷毀最早的TIME_WAIT連接。echo 180000 /proc/sys/net/ipv4/tcp_max_tw_buckets一種“粗暴”的兜底方案。如果連接數(shù)真的超過此限制銷毀TIME_WAIT可能增加收到舊報(bào)文的風(fēng)險(xiǎn)。5. 使用SO_LINGER套接字選項(xiàng)應(yīng)用程序設(shè)置SO_LINGER并指定超時(shí) 0調(diào)用close()時(shí)會(huì)發(fā)送 RST 而非 FIN跳過TIME_WAIT。破壞性方案。對(duì)端會(huì)收到連接重置錯(cuò)誤。僅適用于對(duì)連接可靠性要求極低、且能容忍對(duì)端錯(cuò)誤的場景。生產(chǎn)建議優(yōu)先優(yōu)化應(yīng)用啟用并合理配置 Keep-Alive。謹(jǐn)慎調(diào)整內(nèi)核參數(shù)如果服務(wù)器主要作為客戶端如微服務(wù)調(diào)用方可以開啟tcp_tw_reuse1。對(duì)于服務(wù)器角色通常不建議為了減少TIME_WAIT而調(diào)整內(nèi)核參數(shù)除非有明確的端口耗盡證據(jù)。監(jiān)控監(jiān)控TIME_WAIT連接數(shù) (ss -tan state time-wait | wc -l) 和本地端口范圍使用情況 (cat /proc/sys/net/ipv4/ip_local_port_range)。4.3 案例三連接卡在FIN_WAIT_2或LAST_ACKFIN_WAIT_2過多現(xiàn)象主動(dòng)關(guān)閉方長時(shí)間處于FIN_WAIT_2。原因被動(dòng)關(guān)閉方對(duì)端在收到 FIN 并回復(fù) ACK 后其應(yīng)用程序遲遲不調(diào)用close()發(fā)送 FIN即對(duì)端卡在了CLOSE_WAIT。解決問題在對(duì)端。需要檢查對(duì)端應(yīng)用程序的代碼確保及時(shí)關(guān)閉 socket。本端可以通過net.ipv4.tcp_fin_timeout默認(rèn)60秒控制等待時(shí)間超時(shí)后本端連接銷毀。LAST_ACK過多現(xiàn)象被動(dòng)關(guān)閉方長時(shí)間處于LAST_ACK。原因本端已發(fā)送 FIN但未收到對(duì)端的最終 ACK。排查網(wǎng)絡(luò)問題導(dǎo)致 ACK 丟失對(duì)端是否正常對(duì)端是否因?yàn)門IME_WAIT過多導(dǎo)致端口/資源耗盡無法處理新報(bào)文對(duì)端是否有防火墻規(guī)則丟棄了 ACK 包內(nèi)核行為處于LAST_ACK的連接會(huì)重傳 FIN重傳策略由net.ipv4.tcp_retries2等參數(shù)控制。重傳失敗后連接最終被丟棄。5. 內(nèi)核參數(shù)調(diào)優(yōu)與最佳實(shí)踐以下表格整理了與 TCP 狀態(tài)機(jī)相關(guān)的主要內(nèi)核參數(shù)及其生產(chǎn)環(huán)境調(diào)優(yōu)建議。參數(shù)路徑默認(rèn)值含義調(diào)優(yōu)建議net.ipv4.tcp_fin_timeout60FIN_WAIT_2狀態(tài)的超時(shí)時(shí)間秒。也影響TIME_WAIT的 2MSL 計(jì)算。對(duì)于內(nèi)部高速網(wǎng)絡(luò)可適當(dāng)降低至 30以更快釋放資源。但降低過多可能干擾延遲較大的 FIN 重傳。net.ipv4.tcp_tw_reuse0是否允許將TIME_WAITsockets 重新用于新的出向連接。若服務(wù)器需要頻繁作為客戶端發(fā)起大量短連接可設(shè)為1。需確保net.ipv4.tcp_timestamps1默認(rèn)開啟。net.ipv4.tcp_max_tw_buckets依賴系統(tǒng)系統(tǒng)同時(shí)持有的TIME_WAIT連接最大數(shù)量。作為安全兜底可設(shè)置為一個(gè)較大值如 180000防止TIME_WAIT耗盡所有內(nèi)存。net.ipv4.ip_local_port_range32768 60999本地出向連接可用的臨時(shí)端口范圍。如果作為客戶端并發(fā)量極大可擴(kuò)大此范圍如 10000 65000。注意端口數(shù)不能超過 65535。net.ipv4.tcp_syn_retries6主動(dòng)建立連接時(shí)SYN 報(bào)文的重試次數(shù)。內(nèi)網(wǎng)環(huán)境可降低至 2-3以更快發(fā)現(xiàn)連接失敗。公網(wǎng)環(huán)境不建議調(diào)低。net.ipv4.tcp_synack_retries5被動(dòng)建立連接時(shí)SYN-ACK 報(bào)文的重試次數(shù)。同上內(nèi)網(wǎng)可適當(dāng)調(diào)低。net.core.somaxconn4096 (可能因發(fā)行版而異)系統(tǒng)級(jí)別listen()隊(duì)列的最大長度。高并發(fā)服務(wù)應(yīng)調(diào)大如65535。需與應(yīng)用程序listen()的backlog參數(shù)配合使用。net.ipv4.tcp_max_syn_backlog1024SYN_RECV 狀態(tài)隊(duì)列半連接隊(duì)列的最大長度。在可能遭受 SYN Flood 或超高并發(fā)連接時(shí)需要調(diào)大。通常與somaxconn一起調(diào)整。net.ipv4.tcp_keepalive_time7200 (秒)TCP ?;顧C(jī)制開始發(fā)送探測報(bào)文前的空閑時(shí)間。對(duì)于需要快速感知對(duì)端失效的長連接如數(shù)據(jù)庫連接池可調(diào)小如 3005分鐘。參數(shù)設(shè)置方法臨時(shí)生效sudo sysctl -w net.ipv4.tcp_fin_timeout30 sudo sysctl -w net.ipv4.tcp_tw_reuse1參數(shù)設(shè)置方法永久生效 編輯/etc/sysctl.conf文件添加或修改對(duì)應(yīng)行然后執(zhí)行sudo sysctl -p使其生效。6. 總結(jié)與擴(kuò)展學(xué)習(xí)路徑TCP 狀態(tài)機(jī)是理解網(wǎng)絡(luò)連接行為的核心模型。從LISTEN到CLOSED的每一個(gè)狀態(tài)都是內(nèi)核協(xié)議棧、應(yīng)用程序代碼和網(wǎng)絡(luò)環(huán)境共同作用的結(jié)果。排查網(wǎng)絡(luò)連接問題時(shí)應(yīng)養(yǎng)成首先使用ss或netstat觀察連接狀態(tài)的習(xí)慣并根據(jù)狀態(tài)機(jī)推斷問題發(fā)生在哪一環(huán)節(jié)。核心排查心智模型CLOSE_WAIT多-檢查本端應(yīng)用程序的 socket 關(guān)閉邏輯。TIME_WAIT多-區(qū)分角色。如果是服務(wù)器產(chǎn)生考慮啟用 Keep-Alive如果是客戶端產(chǎn)生考慮開啟tcp_tw_reuse。先評(píng)估是否真的成為瓶頸。FIN_WAIT_2多-檢查對(duì)端應(yīng)用程序是否卡在CLOSE_WAIT。SYN_RECV多- 檢查是否遭受 SYN Flood 攻擊或backlog參數(shù)是否設(shè)置過小。連接建立失敗- 檢查SYN_SENT狀態(tài)排查網(wǎng)絡(luò)連通性、防火墻、服務(wù)是否監(jiān)聽。擴(kuò)展學(xué)習(xí)深入內(nèi)核閱讀 Linux 內(nèi)核源碼net/ipv4/tcp.c和net/ipv4/tcp_input.c跟蹤tcp_rcv_state_process函數(shù)這是驅(qū)動(dòng)狀態(tài)機(jī)的主函數(shù)。網(wǎng)絡(luò)抓包使用tcpdump或 Wireshark 抓取三次握手和四次揮手的完整報(bào)文序列與ss觀察到的狀態(tài)變化進(jìn)行對(duì)照這是最直觀的學(xué)習(xí)方式。性能分析學(xué)習(xí)使用systemtap,perf或bpftrace等工具動(dòng)態(tài)跟蹤內(nèi)核 TCP 函數(shù)的調(diào)用分析狀態(tài)轉(zhuǎn)換的性能開銷。協(xié)議進(jìn)階研究 TCP 快速打開TFO、TCP 延遲確認(rèn)Delayed ACK等特性如何影響狀態(tài)機(jī)的轉(zhuǎn)換時(shí)機(jī)。最終將狀態(tài)機(jī)的理論知識(shí)與具體的命令輸出、內(nèi)核參數(shù)和應(yīng)用程序代碼相結(jié)合你就能在面對(duì)復(fù)雜的網(wǎng)絡(luò)連接問題時(shí)擁有清晰的排查思路和有效的解決手段。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久9久成人精品视频| 热九九精品| 79色色色色| 9久热精品在线视频| 五月六月激情| 欧美成人网婷婷综合在线| 丁香婷婷性久久| 日本欧美成人片AAAA| 国产全是老熟女太爽了| 色五月五月丁香| 色色色色色色色色色影院| 青青久久五月天丁香婷婷| 久久久99免费视频| 色丁香五月婷婷| 美女要搞搞天天搞搞搞网站| 色久播播| 久久久人妻门| 婷婷五月另类网站| 在线99热| 97久久草草超级碰碰碰| 色天天久婷婷| av最新在线| 欧美五月婷婷| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 思思精品久久艹| 亚洲狠狠丁香婷婷香蕉| 99九九热视频| 婷婷色香六月综合激情| 色色丁香色五月| 五月婷视频| 久久中国毛毛片爱久久| av操逼网| 激情五月四色| 婷婷97色| 欧美A级成人婬片免费看理论| 99欧美| 99免费热视频在线| 伊人久久丁香狠狠婷婷综合香蕉| XX久久| 9九热视频| 色婷婷成人做爰A片免费看网站 | 玖色色综合| 色欲久久久久久综合网综合网| 亚洲啪视频| 成人做爰A片免费看网站找不到了| 丁香五月综合网| 五月丁香欧美综合| 婷婷九月激情| 亚洲 五月 婷婷 成人| 国模狼狼| 99热在线播放| 久久久久久久人妻| 插插干干干色| 色色网站| 日本人妻A片成人免费看片| 婷婷深爱五月| 欧美色97| 99久久网站| 九九热自拍| 99爱视频| 九九热99热| 婷婷丁香五月天色色| 99无码精品| 久久精品在线| 久久综合五月天| 国产伦亲子伦亲子视频观看| 五月色网| 国产.亚洲.欧洲视频在线| 激情亚洲婷婷六月| 亚洲第一视频 久久| 丁香久久AV| 成人 在线 日韩| 久久小说| 激情五月天99色| 午夜丁香婷婷| 97超级碰碰碰| 秋霞AV淫| 99久99热| 日本成人噜噜噜| 五月色丁香激情| 五月婷婷网站| 婷婷五月天电影网| 激情婷婷护士激情| 午夜色婷婷| 激情丁香九九五月综合网| 色哟哟精品| VA色婷婷| 狠狠操性爱av| 亚洲激情网| 热久久这里只有精品| 五月婷色| 2022人人操人人看| 五月丁香啪啪激情| 色综合中文| 九九99精品| 丰满女老板BD高清A片| 人妻丰满精品一区二区A片| 成人亚洲精品久久久久| 丁香五月色五月| 玖玖国产视频一区| 婷婷五月天中文字幕| 天堂综合久| 婷婷俺去也| 超级碰碰97在线| 人人操 色| 国产成人网址| 五月丁香色综合| 99免费在线视频| 亚洲乱码精品久久久久.. | 五月婷婷综合网| 亚洲乱码精品久久久久..| 伊人丁香五月天丁香在线婷| www.久9| 五月婷婷久久大香蕉| 色婷婷狠狠久久综合五月| 丁香九月综合在线| 五月天婷婷伊人| 五月丁香六月欧美综合网站| 国产精品天天狠天天看| 成人五月天在线观看| 日撸夜撸日操| 538在线精品| 影音先锋 一区| 丁香五月自拍| 九九人人操| 香蕉AV777XXX色综合一区| 色五月偷偷| 色婷婷五月天成人网| 99无码视频| 五月婷婷激情| 99在线观看视频| 久久久18| 九色自拍| www.henhenl| 欧美A级成人婬片免费看理论| 天堂资源欧日浪女在线播放| 日本狠狠色| 极品人妻VIDEOSSS人妻| se色99| 丁香激情网| 欧美精品XXXXBBBB| 丁香六月av| 久久婷婷网| 亚洲国产黄色电影| 五月天综合久久| 极品少妇XXXX精品少妇偷拍| 玖玖色综合网| 可以免费观看的AV| 激情AV中文| 天天舔天天摸天天射| 丁香五月婷婷偷拍| 五月天婷婷操逼视频| 丁香五月综合网亚洲综合欧美狠狠| 婷婷五月情| 婷婷丁香九月| 久99| 久久丁香婷婷五月天| enecarbon-materials.comWu染请涟系Bao护@wip1688 | 老师的粉嫩小又紧水又多A片视频| 人妻aV在线| 可以看的AV网站| 国模九区| 色五月婷婷基地| 久久5 9视频免费观看| 草美女在线观看视频在线播放| 夜夜 操无码| 色五月大| 亚洲激情网| 99自拍视频网站| 色婷婷AV在线| 五月色婷婷在线观看| 久99| 婷婷五月天免费小说| 久婷五月| 夜夜天天久久婷婷| 狼人伊人干| 亚亚州久久高潮| 七月丁香婷婷 色色| 五月开心深深爱激情综合 | 色色色99| 久久思思热视频| 激情五月丁香五月色| 操丝袜视频影院导航| 欧美性生交XXXXX无码小说| 99热99热在线观看| 182.t午在线观看| 性生活久久朋友人妻| 丁香深五月婷婷| 五月天婷婷在线AN| 色五月婷婷婷婷婷婷婷婷婷婷| 婷婷五月天激情文学| 国产韩日亚洲美州欧亚综合在线| 夜精品无码A片一区二区蜜桃| 亚洲综合网区| WWW色色色COM| 超碰免费在线| 久久五月天激情| 色噜噜五月丁香婷婷| 久久综合首页| 狠狠狠激情网| 色婷婷文字幕| 性做久久久久久久免费看| 日批在线看| 性欧美大战久久久久久久83| 五月天婷婷AV| 激情五月天开心网丁香无码| 中文字幕+中文在线| 琪琪色五月天| 色婷婷五月天不卡| 婷婷国产综合| 九九热re99re6在线精品| 99精品在线播放| 丁香六月av| 91/九色黑人| 另类视频综合| 色五月激情五月天| 日日干日日s| 婷婷色色丁香| 狠狠爱深色婷婷综合| 99久在线精品99re5热视频| 99热 免费| 久操人| 丁香五月在线播放| 成人五月天丁香婷| 天天激情| 国际国外精品欧洲南美洲专区无码不卡| 久久婷婷六月综合综合| 亚洲无AV在线中文字幕| 色五月婷婷色| 99啪99| 26uuu国产精品| 色久影院| 激情婷婷网| 国产精品人人做人人爽人人添| 欧美国产一区二区三区| 都市激情五月婷婷综合| 99re免费精品视频| 日本天堂免费99| 国产又色又爽又黄又免费| 激情网婷婷五月天| 五月色色激情网| 嫩草综合网| 欧美偷偷操| 久热无码| 超碰国产在线观看| 噜噜在线| 99在线热视频| 色五月成人| 99色综合| 五月丁香怕怕综合| 久久久人妻久久久| 精品乱码视频| 丁香五月激情婷婷视频| www狠狠| 97热超碰| 天天射色五月天| 亚洲愉拍99热成人精品| 日99网站| 1级欧美日韩| 欧美日韩aaa| 五月天丁香成人| 99久久极情精品一区| 日在线V视频在线播放| 九九五月天| 色婷另类| 五月色婷婷影院| 噜噜五月天综合| AV片在线观看| 七月激情六月婷婷综合在线播放| 国产亚洲99久久| 亚洲视频在线观看| 沈娜娜av| 激情熟女网| 色五月婷婷丁香凹凸| 中文字幕免费高清电视剧| 99色在线| 激情内射人妻1区2区3区| 成人无码髙潮喷水A片| 亚洲视频99| 色婷网| 激情综合色网| 熟女人妻一区二区三区免费看| www.99在线| 国产精品18久久久| 日日操天堂| 六月丁香AV| 日韩AV成人电影| 午夜激情四射影院| AV在线大香蕉| 精品一区二区三区四区五区六区介绍| www.久久66| 天天天日天天天干| 丝袜激情网| 在线播放中文字幕| 思思久久99热只有频精品66| 超碰京东热av男人的天堂| 婷婷五月天av小说| 99九九在线观看免费| 成人在线网址| 爱草视频在线观看| 久久偷拍综合五月天| 亚洲成人婷婷| 99综合网| 亚洲成人中文字幕| 色色啊| 色播五月丁香| 五月丁香啪啪综合| 九九Y精品热播| 99视频九九热| 26uuuu精品一区二区| 五月草视频| 在线中文字幕av| 五月天偷拍| 99九九热播在线免费视频| 久大香蕉| 五月之婷婷| 五月婷婷丁香啪啪| 99久久九九视频| 六月久久婷婷| 婷婷五月天天aV| 婷婷综合亚洲| 午夜天堂一区人妻| 99久久99九九99九九九| 日日狠狠久久偷偷四色综合免费 | 色色五月婷婷| 五月天婷婷色综合| www.婷婷网| 噜噜久| 五月丁香香蕉| 91九色无码内射| 开心五月婷婷五月| 99人妻碰碰碰久久久久视| 1024日韩| 五月丁香琪琪| 丁香九月婷婷色| 涩涩五月天| 国产成人网站在线观看| 色婷婷很很丝袜| 9久久精品| 婷婷五月视频| 亚洲精品V天堂中文字幕| 色色日本欧美| 色五狠狠| 欧美A级成人婬片免费看理论| 亚洲婷婷91丁香| 丁香婷婷啪啪啪| 久久精品99| 中文字幕天天干| 五月丁香美女| 伊人五月天在线| 久久久久久婷| 欧美草久久五月天91| 五月天播播| 91九色熟女| 婷婷五月花丁香| 欧美韩国日本| 国产丁香五月天婷婷| 五月婷婷综合视频| 丁香五月综合无码趴趴| 亚洲丁香五月| 北京熟妇搡BBBB搡BBBB| 亚洲中文丁香| 噜噜噜狠狠色综合| 激情丁香五月婷| 色无码| 操婷婷久久| 色区域网站视频| 五月天婷婷激情| 婷婷伊人网| 91九色精品| 狠狠色狠狠爱| 影音先锋四区| 婷婷五月成人| 久久精品婷婷| 天天搞夜夜爽夜夜爽| 九九久久五月天| 伊人网啪啪| 99热地址| 91婷婷丁香| 婷婷五月电影| 热99国产精品| 八戒青柠影视剧在线观看| 九九综合视频在线观看| 深夜男女福利刺激影院一区| 久婷五月| 国产精品一区在线观看你懂的| 五月天婷婷三级黄| 激情五月综合网| 99爱免费在线观看| 亚州第一黄网| 五月丁香久| 亚洲一区国产传媒| 99热这里只有精品在线| 99热只有国产在线精品| 91jiuseshunv| 综合色色网| 久久久久妻| 99色在线| 五月婷婷婷婷网| 国产探花一片区| 骚。com| 久草五月天| 99热亚洲| www.五月天婷婷姐姐| AV色色天堂中文| 99久久玖玖| 九九色院| 思思热在线视频精品| 最新五月天婷婷影| 五月天激情啪啪| 一区二区免费看| 天天色图| 人妻有码乱操| 亭亭色色五月天| 久久狠色噜噜狠狠狠狠97| 任你躁XXXXX麻豆精品| 婷婷六月激情综合| 丝袜大香蕉| 搡BBBB搡BBB搡18| 婷婷五月天性| 丁香花五月天激情| 九月婷婷在线视频| 激情久久久| 五月天激情婷婷丁香| 99资源在线| 激情小说婷婷| 综合网激情| 狠色综合网| 国产精品久久久久久久久久久久 | 国产Va视频| 欧美三级大片AA在线看| 97色色网| 久大香蕉| 性色视频| 思思热精品免费视频| 欧美久久婷婷| 9l视频自拍九色9l视频在线观看| 国产黄色在线观看| 日本五月婷| 五月色影院| site:minyis.com| 天花AV无码| 99热这里只有精品8| 激情丁香五月天| 九九热这里只有精品556| 色和综合网| 婷婷久久五月| 婷婷五月婷婷| 久热网在线视频| 996热| 超级97碰碰| 亚州操人在线视频| 1024国产| 99热精品观看| 欧美性猛交99久久久99| 日韩无码色色| 欧美色色色| 无码四色色色| 97九色| 激情综合婷婷久久| 亚洲成人日韩无码精品| 久热这里| 久久精彩免费视频| 五月草视频| 我要看激情五月天| 人人爱天天摸摸天天爱| 丁香六月婷婷开心| 91啪啪| 色玖玖导航| 色色色九九九五月婷婷| 韩国中文字幕91| 久久婷婷五月综合| 专区无日本视频高清8| 99久热| 99热综合| 丁香五月电影| 99视频久久| 丁香色婷婷| 99热这里都是精品| 色婷婷综合久久久久| 少妇性按摩无码中文A片| 开心激情播播五月天| 亚洲狠狠操| 国产精品久久久久久五月天加勒比| 婷婷色五月亚洲| 思思热久久阴99| aaaaa黄色| 婷婷丁香人妻天久久| 91丨九色丨大屁股| 九九这里只这里只有精品| 久久精品爱爱| 丁香五月婷婷亚洲综合精品在线| 亚洲爱爱无码婷婷色五月| 人妻射精AV| 思思视频精品| av中文网站| 99性视频| 五月婷婷黄色| 天天干天天干天天| 91久久国产自产拍夜夜91久久精品文字>91麻豆精品国产 | 中文字幕久久婷九女同| 色婷婷综合亚洲| 日韩啪啪视频| 五月开心婷婷| 激情五月天婷婷| 99熟女视频| 在线成人网址| 99热综合| 99艹精品在线观看| 香蕉久久国产AV一区二区| 婷婷激情五月吧| 丁香婷五月天| 五月天婷婷成人网| 五月婷婷五月天| 99热在线中出| 色色激情| 这里只有精彩视| 欧美va在线观看| 91精品久久久久久77777| 婷婷97狠狠成人网站| 欧美日韩色色| 亚韩在线视频| 婷婷五月偷拍| 91狠狠综合久久久| 在线播放 精品| WWW.久久久久久久| 思思热99在线| 五月激情婷婷在线| 性色综合网| aaa丁香五月天| 色色丁香激情五月| 日韩一级片| 亚洲 成人 电影av在线观看| 开心六月丁香五月婷婷| 干一干xxxx| 久久小说网| 大香蕉久久婷婷| 五月天婷婷自拍图片在线观看| 九九在线这里只有精品视频| 午夜一区| 久操综合| 五月的色婷婷高潮| 无遮羞AV| 婷婷欧美色| 久人操| 五月天婷婷婷| 色婷婷五月丁香在线观看| 夜夜撸日日操| 1024AV视频| 色丁香五月婷婷婷| 色欲丁香| 久草视频一,二三四| 综合色色婷婷| 久久精品一区二区三区四区| 婷婷六月丁香激情| 久久五月激情综合| 亚洲AV日韩AV永久无码网站| 亚洲99视频| 久久久婷婷婷| 五月天婷婷香蕉狠狠超碰综合| 欧美爆乳一区二区三区| 中字幕视频在线永久在线观看免费| 人伦30P| 婷婷涩五月天综合| 国产亚洲成AV人片在线观黄桃| 色99自拍| 色婷婷偷拍| 色婷婷AV久久| 99热成人在线观看| 5月丁香美女影院| 色播五月丁香综合| www,av好吊操| 色播激情婷婷| 天天久| 国产人人操| 精品皮股午夜AV| 精品亚洲国产成AV人片传媒| 五月天无码| 国产激情综合五月久久| 久久女婷| 日日操夜夜爽| 99无码免费视频| 色综合五月天| 天天爽—爽| 在线99热| 亚洲爱爱无码婷婷色五月| 婷婷中文字幕| 五月丁香婷婷啪啪综合网| 精品影院| 啪啪六月婷婷| 激情精品久久| 色五月婷婷小说亚洲中文字幕组| 超色欲天天| 丁香六月婷婷| 亚洲六月色| 精品亚洲国产成AV人片传媒| 婷婷五月激情天| 夫妻超碰在线| 丁香五月综合婷婷| WWW.夜夜操.com| 五月丁香激情啪啪| 久草xx性爱视频| 26uuu成人网| 亚洲国产色色| AV无码免费| 99精品综合视频| 另类图片五月天婷婷| 国产成人精品亚洲线观看| 激情五月天之五月婷婷| 日日夜夜亚洲一区| 色播五月天激情| 五月婷婷啪啪网| 激情深爱五月天| 97深爱伊人综合| 大香蕉丁香婷婷| 五月婷婷六月丁香玖玖玫瑰91| 亚洲成人网在线观看| 色色五月丁香| 色婷婷综合视频| 99热综合在线| 欧美日本日韩| 亚洲欧美婷婷五月色综合| 久久六月天| 国产 亚洲 在线| 五月天婷五月天综合网在线观| 婷婷五月天激情网| 九九视频这里只有精彩| 色欲天天综合网| 亚洲深喉AV| 六月丁香网| 人妻久久久久久久久妻久久久久久久久| 久久久国产精品黄毛片| 26uuu欧美| 久久五月天合网| 丁香五月婷婷综合激情啪啪啪啪啪啪啪 | 五月四色激情| 六月婷婷开心| 亚洲色网络| 色婷婷婷综合五月天| 婷婷色色欧美| 国产亚洲成AV人片在线观黄桃| 亚洲综合五月| 天天综合图片| 五月激情啪啪啪| 色婷婷AV在线观看| 国产精品一区在线观看你懂的| 五月天婷a| 狠狠搞五月天| 久久婷婷激情四射五月天| 色色丁香| 久久久99久久| 五月丁香色六月激情干大屄| VA国产在线综合网站| 久热久操久热久草国产91| 最近中文字幕大全免费版在线| 日日噜噜夜夜狠狠久久丁香五月| 六月丁香婷婷尤物| 大香蕉Av在线| 久久综合九色综合88i| 欧洲色| 婷婷精品免费久久| 丁香五月中文字幕色播| 精品久久久久久久人妻| 五月天天堂久久| 欧类av怡春院| 97在线精品| 玖玖色综合网| 亚洲啪啪网| 久久免片| 无码人妻一区| 午夜婷婷五月天| 国产Va视频| 91人妻色色网| 色五月天堂| 色婷综合| 久热在线观看视频9| 人人摸人人操人人爱| 激情综合五月| av国产精品| 91超碰人人操| 激情久久久| 99激情| 婷婷六月综合激情| 九九無妻| 久久99热这里只频精品6学生| 色欲天天综合网| 99精品自拍| 大香蕉婷婷五月天| 九九人人操| 五月激情偷拍| 99热这里只有精品9| 六月丁香色色| 99ri视频| 久久五月视频| 亚洲精品一区中文字幕乱码| 欧美丰满熟妇BBB久久久| 色五月婷婷五月天| 五月丁香激情综合| 亚洲日韩一页精品发布| 日本欧美成人片AAAA| 亚洲V国产V欧美V久久久久久| 人妻久久久久久| 日韩成人无码| 亚洲一区二区 成人网站戴套| 精品国产a| 大香蕉 伊人夜| 伊人www22综合色| 婷婷色导航| av中文在线| 亚洲综合新99视频| 丁香婷婷丁香五月欧美人| 久久亚洲色导航| 久久在线人妻| 色色国产| 操人91| 极骚大香蕉伊人| 五月丁香视频色色| 玖玖爱伊人| 91热er| 日日鲁鲁夜夜爽爽| 免费在线观看欧美激情xx小视频| 五月天丁香综合| 日韩999| 五月天婷婷无码| 五月丁香婷婷老司机| 色五月天丁香婷婷| 丁香六月av| 国产精品色婷婷AV综合色色| 激情久久久久久久久久| 99热这里只有精品1| 丁香五月天AV在线| 日韩高清成人| 五月婷婷色播网| 六月丁香六月婷婷欧美| 久久九九99| 婷婷97色| 91丨九色丨高潮丰满日本| 久久这里只有精品07 | 婷婷六月天亚州| 久久玖玖综合| 最新无毒无码AV| 九九热re99re6在线精品| 5月婷婷6月丁香aV| 久久久久婷| 精品夜夜澡人妻无码AV| 在线观看亚洲AV| 管管補管管紱| PORNY九色9l自拍视频成人| 国产欧美熟妇另类久久久| 五月花激情网| 色五月aV| 天天噜日日噜综合无码| 99福利视频导航| 综合激情网五月激情| 少妇人妻综合色6699| 在线日韩视频| 激情九色| 丁香五月六月婷婷殴美综合| 色色99| 99在线精品视频| 国产又爽又猛又粗的视频A片| 久久伊人9| 久久视频九九视频| 人人摸人人搞| 丁香六月婷| 亚洲中文字幕网| 狠狠狠狠狠狠| 中文字幕精品推荐免费在线观| 色之综合网| www.五月天婷婷| 综合久久五| 五月深爱婷婷| 97在线精品| 亚洲欧美婷婷五月色综合| 五月天亭亭俺也| 五月丁香综合精品欧美| 天天操夜夜夜拍拍拍| 色综合婷婷| 久久久久99精品成人网站| 激情婷婷五月天日本系列| 欧美性生交XXXXX无码小说| 五月丁香狠狠爱| 久久92| 91啪啪网| 99爱视频| 热久69| 婷婷天天婷婷天天澡| 婷婷五月丁香性爱| 五月天婷婷丁香社区| 婷婷欠久少妇| 五月丁香六月合| 国产亚洲成AV人片在线观黄桃| 色噜噜狠狠色综合AV兰草影视| 欧美大香蕉视频| 久婷婷色| 日韩啪| 久久久香| 99爱在线精品视频免费观看| 亚洲精品视频在线播放| 五月婷啪| 日本97久久久精品| 色色色综合色| 久久久久久久久99精品| 丁香五月先锋| 中文字幕AV在线播放| 婷婷永久在线| 99热这里只有精品268| 五月丁香影院| 一区二区成人电影| 丁香五月成人| 五月婷婷久久内射| 无码碰碰| 99热精品在线| 久99热| 婷婷伊人| 啪啪五月天啪啪| 五月婷婷无码| 另类综合网| 黄页免费一级视频懂色| 五月丁香色综合| 日本久久精品| 欧美成人AAA片一区国产精品| 天天爽综合| 中文网婷婷字幕婷| 激情另类综合| 久久五月天综合视频网站| 天天插天天插| 五月天天爽| 色婷婷综合久久久久| 97人人看| 亚洲精品五十一区| av一区二区电影免费在线观看| 久久九精品| 五月丁色AV| 91妻人人爽人人看片| 91午夜激情| 久久久婷婷| 天天干在线播放| 色婷婷丁香五月| 六月亚洲婷婷6月中文字幕| 五月婷婷香蕉视频| 色五月婷婷av| 婷婷五月天亚洲图片| 无码成人AAAAA毛片AI换脸| 久草久青福利| 色婷婷8| 五月丁香色| 夜夜操狠狠操天天操| www.sebowuyue| 一起草av| 日本九九网| 狠狠色情婷婷| 日本女人久久| 九九热123| 色99在线视频| 色婷婷综合网站| www.91.com黄| 婷婷福利影院| 综合网色| 激情五月色综合国产精品| 五月婷在线影院| 久在热99| 思思热在线| 九九在线精点品| 天天爽人人爽| 九九伊人网| 九九成年视频| 搡BBBB搡BBB搡18 | 夜夜夜夜夜操| 六月婷婷色综合| 久久6这里只有精品| 东北熟女高潮99综合99| 丁香五月AV| www.91在线观看| 99精品免费欧美小视频| www。88热在线视频免费观看| 久久免费丁香| AV九九| 色婷婷AAA| 亚洲综合五月| 人人人人人人人草| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 久久精彩综合视频| 久婷婷色| ady狠狠入| 丁香六月成人| 99在线精品免费视频| 色色色免费视频| 激情AV在线| 亚洲色五月天| 婷婷噜噜| 婷婷五月丁香网| 婷婷五月天Av| 色色亚洲无码| 嫩草AV久久伊人妇女超级A| 亚洲成人AV在线观看| 久激情| 玖玖激情网| 操婷婷久久| 亚洲午夜国产成人电影VA国产欧…| 亚洲综合激情五月久久| 五月激情视频| 免费黄色视频网址| 大香蕉五月天婷婷| 97资源碰碰| www激情| 天天天天天日| 99九九视频| 天天干,天天日| 久草热在线视频| 日韩色色视频| www.婷婷| 粉嫩AV久久一区二区三区| 六月婷婷综合| 内射爽无广熟女亚洲| 国产精品a无线| AAA久久| 8090在线影视少妇| 亚洲欧美婷婷五月色综合| 丁香五月婷婷基地| 99色免费观看全部| 大香蕉520| 噼里啪啦在线观看免费完整版视频| 26uuu最新地址| 九九九热精品| 久久九九热视频| 丁香五月综合| 五月婷婷色在线| 久热A片| 久久九九经典| 日韩精品一品二区三区的使用体验 | 色五月婷婷网| 五月丁香花成人社区| av操B网站| 哇嘎成人久久| 另类亚洲视频| 久热这里只精品| 婷婷综合五月天激情| 爱婷婷久久视频| 99成人在线观看| 婷婷色网站| 久久婷五月| a性生活久久无| 五月天婷婷久草丁香| 超碰超碰在线| 色五月丁香激情| 五月天婷婷激情小说电影| 97狠狠色| 激情内射人妻1区2区3区| 91趴趴| 欧美久久婷婷| 婷婷六月激情丁香| 丁香五月成人| 能看的av网站| 爱狠射| 99热在线爱| 99热成人在线观看| 婷婷五月激情网| 99色综合| 五月天激情黄色网址| 五月婷婷久久综合| 色五月激情综合| 婷婷六月天| 99久久国产宗和精品1上映| 久久婷综| 狼人久草| 蜜乳中文字| 天天做夜夜爽| 婷婷六月久久| 激情美女五月天| 夜夜爽天天干| 婷婷五月丁香五月| 亚洲成人另类| 天天天久久久| 欧美性爱五月天| 夜精品无码A片一区二区蜜桃| 九伊人网| 丁香五月第九色| 狠狠色丁香婷婷久久综合| 草草夜夜操| 久久停停超碰| 色婷婷丁香五月综合| 五月天综合视频| ady狠狠入| 色欲av伊人久久大香线蕉影院 | 99色在线视频| 久久久99精品免费观看| 欧美 日韩 成人在线| 插插五月天| 色婷婷狠狠| 婷婷综合天堂| 777久久综合视频| 亚洲综合视频网| 五月天丁香婷婷久久九| 久久天天天| 色综合99| 国产特黄色精品一区二区三区精品无广告| 99热婷婷| 久久人人九| 激情五月天色色色| 婷婷五月天综合蜜桃| 成人视频一区| 国产激情在线| 丁香五月婷婷影院| 综合激情网激情五月。| 九九热99精品| 九九这里只有精品| 久久久婷婷婷| 五月婷婷在线综合| 伦乱天堂| 亚洲国产网址| 亚洲综合激情五月久久| 激情第四色| 五月丁香综合久久| 欧美va视频| 激情国产五月| 337p大胆噜噜噜噜噜91Av| 五月婷婷综合色拍| 五月丁香性爱| 丁香99| 久热无码| 激情图片婷婷| 天天射射夜| 丁香五月天啪啪| 丁香九月激情久久| 丁香五月天天久久综合小说| 婷婷狠狠操| 激情丁香五月天| 狠狠色激情综合| 国产xxxxx在线观看| 五月丁香婷婷成人版| 激情精品久久| 欧美性猛交 XXXX 乱大交| 97香蕉久久超级碰碰高清版| 99热这里只有精品最新| 久草五月| 超碰免费人人| 人人性久久| 久久精品日| 婷婷五月丁香综合网| 久久99热这里只频精品6学生| 五月婷婷在线观看黄| 欧美激情-区二区三区| site:jszngf.com| 激情婷婷久久| 婷婷婷久久久| 久久九九九九| 丁香影院五月综合| 琪琪色五月婷婷老师| 九九热精品| 26uuu精品一区二区| 久青操| 色播丁香婷婷五月激情| 激情婷婷丁香五月| 玖玖在线资源视频| 另类色视频| 激情综合五月婷| 99 r热| 欧美婷婷六月丁香综合色| 五月婷中文字幕| 色九九九综合| 极品少妇婷婷五月| 亚洲国产黄色电影| 久久久噜噜噜操操操| 99在线视频网址在线观看| 五月激情丁香啪啪| 97干干干丁香| 亚洲色图欧美色图日本视频| 色色丁香| 丁香色婷婷| 狠狠干婷婷| 激情综合网五月婷婷| 另类图片五月天| 五月丁香啪啪网| 激情开心五月天| 久久在线视频免费观看| 九九热精品| 色色色999| 欧美色综合天天久久综合精品| 深爱五月天| 丰满少妇猛烈A片免费看观看 | 久久久久久久综合狠狠综合| 99re在线观看| 五月花婷婷在线精品视频| 好吊操这里只有精品| 婷五月丁香| 九九九九九九九热| a v色婷婷| 五月丁香激情欧洲啪啪| 怡红院一二三| 一级二级色大片| 在线色色| 久久婷婷五月天| 国产露脸150部国语对白| 色综合77777| 丁香九月色| 视频一二区| 五月天激情综合网俺也去| 色色成人網| 五月色丁香激情| 青青草成人网| 婷婷激情综合网| 国产99久久久国产精品免费看 | www激情com| 六月丁香婷婷综合狠狠爱夜夜爱| 黄色五月婷婷| 久久婷婷五月综合| 五月丁久久| 天天射色五月天| 久99久视频| 亚洲激情视频网| 亚洲夜夜操| 日韩久热| 欧美成人AAA片一区国产精品| 久久婷鲁| 国产免费一区二区三区三州老师F1F1.CC | 99激情网| 青草久久五月婷伊人| 婷婷深爱五月丁香| 五月丁香综合啪啪| 日韩综合成人| 成人无码中文| 任你草| 五月天黄色激情小说| 色综合九九| 色久丁香五| 99激情视频| 就爱日五月天| 欧洲不卡视频| 亚洲精| 亚洲日日日| 日本欧美成人片AAAA| www.com色播五月天| 色婷婷婷av| 久久人妻伦理| 狠狠干在线| ..真实国产乱子伦毛片| 光棍影院日韩精品| 久久99热这里| 第五色婷婷| 丁香六月婷婷综合| WWW·色色色·COM| 婷婷六月网| 婷婷成人五月天成人文学| 99ri在线视频| 国产亚洲99久久精品熟女| 色婷婷婷av| 五月开心啪啪| 亚洲操b| 亚洲精品成人片在线播| 久思思久视频| 婷婷五月花| 成人国产欧美大片一区| 另类伊人婷婷| www.开心激情| 丁香五月性| 丁香久久激情俄| 亚洲小说五月婷婷| 在线观看av网站| 亚洲超碰青涩| 涩涩五月天综合| 九九热re99re6在线精品| 天久综合91综合首页| 色色婷婷丁香| 99亚洲精品视频| 亚洲A片成人无码久久精品青桔| 五月丁香激情婷婷| 色婷五月天激情| 这里只有精品久久| 五月天丁香婷| www.ppypp| 午夜69成人做爰视频| 六月婷婷色综合| 丁香婷婷情色五月天| 成人午夜天| 色九月婷婷| 丁香婷婷色五月激情综合| 99在线观看精品| 99免费热视频| 99色热| 欧美性猛交99久久久久99按摩| 99精品偷自拍| 九月婷婷综合在线| 五月花婷婷| 婷婷丁香五月天综合在线日韩| 热99精品视频五月| 婷婷 月 丁香| 综合aV在线| 男人天堂亚洲综合| 99免费| 91人操| 五月天婷婷基地| 欧美顶级少妇做爰HD| 亚洲性爱电影| 九九综合| 成年视频免费观看| 99热国产在线| 激情小说色五月| 青青操绿aaa一区日v| 久久九九网| 亚洲天堂啪啪| 亚洲九九视频| 996热re视频在线观看视频| Va另类视频| 综合天堂AV久久久久久久| www。88热在线视频免费观看| 日日天天干| 婷婷五月小说色综合| 丁香五月在线观看完整版| 日韩人妻白浆视频系列| 五月色婷婷AV| 免费看欧美成人A片无码| 91丨九色丨东北熟女| 色五月婷婷综合在线| www.五月丁香av| 香蕉网婷婷| 99天堂网| 日日综合网| 久久九九囯产| 99热精品免费在线观看| 九久九精品| 亚洲激情综合| 久青操| 天天爽人人综合免费7799| 亚洲av网址| www.色五月天.com| 婷婷五月综合基地| 婷婷五月天开心网| 五月婷婷丁香啪啪| 五月天啪啪视频| 婷婷久久网| 久久精品99| 99精品在| 日韩有码一区| 真实亲子乱子伦高清在线观看| 大香蕉懂9| 久久小片| 日本三级中文字幕| 高清无码视频网址| 激情五月深爱五月| 五月综合视频| 久久婷婷六月综合| 五月色影院| 丁香六月婷婷缴情欧美| 99碰碰| 在线区区区| 亚洲狠狠终合停停终合| 天天摸天天做天天爱天天爽| 色婷婷色| 五月丁香婷婷综合网| 激情五月婷婷欧美极品| 狠狠婷婷日韩| 婷婷成人五月天| 色播五月丁香| 最近中文字幕2019视频1| 丁香五月婷老师| 色婷婷91激情小说| 色婷婷综合影院| 伊人网欧美在线男人天堂五月丁香| 99无码精品| 日日夜夜天天爽| 婷婷 伊人 久久| 99爱视频| 婷婷色情六月| 欧美日韩中国| 久久狠狠干|