欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Linux壓力測(cè)試工具stress實(shí)戰(zhàn):從安裝到拷機(jī)一條龍

Linux壓力測(cè)試工具stress實(shí)戰(zhàn):從安裝到拷機(jī)一條龍 簡(jiǎn)介L(zhǎng)inux壓力測(cè)試工具stress 1.0.1源碼資源包面向系統(tǒng)管理員、運(yùn)維工程師與嵌入式開(kāi)發(fā)者用于模擬CPU、內(nèi)存、線程/進(jìn)程等負(fù)載評(píng)估系統(tǒng)在極限場(chǎng)景下的穩(wěn)定性與性能表現(xiàn)。壓縮包整體約199KB共32個(gè)文件以C源碼、configure配置腳本、Makefile構(gòu)建文件為主兼有texinfo文檔、man手冊(cè)及ChangeLog等說(shuō)明材料目錄沿用標(biāo)準(zhǔn)GNU工程結(jié)構(gòu)便于編譯、安裝與二次開(kāi)發(fā)。該工具支持通過(guò)命令行靈活指定負(fù)載類型與線程數(shù)量可模擬計(jì)算密集、內(nèi)存緊張及高并發(fā)進(jìn)程創(chuàng)建等場(chǎng)景。目前已有3031人學(xué)習(xí)下載適合需要驗(yàn)證服務(wù)器承載力、排查資源瓶頸或開(kāi)展性能調(diào)優(yōu)的工程師。借助該包可收獲完整源碼與配套文檔既能直接用于壓測(cè)環(huán)境搭建也能深入研讀stress的核心實(shí)現(xiàn)為自行編寫輕量級(jí)負(fù)載工具提供參考。linux壓力測(cè)試工具stress實(shí)戰(zhàn)從裝庫(kù)到拷機(jī)一條龍做Linux運(yùn)維和系統(tǒng)性能驗(yàn)證的朋友一定繞不開(kāi)一個(gè)場(chǎng)景新買的服務(wù)器到了要驗(yàn)證硬件穩(wěn)不穩(wěn)內(nèi)核打了一個(gè)補(bǔ)丁要確認(rèn)系統(tǒng)不會(huì)跑著跑著就崩部署容器之前要看看資源隔離到底靠不靠譜。這些場(chǎng)景都有一個(gè)共同的底子需求——給系統(tǒng)施加一個(gè)可控的壓力然后在壓力下觀察它的表現(xiàn)。stress就是干這個(gè)的一個(gè)輕量、純粹、用來(lái)給Linux系統(tǒng)制造負(fù)載的小工具我用它做過(guò)不少次拷機(jī)和穩(wěn)定性驗(yàn)證這篇就來(lái)聊聊它的完整玩法。1. 工具選型與核心概念1.1 stress到底是個(gè)什么工具stress是Amos Waterland寫的一個(gè)C語(yǔ)言小工具它的設(shè)計(jì)目標(biāo)非常純粹通過(guò)fork出大量子進(jìn)程分別去消耗CPU、內(nèi)存、磁盤I/O和資源分配能力從而讓系統(tǒng)進(jìn)入一種可量化、可控的高負(fù)載狀態(tài)。說(shuō)人話就是——你告訴它“給我壓出8個(gè)滿負(fù)荷CPU的負(fù)載”它就老老實(shí)實(shí)fork出8個(gè)進(jìn)程每個(gè)進(jìn)程拼命算數(shù)學(xué)題把CPU時(shí)間吃滿。很多人會(huì)把stress和stress-ng搞混。stress-ng是它的加強(qiáng)版包含幾百種壓測(cè)方法功能更強(qiáng)但復(fù)雜度也高。而stress的特點(diǎn)是參數(shù)簡(jiǎn)單、行為直觀、結(jié)果容易判斷適合做快速驗(yàn)證和日??綑C(jī)。我個(gè)人的習(xí)慣是快速驗(yàn)證用stress深度專項(xiàng)壓測(cè)用stress-ng或sysbench但日常工作中stress出現(xiàn)的頻率其實(shí)更高因?yàn)樗銐蜉p量裝完即用不引入太多學(xué)習(xí)成本。1.2 為什么需要給系統(tǒng)制造壓力很多人會(huì)有疑問(wèn)我的服務(wù)已經(jīng)在線上跑了為什么還要額外制造壓力這里有個(gè)概念要分清線上跑業(yè)務(wù)是“實(shí)際負(fù)載”壓測(cè)工具制造的是“人工負(fù)載”。實(shí)際負(fù)載是隨機(jī)的、起伏的、不好控制的而人工負(fù)載是確定的、穩(wěn)定的、可調(diào)節(jié)的。做穩(wěn)定性驗(yàn)證時(shí)你不希望負(fù)載忽高忽低導(dǎo)致結(jié)果無(wú)法解釋你希望CPU穩(wěn)定在100%、內(nèi)存穩(wěn)定占用N個(gè)GB然后觀察系統(tǒng)在這種極端情況下是否還能正常工作。stress的價(jià)值就在這里它把負(fù)載變成了一個(gè)有刻度的儀器讓你能夠在“系統(tǒng)扛不住之前”就掌握系統(tǒng)的邊界在哪里。比如一臺(tái)8核機(jī)器先壓6個(gè)CPU看看是否穩(wěn)定再壓8個(gè)再壓10個(gè)超賣觀察不同負(fù)載級(jí)別下的系統(tǒng)行為。這種測(cè)試在硬件驗(yàn)收、性能基線采集、容器限制驗(yàn)證中都屬于必備環(huán)節(jié)。1.3 適用場(chǎng)景梳理從我實(shí)際接觸過(guò)的使用場(chǎng)景來(lái)看stress主要適合以下幾種情況硬件拷機(jī)新裝機(jī)或購(gòu)買二手服務(wù)器后用CPU和內(nèi)存壓力驗(yàn)證硬件是否有隱性故障。內(nèi)核與驅(qū)動(dòng)驗(yàn)證打了補(bǔ)丁、升級(jí)了內(nèi)核、更換了驅(qū)動(dòng)需要在負(fù)載下確認(rèn)系統(tǒng)不會(huì)panic或死鎖。性能調(diào)優(yōu)前后對(duì)比調(diào)整內(nèi)核參數(shù)、CPU調(diào)頻策略之前和之后用同樣的壓力對(duì)比系統(tǒng)表現(xiàn)。容器與虛擬化資源限制驗(yàn)證確認(rèn)cgroup的CPU限制、內(nèi)存限制是否真正生效。教學(xué)和技術(shù)測(cè)試演示系統(tǒng)負(fù)載、觀察調(diào)度行為時(shí)stress是干凈利落的負(fù)載制造工具。2. 安裝部署與環(huán)境準(zhǔn)備2.1 各主流發(fā)行版的安裝方法stress的安裝非常簡(jiǎn)單官方源里基本都有現(xiàn)成的包。以最常見(jiàn)的幾個(gè)發(fā)行版為例# Debian / Ubuntu sudo apt-get install stress # CentOS / RHEL 7/8/9 sudo yum install stress # Fedora sudo dnf install stress # Arch Linux sudo pacman -S stress如果你用的是極其精簡(jiǎn)的發(fā)行版或者沒(méi)有現(xiàn)成包也可以從源碼編譯安裝。stress的源碼包很小編譯過(guò)程依賴也很少wget https://downloads.your.org/stress/stress-1.0.7.tar.gz tar -xzf stress-1.0.7.tar.gz cd stress-1.0.7 ./configure make sudo make install安裝完成之后驗(yàn)證一下是否成功stress --version能輸出版本號(hào)就說(shuō)明OK了。我在編譯安裝時(shí)踩過(guò)一次坑某些精簡(jiǎn)系統(tǒng)上缺少make和gcc需要先用包管理器裝好基礎(chǔ)編譯工具鏈再執(zhí)行configure。2.2 壓測(cè)前的系統(tǒng)狀態(tài)確認(rèn)在做壓力測(cè)試之前有一件小事經(jīng)常被忽略確認(rèn)CPU調(diào)頻策略?,F(xiàn)在的CPU大多有自動(dòng)調(diào)頻功能空閑時(shí)降頻省電負(fù)載高時(shí)自動(dòng)升頻。如果你不做任何設(shè)置壓測(cè)過(guò)程中CPU頻率可能忽高忽低測(cè)試結(jié)果的一致性會(huì)受影響。建議在壓測(cè)前把CPU調(diào)到最大頻率或性能模式觀察一下當(dāng)前頻率運(yùn)行狀態(tài)# 查看當(dāng)前CPU頻率 cat /proc/cpuinfo | grep MHz # 使用cpupower工具設(shè)置性能模式需要root權(quán)限 cpupower frequency-set -g performance如果發(fā)行版沒(méi)有cpupower命令也可以裝linux-cpupowerDebian/Ubuntu或kernel-toolsCentOS包。當(dāng)然如果你測(cè)試的目的恰恰是要驗(yàn)證調(diào)頻策略本身的行為那就不需要這一步反而應(yīng)該保持默認(rèn)策略去壓具體取決于你的目標(biāo)。另外壓測(cè)前還要確認(rèn)系統(tǒng)負(fù)載基線是干凈的。最好在一臺(tái)沒(méi)有業(yè)務(wù)的機(jī)器上做壓測(cè)或者至少確認(rèn)當(dāng)前top顯示的load average不高避免把別人業(yè)務(wù)的負(fù)載誤算進(jìn)你的測(cè)試結(jié)果里。3. 壓測(cè)方案設(shè)計(jì)與核心參數(shù)3.1 CPU壓測(cè)--cpu參數(shù)詳解stress最常見(jiàn)的用法是CPU壓測(cè)命令格式如下stress --cpu 8這會(huì)在當(dāng)前終端前臺(tái)fork出8個(gè)子進(jìn)程每個(gè)進(jìn)程執(zhí)行一個(gè)計(jì)算平方根的死循環(huán)把CPU核心吃滿。根據(jù)我的實(shí)測(cè)每個(gè)--cpu進(jìn)程會(huì)跑在單核上8個(gè)進(jìn)程就能吃滿8個(gè)邏輯核心。機(jī)器有多少核心可以用nproc查看。這里有個(gè)決策點(diǎn)如果機(jī)器是超線程架構(gòu)8核16線程要壓滿所有邏輯核心應(yīng)該用--cpu 16還是只壓8個(gè)物理核心這取決于你的目的。如果你想驗(yàn)證整機(jī)散熱和供電是否扛得住那就壓滿16個(gè)線程讓所有邏輯處理器都進(jìn)入高負(fù)載狀態(tài)如果你想模擬“每個(gè)物理核心承載一個(gè)典型業(yè)務(wù)進(jìn)程”的場(chǎng)景壓8個(gè)可能更貼近實(shí)際。CPU壓測(cè)默認(rèn)會(huì)一直跑下去直到你按CtrlC終止。實(shí)際操作中通常需要限制時(shí)長(zhǎng)用--timeout參數(shù)# 壓8個(gè)CPU核心持續(xù)60秒后自動(dòng)退出 stress --cpu 8 --timeout 60s--timeout支持10s、1m、1h、1d這樣的時(shí)間后綴也支持純數(shù)字單位為秒。加上超時(shí)控制的最大好處是不用干等測(cè)試完自動(dòng)退出適合寫進(jìn)腳本里循環(huán)執(zhí)行。3.2 內(nèi)存壓測(cè)--vm參數(shù)詳解內(nèi)存壓測(cè)用到--vm系列的參數(shù)# 啟動(dòng)4個(gè)內(nèi)存壓測(cè)進(jìn)程每個(gè)分配512MB內(nèi)存 stress --vm 4 --vm-bytes 512M每個(gè)--vm進(jìn)程會(huì)調(diào)用malloc分配指定大小的內(nèi)存然后循環(huán)寫入數(shù)據(jù)確保內(nèi)存頁(yè)真實(shí)被觸達(dá)。這里我補(bǔ)充一個(gè)容易被忽視的細(xì)節(jié)malloc分配出來(lái)的內(nèi)存在沒(méi)有寫入之前只是虛擬內(nèi)存不會(huì)占據(jù)實(shí)際的物理內(nèi)存頁(yè)。stress內(nèi)部會(huì)通過(guò)寫入操作對(duì)這些內(nèi)存頁(yè)進(jìn)行實(shí)際觸達(dá)這也是它壓內(nèi)存比較有效的原因。實(shí)際壓測(cè)時(shí)內(nèi)存總量要算清楚。比如機(jī)器有8GB可用內(nèi)存你啟動(dòng)4個(gè)進(jìn)程每個(gè)分配2GB總量就是8GB。如果分配總量超過(guò)實(shí)際可用內(nèi)存系統(tǒng)會(huì)開(kāi)始使用swap性能會(huì)驟降如果超過(guò)物理內(nèi)存加swap的總量則可能觸發(fā)OOM Killer某個(gè)進(jìn)程被內(nèi)核殺掉測(cè)出來(lái)的結(jié)果就不具備參考意義。還有--vm-hang參數(shù)值得說(shuō)明。它會(huì)指示子進(jìn)程在分配并寫入內(nèi)存后掛起一段時(shí)間而不是反復(fù)隨機(jī)讀寫。比如stress --vm 2 --vm-bytes 1G --vm-hang 30兩個(gè)進(jìn)程各分配1GB內(nèi)存并保持30秒不釋放。這種模式適合測(cè)試“系統(tǒng)在內(nèi)存長(zhǎng)期以高占用率運(yùn)行時(shí)是否穩(wěn)定”貼近數(shù)據(jù)庫(kù)緩存、JVM堆內(nèi)存這類常駐內(nèi)存場(chǎng)景。3.3 磁盤和I/O壓測(cè)--io與--hdd磁盤I/O壓測(cè)主要有兩個(gè)參數(shù)--io和--hdd。# 啟動(dòng)4個(gè)I/O進(jìn)程每個(gè)進(jìn)程不斷執(zhí)行sync系統(tǒng)調(diào)用 stress --io 4--io的做法是不斷fork新進(jìn)程執(zhí)行sync()把文件系統(tǒng)緩沖區(qū)刷入磁盤產(chǎn)生系統(tǒng)調(diào)用和I/O調(diào)度壓力。不過(guò)說(shuō)實(shí)話這種壓測(cè)方式對(duì)現(xiàn)代SSD來(lái)說(shuō)壓力并不大它更多是壓內(nèi)核的I/O路徑和調(diào)度器不是直接壓磁盤帶寬。想要更直接的磁盤寫入壓力用--hdd# 啟動(dòng)2個(gè)寫盤進(jìn)程每個(gè)向文件中寫入1GB數(shù)據(jù) stress --hdd 2 --hdd-bytes 1G--hdd進(jìn)程會(huì)創(chuàng)建一個(gè)臨時(shí)文件默認(rèn)在/var/tmp目錄下然后反復(fù)寫數(shù)據(jù)進(jìn)去。這個(gè)測(cè)試會(huì)真實(shí)產(chǎn)生磁盤寫入流量可以用來(lái)驗(yàn)證磁盤的穩(wěn)定性和散熱。這里有一個(gè)我踩過(guò)的坑--hdd默認(rèn)會(huì)在/var/tmp下生成臨時(shí)文件對(duì)于容量小的根分區(qū)1GB甚至幾GB的寫入很容易把根分區(qū)磁盤占滿。所以在跑--hdd之前一定先看看磁盤剩余空間同時(shí)建議用--hdd-bytes限制單次寫入上限或者指定文件路徑。3.4 組合壓測(cè)模擬真實(shí)混合負(fù)載前面的參數(shù)都是單一維度的但生產(chǎn)環(huán)境的負(fù)載從來(lái)不會(huì)只消耗一種資源。stress允許同時(shí)指定多個(gè)維度一次壓測(cè)模擬混合負(fù)載# 8個(gè)CPU進(jìn)程 2個(gè)內(nèi)存進(jìn)程各1G 1個(gè)磁盤寫入進(jìn)程持續(xù)5分鐘 stress --cpu 8 --vm 2 --vm-bytes 1G --hdd 1 --hdd-bytes 1G --timeout 5m這種組合壓測(cè)更適合在真實(shí)服務(wù)器上做整體穩(wěn)定性驗(yàn)證。比如你新部署了一個(gè)生產(chǎn)環(huán)境想確認(rèn)在“CPU高負(fù)載、內(nèi)存大量占用、磁盤持續(xù)寫入”的場(chǎng)景下業(yè)務(wù)進(jìn)程還能不能穩(wěn)定響應(yīng)這種混合壓測(cè)就很有參考價(jià)值。我在實(shí)際做服務(wù)器驗(yàn)收時(shí)幾乎都是用組合參數(shù)跑30分鐘以上而不僅僅是單測(cè)一個(gè)維度。3.5 核心參數(shù)速查表參數(shù)作用常用搭配備注--cpu N啟動(dòng)N個(gè)CPU負(fù)載進(jìn)程--timeout每個(gè)進(jìn)程吃滿一個(gè)邏輯核心--vm N啟動(dòng)N個(gè)內(nèi)存負(fù)載進(jìn)程--vm-bytes每個(gè)進(jìn)程分配指定大小內(nèi)存--vm-bytes SIZE指定每個(gè)內(nèi)存進(jìn)程分配的大小--vm N支持K/M/G后綴--vm-hang N內(nèi)存分配后掛起N秒--vm模擬常駐內(nèi)存負(fù)載--io N啟動(dòng)N個(gè)I/O進(jìn)程--timeout不斷執(zhí)行sync系統(tǒng)調(diào)用--hdd N啟動(dòng)N個(gè)寫盤進(jìn)程--hdd-bytes真實(shí)產(chǎn)生磁盤寫入流量--timeout TIME指定總運(yùn)行時(shí)長(zhǎng)所有參數(shù)支持s/m/h/d后綴--verbose顯示詳細(xì)壓測(cè)日志任意配合調(diào)試使用4. 實(shí)操過(guò)程與數(shù)據(jù)觀察4.1 一個(gè)完整的壓測(cè)流程示例在真正壓測(cè)之前我先做一次基線采集也就是不做任何壓測(cè)時(shí)記錄系統(tǒng)初始狀態(tài)。這一步很重要因?yàn)楹罄m(xù)判斷異常都需要和基線對(duì)比uptime free -h df -hT /var/tmp mpstat -P ALL 1 3假設(shè)我現(xiàn)在拿到一臺(tái)8核16G的服務(wù)器要做一次硬件穩(wěn)定性驗(yàn)收壓測(cè)方案分三步走第一步跑CPU壓力10分鐘確認(rèn)所有邏輯核心都穩(wěn)定在100%負(fù)載stress --cpu 16 --timeout 10m第二步跑內(nèi)存壓力按70%內(nèi)存占用設(shè)計(jì)16G機(jī)器留出系統(tǒng)余量分配12G占用stress --vm 6 --vm-bytes 2G --timeout 10m第三步混合壓測(cè)30分鐘模擬真實(shí)業(yè)務(wù)的高負(fù)載場(chǎng)景stress --cpu 16 --vm 4 --vm-bytes 2G --hdd 4 --hdd-bytes 2G --timeout 30m三個(gè)步驟跑完如果沒(méi)有出現(xiàn)進(jìn)程被kill、系統(tǒng)死機(jī)、內(nèi)核報(bào)錯(cuò)等現(xiàn)象基本可以認(rèn)為這臺(tái)機(jī)器的硬件和系統(tǒng)在合理的負(fù)載范圍內(nèi)是穩(wěn)定的。4.2 壓測(cè)過(guò)程中的數(shù)據(jù)觀察方法壓測(cè)啟動(dòng)后記住一個(gè)原則不要只盯著黑色終端等結(jié)果要開(kāi)另一個(gè)終端去觀察系統(tǒng)狀態(tài)。我最常用的觀察工具組合如下top/htop看整體CPU使用率、load average、內(nèi)存占用判斷壓測(cè)進(jìn)程是否達(dá)到預(yù)期負(fù)載。mpstat -P ALL 1逐核查看CPU使用率。這個(gè)非常關(guān)鍵能看出壓力是否均勻分布在所有核心上如果只有部分核心為100%說(shuō)明壓測(cè)進(jìn)程數(shù)量少了或者存在中斷綁核等問(wèn)題。free -h查看內(nèi)存與swap使用情況。如果內(nèi)存壓測(cè)導(dǎo)致swap開(kāi)始大量增長(zhǎng)說(shuō)明壓測(cè)內(nèi)存分配過(guò)量不是理想狀態(tài)。iostat -x 1觀察磁盤使用率、吞吐量和I/O等待時(shí)間配合--hdd壓測(cè)使用。這里我舉個(gè)例子。用stress --cpu 8壓一臺(tái)8核機(jī)器在另一個(gè)終端跑mpstat -P ALL 1正常情況下每個(gè)CPU的%usr都接近100%。但如果發(fā)現(xiàn)其中某個(gè)CPU的%usr只有50%左右可能就是stress進(jìn)程被調(diào)度到了中斷處理較多的CPU上或者系統(tǒng)本身有綁核配置。這種細(xì)節(jié)在高精度壓測(cè)中值得排查。4.3 壓測(cè)時(shí)的安全注意事項(xiàng)壓測(cè)說(shuō)到底是在挑戰(zhàn)系統(tǒng)的極限所以要講究分寸。幾個(gè)我吃過(guò)虧的教訓(xùn)分享給你第一不要在遠(yuǎn)程連接的唯一會(huì)話里直接跑大壓力測(cè)試。如果你用的是SSH連服務(wù)器跑壓力測(cè)試壓力過(guò)大可能導(dǎo)致系統(tǒng)響應(yīng)變慢甚至假死你的SSH連接有可能斷掉然后你就失去了對(duì)機(jī)器的控制。建議用tmux或screen起一個(gè)會(huì)話跑壓測(cè)即使連接斷了壓測(cè)進(jìn)程還能繼續(xù)運(yùn)行重新連上后還能看到之前的輸出。第二內(nèi)存壓測(cè)總量一定要留余量。別把物理內(nèi)存壓到100%給系統(tǒng)內(nèi)核和基礎(chǔ)服務(wù)留出幾百M(fèi)B甚至更多的余量否則OOM Killer啟動(dòng)后可能把不該殺的系統(tǒng)服務(wù)給殺了測(cè)試結(jié)果會(huì)被嚴(yán)重污染。第三跑磁盤壓測(cè)前確認(rèn)磁盤空間和磨損程度。如果是機(jī)械硬盤或老舊SSD的機(jī)器長(zhǎng)時(shí)間--hdd壓測(cè)會(huì)加劇磁盤磨損。這種測(cè)試不是不能做但要有目的性不是為了測(cè)磁盤本身就沒(méi)必要長(zhǎng)時(shí)間跑。5. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄5.1 壓測(cè)以后系統(tǒng)負(fù)載降不下來(lái)這個(gè)問(wèn)題我遇到不只一次。明明按了CtrlC或者--timeout到了時(shí)間系統(tǒng)負(fù)載依然很高。排查步驟是這樣的先用top看是哪個(gè)進(jìn)程在消耗CPU如果是stress的殘留子進(jìn)程用pkill -f stress清理。注意stress的父進(jìn)程退出后某些子進(jìn)程可能會(huì)變成孤兒進(jìn)程繼續(xù)運(yùn)行。這時(shí)可以pgrep -l stress列出所有名字包含stress的進(jìn)程逐個(gè)確認(rèn)后清理pkill -9 stress另外如果CPU壓測(cè)跑完LOAD值依然很高但CPU使用率已經(jīng)降下來(lái)了那可能是系統(tǒng)在刷臟頁(yè)或等待I/O完成這時(shí)候耐心等一下就好通常不會(huì)持續(xù)太久。5.2 內(nèi)存壓測(cè)觸發(fā)OOM Killer內(nèi)存壓測(cè)時(shí)系統(tǒng)報(bào)錯(cuò)Out of memory: Kill process說(shuō)明壓測(cè)配置和機(jī)器實(shí)際內(nèi)存不匹配。比如一臺(tái)只有4G內(nèi)存的機(jī)器你直接跑stress --vm 8 --vm-bytes 1G8個(gè)進(jìn)程共需要8G內(nèi)存遠(yuǎn)超物理內(nèi)存OOM Killer就會(huì)出手。解決方案是精確計(jì)算內(nèi)存分配量。建議先看free -h確定可用內(nèi)存最多用70%到80%的可用內(nèi)存做壓測(cè)。假設(shè)機(jī)器有8G內(nèi)存系統(tǒng)已用2G可用約6G那壓測(cè)內(nèi)存量控制在4G到5G比較合適可以配置成stress --vm 4 --vm-bytes 1G還有一種情況你確實(shí)想壓到OOM看系統(tǒng)能不能正確殺掉內(nèi)存超限進(jìn)程從而保護(hù)主機(jī)不掛這種測(cè)試在容器環(huán)境驗(yàn)證時(shí)其實(shí)是有效的驗(yàn)證手段。但如果你的目標(biāo)是驗(yàn)證“系統(tǒng)在內(nèi)存高負(fù)載下穩(wěn)定運(yùn)行”那就要避開(kāi)OOM閾值。5.3 --hdd壓測(cè)后臨時(shí)文件沒(méi)清理干凈stress --hdd跑完后會(huì)在/var/tmp下留下臨時(shí)文件按我的經(jīng)驗(yàn)它會(huì)以類似stress.XXXXXX的命名方式寫入文件。如果不清理日積月累會(huì)占用不少磁盤空間。清理命令很簡(jiǎn)單ls /var/tmp/ rm -f /var/tmp/stress.*為了避免這個(gè)問(wèn)題更推薦的做法是在命令里就指定臨時(shí)文件路徑放到專門的測(cè)試目錄下測(cè)完直接刪目錄mkdir /tmp/stress-test stress --hdd 2 --hdd-bytes 1G --timeout 1m跑完以后刪除整個(gè)測(cè)試目錄干凈利落。5.4 壓測(cè)過(guò)程中SSH超時(shí)斷連這是一個(gè)很實(shí)際的運(yùn)維場(chǎng)景你通過(guò)SSH連接服務(wù)器跑長(zhǎng)時(shí)間壓測(cè)壓測(cè)到一半SSH連接斷了。排查思路是先確認(rèn)是不是網(wǎng)絡(luò)側(cè)的會(huì)話超時(shí)限制同時(shí)建議所有長(zhǎng)時(shí)間壓測(cè)都放進(jìn)tmux會(huì)話中執(zhí)行。我已經(jīng)養(yǎng)成習(xí)慣凡是超過(guò)10分鐘的壓測(cè)一律先建tmux會(huì)話tmux new -s stress-test stress --cpu 16 --timeout 1h # 按 CtrlB 再按 D 脫離會(huì)話連接斷了也不影響壓測(cè)進(jìn)程重新連接后用tmux attach -t stress-test回到壓測(cè)會(huì)話查看輸出情況。這個(gè)習(xí)慣幫我避免了多次遠(yuǎn)程壓測(cè)斷連后無(wú)法確認(rèn)結(jié)果的麻煩。5.5 壓測(cè)結(jié)果如何判斷是否成功最后聊一下怎么判斷壓測(cè)結(jié)果。stress本身不會(huì)輸出一個(gè)“通過(guò)/失敗”的結(jié)論你需要自己綜合判斷。我個(gè)人的判斷標(biāo)準(zhǔn)有三條壓測(cè)期間系統(tǒng)沒(méi)有出現(xiàn)嚴(yán)重錯(cuò)誤日志dmesg中沒(méi)有OOM、panic、硬件報(bào)錯(cuò)。壓測(cè)結(jié)束后SSH和基礎(chǔ)服務(wù)依然正常響應(yīng)負(fù)載能回落到正常水平。壓測(cè)期間業(yè)務(wù)進(jìn)程如果有沒(méi)有出現(xiàn)崩潰或者長(zhǎng)時(shí)間無(wú)響應(yīng)。這三條都滿足這臺(tái)機(jī)器基本可以認(rèn)定在當(dāng)前壓測(cè)配置下是穩(wěn)定的。如果再嚴(yán)格一點(diǎn)可以對(duì)比壓測(cè)前后/proc/cpuinfo和smartctl的磁盤健康狀態(tài)確認(rèn)沒(méi)有新增的硬件隱性故障。結(jié)尾我在實(shí)際使用stress過(guò)程中最大的體會(huì)是工具本身簡(jiǎn)單到不行真正的復(fù)雜度在于你怎么設(shè)計(jì)壓測(cè)方案和解讀壓測(cè)結(jié)果。壓測(cè)之前先想清楚要驗(yàn)證什么再動(dòng)手跑數(shù)據(jù)才有參考價(jià)值。最后分享一個(gè)小技巧如果你需要定期做壓力測(cè)試可以寫一個(gè)腳本把stress和stress-ng配合使用先用stress做快速冒煙驗(yàn)證確認(rèn)基本功能正常后再用stress-ng做專項(xiàng)深度壓測(cè)這樣兼顧了效率與深度我在多個(gè)項(xiàng)目的服務(wù)器驗(yàn)收中都是這么做的效果一直不錯(cuò)。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久99视频| 婷婷五月草| 亚洲精品久久久久AV无码| 人人性久久| 97啪啪| 五月综合婷婷开心网| 中文字幕欧美日韩VA免费视频| 欧美啄木乌丝袜人妻系列| 视频一二区| 色色99| www夜夜操wwwcon| 狠狠色噜噜狠狠| 色婷婷基地| 丁香五月婷婷激情蜜桃| 色婷婷丁香五月| 久久se 综合网 | wuyuedingxiang99| 天天操天天曰天天射| 99精品在线| 丁香六月天堂| 天天搞夜夜爽夜夜爽| 九九精品丁香花| 色五月大香蕉| 五月婷网| 色色色五月婷| 精品无码色| 欧美色偷偷大香| 色99视频| 国产成人网站在线观看| 天天色天天操天天射| 五月叮香啪| 色婷婷五月婷婷五月婷婷五月| 九九热re99re6在线精品| 国产AV一区二区三区最新精品 | 亚洲V国产V欧美V久久久久久| 人妻精品一区二区三区| 五月丁香在线看| 久久精品婷婷| www.henhenl| 久久五月天丁香| 国产精品久久久久久久久久 | 色综合天天天天做夜夜| 婷婷色激情五月天| 色五婷婷开心缴| 色婷婷色久综| 婷婷五月成人系列| 99爱视频在线播放| 91超级碰在线视频| 婷婷色网站| 五月久久婷婷成人网| 天天干天天 亚洲| 久久久婷| 狠狠久久婷五月综合色| 狠狠人人| 国产精品-第3页-91JQ就要激情网91JQ5.JQJQ926.XYZ | 风流少妇A片一区二区蜜桃 | 深爱五月网| 六月色狠狠色| 丁香五月成人论坛| 色噜噜婷婷| 1995年关宝慧版蜘蛛女| 思思热AV| 婷婷射丁香| 久久精品系列| 色婷婷视频在线| 国产精品色婷婷99久久精品| 97色在线视频| 91九九| 99爱精品| 亚洲黄色操逼| 97资源碰碰在线| 免费亚洲成人电影AV| 大香蕉伊然在亚洲90| 婷婷丁香五月综合网| 欧美内射AAAAAAXXXXX| 五月婷婷之综合激情| 欧美婷婷综合| 激情五月激情综合网| 久久丁香五月天| 五月天激情婷婷| 亚洲色五月| 嫩BBB槡BBBB搡BBBB| 曰韩少妇内射免费播放| 五月丁香人妻| 就99这里只有精品| 蜘蛛女侠2003满天星免费观看| 伊人激情综合| www.色综合.com| www.91AV.com| 99亚洲综合| 丁香五月 综合| 丁香伊人激情| 精品人妻久久久| 夜夜爽天操| 91日韩在线| 日日操夜夜操中国无码| 中文字幕永久在线| 天天干天天色综合| 婷婷导航| 99亚洲精美视频在线观看| 99色五月| 9久热这里只有精品| 夜夜骑夜夜操| 内射人妻视频国内| 亚洲综合五月天婷婷丁香| 亚洲国产婷婷色五月| 狠狠狠狠狠狠草| 毛片毛片毛片毛片| 高清一区二区三区日本久| 伊人激情影院| 99干日本| 久草热视频在线观看| 国产精品久久久久久白浆色欲| 亚洲精品久久久久久久久久吃药| 日韩在线观看亚洲| 亚洲A色| 五月天丁香综合久久国产| 91丨九色丨国产打屁股| 婷婷人妻激情| 久久综合五月天激情小说网站| 四色五月婷婷| 五月婷婷co.m| 亚洲天堂色色| 伊人婷婷大香蕉| 99视频在线观看视频| www.99热这里只有精品| 婷婷狠狠综合网入口| 久久WW| anquye五月| 五月婷啪啪| 亚洲欧洲另类| 黄网网站在线播放| 操97免费超级视频| 日熟女| 五月色无码| 另类图片色五月| 色色亚洲99com| 激情五月天色色| 婷婷五月天无码熟女| 亚洲激情久久| 久久婷婷五月综合色天| 亚洲最大五月六月丁香婷婷| 九九操屄| 免费五月婷婷网| 精品国产一区二区三区四区阿崩| 色色吧综合| 婷婷五月草| 国产午夜精品一区二区三区四区| 日韩五月天婷婷| 亚州操人在线视频| 电影《战争与艾拉》免费观看| 丁香激情网| 国产特级毛片AAAAAAA高清| 人妻精品在线| 亚洲av免费在线| 啪啪黄页网| 91丨人妻丨国产丨丝袜| 婷婷五月天综合在线| 在线观看免费观看在线9久| 久久大香蕉同僚| 黄色激情五月天| 国内自拍1区| 任你草| 五月天丁香网站| 日本成人综合| 大香蕉久久久| 国产中文亚洲欧美日韩性交| 亚洲综合五月天婷婷丁香| 激情四射五月天| 国产精品久久久久久白浆色欲| 色噜久| 夜夜骑福利资源| 五月天色小说| 丁香五月天激情综合| 国产午夜精品AV一区二区麻豆| 国产乱码久久| 猫咪伊人AV| 热这里只有精| 99九九这里有免费视频| 五月丁香婷婷综合| 99视频精品全部免费看| 91av传媒高清在线视频网| 国产五月婷| 五月丁香婷婷伊人| 色婷婷久久综合丁香五月| 激情内射人妻1区2区3区| 99色热视频| 这里只有精品免费视频| 9999色色色色| 五月婷婷激情性爱| 久久人妻少妇嫩草AV| 色婷婷五月天天天天天| 久月久在线视频| 久久综合五月| 亚洲日本激情| 综合亚洲AV| 婷婷激情鹿城五月天| 九九一区| 二色AV| 天天爽天天爽天天爽天天爽天天爽| 五月婷婷六月色| 99热这里只有精品最新地址获取| 五月综合丁香婷婷| 婷婷色情 | 九九久久网| 亚洲小视频免费播放| 国产做爰视频免费播放| 色婷婷六月丁香综合欲精品| 婷婷久久午夜网| 96自拍视频九色在线观看| www.五月天激情| 丁香婷婷九月| 五月综合色| 天堂爱爱| 99日本精品视频热| 热久久这里只有三级视频| 色婷婷A| 99碰碰| www.日日夜夜.com| 婷婷五月天,影院| 伊人综合婷婷| 99热99日天天干| 丁香色婷婷| 三级大香蕉网| 九九视频这里是精品五月| 亚洲视频另类| 日韩人妻白浆视频系列| 激情丁香五月| 亚洲色五月天| 色综合色综合网| 婷婷色五月婷婷姐妹| 丁香五月停停av| 天天肏夜夜肏| 射久久丁香五月| 九九热99精品| 色五月aV| 亚洲色婷婷婷婷人人爽| 99久久婷婷国产综合精品草原| 91呦呦呦| 日韩AV无码影片| 夜夜躁爽日日| 久久精品人妻| 六月婷久久| 激情的五月| 亚洲精品网址| 激情五月婷婷她| 欧美大肥婆大肥BBBBB| 久99久精品视频| 亚洲国产va| 日日干日日s| 99操视频| 国产精品丝| 九九爱精品网站| 五月丁香成人网| 亚洲午夜视频| 日本天堂久久| 五月婷婷色在线| 最近中文字幕大全免费版在线| 成人va在线播放| 国产精品日日躁夜夜躁| 丁香五月成人网| 激情美女五月天激情在线| 色噜噜狠狠色综合伊人| 激情综合色五月六月婷婷| 色综合久久综合中文综合网| 激情另类综合| 那里有AV网址| 丁香五月婷婷激情视频播放| 丁香五月综合在线播放 | 丁香色婷婷| 激情五月天婷婷五月天| 激情综合丁香五月| 91九色无码日韩| 激情五月婷| 日韩成人中文字幕| 色情婷婷| 中文字幕婷婷9月天| 91操人人操| 久爱综合| 91久久久久久久久久| 婷婷伊人五月丁香天堂网| 久久日本wwww色| 97碰操| 婷婷五月天丁香激情| 亚洲AV永久无码影院黑人| 99热只有精品在线| 亚洲精久久| 色色精品色| 婷婷丁香77777| 亚洲狠狠婷婷综合久久久| 一二三区视频韩国| 99亚州综合精品成人网| 色婷久久| 99riav 亚洲| 九九av| 一起操最新网址| 五月丿香啪啪| 五月丁香网视频| 天天色综合色| 五月天激情啪啪| 色色com| 成人做爰高潮A片免费视频| 91亚洲视频| 九九色video| 91视频综合网| 色狠狠伊人久久五月丁香| 色丁香六月| 五月丁香欧美综合| 97色干在线观看| 午夜丁香综合婷婷| 亚洲综合网激情五月天| 国产免费AV网站| 大学生高潮无套内谢视频| 婷婷色色欧美综合网| 丁香五月激情网| ss五月天激情| 99狠狠| 99色综合| 综激情网| 狠狠色噜噜| 婷婷综合五月天| 免费观看全黄做爰的视频| 欧美顶级少妇做爰HD| 丁香激情五月少妇| 我爱宗和色| 日亚二欧美| 亚洲最大成人综合网720P| 97成人超碰免| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 成人在线免费网址| 1024日韩| 五月天久久www| 五月丁香六月成人| 在线色婷婷| 无码动漫AV| 精品国产va久久久久| 色久五月天| 色色色色综合网| 六月激情网| 激情五月激情综合俺也去婷婷小说| 人人草人人视| 一级内射毛片| 五月丁香久久呀| 99亚洲天堂| 免费在线观看AV网站| 五月天婷婷香蕉狠狠超碰综合| 激情5月天天天| 婷婷成人视频| 俺来也综合网精品一区| 婷婷99狠狠躁天天| a毛片二逼wwwwwwwwww| 99'无码| 色99热| 丁香五月天社区婷婷| 天天干天天日日| 亚洲精品视频在线播放| www.五月婷婷| 91精品久久久久久77777| 成人国产网站| 婷婷丁香五月综合免费视频百花| 97色视频网| 色播婷婷五月天| 五月婷婷视频啪啪美女| 色色色色网| 1024在线视频| 亚洲精品永久久久久久| 婷婷99综合| 色婷婷丁香五月观看| 九九在线视频| 亚洲六月色婷婷| www.天天干| 久久99免费视频| 激情六月日韩| 操操操91| XX久久| 色婷婷a| 日韩久久色| 影音先锋91资源站| 丁香五月91| 97久操| 99热这里只有精品一| 99爱在线视频| 天天射影视综合网| 激情图片亚洲| 天天插天天插| 丁香婷婷六月激情文学| 亚洲激情五月天| 色色色色色色色综合| 九九99免费视频| 亚洲精品国产成人AV在线| 人人操97| 夜夜天天天天天干天天爽| 嫩草极品| www.婷婷| 丁香六月婷婷开心| 伊人大香蕉爱聚| 婷婷无码五月天| 久草五月婷婷| 久久久久久人妻| 天天做天天爱天天爽在| 大香蕉伊然在亚洲90| 人人爱摸视频| 五月婷婷视频啪啪美女| 99ri国产精品| 丁香五月婷婷基地| 亚州色色色| 密视AV综合在线| 久久婷狠狠色| 天插天啪天啪天啪| 久久艹网| 丁香六月激情综合| 色婷婷综合影院| 久热九九| 亚洲免费在线观看岛国| 久热中文字幕| 免费无码毛片一区二区A片| eeuus五月婷| 亚洲日比视频| 九月丁香| 五月天伊人综合| 欧美99热| 大香蕉五月天婷婷| 日韩精品99久久| 激情丁香五月天| 丁香六月狠狠| 久久精品99国产精品日本| 日狠狠| 99久久婷| 欧美碰碰碰| 丁香婷婷色五月| 日日操天天| 人妻性爱av网站| 婷婷婷婷婷婷婷婷婷婷丁香| 91九色精品| 先锋资源 996| 黄色大片又大粗又爽| 丁香五月婷婷高清| 免费无码毛片一区二区A片| 久久久久久五月天| 久久只有精品| 99操99| 97婷婷五月激情六月丁香伊人| 狠狠五月激情丁香六月| 五月天婷婷自拍图片在线观看| 婷婷久久18| 五月婷A V在线| 中文网av| 婷婷五月开心中文字幕在线| 久青青久| 26uuu欧美日韩| 99免费青青蜜臀| 五月天天丁香婷婷| 欧美三级巜人妻互换| 91啪啪| CAoub青青超碰| j五月香在线| 五月天成人小说| 国产免费一区二区三州老师F1F1| 免费观看的婷婷五月视频在线| wwccc久久久| 激情网战码亚洲A| 日本97在线| 激情网色五月| 日日夜夜天天| 欧美激情综合五月色丁香| 97五月天| 成人综合视频在线| 国产精品色婷婷99久久精品| 五月婷婷五月天| xxx.色婷婷| 四月婷婷丁香| 三级大香蕉网| 都市激情五月婷婷亚洲| 操操操AV| 丁香综合婷婷五月天| www激情com| 丁香六月婷婷一区二区三区| 婷婷色五月色| 五月丁香六月激情| 五月婷在线观看| 激情综合色婷婷啪啪六月天| 婷婷的99视频网站| 婷婷天堂站| 国产成人精品一区二三区熟女在线| 99热这里只有精品99| 婷婷五月天色色| 色婷婷电影网| 97午夜一区二区| 婷婷久久综合| 性爱激情久久| 欧美日韩成人在线网| 99亚洲精品视频| 亚洲综合五月天婷婷丁香| 欧美色图天堂网| 天天搞夜夜六| 夜夜做夜夜愛| 色吧婷婷| 99热精品在线观看| 国产三级在线播放| 香蕉狠狠爱视频| 99操碰| 婷婷久久午夜网| 六月丁香婷婷天堂| 久久成人综合五月天| 深爱五月最新网址| 久久性操| 五月婷A V在线| 九九热婷婷| 色五月激情视频在线综合| 综合逼五月激情婷婷| 婷婷丁香色五月久久88| 久久婷婷五月综合激情国产| 国自产拍偷拍精品啪啪一区二区| 亚洲一区二区 成人网站戴套| 激情噜噜噜| 久久久五月天| 五月丁香色停停啪啪啪| 99在线视频精品| 成人电影AV在线观看| 婷婷激情五月天7| 色狠狠色综合| 婷婷五月天网| 97热久久五月婷婷| 99热日本| 亚洲操b| 色婷婷六月| 婷婷久久色| 大香蕉AV在线| 色狠久| 九九在线精点品| 中文AV网站| 婷婷91| 999影院成人在线影院| 一区二区乱码视频| 香蕉99网| 开心五激情网| 五月色婷婷综合| 伊人久热91网| 五月天五月婷五月激情网| 伊人婷婷色| 亚洲午夜在线视频| 超碰九九热| 免费精品66| 99视频网址| 天堂久久丁香| 开心激情色婷婷五月天| 丁香蜜臀黄色婷婷五月天| 亚洲欧美成人在线观看| 有码人妻久久| 色色99| 久久艹99| 婷婷成人五月天成人文学| 亚洲乱码日产精品BD| 欧洲S级在线观看| 婷婷五月综合激情免费视频| A片试看50分钟做受视频| 色哟哟精品| 天天 日综合| 91一起艹| 婷婷伊人综合中文字幕| 91操在线| 人妻无码精品一区| 亚洲天堂色| 婷婷精品在线| 日本欧美成人片AAAA| 五月婷视频久久| 99a级片| 亚洲第二AV| 亚洲综合色棒| 亚洲区在线| 婷婷六月激情丁香| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 开心五月深爱五月丁香五月激情五月| 女人高潮内射99精品| 久久综合激情五月天| 亚洲欧美综合7777色婷婷| 丁香五月先锋| 婷婷五月情| 91要啪| 性视频久久| 色噜噜97视频在线观看| 91操在线视频| 五月丁香影院| 久综合网| 人妻爽爽爽久久久久久久久| 亚洲第一综合| 色五月天激情| 免费啪啪啪网站| 五月丁香婷婷AV| 九九99在线| 五月丁香婷婷深深爱| 成人免费高清在线播放| 婷婷四色五月| 热九九在线| 九九热精品| 亚洲Av入口| 99久久婷婷精品视频| 九九热视频精品| 色婷婷综合电影| 26UUU欧美激情一区二区| 96丁香六月婷婷蜜桃综合久久| 丁香五月天激情| 五月丁香怕啪啪| 九八Av| 天天插天天插天天插天天插| 91九色熟女| 丁香五月影视| 天天草婷婷五月| 色综合99无码 | 99视频自拍| 欧洲婷婷五月天| 青青久久五月| 五月天激情久久| 99热 免费| 啪啪九九色| 91九色|疯狂|高潮|对白|| 五月色婷婷亚洲 | 人五月天婷婷喷水| 色婷婷大香蕉| 久久99久久99精品免观看软件| 超碰成人在线免费观看| 天天爽天天操| 一本色综合色| 丁香五月在线| 99久久a线观| 婷婷五月丁香四射| 婷婷社区五月天| 夜夜操激情| 久草五月婷| 久久婷婷五月天| 五月婷av| 日本va欧美va精品发布视频| 99热销国产这里有精品| 中文字幕日产A片在线看| 丁香五月六月综合欧美| 婷婷五月天Av| 97久久精品| 亚州男人天堂婷婷五月| 99热这里全都是精品| 色欲AV导航| 99re热精品视频国| 五月婷婷色色网址| 国产性爱在线| 久久性爱视频| 丁香五月综合网亚洲综合欧美狠狠 | 射久久丁香五月| 中文字幕在线免费看线人| 婷婷五月,偷窥偷拍网| 五月婷婷久久爱| 久操无码| 激情五月婷婷视频| 开心五月婷婷激情| 99精品国产热久久91色欲| 97婷婷五月| 激情5月婷婷狠狠干| 激情九九九九| 日本综合99| 激情小说五月天| 99精品久久久久久久婷婷| 五月天婷婷在线播放免费| 五月婷婷激情| 97操碰在线视频| 婷婷黄色网| 熟女人妻一区二区三区免费看| 午夜激情综合| 91窝窝| 色狠狠婷婷| 欧美性色A片免费免费观看的 | 五月天婷婷黄色视频| 黄色精品五月婷婷| 色欲婷婷五月天丁香| 色亭亭九月| 久久91久久精品久久| 亚洲妇女熟BBW| 国产成人网| 26uuu日韩| 91操碰| 久色网| 91久久久久久久| 色综合久久五月天| 色婷婷亚洲婷婷在线观看| 五月婷婷天| 丁香六月色婷婷| 亚洲第79页| 婷婷五月18永久免费视频| 九九免费精品| 久久99激情丁香婷婷小说网| 五月婷婷六月少妇激情| 五月六月伦理| 日日噜噜夜夜狠狠久久丁香六月| 99色精品| 丁香婷婷九月| 丁香婷婷基地| 日本欧美成人片AAAA| 国产成人精品一区二三区熟女在线| 狠狠穞A片一區二區三區| 天天日日夜夜| 91色综合久久| 一级二级色大片| 高清视频一区| 五月天·www·com| 色色啊| 99热在线中文字幕| 五月开心深爱激情网| 激情综合五| 人。妻久久| 五月婷婷综合精品| 激情五月色婷婷| www.婷婷五月天.com| 乱岳熟女50岁| 麻豆AV一区二区三区| 99热综合| 91成人看| 99色激| 精品人妻久久久| 美女丁香五婷婷| 婷婷五月天综合小说网| 五月婷婷婷婷网| 五月婷中文字幕| 日日日日日| 碰碰碰97免费精彩视频| 操91| 久久只有18视频| www.色婷婷.com| 欧美激情综合色综合啪啪五月| 国产乱人偷精品人妻A片| 性爱五月婷| 色婷婷五月天中文字幕| 色情丁香五月天| 色五月婷婷小说亚洲中文字幕组| 欧美精品999| 超碰A V在线| 丁香婷婷人妻| 五月叮香啪| 丁香五月影院| 超碰三级片| 婷婷激情六月中文| 91九色精品女同系列| 怡红院AV亚洲一区二区三区H | 懂色av蜜臀av粉嫩av永陈冠希| 大香蕉九九| 色五月激情综合| 日本系列_4页_777FP| 日本一级淫| 久久久人人操A V| 丁香五月网络网络| 伊人网碰碰| 久cao香蕉影院| 天天日天天添| 色五开心五月五月深深爱| 欧洲色色| 五月丁香激情婷婷| 色噜噜狠狠插综合| 亚洲V国产V欧美V久久久久久| 日韩在线视频网站| 国产综合网在线| 欧美性生交XXXXX无码小说| av在线中文| 婷婷五月激情五月激情| 午夜天堂一区人妻| 99这里是99在线视频| 香蕉人在线香蕉人在线 | 亚洲无码 图片区| 成年人夜夜喷水| 婷婷激情视频欧美视频自拍视频欧美剧 | 99激情网| 色欧美影院| 丁香五月色色婷| 深爱五月亚洲| 五月色综合| 激情影院内射| 九九亚洲| WWW.天天日| 激情综合网五月丁香| 97香蕉人人在线观看| 人人人操97| 国外亚洲成AV人片在线观看| 九九99视频精品| 精品人妻一区二区三区四区不卡在| 激情无码网| 婷婷五月天无码| 伦乱人妻| 色爱五月天| 婷婷中文字幕网站| 色情久久久| 老妇六区| 另类综合网| 91制片厂久久久国产电影| 五月丁香六月激情网| 久草热久草在线视频| 香蕉婷婷色五月| 99热免费| 一區四區歐美日韓| 久久人妻少妇嫩草AV| 狠狠狠狠狠狠狠狠狠狠狠色宗合图片| 极品人妻VIDEOSSS人妻| 久久98| 六月婷婷色| 五月婷婷开心深| 国产 码在线成人网站| 另类五月婷婷| 国产性爱在线| 九一99| 亚洲另类毛片| 久久资源网五月婷| 激情深爱五月婷婷| 亚洲精品国产熟女久久久| 欧美婷婷五月无砖| 亚洲精品第一国产综合亚AV | 婷婷五月婷婷五月| 久久丁香综合精品综合| 99看片| 欧美人人操| 97综合在线| 精品在线| 久久婷婷五月丁香蜜桃网| 婷婷开心久久| 五月天婷婷操逼视频| 婷婷国产成人| 1024手机在线观看看片_日韩精品| 超碰在线成人| 深爱激情五月天色婷婷| 丁香婷婷激情四射五月| 激情亭亭五月| 高清无码.com| 国外亚洲成AV人片在线观看| 九九热精品视频九九| 五月婷久久久| 五月婷婷综合在线| 色五月丁香伊人| 狠狠狠狠狠狠色| 亚洲精品又粗又大又爽A片| 五月婷色激情五月| 亚洲激情av| caop视频| 九九热中文| 丁香六月婷婷综合网| 91操在线| 五月激情综合网| 久色资源网| 婷婷色播婷婷| 婷婷激情六月中文| 欧美日综合| 婷婷丁香社区网| 久久婷婷青青| 久热这里只有精品99re| 森林影视大全,最好看的2019年视频| 九九九九成人| 亚洲激情网| 色色色热热热| 26UUU亚洲欧美| 精品人妻在线| 精品热青草| 五月婷婷香| www99热| 色色亚洲无码| 玖玖九九9999在线观看视频精品| 五月丁香六月情| 日韩精品二三区| 超级黄色片| 五月丁香色欲| 免费黄色视频网址| 国产精品视频| 99精品福利视频| 欧美色骚婷婷五月天| 精典久久| 久久久久久久久久久久久久久久久精典| 99热精品在这里| 色婷婷日本| 日本 @ va 免费| 中文人妻主播久久| 二色AV| 超碰A V在线| 欧美五月停| 色五月婷婷五月天| 久久婷婷五月免费视频| 思思精品久久艹 | 大香蕉人妻| 久久丁香五月| 天天激情欧美美女| 久热这里只有精品视频免费观看| 婷五月天在线草| 色五月天.con| 99操中文视频| 超碰不卡在线| 天啪色| 91九色 熟| 五月婷婷色欲| 亚洲第一第二网站| 五月丁香影院| 婷婷丁香六月天| 六月丁香婷婷尤物| 丁香久色| 婷婷5月开心6月| www.99热在线观看| 日本久久精品18| 狠狠色色综合| 久久久婷婷五月亚洲97号色| 9热久久| 久久99jiu9| 日本在线wwww| 丁香天堂夜| 丁香五月黄色| 天天综合网~91| 日韩伊人大香蕉| 最新无码专区| 成人性生活免费观看。| 91色综合久久| 超级碰碰碰久久网站视频| 久99久视频精品| 日本久碰| 日亚二欧美| 久热91精品| 91成人看| 五月婷婷综合影院| 另类 在线| 级情九色| 碰超99| 热久久99热欧美国产亚洲| 另类专区在线观看| AA片在线观看视频在线播放| 成人无码髙潮喷水A片| 精品久久久久成人码免费动漫| 午夜免费试看| 超碰成人免费| 激情人妻蜜夜系列区| 色亭亭九月| 黑人无码一区| 五月丁婷香| 五月婷婷这里都是精品| 九九综合久久| 97碰人人操| 久热婷婷| 国产免费性爱| 成人免费视频一区| 青青日韩| 99视频内射三四| 色综合xx| 成人丁香五月天| 天天久久狠狠色综合| 精品婷婷| 啪啪视频99| 婷婷色色欧美| 婷婷五月天成人五月天| 俺去也在线官网| 97极品在线| 九九九九精品精| 色九亚洲| 激情五月婷婷中文字幕| 激情六月丁香| 操97在线观看| eeuss人妻| 99热在线只有精品| 午夜少妇在线观看视频| 亚洲成片在线观看| 婷婷激情鹿城五月天| 婷婷综合视频| 亚洲深喉AV| 精品网站:999WWW| 人人干天天操五月丁香| 五月丁香六月婷婷激情视频在线观看免费| 成人片在线播放| 婷婷狠狠综合网入口| 色婷婷狠| 日韩乱玛久久| 大香蕉五月天| Av在线资源| 欧美性久| 五月综合影院| 99只有精品| 中文在线成人| 丁香六月天色婷婷| 丁香 亚洲 久久| 成人无码髙潮喷水A片| 99热主页日本| 亚洲色婷婷五月| 激情婷婷五月天| 91视频五月丁香| 精品成人无码A片观看香草视频| 97热精品| 色五月色五天色情网址| 婷婷五月天777| 亚洲无码成人| 久久蜜臀婷婷| www天天干| 五月婷婷丁香在线| 六月激情婷婷综合| 色丁香婷婷| A片试看120分钟做受视频红杏 | 亚洲成人一区| 日韩aaa| 亚洲成人中心| 亚洲第79页| 香蕉97碰碰碰欧美| 99热 这里只有精品 国产 日韩| 99精品在线观看| 色婷婷亚洲综合网站| 玖月婷婷爱丁香| 成人在线视频网| 婷婷天堂视频| 色色性爱视频| 天堂网操| 99久久九九| 日韩人妻AV在线| 99热精在线九九久久保| 这里只有精品免费视频| 色域五月婷婷丁香| 五月婷婷五月天在线| 极品人妻VIDEOSSS人妻 | 天天噜天天爱| 中文AV网| 国产超碰在线| 国产成人AV在线| 99久久www| 五月丁香婷婷婷激情爱爱| www.丁香六月婷婷久久天堂影院.con| 99re这里只有精品免费| 丁香五月五月婷婷| 国产亚洲在线观看| 国产67194| 1囯产午夜仑鲁鲁| 久久人妻伊人| 久久38视频| 婷婷五月天在线综合| 人妻免费网站| 99免费视频网| 国产av网| 婷婷亚洲综合| 91色综合| 丁香五月成人| 欧美综合五月丁香六月婷| 91女人18毛片水多国产| 六月激情久久| 色色色99| 国产午夜精品AV一区二区麻豆| 色婷婷五月天激情综合| 97涩婷婷| 久久婷婷综合国产| 天天骑日日爽| 青青久在线视频免费观看| 啪啪六月婷婷| 99啪| 亚洲精品久久久无码| av中文网站| 亚洲情色一区| 婷婷丁香六月天| 激情五月天色婷婷综合| 色噜久| 色婷婷六月| 伊人五月天婷婷| 五月综合丁香婷婷| 极品少妇高潮啪啪AV无码| 婷婷夜夜操| 色伊人婷婷| 丁香婷婷综合色五月激情国产基地| www.婷婷五月天,com| 99激情视频| 女人天堂AV| 99这里| 婷婷午夜天| www.夜夜操.com| 天天婷婷综合亚洲亚洲| 日本久久婷| 久久这有这里精品| 国产 码在线成人网站| 午夜青草资源| 秋霞日本免费毛片A片| 色婷婷av在线观看| 亚洲最大激情无码| 婷婷狠狠久久| 婷婷激情人妻| 91精品激情9| 啊V视频在线观看| 天天操天天日天天操| 天天色播| 人人操91色| 丁香六月婷婷| 婷久久| 天天操天天爱天天玩| 五月丁香婷婷爱激情综合网| 婷婷六月天| 激情五月天婷婷| 色噜噜狠狠色综合成人网| 日日操人人操| 五月丁香六月激情综合网| 色97啪啪| 天天日天天久久青青| 啪啪综合网| 激情网婷婷五月天| 天天摸日日舔狠狠添婷婷婷 | 久久婷中文字幕| 九八Av| 涩涩五月天| 啪啪色区| 色99热| α久久| 久久这里在精品视频| 日韩欧美成人片| 青青久久91| 亚洲午夜在线视频| 激情五月综合网| 五月天精品视频| 超碰97干| 婷婷色综合| 91人人爽久久涩噜噜噜| 亚洲欧洲中文日韩久久AV乱码| 婷婷99狠狠| 丁香五月另类小说| 精品人妻久久久久久久| www.25五月婷婷| 亚洲人妻av| 亚洲第一成人无码A片| 五月丁香啪。| 婷婷色一二三区波多野结衣| 色婷婷中文| 密着浓厚中出乚交尾GvG935| 婷婷五月成人| 中文av网站| 五月天另类小说| 久久曰曰| 老司机伊人| 婷婷婷婷色| 九九婷婷网五月天| 99综合网| 中文av网站| 色婷婷丁香五月| 丁香六月啪| 99在线免费观看| 少妇AB又爽又紧无码网站| 激情五月综合| 在线观看免费视频| 中文成人在线| 青青久久五月| www。五月,com| 97干在线免费| 蜜臀99久久精品久久久久| 99啪在线| 大香蕉久久久| 大香蕉婷婷| 久久久色婷婷五月天| 亚洲综合激| 插少妇综合网| 婷婷五月丁综合| www.婷婷五月| 成人五月天丁香婷| 色综合色色| 天天干天天干天天干| 日韩在线观看网址| 婷婷综合伊人| 狼友超碰| 婷婷丁香六月综合激情站| 五月天无码视屏播放| 久久网思思| 五月色亚洲| 色婷婷香蕉| 免费无码毛片一区二区A片| 中文AV网站| 另类 在线| 色五月综合婷婷久久综合婷婷久久综合婷婷久久综合婷婷久久 | 黄网在线免费观看| ri电影在线| 丁香五月中文字幕久色| 伊人激情影院| 这里只有精品1| 日逼AV影音先锋男人资源站| www九月婷婷| 日夜操B| 白天AV月月| 免费亚洲婷婷| 久久99热这里只频精品6学生| 538在线精品| 99内射视频| 色频玖玖五月天| 丁香六月激情综合啪啪| 91精品久久久久久久久| 91亚洲免费片| 综合九九中文字幕| 亚洲国产精品成人免费一区久久久在线观看AAAA | 99热成人在线观看| 色哟哟www| 亚洲人人操| 97在线天堂| 婷婷在线播放av| AV79| 五月天天综合| 强壮公让我夜夜高潮A片视频| 欧美黄色一级| 狠狠色婷婷7777久| 先锋资源 996| 淫视馆AV在线| 射婷婷中文字幕| 99九九在线| 天天射综合网天天插| 91久久五月天| 精品欧美性爱超级爽| 五月久熟女| 日批在线看| 99久.| 4399无码视频二区| 天天艹天天综合网| 夜夜爽天操| 色婷网| 人人操人人干AV| 久色网五月| 视色综合| 久99| 99热99久久| 狠狠色综合久久| 一起草AV| 97色啪| 天天色综合网1| 九九在线视频| 日韩性视频| 色五月丁香五月婷婷五月成人网| 久久天天| 激情婷婷久久| 国产五月天欧美色| 丁香六月天| 激情婷婷在线中文字幕| 婷婷丁香五月亚洲免费| 婷婷五月花| 丁香五月电影| 六月丁香婷婷综合在线| 激情性爱五月天网页| 五月天婷婷午夜丁香| 国产jd1024基地手机看国产| 另类天堂| 97人妻碰碰碰久久香蕉| 五月婷九月| 五月天婷婷黄色| 性一交一乱一交A片久| 中文字幕日韩成人| 日本五月天激情| 四色五月婷婷| 五月综合六月丁| 99精品在线观看视频| 91碰| 99久在线精品| 六月丁香六月婷婷欧美| 久久精品这里只有精品免费首页| 99热这里有精品| 99热免费网站| 五月天激情丁香| 99热超碰在线| 日韩精品一品二区三区的使用体验| 色婷大香蕉| 欧美日本va| 综合激情四射一theav| 99热99热不卡| 人妻日日日| 五月丁香六月婷婷a v| 亚洲深喉aV| 台湾佬天天日丁香婷婷五月天| 精品一二三区久久AAA片| 无码地址| 丁香五月婷婷五月| 女人天堂av| 久久小说| 五月天婷婷色播在线网| 深爱五月婷婷| 五月婷婷丁香大陆免费| 亚洲第一成人无码A片| WWW.开心五月天.COM| 欧美久久一级内射wwwwww.| 婷婷色五月色妇| 亚洲色99综合天堂|