欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

Ethernet幀完整性校驗:從FCS原理到CRC-32故障排查實戰(zhàn)

Ethernet幀完整性校驗:從FCS原理到CRC-32故障排查實戰(zhàn) 做網絡這一行“Ethernet幀完整性校驗”這串詞平時未必天天掛在嘴邊但真遇到網絡上莫名其妙的丟包、誤碼、延遲抖動繞來繞去最后總會撞到它身上。我第一次對它產生強烈印象是在一次聯(lián)調現(xiàn)場客戶反映兩套系統(tǒng)之間偶發(fā)通訊卡頓接口統(tǒng)計面板里某個計數(shù)在緩慢上漲業(yè)務卻感知不到太多異常。查了好幾天換線、換模塊、重啟設備都試過最后才有人點了一句“你怎么不去看看FCS錯誤率”。也正是從那一次開始我把幀完整性校驗的原理、計算方式、排查套路徹底過了一遍后面再遇到類似問題基本都能在半小時內找到方向。這篇文章里的內容我會從原理講到實操包括CRC-32到底怎么算、為什么抓包工具看不見幀尾的FCS、FCS異常增長時該怎么由表及里定位故障最后再總結一些我用過、踩過、后來養(yǎng)成的排查習慣。適合剛接觸網絡協(xié)議分析的開發(fā)者也適合在網絡一線做過一段時間、想系統(tǒng)梳理一下這類知識的朋友。1. 一次聯(lián)調里的意外發(fā)現(xiàn)抓包看不見幀尾FCS1.1 現(xiàn)場現(xiàn)象與第一反應那次聯(lián)調的環(huán)境并不復雜兩臺服務器通過交換機互通中間走了一段雙絞線再看一眼光模塊轉接。業(yè)務流量本身不大但每天總有那么幾個時段出現(xiàn)重傳。起初我沒太在意因為應用層有重試機制偶發(fā)重傳也正常。真正引起警覺的是某臺交換機端口統(tǒng)計里兩個字段在緩慢增長一個和CRC錯誤相關另一個和入方向丟棄相關。雖然增長幅度不大對業(yè)務暫時沒有明顯影響但這類計數(shù)一旦出現(xiàn)說明鏈路里一定在做“無用功”。我第一反應是懷疑線纜和光模塊。按照常規(guī)做法先換了一根跳線又把兩端的收發(fā)模塊重新插拔看是否能匹配成功。結果并不理想CRC錯誤計數(shù)并沒有停。后來又試著把兩條鏈路的速率協(xié)商狀態(tài)改為固定模式同樣沒有明顯改善。這時候我才意識到一個問題我一直在“猜”是物理鏈路的問題但我根本沒有真正搞清楚這個錯誤計數(shù)到底是在什么時候產生的。換句話說我該先弄懂“FCS”是什么它校驗的是什么才能知道該懷疑誰。1.2 以太網幀結構里FCS到底在哪里IEEE 802.3標準定義的基礎以太網幀結構從發(fā)送端的角度來看大致是這樣一個順序前導碼7字節(jié) 幀起始定界符SFD1字節(jié) 目的MAC地址6字節(jié) 源MAC地址6字節(jié) 長度/類型字段2字節(jié) 載荷46到1500字節(jié) 幀校驗序列FCS4字節(jié)前導碼和SFD是物理層同步用的接收端把它們識別出來之后就知道“幀數(shù)據(jù)從這兒開始了”。目的MAC、源MAC、長度/類型字段和載荷是真正被協(xié)議棧解析的內容。而FCS這4個字節(jié)就是我今天要重點聊的“Ethernet幀完整性校驗”機制的核心。FCS的校驗范圍是從目的MAC地址開始一直覆蓋到載荷結束不包含前導碼、SFD也不包含F(xiàn)CS本身。發(fā)送端對這一段數(shù)據(jù)算出一個32位的結果并按固定字節(jié)序填到幀尾。接收端收到整個幀之后用同樣的算法對同樣的范圍重新計算一次再把計算結果和收到的FCS做比較。如果一致就認為這一跳傳輸過程中數(shù)據(jù)沒有發(fā)生比特級的變化如果不一致接收端會把這個幀直接丟棄。有一點值得注意如果幀里帶了VLAN標簽802.1QFCS的校驗范圍會從目的MAC一直算到VLAN Tag和載荷結束這部分額外字段同樣受保護。無論是私有VLAN還是其他擴展標簽只要在幀頭里作為數(shù)據(jù)結構存在、接著載荷發(fā)送它們都會被納入CRC計算范圍。實踐中我見過不少人在用抓包工具查看帶VLAN幀時下意識只盯著源目MAC和IP完全沒意識到FCS覆蓋范圍已經發(fā)生了變化。1.3 為什么抓包工具“看不見”FCS很多第一次接觸抓包的朋友都會問同一個問題我抓出來的幀里明明能看到MAC頭能看到IP頭為什么找不到文檔里說的那4字節(jié)FCS答案和抓包工具的采集位置有關。抓包工具讀取的是主機協(xié)議棧里某個“鉤子”位置這個位置通常位于網卡驅動把報文上拋給系統(tǒng)網絡棧之后。而絕大多數(shù)網卡在硬件收幀時會先做一遍CRC校驗校驗不過的幀直接丟棄不往上拋校驗通過的幀再把尾部的4字節(jié)FCS剝離掉只把有效載荷部分交給驅動。所以應用層抓包工具拿到的幀天然就少了尾部這4個字節(jié)。這就帶來一個很重要的實操認知用抓包工具抓到的幀“看起來都是好的”并不能證明鏈路就是干凈的。因為真正帶FCS錯誤的幀在網卡硬件這一層就已經被處理掉了。你如果想驗證“這一跳有沒有出錯”不能只看抓包文件里的幀內容而是要看網卡驅動或者對端交換機的底層計數(shù)統(tǒng)計比如常見的rx_crc_errors、rx_fcs_errors這類字段。在不少網卡驅動里FCS錯誤是單獨計數(shù)的也有驅動把它并入CRC錯誤一類這取決于具體實現(xiàn)但整體思路一致它是物理層和MAC層之間的事件普通抓包工具默認是看不見的。當然也有例外。部分網卡驅動支持關閉CRC剝離功能或者抓包工具配置為“保留壞幀”模式這時你可能會在抓包里看到尾部帶FCS的完整幀甚至看到CRC校驗失敗的幀。但這種模式不是默認行為而且開啟之后抓包工具本身也容易把壞幀當作正常幀顯示反而誤導判斷。所以我個人并不建議在日常分析中開這種模式除非你明確知道自己想要抓壞幀做實驗。2. CRC-32幀完整性校驗的數(shù)學底子2.1 為什么以太網選擇CRC而不是簡單校驗和如果只是想讓接收端確認數(shù)據(jù)沒被改過最直覺的做法是“把所有字節(jié)加起來存一個和”。IP協(xié)議頭部的校驗和就是這么干的。但以太網這種鏈路層技術面對的是實實在在的物理信道電磁干擾、線纜衰減、連接器氧化、信號反射都會造成比特錯誤而且這些錯誤往往不是孤立的單個比特翻轉而是連續(xù)的突發(fā)錯誤。簡單求和這種方式對突發(fā)錯誤的識別能力很差。CRC循環(huán)冗余校驗的核心思想是把數(shù)據(jù)看成一個龐大的二進制數(shù)用這個數(shù)去除以一個固定的“生成多項式”得到的余數(shù)就是校驗值。接收端拿到數(shù)據(jù)和校驗值之后再做一次同樣的除法如果余數(shù)不為零就說明數(shù)據(jù)在這條鏈路上發(fā)生了改動。這個“除法求余”的過程聽起來復雜但在硬件上用移位寄存器實現(xiàn)非常順而且可以通過查表法提升速度這就是它在通信領域被廣泛采用的原因。IEEE 802.3選擇的CRC-32并不是隨便挑了個多項式。它背后對應了突發(fā)錯誤檢測能力的數(shù)學保證可以檢測出所有長度不超過32比特的突發(fā)錯誤可以檢測所有奇數(shù)個比特錯誤并且在數(shù)據(jù)長度足夠短的情況下雙比特錯誤的漏檢率也極低。對于一條物理鏈路上常見的噪聲擾動來說這套保證已經非常夠用。所以別看FCS只有4字節(jié)它在鏈路層協(xié)議里承擔的角色比很多剛入門的人想象中重要得多。2.2 IEEE 802.3 CRC-32的參數(shù)細節(jié)很多朋友試過自己實現(xiàn)CRC-32卻發(fā)現(xiàn)自己算出來的值和抓包工具或設備上的FCS對不上。真不是你代碼寫錯了而是CRC存在多種“變體”IEEE 802.3使用的CRC-32有自己特定的參數(shù)組合。我整理成一張速查表參數(shù)項IEEE 802.3 CRC-32取值生成多項式普通寫法0x04C11DB7生成多項式反射寫法0xEDB88320初始值0xFFFFFFFF輸入數(shù)據(jù)是否反射處理是輸出結果是否反射處理是最終異或值0xFFFFFFFF這里面的“反射”指的是對參與計算的每個字節(jié)先做位序反轉或者對整段數(shù)據(jù)處理時按位反序操作。用業(yè)界常見的話說802.3的CRC-32是“反射輸入、反射輸出、初值全1、結果異或全1”。如果你的CRC計算工具或者算法實現(xiàn)沒有配齊這套參數(shù)算出來的結果自然和真實FCS對不上。新手最容易栽的坑有三個一是多項式寫法搞混普通寫法和反射寫法之間的二進制位序正好相反二是忘記處理初始值不置為全1的話算出的結果只在空數(shù)據(jù)時恰好一致一旦有實際數(shù)據(jù)就會出現(xiàn)偏差三是漏掉最終異或導致差一個固定掩碼。還有一點FCS在網絡上的字節(jié)序也要注意常見網卡把CRC結果按小端序填到幀尾如果你按大端讀出來再比較一樣會不匹配。2.3 用生活化的例子理解“多項式除法”我知道“除以多項式”這個概念對非數(shù)學背景的讀者容易勸退。換個說法可以理解為你有一串特別長的數(shù)字然后有一個固定的“模子”發(fā)送端拿著這串數(shù)字去除以模子得到的余數(shù)就是蓋章。接收端收到數(shù)據(jù)之后也拿著同一個模子去除如果余數(shù)和發(fā)過來的章對不上說明數(shù)字在運輸途中被改過。為什么它能檢測出“改了哪個位”因為模子本身有精心設計的數(shù)學性質。任意一個比特錯誤等價于原數(shù)據(jù)加上了某個“誤差向量”。如果這個誤差向量恰好不是模子的倍數(shù)除法余數(shù)就會改變就會被識別出來。CRC能保證一定長度范圍內的所有突發(fā)錯誤都會被識別正是因為這個模子的數(shù)學設計讓這些誤差向量都不會“正好整除”。實際做鏈路分析時我不需要去手推多項式除法但理解這一層之后你會明白一個關鍵道理CRC不是加密不是哈希它不承諾防偽只承諾“傳輸過程有沒有擾動”。它也不會告訴你錯誤發(fā)生在哪個比特只會告訴你“這一幀壞掉了”。這一點在后面的故障排查里非常重要——FCS異常說明問題出在這條鏈路的某個環(huán)節(jié)但具體是哪一段還需要進一步定位。3. 手寫一個幀完整性校驗工具3.1 構造最小以太網幀并計算FCS要說對Ethernet幀完整性校驗的理解光看書肯定不夠。我當時為了讓自己徹底搞明白FCS的計算過程寫了一個很小的腳本去“造幀”自己拼一個最小以太網幀算出CRC-32再模擬接收方校驗一遍。整個過程不到幾十行代碼但對理解校驗邏輯非常有幫助。思路很簡單拼一個目的MAC是全FF廣播地址、源MAC是某個本地地址的幀EtherType字段填入0x0800載荷就放46個字節(jié)的測試數(shù)據(jù)。算一下FCSimport zlib import struct def build_frame(dst_mac, src_mac, ethertype, payload): frame dst_mac src_mac ethertype payload crc_val zlib.crc32(frame) 0xffffffff fcs struct.pack(I, crc_val) return frame fcs def verify_frame(frame): fcs frame[-4:] body frame[:-4] expected struct.pack(I, zlib.crc32(body) 0xffffffff) return fcs expected dst bytes.fromhex(ffffffffffff) src bytes.fromhex(001122334455) etype b\x08\x00 payload bytes(range(46)) full_frame build_frame(dst, src, etype, payload) print(frame length:, len(full_frame)) print(fcs bytes:, full_frame[-4:].hex()) print(verify result:, verify_frame(full_frame)) # 模擬傳輸過程中一個比特被翻轉 bad_frame bytearray(full_frame) bad_frame[20] ^ 0x01 print(verify result with flip:, verify_frame(bytes(bad_frame)))這里用到了Python內置的zlib.crc32它的底層實現(xiàn)恰好就是IEEE 802.3這套CRC-32參數(shù)多項式反射寫法是0xEDB88320初始值是全1輸入輸出都帶反射最后再做異或。所以不用自己寫查表邏輯。代碼里定義了兩個函數(shù)build_frame負責構造完整幀verify_frame負責把幀尾4字節(jié)當成FCS重新計算并比較。運行之后你會看到正常幀校驗返回True而把第20個字節(jié)翻轉一位后校驗立刻返回False。這個“翻轉一位就翻車”的效果正是CRC-32在鏈路層的務實價值它不保證你不被攻擊但能保證你不會把壞數(shù)據(jù)當成好數(shù)據(jù)繼續(xù)往上拋。3.2 離線驗證真實抓包數(shù)據(jù)自己造完幀之后我接下來做的一件事是拿一批真實的抓包文件做離線校驗。想直接從抓包文件里驗證FCS首先要面臨一個現(xiàn)實問題多數(shù)抓包文件保存的幀里根本沒有FCS字節(jié)。如果抓包時啟用了“完整幀保存”或者某些設備明確保留了幀尾FCS那么離線文件里的每一幀會包含完整4字節(jié)。需要逐幀解析pcap記錄pcap全局頭通常是24字節(jié)之后每一條記錄頭16字節(jié)記錄頭里的incl_len告訴你這條記錄實際捕獲了多少字節(jié)orig_len則告訴你網絡上的原始長度。如果incl_len比正常最小幀頭加最小載荷還要多出4字節(jié)或者和你已知的載荷長度對不上就值得去讀取最后4字節(jié)做校驗。import struct import zlib def parse_and_verify_pcap(file_path): with open(file_path, rb) as f: global_header f.read(24) while True: rec_header f.read(16) if len(rec_header) 16: break ts_sec, ts_usec, incl_len, orig_len struct.unpack(IIII, rec_header) packet_data f.read(incl_len) if incl_len 64 and orig_len 64: fcs packet_data[-4:] body packet_data[:-4] expected struct.pack(I, zlib.crc32(body) 0xffffffff) if fcs ! expected: print(ftimestamp {ts_sec}.{ts_usec:06d}: FCS mismatch)這段代碼只是示意不同鏈路類型比如帶VLAN Tag、帶元數(shù)據(jù)封裝會有差異但整體結構差不多。我實際跑批處理時發(fā)現(xiàn)一部分抓包確實能驗證通過另一部分文件里的幀尾4字節(jié)并不是有效FCS而是某些網卡驅動填充的占位數(shù)據(jù)這時候直接按FCS校驗就會出現(xiàn)大量“誤報”。所以離線校驗前最好先確認抓包工具到底有沒有存儲FCS別對著一堆占位數(shù)據(jù)空跑。3.3 單跳校驗通過之后的事從FCS角度看每經過一條鏈路、一臺交換機幀都會被重新計算一次FCS。也就是說端到端抓包時你看到的FCS已經是被中間設備“重新蓋過章”的版本而不是最初發(fā)送端蓋的章。這是理解幀校驗和上層校驗關系的關鍵。交換機從入端口收到一幀先校驗FCS通過之后再查轉發(fā)表修改某些字段比如TTL或MAC等涉及三層轉發(fā)的場景再重新計算一個新的FCS發(fā)出去。這個過程保證了“每一跳”的可靠性但每一跳都獨立完成上下游之間沒有狀態(tài)關聯(lián)。所以只靠鏈路層FCS沒辦法保證端到端的數(shù)據(jù)完整性應用層數(shù)據(jù)跨越多個網絡節(jié)點中間只要有一個節(jié)點軟件內部出問題就可能改掉數(shù)據(jù)后重新計算一個合法的FCS。這也是為什么TCP層還要有自己的校驗和到了更高層有些協(xié)議還會再做一次完整性摘要。鏈路層FCS是一道重要的防線但它只是縱深防御體系里的一道而不是唯一一道。實際排查問題的時候不要把“FCS校驗過了”當作“整條鏈路沒問題”的結論要理解每一層校驗各自保護的范圍。4. 從FCS異常反推鏈路故障4.1 CRC錯誤到底是在哪個環(huán)節(jié)產生的FCS異常的本質是“接收端算出來的校驗值和發(fā)送端寫的不一致”。那這個不一致通常在哪里被引入首當其沖是物理層雙絞線過長導致信號衰減、連接器氧化造成接觸電阻增大、網線內部線對絞距被破壞導致的串擾、電磁干擾源靠近線纜、光模塊老化導致光功率下降、光纖彎曲過大導致反射這些都會讓比特位在傳輸過程中“翻轉”。另一個常見來源是鏈路雙方的工作狀態(tài)不匹配。比如一端協(xié)商到了全雙工另一端卡在半雙工這種狀態(tài)在低速以太網上會出現(xiàn)大量沖突嚴重時幀會被截斷、撕裂接收端的FCS校驗自然過不了。尤其是強制雙工模式的時候風險更大因為雙方完全放棄了自動協(xié)商的握手確認過程。還有一個容易被忽視的環(huán)節(jié)網卡或交換芯片內部的處理邏輯。比如芯片收到一個長度異常的短幀Runt可能還沒來得及完整接收就已經把不完整的數(shù)據(jù)提交給上層模塊又比如交換機緩存不足時某個隊列被丟棄或部分丟棄也會表現(xiàn)為CRC錯誤或對齊錯誤。這類問題的物理鏈路本身可能是健康的。我自己的經驗是遇到FCS異常先不要急著懷疑線纜質量而是先看錯誤計數(shù)的分布特征。如果錯誤零散分布在多個端口那更像環(huán)境干擾或設備共有問題如果錯誤集中在一條鏈路的兩端那重點懷疑這條物理路徑如果只有一端報錯另一端完全干凈那可能是接收端硬件或驅動的問題。4.2 一套可以照抄的排查順序下面這套順序是我后來固定下來的排查流程不算特別復雜但每一步都有明確目的先收集兩側端口統(tǒng)計把CRC錯誤、FCS錯誤、對齊錯誤、短幀錯誤、丟包計數(shù)全部記下來。不要只看其中一個字段它們組合起來會給出更多線索。觀察錯誤增長速率和負載的關系。如果只在業(yè)務高峰時快速增長說明大概率是信號質量問題在高負載下被放大如果空載也在漲那問題可能很穩(wěn)定比如硬件損壞或接觸不良。做一次“物理層替換法”換線、換模塊、換端口。每換一個環(huán)節(jié)觀察一段時間計數(shù)。替換法最忌諱一次換好幾個東西那你就永遠不知道是哪個環(huán)節(jié)治好了問題。檢查協(xié)商狀態(tài)。確認兩端速率、雙工模式一致關閉強制的“非標準”配置再做對比。如果是在僅跑少量流量的測試環(huán)境可以嘗試顯式固定速率看錯誤是否消失。在鏈路兩端同時抓包并打時間戳比對兩端收到的幀數(shù)量和數(shù)據(jù)內容。如果入口流量正常、出口出現(xiàn)突發(fā)錯誤問題很可能在中間設備如果兩端都干凈但交換機計數(shù)在漲也可能是交換機內部統(tǒng)計口徑問題。如果錯誤只在某個特定網卡上出現(xiàn)更新驅動、固件并檢查網卡是否啟用了某些卸載特性比如接收側合并、Large Receive Offload這些特性在驅動實現(xiàn)有bug時會引發(fā)奇怪的數(shù)據(jù)異常。如果以上都做完了還沒找到原因再考慮設備硬件故障比如交換芯片的背板問題。這種情況通常需要換一臺設備或換一個板卡做隔離驗證。這套流程看起來基礎但能覆蓋絕大多數(shù)場景。尤其第3步的“每次只換一個環(huán)節(jié)”聽起來像廢話恰恰是無數(shù)現(xiàn)場工程師最容易因為急躁而犯的錯誤。4.3 故障速查表現(xiàn)象、原因與驗證手段為了隨時查閱我整理了一張速查表也算是對上面排查順序的一個濃縮現(xiàn)象可能原因先驗證什么可能的動作單端口CRC計數(shù)緩慢增長業(yè)務無明顯感知線纜老化、連接器接觸電阻、輕微電磁干擾端口協(xié)商狀態(tài)、線纜長度、兩端功率更換跳線、重新壓接水晶頭高負載下CRC計數(shù)快速上升信號衰減、光模塊劣化、雙工不匹配光功率、錯誤增長速率與負載關系更換光模塊、調整協(xié)商策略CRC錯誤伴隨對齊錯誤出現(xiàn)鏈路沖突、物理層幀截斷雙工狀態(tài)、線對序強制全雙工一致或更換線纜多端口同時出現(xiàn)CRC錯誤公共環(huán)境干擾、設備供電異常設備側電源、周邊大功率設備干擾整改布線路徑、調整電源更換模塊后計數(shù)短暫清零又復漲硬件插槽或背板鏈路問題換一個端口或設備對比進一步隔離硬件層級這里有一條通用原則CRC計數(shù)是一個“果”不是“因”。你從它著手去查問題沒錯但最終修復的一定是導致它的環(huán)境、物理鏈路、協(xié)商狀態(tài)或者硬件故障。神化統(tǒng)計字段容易把自己帶偏。5. 常見誤區(qū)和幾個實戰(zhàn)心得5.1 誤區(qū)一看到CRC上升就斷定是線纜質量差這類判斷太絕對了。很多情況下CRC錯誤來自驅動或設備內部的異常。我遇到過一次很典型的例子兩端口之間CRC計數(shù)持續(xù)上漲但把線纜、模塊全部換了一遍問題依舊。最后發(fā)現(xiàn)是某塊板卡內部背板鏈路的數(shù)據(jù)通路故障換了整塊線卡后才恢復。如果當時只盯著“換線”這一條思路根本走不到真正的根因。另一個容易被忽略的是虛擬化環(huán)境。虛擬交換機和虛擬網卡驅動在統(tǒng)計CRC時很多實現(xiàn)只是把宿主機物理網卡的統(tǒng)計原樣暴露出來并不代表虛擬鏈路上真的發(fā)生了比特錯誤。如果在虛擬化平臺上看到CRC上漲第一件事應該是確認這個計數(shù)到底來自物理網卡還是虛擬數(shù)據(jù)通路否則你容易把平臺自身的問題嫁禍給底層物理網絡。5.2 誤區(qū)二抓包工具顯示無錯鏈路就一定干凈這個誤區(qū)在上文已經提到過但它真的太常見了值得單獨拿出來再說一次。抓包工具默認拿到的幀是網卡剝離FCS之后的版本壞幀在進入?yún)f(xié)議棧之前就被丟棄了。所以抓包結果里每一條記錄都“光鮮亮麗”根本不能說明物理鏈路上沒有噪聲。想看鏈路健康度必須配合網卡底層計數(shù)否則你會被自己的抓包文件欺騙。反過來如果抓包工具里真的出現(xiàn)了CRC錯誤標記某些工具在捕獲引擎保留了壞幀時會有提示那說明這已經很嚴重了鏈路質量可能差到了一定程度。但普通場景下抓不到CRC錯誤反而是常態(tài)不要因為抓包結果好看就放松警惕。5.3 把CRC計數(shù)當作長期健康度指標排查完一個具體問題之后就可以建立一套自己的觀察習慣。我對接口統(tǒng)計的處理方式不是看某一個時間點上的絕對數(shù)值而是看趨勢。比如某端口的CRC錯誤計數(shù)今天比昨天多了300這個數(shù)量級在業(yè)務負載變化范圍內是否正常相比硬件報錯我更關心它是不是持續(xù)、單調地增長。持續(xù)增長意味著某個劣化過程正在發(fā)生可能是光模塊的激光器在緩慢衰老也可能是連接器在逐漸氧化。建議每隔一段時間把關鍵端口的統(tǒng)計拉出來存一份基線等變更發(fā)生后做對比。這個辦法成本極低但對解決問題幫助很大。真到問題爆發(fā)那一刻你能立刻判斷出“這個錯誤是什么時候開始變多的”“最近改了什么東西”遠比現(xiàn)場抓瞎要強。對于光口順帶關注光模塊的收發(fā)光功率變化趨勢光功率下降往往比CRC計數(shù)增長提前幾天就發(fā)出預警這算是我自己比較受用的一個小技巧。還有一個小習慣拿到一臺新設備或者新網卡先做一次短時間高負載收發(fā)測試把錯誤統(tǒng)計清零再觀察。每個硬件對誤碼的容忍度不一樣過早做基線反而容易在基線里埋入大量背景噪聲。等確認鏈路在干凈狀態(tài)下跑穩(wěn)了再開始記錄正?;€之后每一次統(tǒng)計異常都會很有參考價值。做鏈路分析做得時間長了我對“Ethernet幀完整性校驗”這串詞的感受已經從“一個CRC寄存器”變成了一整套觀察鏈路健康度的視角。自己動手寫校驗腳本、跑真實數(shù)據(jù)、被虛驚嚇過、也被真正的根因折磨過這些過程確實是把知識變成能力的最好方式。如果你下次再遇到CRC相關告警不妨先冷靜下來把統(tǒng)計字段、抓包位置、物理鏈路狀態(tài)這三樣東西擺到桌面上再決定要不要動手拆線纜。我個人的體會是絕大多數(shù)FCS異常都能通過一張清晰的排查順序表快速收斂真正難的從來不是修而是判斷該修哪里。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月婷婷色丁香| 丁香婷婷六月激情文学| 99这里有精品| 伊人激情影院| 五月丁香花激情综合网| 九九视频免费| 狼人狠狠操| 69超碰在线| 久久久人妻| 色欲婷婷夜夜| 五月丁香 啪啪| 久久婷婷五月天激情新地址| 狠狠狠狠狠干| 久久伊人婷婷| 色情五月婷| 五月丁香六月婷婷不卡免费无码| 色婷婷综合网站| 久草婷| 日韩另类| 庭庭久久内射| 亚洲五月天婷婷| 天天草天天舔| 91艹人| 婷婷丁香五月91| av在线婷婷| 五月丁香色综合| 五月婷婷色吧!| 久久久大香蕉| 国产亚洲成AV人片在线| 9色操| 亚洲精品一区中文字幕乱码| 丁香五月婷婷基地| 99re这里| 色五月天电影| 日韩婷婷| 国产午夜精品AV一区二区麻豆 | 超碰com| 啪啪五月天啪啪| AV在线观看网站| 91精品久| 夜夜AVV| 超碰成人公开| 99re欧美精品| 狠狠色婷| 婷婷五月精品中文| 人人草碰| 婷婷五月综合色拍| 天天搡日日搡aaaaⅩ| 毛片九九九九九九| 99久热精品在线| 色婷婷精品视频在线播放| 91综合在线| 99热99热在线| 色久天| 啄木鸟丝袜美女福利视频| 丁香五月婷婷亚洲综合精品在线| 九九视频这里是精品五月| 99热老网站| 成人网在线视频| WWW·色色色·COM| 国产亚洲在线观看| 色婷婷婷综合五月天| 五月丁香六月综合基地| 超碰99久久| 成人中文字幕在线| 九久9精品| 大香蕉久久婷婷| 日本全黄一级999| 精品综合网在线| 8050一级网| 99精品视频播放| 久久久久久久久月丁| 久久久国产精品黄毛片| 字母不卡码人逼| 久久婷婷五月综合色天| 欧美日韩成人免费在线| 久久无码激情视频| 五月丁香六月婷婷a v| 色狠狠综合网| 婷婷五月天六月丁香| 色五月天综合网| 七七色色综合| 91综合在线| 免费无码毛片一区二区A片| 欧美成人精品A片免费一区99| 免费看欧美成人A片无码| 99se丁香| www久久99| 伊人春天av| 亚州精品色情在线观看| 天堂草在线看www| 日本高清综合网五月丁香| 久久99热免费最新版| 五月婷免费视频| 五月婷婷激情五月| 丁香五月色色婷| 中文字幕丰满人妻无码专区| 精品国产va久久久久久久| 思思久久96热在精品国产,| 26uuu另类亚洲欧美日本一| 五月天综合| 亚洲无码播放| 亚洲AV成人在线观看| 94干大香蕉| www:99热视频| 丁香五月天天日| 婷婷深爱五月天在线| 丁香五月婷婷激情中文| 五月开心久久| 欧洲区自拍| 丁香五月婷婷色| 婷婷久久免费| 日本久久婷| 五月六月激情婷婷| 色哟哟精品| 亚洲成人综合在线| 五月天伊人久久久久| 99热伊人| 九九热最新| 五月丁香婷婷基地| 日本免费91| 人妻性爱| 色导航色婷婷五月天在线观看| 亚州操操| 天天干天天操天天干天天操天天干天天操 | 91 九色大美女| 香蕉97碰碰碰超视精品| 丁香五月激情婷婷| 丁香激情网| 久操福利| 十一月婷婷激情四射| 五月丁香影院| 伊人婷婷五月天| 天天摸色吧天天摸色吧| 久久激情中文| 一區四區歐美日韓| 亚洲色婷婷五月天| www.婷婷| 婷婷色在线观看| 五月婷婷婷色| 午夜无码精品色综合久久| 亚洲欧美一区二区三区爱爱动图| 五月丁香久久激情综合| 五月天婷婷六月| 操碰99| 99久久久精品| 91成人性爱视频| 亚洲高清在线| 色狠狠激情五月| 91成人电影| 噜噜五月天综合| 天天草天天爱| 色色色综合网| 综合亚洲五月天| 91黄操| 97成人超碰免| 99这里只有精品|v| 日韩有码一区| 操操操AV| 色玖玖综合| 亭亭五月天成人| 久久小说网| 99精品国产在热久久| 五月天婷婷中文字幕在线播放| 一本色道久久88综合日韩精品| 久99| 九九热在线视频| 激情五月婷| 久久天天| 另类精品视频在线观看| 色综合色五月| 亚洲精品国产成人AV在线| 99精品国产在热久久婷婷| 月丁香久久久| 激情婷婷五月天| 久久久九九视频精品18| 欧美va在线观看| 欧美VA视频| 五月天成人网在线观看| 91九色精品| 五月亭亭狠狠| 五月婷婷综合久久| 婷婷丁香成人| 五月丁香六月合| 大地9中文在线观看免费高清| 婷婷,五月天,丁香,第一| 色五月天综合网| AV伊人青草丁香六月| 婷婷99狠狠| 五月天婷婷基地丁香| 成人丁香五月天| 香蕉久久国产AV一区二区| 五月婷婷六月丁香综合在线| 激情图片婷婷| 久久久香港| 真实亲子乱子伦高清在线观看| 超碰人人摸AV| 影视av久久久噜噜噜噜噜三级| 99九九视频| 91人人爽狠狠狠| 高清不卡一区| 97超碰,人人舔,人人操,人人摸| 天天免费日日夜夜夜夜| 色99在线看| 婷婷丁香成人| 婷婷日日天天| 久久婷五月婷| 久综合4| 天天摸色吧天天摸色吧| 一区二区成人电影| 久在热99| 精品久热| 五月婷婷六月基地| 六月丁香啪啪啪| 五月婷婷激情综合| 夜夜操,天天撸| 99re在线视频| 欧美成人AAA片一区国产精品| 五月激情视频网| 婷婷中文综合网| 99热| 人人干Av| 亚洲六月婷婷| 99久久五月婷婷| 玖玖色综合网| 玖玖福利视频资源| 激情五月婷婷| 六月色激情| 婷婷成人视频| 婷婷婷婷婷婷婷五月丁香| 综合久久五月天| 看片视频在线免费日产在线看| 五月色俺婷婷| 综合久久婷婷| 色婷婷在线影院| 91丨九色丨熟女高潮| 久久草婷婷丁香网站| 久久99精品久久久久久三级| 亚洲欧美在线观看| 超碰人人在线| 五月综合缴情网| 大香蕉综合在线| 亚洲精品V天堂中文字幕| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 久久久精品人妻| 欧美成人精品老美女噜噜噜| 热的五码久久精品| 伊人网啪啪| 丁香六月婷婷久久综合| 另类视频综合| 五月婷婷啪啪| 色欲五月婷婷| 亚洲色五月天是什么| 中文字幕AV网址| 成人午夜天| 亚洲天堂爱爱| 九九综合| 五月天天天色| 色深爱五月| 婷婷丁香六月综合激情站| 超级碰 久久9| 国产精品电| 婷婷五月天成人网| 色欲久久综合| 九九性爱网| 欧美成人网婷婷综合在线| 日本97在线| 亚洲午夜国产成人电影VA国产欧…| 99re思思热久久| 99精在线| 成人丁香五月天| 五月丁香六月情婷婷久久| 他改变了拜占庭| 七七色色综合| 99免费在线视频| 日日操夜夜擼| 久久涩视频| 六月婷婷色综合| 99在线热| 综合久久9| 久99久99精品免| 这里有精品2| www好屌操| 婷婷五月天激情网址| 婷婷操超碰| 九九热在线视频观看免费10| 日韩成人无码片| 内射干少妇亚洲69XXX| 久热这里只有精品99re| 97碰| 99热精品在线播放| 久久伊人五月天| 激情综合99| 色99网站| 久久总和99| 99久久五月婷婷| 五月天久久丁香| 5月丁香六月情| xx综合网| 五月丁香花开综合网| 五月色丁香婷婷中文字幕| 亚洲激情淫网| 欧美天天性| 五月丁香婷婷伊人| 天堂草在线看www| 五月婷婷视频28| 国产精品A片| 色色免费网战视频| 色婷婷亚洲五月天| 色碰碰视频| 激情九月综合| 9久久精品| 午夜天堂一区人妻| 97午夜一区二区| 激情五月婷婷色色| 久草视频一,二三四| 色吧五月| 婷婷色日本| 婷婷综合五月激情| 人妻无码精品一区| 在线99热| AV成人在线网站| 欧美日韩欧美| 激情久久丁香| 一级片sese片.COM| 婷婷日日天天| 六月激情网| 日本99热| AV片在线观看| 最新av在线观看| 深爱五月月天| 激情综合丁香五月| 色五月激情| 欧美槡BBBB槡BBB少妇| 逼特逼在线免费播放| 欧美黄色一级| 人妻爽爽爽久久久久久久久| 丁香九月婷婷色| 久久综合五月天| 99久视频| 热久免费视频9| 97在线/亚洲| 亚洲色精彩| 婷婷五月久久| 97操在线视频| 亚洲天堂AV综合网| 婷婷丁香五月亚洲欧美| 99re鈥哸鈥唙| 色婷五月天| 欧美成综合在线观看| 日韩 中文 欧美| 干婷婷五月天| 色综合久久88色综合天天99| 亚洲精品一区中文字幕乱码| 久久久WWW| 一二三区视频韩国| 91碰| 亚洲色区17| site:xmssd.com| 99亚洲无码| 天天色播| 九月丁香八月婷婷久久综合久97| 久久久人妻不卡| 丁香五月婷婷激情蜜桃| 九九热AV| 激情丁香六月| 人。妻久久| 成人午夜天| 五月婷婷|欧美| 天天摸,天天爽| 五月天综合影院| 国产婷婷五月中文字幕高清| 99热碰碰| 操婷婷基地| 深爱五月激情综合| 猫咪伊人久久| 色日本颜射| 4399成人黄A片| 天天操夜夜橾| 中国无码av| 色色色色欧洲| 久久婷综合| www.ywav| 丁香五月亚洲婷婷| 国产精品久久久久久久久久| 九九热在线观看6| 五月婷婷六月丁香在线| 伊人大综合| 亚洲欧洲99| 色色99| 人人操超碰| 99热热九九| 久久久久亚洲AV成人无码电影| 碰人人97| 色99在线| 五月丁婷香| 99久在线精品99re5热视频| 午夜成人av在线| 爱草视频在线| 亚洲欧洲中文日韩久久AV乱码| 婷婷精品在线| 日本久久婷| 黑人熟妇一区二区三区| 狠狠色成人影片| 丁香八月综合激情| 另类激情五月天| 东京热五月婷婷| 精品一区二区三区四区五区六区介绍 | 97成人丁香| 91操操操| 免费视频在线观看的网站| 五月色婷婷在线观看| 涩综合网| 婷婷五月天激情小说| 中文AV在线观看| 天堂亚洲 在线| 五月天婷婷人妻| av大片在线| 丁香婷婷免费| 亚洲中字AV电影在线网站| 午夜免费试看| 狠狠五月天| 久久er视频6| 99热在线观看| 色五月涩涩婷婷蜜桃| 超碰AV在线| 天天综合亚洲综合网天天αⅴ| 99欧美| 国产日批视频免费播放| 欧美成人精品A片免费一区99| 91九色精品女同系列| 91婷婷在线| 玖玖在线视| 九九这里有精品| 999热这里只有美国精品| www.亚洲激情| 国内久久亭亭| 久久婷婷六月综合| 色青青五月| 夜夜嗨一区二区三区直播内容 | 日欧一片内射VA在线影院| 综合婷婷六月| 日韩成人不卡| 色色色婷婷| 久久久99视频| 性爱综合网| 亚洲射激情| 国产AV网页| 久久综合中文字幕| 婷婷五月综合婷婷| 九日日夜夜69| 天天爱天天做天天操| 91porn一起草| 另类天堂| 99在线亚洲| 色婷婷五月综合在线| 天天射影| 午夜成人片400| 91精品综合久久久久久五月丁香| -91九色大屁股| 九九AV在线| 国产日日夜夜操| 婷婷丁香六月天激情四射网| 五月婷婷六月丁香综合| caopeng97日韩| 热婷婷在线视频| 久久性视频| 五月视频日本免费观看| 九九色区| 亚洲A片成人无码久久精品青桔| 九九精品视频在线观看| www.色五月| 亚洲春色奇米影视| 99热免费精品| 久婷婷久草| 欧美性久| 91碰人人| 九九热九九| 激情五月丁香五月| 开心婷婷五| 日本高清不卡免费一区二区三区| 久久精彩视频| 另类小说色婷婷| 狠狠干2007| www.无码com| av国产精品| www.婷婷五月天.com| 激情五月婷婷欧美极品| 色情五月天。| 九九色插| 性做爰1一7伦| 色99视频| 狠狠五月激情丁香六月| 夜夜做夜夜愛| 五月丁香六月婷婷综合免| 六月丁香六月婷婷欧美| 综合五月激情| 色婷婷成人做爰A片免费看网站| 天天精品视频免费观看| 天天天摸夜夜夜玩| 这里只有精品视频在线观看免费| 超碰免费大香蕉| 综合六月久久| 久久视频在线视频| 丁香五月婷婷基地| 97人人搞| 五月综合无码| 天天操天天操| 六月婷婷视频| 无码色色色色色| 婷婷六月综合基地| 十二区无码| 在线观看免费视频| 五月天婷婷色色| 九色91视频| 五月婷婷片| 9这里只有精品| 亚洲激情 久久| 无码啪啪| 久热中文字幕| 996er热| 99色免费| 久久精品99久久久久久久久| 九九在线91| 香蕉网婷婷| 精品无码久久久久久久久| 激情丁香社区| 亚洲色碰| 九九香蕉网| 亚洲国产成人综合| caop在线| 99热这里都是精品| 久草性爱| w婷婷五月婷婷w| 开心久久xxx色| 五月天开心色情网| 成片免费播放| 天天搞夜夜六| 色五月婷婷成人视频| 丁香六月婷婷激情综合| 免费国产VA国产免费| 99久久66| 婷婷五月天成人动漫 | 亚洲视频1区| 中文字幕av久久爽| 免费超碰在线| 丁香婷婷超碰| 人妻久久久久| 久久综合热17c| 美女要搞搞天天搞搞搞网站| 99热这里有精品24| 五月天婷婷爱| 婷婷色片| 国产超碰在线| 九九碰九九爱97超碰| 可以免费观看的AV| 99欧美| 欧美色五月| 国产精品色| 天天干天天爽| 色yeye欧美| 99热99在线精品| 激情综合99| 色色色色综合网| 激情啪啪五月| 日本女天天爽| 国精产品久久| 亚洲五月丁香六月婷婷| 99色婷婷| 成人超碰网| WWW色色色COM| 色情丁香五月婷婷精品| xxxx五月激情| 自拍盗摄 另类| 午夜丁香综合婷婷| 色五月激情五月开心五月| 欧美肉大捧一进一出免费视频| 九九色婷| 激情久久久久久久久| www.超碰| 综合图区激情| 五月丁香欧美综合| 激情五月天影院| 精品国产一区二区三区四区阿崩 | 五月天网址在线刘玥| 激情超碰网| 五月丁香啪综合| 日本久久人人| A网在线欧洲| 极品另类| 最近免费中文字幕大全高清大全1| 五月激情婷婷偷拍| 六月丁香婷婷色狠狠久久| 九九久久五月天综合伊人| 免费视频99| 99免费在线视频| 九九中文色色| 激情五月天噢美| 这里只有精品视频在线看| 五月天天天天天天天天天天天婷婷婷| 久99| 久久多色| 五月婷婷久草在线视频综合| 婷婷丁香五月亚洲17cao| 国产成人片| www激情网站| 亚州欧美国产久精国产99综合视频| 综合久久人妻| 五月丁香啪啪综合| 91 九色 入口| 狠狠操.COM| www.99久久久| 久久九⑨| 久热这里只有精品视频6| 免费观看亚洲AV片| 97日日碰碰| 九九综合网色全集| 天天爽天天做| 久久视频在线视频| 91丨九色丨43老版熟女| 丁香桃色网| 激情婷婷丁香五月| 金桔一区二区ab地址| 久久人妻久久| 婷婷五月激情黄色| 久久国产性爱A V| 久久久久久97| 1024你懂的欧美曰韩| 婷五月丁香| 国产欧美第五十五页| 婷婷五月丁香香蕉| 秋霞少妇AV网站| 九九Av| 九九re精品视频在线观看| 玖玖99婷婷| 亚洲色爽| 色播五月丁香| 亚洲中文字幕av| 丁香婷婷视频在线| 欧美黄色一级| 婷婷五月天99| 日韩艹比| 五月天婷婷爱丁香中文字幕| 五月丁香六月婷婷啪啪| av在线观看网站| 日本九婷婷| 超碰在线资源| 婷婷五月色網站| 无码少妇高潮喷水A片免费| 99热成人永久免费| 婷婷色五月天在线| 五月婷婷黄色| 色婷婷久久久| 婷婷日本色| 久久一热| 五月开心啪啪| 九热视频| 亚洲人成网站999久久久综合| 色色哒五月婷婷六月丁香| 男人先锋久久| 丁香五月色五月婷婷宗合| 最新高清无码专区| 久久婷婷亚洲五月天| 欧美三级巜人妻互换| 五月天播播综合| 99热这里只有精品9| 成年AAAA色情| 丰满老熟妇BBBBB搡BBB| 久久五月婷综合网| A片试看120分钟做受图片| 五月婷婷成人w| 国产做爰视频免费播放| 精品人妻久久久久久久| 激情五月天网站| 26uuu亚洲色| 激情小说色五月| 激情久久综合网| 九九色精品| 在线综合婷婷| 日韩三级高清无码| www.99情趣网| 激情五月天啪啪| 99热精品在线播放| 色色影院aaaav| 国产偷人爽久久久久久老妇APP| 青青草深爱激情网| 欧美S码亚洲码精品M码| 婷婷五月天成人综合网| 任你干嘛免费视频播放| 97人人做| 六月丁香啪| 91丨九色丨首页| 五月天婷婷乱论小说| 欧美日韩成人在线观看| 色五月激情| 激情婷婷狠狠干| 日本久碰| 亚洲AV成人在线| 激情婷婷内射| 777精品久无码人妻蜜桃| 狠狠干五码| 第四色网婷婷| 六月激情综合| 亭亭五月天黑人2014| 婷婷色五月开心五月| 五月色婷| 激情婷婷丁香五月| 99热综合| 人妻激情视频| 最近免费中文字幕大全高清大全1| 天天操夜夜爱| 五月天丁香综合| 202丰满熟女妇大| 涩五月色婷婷| 欧美久热| www.久操| 青青草激情网| 天天色综网| 夜夜夜天天操| 任我肏视频精品| 99re热在线视频| 精品无码色欲AV| 天天综合色丁香| 一点色成人网| 91丨九色丨熟女丰满| 狠狠色情婷婷| 中美日韩成人在线| 婷婷丁香六月天激情四射网| 综合网五月| 怡红院视频| 五月婷婷六月丁| 99热99天堂| 乱岳熟女50岁| 激情五月丁香五月| 五月丁香六月婷婷激情视频在线观看免费 | 色综合中文色综合网| 无码人妻精品一区二区蜜桃色欲| 夜夜久久综合网| 丁香六月激情四射| 色婷婷AV久久| 欧美搡BBBBB摔BBBBB| 色九月婷婷丁香| 激情五月婷婷综合色播小说| 性爱网久久| 9久久精品视频| 亚洲精品又粗又大又爽A片| 亚洲另类在线观看| 五月婷婷综合在线| 日撸夜撸日操| 欧美又粗又大一区二区在线观看| 97碰碰在线看视频免费| 婷婷激情综合色五月久久91| 天堂无码人妻精品AV一区| 激情六月婷婷| www.五月丁香| 色五月婷婷丁香五月| 五月天六月天| 五月婷婷内射网| 影音先锋色婷婷| 人操人人| 亚洲天堂色| 色www久视频| 亚洲综合色婷婷| 久久精品婷婷| 激情綜合網址| 婷婷狠狠18禁久久| 久久a热| 五月婷婷自拍视频| 国产淫熟妇| 五月亭亭激情综合| WWW丁香五月| 色999;丁香五月| 婷婷97碰碰| 成人版视频在线观看| WWW.久久久久久久久久久久久| 噢美99| 精品爱欲五| 极品人妻VIDEOSSS人妻| 开心五月色婷婷综合开心网| 99色视频| 综合网色| 99精品免费| 亚洲视频一区| 成人做爰A片免费看视频| 丁香五月综合| 国产一级片| 亚洲久热| 久久综合激情| 色五月婷婷五月天| 中文字幕无码人妻少妇免费视频| 99热只有| www五月婷婷| 99久久超级| 色五月在线综合| 91男人资源站| 另类在线免费视频| 九九久99免费视频| 人操人人| 一级精品999WWW| 99精品免费欧美小视频 | 噜噜久| 激情五月天在线视频| 26UUU欧美| 思思 热 99| 国产亚洲精品久久一区二区三区| 在线观看欧美| 色色操| 国内外色色色色色成人视频| 丁香网五月天| 超碰自拍天堂| 久热中文字幕| 婷婷五月激情热播| 2020夜夜操天天爽| 这里只有精品视频在线看| 亚美欧色影院| 亚洲视频99| 超碰人人操在线| 婷婷另类小说| 免看黄大片AA | 色综合网页| 婷婷玖玖五月天| www九九热| 欧洲激情五月天| 婷婷久久综合久色| 久操综合| 白人荫道BBWBBB大荫道| 中文字幕操比影片| 超级碰碰碰97免费| 天天噜天天插| 激情五月综合六月丁香婷婷狠狠干| 五月丁香色狠狠干大屄| 国产精品久久久海的味道| 五月激情综合网| 九九热99免费视频| 国产毛片欧美毛片久久久| 五月婷婷黄网站大全| www.色九月| 欧美五月婷婷| 99精品网站| 免费AV在线| 亚洲综合激情五月久久| 91九色 熟| 婷婷五月色| 色丁香久久久| 婷婷丁香97| 亚洲精品久久久久久久久久吃药| 性爱人人网| 婷婷五月综合婷婷| 性色视频| www.婷婷五月| 色原狠狠综合| 伊人五月婷婷| 五月天婷婷激情综合| 日本啪啪网| 玖玖婷婷五月天| 六月婷婷青青青视频| 国产永久一二一起草| 26uuu欧美日本| 久热免费视频| 无码九九九九| 思思热再线视频| 日韩成人网址| 日韩AV在线免费| 婷丁五月| 9l视频自拍九色9l视频在线观看| 欧美日韩精品人妻狠狠躁免费视频| 精品99在线观看| 开心婷婷五月花| 人人操五月天| 97人人妻人人艹| 色六月丁香婷婷啪啪啪| 色婷婷狠狠| 色婷婷丁香A片区毛片区女人区| 97九色视频| 。久久久久久久久久久久久久人妻| 99久久婷婷国产综合精品草原| 人人摸人人干| 色99视| 亚洲日日日| 国产XXXX搡XXXXX搡麻豆| 欧美精品99| 亚洲五月停停| 色婷婷狠狠禁18久久| 电影蜘蛛女| 五月停亭六月,六月停亭的英语 | 五月色亚洲| 激情五月婷婷中文字幕| 99精品久久| 婷婷久久丁香五月| 午夜九九九九九九| 亚洲人妻一区二区 | 99热色精品| 久婷| 亚洲操逼片| 天堂在线伊久| 成人无码髙潮喷水A片| 色欲天天综合| 99久在线精品99re5热视频| 成人AV播放| 丁香五月天啪啪| 久久婷婷五月综合伊人| 噢美99| 99综合99| 乱精品一区字幕二区| 欧美情月伍月天| 综合色色网| 天天操中文字幕| 欧美中文五月天| 中文字幕欧美日韩VA免费视频| 另类在线| 91超级碰碰碰| 97视频久久| 婷婷激情视频| 丁香密臀AV激情网| 色五月激情综合| 99精品视频推荐| 亚洲色优| 激情五月天99色| 人人做天天爱| 九久热| 五月婷婷 激情五月| 国产99久| 色五月婷婷丁香五月| 婷婷五月天渟渟| 婷婷五月激情小说| 婷婷激情五月天小说| 狠狠人人婷婷| 99亚洲精美视频在线观看| 超碰国产在线观看| 久久久久久久久久91| 99热这里都是精品| 成人网站免费在线播放| 99在线国| 婷婷丁香精品视频在线观看| 精品99爱免费视频在线观看| 丁香五月婷婷免费视频| 在热视频精品| 久久国产AV| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 久久精品63| 婷婷五月天色色| 色五月综合婷婷久久综合婷婷久久综合婷婷久久综合婷婷久久 | 激情婷婷五月| 另类图片五月天激情| 五月丁香六月婷婷综合网站 | 五月色色激情网| 婷婷五月六月| 婷婷五月视屏| 婷婷久久性爱| 开心五月网 | 91爱操| www色婷婷久久综合久色| 女人高潮内射99精品| 婷婷丁香成人网址| 丁香婷婷激情四射五月| 丁香五月婷婷五月| 香蕉综合在线| 婷婷五月天av| 丁香五月在线观看完整版| 黄色片avv| 夜夜操天天爽| 免费在线观看av网站| 日本色久| 激情婷婷五月女| 狠狠爱综合网| 久久久精品色色色| 久久一伦| 五月在线| 99色在线观看视频| 婷婷五月天首页激情| 久久婷婷亚洲| 色香五月天| www.99免费视频| 东京热免费视频| 婷婷五月激情四月综合| 激情5月婷婷| 99操免费视频| 五月丁香六月日逼| 一区=区操屄高清大全av| 亚洲av综合网| 色婷婷六月精品| 亚洲国产网站| 91一起操| 婷婷射丁香| 深爱五月月天| 日本玖玖在线| 99这里都是精品6| 开心色播色五月婷婷| 天天肏天天舔AV| 99久久9| 九九在线免费观看| 亚洲精品在线视频| 亚洲色无码A片一区二区麻豆| 97人妻碰碰碰久久香蕉| 人人操A| 操久久网| 五月天伊人日日噜影片AV| 色色色在线观看| 五月天婷基地| 六月综和久久| 久久综合中文| 丁香婷婷五月色成人网站| 五月天婷五月天综合网在线观| 五月丁香啪啪| 另类A片| 亚洲最大在线| 国产成人AV在线| 色激情五月| 欧美操人| 少妇婷婷五月天| 日日射天天射| 黄色成人网站在线播放| 欧美精品99| 性爱久久| 欧美乱码国产一级A片| 99色日本| 狠狠干五月丁香| 五月婷婷手机在线| 天天操综合网| 思思热视频在线观看| 色婷婷丁香A片区毛片区女人区| 欧美黑人巨大性生话| 五月丁香婷婷老司机| 99激情| 五月色情| 欧美日韩国产一区| 色婷婷五月婷婷五月婷婷五月| 免费精品99| 香蕉人妻AV久久久久天天| 丁香婷婷性久久| 五月精品免费XXX| 五月丁香成人网| av久热| 色婷婷五月天亚洲| 欧美色久| 丁香花社区av| 婷婷亚洲五月丁香综合在线 | 色欲婷婷五月天丁香| 婷婷丁香五月亚洲| 国产午夜成人AV在线播放| 亚洲成人中文字幕| 免费色色色| 色99在线视频| 97干欧美| 91久久1118| 91精品久| 五月丁香婷婷激情在线视频| 99热这里只有精品免费| 777精品久无码人妻蜜桃| 99热在线观看| 人妻性爱av网站| 久操大香蕉| 丁香五月天天| 粉嫩av懂色av蜜臀av熟妇| 天天综合网亚洲综合网| 91 影音先锋| 玖玖热视频| 九九美女视频| 狠狠色丁香| 亚洲第一成人无码A片| 思思久久99热| 婷婷五月天亚洲天堂| 91日本在线观看| 91丨九色丨白浆| 久久久这里有精品| 丁香色色网| 狼人久草| 俺五月| 久久久九九九 99| 98色花堂98t.R| 26UUU成人网| 婷婷丁香五月视频| 热99re| 中文精品在| 深夜婷婷 丁香| 成人网丁香五月| 丁香婷婷天堂| 久久久大香蕉| 97丁香花五月天激情小说| 亚州第一黄网| 五月婷婷婷| 欧美97p| 另类综合激情| www.婷婷五月天| 另类激情五月在线视频欧美| 久碰综合| 亚洲天堂婷婷丁香| 亚卅毛片| 欧美性色五月天| 色九九七七| 婷婷五月丁香亚洲| 欧美人人操| 97超碰,人人舔,人人操,人人摸 | 色播婷婷五月天| 6月丁香婷婷| 98热精品| 久草热在线视频| 婷婷无码视频| 天天做天天爱天天日| 99热1| 婷婷五月丁香A∨| 超碰成人黄色网| 五月婷婷六月丁香综合在线| 99re热视频| 六月婷婷狠狠| 97艹| 九月丁香八月婷婷加勒比| 一区视频网站| 色色色色网| 午夜丁香六月婷| 五月天婷婷三级黄| 婷婷五月电影院| 久青操| 日韩美一级毛卡片| 九九在线91| 97碰精品| 色五月情| 丁香五月影院| 婷婷久久综合| 一月婷婷色色| 色欲色香综合网| 五月丁香综合精品| www.久久66| 天天做 天天爱| 六月丁香五月天| 丁香狠狠色婷婷久久无码视频| 射久久丁香五月| 久久偷拍综合五月天| 综合激情网| 五月丁香六月香综合激情| 五月中旬婷婷丁香六| 五月天激情无码高清| 久婷婷久草| 插插五月天| 天堂婷婷丁香六月网| 丁香六月天婷婷开心综合| 婷婷一本和五月丁香| 激情五月www| 99久久精品网| 天天做天天爽| 久久久久久久久99精品| 天天操夜夜肏| 天天插天天插天天插天天插| 牛牛碰免费| 99这里有精品视频| 99久久网站| 一本道在线电影| 色色色视频免费无码 | 九九热视频在线观看| www.9操| 久久五月天网| 五月婷成人网| 99爱精品| 欧美交换配乱吟粗大25P| 欧美精品狠狠色丁香婷婷| 久久伊人婷| 色婷婷影院| 丁香久久| 天天爽天天摸| 91色婷婷综合久久中文字幕二区| 七七久久综合| 色色综合无码| 999热在线视频| 五月天啪啪| 激情婷婷99| 日韩超碰在线| 五月丁香淫淫婷婷婷| 亚洲五月天激情| 碰碰碰97国产| 婷婷免费成人视频| 91精品国产91久久久久青草| 亚洲久热| 婷婷综合一二三| av免费人人| 五月婷婷激情五月| 91九色无码日韩 | 亚洲色图欧美色图日本视频| 婷婷香蕉| www.天天干| 婷婷五月激情视频网| 婷婷五月天影视网址| 亚洲婷婷激情综合激情999精品| 9色在线| 色五月丁香总合网| 99热日本| 婷婷综合网站| 婷婷丁香五月色| 91久久日日| 夜夜躁狠狠 | 97干在线免费| 婷婷天天综合| 国产毛片精品一区二区色欲黄A片 99国产在线精品视频 | 男人的天堂999| 99热精品免费| 99视频在线观看网址| se99高清无码| 色5月婷婷色| 91人人操.COM| 噜噜噜狠狠色综合| AV在线免费播放| 人妻AV在线| 另类激情五月天。| 婷婷狠狠操| 久久久久9999| 六月激情综合| 夜夜涩涩涩| 国产做爰视频免费播放| 五月丁香婷婷AV天堂| 日本欧美成人片AAAA| 天天撸夜夜爽| WWW色色色COM| 久久思思热视频| 色吊丝99| 丁香六月综合| 97干网站| 91狠狠综合久久久久久| 噜噜噜噜噜久| 少妇高潮呻吟A片免费看软件| 午夜爱爱爱成人| 三级黄色大片视频| 婷婷丁香综合| 久久一伦| 五月丁香激情婷婷| 丁香花五月天激情| 天天干天天干天天| 免费久久这里只有精品99| WWW色色色COM| 五月丁香六月婷婷网| 涩综合网| 日本天天操| 亚洲无码九九| 免费AV在线网址| 丁香五月天激情| 五月天 综合 在线| 色五月丁香A欧美com| 99这里只有免费的小视频在线观看| 五月天色色无码| 婷婷六月综合激情| 久月婷婷| 国产AV熟妇人震精品一品二区| 337午夜福利| 激情99| 99热这里只有精品8| 伊人五月成人| 亚洲综合另类| 精品婷婷| 丁香六月久| 久久99网站| 亚洲乱码日产精品BD| http://www.sd-xiangsu.com/| 操操国产| 五月天色小说| 久久色五月天| 激情另类综合| 人人操碰| 婷婷五月天综合网| 99热无码| 亚洲av综合网| 色色色色色色综合网| 亚洲免费观看高清完整版AV线| 五月丁香婷婷在线综合蜜桃| 婷婷影院A成人| 啪啪黄页网| 婷婷成人丁香色情基地30| 久久丝袜婷婷| 欧美 色婷婷|