欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

從訂單號精度丟失看跨語言類型轉(zhuǎn)換陷阱:一次“靈異”Bug的徹底排查

從訂單號精度丟失看跨語言類型轉(zhuǎn)換陷阱:一次“靈異”Bug的徹底排查 1. 先說背景這個 Bug 到底有多“靈異”1.1 項目場景一個很普通的訂單詳情頁上個月我負(fù)責(zé)的一個電商平臺訂單模塊出了個讓全組人頭疼的問題。業(yè)務(wù)本身非常簡單訂單列表頁展示訂單用戶點某一單前端拿訂單號去請求詳情接口后端返回詳情數(shù)據(jù)頁面渲染。就是最典型的 CRUD 鏈路沒有高并發(fā)、沒有分布式事務(wù)、沒有消息隊列日常流量也就每秒幾百。按理說這種模塊出 Bug定位起來分分鐘的事但這次硬是折騰了整整一周。訂單號用的是雪花 ID 生成的 19 位整數(shù)。為什么不用數(shù)據(jù)庫自增 ID因為系統(tǒng)有多個寫入節(jié)點為了全局唯一訂單號早就統(tǒng)一換成了雪花算法。這個細(xì)節(jié)當(dāng)時沒人當(dāng)回事畢竟項目已經(jīng)跑了大半年訂單模塊一直穩(wěn)如老狗。誰也沒想到最后讓整個團隊欲仙欲死的恰恰就是這個 19 位的訂單號。1.2 癥狀清單怎么復(fù)現(xiàn)都復(fù)現(xiàn)不了用戶反饋的問題是訂單詳情頁偶爾打不開頁面提示“訂單不存在或已刪除”。但詭異的是同一個訂單在后臺管理端能查到數(shù)據(jù)庫里記錄也完好無損。這意味著數(shù)據(jù)層面沒有丟是有別的東西把鏈路搞斷了。最讓人抓狂的是它的“靈異”特征無法穩(wěn)定復(fù)現(xiàn)。同樣的操作路徑有時候好、有時候壞。挑訂單。大多數(shù)訂單沒問題個別訂單必現(xiàn)但看起來沒有任何規(guī)律。環(huán)境和設(shè)備無關(guān)聯(lián)。iOS 和 Android 都有反饋瀏覽器也換過后端日志卻始終看不到異常。后端日志里查不到對應(yīng)的報錯請求。用戶說打不開但后端訪問日志里根本沒有對應(yīng)的訂單詳情請求記錄好像用戶的請求憑空消失了一樣。我當(dāng)時的情緒基本就是“bug 觀察員”附體每天上班第一件事就是翻工單、查日志、對比數(shù)據(jù)試圖從一堆看似正常的記錄里找出哪一環(huán)在作妖??上нB續(xù)查了兩天除了確認(rèn)數(shù)據(jù)沒丟、接口沒報錯之外毫無進(jìn)展。這種“數(shù)據(jù)都在就是鏈路不通”的現(xiàn)象其實是很典型的類型轉(zhuǎn)換或者精度丟問題在作怪。但當(dāng)時誰也沒往這個方向想因為訂單號用肉眼看前端和后端顯示的一模一樣。2. 一周排查全記錄我到底經(jīng)歷了什么2.1 第一階段懷疑數(shù)據(jù)本身排查的第一步永遠(yuǎn)是確認(rèn)數(shù)據(jù)對不對。我們拉出了用戶反饋的那幾個訂單號去數(shù)據(jù)庫里查記錄全都在狀態(tài)字段、金額字段、創(chuàng)建時間全部正常。然后直接拿這些訂單號調(diào)接口又全部返回正常。這時候最容易產(chǎn)生誤判既然接口直接調(diào)用沒問題那問題大概率出在用戶側(cè)的入?yún)⑸?。于是我們開始懷疑是不是某些訂單在生成時寫入了特殊字符比如全角空格、不可見字符、或者在訂單號前面加了什么前綴。這類臟數(shù)據(jù)我見過不少于是專門寫了個腳本去掃訂單表把所有訂單號的長度、字符集、前后空格查了一遍。結(jié)果很打臉。訂單號格式完全正常長度固定 19 位純數(shù)字沒有任何隱藏字符。數(shù)據(jù)庫層面干干凈凈。這個方向排除了。但這里有個細(xì)節(jié)我當(dāng)時忽略了我通過數(shù)據(jù)庫查到的訂單號和用戶在前端實際拿到的訂單號真的是一回事嗎這是后來才想通的關(guān)鍵點。2.2 第二階段懷疑并發(fā)和緩存數(shù)據(jù)沒問題那就換方向。訂單詳情頁是前端先調(diào)一個列表接口拿訂單號再拿這個訂單號去調(diào)詳情接口。如果列表接口和詳情接口之間出了問題比如列表返回的訂單號被緩存污染、或者被并發(fā)線程覆蓋了也會出現(xiàn)“明明訂單存在但詳情查不到”的現(xiàn)象。于是我們把火力集中在緩存上。訂單模塊確實接了一層 Redis 緩存列表接口做了緩存詳情接口也做了緩存。我當(dāng)時的假設(shè)是列表緩存里某個訂單號寫壞了或者緩存 key 沖突導(dǎo)致返回了別的訂單的 ID。這種問題以前也不是沒遇到過。排查方式很簡單粗暴把相關(guān)緩存全部清掉讓用戶再試。結(jié)果用戶反饋還是偶發(fā)打不開。緩存清掉之后問題依舊說明緩存不是根因。排除了并發(fā)和緩存之后我把目光轉(zhuǎn)向了接口參數(shù)傳遞鏈路也就是前端請求詳情接口時那個訂單號到底是怎么傳過去的。這一步才是整個排查的轉(zhuǎn)折點。2.3 第三階段懷疑框架和依賴緩存排除后誕生了一個更玄學(xué)的猜想會不會是某個依賴庫的 Bug這個想法一旦冒出來就收不住了。因為我們的前端詳情頁用了好幾個第三方組件后端接口用的是統(tǒng)一封裝的基礎(chǔ)框架中間還有一層網(wǎng)關(guān)。如果網(wǎng)關(guān)里對參數(shù)做了某種轉(zhuǎn)換或者 JS 框架在路由跳轉(zhuǎn)時對 query 參數(shù)做了處理訂單號就可能被改寫。于是我干了一件看起來很傻但非常有價值的事給前端代碼加日志把列表接口拿到的原始數(shù)據(jù)、存到 store 里的數(shù)據(jù)、以及詳情請求 URL 上的參數(shù)全部原樣打出來。后端也加了臨時日志把每次請求收到的 orderId 參數(shù)原樣記錄下來。兩端日志一對比真相基本上就擺在眼前了。前端從列表接口拿到的原始訂單號是7222063723784590123但詳情請求 URL 上帶的訂單號變成了7222063723784590100。兩者肉眼看著非常接近不逐個數(shù)字對比根本發(fā)現(xiàn)不了但它們的后四位確實不一樣了。那一刻我和前端同事對視一眼心里同時冒出一個詞精度丟失。2.4 轉(zhuǎn)折點一次全鏈路參數(shù)對比定位到參數(shù)被改寫之后剩下的問題就是誰改的在哪一步改的前端日志顯示列表接口響應(yīng)的原始 JSON 拿到的就已經(jīng)是7222063723784590100了。也就是說問題根本不在路由、不在 store、不在請求封裝而是在數(shù)據(jù)從后端進(jìn)入前端的那一刻數(shù)字就已經(jīng)被污染了。驗證方法也非常簡單。我打開瀏覽器控制臺手動輸入7222063723784590123回車??刂婆_直接返回了7222063723784590100。就這么一句代碼困擾我們一周的“靈異 Bug”現(xiàn)出了原形。JavaScript 里的 Number 類型根本表示不了這么大的整數(shù)。這個訂單號超過了Number.MAX_SAFE_INTEGER也就是 2 的 53 次方減 1等于 9007199254740991。任何超過這個范圍的整數(shù)在 JS 里都會發(fā)生精度丟失低位被四舍五入成 0。后端返回的是 Java 的 Long 類型JSON 序列化后是數(shù)字字面量前端解析 JSON 時JavaScript 引擎自動把超出安全范圍的數(shù)字近似轉(zhuǎn)換了。從 Java 的 Long 到 JavaScript 的 Number這就是一次隱式的類型轉(zhuǎn)換。它沒有語法報錯沒有運行時異常只有靜默的精度損失。3. 真相問題出在一個“不起眼的類型轉(zhuǎn)換”上3.1 從現(xiàn)象到原理JS 的 Number 和 2^53JavaScript 只有一種數(shù)字類型就是 Number它底層基于 IEEE 754 標(biāo)準(zhǔn)的雙精度浮點數(shù)存儲。雙精度浮點數(shù)用 64 位存儲其中 1 位符號位、11 位指數(shù)位、52 位尾數(shù)位。這個結(jié)構(gòu)意味著它能夠精確表示的整數(shù)范圍是有限制的。IEEE 754 雙精度浮點數(shù)可以精確表示從-2^53 1到2^53 - 1之間的所有整數(shù)這個范圍之外就無法保證精確了。為什么不是 2 的 64 次方因為 52 位尾數(shù)只能精確表達(dá) 52 位精度的整數(shù)加上隱含位有效精度正好是 53 位。2 的 53 次方等于 9007199254740992而最大安全整數(shù)是 9007199254740991JS 里直接提供了常量Number.MAX_SAFE_INTEGER來標(biāo)記這個值。當(dāng) JSON 數(shù)字超過這個范圍時JavaScript 引擎在解析階段就已經(jīng)丟精度了你的代碼里根本沒機會拿到原始值。這就像用一個只能裝 5 位數(shù)的容器去接一個 19 位數(shù)的水管接出來的水少了多少容器自己是不知道的。我舉個例子方便理解假設(shè)「前端數(shù)字」是一個只能放 4 位數(shù)的密碼鎖后端 Long 是一個能放 8 位數(shù)的保險柜鑰匙號。鑰匙號12345678塞進(jìn) 4 位鎖鎖自動只記前 4 位1234密碼永遠(yuǎn)對不上。這個自動截斷就是“類型轉(zhuǎn)換”干的壞事。我們系統(tǒng)的訂單號是雪花 ID它的結(jié)構(gòu)是 1 位符號位 41 位時間戳 10 位機器 ID 12 位序列號。正常情況下 41 位時間戳在 2024 年大概相當(dāng)于 42 億毫秒左右加上機器 ID 和序列號整體確實會超出 JS 的安全整數(shù)范圍。而且雪花 ID 生成時時間戳越高、機器位越靠后生成的數(shù)字越大。所以低并發(fā)、早期生成的訂單號可能還在安全范圍內(nèi)高并發(fā)、后期生成的訂單號就超了。這也解釋了為什么問題只挑特定訂單出現(xiàn)而且看起來毫無規(guī)律。實際上規(guī)律一直存在出現(xiàn)問題的訂單是那些二進(jìn)制表示中低位不是全 0 的大整數(shù)。換句話說低位數(shù)字越容易被“吞掉”癥狀越明顯。3.2 為什么它騙過了所有人現(xiàn)在復(fù)盤這個 Bug 為什么能活活熬我們一周隱蔽性主要來自以下三點。第一肉眼無法察覺。7222063723784590123和7222063723784590100放在界面上看幾乎一模一樣。用戶不會去數(shù)后四位后端日志里又是正確的原始值兩邊數(shù)據(jù)一對比唯一看到的差異是“詳情請求根本沒到達(dá)后端”于是先入為主地認(rèn)為是前端或網(wǎng)關(guān)丟了請求。方向上就偏了。第二它是靜默轉(zhuǎn)換。類型轉(zhuǎn)換在 Java 里通常都有明確的寫法比如(int) longValue或者Integer.parseInt(str)。但在跨語言場景下JSON 序列化和反序列化過程中數(shù)字類型的精度損失是完全靜默的。沒有編譯器告警沒有運行時異常沒有錯誤日志。開發(fā)者在正常開發(fā)時根本感知不到。第三它在“進(jìn)入前端的第一毫秒”就已經(jīng)發(fā)生了。凡是在業(yè)務(wù)邏輯、網(wǎng)絡(luò)層、路由層排查的人看到的都是已經(jīng)被污染的值。好比快遞在發(fā)貨地就被換成了假貨消費者在收貨地拆包裹時發(fā)現(xiàn)不對但檢查運輸路徑、清點配送員全部正常因為問題出在裝箱那一刻。這種“轉(zhuǎn)換發(fā)生在鏈路最前端”的特點導(dǎo)致所有依賴“訂單號一致性”的排查手段全部失效。比如我們想通過訂單號去關(guān)聯(lián)后端日志結(jié)果前端發(fā)出的訂單號已經(jīng)被改寫了后端根本查不到這條日志直接形成了一個排查盲區(qū)。3.3 修復(fù)方案三種做法對比定位到根因之后修復(fù)本身并不復(fù)雜但選哪種方案需要根據(jù)項目情況權(quán)衡。我知道的常見做法有三種。第一種后端把 Long 類型的訂單號在 JSON 序列化時轉(zhuǎn)成字符串。這是最直接、最穩(wěn)妥的方案也是目前行業(yè)里最通用的做法。Java 端用 Jackson 的話可以在訂單號字段上加JsonSerialize(using ToStringSerializer.class)或者在全局配置里注冊一個 Long 轉(zhuǎn) String 的序列化器。前端拿到的是字符串7222063723784590123JS 不會對它做任何數(shù)字精度轉(zhuǎn)換原樣傳遞、原樣使用。缺點也很明顯前端所有取訂單號的邏輯都要改成字符串處理如果以前有加減法、比較運算的地方要注意字符串的比較和數(shù)字的比較不一樣。第二種前端引入BigInt類型處理數(shù)字。ES2020 之后JavaScript 原生支持了大整數(shù)類型BigInt可以在解析 JSON 時對超大數(shù)字做特殊處理或者用parseInt之類的函數(shù)在中間層把它轉(zhuǎn)成 BigInt。但問題在于JSON.parse 在解析階段就已經(jīng)丟精度了你必須在解析之前攔截原始文本手動把大數(shù)字處理掉這就非常麻煩。實際項目中很少直接在全部鏈路用 BigInt因為瀏覽器兼容性、第三方庫兼容性都是額外成本。第三種后端把訂單號改成字符串類型存儲。這個能做但屬于傷筋動骨的改動不是緊急修復(fù)的首選。它適合在系統(tǒng)重構(gòu)時一并考慮為了一個 Bug 把訂單號字段從 Long 改成 String影響面太大容易引發(fā)其他回歸問題。我們當(dāng)時的處理是緊急先在訂單號字段加JsonSerialize(using ToStringSerializer.class)同時前端補了對字符串訂單號的兼容邏輯。修完之后讓產(chǎn)品在出現(xiàn)問題的那些訂單上逐一驗證全部恢復(fù)正常。后續(xù)版本里我們又統(tǒng)一梳理了所有對外返回的 Long 類型 ID凡是會被前端消費的一律轉(zhuǎn)字符串杜絕同類隱患。4. 類型轉(zhuǎn)換陷阱大盤點這一類 Bug 的常見形態(tài)4.1 JavaScript 雙等號的“精神污染”這次事故之后我把團隊代碼里所有和類型轉(zhuǎn)換相關(guān)的隱患都翻了一遍發(fā)現(xiàn)這類問題遠(yuǎn)比我們想象得多。最容易踩的坑首推 JavaScript 的雙等號隱式轉(zhuǎn)換。在 JS 里會在比較之前對操作數(shù)做類型轉(zhuǎn)換。舉個例子0 false的結(jié)果是true。原因是先用 Number() 把字符串轉(zhuǎn)成數(shù)字0變成0false也變成0兩邊相等。類似的還有1 true等于truenull undefined等于true。很多業(yè)務(wù) Bug 就是在這種“看起來合理”的隱式轉(zhuǎn)換里埋下的。尤其值得警惕的是“字符串 false”的梗。如果你從前端接口拿到的是字符串false然后寫if (flag false)結(jié)果會是什么答案是你永遠(yuǎn)進(jìn)不去這個分支因為false是非空字符串隱式轉(zhuǎn)成布爾值是truetrue false顯然不成立。但代碼又不會報錯邏輯悄悄跑偏Bug 出現(xiàn)得毫無預(yù)兆。我個人的建議是前端業(yè)務(wù)代碼一律用嚴(yán)格全等不要用。對布爾值的判斷直接寫if (flag)不要和true/false做比較除非你確定來源必然是真布爾類型。如果您用到Number()、String()、parseInt()這些顯式轉(zhuǎn)換函數(shù)也要明確傳基數(shù)參數(shù)比如parseInt(08, 10)否則老瀏覽器可能把08當(dāng)成八進(jìn)制處理解析出 0 這種離譜結(jié)果。4.2 跨語言邊界的 64 位整數(shù)除了 Java 后端到 JS 前端跨語言邊界的 64 位整數(shù)問題在很多場景都會出現(xiàn)。比如 Python 后端提供的 APIPython 的int是任意精度的幾千位的整數(shù)都能表示。一旦通過 JSON 傳給 JavaScript同樣會觸發(fā)2^53的精度限制。還有 Go 的int64、C# 的long、C 的int64_t凡是超過 9007199254740991傳到瀏覽器端全都得小心。這個問題的本質(zhì)是“JSON 協(xié)議本身沒有區(qū)分整數(shù)和浮點數(shù)更沒有區(qū)分 int32 和 int64它只是把數(shù)字序列化成一個十進(jìn)制的字面量”。而消費端語言用什么類型接收完全由運行環(huán)境自行決定。JavaScript 選擇用統(tǒng)一的 Number 類型接收精度必然受損。只要前端還要消費大整數(shù)就必須約定“大整數(shù)一律用字符串傳輸”或者在協(xié)議層面引入 String 字段。還有一個容易被忽視的場景是數(shù)據(jù)庫主鍵。很多團隊為了省事數(shù)據(jù)庫主鍵用 bigintORM 映射成 Java 的 Long再原樣返回給前端。一旦主鍵超過安全范圍前端用這個主鍵做編輯、刪除操作時提交的 ID 就已經(jīng)錯了。輕則請求失敗重則產(chǎn)生串?dāng)?shù)據(jù)的數(shù)據(jù)臟寫問題。所以現(xiàn)在不少公司的新規(guī)范里對外接口一律禁止把 bigint 主鍵直接返回給前端必須轉(zhuǎn)字符串。4.3 數(shù)據(jù)庫隱式轉(zhuǎn)換索引失效的隱形殺手類型轉(zhuǎn)換的坑不只存在于編程語言之間數(shù)據(jù)庫里同樣有。最典型的案例是 MySQL 里字符串字段和數(shù)字常量做比較。假設(shè)某張表的user_id字段是 varchar 類型你在 SQL 里寫WHERE user_id 123456MySQL 會對字段做隱式轉(zhuǎn)換把字符串列轉(zhuǎn)成數(shù)字再比較。這會導(dǎo)致索引失效全表掃描查詢性能斷崖式下降。更嚴(yán)重的是隱式轉(zhuǎn)換可能導(dǎo)致結(jié)果錯誤。比如user_id里有一條記錄是0123456轉(zhuǎn)成數(shù)字后變成123456和WHERE user_id 123456的條件一匹配本來不該命中的記錄也被查出來了。這屬于數(shù)據(jù)安全級別的 Bug根本不是性能問題。排查這類問題最直接的方法是對查詢字段顯式轉(zhuǎn)換WHERE CAST(user_id AS UNSIGNED) 123456但更好的辦法是確保字段類型和查詢條件類型一致把字符串字段加上引號WHERE user_id 123456。字符串字段就按字符串查數(shù)字字段就按數(shù)字查不要在設(shè)計表結(jié)構(gòu)的時候圖省事埋雷。4.4 后端語言里的隱蔽轉(zhuǎn)換后端語言內(nèi)部也有不少隱蔽的類型轉(zhuǎn)換陷阱。Java 里的字符串拼接就是重災(zāi)區(qū)result: value這段代碼如果 value 是 null得到的是字符串null而不是空串肉眼不容易發(fā)現(xiàn)但對賬、拼接文件時就出問題。Java 還有一個經(jīng)典問題Long和long之間做比較時如果是包裝類型的Long緩存范圍內(nèi)的值-128 到 127會返回 true超出這個范圍就變成 false因為比較的是對象引用而非數(shù)值。這種 Bug 在新手代碼里非常常見解決方式是統(tǒng)一用.equals()或者把包裝類型拆箱成基本類型再比較。Python 里也有一個著名的大坑bool是int的子類。這意味著True 1的結(jié)果是2甚至isinstance(True, int)的結(jié)果是 True。如果你寫了一段代碼輸入里混入了True而不是1某些運算的表現(xiàn)會出乎意料。比如sum([True, False, True])結(jié)果是2看起來莫名奇妙但原理就是類型體系上的“繼承”導(dǎo)致的隱式轉(zhuǎn)換。C 和 C 里的隱式類型轉(zhuǎn)換更容易出安全問題。整數(shù)提升、無符號數(shù)和有符號數(shù)的比較、窄化轉(zhuǎn)換都在悄悄改變數(shù)據(jù)的含義。一個unsigned int和一個int比較編譯器會先把有符號數(shù)轉(zhuǎn)成無符號數(shù)如果你拿-1和一個unsigned int比較會得到一個巨大的正數(shù)邏輯直接翻轉(zhuǎn)。這類 Bug 在嵌入式、網(wǎng)絡(luò)協(xié)議處理中非常致命。4.5 時間與時區(qū)另一種“類型轉(zhuǎn)換”時間問題本質(zhì)上也可以歸類為類型轉(zhuǎn)換。同一個時間點在不同時區(qū)、不同格式、不同精度下顯示出來的字符串完全不同。一個 UTC 時間戳用毫秒還是秒存儲就差了 1000 倍。分布式系統(tǒng)里兩個服務(wù)一個用秒級時間戳、一個用毫秒級時間戳對賬、統(tǒng)計時就很容易出現(xiàn)莫名其妙的差值。我見過最經(jīng)典的案例是前端傳一個2024-06-01 12:00:00字符串給后端后端用DateTimeFormatter解析時沒有指定時區(qū)默認(rèn)用了服務(wù)器所在時區(qū)最終落庫的時間偏移了 8 個小時。表面看是時區(qū)問題本質(zhì)上是字符串到時間對象的“類型轉(zhuǎn)換”沒有按預(yù)期語義執(zhí)行。這類問題沒有銀彈只能靠規(guī)范約束對外統(tǒng)一用 ISO 8601 格式字符串或者毫秒時間戳并且在每個轉(zhuǎn)換入口明確時區(qū)參數(shù)不要依賴系統(tǒng)默認(rèn)值。凡是跨服務(wù)、跨端的時間傳遞都建議在字段命名里帶上時區(qū)后綴比如createdAtUtc、expireAtLocal讓轉(zhuǎn)換語義一目了然。5. 踩坑之后我的 Bug 排查方法論5.1 破除“靈異”心理Bug 一定有規(guī)律這一周的排查讓我最深刻的體會是不要輕易給 Bug 下“靈異”的定義。任何 Bug 都是由確定的原因觸發(fā)的哪怕表象再隨機也一定存在某種我們尚未識別的觸發(fā)條件。所謂“偶現(xiàn)”“環(huán)境相關(guān)”“必現(xiàn)但無規(guī)律”本質(zhì)上是觸發(fā)條件還沒有被找到而不是觸發(fā)條件不存在。一旦團隊里的工程師開始說“這 Bug 是玄學(xué)”排查效率就會斷崖式下降因為每個人都開始做無方向的嘗試。正確的做法是先把“靈異”翻譯成“未知規(guī)律”然后集中精力去收集觸發(fā)條件哪些數(shù)據(jù)是壞的哪個時間點出的問題哪臺設(shè)備復(fù)現(xiàn)了前后參數(shù)差在哪里把這些信息收集齊了規(guī)律自然浮現(xiàn)。打破“靈異感”最有效的技術(shù)手段就是全鏈路日志。前端把入?yún)?、出參、狀態(tài)全打出來后端把所有入口請求和響應(yīng)全打出來網(wǎng)關(guān)注入鏈路追蹤 ID讓同一個請求的所有日志可以通過一個 ID 串聯(lián)。這次能定位到精度問題就是因為前后端日志落到了一起逐行對比瞬間找到差異。5.2 三個高效的定位技巧我知道很多同行遇到疑難 Bug 時最容易犯的錯誤是不停地在腦海里構(gòu)造假設(shè)然后一遍一遍測試假設(shè)。這個思路沒錯但效率太低。我現(xiàn)在的做法是先做三件事。第一找到“最近一次正?!焙汀暗谝淮萎惓!钡臅r間點做變更比對。很多時候 Bug 不是突然出現(xiàn)的而是某次上線、某個配置變更、某段代碼提交之后才引入的。Git 提交歷史、發(fā)布記錄就是天然的排查線索。第二盯住鏈路的“邊界”。絕大多數(shù)隱蔽 Bug 都發(fā)生在模塊與模塊之間、語言與語言之間、系統(tǒng)與系統(tǒng)之間。這個訂單號問題發(fā)生在 JSON 序列化邊界時間問題發(fā)生在服務(wù)邊界精度問題發(fā)生在語言邊界。把這些邊界單獨拎出來做輸入輸出對比很快就能發(fā)現(xiàn)數(shù)據(jù)在哪里“變了形”。第三復(fù)現(xiàn)不了的時候就去造一個最小可復(fù)現(xiàn)用例。這個思路尤其在類型轉(zhuǎn)換問題上特別好用。一旦你猜某個數(shù)字、某個表達(dá)式可能有問題就把它從整個業(yè)務(wù)鏈路里剝出來單獨寫幾行代碼驗證。比如這次一句console.log(7222063723784590123)就完成了復(fù)現(xiàn)比反復(fù)操作頁面高效得多。5.3 防守型編碼清單經(jīng)驗都是在踩坑之后長出來的。這次之后我給自己整理了一份“防守型編碼清單”寫代碼的時候照著過一遍能擋掉不少同類問題。這份清單的核心內(nèi)容包括凡是超過 2^53 的整數(shù)一律不要直接暴露給前端改用字符串傳遞。JSON 序列化器統(tǒng)一配置 Long 類型轉(zhuǎn) String不讓蛛絲馬跡漏到接口之外。代碼中禁止使用統(tǒng)一使用和嚴(yán)格類型判斷。對布爾值判斷只寫if (flag)或if (!flag)不要和true、false字面量比較。任何parseInt都帶基數(shù)參數(shù)不依賴默認(rèn)行為。數(shù)據(jù)庫字段類型不和查詢值類型混用varchar 字段查詢時一定加引號。時間傳遞統(tǒng)一用 UTC 或帶時區(qū)信息絕不在服務(wù)內(nèi)部依賴服務(wù)器默認(rèn)時區(qū)。所有跨語言、跨服務(wù)的數(shù)據(jù)傳遞先確認(rèn)數(shù)據(jù)長度、精度、取值范圍在接收端是可表達(dá)的。這個清單不是一次寫完的每次遇到新問題就往里加一條現(xiàn)在已經(jīng)積累了幾十項。它們不能杜絕所有 Bug但能擋住至少 80% 的“不起眼的類型轉(zhuǎn)換”類問題。5.4 工具與日志的復(fù)盤建議最后聊聊工具層面的建議。這類隱蔽 Bug 的排查非常依賴日志和可觀測性。我強烈建議團隊在項目里把鏈路追蹤做成標(biāo)配任何一次跨服務(wù)、跨前端的請求都要有唯一 trace ID并且前端也能把 trace ID 透傳到后端。這樣排查時拿著 trace ID 就能把整條鏈路的日志拉出來而不是靠用戶描述“打不開”去猜。日志內(nèi)容上入?yún)⒑统鰠⒈仨毴坑涗浀⒁饷舾袛?shù)據(jù)脫敏。尤其是和時間、數(shù)值、ID 相關(guān)的字段日志里不要只記錄格式化后的展示值最好把原始值也打出來。像這次的訂單號如果后端日志里打的是經(jīng)過去格式化處理的字符串或者前端只打了頁面展示值而不打原始接口值差異就不會被發(fā)現(xiàn)。還有一個有價值的習(xí)慣每次疑難 Bug 修完之后寫一篇復(fù)盤文檔把問題現(xiàn)象、排查過程、根因、修復(fù)方案、如何從源頭規(guī)避全部記錄清楚。這個問題看似浪費時間但下次再遇到類似問題時它的價值會成倍放大。團隊里新人也通過復(fù)盤文檔快速積累經(jīng)驗不用每一個人都從零踩一遍坑。我在實際排查過程中另一個體會很深的點當(dāng)發(fā)現(xiàn)后端日志里根本沒有對應(yīng)的請求記錄時不要立刻認(rèn)定是“請求沒發(fā)出去”而應(yīng)該懷疑“請求發(fā)出去了但參數(shù)已經(jīng)變了導(dǎo)致后端路由或過濾條件沒匹配上”。這次就直接指向了前端參數(shù)被污染的問題。很多看似“前后端斷層”的 Bug其實都出在參數(shù)在鏈路中被悄悄改寫的場景而類型轉(zhuǎn)換就是最安靜的改寫者。訂單號的問題修完之后我又把系統(tǒng)里所有 19 位的 ID 字段逐個排查了一遍順手換掉了三處隱患。那個“靈異”的夜晚結(jié)束后我養(yǎng)成了一個新習(xí)慣任何傳到前端的整數(shù)我都會先問一句它會不會超過 9007199254740991這個問題看起來簡單卻替我擋掉了很多進(jìn) Bug 單的機會。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲综合字幕色色| 五月天网站免费欧美| 五月婷婷久草| 丁香五月天激情视频| 五月丁香婷中文字幕| 丁香久久九九99| 狠狠狠狠狠| 久久婷婷五月综合伊人| 亚洲天天免费| 色婷婷99| 五月天丁香婷| 久久天堂女人| 色婷婷中文| 丁香色六月婷婷| 这里只有免费的精品| 91视频免费后入强操| 丁香久久| www.婷婷五月| 五月婷在线观看| 五月丁香欧美| 婷婷综合五月激情| 《诡秘之主》在线观看| 色婷婷777狠狠| 亚洲V国产V欧美V久久久久久| 97碰碰视频| 天天色综合色| 五月丁香综合激情在线观看| 九九热99免费视频| www.婷婷com| 8区视频在线| 五月丁香狠狠地噜噜噜噜| 色综合中文色综合网| 玖玖婷婷五月天毛片| 婷婷色六月| 丁香五月婷婷基地| 婷婷五月天国产在线播放| 日操五月婷| 97人凄人人操人人爽| 久久人人添人人爽添人人片αV| 热99这就是精品视频| 激情六月天婷婷| 69激情小说| 日本精品在线噜噜噜| 亚洲一区二区 成人网站戴套| 亚洲色久| 国产69久久久欧美黑人A片| 亚洲综合久| 欧美激情VA永久在线播放| 丁香六月婷婷高清| 99热青青草原| 五月丁香激情六月| 国产婷婷五月在线视频| 久久99热在线观看| 思思热在线观看| 婷婷五月天六点丁香五月| 日韩三级片一区二区| 婷婷五月天堂| 99在线er热| 久九色| 91久久精品无码一区二区三区| 青柠影视免费高清电视剧| 亚洲综合色婷婷| 91碰超| 五月丁香六月婷婷开心网| 99热99精品在线观看| 久久狠狠高潮亚洲精品 天天摸夜夜摸夜夜狠狠摸 | 天天日天天爽| 图片区 小说区 区 亚洲五月| 亚洲激情综合网| z色五月播播久久| 99视频只有这里精品| 午夜爱爱爱成人| 免费精品66| 青青夜夜狠狠夜夜狠狠| 五月天婷婷导航| 五月天激情在线视频| 六月欧美综合色情| 婷婷五月天日本无码| 狠狠干思思热| 色狠狠999综合| 九九热免费视频| 超碰99久久| 日韩成人中文字幕| 天天色情站| 七七婷婷综合| 日日噜噜久久婷婷五月天| 五月天大香蕉AV| 婷婷五月天情色| 99干日本| 千人斩操逼| 六月丁香射婷婷欧美色图片| 婷婷五月天成人影片| 亚洲天码视频www蛋播视频| 九九99视频| 免费亚洲婷婷| 丁香九月婷婷| 狠狠综合久久综合| 综合亚洲六月婷婷在线| av免费人人| 久色婷婷200| 五月色丁香| 狠狠五月天| 国产精品久久久久久久久久免费| 国产精品人妻在线网址| 激情五月综合免费| 99视频网址| 亚洲精品午夜国产va久久成人| 最近中文字幕在线中文视频| 婷婷六月综合基地| 亚洲色五月天是什么| 色五月婷婷丁香五月| 五月天久久网站| 色五月综合| 性爱激情久久| 中文字幕+乱码+中文字幕在线观看| 国产精品色色色色| www超碰| 国产成人精品一区二区三区视频| 1024操逼视频| 日韩av网址大全| 九热免费视频| 色婷婷丁香AV综合| 狠狠五月天婷婷| 欧美激情VA永久在线播放| 婷婷另类小说| 伊人久久大香蕉网| 天天插综合| 色五月天婷婷| 999激情视频| 人人干人人操人人摸人人做| 国产亚洲99久久精品| www.91五月| 99热99色| 99碰碰视频| 激情网 久久| 毛片新网地| 五月婷婷丁香六月在线| 天天操夜夜操| aa久久| 99热这里只有精品最新地址获取| 农村熟妇高潮精品A片| 六月婷婷啪啪| 五月婷婷之综合激情| www.夜夜操.com| 久久一伦| 婷婷综合色五月天| 99天堂在线观看免费视频| 91一起操| 日韩久久视频| 久久免费操| 色五月视频,小说| 天天干天天干天天干天天干天天干| 久久丁香网| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 天天草女人| 91九色国产| 思思热久久久在线| 激情婷婷激情在线不卡| site:ornaments52.com| 色狠狠色噜噜AV天堂五区| 欧美婷婷日本| 日日综合网| 成人av观看| 五月天另类小说久久小说网| 色色色激情网| 久久丁香五月婷婷| 婷婷久综合| 六月婷婷色五月| 国产一级片| 99丁香五月婷| 99在线精品视频| 99ri视频在线观看| 亚洲va在线∨a天堂va欧美va| 亚洲亚洲人成综合网络| 久久99色色| 伊人激情| 亚洲另类久久| 极品五月天| 丁香婷婷成人在线播放| 五月婷婷 自拍| 久久机热这里只有精品| 热996精品在线观看| 日韩av网址大全| 久久人妻精品| 婷婷五月丁香六月伊人网| 99惹在线精品免费观看| 色色婷婷五月天| 欧美天天草人人草| 天天爽人人综合免费7799| 丁香色五月直播| 综合网色| 操国产人妻| 欧美在线视频99| 午夜一区| 99精品在线播放| 丁香六月婷婷激情综合| 欧美日韩欧美| 99在这里有精品| 五月丁香日逼| 天天操B| 五月天堂婷婷| 欧美操人| 五月停停丁香| 色爽九九| 色狠狠色| 婷婷激情五月天在线| 六月丁丁香| 天天操天天操| 极品嫩草| www久久99| 五月天婷婷色色| 夜夜干夜夜操| 9久精品视频| 99热6精品| 五月丁香在线视频观看| 欧美日韩一区二区三区四区| 99久精品视频| 另类图片激情五月天| 97热91| 日韩精品二三区| 伊人玖玖精品| 性按摩玩人妻HD中文字幕| 狠狠色婷婷六月激情网| 超碰操网| 99综合97| 久久五月天婷婷| 日本va网站| 国模九区| 婷婷五月无码| 午夜五月天| 久久婷综合网| 亚洲亚洲人成综合网络| 激情图片婷婷| 久久视频婷婷视频| 97超级碰人人| 五月婷婷香| 久久最新色色色| 一级AV片| 婷婷综合久久| 99精品网站| 亚洲爱婷婷| 中文AV网站| 婷婷综合久久| 操久久精| 亚洲人成网站999综合| 亚洲99在线| 99热这里在线精品| 色色色五月天激情资源| 色婷婷丁香A片区毛片区女人区| 五月花综合视频| 欧美极品999| 色婷婷成人色网| 香蕉视频91| 桃色伊人在线| 91精品久久久久久77777| 五月婷婷黄色网址| 久久伊人五月天| 五月激情小说| 另类五月激情| 天天日,夜夜爽| 亚洲综合视频在线| 色99xx| 99这里| 人人射人人高潮| 五月天天丁香婷婷在线中| 99人人看| 99A片| 五月丁香啪啪网| 人人操五月天| 五月丁香六月婷婷亚洲视频| www.五月天性.com| 五月色丁香综合| 丁香五月电影院在线观看| 双性美人被调教到喷水A片| 欧美色性色好| 五月天com| 《诡秘之主》在线观看| 99在线播放| 成人做爰A片免费看视频| 99在线热视频| 天天日天天爽| 五月婷婷六月天| 色爱终和网| 五月婷婷开心深| 婷婷五月丁香久久| 少妇高潮一区二区三区99欧美| 丁香激情五月天| 婷婷五月激情小说| 久久激情五月| 丁香五月激情综合| 超碰av在线| 一本久道综合色婷婷五月| 婷婷六月插屄激情| 国产精品-91JQ就要激情网91JQ6.91JQ27.CASA:16888 | 夜夜做天天爽| 啪啪五月天啪啪| 狠狠舔| 色婷婷导航| 爆乳熟女一区二区三区爆乳| 亚洲性爱电影| 久久久8| 丁香五月激情网| se99热久久一本| #NAME?| 国产99久| 99热www| 无码人妻AV久久久一区二区三区| 8090在线影视少妇| 亚洲亚洲人成综合网络| 丁香五月天视频| 九九热精品| 任你草| 综合久久婷婷| 26UUU精品一区二区c〇m| 五月婷婷综合网| 日韩啪啪视频| 五月丁香综合网色欲| 婷婷五月天成人娱乐| 5月婷婷综合| 天干干夜夜操| 亚洲激情免费视频观看| 99超级碰碰| 激情婷婷五月| 综合色播| 欧美搡BBBBB摔BBBBB| 噼里啪啦完整版中文在线观看| 五月婷婷丁香| 五月丁香婷婷色播无码| 9热视频在线观看| 大香蕉久艹| 大香蕉久久伊人婷婷五月丁香| 久久婷婷五月国产色综合激情| 五月丁香激情五月天| 综合网激情五月天| 国产欧洲欧洲精品久久| 99热.com| 色五月 婷婷, 大香蕉| 色五月天 丁香| 五月丁香婷婷啪啪网| 毛片新网地| a色色色色色| 秋霞簧片| 超碰色综合| 五月天激情小说| 亚洲精品一二三| 人人看人人97| av婷婷丁香 六月| eeuss人妻| 另类小说婷婷色| 中文在线视频久1| 婷婷五月丁香综合激情| 国产露脸150部国语对白| 成人视频免费观看高清完整版在线观看| 九月色婷婷综合| 亚洲成人网站在线观看| 久久人妻人人槡| 开心五月综合激情网| 天堂成人A片永久免费网站| 665566 无码| 六月婷久久| 五月婷人妻| 五月天婷婷久久综合| 婷婷五月天小说| 日本色婷婷| 久久久国产精品黄毛片| 国产精品99久久久久久猫咪| 五月综合婷婷久久在线| 日日夜夜天天综合| 91丨人妻丨国产丨丝袜| 丁香色六月婷婷| 五月六月丁香激情| 伊人无码高清| 欧美精品99| 中文字幕性爱丰满| 色五月婷婷色| 丁香五月情| 激情五月婷婷中文字幕| 亚洲精品婷婷| 婷婷婷久久| 播五月婷婷开心| 婷婷色综合| 五月婷婷六月激情| 九九综合精品| 激情婷婷五月天| 九九热青草| 在线看片av| 婷婷五月久久| 国外亚洲成AV人片在线观看| 97在线视频人妻九色| 五月婷网站| 五月天久久久| 第四色激情网| 亚洲网站999| 五月婷婷色色爱| 思思久久99热| 九九色婷婷| 888久久久| 99re这里只有精品首页| 伊人综合网站| 久色视频首页| 五月天偷拍| 久久99网站| 日日干日日| 色婷婷六月| 伊人网欧美在线男人天堂五月丁香| 人人摸人人搞| www.婷婷五月天,com| 丁香六月天婷婷色| 噼里啪啦完整版中文在线观看| 亚洲啪视频| 大香蕉久久婷婷精品综合| av操B网站| 伊人久久婷婷五月天激情四射| 日韩成人av在线| 激情婷婷九月| 97色97干| 97干网站| 99热久| 99热精品在线播放| 色五月激情五月开心五月| 中文久久婷婷| 欧美丁香五月97色| 九九碰九九爱97超碰| 色五月激情综合| 免费看无码视频A级| 色婷婷五月综合| 五月天久久色| 亚色网站小视频| 激情AV| 播五月婷婷开心| 丁香五月婷婷在线| 欧美日韩大黄| www.婷婷com| 久久思思热视频| 婷婷干| 丁香成人色情五月天| 果冻传媒A片一二三区| 就爱射中文字幕资源网| 噜噜五月天综合| 99精品色| 亚洲国产成人在线| 玖玖在线视频| 丁香婷婷十月| 激情图片久久| 99色色网| 婷婷五月天电影在线| 老司机视频lsj爱就色| 色色综合色| 亚州综合色| 996热re视频精品视频| 色噜噜狠狠色综| 97自拍视频在线| 丁香五月激情婷婷激情| 欧美操综合| 色婷婷9| 天天玩夜夜操天天爽| 婷婷五月天福利| 噜噜噜色噜噜| 99热精品10| www.超碰在线| 五月丁香花视频| 99爱视频在线| 夜夜爽天操| 婷婷五月色惰| 性爱久久| 色五月涩涩婷婷| 日韩人妻无码精品| 日日影院 | 五月激情婷婷在线| 色视频2025| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | www.婷婷,com| 婷婷五月激情的图片| 激情五月天综合| 丁香婷五月| 亚洲激情四射色| 五月天淫乱视频| 婷婷丁五月| 操逼五月婷婷| 狼人婷婷久久| 久久五月婷天天干| 91色色色| 就去色色五月丁香婷婷久久久| 免费黄色视频网址| 噼里啪啦在线观看免费完整版视频| 五月天 另类图片| 91久久综合亚洲鲁鲁五月天| 久久色大香蕉| 色五月激情网| 九九性爱网| 97精品综合久久| 亚洲精品a成人在线播放| 99无吗| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 婷婷五月天Av| 国产成人高清| 狠狠色丁香久久综合婷婷亚洲成人福利 | 丁香婷婷色五月激情综合| 丁香五月,激情五月,深爱五月| 日韩色五月| 色婷网站| 欧美电影在线播放| 色婷婷综合网| 天天肏天天肏天天肏| yazhouzonghesese| 婷婷丁五月| 欧美日韩国产日本精品四虎网网站物| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 色色丁香五月| 国产首页在线| 女人高潮内射99精品| 丁香六月天| 日日操,天天操| 激情婷婷丁香五月天小说| 98热精品| 久婷狼色诱惑在线| 国产高潮A片羞羞视频涩涩| 五月丁香六月婷婷国产视频| 五月丁香日本片| 久久9热| 久久久亚洲成人无码A片| www.久久| 99A片| AV79| 成人五月天综合网| 婷婷五月天视频| 国产熟女一区二区三区五月婷| 精品无码99| 五月视频日本免费观看| 综合在线网| 亚洲中文字幕网| 色婷久久| 97人人干| 欧美成人精品A片免费一区99| 六月丁香久久| 五月激情综合网| 五月天婷婷综合网| 久re热视频| 夜夜操夜夜操| 99热精品在线观看| 久久久27操| 婷婷五月天影视首页| 婷婷十月激情综合网| 就去涩涩丁香五月天| 久久婷婷五月综合激情国产| 五月婷婷天天色| 97人人做| 婷婷午夜| 五月丁香六月久久| 99丁香五月婷| 激情欧美婷五月| 人妻内射麻豆视频| 色综合xx| 日日射天天射| www激情五月天| 五月综合激情久久| 婷婷五月AA五月在线| va中文资源在线观看| 9999热精品在线免费播放| 色狠狠激情五月| 色五月激情问网站| 婷婷五月天激情小说网站| 久久婷婷一级片| 桔色成人在线| 五月丁香无码| 亚洲激情另类| 乱乱av| 九九免费精品在线视频| 久久五月网| 五月激情丁香| 久久激情五月| 91精品综合久久久久久五月丁香| 热久久这里只有精品| 另类激情综合| 专区无日本视频高清8| 久99999热视频在线观看免费| 99色热综合| 色色影院黄大片| 9精品在线| 丁香五月婷婷亚洲综合精品| 婷婷五六日| 26uuu另类亚洲欧美日本一| 亚洲激情五月| 99色婷婷| 国产av网| 九九久久99精品免费观看www| 婷婷第六色| 五月婷久久在线| 日日夜夜天天| 777精品久无码人妻蜜桃| 在线免费视频caop| 丁香五月综合婷婷| 五月婷婷手机在线| 99色天堂| 国产操B| 人妻视频在线| 久久这里都是精品视频| 色婷视频| 丁香五月五月婷婷| www.com在线操视频免费观看| 色呦呦美女| 丁香六月视频| 国产综合婷婷| 夜夜嗨一区二区三区直播内容 | Caoub青青超碰 | 日日夜夜小色哥| 99在线视频播放| 成人国产欧美大片一区| 97碰碰在线观看视频| 色婷婷丁香九月| 激情五月网站| 这里只有精品在线视频在线观看| 操操人人| 殴美97色| 色情综合网| 天天爽天天摸| 玖玖婷婷五月天| 婷婷玖玖丁香| 五月丁香六月婷婷免费视频| 午夜丁香| 亚洲免费av观看| 日日爽日日操| 久热免费视频| 婷婷五月天综合久久日美女| 五月丁香网视频| 天天日,天天干,天天操| 国产成人精品一区二三区熟女在线| ww超碰在线| 婷婷五日b| 五月婷亚洲精品AV天堂| 久久九九囯产| 色情免费视频播放| 五月激情天| 狠狠色97| 色婷婷五月天激情在线观看| 日韩无码AV电影网站| 天天舔天天插天天爱| www.狠狠操| 人碰人人人玩91| 秋霞学生妹一二级| 五月天伊人网| av第一二区| 日日肏天天操| 亚洲亚洲人成综合网络| 六月婷婷之青青草| 欧美日韩91| 拍色综合| 婷婷婷婷婷婷婷五月丁香| 国产AV一区二区三区最新精品| 91精品久久久久久| 久久综合五月天| 亚洲一级AV在线免费播放| 九九色综合九九色| 婷婷久久婷婷色五月| 婷婷五月天激情综合网| 色无婷婷| 超碰99成人在线| 久久综合66| 最近中文字幕大全免费版在线 | 久久久久久9| 伊人大香蕉在线视频| 色久五月天| 久99婷婷色综合| 夜夜夜夜操| 婷婷五月天激情小说| 91日在线视频| 色婷婷深爱五月| 99亚洲视频| 婷婷狠狠操| 丁香五月婷婷激情小说| 色色色国产| 五月天婷婷色播综合在线| 99精品热| 天天做天天爱天天搞| 色综合色综合网| 99色精品视频| 五月丁香影院| caopeng97日韩| 99热精品在线| 五月婷婷网久久| 五月丁香色停停啪啪啪| 天天色域综合网| 成人片在线免费看| www.夜夜| 五月天激情播播网| 成人做爰高潮A片免费视频| 国产热精品| 色婷婷狠狠禁久久| 亚洲最大视频| 91色逼| 久久伊人五月天| 玖月婷婷爱丁香| 国产亚洲精品久久久久久牛牛| 五月婷婷免费| 91亚洲免费片| 欧洲综合视频| 成人欧美一区二区三区在线观看| 激情五月天天| 婷婷综合精品| 狠狠香婷婷五月| 亚洲偷| 99在线观看精品视频| 97精品自拍| 少妇人妻人伦A片| 五月天激情子轮| 91岛国片| 热久久这里只有精品| 丁香五月花婷婷开心| www.seqingwuyuetian| 另类小说激情五月天| 99无码超碰| 中文字幕日产A片在线看| 日日夜夜婷婷| 99热9| 人人综合色| 六月丁香啪啪啪| 99福利视频| 丁香五月婷婷欧美激情-中文天堂最新版在线观看| 久久九九热视频| 久久99这里只有精品视频| 99爱99操| 成人av在线网| 成人婷婷| 这里只有国产精品在线| 精品久久9| 又大又粗九一在线| 国产精品成人AV在线| 丁香婷婷免费| 亚洲亚洲人成综合网络| 91操片| 秋霞影音91人妻久久| 久久伦乱| 婷婷五月性感| 色五月 五月婷婷| 99精品大片| 欧洲99视频在线| 无码视频国内精品久久久| 亚洲欧洲国产精品| 婷婷五月天综合小说网| 亚洲五月天,激情视频| 五月丁香天堂| 另类 在线| yazhouzonghesese| 久久人妻熟女一区二区| 粉嫩av懂色av蜜臀av熟妇| 五月天婷婷青青草| 久久99热这里只有| 国内一级精品| 免费日本aⅴ中文字幕| 六月丁香网| 中文在线成人| 亚洲激情综合免费| 欧美激情丁香五月天久久婷婷一区| 国产午夜精品一区二区| 97人碰人操| 91久久99久久91熟女精品| 亚洲免费观看高清完整版AV线| 米奇影视资源婷婷狠狠色激情欧美五月丁香| 成人短视频在线| 激情骚五月| 国产精品电| 五月丁香综合网| 中文字幕成人| 丁香婷婷九月| 精品丁香五月天在线播放| 丁香五月婷婷亚洲另类| 久久五月天激情美女| 影音先锋男人资源站一区二区 | 激情婷婷网| 北条麻妃九九九国产精品视频| 涩涩涩五月天| 久久久激情视频| 狠狠狠狠狠干| 欧美性爱中文字幕| 狠狠色噜噜狠狠狠狠综合| 婷婷五月天色综合| 国产精品色色色色| 婷婷五月丁香基| ss五月天激情| 精品久久婷婷五月天| 九热视频| 亚洲丁香花色| 99精品热| 综合久久99| 99 福利 导航| 亚洲精品网址| 婷色视频| 99WWW免费视频| 91精品综合久久久久久五月天| www.第四色99| 欧美黄色一级| 色吧99| 狠狠久久婷婷| 欧美性爱中文字幕| 午夜丁香综合婷婷| 99精品久久久久久久| 91色在线/日韩| 五月婷婷色情| 天天狠狠婷婷在线| 五月天另类小说亚洲| 五月天开心婷婷久久 | 婷婷五月天激情诱惑| 深爱五月激情五月| 久久超级碰碰| 中文字幕在线日亚州9| 婷婷五月天丁香| 色色色色色色网| 久99热| 精品亚洲国产成AV人片传媒| 国产毛片精品一区二区色欲黄A片| 国产成人精品一区二三区熟女在线 | 超碰免费电影| 91丨九色熟女丨首页| 亚洲综合婷婷五月| 久草婷婷| 婷婷激情蜜桃玖玖丁香| 丁香婷婷综合激情五月色| 婷婷五月丁香五月综合网| 五月婷婷综合在线| 久99热| 天天日天天爽| 国产乱轮一区二区三区| 五月婷婷综合性爱噜噜| 中文字幕在线免费| 99色看这里只有精品| 久久66精品| 激情五月天社区| 色色色综合网| 日韩av一区二区在线/日产精品久久久| 九九99视频精品| 日本99视频精品免费播放| 丁香激情网| 热99re| 伊人玖玖网| 天天日天天爽| 中文字幕人妻一区二区| 草草操操| 2050人人操免费工开爱| 99re在线这里只有精品视频首页| 亚洲人妻电影| 九九亚洲视频| 五月丁香六月片| 欧美性久| 日本在线免费中文com.| 丁香婷婷五月天在线视频| 欧美人妻一区二区| 在线综合亚洲欧美65| 日亚二欧美| 五月婷婷六月丁| 婷婷深爱五月丁香| 99九九视频| 秋霞少妇毛片| 六月丁香基地| 成功精品影院| 激情又色又爽又黄的A片| 亚州激情九月| 五月丁香另类图片| 人妻VideOssS人妻| 色综合伊人网| 欧美婷婷丁香五月| 日本的α片xxxwww| 日本色图综合| 视频一区二区在线| 好好干Av| av人人干| 丁香五月亚洲综合| 五月丁婷香| 五月天综合在线观看视频| 国产做爰视频免费播放| 开心五月综合激情网| 日日夜夜天天| 日本婷婷色| 九九视频这里只有精品在线播放 | 男女啪啪做爰高潮无遮挡| 丁香五月天婷婷91| 狠狠狠狠狠草| 成人精品在线| 婷婷丁香色情| 天天舔天天摸天天射| 五月婷婷偷拍| 丁香六月欧美| 激情五月丁香在线观看直播| www婷婷| 色色色色丁香| 五月天天丁香婷婷在线中| 色五月婷婷五月天| 婷久久久| 色色丁香五月婷婷| 九九热99热| 日本97在线| 五月婷婷网站| 日本人妻伦在线中文字幕| 天搞天天天天天| 日日操日日撸| 六六久久黄色| www.婷婷五月天啪啪| 在线99热| 久久五月激情综合| 久久久久久人妻| 久久九⑨| 五月婷婷co.m| 五月天激情网图片| 99精品超在线播放| 婷婷五月天小说网| 五月激情婷婷偷拍| 狠狠操.COM| 天久综合91综合首页| 色婷婷久久综合久色| 久久婷婷精品| 玖玖婷婷五月天| 五月久久婷婷| 激情久久久久久久久久久| 亚洲天天操| 殴美97色| 婷婷五月激情在线视频| ..真实国产乱子伦对白在线_欧| 色噜噜狠狠色综合AV兰草影视| 五月天久久久| 香蕉综合在线| 激情五月丁香五月| 97热视频| 色综合色色| 久久综合这里只有精品1| www.jiujiujiu| 9久热在线视频精品| 久久99久久99精品免观看粉嫩| 停停五月色宗合| 综合婷婷五月天| 婷香狠狠爱五月| 91ncm视频| 伊人婷婷大香蕉| 99久在线观看| 狠狠舔| 99热66| 立川无码av| 乱岳熟女50岁| 婷婷播播五月天| 亚洲AV久久久久久久久久久久久久久久| 丁香六月天婷婷开心综合| 五月伊人91| 亚洲第一第二网站| 91在线资源| 六月天丁婷婷| 99九九热视频免费| 综合久久高清| 色婷婷基地在线| 色婷婷影视| 久色中文| 69综合在线| 99re热在线视频| 九九热只有这里精品| 中文字幕免费高清电视剧| 国精产品一区二区三区| 激情婷| 婷婷久久久久| 青青草a在线| 丁香色婷婷色手机免费在线| 五月天婷婷影院影院观看| 激情五月天的婷婷| 五月天成人综合| www.五月丁香av| 偷拍九九五月丁香婷婷| www九九| 操逼123网| 牛牛色av| 激情小说五月天| 深爱激情网噜噜色| www.99精品视频| 激情久久久| 色青青视频| 97碰成超视频免费视频| 色吧五月婷婷| WWW.HENHENL.| 五月天桃色深爱网| 任你草| 人人摸人人干| 久久婷婷色色| 日日天天操| 日本久久超碰| 黄桃AV无码免费一区二区三区| 天天干com| 亚洲AV人人操| 色综啪啪网| 色色色地址| 99热在线里有精品| 青青草婷婷久久| 激情五月色婷婷| 丁香婷婷六月男男| 五月天六月丁香| 熟女国产在线一区二区三区四区| 精品婷婷| 丁香五月天激情综合网| 五月丁香激情综合六月涩涩爱| 欧美搡BBBBB摔BBBBB| 婷婷五月天国产在线播放| 天天做天天爱天天摸| 色涩影院六月丁香| 香蕉AV福利精品导航| 久久这里有精品视频| 久久黄A片| 99热热热天天人人人超超碰| 亚洲AV综合在线观看| 天天干天天色天天干| 婷婷在线播放av| 激情婷婷黄色五月| 五月婷婷六月色| 人妻久久久久久久 | 婷婷久久五月| 五月激情五月婷婷五月天在线| 99re在线观看| 激情五月丁香六月综合AVXXXX| 国产精品久久久久久久久久| 色五XX| 丁香伊人激情| 91色久| 丁香五月天.com| 婷婷五月天av| 97丁香婷婷| 激情五月天婷婷五月天| www。五月天。com| 97婷婷色| 婷婷五月综合社区| 涩涩激情五月婷婷| 成人.在线日韩| 五月婷婷av| 久久99精品久久久久久三级| 天天操天天爱天天玩| 色色亚洲无码| 综合色五月| 婷婷五月丁香超碰| 九月性爱网| 九九视频在线观看| 色色激情五月| 开心五月网| 亚洲激情免费视频观看| 激情五月五月五月婷婷| 色婷婷五月天亚洲| 六月丁香深深爱综合网| 991国产精选视频在线播放下载| 青青草99re| 日本WwW色偷偷丁香花久久久京东热| 91chinese在线| 深爱综合网| 一级操逼内射在线视频| 日在线V视频在线播放| 五月天播播综合| 伊人影音无码一区二区三区 | 视频这里只有精品16| 婷婷五月激情的图片| 成人做爰A片免费看网站找不到了| 九热免费视频| 激情九月天天天天婷婷| 婷婷久久精品| www.婷婷,com| 狠狠色噜噜狠狠狠狠狠色综合久久| av操逼网| 日本不卡高字幕在线2019| 不卡在线视频| CHINESE熟女老女人HD视频| 五月婷在线| 中文字幕日产A片在线看| 丁香六月啪啪| 亚洲欧洲中文日韩久久AV乱码| www.狠狠操| 久久99热这里只频精品6学生| 无码免费人妻A片AAA毛片西瓜| 九九99精品视频在线观看| 天天操夜夜操| 国产AV熟妇人震精品一品二区| 六月激情综合| 97福利视频| 五月婷婷综合在线| 色色性爱视频| 51精品国自产在线| 伊人五月婷| 国产色色小草视频| 亚州激情九月| 日韩AV在线免费观看| 婷婷在线综合| 亚洲另类在线观看| 天天草天天爱| 中日韩美欧成人一区二区精品在线 | 亚洲免费婷婷| 丁香五月影院| 9|无码久久久久久| 综合色久| 综合av在线| 久久天堂婷婷五月| av在线观看网站| 91免费看片| 六月丁香激情综合网| 国产夫妻操逼内射视频| 日本片日本片祼观看网站在线看中文版网页在线看| WWW,五月| 玖玖综合色| 激情影院内射| 天天成人综合视频| 99久热这里只有精品| 五月停停丁香| 亚洲无码99| 五月婷网| 国产在线aaa片一区二区99| 97搞在线| 99碰| 欧美成人无码高清一区二区三区| caopeng97日韩| 久久婷婷亚洲| 国产成人亚洲综合A∨婷婷| 丁香六月综合激情| 精品婷婷丁香五| 99精品久久久久久久| 成人天天爽| 色色色色色爱| 色婷婷狠狠爱| 国产精产国品一二三在观看| 去色色五月天| 五月婷五月婷伊人伊人五月婷| 91啪级电影| 六月婷婷久久| 内射爽无广熟女亚洲| 欧美性猛交 XXXX 乱大交| 综合色婷婷| 婷婷在线观看五月天在线视频| 思思热99在线| 久久草中文日韩欧美| 五月婷婷五月| 四色五月婷婷| 亚州色婷婷| 激情五婷网| 深爱五月激情| 婷婷丁香五月天操逼| 99色综合| 91精品综合久久久久久五月丁香| 婷婷五月成人| 97婷婷五月| 色一情一乱一乱一区91Av| 区区欧美你爱| 99色| av无码电影| 欧美色小说婷婷| 五月婷中文字幕| 超碰色色综合| 日韩丁香涩| 久久久8| 99re8在这里只有精品| www色色色com| 任我鲁这里有精品视频| 很很干五月天| 久久96热| 97热这里只有精品| 亚洲AV成人无码精品| 开心婷婷中文字慕| 丰满熟女人妻一区二区三| 成人做爰黄A片免费看直播室男男 久草热8精品视频在线观看 | 天天干天天叉| 91五月天| 任我肏| 丁香六月激情综合| 三级av在线| 五月天综合久久丁香91| 天天爽天天摸| 麻豆AV一区二区三区| 五月丁香久人妻中文| va亚洲中文在线| 99精品偷自拍| 亚洲网站在线鸭子av| 五月天狠狠色| 亚洲啪| 99热99色| 九九精品亚洲| 偷拍99在线视频观看| 噼里啪啦完整版中文在线观看| www.色色com| www.五月丁香av| 国产精品涩涩涩视频网站| 丁香 亚洲 久久| 天天舔天天摸视频| 丁香五月亚洲综合丝袜| 国内裸舞二区| 99精品久久久久| 色日本综合| 五月播播| 日本在线观看99| 婷婷色播综合五月| 欧洲色区| 天天肏屄夜夜爽| 久色视频| 久久色情| 色婷婷久久综合中文久久一本| www.maotanji.com| 九九99精品视频| 欧美日韩成人高清在线| 久久精品人妻| 99玖玖视频| 色情五月综合婷婷| 欧美日韩日韩成人| 五月成人网站| 色情五月天导航| 99热色精品| 色九九七七| 久久开心五月天激情| 日韩久操婷婷| 思思热思在线精品视频| 五月丁香啪啪啪| 他改变了拜占庭| 能看的av| 日本婷婷综合精品| 欧洲电影在线观看免费版英语版| 婷婷激情小说网| 人人摸人人干| 激情五月天之五月婷婷| 成人无码髙潮喷水A片| 伊人五月久久| 91九色PORNY肉丝在线| 综合六月激情婷婷| AV中文字幕夜夜操b天天摸bb| 五月丁香花婷婷玉莉AV| 色婷婷五月综合色婷婷| 99热这里只有精品3| 在线观看免费狠狠色丁香香综合| 日91高清无玛| 亚洲无码另类| 色婷网| 色婷婷香蕉丁丁网| 色婷婷亚洲综合网站| 开心五月深爱五月| 91碰超| 五月香婷婷| 欧洲日韩一区二区三区| 大香蕉网 久久| 无人精品在线视频| 九九久久五月天| 另类小说五月天| 五月噜噜| 日韩AV在线电影| 欧美大香蕉视频| 婷婷五月天综合激情| 欧美电影在线观看| 99高级会所久久| 婷婷五月天丁香综合网| 99爱无码| 在线观看av网站| 精品激情| 逼逼AV| 丁香五月婷婷欧美激情-中文天堂最新版在线观看 | 激情五月天婷婷| 亚洲日韩一页精品发布| 色色网站免费| 久久五月天色婷婷| www.夜夜操| 丁香六月婷婷姐网| 97久久草草超级碰碰碰| 殴美激情综合网| 六月色狠狠色| 九九99九九精品视频| 五月天久久综合| www.五月婷婷久久.com| 99热精品网| 久久久久人妻| www夜夜操com| 草草操操| 免费黄网不卡AV| 亚洲视频二区| 夜夜操夜夜姧| 日韩肏屄网| 六月丁丁香|