欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

軟件版本管理規(guī)范:版本號(hào)、分支、制品與發(fā)布臺(tái)賬

軟件版本管理規(guī)范:版本號(hào)、分支、制品與發(fā)布臺(tái)賬 剛接手一個(gè)中型項(xiàng)目的研發(fā)流程那會(huì)兒我做的第一件事不是翻代碼而是把近半年的發(fā)布記錄全導(dǎo)出來對(duì)了一遍。結(jié)果非常典型同一個(gè)功能在測試環(huán)境叫 v2.3.1到預(yù)發(fā)變成 v2.3線上又成了 release-20230417三個(gè)名字指向的是同一份代碼反過來更嚇人的是兩個(gè)完全不同的構(gòu)建產(chǎn)物都叫 v1.0.0線上跑的到底是哪一個(gè)誰也說不清。這就是軟件版本管理沒有統(tǒng)一規(guī)定的直接后果——不是沒人管而是每個(gè)人按自己的習(xí)慣管最后誰也拼不出完整的一張圖。軟件版本管理規(guī)定這件事聽起來像是寫文檔的活實(shí)際上它決定了你出事之后能不能在十分鐘內(nèi)定位問題、能不能安全回滾、能不能回答線上到底是什么。這篇內(nèi)容我打算按自己踩過的坑和后來落地的規(guī)則來講適合剛接手發(fā)布流程的研發(fā)、測試負(fù)責(zé)人也適合團(tuán)隊(duì)里那個(gè)被默認(rèn)管版本的人不管你現(xiàn)在用的是 Git 還是別的工具規(guī)則層面的東西是通用的。1. 版本號(hào)到底該怎么編從語義化版本到團(tuán)隊(duì)內(nèi)規(guī)1.1 三個(gè)數(shù)字各自承諾了什么很多人以為版本號(hào)就是給發(fā)布排個(gè)序漲上去就行其實(shí)版本號(hào)真正的作用是對(duì)外承諾兼容性。語義化版本那套 MAJOR.MINOR.PATCH 的約定之所以被廣泛采用是因?yàn)樗堰@次升級(jí)會(huì)不會(huì)弄壞我的代碼這個(gè)問題變成了可以提前判斷的事主版本號(hào)漲了意味著有不兼容的改動(dòng)調(diào)用方必須改代碼次版本號(hào)漲了意味著新增了功能但保持向后兼容修訂號(hào)漲了意味著只有修復(fù)接口沒動(dòng)。這個(gè)承諾一旦定下來就不能隨便破例。我見過最常見的破例方式是順手改一下。發(fā)布前發(fā)現(xiàn)一個(gè)小接口的參數(shù)名寫錯(cuò)了覺得反正沒人用直接改掉版本號(hào)只在修訂位上加一。結(jié)果下游某個(gè)服務(wù)正好用了這個(gè)參數(shù)上線當(dāng)晚就報(bào)錯(cuò)。所以團(tuán)隊(duì)內(nèi)規(guī)里必須寫清楚只要接口簽名、數(shù)據(jù)格式、配置項(xiàng)名稱發(fā)生了變化無論改動(dòng)多小都要往次版本號(hào)漲必要時(shí)甚至要往主版本號(hào)漲。判斷標(biāo)準(zhǔn)不看代碼行數(shù)看的是外部能不能感知到差異。還有一點(diǎn)容易被忽略版本號(hào)的數(shù)字段是有排序語義的不要塞入前導(dǎo)零也不要用字母去替代數(shù)字。像 v1.10 和 v1.9 這種字符串排序會(huì)得出錯(cuò)誤結(jié)論必須按數(shù)字段比較。如果團(tuán)隊(duì)里有人寫腳本去解析版本號(hào)這一點(diǎn)會(huì)直接導(dǎo)致灰度分批的邏輯出錯(cuò)。1.2 企業(yè)里通常要多加幾位純粹的語義化版本在內(nèi)部研發(fā)場景下經(jīng)常不夠用因?yàn)槲覀冃枰獏^(qū)分同一份代碼在不同環(huán)境下構(gòu)建出來的不同產(chǎn)物。所以大多數(shù)團(tuán)隊(duì)會(huì)在三段式后面追加構(gòu)建號(hào)或者日期流水號(hào)形成類似2.3.1.20240517.812或者2.3.1build.812這樣的形式。這里的關(guān)鍵是區(qū)分業(yè)務(wù)版本和構(gòu)建版本前三段是業(yè)務(wù)版本由人決定代表這一版包含什么后面的構(gòu)建信息由流水線自動(dòng)生成只用來唯一標(biāo)識(shí)一份產(chǎn)物。字段誰來決定含義是否重復(fù)出現(xiàn)主版本號(hào)研發(fā)負(fù)責(zé)人評(píng)審不兼容變更否次版本號(hào)研發(fā)負(fù)責(zé)人評(píng)審兼容性新增否修訂號(hào)開發(fā)自定兼容性修復(fù)否構(gòu)建流水號(hào)流水線自動(dòng)唯一標(biāo)識(shí)產(chǎn)物是每次構(gòu)建遞增預(yù)發(fā)布標(biāo)識(shí)發(fā)布同學(xué)標(biāo)記rc / beta 等階段同版本可多次預(yù)發(fā)布標(biāo)識(shí)也要有明確規(guī)定。rc 代表候選發(fā)布beta 代表公開測試alpha 代表內(nèi)部驗(yàn)證這些標(biāo)識(shí)只能出現(xiàn)在正式發(fā)布之前且同一個(gè) rc 編號(hào)只能對(duì)應(yīng)一份產(chǎn)物。如果 rc1 修復(fù)了問題重新構(gòu)建那就必須是 rc2不能覆蓋 rc1 的制品。這一點(diǎn)后面講制品管理的時(shí)候還會(huì)展開因?yàn)樗苯記Q定了回溯的可靠性。1.3 用日期做版本號(hào)這件事要謹(jǐn)慎不少團(tuán)隊(duì)喜歡用2024.05.17這種日期版本看著直觀實(shí)際用起來有兩類麻煩。第一是排序問題如果跨年月份和日期不足兩位就會(huì)亂序必須嚴(yán)格補(bǔ)零第二是并發(fā)問題同一天出兩個(gè)版本就沒法區(qū)分了得再掛一個(gè)流水號(hào)于是變成2024.05.17.2這時(shí)候它已經(jīng)不再是純?nèi)掌谡Z義而是日期序號(hào)那就干脆說明白別讓新同學(xué)誤以為它就是日期。我的建議是面向外部用戶的版本用語義化三段式面向內(nèi)部構(gòu)建的標(biāo)識(shí)用日期或構(gòu)建號(hào)。兩套并存但職責(zé)邊界必須在規(guī)定里寫死。最怕的是混著用一會(huì)兒 v2.3.1 一會(huì)兒 20240517臺(tái)賬里兩列數(shù)字沒法對(duì)賬。如果確實(shí)要給用戶展示一個(gè)更容易理解的版本比如手機(jī)應(yīng)用里的3.5 版那它和內(nèi)部版本號(hào)之間要有明確的映射關(guān)系表且這張表要跟代碼一起維護(hù)不能只存在某個(gè)人的腦子里。2. 分支模型與版本號(hào)的綁定關(guān)系2.1 主干開發(fā)和發(fā)布分支選哪個(gè)先想清楚分支模型和版本號(hào)是一體的光規(guī)定版本號(hào)卻不規(guī)定分支怎么切規(guī)定就是空轉(zhuǎn)。目前主流是兩條路線一種是主干開發(fā)、發(fā)布分支拉出后凍結(jié)另一種是長期維護(hù)多個(gè)版本分支。前者適合迭代快、只有一兩個(gè)在線版本的團(tuán)隊(duì)后者適合有客戶還在用老版本的場景比如企業(yè)軟件、交付類項(xiàng)目。主干開發(fā)模式下版本號(hào)的推進(jìn)點(diǎn)很清晰功能合并進(jìn)主干時(shí)次版本號(hào)已經(jīng)在規(guī)劃里鎖定了從主干切出release/2.4分支的那一刻2.4 這個(gè)版本號(hào)就凍結(jié)后續(xù)在這個(gè)分支上只允許修訂位遞增也就是 2.4.1、2.4.2 這樣往上走。凍結(jié)的含義是不再往這個(gè)分支合入新功能只能合修復(fù)。我見過發(fā)布分支被當(dāng)成第二個(gè)開發(fā)分支用的團(tuán)隊(duì)結(jié)果就是每次上線都要重新跑一遍全量回歸因?yàn)榉种系拇a跟測試過的不是同一份。多版本并行維護(hù)的情況下規(guī)則要再收緊一層每個(gè)維護(hù)分支對(duì)應(yīng)一個(gè)大版本線比如release/2.x、release/3.x兩條線上同一個(gè)修復(fù)要打兩次補(bǔ)丁版本號(hào)分別遞增且要在臺(tái)賬里注明同源修復(fù)。這里最容易出的問題是漏合修了 3.x 忘了 2.x客戶投訴之后才發(fā)現(xiàn)。規(guī)定里可以要求補(bǔ)丁類修復(fù)必須列出所有受影響的大版本線逐個(gè)確認(rèn)是否合入。2.2 熱修復(fù)的版本號(hào)怎么漲線上出問題從發(fā)布分支切一個(gè)hotfix/2.4.3分支修完合回發(fā)布分支同時(shí)必須合回主干否則下一次從主干切發(fā)布分支的時(shí)候這個(gè)修復(fù)會(huì)丟失問題會(huì)復(fù)發(fā)。這是我在實(shí)際項(xiàng)目里反復(fù)見到的坑因?yàn)闊嵝迯?fù)分支往往是在深夜臨時(shí)拉的人一累就只想著趕緊上線忘了往回合。版本號(hào)方面熱修復(fù)只動(dòng)修訂位從 2.4.2 變成 2.4.3。如果這次修復(fù)其實(shí)改了對(duì)外接口或者數(shù)據(jù)結(jié)構(gòu)那就不能只漲修訂位要按前面說的兼容性規(guī)則來處理必要時(shí)直接發(fā)一個(gè)次版本。判斷動(dòng)作只有一個(gè)改完之后調(diào)用方在不改代碼的情況下能不能正常工作。能就是修訂位不能就得往上漲。標(biāo)簽Tag的規(guī)則也要一起寫。每個(gè)正式發(fā)布的版本必須在對(duì)應(yīng)的提交上打一個(gè)不可變的 TagTag 名與版本號(hào)嚴(yán)格一致禁止移動(dòng)或覆蓋已存在的 Tag。我在早期項(xiàng)目里遇到過有人為了省事把 Tag 刪了重新打結(jié)果 CI 里緩存了舊的制品兩邊對(duì)不上排查了兩個(gè)小時(shí)才找到原因。Tag 一移動(dòng)所有基于它的溯源都失效了這個(gè)代價(jià)遠(yuǎn)比重新發(fā)一個(gè)版本號(hào)高。2.3 環(huán)境和版本的映射必須成表規(guī)定里必須有一張環(huán)境與版本的對(duì)應(yīng)表明確哪個(gè)環(huán)境允許出現(xiàn)什么形態(tài)的版本號(hào)。環(huán)境允許的版本形態(tài)是否允許重新構(gòu)建覆蓋版本號(hào)確定時(shí)機(jī)開發(fā)聯(lián)調(diào)快照版本如 2.5.0-SNAPSHOT允許不入臺(tái)賬功能測試rc 版本如 2.5.0-rc1不允許重建換編號(hào)提測時(shí)鎖定預(yù)發(fā)布rc 或正式版候選不允許上線前一日鎖定生產(chǎn)正式版如 2.5.0絕對(duì)不允許上線評(píng)審?fù)ㄟ^后這張表看著簡單執(zhí)行起來最難的是快照版本往外漏。開發(fā)階段圖方便用 SNAPSHOT提測時(shí)忘了換成正式編號(hào)測試環(huán)境跑著跑著代碼被覆蓋了測試結(jié)論直接作廢。規(guī)定里要明確寫一句快照版本只允許存在于開發(fā)聯(lián)調(diào)環(huán)境任何進(jìn)入測試環(huán)節(jié)的制品都必須有不可變的版本號(hào)。3. 提測、灰度、上線版本流轉(zhuǎn)的門檻3.1 什么樣的版本才允許提測版本管理規(guī)定里提測門檻是最容易寫虛的一條。我后來總結(jié)成幾個(gè)可檢查的硬條件版本號(hào)已確定且制品已歸檔到制品庫冒煙用例全部通過并留有記錄本次變更清單已經(jīng)填寫完整包含涉及的服務(wù)、配置、數(shù)據(jù)庫腳本發(fā)布說明的初稿已提交。這幾條只要有一條不滿足測試就不接。為什么要卡這么死因?yàn)榘姹净靵y的源頭大多在提測這一步。測試拿到的包和開發(fā)本地跑的不是同一個(gè)這種事一旦發(fā)生測試出一個(gè)問題開發(fā)說我這邊沒問題來回扯皮的時(shí)間比修問題還長。版本號(hào)加制品哈希值是唯一能終結(jié)這種扯皮的東西。提測單上除了版本號(hào)還要寫上制品的校驗(yàn)值測試下載后核對(duì)一下不一致就直接打回不需要討論。另外提測的版本號(hào)和最終發(fā)上線的版本號(hào)最好保持一致。中間如果需要修改就只能往上遞增新版本號(hào)重新提測不能就地修改。有些團(tuán)隊(duì)會(huì)想省事降級(jí)處理成這次改動(dòng)很小就不用重新走流程了但改動(dòng)小不小不由改動(dòng)者說了算得由影響面評(píng)估說了算。規(guī)定里可以留一個(gè)快速通道僅修改文案、配置且不涉及邏輯的允許走簡化評(píng)估但仍然要換版本號(hào)重新歸檔制品。3.2 灰度階段的版本怎么標(biāo)識(shí)灰度本質(zhì)上是同一版本在小范圍先跑所以灰度和全量應(yīng)該是同一個(gè)版本號(hào)而不是兩個(gè)。這一點(diǎn)常被搞混有人把灰度包和全量包當(dāng)成兩個(gè)版本結(jié)果臺(tái)賬里多出一條記錄對(duì)賬的時(shí)候找不到對(duì)應(yīng)關(guān)系。正確的做法是版本號(hào)保持一致用發(fā)布批次或者流量比例來區(qū)分階段臺(tái)賬里記錄的是2.5.0 在灰度批次 A、B 各發(fā)布一次?;叶绕陂g如果發(fā)現(xiàn)問題需要修復(fù)那就不能就地改灰度包而是從發(fā)布分支拉修復(fù)、漲修訂位、重新走提測和歸檔形成 2.5.1然后決定是繼續(xù)灰度還是全量。這個(gè)過程雖然麻煩但它保證了線上跑的每一份代碼都能在制品庫里找到對(duì)應(yīng)的不可變產(chǎn)物。我見過就地改包的做法改完之后線上版本號(hào)沒變出問題時(shí)按版本號(hào)去查制品查到的還是修改前的那份排查方向直接跑偏?;叶冗€會(huì)帶來一個(gè)隱蔽問題不同實(shí)例上跑的版本號(hào)不一致。發(fā)布過程中一部分機(jī)器先更新另一部分還沒更新這個(gè)時(shí)候如果去查線上版本答案是不唯一的。所以版本查詢接口要能返回實(shí)例粒度的版本分布而不是一個(gè)全局值。這個(gè)能力在排查灰度期問題時(shí)幾乎是剛需。3.3 回滾不是版本號(hào)減一回滾這件事我在規(guī)定里單獨(dú)寫了一節(jié)因?yàn)榻^大多數(shù)翻車都發(fā)生在這里?;貪L到上一個(gè)版本絕不等于把版本號(hào)從 2.5.0 退成 2.4.3 那么簡單它至少要考慮三件事數(shù)據(jù)結(jié)構(gòu)的兼容性、配置的回退、以及回滾動(dòng)作本身要不要記錄為一個(gè)版本。數(shù)據(jù)結(jié)構(gòu)這塊最要命。如果 2.5.0 上線時(shí)加了字段、改了表結(jié)構(gòu)回滾到 2.4.3 之后老代碼可能讀不懂新數(shù)據(jù)或者寫入了新代碼無法識(shí)別的內(nèi)容。所以規(guī)定里要有一條涉及數(shù)據(jù)庫結(jié)構(gòu)變更的版本必須同時(shí)提交回滾腳本和兼容性說明明確標(biāo)注該版本是否可回滾。不可回滾的版本要在發(fā)布評(píng)審時(shí)被單獨(dú)標(biāo)記出來上線決策也會(huì)因此不同。配置回退同樣容易被漏掉。代碼回退了配置中心里的參數(shù)還停留在新版本的狀態(tài)導(dǎo)致行為不一致。所以回滾清單里要包含配置項(xiàng)的回退動(dòng)作最好由配置中心支持按版本回退而不是人工改。至于回滾這個(gè)動(dòng)作本身我的做法是把回滾也當(dāng)作一次正式發(fā)布來記錄臺(tái)賬里新增一條記錄注明回滾至 2.4.3原因、操作人、時(shí)間而不是把原來那條 2.5.0 的記錄刪掉。歷史不能擦除只能追加這樣事后復(fù)盤才有據(jù)可查。4. 制品管理讓版本號(hào)真正對(duì)得上東西4.1 不可變制品是整條規(guī)定的地基如果說版本管理規(guī)定只有一條是必須執(zhí)行的我會(huì)選制品不可變。具體含義是一個(gè)版本號(hào)一旦歸檔對(duì)應(yīng)的制品就再也不能被覆蓋或刪除需要改動(dòng)就換新版本號(hào)重新構(gòu)建。這條規(guī)則看起來嚴(yán)苛但它是所有溯源能力的前提。如果制品可以被覆蓋那么版本號(hào)就失去了標(biāo)識(shí)意義等于一個(gè)隨時(shí)會(huì)變的別名。為了支撐這條規(guī)則制品庫里要禁止覆蓋推送重復(fù)推送同一個(gè)版本號(hào)時(shí)直接報(bào)錯(cuò)而不是靜默覆蓋。這個(gè)特性在多數(shù)制品倉庫里都能配置值得花時(shí)間打開。我見過因?yàn)闆]開這個(gè)開關(guān)流水線重跑一次就把已歸檔的包覆蓋了兩個(gè)月后排查線上問題時(shí)本地復(fù)現(xiàn)不出來因?yàn)橹破芬呀?jīng)變了。構(gòu)建信息要寫進(jìn)制品。至少在制品里包含一個(gè)描述文件記錄源碼提交哈希、構(gòu)建時(shí)間、構(gòu)建人、流水線編號(hào)、依賴清單的哈希值。這樣從版本號(hào)出發(fā)可以一路查到具體代碼而不是只能查到大概是那幾天的主干。這一步做起來不復(fù)雜但帶來的排查效率提升是數(shù)量級(jí)的出問題時(shí)先拿版本號(hào)查出提交哈希再用哈希去看變更兩分鐘就能圈定范圍。4.2 依賴鎖定不能靠自覺內(nèi)部服務(wù)之間的依賴如果用范圍版本比如[2.0,3.0)那構(gòu)建結(jié)果就不可復(fù)現(xiàn)。今天構(gòu)建和明天構(gòu)建可能拉到不同的依賴同一個(gè)版本號(hào)產(chǎn)出的東西不一樣這直接違背制品不可變的原則。所以規(guī)定里要寫明內(nèi)部依賴一律使用固定版本禁止在正式發(fā)布的制品中使用范圍版本或最新版本標(biāo)識(shí)。外部三方依賴同理鎖定文件必須提交到代碼庫不能放在忽略列表里。這個(gè)問題我在兩個(gè)項(xiàng)目里都遇到過表現(xiàn)是一樣的本地能跑CI 上跑不起來因?yàn)?CI 重新解析依賴時(shí)拉到了新版本。鎖定文件提交之后構(gòu)建結(jié)果才真正穩(wěn)定下來。還有一個(gè)細(xì)節(jié)依賴升級(jí)本身也要走版本號(hào)。比如某個(gè)公共庫從 1.2 升到 1.3使用方要做的是在自己的版本號(hào)上體現(xiàn)這次依賴變更而不是悄無聲息地跟著升。依賴變更屬于變更內(nèi)容必須寫進(jìn)發(fā)布說明否則出問題時(shí)沒人會(huì)想到是依賴引起的。4.3 制品保留策略要有明確規(guī)則制品庫不可能無限增長所以要規(guī)定保留策略。我的做法是按版本類型區(qū)分正式發(fā)布版本永久保留至少保留到該大版本線終止維護(hù)候選版本保留最近若干個(gè)超過數(shù)量的可以清理快照版本保留最近若干天。規(guī)則要寫進(jìn)制度而不是讓運(yùn)維憑感覺刪。清理動(dòng)作本身也要謹(jǐn)慎。清理前必須確認(rèn)該版本沒有被任何環(huán)境的臺(tái)賬引用尤其是那些還在灰度或者還有客戶在用的老版本。我經(jīng)歷過一次清理把某個(gè)老版本的制品刪了結(jié)果出了一次需要在這個(gè)老版本上打補(bǔ)丁的情況只能重新構(gòu)建而重新構(gòu)建出來的東西和當(dāng)年發(fā)布的并不完全一致依賴已經(jīng)更新最后只能如實(shí)向客戶說明差異。這個(gè)麻煩完全可以避免。5. 發(fā)布說明與版本臺(tái)賬出事后三分鐘定位5.1 發(fā)布說明寫什么、不寫什么發(fā)布說明不是營銷文案不需要把每個(gè)改動(dòng)都包裝得漂亮。它要回答的是運(yùn)維和排查人員關(guān)心的問題這次改了什么、影響哪些模塊、有沒有配置變更、有沒有數(shù)據(jù)庫變更、回滾怎么做。我建議用固定結(jié)構(gòu)寫不出來的地方填無而不是省略因?yàn)槭÷詴?huì)讓人無法判斷是沒有還是忘了寫。欄目內(nèi)容要求常見缺失變更清單按需求單號(hào)列出標(biāo)明類型只寫優(yōu)化若干問題影響范圍涉及的服務(wù)、接口、頁面漏寫下游依賴配置變更新增、修改、刪除的鍵及默認(rèn)值完全沒提數(shù)據(jù)變更腳本、是否可回滾只給腳本不說兼容性回滾方案步驟、預(yù)估耗時(shí)、決策人寫直接回滾優(yōu)化若干問題這種寫法我見一次打回一次。它的問題不在于不詳細(xì)而在于無法和代碼變更對(duì)應(yīng)出了問題想反查是哪次改動(dòng)引起的根本無從下手。變更清單里的每一項(xiàng)都要能對(duì)應(yīng)到具體的提交或者合并請(qǐng)求這是發(fā)布說明和版本臺(tái)賬能打通的關(guān)鍵。5.2 臺(tái)賬要記錄的是事實(shí)不是計(jì)劃版本臺(tái)賬和發(fā)布計(jì)劃是兩回事。計(jì)劃寫的是打算發(fā)什么臺(tái)賬寫的是實(shí)際發(fā)了什么。臺(tái)賬里每一條記錄至少包含版本號(hào)、制品哈希、發(fā)布環(huán)境、發(fā)布時(shí)間、操作人、對(duì)應(yīng)的發(fā)布說明編號(hào)、灰度批次或者流量比例、當(dāng)前狀態(tài)。狀態(tài)包括已發(fā)布、已回滾、已下線狀態(tài)是追加變更的不能直接改歷史記錄。為什么強(qiáng)調(diào)記錄事實(shí)因?yàn)槭潞髲?fù)盤時(shí)人們回憶的內(nèi)容往往和實(shí)際情況有偏差。我記得那次只發(fā)了后端結(jié)果臺(tái)賬一查前端也發(fā)了。有了臺(tái)賬爭論就變成了查表。我在項(xiàng)目里推行臺(tái)賬之后最直觀的變化是事故復(fù)盤會(huì)的時(shí)間縮短了一半因?yàn)椴辉傩枰〞r(shí)間確認(rèn)當(dāng)時(shí)發(fā)了什么直接看記錄。臺(tái)賬最好和發(fā)布系統(tǒng)聯(lián)動(dòng)能自動(dòng)寫入的就別讓人手填。手填的數(shù)據(jù)必然會(huì)漏、會(huì)錯(cuò)而且填的人覺得這是額外負(fù)擔(dān)。自動(dòng)采集加上人工補(bǔ)充關(guān)鍵字段比如回滾原因、影響范圍是可持續(xù)的做法。5.3 版本一致性要能自動(dòng)校驗(yàn)前面所有的規(guī)則最終都要落到三個(gè)地方對(duì)得上線上實(shí)際運(yùn)行的版本、制品庫里的制品、臺(tái)賬里的記錄。這三個(gè)地方任意兩個(gè)對(duì)不上就意味著有一環(huán)失控了。所以規(guī)定里要包含定期校驗(yàn)的要求最好做成自動(dòng)化任務(wù)。校驗(yàn)邏輯并不復(fù)雜從線上采集實(shí)例版本去制品庫查詢?cè)摪姹臼欠翊嬖谌ヅ_(tái)賬查詢是否有對(duì)應(yīng)記錄且狀態(tài)一致。不一致就告警。這條告警的價(jià)值在于它能在問題爆發(fā)之前發(fā)現(xiàn)流程漏洞。比如某次有人繞過流水線手工發(fā)包線上版本和臺(tái)賬就對(duì)不上校驗(yàn)任務(wù)當(dāng)晚就會(huì)報(bào)出來。我在一個(gè)項(xiàng)目里加上這個(gè)校驗(yàn)之后第一次運(yùn)行就發(fā)現(xiàn)了三個(gè)歷史遺留的不一致其中一個(gè)已經(jīng)存在了半年多誰也不知道那份代碼是怎么上去的。校驗(yàn)結(jié)果的處置也要有規(guī)定發(fā)現(xiàn)不一致必須在規(guī)定時(shí)間內(nèi)處理處理方式只有兩種要么補(bǔ)齊記錄要么把線上版本糾正到與記錄一致。不允許先放一放因?yàn)榉乓环潘蜁?huì)變成一個(gè)沒人敢碰的歷史遺留。6. 制度怎么推下去模板、流水線和例外登記6.1 從最小可行的模板開始制度推不動(dòng)十有八九是因?yàn)橐婚_始就寫得太全。我見過幾十頁的版本管理規(guī)定發(fā)下去沒人看因?yàn)槔锩嬉话氲膬?nèi)容和當(dāng)前團(tuán)隊(duì)的實(shí)際流程無關(guān)。更可行的做法是先做最小版本規(guī)定版本號(hào)格式、規(guī)定 Tag 不可變、規(guī)定制品不可覆蓋、規(guī)定發(fā)布必須有發(fā)布說明。就這四條覆蓋了最常見的混亂來源而且執(zhí)行成本低。模板比文字規(guī)定更能約束行為。把版本號(hào)格式做成提單模板的必填字段并帶格式校驗(yàn)把發(fā)布說明做成固定表單把回滾方案做成必填項(xiàng)這些東西比寫十頁應(yīng)當(dāng)如何如何有用得多。人在填表的時(shí)候被動(dòng)遵守規(guī)則比讀完文檔再主動(dòng)遵守的成功率高得多。起步階段允許有例外但要登記。規(guī)定里寫清楚例外的申請(qǐng)方式、審批人、以及事后要在多少天內(nèi)補(bǔ)齊。例外不是違規(guī)而是有意識(shí)的偏離登記了就能追蹤不登記就成了失控。6.2 把規(guī)則嵌進(jìn)流水線而不是寫在文檔里這是我踩過最大的一個(gè)認(rèn)知坑。早期我以為只要文檔寫得清楚大家就會(huì)照做。實(shí)際情況是人在趕進(jìn)度的時(shí)候文檔永遠(yuǎn)排在最后。后來我把能自動(dòng)化的規(guī)則全部嵌進(jìn)流水線分支名不符合規(guī)范流水線直接失敗版本號(hào)格式不對(duì)構(gòu)建階段就攔下來嘗試往制品庫推送已存在的版本直接報(bào)錯(cuò)單獨(dú)構(gòu)建正式版本而不關(guān)聯(lián)發(fā)布說明編號(hào)不允許歸檔。規(guī)則一旦變成流水線的失敗條件它就有了強(qiáng)制力。文檔負(fù)責(zé)解釋為什么流水線負(fù)責(zé)保證必須做兩者分工明確。這樣做還有一個(gè)好處新同學(xué)不需要通讀文檔就能上手因?yàn)樗峤坏拿恳徊蕉紩?huì)被系統(tǒng)校驗(yàn)出錯(cuò)時(shí)的提示就是最好的培訓(xùn)材料。當(dāng)然攔截規(guī)則要一次加一條加完觀察一段時(shí)間。一次性加太多正常發(fā)布全被攔住大家就會(huì)想辦法繞過反而破壞了制度的權(quán)威性。我一般是在某類問題連續(xù)出現(xiàn)兩次以上之后再把它變成自動(dòng)攔截這樣每次攔截都有現(xiàn)實(shí)依據(jù)團(tuán)隊(duì)也更容易接受。6.3 例外和復(fù)盤要形成閉環(huán)再完善的制度也會(huì)遇到例外比如緊急故障需要立刻修復(fù)。規(guī)定里要留一條快速通道但這個(gè)通道的代價(jià)是必須在限定時(shí)間內(nèi)補(bǔ)齊全部記錄包括發(fā)布說明、臺(tái)賬和回滾方案。緊急不是豁免記錄的理由緊急只是允許你先做后補(bǔ)。每隔一段時(shí)間要復(fù)盤一次版本相關(guān)的問題看看是規(guī)則缺失還是執(zhí)行不到位。如果是規(guī)則缺失就補(bǔ)規(guī)則如果是執(zhí)行不到位就看看能不能自動(dòng)化攔截。這個(gè)循環(huán)跑起來之后制度才會(huì)慢慢貼合團(tuán)隊(duì)的實(shí)際而不是一份寫完就沒人碰的文件。我個(gè)人的體會(huì)是版本管理規(guī)定最忌諱一次成型、長期不變它應(yīng)該像代碼一樣被維護(hù)和迭代每次出事都是它進(jìn)化的機(jī)會(huì)。最后分享一個(gè)我一直在用的小技巧把當(dāng)前各環(huán)境的版本號(hào)做成一頁隨時(shí)可查的面板放在團(tuán)隊(duì)最常打開的地方。這一頁不需要復(fù)雜的權(quán)限所有環(huán)境、所有實(shí)例的版本一目了然。很多關(guān)于版本的爭論本質(zhì)上是因?yàn)樾畔⒉煌该饕坏┐蠹铱吹亩际峭环輸?shù)據(jù)討論就會(huì)從你說是多少變成數(shù)據(jù)上是多少溝通成本一下子就降下來了。這件事我做了之后最明顯的變化是再也沒人問我線上現(xiàn)在是什么版本了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲黄色影视| 欧美精品久久久久久视频观看| 五月天精品综合在线| www.91九色| 丁香五月成人自拍| 九九99香蕉在线视频播放| 99爱精品视频| 久久3p| 五月婷婷激情综合| 色丁香五月| 久久欧洲久久| 国内久久久精品99| 欧美槡BBBB槡BBB少妇| 五月丁香六月在线| 成人视频婷婷| 久久婷婷五月综合啪| 九九久久五月天综合伊人| 偷拍丁香九月激情| 色色色色欧美| 另类在线免费视频| 综合久久狠狠| 色欲AVV| 天天日天天干天天操| 丁香五月激情五月| 日日噜狠狠色综合久| 九热在线这里有精品6| 日韩黄色网络| 婷婷五月天奸女| 91精品刘玥| 另类激情中文| 色色五月天婷婷| 天堂中文国产| 欧美影院婷婷| 久久性爱视频| 日本熟妇乱妇熟色A片蜜桃| 亚洲成人av在线| 99热在线只有精品| 99热丁香| 99久久综合网| 99激情| 丁香五月在线播放| 免费无码毛片一区二区A片| 超碰在线观看99| 婷婷五月情| 六月婷婷激情小说网| 秋霞学生妹一二级| 伊人丁香花综合影院| 五月人人丁香婷婷五月人人丁香| 欧美va| 五月丁香啪啪网| 79色色色色| 999热在线视频| 色综合久久久无码中文字幕999| 99国产精品久久久久久久久久久 | www.久久久.com| 婷婷久久婷婷色五月| 97ai婷婷| 91九色超碰| 九九色综合九九色| 亭亭色网| 亚洲激情婷婷| 五月婷婷婷婷婷婷艺术| 中文精品久久久久人妻不| 九月色婷婷综合亚洲| 五月丁香久久久久| 五月久久婷婷成人网| 色色综合日韩| 99综合网| 天天爽天天操| 婷婷五月综激情| 麻豆123区| 亚州操操| 久色88| 亚洲无AV在线中文字幕| 五月激情综合网| 五月天综合图片| 九热在线这里有精品6| 4399伦理午夜| 色欧美日| 伊人五月天久久| 最近韩国日本免费高清观看| 丁香五月成人| 网站免费一站二站| 超碰色碰碰| 99热国品| 66精品国产成人| 婷婷区日本| 久久五月天色| 三级毛片视频| 婷婷五月综合网| 色99视频| 亚洲AV网站| 视频久久9| 婷婷丁香综合网| 丁香五月综合| 色99视频| 欧美成人精品A片免费一区99| 精品色| 狼人婷婷久久| 五月婷婷影院| 丁香久久| www色色com| 久热 91| 天天摸天天舔天天天天爽| renre人人操国产超碰在线| 天天爱天天做天天日| 91超级碰在线| 大香蕉五月天婷婷丁香91| 色约约视频一区二区三区四区五区| 国产av天堂| 久久HD| 九九这里都是精品| 九九热精品视频在线观看| 777色色色| 久操热线| 九九Av| 成人av免费观看| 激情婷婷五月| 久久成人精品视频| 夜夜操天天爽| 五月丁香婷婷六月| 天天爱天天操| 久99久在线| 亚洲另类电影| 天天插天天插| 国产亚洲99久久精品熟| 婷婷性爱视频在线| 亚洲av免费在线| 操碰99| 五月色网| 婷婷五月天激情综合| 熟女激情网| 天天肏天天插| 亚洲色情在线| 99干视频| 国产免费一区二区在线A片视频| 大香蕉综合| 丁香色婷婷| 天天做天天爱| 亚洲AV久久久久久久久久久久久久久久 | 678五月丁香亚洲综合| 久月丁香爱婷婷综合| 日韩黄黄| 四色AVwww| 九九这里有精品| 婷香五月激情视频| 婷婷色网| 狠狠色噜噜狠| 高清无码入口| 日本波多野结衣视频| 99热九九九九| 99操久久| 色情激情五月| 久久电影4399| www.色五月| 香港九九六区八区99| 丁香六月婷婷开心婷婷网| 手机在线日韩视频中文字幕| 十月丁香婷婷| 激情五月天在线免费美女视频| 996热re视频精品视频| 成人看片网站| 午夜在线成人网站免费观看| 97操在线视频| 婷婷五月天亚洲丁香| 色综合另类| AAA久久| 熟妇人妻中文字幕无码老熟妇 | 99只有这里有精品在线视频| 婷婷成人五月天成人文学| 99热久久这里只有精品| 国产.亚洲.欧洲视频在线| 婷婷五月激情四月综合 | 丁香桃色网| 日本不卡中文字幕| 色五月亚洲| 97碰碰碰| 内射丰满人妻| 丁香九月婷| 国产精品扒开腿做爽爽爽A片唱戏 亚洲爆乳无码精品AAA片蜜桃 | 天综合日日夜综合7799| 天天五月香欧美| WWW.色婷婷.COM| 婷婷五月天AV在线| 久久大大香| 久久久久网站| 婷婷亚洲色| 亚洲成人五月天| 欧州婷婷五月天综合| 成人丁香色| 色婷婷深爱五月| 五月丁香婷婷网在线在线| 久久久天堂国产精品女人| 伊人丁香五月婷婷潮吹| 夜夜天天久久婷婷| 综合婷婷| 九九九午夜视频| henhencao国产在线| 天天综合中文| 亚洲精品又粗又大又爽A片 | 97久久超碰| 丁香五月婷婷天| 97干在线| 99啪啪网| 五月婷婷片| 国产这里只有精品| 1024日韩| 五月天激情图片| 操逼电影免费看| 成人五月天婷婷| 五月天综合| 老美AA片| 欧洲激情五月天婷婷| 激情綜合網址| 97人妻碰碰碰碰碰久久久久久| 欧美99热| 五月婷婷深深爱| 久久大香蕉伊人| 色婷婷成人影片| VA色婷婷| 五月丁香啪啪综合网| 九一99| 中文字幕欧美日韩VA免费视频| 综合99综合久久久久久久| 婷婷五月天欧美图片在线播放电驴| 女人天堂AV| 色老久久| 亚洲人成色A777777在线观看| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 夜精品无码A片一区二区蜜桃| 久色激情| 丁香五月人妻| 精品99在线看| 国产avapp 网| 97热精品| 99精品热视频| 99热主页日本| 婷婷中文在线| 丁香久久| 精品久久99码| 蜜桃婷婷五月| www.夜夜操| 综合亚洲六月婷婷在线| 五月天婷婷久久视频| www99精品| 色色日本欧美| 国产免费AV网站| 丁香五月天激情综合| 91干在线视频| 婷婷五月婷婷| 激情综合九月| 99热这里只有精品16| 色婷操逼| 深爱五月婷婷| 丁六月激情| 一本色道久久综合狠狠躁小说| 我爱大香蕉| 婷婷久月| 婷婷四月 成人 狠狠干| 亚洲视频在线观看| 永久地址 色| 碰超亚洲| 99精品综合视频| 久久狠婷婷| 狠狠五月天| 99色.com| 91se在线视频| 色9色| 久久99热网| 免费观看的AV| 婷婷久久在线| 91色久| 狠狠操.com| 亚洲综合在线视频| 亚洲国产精品综合色区| 久久嘟嘟丁香| 人妻无码精品一区| 丁香五月婷婷成人色区| 黄色短视频在线观看| 99热a片免| 日韩另类在线观看| 六月丁香五月天| 26UUU| 99国产精品白浆在线观看免费| 五月婷婷和六月| 97夫妻超碰| 五月婷婷视频ab| 91女人18毛片水多国产| av在线观看网站| 欧美婷婷六月丁香综合色| 91狠狠综合久久久| 色播五月丁香| 外国碰视频网站97| 夫妇交换刺激做爰| 天天爽天天| 大香蕉精品视频| 99爱爱| 狠狠操狠狠狠| 五月丁香色婷婷久久| 成人精品在线| 色丁香五月综合网| AV在线免费播放| 无码99| 成人视频婷婷| 色丁香五月天射婷婷爱婷婷| 超级碰碰一区| 尔尔AV一区| 丁香婷婷久久老熟女综合网| 国产精品视频| 深夜婷婷 丁香| 五月婷婷九九热| 五月天婷婷三级黄| 欧美日韩五月婷婷| 激情99| 国产婷婷五月色情综合| 综合五月草| 色婷婷中文| 九九热10| 乱色色色| 日日操夜夜爽白洁| 六月丁香天堂| 99热这里有精品| 天天日天天色| 99视频精品8 | 天天干天天干天天干天天干天天干天天干天天| 99啪啪网| 五月婷婷激情啪啪| 狠狠色色| 久99久热| 丁香五月激情啪啪| 求可以看的AV网址| 午夜大香蕉| 免费一区二区三区| 激情五月婷| 婷婷欧美| 欧美成人日韩| www.91av.com| 丁香五月天激情综合| 丁香婷婷成人网| site:xiongshengzz.com| 伊人激情综合| 四川BBB搡BBB搡多人乱亂| 这里只有精品久久| 亚洲激情精品| 激情丰满熟妇五月| 66精品国产成人| 99伊人婷婷在线| 香蕉AV777XXX色综合一区| 日韩另类在线观看| 玖玖热视频| 五月六月激情婷婷| 色墦五月丁香| av在线中文| 婷婷五月精品| 亚洲狠狠色丁香婷婷综合久久| 情情五月天色| 天天爽夜夜爽夜夜爽精品| 超碰在线播放免费观看| 婷婷色色网站| 国产FREESEXVIDEOS性中国| 天天操无码| 99免费| 婷婷丁香五月激情图片| 中文字幕丰满乱孑伦无码专区| 婷婷99狠狠躁天天躁中文| 97成人操| 成人五月天综合网| 国产SUV精品一区二区6| 精品亚洲国产成AV人片传媒| 97人人超| 精品久热| 91碰碰碰| 激情六月婷婷| 超碰av在线| AV九九| 91综合色| 中文色婷婷| 天天天在线观看| 这里只有精品视频99| 99热青青草原| 五月天激情图| 99re这里只有精品在线观看| 丁香五月成人在线| 99re思思精品在线观看| 色播丁香婷婷五月激情| 激情五月,深深爱五月| 久久天堂女人| 超碰自拍天堂| 日本理论久久| 天天se在线视频| 五月丁香婷婷综合网色欲| 亚洲精品无码A片一区二区| 99久久国产宗和精品1上映| 丁香五月综合| www免费在线视频| AA片在线观看视频在线播放 | 五月婷丁香| 亚洲99综合| 婷婷五月电影院| 91丁香五月| 五月停停999| 伊人狠狠丁香婷婷综合尤物| 一逼色综合| 大香蕉手机视频| 天天做天天爱天天搞| 思思久久99热| 色婷婷色五月丁香| 五月天色视频| 亚洲天堂色色| 99精品国产热久久91色欲| 另类小说五月天| 99热在这里只有精品| 色情五月综合婷婷| 欧美性猛交99久久久久99按摩| 欧美情色电影一区二区| 性爱五月婷婷| 99热老网站| 在线国产精品色| 无码中文一区二区三区| 天天射色五月天| 丁香五月天堂| 99精品性爱| 天天做天天爱天天高潮| 色啪久| 婷婷玖玖丁香| www.激情五月天。com| www.天天干.com| 中文字幕日韩无码制服诱或| 日韩五月丁香| 天天狠天天叉| 九九成人电影婷婷| 婷婷五月天丁香社区| 97操视频| 影音先锋 91工厂| 日韩操| 激情综合色图| 99国产精品久久久久久久久久久| 激情碰碰碰| 亚洲AV中文在线| 九九免费视频在线| 丁香六月婷婷色XXXXX| 人妻精品在线| 激情玖玖sh| 97爱综合| 成人视频九九| 久碰久操| 甈你aaaaa| 久久小视频| 二色av| 超碰2021| 性色人人爽| 六月丁香婷婷在线波多 | a性生活久久无| 中文AV在线观看| 日韩人妻无码一区二区| 操骚货在线| 日日干天天爽| 亚洲天堂有码| 九九视频这里只有精品在线播放| 思思热在线精品视频| 婷婷免费视频| 97爱综合| 爱草视频在线| 婷婷中文在线| 99热亚州综合| 亚洲激情 久久| 激情婷婷六月天| 26uuu国产| 9热在线视频精品| 欧日美女Va| 亚州色色色| 91精品久久久久久77777| 超碰成人在线免费观看| 五月婷婷就去色| www.五月天婷婷| 99视频在线观看地址| 五月丁香自拍| 国产精品热搜丁香五月婷婷| 久久xx| 4438成人电影| 丁香色五月婷婷91桃色| 久久ww| 激情图片99| 六月丁香婷婷开心综合基地| 亚洲婷婷免费| 五月丁香婷草| 婷婷播5月| 97夫妻超碰| 天天肏视频| 色99热| 99色爱| 丁香六月婷婷久久综合| 久碰久操| 123草逼网| 7777久久亚洲中文字幕| 777精品成人a v久久| 五月色网| AAA久久久AAA久久久AAA| 亚洲一区二区无码蜜乳av| 婷香五月激情视频| 六月撸婷婷| 五月婷婷六月丁香综合| 色九四色| 亚洲综合婷婷| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 婷婷九九色| ,99视频久久| 五月天婷婷视频| 婷婷色中文| 色婷婷久综合久久一本国产AV| 欧美人与性动交CCOO| 4399在线日本A片| 五月婷在线观看| 秋霞九九无码| 色色丁香激情五月| 六六久久黄色| 色婷婷五月天在线| 极骚大香蕉伊人| 狠狠色综合777| 五月婷婷色| 激情五月天视频| 伊人五月婷婷| 色五月色五天色情网| 婷婷五月丁香基地在线视频官网| 国产成人+综合亚洲+天堂| 五月 激情视频| 色婷婷亚洲婷婷在线观看| 亚洲激情六月丁香| 亚洲va在线∨a天堂va欧美va| 日韩啪啪视品| 男人的天堂五月丁香| 亚洲中文AV| 综合网五月天123| 极品精品一区二区三区在线| 日日操,夜夜爽| 激情五月天婷婷播播久久综合91| 五月丁香基地| 丁香五月熟女| 亚洲婷婷欧美婷婷| 亚洲激情综| 丁香六月色婷婷| 婷婷永久在线| 亚洲va成人va成人va在线观看| 99精品在线播放| 婷婷丁香色五月| 色狠狠狠干| www色婷婷| 99精品这里只有免费视频| 丁香五月婷婷色| 五月婷婷色丁香| 五月天综合在线网| 天天草天天摸| 日本一级一片免费视频| 婷婷五月天开心网| 五月综合亚洲| AV在线不卡网站| 欧洲色色| 丁香五月激情宗合| 不卡的AV网站| 五月天狠狠网| 无码人妻电影| 99国产精品久久久久久久久久久| 五月丁香婷庭在线| 五月婷婷丁香啪啪| www婷婷| 亚洲 在线 性爱 | 激情丁香久久| 久久久8| 全网最新网黄大秀直播高清,主播国产录屏在线 | 色色色网站| 2w在线视频| 丁香婷婷午夜| 五月天久久婷婷| 逼逼AV| 91综合在线观看| 丝袜人妻| 日在线V视频在线播放| 婷婷五月综合免费在线| 午夜成人天堂久久无码日韩久久| 99无码免费视频| 久久月天堂| 美欧日韩国产成人在战| 五月天堂婷婷| 欧美大道不卡| 超碰人妻在线| 色五月婷婷五月天激情综合| 91Chinese在线| 99热99艹在线观看| 综合狠狠干| 这里只有精品热| 4399精品一区二区| 婷婷五月天小说网| 婷婷五月天激情丁香| 日本视频99| 国产亚洲成AV人片在线观黄桃| 色色色色色色色色网站| 99 热| 高清免费在线视频| 99自拍视频在线观看| 亚洲天天综合| 无码四色色色| www.com任你艹| 九九热AV| 国产无人区大片| 色综合五月婷婷狠狠干| 香蕉狠狠爱视频| 亚洲 精品 综合 精品| 九九视频在线| 五月六月婷婷| 在线,国产,色,热视频| 婷色视频| 欧美日韩二区在线| 五月天婷婷激情在线色图| 秋霞三及片| 99精品视频免费在线播放| 综合网网欲色| 日韩乱轮AV| 五月丁香婷婷在线| 丁香六月在线| 白天AV月月| 99ri精品| 九九综舍久久| 伊综合蕉| 国产成人精品亚洲线观看| 91九色丨国产丨爆乳| 伊人五月丁香| 激情五月综合色婷婷| 色99日韩| 五月天伊人久久久久| 成人在线观看精品| 思思99热| 五月天社区| 亚洲国产99| 99福利视频| 婷婷五月天视| 色色婷婷五月天| 色婷亚洲五月丁香| 五月丁香六月综合图| 亚洲色五月| 色色色色色色色色综合网| 日本色五月| 婷婷五亚洲| 激情伊人五月婷婷久久| 九九热这里有精品视频| 大香蕉精品视频| 人人插9| 97丁香视频| 亚洲免费综合一区| 中文字幕丰满孑伦无码专区| 在线播放中文字幕| 六月综合婷婷开心伊人| 成人午夜无码视频| www.99热国产| 狠狠干天天内射| 婷婷综合五月天| 97热精品| 91ncm视频| 婷婷狠狠97| 中文字幕+中文在线| 亚洲日比视频| 五月婷婷性爱网| 新激情五月天| 北条麻妃伊人 | 天天狠狠夜夜狠狠2023| 色九九综合| 色欲久久综合| 丁香六月五月天| 99熟女| 91丨九色丨国产打屁股| 99精品热| 丁香婷婷啪啪| 欧美精品中文字幕亚洲专区| 极品人妻VIDEOSSS人妻| 欧美槡BBBB槡BBB少妇| 99精品国产乱码久久久人妻| 国产精品久久久久9999小说| 日韩ww| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 色色com| 精品99视频| www.久久久久久久| 国产超碰在线| www.婷婷| 伊人婷婷福利网| 91美女啪啪| av成人在线播放| 狼人婷婷久久| 色狠狠五月天| 五丁香激情综合| 久热这里只有精品视频6| 五月丁香婷婷激激激综合网色播| 亚洲色情网站| 极品另类| 99久在线精品99re8热| 色99在线| 五婷婷综合网| 色情五月| 九九色婷婷| 九九99视频精品| 婷婷五月天a| 天天综合中文| 欧洲毛片基地c区| www久久久| 天堂美国久久| 9久国产| 丁香五月精品视频| 中出内射的人妻视频| 玖玖精品视频| 99热久| 久在线88综合| a色婷婷| 五月天激情综合在线| 精品无码人妻一区| www.国产色| 国产欧美第五十五页| 97av在线视频| 天天视频精品9| 五月丁香大相交| 色色色视频| 99国产这里只有精品| 97在线/亚洲| 婷婷五月色| 超碰99成人在线| 婷婷视频网| 91小黄书网址在线观看| www,色婷婷| 中文幕无线码中文字蜜桃| 91九色PORNY中文啦| 超碰精品在线| 久久九九蜜| 影音先锋噜一噜| 超碰97在线操| 日本一级| 五月婷婷五月天亚洲无码| 91婷色| 久久se 综合网| 丁香九九九九| av免费人人| 久婷五月| YW无码| 日韩免费乱轮网站| 激情五月天综合婷婷网| 五月丁香综合激情| 91人人超碰在线| 26UUU欧美激情一区二区| 99热1| 五月四色激情| 91丨九色丨大屁股| 五月婷婷丁香俺日污视频| 色婷婷99| 日韩啪| 五月天婷婷丁香社区| 夜夜撸日日操| 久久99精品久久久久久三级| 操日本人妻视频| 亚洲欧美成人在线| 日本欧美999久久久三级片| A一级操| 97在线刺激| 三日本无码| 激情小说婷婷小说| 婷婷五月综合久久中文字幕| 婷久久久| 免费精品66| 色三级色三级| 天天艹| 亚洲一区先锋影音| 激情综合五| 国产激情在线| 婷婷五月天狠狠| 玖玖在线视频| 九九碰九九爱97超碰| 激情综合激情综合| 五月婷婷伊| 五月婷婷丁香五月亚洲色| 色五月综合激情| 99热99天堂| 深爱1激情网| 国产真实乱了老女人视频| 五月婷婷色情| 五月婷婷影院| 九九热99在线视频| 五月丁香六月花| 亚洲成av人影院| 视频综合网| 成人精品在线| 色综合久久88色综合天天看| 九九视频在线观看| 激情五月婷婷色综合| 91视屏在线观看com.wwwvv| 五月丁香五月婷婷| 亚洲中文字幕AV| 色爽九九| 中文字幕激情综合| 亚洲色网址| 欧美69色| 99热.com| 在线综合91| 国产色色色色| 欧美日韩国产成人在线| 日本五月视频| 岛国AAAV| 开心五月深爱激情| 91人妻九色大屁股| 五月天激情婷婷小说| 精品一二三区久久AAA片| 99成人精品六| 偷偷与邻居做爰完整视频| 干亚洲天堂| 99热最新网址| 婷五月天在线草| 五月丁香网站| 天天拍夜夜爽日日| 欧美三9久九观看| 五月综合亚洲婷婷| 五月成人丁香av91| 国产精品视频久久99| 色婷婷色综合久久精品V| 婷婷激情五月综合丁| 8050一级网| 情婷婷五月天| 日韩精品一区二区刘| 日韩啊啊啊| 婷婷刺激综合| 激情婷婷久久| 婷婷伊人久久| 激情婷婷五月天| 丁香婷婷激情五月| 天天日天天肏天天奸| 婷婷深爱网| 丁香婷婷婷婷十二月在线观看视频| 天天狠狠干| 人人操操| 香蕉久久国产AV一区二区| 亚洲小视频免费看| 国产亚洲成AV人片在线观黄桃| 欧美色小说婷婷| 婷婷丁香色女人| 久热这里| 欧美激情综合| 国产精品18久久久| 夜夜操天天爽| 99久久97久久欧美综合网| 高清视频一区| 五月天另类小说亚洲| 成人无码髙潮喷水A片| 久久视频九九视频| yazhochengrenavwang| 亚洲欧洲国产精品| 伊人丁香六月婷婷| 热99视频精品在线| 婷婷五月天av| 丁香五月婷婷六月婷婷| 极品人妻VIDEOSSS人妻| 五月丁香在线看| 五月丁香六月激情综合| 久久99视频| 丁香欧美| 99热99极品观看| 99综合| 大陆肏屄视频| 香蕉国产2013| 99热这里有精品| 五月婷六月| 九九色图| 人人人操 超碰| 日本狠狠干| 激情影院内射| 久久精99| 精品久久99| 亚洲色vA| 婷婷五月天六点丁香五月| 极品人妻VIDEOSSS人妻| 99热这里只有精品3| 婷婷五月天久久久| 色综合久久久无码中文字幕999| 我去色色网五雨天| 亚洲天堂亚洲色色色| 久久久久久久久久久久63| 丁香婷婷五月| 情婷婷五月天| 精品久久99| 在线播放 精品| 丁香六月啪| 婷婷激情啪啪| 综合久久综合| 免费在线观看av网站| 大香蕉婷婷色| 99热久草| 丁香5月激情网| 色婷大香蕉| 丁香五月性| 天天爽天天操| 亚洲色情激情丁香五月| 91碰超| 婷婷五月丁香青青草在线| 亚洲网视屏| 五月 婷婷 成人| wWwCom夜操wwW| 狠狠 久久| 婷婷五月天在线观看| 天天色天天日天天舔| 日韩五月天婷婷| 嫩模aV在线| 九九热内射| 天天干天天干天天干| 激情五月综合| 丁香婷婷啪啪啪| 99色色网| 亚洲无码你懂的| 精品国产乱码久久久久久免费| 久青操| 色五月视频,小说| 亭亭玉立国色天香| 婷婷色五月开心五月| 思思久久99热只有频精品66| 九九热这里有精品视频| 97欧美在线| 2015在线中文字幕| 国产精自产拍久久久久久蜜| 成人在线网| 人妻精品一区二区三区| 天天插天天很| 九九色综合| 婷婷五月综合啪| 午夜微拍福利| XX色综合| 91九色网| 玖玖资源在线视频| 日韩色五月| 婷婷五月天堂| 激情五月天www| 欧美一区二区三区不卡影视| 六月丁香花婷婷| 97九色视频| 久久婷婷色综合老司机| 婷婷在线中文字幕| 99精品偷自拍| 激情亚洲色图片丁香综合| 色色色777| 五月丁香另类图片| 婷婷激情视频| 久久图色4| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 涩涩激情五月婷婷| 琪琪色网在线| 午夜精品久久久久久久爽| www九九热| 久久丁香| 激情综合久久| 天天肏夜夜肏| 欧美在线操| av在线激情| 99爱视频| 五月天激情啪啪| 99色在线| 97碰人人操| 色五月大| 综合一区二区三区| 婷婷五月天丁香社区| 婷婷婷婷婷婷婷婷| 九九热这里只有精品6| 99爱这里只有精品免费视频| 婷婷五月激情视频| 狠狠狠夜夜夜| 久久黄色片| 韩国天天婷婷| 色五婷婷开心缴| 狠狠干夜夜干| 欧美色性色好| 国产精品色色| 九九婷婷综合| 午夜色婷婷| 色激情五月| 噜噜在线| 熟女人妻一区二区三区免费看 | 色噜噜狠狠色综无码久久合欧美| 熟妇内谢69XXXXXA片| 日韩一区二区A片免费观看| 97操操网| 中文不卡av| 中文字幕成人日韩| 欧美亚洲成人在线| 99视频在线播放大全| 久久9视频欧美| 色九月| 99小精品| 六月婷婷亚洲| 天天婷婷| 超碰色色综合| 精品久久久人妻| 99热99色| 九九综合九| 九九激情| 五月天伊人综合| 九月婷婷| 天天艹夜夜爽| 五月婷六月婷婷| 中文在线成人| 激情小说视频图片| 久久婷婷五月| 五月丁香亭亭激情操逼网| 激情丁香五月| www.久久爱.com| 人妻性爱av网站| 五月婷婷综合色啪首页| 五月天色社区| 色色色婷婷五月天| 久久99久久99久久99人受| 久久激情中文| 久久九九九九| 国产 码在线成人网站| 开心四月婷婷在线色播播| 婷婷激情丁香六月| 国产这里只有精品| 五月婷综合| 七七婷婷综合| 十区AV| 五月婷婷啪啪| 婷婷播播五月天| 中文av网站| 丁香五月手机在线| W色综合| 久久精品99久久久久久| 亚洲丁香五月综合| 国语精品探花| 99碰超| 色综啪啪网| 97热在线精品| 精品婷婷五月天| 亚洲另类视频| 婷婷亚洲综合| 婷婷五月丁香成人网| 九热精品| 丁香婷婷啪啪啪| 99热综合在线| 强辱丰满人妻HD中文字幕| 任你搞在线观看视频| 婷婷色导航| 女力报到正好爱上你| 97操操| 99re资源在线视频导航| 久久多色| 五月天堂在线| 丁香六月啪| 亚洲在线网站| 操91| 五月丁香六月婷婷无码| 五月婷婷色五月| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | 久热婷婷| 久久婷婷综合拍| 五月婷婷播| 五月丁香婷婷婷激情爱爱| 午夜精品人妻无码一区二区三区| 天天肏高清在线| 婷婷六月中文字幕| 99在线视频播放| 婷婷5月久久综合网站| 五月丁香综合啪啪| 婷婷五月综合视频免费播放| 天天爽天天爽| 91日韩美女被插视频| 狠狠狠激情网| 99碰超| 色婷综合| 五月丁香啪啪激情| 激情六月婷婷| 97自拍视频网| 丁香婷婷激情五月| 五月婷婷啪啪网| 7777久久亚洲中文字幕| 亚洲激情图文小说| 久久九九@| 久久综合55| 婷婷丁香五月天欧美| 欧美日本黄色| 色色97丁香婷婷五月天| 色婷婷五月丁香在线观看| 色色免费网站| 色婷婷综合在线| 最新亚洲色色网| www.夜夜操| 日本欧美国产| 老司机日日夜夜青草| 欧美性生交xXxX久久久| 去干网av| 久久精品视频99| 色九九丁香九月色九九色| 色99综合视频| 婷婷综合激情| 操操碰| 日韩超碰在线| 婷婷激情综合色五月久久91| 婷婷激情蜜桃玖玖丁香| AA丁香综合激情| 婷婷涩五月| 婷婷综合视频| 91亚洲免费片| 五月天激情社区| 国产真实乱对白精彩| 成人天天爽| 99在线精品观看99| 五月天婷婷香蕉狠狠超碰综合| 色五月婷婷影院| 欧美日韩婷婷五月天| 婷婷五月天亚洲天堂| 久久小视频| 五月丁香久久综合| 生活片五区| 成人永久免费视频在线观看| 六月综合在线| 日本97在线看片| 狠婷婷五月| 婷婷最新地址| 99热在线这里只有精品| 欧美性生交XXXXX无码小说| 丁香五月天激情婷婷丁香六月| 色婷婷av在线观看| 99re热在线视频| 亚洲综合1024| 99操逼视频| 综合婷婷久久| 五月丁香婷婷中文| 91精品婷婷国产综合久久| 99热最新精品| 婷婷射丁香| 五月婷婷三级| 久久激情五月| 涩五月婷婷| 狠狠色狠狠操| 另类的婷婷| 九九色逼| 千人斩操逼| 日本人妻伦在线中文字幕 | 激情五月天在线观看色婷婷| 性色五月天| 狠狠草天天草| 欧美内射AAAAAAXXXXX| 激情网站综合五月天| 九九视频在线观看视频6| 色综合久久88色综合中文字幕| 这里只有精品96| 99综合一区| 婷婷激情四射五月天| 色五月综合资源推荐| 国产老熟妇亲子乱对白| 大香蕉五月天| 亚洲成人网无码| 精品一二三区久久AAA片| 亚洲色频| 五月香婷婷| 欧美婷婷丁香五月社区| 久久精品性爱| 色播五月丁香婷婷| 天堂在线观看视频| 人妻操逼视频| WWW.久久久久久久| 婷婷五月丁香香蕉| 九九热九九| 丁香五月婷婷激情97| 日日.c| 婷婷操超碰| 久久精品人妻| 天天综合天天玩夜夜玩天天玩夜夜玩| 99欧美精品99日本精品| 久久九九热视频| 五月丁香亭亭操逼| 久操热线| 天天成人综合视频| 婷婷日本色| 日本99视频| 风流少妇A片一区二区蜜桃| 亚洲五月天狠狠| 丁香婷婷综合影院| 成人综合视频在线| 狠狠艹狠狠艹| 天天色中文字幕女优AV| 日日操夜夜撸| 91丨九色丨国产打屁股| 图片区 小说区 区 亚洲五月| 婷婷六月五月天综合| 琪琪色热色色| 亚洲欧美成人在线| 中文网av| 9久热在线视频精品| 国产精品美女| 激情五月婷婷综合色播小说| 干一干xxxx| 99精品在线播放| 婷婷开心激情五月激情网| 狠狠操综合| 噜噜噜噜在线| 色五月婷婷自拍| 天天做天天爽| 99网| 婷婷激情小说网| 超碰操日| 97人人干人人操| 日夜夜天天| 色婷婷a v| 国产精品久久久久久久久久免费| www夜夜| 亚洲VA欧美VA| 超碰在线观看caop| 婷婷色综合| 激情亚洲网| 99视频内射三四| 天天婬色综合| 五月丁香婷婷综合网| 深爱婷婷丁香五月激情| 中文字幕在线观看视频www| 人人操人人妻| 第四色五月天| 热久久99热欧美国产亚洲| 99热色无码| 亚洲AV另类| 国产精品99久久久久久久女警| 激情网五月天| 26uuu国产精品| 亚洲成人高清在线| 99九九这里有免费视频| 欧美一级色| 99久久玖玖| 午夜理论片最新午夜理论剧| 亚洲精品网址| 亚洲精品一区中文字幕乱码| 91狠狠色色丁香婷婷综合久久| tingtingzonghewang| 色色爽爽天天| 激情网色五月| 无码免费人妻A片AAA毛片西瓜 | 久久香视频| 色综合婷婷| 日本爆乳片手机在线播放| 秋霞网在线观看理论91| 精品人人操| 91色色色视频| 亚洲精品国产熟女久久久| 精品人人操| 五月激情六月综合| 九九成人精品| 异能之下短剧免费观看全集| 极品九九九九九九| 九九色情网站| 五月婷婷激情综合| 狼人婷婷久久| 五月天综合激情网| 五月激情综合五月| 超碰久热| 久热99热| 九九综合88| 五月J香蕉婷婷| 狠狠色婷婷7777久| 色综合久久88色综合天天99| 欧州色色| 热的无码综合视频| 26uuu淫色| 色99视频| 六月婷婷久久| 亚洲色基地| 久久婷婷网址| 日逼影音先锋男人AV资源站| 欧美色五月| 色色A| 国产亚洲99久久精品|