欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

UFS 3.1協(xié)議深度解析:從分層架構(gòu)到WriteBooster與HPB實(shí)戰(zhàn)

UFS 3.1協(xié)議深度解析:從分層架構(gòu)到WriteBooster與HPB實(shí)戰(zhàn) 1. 項(xiàng)目概述與核心需求解析1.1 為什么要寫UFS 3.1協(xié)議分析UFSUniversal Flash Storage通用閃存存儲在移動設(shè)備和嵌入式系統(tǒng)里已經(jīng)全面普及這幾年從UFS 2.1到UFS 3.0再到UFS 3.1中間還穿插著UFS 2.2這種過渡版本整個演進(jìn)節(jié)奏非常快。我最初接觸UFS 3.1協(xié)議分析的時候手頭正好在做一款旗艦級移動平臺的存儲子系統(tǒng)適配芯片端的主控和UFS 3.1的Flash顆粒之間頻繁出現(xiàn)鏈路協(xié)商異常、命令超時和吞吐量不達(dá)標(biāo)的問題。那時候才發(fā)現(xiàn)光會調(diào)驅(qū)動、看日志遠(yuǎn)遠(yuǎn)不夠必須真正理解協(xié)議層的機(jī)制尤其是UFS 3.1相比老版本引入了哪些新特性、這些新特性又依賴哪些協(xié)議字段和交互流程才能真正定位問題。這篇博文我想做的事是把UFS 3.1協(xié)議分析中最基礎(chǔ)也最關(guān)鍵的框架性內(nèi)容整理出來。它不是一個完整的JEDEC規(guī)范翻譯也不是針對某個廠商主控的調(diào)試手冊而是從協(xié)議分層的視角把UFS 3.1是什么、為什么需要它、它如何工作、調(diào)試時需要盯住哪些點(diǎn)講清楚。適合的讀者包括剛進(jìn)入存儲行業(yè)的嵌入式軟件工程師、做移動平臺BSP底層的同學(xué)、以及需要跟Flash廠商和主控廠商打交道但協(xié)議底子不厚的系統(tǒng)工程師。在展開細(xì)節(jié)之前先用一句話概括UFS 3.1的本質(zhì)UFS是一套完整的“主機(jī)端控制器 協(xié)議命令集 物理鏈路”三位一體的閃存存儲方案3.1版本則是在3.0高速傳輸能力之上補(bǔ)齊了一組面向隨機(jī)讀寫性能、低功耗、大容量場景的增強(qiáng)特性。整個協(xié)議??梢圆鸪扇龑觼砜磻?yīng)用層UFS Command Set、傳輸層UTPUFS Transport Protocol、互連層UICUFS Interconnect每一層都有自己的職責(zé)也是排查問題時的分層邊界。1.2 項(xiàng)目拆分與章節(jié)規(guī)劃我計(jì)劃把UFS 3.1協(xié)議分析分成四個章節(jié)來處理這次先聚焦第一章到第四章的整體脈絡(luò)第一章UFS概述與系統(tǒng)架構(gòu)。搞清楚UFS在系統(tǒng)里的位置、主機(jī)側(cè)和設(shè)備側(cè)的組成、協(xié)議分層模型。第二章傳輸層與命令機(jī)制。深入UPIUUFS Protocol Information Unit、命令描述符、數(shù)據(jù)傳輸流程。第三章物理層與鏈路管理。包括UniPro、M-PHY、鏈路啟動、速率協(xié)商和功耗狀態(tài)切換。第四章UFS 3.1新特性與工程實(shí)踐。分析WriteBooster、HPB、DeepSleep等增強(qiáng)功能在真實(shí)項(xiàng)目里怎么用、怎么調(diào)。這種拆法不是為了按部就班而是遵循實(shí)際工作中的排查路徑先看清系統(tǒng)全貌再定位命令通路接著查鏈路物理層最后回到特性和性能優(yōu)化。很多剛?cè)胄械耐孪矚g一上來就翻UPIU結(jié)構(gòu)體定義結(jié)果被字段淹沒遇到實(shí)際問題仍然無從下手。我比較推薦的服務(wù)順序是架構(gòu) → 命令 → 鏈路 → 特性一步步把黑盒打開。2. UFS 3.1的整體設(shè)計(jì)思路與演進(jìn)邏輯2.1 從eMMC到UFS存儲接口到底變了什么要說清楚UFS 3.1的價值得先回頭看一眼eMMC。eMMC本質(zhì)上是個并行總線接口8位數(shù)據(jù)線半雙工模式讀寫不能同時進(jìn)行。它的命令機(jī)制簡單直接——主機(jī)發(fā)命令設(shè)備執(zhí)行然后通過數(shù)據(jù)總線傳輸。但這種設(shè)計(jì)在高性能場景下很快撞到天花板并行總線頻率提升困難、信號完整性問題隨頻率上升越來越嚴(yán)重、半雙工浪費(fèi)了總線帶寬。UFS方案從誕生那天起就走了一條完全不同的路。它引入了一套類似SATA/NVMe的串行傳輸架構(gòu)底層用M-PHY做物理傳輸U(kuò)niPro做鏈路管理和協(xié)議適配。兩個lane可以同時一個收一個發(fā)全雙工模式等效傳輸效率遠(yuǎn)高于同頻的eMMC。在協(xié)議模型上UFS還參考了SCSI體系結(jié)構(gòu)模型使用命令描述塊CDB 任務(wù)管理函數(shù)的模式這讓它天然支持命令隊(duì)列、亂序執(zhí)行、多任務(wù)調(diào)度。從UFS 2.1到UFS 3.0最大的變化是HS-G4High Speed Gear 4速率的引入。M-PHY在HS-G4速率下每個lane的線速率接近11.6Gbps配合雙lane配置理論上可以達(dá)到單lane約1450MB/s、雙lane約2900MB/s的HS速率這是在考慮了8b/10b編碼開銷后的結(jié)果實(shí)際有效載荷帶寬還需要進(jìn)一步乘以協(xié)議開銷系數(shù)。這個速率等級遠(yuǎn)比UFS 2.1的HS-G3每個lane約5.8Gbps有效帶寬大約725MB/s翻了好幾倍。UFS 3.1又在這個基礎(chǔ)上做了三件大事新增WriteBooster解決寫入性能偏低的問題。它利用SLC Cache機(jī)制把隨機(jī)寫入先吸收到SLC緩沖區(qū)再后臺回寫TLC/QLC區(qū)域大幅降低前端寫延遲。引入HPBHost Performance Booster把部分FTL映射表放到主機(jī)內(nèi)存中緩存減少設(shè)備端加載映射表的開銷提升隨機(jī)讀性能。強(qiáng)化低功耗管理DeepSleep狀態(tài)讓設(shè)備在待機(jī)時可以關(guān)閉大部分模塊供電顯著降低休眠功耗。這些特性不是孤立存在的它們都依賴協(xié)議層的字段和控制機(jī)制來生效。比如WriteBooster需要擴(kuò)展UFS Descriptor中的配置項(xiàng)HPB需要專門的控制命令和UPIU類型來管理主機(jī)端映射緩存。2.2 UFS 3.1系統(tǒng)架構(gòu)與協(xié)議分層模型一個典型的UFS系統(tǒng)由主機(jī)Host和設(shè)備Device兩部分構(gòu)成。主機(jī)端包括應(yīng)用處理器上的UFS Host Controller存儲控制器IP以及配套的軟件?!狶inux內(nèi)核的ufshcd驅(qū)動、SCSI層、塊設(shè)備層。設(shè)備端則是一顆UFS IC通常整合了控制器和NAND Flash或者由獨(dú)立的控制器芯片加上多片NAND組成。從協(xié)議分層來看應(yīng)用層Application Layer定義了UFS命令集UCS、設(shè)備管理器Device Manager和任務(wù)管理器Task Manager。SCSI命令通過UFS封裝成CDB下發(fā)設(shè)備管理器負(fù)責(zé)處理描述符Descriptor、屬性Attribute、標(biāo)志位Flag的讀寫任務(wù)管理器則處理任務(wù)管理請求比如Abort Task。傳輸層UTP負(fù)責(zé)把上層請求封裝成UPIU通過UNIPRO的傳輸服務(wù)訪問點(diǎn)Data Transport Service Access PointDTSAP傳給下面。UTRDUTP Transfer Request Descriptor是核心數(shù)據(jù)結(jié)構(gòu)保存了命令相關(guān)的所有指針和狀態(tài)。互連層UIC由UniPro層和M-PHY物理層組成。UniPro負(fù)責(zé)鏈路啟動、速率協(xié)商、流控和錯誤恢復(fù)M-PHY則負(fù)責(zé)真正的物理信號收發(fā)。調(diào)試時建議用這個分層模型來隔離問題如果命令發(fā)出后沒有任何中斷回應(yīng)優(yōu)先查傳輸層和設(shè)備狀態(tài)如果命令正常但吞吐量低再到UIC層看速率協(xié)商和Lane數(shù)量如果掉電重啟后鏈路穩(wěn)定但系統(tǒng)喚醒時報錯重點(diǎn)查DeepSleep和鏈路恢復(fù)流程。3. 核心細(xì)節(jié)解析與實(shí)操要點(diǎn)3.1 UTRD和UPIU讀懂協(xié)議的兩把鑰匙整個UFS傳輸機(jī)制的核心可以濃縮成一句話主機(jī)在內(nèi)存中構(gòu)造UTRDUTRD指向一組UPIU緩沖區(qū)和PRDTPhysical Region Descriptor Table寫Doorbell寄存器通知設(shè)備設(shè)備執(zhí)行完再通過CQCompletion QueueDoorbell和中斷通知主機(jī)。這段話里包含了大量信息逐個拆開看。UTRD的數(shù)據(jù)結(jié)構(gòu)大致包括命令類型命令UPIU、任務(wù)管理請求UPIU等。數(shù)據(jù)方向讀還是寫。一個指向命令UPIU緩沖區(qū)的地址。一個指向響應(yīng)UPIU緩沖區(qū)的地址。PRDT的物理地址和條目數(shù)。總數(shù)據(jù)傳輸字節(jié)數(shù)。PRDT是DMA傳輸?shù)年P(guān)鍵。UFS采用S/G表機(jī)制主機(jī)側(cè)物理內(nèi)存未必連續(xù)系統(tǒng)可以把一次大塊讀寫拆成多個不連續(xù)的物理段每個PRD條目記錄一段物理地址和長度。設(shè)備根據(jù)PRDT拿到數(shù)據(jù)完成寫入或讀取。這里的經(jīng)典坑在于PRDT條目的地址必須是物理地址而且對齊要求很嚴(yán)格通常要求對齊到32字節(jié)或64字節(jié)具體以主控手冊為準(zhǔn)長度字段則是按塊粒度對齊。如果上層傳下來的S/G表項(xiàng)不是塊大小的整數(shù)倍底層驅(qū)動需要處理尾部部分塊這是很多寫DMA路徑的工程師容易漏掉的細(xì)節(jié)。UPIU是UFS傳輸?shù)淖钚 靶欧狻背R婎愋桶∟OP OUT UPIU用于鏈路?;詈统瑫r檢測。COMMAND UPIU承載SCSI命令CDB是正常讀寫命令的載體。RESPONSE UPIU設(shè)備返回的命令執(zhí)行結(jié)果攜帶狀態(tài)、Sense Data長度等信息。DATA IN UPIU / DATA OUT UPIU數(shù)據(jù)階段傳輸分別對應(yīng)讀和寫。TASK MANAGEMENT REQUEST UPIU承載任務(wù)管理請求。QUERY REQUEST UPIU / QUERY RESPONSE UPIU用于設(shè)備管理讀寫Descriptor、Attribute、Flag。每個UPIU都有固定的頭部結(jié)構(gòu)其中LUN邏輯單元號、Task Tag任務(wù)標(biāo)簽、Expected Data Transfer Length期望傳輸長度都是高頻使用字段。排查命令掛起問題時要養(yǎng)成先看Task Tag的習(xí)慣它能把UFS設(shè)備內(nèi)部的任務(wù)和主機(jī)側(cè)提交的任務(wù)一一對應(yīng)起來。3.2 數(shù)據(jù)傳輸流程一次讀命令的完整旅程以一次從UFS設(shè)備讀取4KB數(shù)據(jù)的命令為例完整流程如下上層文件系統(tǒng)或塊層構(gòu)造一個讀請求SCSI層生成READ(10)命令CDB。ufshcd驅(qū)動分配一個UTRD初始化命令UPIU、響應(yīng)UPIU緩沖區(qū)并把本次讀的PRDT填好。驅(qū)動把UTRD的物理地址寫入主機(jī)控制器的UTRLDBRUTP Transfer Request List Doorbell Register置位相應(yīng)bit。設(shè)備端看到Doorbell置位后通過UniPro鏈路讀取UTRD和命令UPIU。設(shè)備解析CDB訪問Flash把讀取到的數(shù)據(jù)組裝成DATA IN UPIU按總長度拆分成多幀傳輸。設(shè)備通過Host Controller的UTRLCLRUTP Transfer Request List Clear Register寄存器清掉Doorbell對應(yīng)bit并產(chǎn)生中斷。主機(jī)在中斷處理中檢查響應(yīng)UPIU的狀態(tài)字段數(shù)據(jù)已經(jīng)由Controller通過DMA直接寫入主機(jī)內(nèi)存。這個流程里面藏著幾個關(guān)鍵點(diǎn)。第一數(shù)據(jù)搬運(yùn)不完全依賴設(shè)備端“發(fā)數(shù)據(jù)包”主機(jī)控制器的DMA引擎會根據(jù)PRDT把從UniPro接收到的數(shù)據(jù)直接搬運(yùn)到系統(tǒng)內(nèi)存。第二UTRLDBR和UTRLCLR的配合是命令生命周期的主線任何一環(huán)卡住都會導(dǎo)致命令超時所以抓日志時這幾個寄存器的歷史值非常有價值。3.3 命令超時的排查思路與現(xiàn)場日志分析在UFS調(diào)試中命令超時是我遇到最多的異常類型。它的表現(xiàn)通常是上層I/O卡住系統(tǒng)日志里出現(xiàn)xxx命令請求超時如Device failed to respond或者任務(wù)管理函數(shù)失敗。排查步驟建議這樣第一步確認(rèn)命令是否真正提交到了設(shè)備側(cè)。抓取UTRLDBR寄存器狀態(tài)如果Doorbell bit一直沒有被清掉說明設(shè)備根本沒從主機(jī)取走任務(wù)。這時問題大多在UIC鏈路或者設(shè)備側(cè)電源狀態(tài)而不是命令本身。第二步查看UIC層的錯誤寄存器比如UniPro的錯誤狀態(tài)寄存器UECPA、UECDL等看是否有物理層調(diào)通、幀重傳、CRC錯誤等記錄。如果有大量CRC錯誤基本可以判定M-PHY信號質(zhì)量出問題需要檢查PCB走線、終端電阻、參考時鐘。第三步確認(rèn)設(shè)備是否處于低功耗狀態(tài)導(dǎo)致沒有及時響應(yīng)。UFS支持多種電源狀態(tài)Active、Idle、Sleep、DeepSleep如果設(shè)備進(jìn)了DeepSleep而主機(jī)側(cè)軟件沒有做喚醒動作命令下發(fā)必然超時。我在實(shí)際項(xiàng)目里碰到過一個很典型的案例系統(tǒng)頻繁休眠喚醒后偶爾出現(xiàn)UFS命令超時。排查下來發(fā)現(xiàn)喚醒路徑中主機(jī)控制器先恢復(fù)了Link但設(shè)備還在DeepSleep狀態(tài)需要額外的設(shè)備喚醒機(jī)制。后來在喚醒處理里增加了對設(shè)備喚醒狀態(tài)的檢查并在鏈路恢復(fù)前先通過DME命令把設(shè)備從DeepSleep拉回Active狀態(tài)問題就再沒復(fù)現(xiàn)過。4. UFS 3.1新特性解析與工程實(shí)踐4.1 WriteBooster的機(jī)制、配置與應(yīng)用場景WriteBooster是UFS 3.1引入的一項(xiàng)提升寫入性能的機(jī)制它的本質(zhì)是在設(shè)備內(nèi)部劃分出一塊SLC單層單元模式的緩沖區(qū)。普通TLC/QLC顆粒寫入時需要分多步編程延遲高而SLC編程只需要一到兩次延遲低得多。WriteBooster把寫入的數(shù)據(jù)先快速寫到SLC緩沖區(qū)然后由設(shè)備在后臺把數(shù)據(jù)搬移到TLC/QLC區(qū)域從而降低主機(jī)側(cè)感知的寫延遲。在Linux內(nèi)核中通過UFS設(shè)備管理器提供的bWB相關(guān)Descriptor和Attribute來配置WriteBooster關(guān)鍵參數(shù)包括bWriteBoosterBufferType緩沖區(qū)類型一般配置為SLC模式。dWriteBoosterBufferSize緩沖區(qū)大小這個值直接由設(shè)備固件決定主機(jī)只能讀取。dWriteBoosterBufferLifeTimeEstSLC緩沖區(qū)的壽命估算可以直觀了解設(shè)備的擦寫壓力。工程上需要特別注意WriteBooster的緩沖區(qū)本質(zhì)上是借用NAND壽命換性能。如果SLC緩沖區(qū)寫滿設(shè)備需要做“強(qiáng)制回寫”Forced Flush這時突發(fā)寫入會被拖慢同時在回寫過程中不能斷電否則存在數(shù)據(jù)一致性風(fēng)險。實(shí)際測試中我會用fio先做小文件隨機(jī)寫壓測觀察前幾十GB的寫入延遲是否明顯低于穩(wěn)定期再對比穩(wěn)定期寫入速度以此判斷WriteBooster是否存在配置問題。4.2 HPB的映射緩存機(jī)制與調(diào)優(yōu)心得HPB的全稱是Host Performance Booster它的出現(xiàn)是因?yàn)閁FS設(shè)備使用NAND時需要一個FTLFlash Translation Layer映射表把邏輯地址轉(zhuǎn)換成物理地址。在TLC/QLC時代映射表本身不小如果設(shè)備端每次讀命令都要查一遍映射隨機(jī)讀性能會受影響。HPB的思路是把映射表的一部分“借”到主機(jī)內(nèi)存中緩存設(shè)備通過UPIU向主機(jī)提供映射表信息主機(jī)下發(fā)讀命令時可以把對應(yīng)的映射條目一起發(fā)給設(shè)備省掉設(shè)備端查表的過程。HPB在Linux內(nèi)核的實(shí)現(xiàn)比較復(fù)雜涉及ioctl接口、hpb相關(guān)sysfs節(jié)點(diǎn)、以及UFS驅(qū)動新增的映射管理邏輯。調(diào)HPB時我踩過幾個坑主機(jī)內(nèi)存中緩存的映射表必須與設(shè)備FTL保持同步否則會產(chǎn)生讀數(shù)據(jù)錯誤。因此設(shè)備端GC垃圾回收導(dǎo)致映射變化時需要向主機(jī)發(fā)送失效通知。HPB區(qū)域不是所有LBA范圍都使能的通常只對設(shè)備指定的一段區(qū)域生效。測試時如果沒有先在設(shè)備上使能HPB區(qū)域后續(xù)所有HPB相關(guān)參數(shù)都不會生效。啟用HPB后隨機(jī)讀性能的提升不是無條件的。在映射表穩(wěn)定、碎片化程度較低的場景下提升幅度能到30%以上但如果設(shè)備本身映射表經(jīng)常更新HPB反而可能因?yàn)榫彺媸幚矶黾娱_銷。4.3 DeepSleep功耗狀態(tài)與喚醒流程UFS 3.1的電源管理狀態(tài)包括Active、Idle、Sleep、DeepSleep。DeepSleep是功耗最極端的模式幾乎關(guān)閉了設(shè)備內(nèi)部除少量喚醒邏輯外的所有供電代價是從DeepSleep恢復(fù)到Active耗時較長耗時可能在幾十毫秒甚至百毫秒級別。系統(tǒng)設(shè)計(jì)時要權(quán)衡短時暫停用Sleep即可長時待機(jī)才應(yīng)該進(jìn)入DeepSleep。在移動平臺上我一般建議這樣配置系統(tǒng)suspend時先把UFS鏈路切到Sleep狀態(tài)。如果預(yù)計(jì)待機(jī)時間較長如超過數(shù)分鐘再通過設(shè)備管理命令把設(shè)備切到DeepSleep。喚醒時主機(jī)控制器先復(fù)位Link然后通過DME命令讓設(shè)備退出DeepSleep再重新啟動鏈路和對齊流程。這個流程里最容易出問題的就是“鏈路先于設(shè)備恢復(fù)”。設(shè)備還處于DeepSleep時如果主機(jī)嘗試通過Link發(fā)送命令會出現(xiàn)dme_error或者命令超時。因此軟件恢復(fù)流程必須嚴(yán)格遵循“設(shè)備先恢復(fù)鏈路后啟用”的順序。5. 常見問題排查技巧與避坑指南5.1 經(jīng)典問題速查表現(xiàn)象可能原因排查方法UFS設(shè)備無法識別供電時序不對、頻率配置錯誤檢查電源軌、參考時鐘抓Link啟動階段的DME錯誤命令超時設(shè)備低功耗未喚醒、鏈路物理異常抓取UTRLDBR狀態(tài)和UIC錯誤寄存器順序讀吞吐量低速率協(xié)商失敗只跑到HS-G1或HS-G2檢查UniPro配置、發(fā)送預(yù)加重/均衡參數(shù)隨機(jī)讀性能差HPB未正確啟用或映射失效頻繁檢查HPB region配置和hit ratio寫入速度突然下跌WriteBooster SLC緩沖區(qū)寫滿觀察Force Flush事件測試穩(wěn)定期寫入性能運(yùn)行一段時間后I/O出錯高溫導(dǎo)致信號完整性劣化排查供電、散熱、M-PHY通道串?dāng)_5.2 抓日志與現(xiàn)場復(fù)現(xiàn)的獨(dú)家技巧在UFS調(diào)試中最有效也最容易被忽視的動作是抓完整的歷史寄存器狀態(tài)。很多工程師遇到超時后直接重啟設(shè)備結(jié)果關(guān)鍵現(xiàn)場丟失。推薦做法是在代碼里保留UFS相關(guān)所有寄存器的環(huán)形緩沖結(jié)構(gòu)包括UTRLDBR、UTRLCLR、UTRSTATUS、UIC錯誤寄存器中斷處理函數(shù)里實(shí)時更新。在命令超時后不立即復(fù)位而是先暫停指令流把環(huán)形緩沖區(qū)的寄存器歷史值打印出來和抓取的波形數(shù)據(jù)對比。這套方法幫我在多個項(xiàng)目里快速鎖定過“中斷丟失導(dǎo)致命令卡死”的問題。中斷丟失的根因往往是設(shè)備發(fā)出的完成中斷與主控側(cè)的中斷mask寄存器配置不匹配或者中斷線在系統(tǒng)suspend/resume過程中被意外shutdown。如果把中斷狀態(tài)寄存器一并打進(jìn)環(huán)形緩沖這類問題的定位時間可以從半天縮短到半小時以內(nèi)。5.3 鏈路質(zhì)量與信號完整性檢測M-PHY是UFS 3.1高性能傳輸?shù)牡鼗:芏嗤掏铝坎贿_(dá)標(biāo)的問題根源不在協(xié)議層而在物理層信號質(zhì)量。判斷信號質(zhì)量可以看三個關(guān)鍵指標(biāo)眼圖、誤碼率、信號完整性抖動。工程環(huán)境下沒有高端示波器時至少可以做兩件事一是檢查UFS控制器上報的CRC錯誤計(jì)數(shù)二是用設(shè)備端回環(huán)測試Loopback驗(yàn)證物理鏈路?;丨h(huán)測試可以分別測PHY到PHY的傳輸以及Controller到Controller的完整通路從而把問題域縮小到固定層面。如果CRC錯誤持續(xù)增長優(yōu)先懷疑終端電阻不匹配或者走線阻抗連續(xù)性不佳而不是懷疑協(xié)議軟件邏輯。6. UFS 3.1協(xié)議分析工具鏈與測試方法6.1 Linux用戶態(tài)工具與協(xié)議跟蹤Linux平臺做UFS測試有幾個常用的用戶態(tài)工具我逐一說明適用場景ufs-utils提供針對UFS設(shè)備管理器的用戶態(tài)工具可以讀取/寫入Descriptor、Attribute、Flag。通過它可以直接觀察WriteBooster的緩沖區(qū)大小、HPB狀態(tài)、設(shè)備壽命信息比直接改內(nèi)核代碼方便很多。fio性能基準(zhǔn)測試的標(biāo)準(zhǔn)工事。UFS測試建議分別測順序讀寫、隨機(jī)讀寫同時加入混合讀寫模式和不同的隊(duì)列深度用隊(duì)列深度1、4、16、32分別觀察性能曲線。blktraceiostat定位請求在塊層的排隊(duì)情況。如果塊層排隊(duì)時間過長說明SCSI層或者UFS驅(qū)動有瓶頸如果排隊(duì)很短但請求始終不完成問題可能在設(shè)備側(cè)。/sys/kernel/debug/ufshcd內(nèi)核UFS驅(qū)動的debugfs節(jié)點(diǎn)。不同平臺暴露的內(nèi)容不一樣但通常包含命令歷史、錯誤狀態(tài)、鏈路速率等關(guān)鍵字段。6.2 性能測試的具體操作流程以fio為例一組有意義的UFS 3.1性能測試步驟是先執(zhí)行blkzone reset或者全盤TRIM確保測試前設(shè)備處于干凈狀態(tài)。用順序讀測試拿上限基準(zhǔn)fio --nameseqread --rwread --bs1m --size2g --iodepth32 --numjobs1 --direct1 --group_reporting。用順序?qū)憸y試觀察WriteBooster生效前后的差異fio --nameseqwrite --rwwrite --bs1m --size2g --iodepth32 --direct1。用隨機(jī)讀寫模擬真實(shí)業(yè)務(wù)fio --namerandrw --rwrandrw --rwmixread70 --bs4k --size2g --iodepth32 --direct1。每次測試前都記錄設(shè)備溫度和dWriteBoosterBufferLifeTimeEst因?yàn)镹AND在高溫下會觸發(fā)溫控降速不記錄溫度容易把溫控降速誤判為協(xié)議問題。這個細(xì)節(jié)我在多次評測中吃過虧室溫從26℃升到42℃后同一塊盤的順序?qū)懶阅艿袈淞藢⒔?0%不明真相時很容易導(dǎo)向錯誤的排查方向。6.3 如何用邏輯分析儀觀測協(xié)議交互如果需要深入觀測UFS協(xié)議交互邏輯分析儀依然是利器。UFS 3.1的HS-G4速率在11.6Gbps等級普通邏輯分析儀完全無法直接采集需要配合廠商的協(xié)議分析儀或者使用M-PHY探針轉(zhuǎn)接板。在分析時重點(diǎn)抓幾個節(jié)點(diǎn)Link啟動階段的M-PHY速率協(xié)商序列。命令下發(fā)階段的UPIU頭字段對比Command UPIU的CDB內(nèi)容。數(shù)據(jù)傳輸階段的DATA OUT UPIU和DATA IN UPIU幀間隔。每次命令完成后的RESPONSE UPIU的Sense Data。協(xié)議分析儀的優(yōu)勢是可以把物理波形自動解碼成協(xié)議字段期間還能統(tǒng)計(jì)各Layer的retry計(jì)數(shù)和錯誤統(tǒng)計(jì)。但它的價格和上手門檻都不低日常調(diào)試還是建議先用軟件層日志縮小范圍確需鏈路級證據(jù)時再上分析儀。7. 從協(xié)議理解到系統(tǒng)優(yōu)化的延伸思考7.1 UFS 3.1之后UFS 4.0的傳承與變化說完UFS 3.1不得不提一句它的后繼者UFS 4.0。UFS 4.0在鏈路速率上翻倍到HS-G5單lane速率約23.3Gbps雙lane理論帶寬可以超過7Gbps同時引入了VRSVariable Rate SuperSpeed之類的電源優(yōu)化機(jī)制和更多針對QLC顆粒的優(yōu)化策略。但底層協(xié)議框架依然延續(xù)了UFS 3.x時代建立的模型UTRD UPIU Doorbell的基本交互方式?jīng)]有變UPDATE的底層機(jī)制沒變。所以現(xiàn)在花時間把UFS 3.1協(xié)議吃透并不會白費(fèi)后續(xù)遷移到UFS 4.0時的學(xué)習(xí)曲線會平滑很多。7.2 與NVMe/UFS架構(gòu)思想的異同做存儲的工程師經(jīng)常會拿UFS與NVMe比較。NVMe是PCIe接口基礎(chǔ)上的協(xié)議棧使用Queue Pair機(jī)制命令提交和完成都通過共享內(nèi)存隊(duì)列完成效率極高。UFS的UTRD機(jī)制在思路上與NVMe有相似之處但UFS還保留了更傳統(tǒng)的門鈴寄存器模式和更細(xì)粒度的電源狀態(tài)管理這是由移動設(shè)備的低功耗需求決定的。在實(shí)際項(xiàng)目中理解這兩套體系的異同很有價值如果你的設(shè)備從移動端轉(zhuǎn)向汽車電子或邊緣計(jì)算場景很可能需要從UFS切到NVMe SSD那時你對Doorbell、Queue、DMA映射、Command Completion這些概念的理解都可以平移復(fù)用差異點(diǎn)只在鏈路層和命令格式上。7.3 后續(xù)可以繼續(xù)深入的方向UFS 3.1協(xié)議分析的內(nèi)容遠(yuǎn)不止這一篇文章能講完。后續(xù)可以展開的深水區(qū)包括UFS設(shè)備描述符/屬性/標(biāo)志位的完整字段解讀、SCSI命令集在UFS上的實(shí)現(xiàn)細(xì)節(jié)、UFS電源管理狀態(tài)機(jī)的完整轉(zhuǎn)移條件、UFS主機(jī)控制器的寄存器級編程指南、Flash轉(zhuǎn)換層FTL對UFS行為的影響、隨機(jī)讀性能優(yōu)化中的HPB演進(jìn)思路。我自己打算接下來抽時間寫第二部分重點(diǎn)講UPIU字段級解析和異常事件處理流程。如果你們在實(shí)踐中有有意思的UFS問題歡迎帶著業(yè)務(wù)場景來討論很多協(xié)議細(xì)節(jié)在規(guī)范里寫得非常隱晦只有在具體問題面前才能暴露出來。我在多個項(xiàng)目里反復(fù)體會到一件事UFS 3.1的穩(wěn)定性上限往往不取決于控制器和Flash的紙面參數(shù)而取決于軟件棧對協(xié)議細(xì)節(jié)的尊重程度。一個DPU字段沒配好、一次低功耗喚醒順序顛倒、一個PRDT對齊沒處理都可能在量產(chǎn)后的隨機(jī)場景里集中爆發(fā)。把協(xié)議吃透本質(zhì)上就是為自己的產(chǎn)品上了一道無形的保險。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久精品视频9| 久久精品视频在这里有| 影音先锋91| 久久激情五月| 五月综合无码| 五月天激情中文字幕| 亚洲 欧洲 国产 伦综合| 亚洲精品电影| 天天弄天天操| 天天日日夜夜爽。| 千人斩操逼| 婷婷色吧| 色欲色香,www,com| 丁香五月婷婷啪啪视频| 五月天综合久久| 激情六月婷| 激情五月天视频| 99视频啪啪| 超碰在线观看99| 五月天狠狠干| 亚洲乱码成人| 五月开心六月婷婷在线播放网站| 丁香五月婷婷激情网| 五月天婷婷综合色| 9国产在线视频| 99视频只有精品| 五月丁香综合久久| 夜夜骑夜夜操| 色偷偷色婷婷| 99riAv1国产在线观看| 亚洲色综久久五月| 亚洲人成网亚洲欧洲无码久久| 五月天丁香看婷婷| 噜噜五月天综合| 亚洲日韩一页精品发布| 日日影院 | 婷婷六月色开| 91久久婷婷| 久久96热| 99热12| 激情文学天天| 欧美熟女99| www.久操| 久久92| 最新精品视频99| 精品99这里有| 婷婷五月 丁香六月| 大香蕉久| 狠狠操.com| www.精品99| 99在线热视频| 六月丁香综合| 深爱婷婷基地| 99re6在线视频精品免费| 久久性都花花世界成人免费视频| 六月丁香VA| 色五月色图| 午夜青草资源| 97碰 在线视频观看| 天天色综网| 99精品国产热久久91色欲| 伊人无码高清| 久久久WWW| 天天玩夜夜操天天爽| 丁香五月激情图片婷婷| 久久婷婷影院| 狠狠爱婷婷| 激情五月婷婷色综合| 美女xx不卡| 五月天开心婷婷激情网站| 日本91在线| 日本V在线观看不卡视频网站| 日韩超碰在线| www色五月| 九九99免费视频| 色五月丁香91| 中文幕无线码中文字蜜桃| 99视频在线| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 精品人妻伦一二三区久久| 丁香5月婷婷| 久久欧洲久久| 91操片| 五月综合激情| 婷婷丁香在线| 婷婷色五月激情| 激情五月少妇| 五月天激情美女久久| 久久婷五月婷| AV在线不卡网站| 97av在线视频| 日本色色图| 亚城区在线| 五月丁香综合网色欲| 99内射视频| 亚洲精品久久久无码| 激情综合区| 99精品免费欧美小视频 | 欧美激情五月天婷婷| 亚洲蜜乳AV| 伊久大香蕉| 99精品在线播放| 婷婷天堂站| 99免费热视频在线| 激情丁香五月天图片| 天天粽合合合合| 日本久久天堂| www.久久爱| www.五月婷婷.com| 激情久久久久| 九九热这里只有精品23| 九九热欧美| 国产一区18| 丁香婷婷五月天成人| 欧美成人猛片AAAAAAA| 五月婷婷婷| 97人人做| 婷婷天天色| 超碰二区| 久久久噜噜噜久久人妻| 久久这里都是精品| 99激情| 激情六月综合| 色99视频| av中文字幕免费观看| 久久婷婷伊人| 国产午夜精品AV一区二区麻豆| 男人天堂99| 婷婷五月天伊人| 天天噜噜| 天天射美女| 国产精品色婷婷99久久精品| 狠狠做深爱婷婷久久综合一区| 色五月激情五月| 五月色色激情网| 欧美爆乳一区二区三区| 色综合色色| 婷婷五月天在线一区| 婷婷激情丁香六月| 人人摸人人干| 激情久久久| 九九99精品| 婷婷91| 大香蕉av在线| 天天色综网| 婷婷五月天性色| 国产伦亲子伦亲子视频观看| 东北熟女高潮99综合99| 国产免费一区二区三区三州老师F1F1.CC| www一起操| 亚洲不卡| 热99视频| 免费视频无码| 色色亚洲| 亚洲免费电影2| 超碰99热在线观看| 五月激情视频| 色色色色色色色色色999| 天天成人丁香美女AV| 色婷视频| 亚洲五月婷婷| 激情综合文学| 婷婷五月天六点丁香五月| 久久综合九九| 欧美激情-区二区三区| 丁香婷婷色| 亚洲精品在线视频| www.天天干| 曰韩五月丁香色婷婷无码| 色色色色色日韩午夜激情 | 久久五月丁香| 91人妻九色大屁股| 天天摸天天肏| 久草xx性爱视频| 狠狠操狠狠操AV| 热九九精品| 色九区| 激情AV网| 婷婷伊人网| 狠狠五月丁香色婷| 天天爱天天秀天天做| 亚洲欧美婷婷五月色综合| 色婷婷丁香五月| 亚洲欧美成人在线观看| 无码地址| 天天干天天拍| 这里只有精品96| 爆乳熟女一区二区三区爆乳| 岛国资源网| 这里只有精品1| 91干| 99久久.www| 色情综合网| 射久久丁香五月| 五月综合丁香婷婷| 成人龟情网丁香五月| 婷婷六月天天| 丁香五月天啪啪激情综和网| 亚洲精品婷婷| 久久精品综合色| 五月丁香婷婷激情在线视频| 超级碰碰碰97免费| 97超喷视频在线观看| 超碰99热| 九九成人| 丁香婷婷综合影院| 南京搡BBBB搡BBBB| 思思精品视频| 99男人的天堂| 99热国产免费| 五月九九综合| 大波美女VA网站| 亚卅毛片| 色五月色五天色情网址| 亚洲婷婷丁香五月亚洲| 天天干天天操天天拍| 久久99jiu9| 深爱五月激情综合| 五月色婷婷综合| 女人天堂久久| 成人综合视频网址| 99这里只有精品国产| 99热丁香| www久久久久| 色婷婷五月天激情综合| 成人在线视频网| 五月婷婷综合社区| 婷婷五月天第三页| 最新国产AV| 伊人丁香六月婷婷| 日韩色色视频| 丁香五月欧美成人| www.婷婷五月天| 99爱在线| 色六月视频| 五月婷色| 91色综合网| 久久视频这里99| 丁香六月天婷婷开心综合| 丁香婷婷色色| 国产操B视频| 欧美va在线| 久热一区| 丁香五月婷婷激情视频播放| 风流少妇A片一区二区蜜桃| 99色中文| 91综合国免费久入| 高清不卡一区| 97人人草| 日本片日本片祼观看网站在线看中文版网页在线看 | 五月情婷婷| 久久久久久人妻| 黄色精品五月婷婷| 91操在线视频| 99热大香蕉| 97亚洲婷婷| 日本99色| 丁香五月色| 婷婷五月日本| www.婷婷五月| 啪啪 综合网| 婷婷五月在线视频| 婷婷五月综合网| 激情五月婷婷在线观看| 色激情五月| 久9热在线视频| 超碰国产AV| 91嫩草久久| 五月天精品| 涩涩婷婷五月| 97九色| 操B五月天| 亚洲午夜视频| 欧韩性爱| 激情内射人妻1区2区3区| 色综合色欲综合天天免费| 天天综合精品| 九九热精品视频九九| 极品精品一区二区三区在线| 狠狠插日日干撸| 狠狠色噜噜狠狠狠777奇米| 综合五月天婷婷色| 九九色天堂| 婷婷五月天激情文学| 岛国午夜视频| 久久婷婷成人| 26UUU成人网| 99性爱| 很操日本7| 色爆五月| 国产成人亚洲综合A∨婷婷| 久久天堂婷婷五月| 亚洲午夜av| 激情四射五月天偷偷看婷婷| 91男同视频| 国产午夜精品久久久观看| 99日视频在线| 99热免费在线| 婷婷五月AA五月在线| 丁香香蕉射射射| 79精品在线视频| 91se精品国产| 日韩在线观看亚洲| 六月米奇色综合| 三日本无码| AA丁香综合激情| 91要啪| www.色五月| 欧美97p| 欧美69色| 婷婷五月六月| 玖玖资源站视频| 94干大香蕉| 另类图片天天影视在线观看| 天天射天天射一道本日本社区 | 亚洲色涩视频| 99热黄| 色播婷婷大香蕉| 六月婷婷之青青草| 狠狠色大香蕉| 99色在线| 伊人玖玖婷婷| 襙逼网| 国产AV不卡福利| 99精品无码| 五月婷婷久草在线视频综合| 五月婷在线| 久久久精品婷婷五月天| 狠狠操狠狠爱| www.丁香五月| 免费99情趣网视频| 2016日日夜夜操| 人妻少妇色综合| 色色色成人网| 五月丁香直播| 色玖玖| 91人无码久久久久久| www色色色com| 99热6色| 伊人影音无码一区二区三区| 九九中文字幕九| 婷婷五月综合网| 精品久久久人妻| 久久最新色色色| 神马久久五月天| av狠狠操| 婷婷娌伦网| 亚洲综合视频一下| 中文字幕在线日亚州9| 婷婷六月天国产综合| 激情综合网五月婷婷| 天天插天天插天天插| 六月色婷婷色| 久99在线视频| 亚洲天堂九九九| 欧美韩国日本| 激情五月丁香五月| 色五月婷婷大香蕉| 欧美日本va| 99re在线观看视频| 丁香五月激情婷婷视频| 色情婷婷。| 激情九月丁香婷婷| 五月色综合| 成人电影AV在线观看| 五月丁香啪啪综合网| 大香蕉久久伊人婷婷五月丁香| 人人干人人操外国| 91热久88| 婷婷五月天AV| 深爱激情五月网| 久久人妻视步| 日韩抽插操逼| 五月丁香成人| 亚洲av日韩无码| 婷综合六月| 少妇人妻人伦A片| 久久机热/这里只有精品| 日本色五月婷婷| 伊人深爱综合| 天天做 天天爱| 国产在线6| 91丨九色丨熟女高潮| 久久WW| 婷婷五月激情五月丁香五月| 丁香六月婷婷久久亚洲天堂| 色综啪啪| 色色热日| 99在线爽| 日韩免费99| 一级韩国产精品毛| 久久综合综合综合| 婷婷五月香蕉| 久久人妻视频| 亚洲乱码在线观看| 玖玖爱综合网| 色婷久久| 永久精品| 色五月激情综合网| 亚洲亚洲人成综合网络| 欧美大片免费观看| 青青草婷婷五月天| 九久久九精品视频| 天天搞天天爽| 九九色之九九色之88| 亚洲激情精品| 亚洲AV成人在线观看| 激情综合五月色在线| 九九色综合| 超级碰碰视频无码| 激情五月丁香六月综合AVXXXX| XX色综合| w婷婷五月婷婷w| 婷婷丁香18| 亚洲成人在线播放| 六月婷婷色色色| 五月综合影院| 久久人妻少妇嫩草AV| 六月婷婷之青青草| 激情五月天网| 99热这里只有精品33| 99热在线观看| 爱的综合网| 国产在线aaa片一区二区99| 亚洲小视频免费看| 六月丁香五月婷婷| 99视频色在线观看| 碰碰女| 99黄色在线视频精品熟女| 婷婷五月天香蕉| 国产亚洲精品AAAAAAA片| 丁香婷婷精品视频| 欧美肉大捧一进一出免费视频| 丁香五月六月久久综合 | 26uuu成人网| 久久婷婷五月综合色天| 色婷另类| 婷婷月五天在线在线看| 国产69久久久欧美黑人A片| 99久久a线观| 中文字幕精品无码一区二区| 思思热在线免费视频| 日本久碰| 九月婷婷久久久| 99热这里只有精品26| 四色永久成人网站| 青青草视频福利| 婷婷天天五月天| 99视频在线| 91黄址| 91啪啪视频| 天天操夜夜夜拍拍拍| Aaa久久| 婷婷五月激情视频在线| 日本婷久久| 大香蕉综合在线| 五月天无码视屏播放| 热99玖玖99玖玖99九九| 97性视频| 天天操天天爽天天爱| 国产在线网址1| 婷婷五月天狠狠色| 五月天色婷伊人| 国产操B| 欧美大道不卡| 婷婷伊人激情婷婷| 丁香五月天天| 五月天婷婷色| 丁香五月成人网| 人人干天天舔| 玖色色综合| 五月天综合婷婷| 色五月视频无码播放| 久久人操-久草婷婷-成人AV| 99色热| 六月丁香色婷婷| 热久久91| 丁香久久激情俄| 亚洲激情五月| 国产密乳av一区二区三区四区| 国产在线中文字幕| 五月丁香久久激情综合| 99精品在线播放| 婷婷九月丁香久久| 啪色综合| 九九热这里只有精品9| 99热手机在线精品| 五月丁香少妇A| 91疯狂操操操操| 国产做A爰片毛片A片美国| 久久五月综合| 色播丁香五月婷婷操:屄| 哇嘎成人久久| www免费在线视频| 超碰人人91| 丁香六月毛片| 婷婷欧美色| 婷婷综合在线播放| 91碰碰视频在线观看| 玖玖婷婷五月天| 五月婷婷丁香狠狠撸久久| 色综合九九| 91N 一起草| 中字幕视频在线永久在线观看免费| 日本丁香五月| 亚洲五月色| 狠狠另类视频| 91人妻色色网| 91干在线| 好色婷婷| 加勒比久热| 亚洲日本韩国| 色噜噜狠狠色综无码久久合欧美| 激情五月天综合网| 五月天网站免费欧美| WWW五月天| 91天天操天天干天天射| 啪啪操超碰| 丁香六月婷婷激情| 日本eVa一区=区视频| 丁香五月婷婷啪啪| 婷婷五月天AV| 99久久6| 91色在线/日韩| 五月丁香六月香香蕉| 日本玖玖在线| 校花娇喘呻吟校长陈若雪视频| 激情六月综合| 狠狠色丁香| 97操操操| 99热免费精品| 欧美色色色| 久99热在线观看| 九九热精品视频| 天天天操天天天日| 日韩成人综合网| 青草五月天| 国产又色又爽又黄又免费| 人人操碰| 丁香六月成人| 五六月婷婷久久| 日熟女| 丁香五月婷婷呀| 五月大香蕉| 激情丁香久久| 亚洲精品又粗又大又爽A片| 丁香五月自拍| 精国产品一区二区三区A片| 亚洲五月丁香综合网| 爱婷婷都市激情| 天堂综合久久| 五月丁香六月欧美综合网站| www99xxxx五月丁| 色播五月丁香| 五月激情综合婷婷| 久久小说| 色狠狠色噜噜AV天堂五区| AV操一操| 香蕉人在线香蕉人在线 | 五月婷婷六月丁| 五月综合激情图片| 日韩精品无码99| 狠狠干综合网| 久久精品日| 秋霞av不能| 大鸡巴伊人网| 久久婷婷五月综合啪| 99亚洲视频| 特黄三级片| 深情六月婷婷综合久久| 四虎成人精品永久免费AV九九| www.激情五月| 99re免费精品视频| 97干在线| 婷婷美女精品视频| 在线sebiav精品视频| 日韩在线观看亚洲| 激情五月天噢美| 中文字幕乱码亚洲精品一区| 欧美日韩AAAA| 久久综合丁香| 国产黄大片在线观看画质优化| 亚洲精色| 久久婷婷网站| 噜噜在线| 色五月综合网| 成人av在线网| 六月婷久久| 丁香五月婷婷少妇| 五月婷婷亚洲| 综激情网| 思思久久99| 婷婷色婷婷| 99热个人在线| 99久久九九| 免费观看全黄做爰的视频| 另类小说激情五月天| 欧美六月| 九九色婷| 激情综合网五月婷婷| 天天爽日日搞| 欧美操逼天堂| 风流少妇A片一区二区蜜桃| 人人爱人人摸人人澡| 五月丁香亭亭操逼| 日韩国产在线精品| 婷婷色九月| www.五月激情红色| 热久国产| 性爱技巧五月| 人人摸人人| 五月丁香黄色视频| 深爱五月婷婷开心中文字幕| 色五月天婷婷| 五月天桃色深爱网| 五月婷婷导航| 色5月丁香婷婷| 亚洲小视频免费播放| 性爱技巧五月| 91久久久久久久久久| 九九这里只这里只有精品| 俺去也婷婷| 色婷婷五月天| 大香蕉五月天婷婷| 无码人妻一区| 610018岁成人视频| 五月六月婷婷激情网| 开心五月网 | 日本人人草草| 99免费视频在线观看爱| 婷婷五月天社区| 久久视频婷婷视频| 五月天成人网婷婷| 极品另类| 亚洲午夜在线视频| 五月丁香网站| 五月丁香婷婷综合久久| 色青青视频| 婷婷五月天影院| 丁香五月天婷婷大香蕉| 91久久久久久久久久| 婷婷五月天影院| 色婷婷a v| 色婷婷九月| 色五月激情问网站| 91色五月| 婷婷久久影院| 色婷婷91激情小说| 夜夜嗨一区二区三区直播内容 | 日日噜噜夜夜狠狠久久丁香五月| 欧美人妻一区二区| 激情亚洲婷婷| 99热在线只有精品| 99热这里只有在线| 五月丁香欧美综合免费视频| 丁香婷婷五月天色综合| 色婷婷久久| 91精品91久久久中77777久久玖玖九九 | 久久色9| 91N 一起草| 五月天社区婷婷| 国产精品18久久久| 五月丁香色色网| 久操操| 久久婷婷网| 亚洲深喉aV| 五月天激情小说网| 丁香婷婷啪啪| 97碰在线视频| 婷婷丁香激情综合色情| 99a级片| 五月亚洲| 黄色av高清| 丁香综合网| 69热91天堂| 五月婷婷啪啪网| 久久久亚洲成人无码A片| 激情性五月天免费小说视频| 色停停影院五月天| 婷婷六月综合基地| 色婷婷社区| 性日本精品| 成年人看Va免费视频| 婷婷色网站| 九色色| 思思久热| 色婷五月天激情| av 一区三区四区| 亚洲美女高潮久久久久久69| 久久欧洲久久| 少妇人妻人伦A片| 色婷婷五月天在线| 五月天婷婷激情六月久久| 婷婷激情视频欧美视频自拍视频欧美剧 | 99爱在线视频观看| 日本va欧美va欧美va| 色色色9| 久久怕怕视频| 日韩淑女人妻luan伦激情精品一区二| 五月婷婷亚洲色视频| 91午夜激情| 婷婷五月美女直播| 亚洲婷婷欧美婷婷| 碰97久久| 激情五月天视频| 无码激情AAAAA片-区区| 狠狠久久婷五月综合色| 五月婷婷9| 碰97久久| 欧日美女Va| 久久伊人日日夜夜| 激情五月视频在线婷婷| 99re思思热久久| www.99热| 99精品一二三四视频| 99热免费精品| 麻豆AV一区二区三区| 天天干在线播放| 丁香花操逼| 成人在线不卡| 激情综合五月婷婷| 久久婷婷五月天激情| 日本久久极品| 五月天婷婷色| 日本天天操| 天天日日人| 久久五月情| 色婷婷影院| 六月激情网| 午夜性爱影视一区77| 亚洲av无码精品色午夜| 国产av天堂| 一级二级色大片| www.十八禁不禁AV.com| 伊人激情啪啪| 激情五月天偷拍综合网| 丁香色情五月综合激情| 999九九九久久久99HD| 99热综合| 超碰人人91| 97好吊操| 成人羞羞啪啪 全 视频| 日本一级特黄大片AAAAA级| 天天色天天操天天射| 色婷婷狠狠爱| 色五月丁香一区在线| 亚洲天堂青草| 五月婷婷色| 激情四射五月天| 开心色五月天久久久久久久| 只有精品在线观看| 久久婷婷操| 婷婷色情网| 免费视频在线观看的网站| 色婷婷五月影院| 日本婷婷综合精品| 欧美黄色韩日网| 色九月婷婷| 色噜婷婷| 99在线观看免费精品视频| rr天天操| 大地9中文在线观看免费高清| 久久免费试看120秒| 26uuu色噜噜精品一区| 色色com| 免费无码毛片一区二区A片| av激情在线| 少妇人妻凹凸视频| 色五月婷婷亚洲| 丁香九色不卡aaa| 极品五月天| 成人看片网站| 九月影院義母在线播放| 69天堂99| 丁香五月激情久久麻豆| 久久精品一区二区三区四区| 五月丁香婷婷综合| 69精品人人人人| 97视频91| 黄色五月婷婷| 棕合影院色色| 一区视频网站| 日本女人久久| 99热天堂| 久久婷婷五月天激情四射| 五月激情婷婷播播开心| 丁香五月人妻| 五月丁香婷婷免费视频| 亚洲视频色婷婷| 久久精品人妻| 99久精品视频| 亚洲午夜视频| 五月丁香婷婷色色| 97色婷婷| 激情综合五月天| 99热成人精品| 久久6这里只有精品| 人人操Av| 先锋男人99资源| 婷婷中文字幕版| 婷婷综合伊人丁香| 婷婷五月天亚洲激情戏精品| 久久婷婷五月综合色奶水99啪| 九月婷婷在线观看| 婷婷婷婷婷婷婷婷婷婷丁香| 99色综合久久| 色级停停| 狠干综合| 久久资源网五月婷| 亚洲区,视频区,视频区免费| 婷婷伊人无码| xxx日本东京热| 久久久精品人妻录| 色婷婷丁香五月在线观看| 噜噜在线| 婷婷六月丁| 九九热精品在线| seav天堂| 怡红院成人AV| Av九九| 亚洲五月天第一综合干| 激情五月com| 五月天六月婷| 91人人爽狠狠狠| 婷婷97| 懂色av粉嫩AV蜜臀AV| 日本一级大片| 久久婷婷六月综合| 森林影视大全,最好看的2019年视频| 丁香五月欧美色综合| 色五月激情网| 色五月五月婷婷| www99热| 99热丁香| 可以免费观看的AV| 色欲五月天| 中文字幕人妻一区二区| 亚洲综合色色| 人人摸人人澡人人| 18久久| 天天日综合| 欧美色碰| 五月婷婷亚洲| 久久a热| 91久操| 久久99视频| 婷婷五月丁香国产| 肏日网在线看| 久久女婷| 午夜青草资源| 开心五月色婷婷综合开心网| 日韩成人电影在线播放| 天天玩夜夜操| 丁香婷婷综合喷| 亚洲色精彩| 深爱激情丁香五月| 欧美色五月| 97丁香视频| 丁香五月精品视频| 久久人妻www| 99热66| 久久综合五月| 狠色狠色狠色狠色狠色网| 无码99| 国产精产国品一二三在观看| 色人久夂| 中国激情网| 丁香五月综合| 91久久五月天| 精品影院| 综合五月婷婷| www.日日夜夜| 色综合久久天天综合网| 色青青电影色五月| 久久精品综合色| 日韩AV色色色| 99这里有精品视频| 99热99极品观看| 99思思热只有在这里看| 六月婷婷激情| 天堂久久婷婷| 国产VA亚洲VA96| 少妇大叫太大太粗太爽了A片| 丝袜激情网| 99热这里只有精品在线播放 | 五月天天天天天天天天天天天天天天天婷婷婷| 五月天综合网| 日本在线视频www色| 99热在线中文字幕| 五月天婷婷免费| 六月婷欧美丁香综合| www.精品99| 婷婷丁香久久| 97极品在线| 五月花综合视频| 日韩av变天就操逼不卡区| 五月丁香六月激情综合网| 极品另类| 亚洲激情五月| 五月丁香六月婷婷开心网| 天天日天天舔| 97色婷婷成人综合在线观看| 操97免费超级视频| 丁香花成人区| 成人开心五月天| 国产精产国品一二三在观看| 色婷婷激情四射视频| 日日夜夜久| 久爱综合| 亚洲亚洲激情| 久久婷婷视频| 婷五月丁香俺| 婷婷在线综合| 91丨九色丨白浆秘| 五月丁香色婷婷色| 日本精品干| 俺去也婷婷| 黄色短视频在线观看| 丁香五月婷婷手机| 99免费在线视频| 免费AV黄在线播放| 99re在线观看| 色播五月丁香| 超碰在线人妻| 99爱视频精品| 丁香婷婷五月| 在线超碰91| 五月丁香婷婷色色| 在线成人网站| 91久久久久久久久久久| 99热99在线| 色婷婷99| 69精品人人人人| 色婷婷六月激情| 午夜精品人妻无码一区二区三区| 婷婷色系婷色| 午夜伊人大香蕉| 国产,欧美,日韩,性爱| 97涩婷婷婷婷基地| 五月天色婷婷综合| 99热综合色图| 色播五月丁香| 婷婷99狠狠躁天天躁| 亚洲超碰在线| 伊人五月婷婷| 91色色五月天| 婷婷综合精品视频97| 婷婷丁香社区| 色婷婷综合视频| 婷婷丁香69精华| 99久久人妻精品无码二区| www好屌操| 亚洲成人综合网在线免费观看| 五月婷婷六月爱| 亚洲岛国电影| 天天日天天插| 看婷婷五月天网| 精品成人无码A片观看香草视频| 欧美色骚婷婷五月天| 成AV人片一区二区三区久久| 久久综合天天综合| 99精品偷拍视频| 91性高潮久久久久久久久| 欧洲激情五月天婷婷| 日韩99无码| 天堂综合久久 | 最新日本A片| 丁香五月AV| 五月青青草综合| 黄色AAAAAAA| 粉嫩av懂色av蜜臀av熟妇| www.夜夜操.con| 色情网综合| 97丁香婷婷| 午夜青草资源| 97五月综合网| 超碰人人色| 五月丁香六月婷婷视频| 色色色综合色| 色狠狠色噜噜AV天堂五区| 天天草天天摸| 99干日本| 亚洲中文字幕网| 丁香六月婷婷色XXXX| 丁香五月婷婷Av| 99国产精品久久久久久久久久久| 五月天综合在线观看| www,五月天com| 超碰cap| 天天婷婷操| 亚洲色频| 思思热在线视频精品| 欧美成人A片AAA片在线播放| 久久九九综合| 久久九色| 亚洲欧州色情在线观看| 大香蕉五月丁香| 大香蕉在线99热| 99色在线视频| 精品五月天| 亚洲美女婷婷五月天| 人人叉久| 51精品国自产在线| 五月婷婷色影院| 伊人久久五月天| 九九热这里只有精品5| 丁香五月婷婷综合激情啪啪啪啪啪啪啪| 中文字幕成人| 天天色激情| 91久久18| 少妇综合网| 婷婷丁香激情综合色情| 激情无码五月天| 亚洲午夜一区二区| 国产亚洲成AV人片在线观黄桃| 中文字幕丰满人妻无码专区| 六月婷婷国产| 激情婷婷色小说| 中文字幕精品推荐免费在线观| 任你艹| 九九热中文| http://www.sd-xiangsu.com/| 无码一区二区三区四区五区| 婷婷色五月激情强奸四射| 蒲京久久无码视频| 欧美激情综合色综合啪啪五月| 9久热在线视频精品| 激情亚洲网| 婷婷激情五月天天天开心| 蜜乳AV成人| 少妇高潮呻吟A片免费看软件 | 国产精品视频免费看| 久久婷五月影院| 国产精产国品一二三在观看| 色婷婷成人| 五月丁香淫淫婷婷婷| 中文在线成人| 黄色aaaaa| A A色色| 九九热这里有精品视频| 涩 五月 婷婷 狠狠| 91色五月在线观看| 欧美成人AAA片一区国产精品 | 99爱爱网| www.91五月| 久热在线观看视频9| 99久久国产综合精品五月天喷水\| 9久久网| 综合天天综合| 精品皮股午夜AV| 久久网日本| 久热婷婷综合| 激情九月天天天天婷婷| 亚洲AV激情五月综合网| 99热地址| 激情五月天综合网| 久草视频大香蕉99| 天天肏高清在线| 狠狠干天天内射| 婷婷激情5月| 亚洲AV综合网| 玖玖色综合色| 亚洲综合色色| 99热精品6| av 一区三区四区| 亚洲天堂有码| 欧美碰碰| 人人操超碰| 91丨九色丨老熟女激情| 疯狂做受XXXX高潮A片| 五月天激情网图片| 九九香蕉网| 天天操夜夜操| 久热一区| 中文字幕成人版| 亚洲成人在线在线| 国产亚洲99久久精品熟| 精品五月花| 丁香五月天久久| 红桃91人妻爽人妻爽| 欧美日本VA| 天天澡天天狠天天天做| 8090在线影视少妇| 激情九九六月激情免费视频| 天天操天天操综合| 久月婷婷| 91精品综合久久久久久五月天| 欧美性爱五月天| 激情五月天激情小说| 色婷婷成人做爰A片免费看网站| 九九热99视频在线| 亚洲综合成人网| 五月婷婷深深爱| 九九热这里只有精品23| 日本婷婷综合精品| 可以直接看的AV网站| 尔尔AV一区| 97AV在线视频| 激情丁香五月| 激情综合丁香| 97se在线视频| 欧美日韩国产伦精品日韩人妻一| 久久婷婷五月综合色区| 色九月综合网| 久99久在线| 婷婷区日本| 99操逼| 97九色| 日欧一片内射VA在线影院| 爱iii做iiii日日| 五月婷激情影院| 欧美天天搞| 激情五月天在线观看色婷婷| 五月中旬婷婷丁香六| 五月丁香影视| 久久久久久人妻| 男女av免费看| 爆乳熟妇一区二区三区爆乳| 五月天激日本色情在线| 深爱激情69热| 五月天婷婷久久视频| 欧美激情五月天| 丁香激情网| 九一牛视频探花| 亚洲思思热久| 亚洲经典小视频| 色综合九九| 狠狠婷婷色| 婷婷九月亚洲| 春色激情第四色| 99网99热| 国产精品扒开腿做爽爽爽A片唱戏| 丁香六月av| 国产探花AV在线| 大香蕉久久婷婷精品综合| 亚洲精品又粗又大又爽A片| 香蕉国产2013| 互月天综合| 五月天婷婷久久视频| 综合超碰熟| 99 频99热国里只有精品| 久久机只有这里精品| 91se视频| 婷婷五月中文字幕国产| 婷婷99狠| 五月丁香免费看| 亚州色综合| 激情婷婷丁香| 8区视频在线| 熟女激情网| 日韩色色色色色| 婷婷色婷婷| 激情丁香五月婷| 久久久天堂国产精品女人| 午夜美女人啪最红院| 激情又色又爽又黄的A片| 色色色色色色色五月| 青青操日本摸摸看看| 久久婷婷五月国产色综合激情| 色婷婷五月天天天干天天操天天爽 | 五月天第四色开心色播| 婷婷五月天在线观看| 不卡在线视频| 婷丁五月| 香蕉操亚洲| 成人性生活免费观看。| 亚洲婷婷丁香五月在线| 五月天伊人综合| 激情五月色婷婷| 97操在线资源| 五月婷婷深爱六月| 国产成人+综合亚洲+天堂| 97人妻碰碰碰久久香蕉| 六月婷伊人| 久久只有18视频| 操日视频| 六月丁香综合| 亚洲操女| 色狠狠六月| 五月天激情网站| 国产精品第一国产精品| WWW,五月天| 97在线精品视频| 91在线操| 色欲一区二区三区精品A片| 90色免费视频| 色婷婷色情| 国产毛片欧美毛片久久久| 久久五月婷婷电影| 26UUU精品一区二区| 久久久久九九九九视屏小说88| 五月丁香六月婷婷免费视频| 99久久玖玖| 婷婷五月丁香性爱| 五月丁香色婷婷伊人| 99精品在线观看| 亚洲第一黄网| 在线另类视频| AV色婷婷| 丁香六月成人| 婷色综合| 狠狠插日日干撸| 无码人妻激情| 国内婷婷丁香社区在线播放| 99干免费视频| 色婷婷五月在线| 丁香五月色综合色播五月| 9l视频自拍九色9l黑人| 色色色婷婷五月| 婷婷六月爽| 免看黄大片AA | 激情中文在线| 狠狠搞五月天| 亚洲免费综合一区| 激情亚洲婷婷| 婷婷五月天激情偷拍| 日韩五月天婷婷| 亚洲av骚货| 五月婷婷综合激情网| 天天操加勒比| 色色五月婷| 国产精品色| 久色国产| 丁香婷婷久久综合在线| 伊人婷婷五月天| 99热这里都是精品| 99久久婷婷| 婷婷色五月亚洲| 伊综合蕉| 天天操中文字幕| 亚洲天堂久久| 精品一二三区久久AAA片| 99国产这里只有精品| 久xxxx| 狠狠色婷婷777| 欧美成人热| www久久久久久久| 婷婷五月色播| 五月婷婷xxx| 亚洲综合网在线| 人人爽天天爽| 99色干| 少妇真实被内射视频三四区| 噜噜噜噜噜色| 亚洲日比视频| 激情五月综合免费| 九久9精品| 久久精品噜噜噜成人A∨色欲| 婷婷丁香五月综合| 日本久久婷| 天天五月天综合网址| 思思色综合网站| 成人网址在线观看| 在线看黄色| 在线中文字幕免费视频| 国产在线aaa片一区二区99| 久99久在线观看| 五月丁香六月婷婷国产视频| 五月丁香婷色| 日韩色色色色色| 九九偷拍网| 久久婷婷五月综合网| 成人免费120分钟啪啪| 26uuu最新地址| 婷婷久久丁香| 久久综合激情婷婷激情|