欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

嵌入式固件進(jìn)階:啟動(dòng)流程拆解與OTA升級工程化實(shí)戰(zhàn)

嵌入式固件進(jìn)階:啟動(dòng)流程拆解與OTA升級工程化實(shí)戰(zhàn) 1. 從一條實(shí)際故障說起為什么芯片“跑起來”了系統(tǒng)卻不工作前陣子處理一個(gè)量產(chǎn)階段的現(xiàn)場問題現(xiàn)象很典型設(shè)備上電后指示燈反復(fù)重啟串口只能抓到零散的引導(dǎo)日志。幾個(gè)剛?cè)胄械耐碌谝环磻?yīng)是“看門狗復(fù)位了”于是反復(fù)查喂狗代碼查了一個(gè)下午沒結(jié)果。后來我把啟動(dòng)日志和復(fù)位狀態(tài)寄存器拉出來對比發(fā)現(xiàn)復(fù)位原因不是獨(dú)立看門狗而是上電復(fù)位后固件跳轉(zhuǎn)到了未初始化完成的RAM區(qū)取指異常直接觸發(fā)了硬件錯(cuò)誤。這件事對我觸動(dòng)挺大的。很多嵌入式工程師把“啟動(dòng)流程”當(dāng)成芯片手冊里最簡單的章節(jié)覺得無非是從復(fù)位向量開始、初始化時(shí)鐘、設(shè)置堆棧、跳轉(zhuǎn)main但這恰恰是量產(chǎn)階段最容易出幺蛾子的環(huán)節(jié)。尤其是現(xiàn)在芯片越來越復(fù)雜MCU和SoC的啟動(dòng)路徑差異、NOR Flash的XIP映射、安全啟動(dòng)的鏡像校驗(yàn)、多級BootLoader的跳轉(zhuǎn)條件任何一環(huán)沒吃透出了問題都很難定位。所以我把嵌入式固件進(jìn)階里最核心的這部分內(nèi)容整理成專欄連載本期聚焦三塊啟動(dòng)流程的深度拆解、故障定位的方法論、OTA升級的工程化實(shí)戰(zhàn)最后附上篇思考題的解析。整個(gè)專欄面向的是已經(jīng)有基礎(chǔ)開發(fā)經(jīng)驗(yàn)、想往中高階走的嵌入式工程師或者正在做量產(chǎn)維護(hù)、被現(xiàn)場問題折騰得焦頭爛額的朋友。文章里講到的思路和代碼級細(xì)節(jié)都是我在實(shí)際項(xiàng)目中驗(yàn)證過的不是教科書式的流程復(fù)述。2. 啟動(dòng)流程不是“從復(fù)位到main”這么簡單2.1 從”上電瞬間“到”第一條指令“中間發(fā)生了什么很多人會(huì)說芯片上電后第一條指令從復(fù)位向量取出來然后就開始執(zhí)行了。這個(gè)說法在ARM Cortex-M處理器上勉強(qiáng)成立但在更復(fù)雜的場景下已經(jīng)不夠用了。嚴(yán)格來說從Power On到CPU真正執(zhí)行用戶代碼中間要經(jīng)過好幾層路徑每一層都有它自己的“啟動(dòng)過程”。以Cortex-M為例芯片上電后硬件會(huì)自動(dòng)從地址0x00000000讀取初始堆棧指針MSP從地址0x00000004讀取復(fù)位向量然后跳轉(zhuǎn)執(zhí)行。這是硬件固定的行為但問題在于“地址0x00000000”在芯片內(nèi)部映射到了哪里。很多帶內(nèi)部Flash的MCU比如STM32會(huì)把Flash映射到0x08000000而0x00000000只是這個(gè)區(qū)域的別名如果芯片支持從System Memory也就是BootROM啟動(dòng)那0x00000000又映射到了BootROM。這時(shí)候啟動(dòng)引腳BOOT0、BOOT1的選擇就直接決定了第一條指令從哪里來。對于更復(fù)雜的應(yīng)用處理器SoC級別比如全志、瑞芯微、NXP i.MX系列上電后的第一段代碼通常是固化在芯片內(nèi)部的BootROM它負(fù)責(zé)初始化最基礎(chǔ)的時(shí)鐘、DDR控制器有些芯片這一步在SPL階段然后根據(jù)啟動(dòng)引腳或燒寫在OTP一次性可編程存儲(chǔ)器里的啟動(dòng)源配置從SD卡、eMMC、NOR Flash或SPI NAND中加載下一級鏡像。這個(gè)過程通常叫BROM啟動(dòng)或啟動(dòng)設(shè)備選擇。這里要特別提醒一點(diǎn)不要只看“最終跳轉(zhuǎn)到APP”這個(gè)結(jié)果要把啟動(dòng)過程拆成“芯片級啟動(dòng)”和“應(yīng)用級啟動(dòng)”兩層。芯片級的啟動(dòng)代碼用戶改不了但它的行為決定了鏡像加載順序、校驗(yàn)方式、FUSE硬件熔絲狀態(tài)應(yīng)用級的啟動(dòng)代碼比如早期的匯編初始化、SystemInit()、main之前的__main才是用戶真正能干預(yù)的部分。很多啟動(dòng)問題的根因就出在兩層之間的銜接處——比如BootROM已經(jīng)把外置DDR初始化好了但因配置位錯(cuò)誤跳轉(zhuǎn)到SPL后又重新初始化了一遍DDR導(dǎo)致時(shí)序錯(cuò)亂。2.2 MCU和SoC啟動(dòng)流程的典型差異對比我在給團(tuán)隊(duì)做內(nèi)訓(xùn)的時(shí)候經(jīng)常拿一張表來梳理MCU和SoC啟動(dòng)流程的差異。這張表來自多個(gè)項(xiàng)目的實(shí)操經(jīng)驗(yàn)不同廠商芯片細(xì)節(jié)不同但框架一致。對比維度典型MCU如STM32系列典型SoC如i.MX6ULL、全志V3s第一條代碼來源片內(nèi)Flash/System Memory/BootROM片內(nèi)BootROM固化代碼啟動(dòng)介質(zhì)選擇啟動(dòng)引腳電平組合啟動(dòng)引腳或OTP熔絲配置讀eFuse決定是否需要初始化DDR一般不需要無外部DDR或由應(yīng)用初始化BootROM/SPL階段必須初始化DDR鏡像加載方式Flash映射XIP直接執(zhí)行從介質(zhì)拷貝到RAM/DDR再執(zhí)行也可XIP安全啟動(dòng)支持部分型號支持TrustZone, Secure Boot普遍支持且有獨(dú)立的安全硬件和密鑰管理多級BootLoader通常單級IAP方式除外常見BootROM SPL U-Boot Kernel的多級結(jié)構(gòu)把這個(gè)差異理清楚你就能理解為什么MCU項(xiàng)目里“直接跳APP”的寫法很常見而SoC項(xiàng)目里U-Boot的bootcmd和bootargs會(huì)涉及大量的地址搬運(yùn)和校驗(yàn)。一個(gè)典型的失誤是在SoC平臺做MCU式的思維把整份固件編譯成一個(gè)bin設(shè)置好鏈接地址后直接燒寫進(jìn)NOR Flash結(jié)果發(fā)現(xiàn)BootROM不識別——因?yàn)锽ootROM期望的鏡像是帶特定頭部信息的格式比如i.MX的IVT頭部或是全志的TOC0格式它需要知道鏡像長度、加載地址、校驗(yàn)和甚至簽名信息。這不是Flash里有沒有代碼的問題是格式不匹配的問題。2.3 向量表重映射和應(yīng)用鏡像分級加載的底層邏輯ARM處理器的向量表是個(gè)容易被忽視但極其關(guān)鍵的結(jié)構(gòu)。默認(rèn)情況下Cortex-M的向量表放在0x00000000但應(yīng)用代碼運(yùn)行時(shí)中斷響應(yīng)要正確就必須讓硬件能找到異常向量表。常見的辦法是把向量表放到Flash的實(shí)際起始地址比如0x08000000然后通過VTOR寄存器告訴CPU“向量表換地方了”。如果你在做OTA或者多分區(qū)BootLoader向量表重映射幾乎是必答題。比如BootLoader放在0x08000000APP放在0x08020000APP啟動(dòng)前必須設(shè)置SCB-VTOR 0x08020000。這一步漏了APP跑起來看似沒問題但任何一個(gè)中斷來了CPU都會(huì)跑到錯(cuò)誤的地址去取向量輕則中斷不響應(yīng)重則直接HardFault。這種問題在調(diào)試器下很難復(fù)現(xiàn)因?yàn)檎{(diào)試器連接時(shí)可能默認(rèn)做了處理但斷開調(diào)試器獨(dú)立運(yùn)行時(shí)問題就暴露了。更工程化的做法是分四個(gè)層次設(shè)計(jì)鏡像加載鏡像頭部Image Header包含魔數(shù)、版本號、鏡像長度、CRC32校驗(yàn)值、簽名信息、目標(biāo)加載地址等。OTA升級時(shí)BootLoader先解析頭部校驗(yàn)通過才放行。BootLoader主體負(fù)責(zé)硬件初始化、跳轉(zhuǎn)條件判斷、固件校驗(yàn)、升級流程調(diào)度、備份恢復(fù)。APP1/APP2雙鏡像區(qū)OTA方案中常見的A/B分區(qū)布局BootLoader根據(jù)啟動(dòng)標(biāo)志位選擇啟動(dòng)哪個(gè)區(qū)。獨(dú)立存儲(chǔ)區(qū)如EEPROM/Flash末尾保存啟動(dòng)計(jì)數(shù)、升級狀態(tài)、回滾計(jì)數(shù)等運(yùn)行時(shí)信息。這個(gè)分級加載的好處在于任何一級出現(xiàn)問題都能定向排查。頭部解析失敗優(yōu)先查固件生成工具BootLoader跳不過去查啟動(dòng)標(biāo)志位和地址映射APP運(yùn)行異常查向量表和運(yùn)行時(shí)環(huán)境。系統(tǒng)性方法遠(yuǎn)勝于拿到板子就瞎猜。3. 故障定位方法論用“分層抽絲”代替“四處亂試”3.1 一個(gè)被我反復(fù)安利的定位框架NBOOT四步法我給團(tuán)隊(duì)定的故障定位框架叫NBOOT不是某個(gè)專利方法而是從實(shí)際排障中總結(jié)出來的一套習(xí)慣。四個(gè)字母分別對應(yīng)Noting記錄現(xiàn)象、Breaking拆分層次、Observing觀測數(shù)據(jù)、Testing驗(yàn)證假設(shè)。這套方法在啟動(dòng)問題、偶發(fā)復(fù)位、OTA失敗等場景中都很管用。做嵌入式故障定位最容易犯的毛病是拿到板子就改代碼。改了一行試試不行再改一行再試。運(yùn)氣好碰對了就收工運(yùn)氣不好一天下來代碼改得面目全非問題還在。NBOOT的初衷是讓你先建立一個(gè)“事實(shí)清單”再去動(dòng)代碼。以我接手的一個(gè)實(shí)際案例為例某設(shè)備低溫環(huán)境下偶發(fā)啟動(dòng)失敗大約二十臺里有三臺會(huì)出現(xiàn)。故障現(xiàn)象是“上電后電源指示燈亮但串口無輸出LED狀態(tài)燈不進(jìn)入工作模式”。如果不做記錄直接上手很可能會(huì)懷疑電源模塊、懷疑時(shí)鐘芯片、懷疑Flash虛焊改來改去沒有結(jié)論。按NBOOT走一遍Noting記錄故障板卡批次、故障溫度點(diǎn)、供電電壓測量值、復(fù)位引腳波形、串口完整數(shù)據(jù)流。結(jié)果發(fā)現(xiàn)低溫時(shí)3.3V電源正常但復(fù)位釋放時(shí)間比正常板卡慢約280ms且串口完全沒有引導(dǎo)打印。Breaking把啟動(dòng)過程拆成電源域建立、時(shí)鐘穩(wěn)定、復(fù)位釋放、BootROM執(zhí)行、鏡像加載、APP初始化六個(gè)環(huán)節(jié)逐一判斷哪個(gè)環(huán)節(jié)現(xiàn)象缺失。Observing用示波器抓取Flash片選和時(shí)鐘信號發(fā)現(xiàn)復(fù)位釋放后約5msFlash CS有動(dòng)作但持續(xù)時(shí)間極短疑似讀取了錯(cuò)誤的地址區(qū)域。Testing將故障板卡的固件手動(dòng)重?zé)_認(rèn)CRC一致后重新上電問題偶發(fā)依舊。最終定位到外部復(fù)位看門狗芯片在低溫下復(fù)位延遲參數(shù)漂移與啟動(dòng)時(shí)序沖突。這個(gè)案例說明一個(gè)問題邊界不清晰的故障硬擼代碼是無效的。記錄現(xiàn)象、拆分層次、觀測數(shù)據(jù)、驗(yàn)證假設(shè)這四步反復(fù)循環(huán)每一步都會(huì)縮小排查范圍。3.2 啟動(dòng)日志設(shè)計(jì)決定你排查效率的隱形投資很多裸機(jī)項(xiàng)目沒有日志系統(tǒng)出了問題只能用調(diào)試器打斷點(diǎn)這在開發(fā)階段可能夠用一旦到了量產(chǎn)和現(xiàn)場維護(hù)階段就非常痛苦。我對啟動(dòng)日志的要求是“四有原則”有層次、有時(shí)間、有結(jié)論、有上下文。有層次的意思是日志要分級別至少要分ERROR、WARN、INFO、DEBUG。啟動(dòng)階段的關(guān)鍵節(jié)點(diǎn)用INFO記錄比如[I] RAM size check passed, size128KB [I] Flash magic word check OK (0xAA55AA55) [I] Image CRC32 verify OK, len0x1F400 [I] Jumping to APP at 0x08020000, VTOR setting done有時(shí)間的含義是日志要帶時(shí)間戳哪怕是最簡易的計(jì)數(shù)器遞增序號也行。當(dāng)你要把兩份日志對齊分析時(shí)沒有時(shí)間戳是災(zāi)難。很多RTOS項(xiàng)目啟動(dòng)階段還沒創(chuàng)建系統(tǒng)節(jié)拍可以用一個(gè)遞增的32位計(jì)數(shù)器模擬順序時(shí)間。有結(jié)論指的是日志要輸出“我成功做了什么”或“我在哪一步失敗了”而不是只輸出“Im here”。比如// bad UART_Print(Init 1 done); UART_Print(Init 2 done); // good UART_Print(W25Q64 ID read 0xEF4018, detection OK); UART_Print(LVGL framebuffer addr0x30020000, size310KB, alignment OK);有上下文的意思是關(guān)鍵錯(cuò)誤打印時(shí)要把現(xiàn)場數(shù)據(jù)一并輸出。比如CRC校驗(yàn)失敗光一句“CRC Fail”是沒用的要輸出當(dāng)前分區(qū)、期望CRC、實(shí)際CRC、讀取的Flash地址范圍這樣才方便分析是數(shù)據(jù)被篡改還是讀取邏輯出錯(cuò)。提示啟動(dòng)日志要設(shè)計(jì)成“雙通道輸出”。串口打印輔助人工調(diào)試同時(shí)寫入一塊獨(dú)立的日志分區(qū)或RAM環(huán)形緩沖區(qū)配合崩潰轉(zhuǎn)儲(chǔ)機(jī)制可追溯最后一段現(xiàn)場狀態(tài)。這是工業(yè)級產(chǎn)品很常見的做法。3.3 崩潰現(xiàn)場的信息存檔從HardFault到問題閉環(huán)故障定位的高階階段是不要等故障發(fā)生后再去“現(xiàn)場看”——而是在崩潰瞬間把所有關(guān)鍵狀態(tài)記錄下來下次啟動(dòng)時(shí)上報(bào)。這個(gè)思路在汽車電子里叫故障快照在通用嵌入式里可以做得輕量很多。Cortex-M的HardFault處理程序里有幾個(gè)關(guān)鍵寄存器BFAR總線錯(cuò)誤地址寄存器、MMFAR存儲(chǔ)器管理錯(cuò)誤地址寄存器、以及壓棧到當(dāng)前棧幀里的PC和LR。正確的做法是在fault handler的最開始把這些值保存到靜態(tài)變量里然后嘗試寫到備份寄存器或Flash末尾的日志區(qū)然后軟復(fù)位。復(fù)位后的啟動(dòng)日志階段把上次崩潰信息打印出來。我在專欄的課里給過一個(gè)精簡但可用的架構(gòu)void HardFault_Handler(void) { uint32_t pc __get_PSP(); // or MSP // 解析壓棧幀提取PC/LR保存到備份區(qū) // 寫入復(fù)位原因寄存器快照 // 觸發(fā)系統(tǒng)軟復(fù)位 }這里有個(gè)容易忽略的細(xì)節(jié)HardFault_Handler里的另一個(gè)CPU模式可能已經(jīng)切換到線程模式也可能還在處理器模式。如果異常發(fā)生在線程模式且使用了PSP需要按PSP去解棧如果發(fā)生在MSP則從MSP解棧。很多新手踩過這個(gè)坑解析出的PC完全是垃圾值。在專欄第3講“崩潰轉(zhuǎn)儲(chǔ)機(jī)制設(shè)計(jì)”中我做了一個(gè)完整的示例將PC、LR、PSP、MSP、BFAR、MMFAR、以及出錯(cuò)前后的32字節(jié)內(nèi)存快照寫入外部Flash的專用區(qū)域啟動(dòng)時(shí)通過串口協(xié)議CRASH_DUMP:PC0x08001234,LR0x08001100輸出。這個(gè)過程一拿到現(xiàn)場日志直接就能還原95%以上的崩潰現(xiàn)場不必再復(fù)現(xiàn)故障。4. OTA升級工程化穩(wěn)定回滾比順利升級更重要4.1 OTA整體架構(gòu)從“能用”到“好用”的幾個(gè)關(guān)鍵設(shè)計(jì)很多人做OTA的第一版是“能升級就行”BootLoader檢測到標(biāo)志位把新固件寫入APP區(qū)跳轉(zhuǎn)。但量產(chǎn)之后就會(huì)發(fā)現(xiàn)最危險(xiǎn)的不是升級失敗而是升級失敗的后果不可控設(shè)備變磚、無法回滾、長期離線。工程化的OTA架構(gòu)至少要包含以下要素升級包格式設(shè)計(jì)包含頭部魔數(shù)、版本、目標(biāo)地址、長度、CRC、固件數(shù)據(jù)、尾部填充、可選簽名信息。雙區(qū)A/B或者雙備份APP Recovery的存儲(chǔ)布局。BootLoader驗(yàn)簽和校驗(yàn)邏輯升級后才能跳轉(zhuǎn)。升級狀態(tài)機(jī)和斷點(diǎn)續(xù)傳機(jī)制如果走網(wǎng)絡(luò)傳輸?;貪L策略和失敗恢復(fù)路徑。升級過程中的防斷電設(shè)計(jì)數(shù)據(jù)先寫緩沖區(qū)校驗(yàn)后再整塊寫入。我見過很多團(tuán)隊(duì)一開始就上復(fù)雜的A/B系統(tǒng)車規(guī)級方案全套照搬結(jié)果開發(fā)周期拖長還因?yàn)榇鎯?chǔ)空間不夠頻繁調(diào)整分區(qū)。更好的策略是先判斷產(chǎn)品形態(tài)如果是物聯(lián)網(wǎng)設(shè)備有網(wǎng)絡(luò)傳輸條件一定要做A/B分區(qū)哪怕是A/B其中一個(gè)是壓縮鏡像如果是U盤或本地工具升級空間緊張時(shí)可以做單區(qū)域備份恢復(fù)區(qū)方案。一個(gè)實(shí)用的折中方案是APP區(qū) Recovery區(qū)。Recovery區(qū)放一個(gè)極簡的、功能完整的固件支持最基本的網(wǎng)絡(luò)通信和重新升級能力。APP區(qū)崩潰或校驗(yàn)不過時(shí)BootLoader跳RecoveryRecovery嘗試聯(lián)網(wǎng)拉取最新固件。這個(gè)方案比A/B省空間又比“裸奔”可靠得多。4.2 雙A/B鏡像與“寫失敗即回滾”的代碼級實(shí)現(xiàn)很多同事一聽到A/B升級就怕覺得復(fù)雜度高。實(shí)際上A/B的思路很樸素系統(tǒng)有兩個(gè)可用的應(yīng)用槽位一個(gè)叫slot A一個(gè)叫slot B。BootLoader永遠(yuǎn)有一個(gè)“當(dāng)前活動(dòng)槽”的概念。升級時(shí)把新固件寫到非活動(dòng)槽寫完校驗(yàn)通過后通過修改啟動(dòng)標(biāo)志位切換活動(dòng)槽。如果新固件啟動(dòng)失敗比如多次重啟都沒成功BootLoader自動(dòng)回滾到另一個(gè)槽位。關(guān)鍵實(shí)現(xiàn)點(diǎn)有三個(gè)。第一分區(qū)表如何定義。以STM32H750為例內(nèi)部Flash雖然標(biāo)稱2MB但實(shí)際有效可用空間可能有坑外擴(kuò)Flash更常見。我的做法是把Flash劃分為| BootLoader (64KB) | slot A (512KB) | slot B (512KB) | AppInfo/標(biāo)志區(qū) (4KB) |AppInfo區(qū)存儲(chǔ)三個(gè)關(guān)鍵變量boot_attempts啟動(dòng)嘗試次數(shù)、active_slot當(dāng)前活動(dòng)槽、upgrade_pending是否有待完成升級。第二BootLoader的啟動(dòng)決策邏輯可以精簡為if (is_valid(active_slot)) { if (boot_attempts MAX_ATTEMPTS) { active_slot other_slot(active_slot); boot_attempts 0; } jump_to(active_slot); } else { rollback_to(other_slot()); }這里MAX_ATTEMPTS通常設(shè)為3或5。每次啟動(dòng)時(shí)boot_attempts加一App正常工作后比如運(yùn)行超過5分鐘清零。如果新固件有問題導(dǎo)致頻繁復(fù)位boot_attempts會(huì)持續(xù)增加到閾值就觸發(fā)回滾。第三App側(cè)的“運(yùn)行成功確認(rèn)”邏輯。這個(gè)比BootLoader側(cè)更隱蔽。很多團(tuán)隊(duì)的App在main函數(shù)一開始就清標(biāo)志位但這等于告訴BootLoader“我成功了”——實(shí)際上模組串口都不一定初始化完。我的建議是清標(biāo)志位放在一個(gè)“應(yīng)用就緒檢查點(diǎn)”例如網(wǎng)絡(luò)連接成功、文件系統(tǒng)掛載成功、自檢通過之后寧可多等幾秒再清也別過早確認(rèn)。void app_main(void) { hardware_init(); // ... 關(guān)鍵外設(shè)自檢 if (all_self_tests_passed()) { ota_mark_boot_successful(); // 清 boot_attempts } // 繼續(xù)運(yùn)行 }4.3 加簽驗(yàn)簽汽車嵌入式軟件OTA的底線防線標(biāo)題里有“汽車嵌入式軟件ota加簽驗(yàn)簽”這個(gè)熱搜詞確實(shí)反映了行業(yè)趨勢。以前MCU固件不怎么關(guān)心簽名因?yàn)槲锢斫佑|燒錄器就能刷。但OTA普及后固件包在網(wǎng)絡(luò)傳輸若沒有簽名機(jī)制中間人攻擊或者惡意固件植入就成了真實(shí)威脅。簽名方案不是加一個(gè)函數(shù)就完事。硬件存儲(chǔ)條件、密鑰管理、升級包格式都要配套設(shè)計(jì)。我常用的方案是固件發(fā)布時(shí)用私鑰對固件哈希做簽名比如ECDSA或RSA-PSS簽名和固件一起打包。芯片內(nèi)部或外部安全芯片預(yù)置公鑰固件。BootLoader在驗(yàn)簽時(shí)先計(jì)算固件的SHA-256哈希再用公鑰驗(yàn)證簽名。驗(yàn)簽通過后才繼續(xù)做CRC校驗(yàn)和跳轉(zhuǎn)。在實(shí)際代碼里簽名驗(yàn)證的耗時(shí)是個(gè)需要重視的工程問題。一個(gè)512KB的固件在Cortex-M7 400MHz下算SHA-256大概幾百毫秒到1秒加上RSA驗(yàn)簽本身幾十到幾百毫秒不等如果升級包還做了AES加密解密總時(shí)間可能達(dá)到數(shù)秒。這塊時(shí)間在升級流程總時(shí)間里的占比要提前評估否則用戶會(huì)以為設(shè)備卡死了。另外簽名的密鑰管理比算法本身更容易翻車。私鑰一旦泄露整個(gè)產(chǎn)品線的信任鏈就垮了。我在專欄里專門講過分級密鑰體系開發(fā)密鑰、測試密鑰、生產(chǎn)密鑰分離生產(chǎn)密鑰存HSM硬件安全模塊編譯服務(wù)器和開發(fā)機(jī)用不同的簽名工具鏈。這聽起來“過度設(shè)計(jì)”但做過汽車電子或智能門鎖類產(chǎn)品的朋友一定明白密鑰泄露帶來的返廠維護(hù)成本有多恐怖。4.4 斷點(diǎn)續(xù)傳、斷電保護(hù)和異常分支OTA失敗的六個(gè)隱藏坑總結(jié)一下我做過和踩過的OTA相關(guān)坑很多坑不是功能不跑而是跑到一半出幺蛾子。這里列六個(gè)發(fā)生率最高的第一個(gè)是斷電寫Flash。升級過程中如果突然斷電Flash正在擦寫的那一個(gè)扇區(qū)很可能損壞?;謴?fù)策略是“寫前備份舊固件”或“升級過程先寫副本完成后再切換”。如果存儲(chǔ)空間不允許做副本至少要在擦除扇區(qū)前把舊數(shù)據(jù)備份到另一個(gè)介質(zhì)外擴(kuò)Flash、SD卡否則斷電即變磚。第二個(gè)是網(wǎng)絡(luò)下載的“斷點(diǎn)續(xù)傳”沒有做完整。很多人只在傳輸層做了續(xù)傳比如HTTP Range但沒考慮Flash層的續(xù)寫如果下載了一半斷電Flash里已經(jīng)寫入了部分新固件下次重新升級時(shí)要先擦除再從頭寫。而如果沒做版本號管理重啟后BootLoader可能誤以為該分區(qū)已經(jīng)有了完整固件直接跳過去。第三個(gè)是升級完成后的校驗(yàn)位置不對。有些團(tuán)隊(duì)只在下載完成后校驗(yàn)一次但忽略了解壓、解密的校驗(yàn)。OTA包經(jīng)過壓縮或加密后實(shí)際寫入Flash的內(nèi)容和傳輸包內(nèi)容不一致必須對“最終寫入的鏡像”再算一次哈希。第四個(gè)是升級狀態(tài)標(biāo)志位存儲(chǔ)介質(zhì)選錯(cuò)。比如放在主Flash的某個(gè)地址這個(gè)地址在BootLoader升級時(shí)恰好被擦除或者放在沒有電源掉電保護(hù)的EEPROM里。正確做法是獨(dú)立分區(qū)冗余存儲(chǔ)寫兩份互為備份啟動(dòng)時(shí)多數(shù)據(jù)源仲裁。第五個(gè)是升級過程被用戶的“正常操作”打斷。比如用戶升級到90%時(shí)手動(dòng)斷電了系統(tǒng)沒有足夠快的恢復(fù)機(jī)制導(dǎo)致BootLoader無法判斷“這次升級是否完成”。解決思路是每個(gè)分區(qū)頭部增加狀態(tài)機(jī)字段IDLE、DOWNLOADING、READY、并配合超時(shí)機(jī)制BootLoader在每次啟動(dòng)時(shí)做狀態(tài)清整。第六個(gè)是“升級成功的確認(rèn)標(biāo)準(zhǔn)”定義不清晰。是代碼跳轉(zhuǎn)成功就算成功還是外設(shè)全部初始化完畢、業(yè)務(wù)跑通才算成功如果只要跳轉(zhuǎn)就確認(rèn)成功新固件業(yè)務(wù)邏輯錯(cuò)誤導(dǎo)致反復(fù)重啟你也無法自動(dòng)回滾。所以行業(yè)共識是“業(yè)務(wù)級成功確認(rèn)”即新固件跑起來后主動(dòng)上報(bào)一個(gè)心跳或業(yè)務(wù)就緒標(biāo)志給BootLoader或云端。5. 上篇課后思考題完整解析一道啟動(dòng)流程題的四種解法5.1 題目回顧與常見錯(cuò)誤上篇專欄我在文末留了一道思考題“某基于Cortex-M4的物聯(lián)網(wǎng)終端BootLoader位于0x08000000用戶APP鏈接地址為0x08020000。系統(tǒng)上電后從BootLoader跳轉(zhuǎn)APP發(fā)現(xiàn)所有串口中斷都能正常觸發(fā)但SysTick定時(shí)器中斷不工作。已知代碼中已設(shè)置SCB-VTOR 0x08020000。請分析可能原因并給出最少兩步排查方案?!边@道題很多人第一反應(yīng)是“VTOR設(shè)置不對”或“中斷優(yōu)先級沒配”但從題目給的條件看VTOR已經(jīng)設(shè)置了中斷也能觸發(fā)優(yōu)先級問題不至于只影響SysTick。這道題真正想考察的是“中斷向量表正常運(yùn)行需要的完整前置條件”。來分析常見錯(cuò)誤回答“NVIC沒使能SysTick中斷”的邏輯上不確切。SysTick中斷由SysTick控制器自身控制和NVIC的使能位不是一個(gè)概念。回答“時(shí)鐘沒配置”的方向沾邊但不能解釋為什么串口中斷正常。如果SysTick的時(shí)鐘源有問題SysTick確實(shí)跑不了但題目沒給出配置細(xì)節(jié)?;卮稹癝ysTick優(yōu)先級配低了被其他中斷打斷”的這個(gè)有可能但題目說“中斷不工作”通常是完全不觸發(fā)而不是觸發(fā)被延遲。5.2 關(guān)鍵原理SysTick的時(shí)鐘源與向量表偏移的關(guān)系要徹底解釋這個(gè)問題需要回到SysTick的工作機(jī)制。在Cortex-M4上SysTick定時(shí)器的時(shí)鐘源可以選處理器時(shí)鐘HCLK或者外部參考時(shí)鐘如HCLK/8。這部分配置在SYST_CSR寄存器的CLKSOURCE位。如果你代碼里初始化SysTick時(shí)依賴了某個(gè)時(shí)鐘源而這個(gè)時(shí)鐘源在APP區(qū)鏈接地址下沒有被正確初始化那么SysTick就會(huì)失效。但這道題更想考察的其實(shí)是一個(gè)隱蔽點(diǎn)如果應(yīng)用代碼使用了__enable_irq()或NVIC_EnableIRQ(SysTick_IRQn)來開啟SysTick中斷其實(shí)往NVIC里寫的是中斷使能這沒有問題。然而向量表重映射后中斷服務(wù)函數(shù)里SysTick_Handler的地址必須出現(xiàn)在新的向量表地址處。如果你的鏈接腳本或中斷處理函數(shù)定義有誤比如中斷函數(shù)被編譯器優(yōu)化掉了、或者使用了弱符號覆蓋即使向量表地址正確中斷來了也找不到處理函數(shù)。另一種可能是SysTick的異常優(yōu)先級和FAULTMASK/PRIOMASK沒有理清。Cortex-M處理器在執(zhí)行某些臨界區(qū)保護(hù)代碼時(shí)會(huì)暫時(shí)屏蔽中斷如果SysTick_Handler里正好有這類操作比如用__disable_irq做互斥保護(hù)忘了恢復(fù)也會(huì)出現(xiàn)“中斷進(jìn)不去”的現(xiàn)象。但這類問題通常是代碼邏輯層面的偶發(fā)不是一上電就完全不工作。5.3 最少兩步排查方案從復(fù)現(xiàn)到定位這道題我給出參考答案的思路是“先用最小系統(tǒng)復(fù)現(xiàn)再對比差異”。第一步寫一個(gè)最小SysTick測試函數(shù)不依賴任何外設(shè)和RTOS直接初始化SysTick并開中斷回調(diào)里翻轉(zhuǎn)一個(gè)GPIO。如果這個(gè)最小系統(tǒng)能跑證明向量表、SysTick時(shí)鐘源、中斷使能鏈路都沒問題。如果還是不能跑就要懷疑向量表本身或鏈接腳本的符號分配。第二步在SysTick_Handler的第一行設(shè)置一個(gè)軟件斷點(diǎn)或打印比較跳轉(zhuǎn)前與跳轉(zhuǎn)后、調(diào)試模式下與獨(dú)立運(yùn)行下SysTick是否一致。關(guān)鍵觀察點(diǎn)是如果調(diào)試模式下OK獨(dú)立運(yùn)行不OK大概率是啟動(dòng)代碼中某個(gè)外設(shè)或時(shí)鐘初始化順序問題如果兩個(gè)模式都不OK回到第一步逐層確認(rèn)。實(shí)際操作中我還會(huì)加一個(gè)驗(yàn)證手段反向測試。用一個(gè)已知能正常運(yùn)行SysTick的官方示例工程把APP地址從0x08000000改到0x08020000用同一個(gè)BootLoader跳轉(zhuǎn)觀察是否能運(yùn)行。如果官方示例能運(yùn)行說明問題在自己的工程鏈接或初始化代碼里如果也不能運(yùn)行則要懷疑BootLoader跳轉(zhuǎn)時(shí)的處理器狀態(tài)沒有完全準(zhǔn)備好。5.4 從思考題擴(kuò)展三種“邊界情況”在實(shí)際項(xiàng)目里的對應(yīng)思考題不止是考試我把它的考察點(diǎn)對應(yīng)到實(shí)際項(xiàng)目里三種高頻邊界情況方便大家“連點(diǎn)成線”。第一種是“跳轉(zhuǎn)前外設(shè)狀態(tài)未清理”。BootLoader用過UART、DMA、Flash控制器跳轉(zhuǎn)前必須把這些外設(shè)復(fù)位到默認(rèn)狀態(tài)否則APP初始化時(shí)會(huì)基于臟狀態(tài)工作。比如BootLoader開啟了DMA并啟用了緩存跳轉(zhuǎn)后APP如果沒重新初始化可能會(huì)出現(xiàn)“數(shù)據(jù)錯(cuò)亂但寄存器看起來正常”的詭異現(xiàn)象。解決辦法是在跳轉(zhuǎn)函數(shù)里執(zhí)行SystemReset()之前先復(fù)位外設(shè)并關(guān)閉全局中斷。第二種是“編譯器和鏈接腳本的段布局問題”。APP鏈接地址改了但中斷向量表所在段可能被鏈接器安排到了別的位置0x08020000處一開始并不是向量表。這種情況下即使設(shè)置了VTORCPU也會(huì)從錯(cuò)誤的內(nèi)存位置去取向量表導(dǎo)致中斷行為異常。排查方法查看Map文件確認(rèn)__Vectors符號的實(shí)際地址是否等于0x08020000。第三種是“啟動(dòng)代碼里的全局變量初始化依賴外部條件”。比如有些啟動(dòng)代碼在__main階段會(huì)執(zhí)行C庫的初始化這個(gè)過程可能依賴某個(gè)外設(shè)地址的訪問如果BootLoader階段把該地址寄存器鎖死了或設(shè)置成不同的模式則會(huì)造成啟動(dòng)失敗。處理思路是區(qū)分“啟動(dòng)代碼所需最小外設(shè)集合”和“應(yīng)用外設(shè)集合”在BootLoader中避免碰觸后者。6. 寫在后面一套適合多數(shù)項(xiàng)目的啟動(dòng)與OTA自檢清單專欄連載的時(shí)間線拉得挺長最后這期我想把前面幾講的核心結(jié)論濃縮成一份可以直接拿來自檢的清單。這份清單并不是放了生產(chǎn)環(huán)境就萬事大吉而是用來在項(xiàng)目設(shè)計(jì)階段、代碼評審階段、以及量產(chǎn)問題排查階段快速對表找差異。啟動(dòng)流程相關(guān)確認(rèn)復(fù)位向量和初始SP地址存在于Flash映射的正確地址鏈接腳本符合芯片內(nèi)存布局。確認(rèn)BOOT引腳或啟動(dòng)源配置與預(yù)期啟動(dòng)介質(zhì)一致特別是多介質(zhì)切換的項(xiàng)目。CPU上電后最先執(zhí)行的是BootROM/芯片固件還是應(yīng)用代碼各自的職責(zé)邊界是否清晰。向量表重映射和SCB-VTOR設(shè)置是否在對外設(shè)進(jìn)行任何中斷操作之前完成。全局變量初始化、堆棧設(shè)置、C庫初始化是否不依賴未初始化外設(shè)。啟動(dòng)日志有層次、有時(shí)間戳能回答“跑了幾步、卡在哪一步”。HardFault現(xiàn)場能保存PC/LR/SP/異常狀態(tài)并能在下一次啟動(dòng)時(shí)上報(bào)。故障定位方法論相關(guān)拿到的每一塊異常板卡都有唯一編號和故障現(xiàn)象記錄。排查時(shí)遵循“先記錄現(xiàn)場、再分析代碼”的順序不要上來就改代碼。能畫出啟動(dòng)階段狀態(tài)機(jī)明確每一步的“成功條件”和“失敗出口”。日志和崩潰信息有統(tǒng)一的輸出協(xié)議方便自動(dòng)化解析。OTA升級相關(guān)升級包格式里包含版本號、CRC32、目標(biāo)地址、長度、簽名信息。BootLoader具備校驗(yàn)失敗不跳轉(zhuǎn)、多次啟動(dòng)失敗自動(dòng)回滾的邏輯。App側(cè)“啟動(dòng)成功標(biāo)志”在業(yè)務(wù)就緒后才清而不是一進(jìn)main就清。分區(qū)表里有獨(dú)立的狀態(tài)區(qū)斷電不會(huì)破壞狀態(tài)字段的完整性。升級流程中每一步都有超時(shí)和失敗分支不會(huì)被“卡死”在半路。私鑰由專人管理開發(fā)、測試、生產(chǎn)環(huán)境隔離簽名工具鏈獨(dú)立。做個(gè)簡單的統(tǒng)計(jì)就能發(fā)現(xiàn)產(chǎn)品在現(xiàn)場出的啟動(dòng)類和OTA類問題絕大多數(shù)屬于“設(shè)計(jì)時(shí)沒有考慮異常路徑”或者“日志信息不足以支撐定位”。這些不是硬件缺陷也不是編譯器的鍋而是工程化經(jīng)驗(yàn)的沉淀。我在專欄里反復(fù)強(qiáng)調(diào)的一個(gè)觀點(diǎn)是嵌入式固件不能只追求“功能正確”要追求“可觀測、可維護(hù)、可回退”。功能正確是及格線后面這三個(gè)才是真正的進(jìn)階方向。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
人人射人人高潮| 激情网五月天| 色综合女人99| 开心 五月 综合| 亚洲另类噜噜| 久久九九激情五月天 | 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 九九婷婷网五月天| 另类丁香五月天区图| 99.N在线视频| 青青草视频福利| 97精品综合| 另类图片色五月| 久久视频在线| 人妻中文字幕精品| 久久久久久久久人妻| 五月激情六月丁香| 97干免费视频| 色婷婷欧美| 91视频久久久| 狠狠综合网| 久久女人九九| 婷婷综合五月天| 青青草原爱爱网| 女力报到正好爱上你| 免费视频1区| 干婷婷五月天| BBWCUCKOLD精品熟妇| 天天操天天操| 色综合婷婷99| www.色五月| 玖玖爱资源站| 26uuu亚洲| 99热婷婷| 人妻丰满精品一区二区A片| 操人妻90p| 香蕉婷婷| 久久人妻伊人| www色五月| 亚洲av网站| 婷婷色色网| 丁香色色网| 777精品成人a v久久| 激情婷婷五月天| 日夜夜天天| 超碰色热| 开心五月综合激情网| 丁香花五月天激情| 成人午夜天| 超碰熟女拍拍| 欧美精品久久久久久视频观看| 成人短视频在线观看| 午夜性爱影视一区77| 久久38视频| www.99热视频| 丁香六月爱综合| 久色大香蕉| 亚洲综合色色色| 婷婷五日b| 91女人18毛片水多国产| 日本狠狠干| 热思思| 日韩欧美成人片| 五月婷婷六月激情| 色婷婷视频| 丁香五月综合在线播放| 激情深愛五月視頻| 國語久久婷| 字幕网AV中文字幕| 婷婷久久色| 桔色成人官方网站| 成人 在线 日韩| 激情综合五月丁香六月婷婷| 亚州色婷婷| 噼里啪啦在线观看免费完整版视频| 久久99热这里只有精品23| 色色综合热| 亚洲激情av| 99热8| 79亚洲精品少妇| 五月婷啪啪| 色色色色色五月| 亚洲日韩乱码一区二区三区四区 | 黄网在线免费观看| 五月丁香网站| 日韩 mm 不卡| 任你搞在线观看视频| 少妇高潮呻吟A片免费看软件| h在线看免费版在线看| 亚洲色欲欧美一区二区三区| 精品99在线| 婷婷五月天成人视频| 精品久久久91久久影视网| 91丨九色丨熟女高潮| 99久在线精品99re8热| 色婷丨日丨天丨综合久久| 玖玖婷婷五月天| 激情婷婷。| 人妻丰满精品一区二区A片| 九九伊人网| 日韩成人电影AV| 五月丁香婷婷婷激情爱爱| 婷婷五月成人系列| 久色激情| 久久久com| 9l视频自拍9l视频自拍九色学生| 色综合大香蕉| 第四色五月天| 91九色精品熟女内射| 国产精品人成A片一区二区| 丁香激情五月天| 99精品无码| 99热国品| 久久五月天激情婷婷| 91av视频| 一级性感黄色内射视频| 综激情网| 婷婷六月网| 久久精典| 五月丁香激情综合网官网| 亚洲综合激情五月天婷婷| 色综合久| 久久九九网| 天天爽天天爽| xxxx五月天色色| 久热91精品| 精品一区二区三区四区五区六区介绍| 五月天色在线| 99视频在线观看网址| 91蜜桃婷婷狠狠久久综合9色| 天天日夜夜拍| 丁香婷婷五月色综合| 卡视频1区2区| 欧洲永久精品| 免费五月婷婷网| 人妻视频在线| 免费看欧美成人A片无码| 五月天激情色色| 欧美亚洲成人在线| 五月婷婷免费| 色99视频| 中文字幕激情综合| 婷婷播播五月天| 婷婷丁香五月亚洲综合网在线视频观看| 亚洲日日操| 思思热视频在线观看| 熟妇人妻中文字幕无码老熟妇| 在线色婷婷| 99热热这里只精品996小说| 色五月婷婷操逼| 色综合网综合| 97碰在线视频| 大香蕉丁香| 人妻系列久久久久久久久久久| 婷婷五月天亚洲综合| 亚洲热综合| 激情久久综合网| 九九热这里精品| 久色| 欧美日韩五月婷婷| 伊人9999| 玩熟女五十AV一二三区| 91seav| 色九九九九| 99国产精品久久久久久久久久久| 午夜婷婷丁香| 狠狠穞A片一區二區三區| 精品一区二区三区三区| 九九爱激情| 五月开心播播网| 五月婷婷在线短视频| 五月天淫乱视频| 国产性爱在线| 91操操操| 狠狠精品干练久久久无码中文字幕| 97婷婷狠狠| 婷色五月天| 狠狠狠狠青草| 亚洲aV写真天天综合网久久| 丁香花社区av| 亚洲久久视频| 五月停性愛| 这里只有精品99www| 天天操综合网| 99re熱| 五月天婷婷基地综合网| 婷婷亚洲色| 午夜九九九九九九九九九九九九九| 婷婷五月开心六月AV| 婷婷五月永远18免费久久久| 人人人人人人人草| 六月丁香色色色| 色99在线| 国产VA播放| 激情深爱五月天| 国产精品久久99| 国产亚洲精品AAAAAAA片| 婷婷网影院| 26uuu欧美| 大香蕉九九| 国产欧美精品AAAAAA片| 色婷婷偷拍| 免费人人操| 亚洲精品国产精品乱码视99| 亚洲综合在线视频| 丰满少妇乱A片无码| 丁香色综合| 亚洲午夜视频| 一本到不卡高清DVD| 婷婷五月六月丁香| 激情久久久| 婷婷导航| 久久伦乱| 色久激情在线| 91爱啪啪| 日日操夜夜操中国无码| 九色视频91疯狂| 99精品爱| 丁香五月婷婷性爱| www综合久久| 99热这里只有精品55| 五月丁香亚洲综合网| 婷婷综合日本| 丁香五月婷婷操逼| 综合网激情| 亚艹艹| 好吊操这里只有精品| AV片在线观看| 色伦专区97中文字幕| 欧美影院| 日韩操逼小电影| 亚洲激情 久久| 99在线播放视频| 国产精品男人AV不卡| 久操婷婷| 99热这里只有精品5| 天天爽夜夜操| 五月婷婷婷丁香播| 五月天亭亭俺也| 久久aaaaa| 激情五月天色色网| 这里只有精品视频在线| 色色日韩无码| 久久aaaa片一区二区| 91精品久久久久久综合五月天| 嫩草AV久久伊人妇女超级A| 天天色天天爱天天爱天天爱y| 大香蕉AV在线| 成人片在线播放| 中文字幕人妻AV| 99久操视频| 丁香情色五月| 婷婷丁香五月基地| 久久九精品| 影音先锋自拍网| 少妇做爰免费视看片| 91久久久久久久| 99精品国产热久久91色欲| 欧美爆乳一区二区三区| 噜噜色com| 欧美黄色韩日网| 天天天操天天天日| 五月综合视频| 激情丁香五月婷婷| 69天堂99| 色九月丁香婷婷蜜桃在线观看| 9久热精品在线视频| 99热伊人综合| 久久人人九| 色九月| 99热福利| 热99这里只有精品视频| 婷婷九月在线| 五月天亭亭俺也| 亚洲激情婷婷| AⅤ网站在线看| 91丁香婷婷综合资源| 97超级碰碰碰| 亚洲av成人在线| 天天做天天爱高潮片| 欧美毛片www| 丁香婷婷五月综合| 这里只有精品视频免费在线观看| 久久综合激情| 五月婷久久综合| 婷婷五月色| 大地资源色婷婷视频在线| 婷婷五月花| 五月丁香久久| 97操碰人免费| 五月丁香六月香香蕉| 99热这里只有精品23| 婷婷十月激情综合网| 激情综合色| 久久九九99视频| 99热在线资源| 思思视频久久| 五月丁香婷婷欧美| 激情性爱五月天网页| 91chinese在线| www.26uuu.com亚洲电影| 色婷婷偷拍| 熟女色色一区二区| 丁香色五月婷婷17C| 丁香五月天精品| 殴美日韩成人| 一级片操逼视频| 天天综合网91| 成人丁香五月天| 一起草av| 五月色婷婷激情| 五月色情婷婷| 操操操Av| 狠狠婷婷色综合| 五月天婷婷av| 涩五月色婷婷| 无码AV免费精品一区二区三区 | 激情综合网,婷婷五月天| 91九色网| 五月丁激情| 激情六月丁香| 久久久久8888| 九九大香视频| 在线观看熟女少妇| 五月丁香综合网| 五月丁香激情啪啪| 日日夜夜狠狠| 特级操b片| 丁香五月欧美午夜视频| 超碰com| 伊人久久婷| 欧美激情中文字幕| 99色免费观看全部| 97人妻碰碰碰久| 久热黄色| 【乱子伦】黄色| 色噜噜狠狠色综无码久久合欧美| 日韩成人精品一区久久久久| 五月 婷 久| 久久久精品人妻| 色射影院| 九九视频在线观看视频6| 精品少妇蜜臀91| 免费AV在线网址| 另类图片色五月| 超碰97久久| 色五月网址| 性婷婷| 精品夜夜澡人妻无码AV| 免费不卡狠操美女视频网 | 99日韩| 2w在线视频| 日噜噜色| 五月婷婷六月丁香| henhencao国产在线| 色婷婷丁香五月| 婷婷.com| 婷婷亚洲丁香五月| 大香蕉婷婷丁香视频在线| 国产精品美女久久久久AV超清| 六月五月久久丁香| 色99在线| 婷婷无码视频| 国产另类综合| 91精品久久久久久综合五月天| 亚洲综合五月天婷婷丁香| 我爱宗和色| 色婷婷激情五月天| 丁香五月婷婷国产av| 丁香婷婷情色五月天| 婷婷色九月| 9久热精品在线视频| 99热这里只有精品22| 亚洲色vA| 免费国产VA国产免费| 午夜成人综合| 国产精品久久久爽爽爽麻豆色哟哟 | 丁香六月激情综合| 精品婷婷| 99爱视频| 色噜噜,噜噜色| 丁香五月性| 【乱子伦】黄色| 色婷婷中文在线| 亚洲AV无码电影| 精品久久艹| 亭亭色网| 日本激情五月天‘| 五月丁香六月婷婷亚洲激情综合| 六月婷婷五月丁香首页| 九九大香蕉黄色影院| BBWCUCKOLD精品熟妇| 无码啪啪| 久久综合婷婷| 国产日韩欧美| 少妇人妻偷人精品无码视频新浪| 久久丁香五月婷婷| 69精品人人人人| 五月天婷婷综合| 激情性爱五月| 九九99九九99| www色色色com| 久久久五月天| 丁香五月大香蕉在线99| 最新高清无码专区| 狠狠干,狠狠操| 在线视频婷婷| 婷婷五月乱交换| 99热丁香五月| 99精品国产热久久91色欲| 99热啪啪| 99爱免费在线观看| 久热只有这里精品| 色五月大| 狠狠爱婷婷色| 丁香五月天视频| 777影视理论片大全在线观看| 免费色婷婷| 99在线视频女女视频| 久久99综合网| 久久人妻情侣| 五丁香激情综合| 婷婷色5月天在线。| 第四色色六月色综合| 99色激| 中文不卡一二三区| 五月激情网站| 99久久久久| 97人人干视频| 久综合色| 久久草婷婷丁香网站| 久久爱婷婷| 91人人爽狠狠狠| 国产人妻人伦精品一区二区| 99re久热只有精品6在线直播.com| 日木狠狠干| 五月天激情无码专区| 狠狠干无码| 99热99| 婷婷五月情色| av在线免费网站| 国产欧美精品AAAAAA片| 99精品视频偷拍| 五月丁香人人婷婷在线观看| 99思思| 色色色五月| 婷婷成人综合| 五月激情网站| 4399欧美另类视频| 五月丁香婷婷成人综合网| 八戒青柠影视剧在线观看| 五月丁香婷婷婷激情爱爱| 成人性爱精品视频| 开心色色五月天综合| 99热成人| 婷婷五月色影视先锋| 天天操夜夜操| 六月婷婷综合激情| 最新无毒无码AV| 青草性爱视频| 日日操天天操| 1234操逼网| 久久久婷| 停停综合色色| 久久这里只有精品99| 色色丁香| 激情婷婷五月天网址| 亚洲激情另类| 九九色大香蕉| 性天天中文网| 五月丁香综合激情| 丁香色婷婷| 99久久婷| 色色色天堂网| 欧美色播综合在线观看| 免费观看全黄做爰的视频| 久这里只有精品99| 综合激情在线| 五月天伊人久久| 亚洲激情淫网| 可以看的AV| 99色干| 99性爱视频| 99资源人人| 久色大| 中文字幕五月久久婷| 91人操| 丁香五月激情网| 99久久天堂婷婷| 色婷婷网| 激情综合五月色丁香婷婷| 91热视频| 婷婷激情丁五月| 狠狠色综合无线观看| 国产午夜一区二区三区| 五月婷综合| 综合网啪| 五月婷综合| 欧美综合在线五月天色婷婷| 香蕉综合网| 天堂爱啪啪| 色五月丁香伊人五月| 五月天久久综合婷婷| 熟妇无码乱子成人精品| 九月丁香欧美综合| 九九色中文| 99久.| 国内久久亭亭| 婷婷色色播五月天| 大香蕉伊人久久| 婷婷五月天毛片| 色狠狠图片| 五月丁香六月婷| 91碰九色| 五月的丁香六月的婷婷| 亚洲操人| av在线观看免费| 夜夜资源站| 九热视频在线伦| 狠色狠色综合久久| 色婷婷性爱网| 久热欧美| 人人爱人人添| 99热国品| 国产色五月婷婷| 婷婷久久大香蕉| 欧美超级视频97| 国产综合激情五月久久| 五月丁香成人网| 婷婷射图| 俺去也五月天| 97色色婷婷五月天| 久热免费| 亚洲第一影院高清无码网站| 五月激情网五月综合网| 婷婷色色亚洲| 丁香开心深爱| 国产熟妇乱子伦hd| 婷婷激情五月天在线视频| 99国产精品久久久久久久久久久| 99亚色色色| 五月婷婷六月丁香| 久久最新色色色| 99热在线中文字幕| 99热资源在线| 伊人在线视频| 4399在线观看免费毛片| 91久热| 91精品久久久久久| 五月婷网| 日本高清久| AV在线中文| 日韩久久视频| 久久精品一区二区三区四区| 五月婷婷 激情五月| 久久五月天丁香| 九九视屏| 色五月六月| 婷婷丁香大香蕉| 深爱激情五月婷婷| 久久99网站| 99热www.| 99国产欧美视频| 婷婷五月天亚洲| 人妻 性久久久久久| 久久99精品久久久久子伦| 伊久久婷婷| 丁香久久五月天视频在线观看| 黄页免费一级视频懂色| 思思久久精品| 国产色99| 91丨九色丨东北熟女| 亚洲乱码日产精品BD| seav天堂| 国产色婷婷亚洲| 五月丁香A片| 久久香蕉网| 五月天激情子轮| 丁香五月婷婷综合激情啪啪啪| 五月天激情播播网| 中文字幕日产A片在线看| 婷婷五月天激情丁香| 一个色的综合| 伊人久久大香线蕉av最新| 五月婷婷六月丁香在线| 色五月丁香伊人五月| 91精品综合久久婷婷九色| 婷婷六月激情在线视频| 五月停停色| 婷婷丁香中文字幕| 男人的天堂五月丁香| 色天天综合天天综合频道。| 操婷婷基地| 婷婷五月丁香激情| 色偷偷五月天| 色色色99| 五月天激情小说欧美激情| 欧美噜噜免费观看| 无码人妻激情| 超级碰碰碰久久网站| 中字幕视频在线永久在线观看免费| 婷婷涩五月| 亭亭五月天黑人2014| 国产日批视频免费播放| 综合久久综合久久| 精品夜夜澡人妻无码AV| 五月丁香六月婷婷亚洲综合| 人妻五月天激情开心网| 丁香五月123| 日本啪啪视频HD| 美日韩成人| 色九九综合| 这里只有精品在线免费视频| 五月天色图| 久久综合中文| 日韩人妻无码精品| 日日夜夜亚洲一区| 骚逼视频一区2区| 国产精品a无线| 深爱五月婷婷| 天天插综合| 亚洲人妻av| 丰满少妇猛烈A片免费看观看 | 大香伊人婷婷| 六月婷婷香蕉| 五月色色色| 一区二区乱码视频| 丁香五月婷婷综合91| 久久天堂婷婷五月| 久草婷妨| 操九色| 欧洲MV日韩MV国产| 精品夜夜澡人妻无码AV| 婷婷在线播放| 99婷婷| 婷婷久久综合| www.五月天婷婷| 久久激情五月| 激情五月天影院| 国产精品涩涩涩视频网站| 人人草人人舔| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 久久大香蕉同僚| 巴基斯坦粉嫩无码视频| 操操操操操电影网| 色五月天中文字幕| 五月天婷婷影院影院观看| 色婷婷激情五月天在线观看| 天天干天天干天天干天天干天天| 能看的AV网站| 亚洲1区| 五月丁香婷婷无码中文| 激情五月伊人婷婷| 五月色综合网欧美网| 婷婷五月天美女| 亚洲色综合性| 国产亚洲在线| 九久九精品| 99色日本| 97人人操人人| 婷婷色亚洲| 亚洲性色XXXXX| 婷婷五月激情视频| 婷婷无码视频| 六月婷婷色色网| 久久网站观看免费欧洲国产 | 亚洲第一成人无码A片| www91精品| 99熟女| 色婷婷五月亚洲| 日本熟妇精品99| 色婷婷狠狠久久综合五月| 九月婷婷久久久| 丁香五月天啪啪激情综合网| 欧洲亚洲免费视频9| 亚洲第一成人无码A片| 九九热大香蕉| 超碰狠狠色| 婷婷在线播放| 丁香五月激情网| 思思热99er在线视频| 色老久久| 色综合久久8| 激情五月天之六月婷婷| 影视av久久久噜噜噜噜噜三级| 99热这里只有精| www久久久久久久97| 激情综合网亚洲色图| 九九Av| 国产精品24r| 国产99美少妇| 大香蕉99热| 99热全是精品| 九九九九九九九热| 丰满老熟妇BBBBB搡BBB | 六月丁香婷婷色狠狠久久| 丁香六月激情综合网| 色播五月婷婷| 超碰九色| 久久精品4| 激情爱爱网站超大免费| 色综合天天综合成人网| 日韩大片艹艹| 人妻啪啪啪| 人人97操| 天天插天天插天天插天天插| 双性美人被调教到喷水A片| 丁香五月六月久久综合| 狠狠干在线| 99re视频在线| 婷婷综合五月天| 六月丁香天堂| 九九热在线观看视频| 一本九九色| 我爱婷婷五月天综合88| 婷婷久久综合| 伊人五月天综合网| 亚洲操操操| 激情五月天综合网站网站网站| 激情综合网五月激情| 日本久久婷| 色色色婷婷五月天| 婷婷六月激情小说网| 亚洲色网络| 玖玖婷婷色五月| 桔色成人在线| 欧美婷婷九月| 久久五月天合网| JAPANRCEP老熟妇乱子伦视频| 激情五月天综合网| 五月丁香基地| 人人操操| 97在线碰| 激情深爱综合| Aaa久久| 26uuu亚洲欧美| 琪琪色影音先锋| 亚洲AV日韩无码| 五月婷婷啪啪| 亚洲精品一区中文字幕乱码| 婷婷五月天激情五月天网站| 五月丁香婷婷色啪| 日韩操逼小电影| 色婷亚洲| 亚洲最大视频| 深爱五月亚洲| 99在线视频免费| 九九自拍网| 亚洲色色在线| 中文字幕天天干| 亚洲色五月| 99久久er| 六月婷基地| 亚洲亚洲人成综合网络| 五月天四色房丁香亭亭| 天天激情5月天亚洲| 色五月激情五月| 综合五月天| 婷婷六月丁香激情综合| 婷婷五月天最新网址| 激情伊人| 婷婷五月中文字幕国产| 婷婷色在线播放| 草一草avb| 五月天婷婷色小说| 久久久aaa| 丁香五月天社区| 五月丁香六月激情综合网| 69精品人人人人| 天天檫天天爽| 九一牛视频探花| 岛国av网站| 日韩在线五月天婷婷| 久热人妻| 内射 无码 伊人| 天天肏视频| 99热99热不卡| 丁香五月激情婷婷视频| 97干网站| 天天日天天摸天天| 伊人网碰碰| 婷婷丁香在线| 五月婷婷,六月丁香| 婷婷五月综合在线| 婷婷瑟五月天久久综合| 九九久久精品國產| AV在线不卡播放| 激情视频网址| 夜夜操狠狠操| 激情五月丁香六月综合AVXXXX| 99在线观看精彩视频| 免费AV播放| 九九热10| www九月婷婷| 99婷五月| 丁香五月色网| 五月激情综合性爱| 国产色色小草视频| 性生生活大片又黄又| www热久久yy9| 色情五月停停丁香| 99精品免费欧美小视频| 欧美天堂婷婷日韩| 99re最新地址视频| 婷婷97色| 亚洲激情综| 99超在线| 操日本色| 涩综合婷婷| 操一操| 婷婷五月中文字幕| 久久综合五月天| 久久99热这里只有精品23| 色九月综合| 综合五月天| 五月天色婷伊人| 色9999综合久久| 久久婷婷五月天懂色| 婷婷成人综合五月| 色婷婷五月影视| 久热这里只有| 丁香社92视频| 超碰免费成人| 伊人久久丁香狠狠婷婷综合香蕉 | 天天摸天天舔| 色之综合网| 九九九九九九九九九九九九九国产精品| VA色婷婷| 五月天婷婷视频30| 婷婷色播婷婷| 有码一区二区三区| 亚洲操b| 激情婷婷网| 九九视频网| 日本123区日韩欧美不卡在线看| 六月丁香五月婷婷| 色婷婷狠狠| 亚洲婷婷月丁香五月| 密视AV综合在线| 亚洲综合五月天婷婷丁香| 五月婷婷视频| 天天天添天天操| 色狠狠999综合| 深夜男女福利刺激影院一区| 九九草热在线观看| 五月天色不卡| 日韩精品AV一区二区三区| 色婷婷丁香AV综合| 秋霞免费三级片| 丁香五月天人体| 丁香六月天堂| www.色五月| 亚洲宗合激情| 日韩三级视频一区二区| 二级黄色毛片| 青青操绿aaa一区日v| 婷婷五月天天| 丁香婷婷五月色成人网站| 97视频91| 丁香婷婷激情| 91九色成人原创视频| 无码yw| 婷婷色综合中心站| 99热这里只有精品搜| 色综合久久五月| 六月婷婷最新网址| 国产亚洲精品久久久久久郑州| 99ri视频在线播放| 久久总和99| 玖操97| 激情五月天在线视频| 丁香五月天视频| 国产综合久久久777777| 开心五月丁香婷婷| 激情综合网丁香| 婷婷伊人五月天| 亚洲欧美另类在线23p| 男人天堂亚洲综合| 婷婷五月天亚洲综合| 4399啪啪视频| 九久9精品| 狠狠爱五月婷婷| 欧美日本一区二区三区| 99国产小视频免费观看| www.五月天婷婷| 曰本aaaaaa丈片| 日韩黄色中文字幕| 中文av网| 激情文学久久| 婷婷五月六| 五月激情网站| 天天色天天噜| 五月丁香直播| 九九综合久久丁香婷婷,开心激情综合网| 久久资源网五月婷| 日本视频欧美观看免费| 羞羞嫩草视频| 丁香五月激动深爱欧美| 成人免费120分钟啪啪| 婷婷五月在线视频| 人妻无码精品一区| 婷婷伊人久久| 婷婷中文无码| 国产亚洲精品久久一区二区三区| 情久久综合五月天| 婷婷五月天另类网站| 婷婷色五月天综合网| 婷五月丁香| 亚洲人人96@| 51成人| 肏屄色播伊人97婷婷| 婷婷九月狠狠色| 99ri视频在线播放| 久婷婷五月天影院| 香蕉网久久| 久久免费丁香| 五月天综合久久丁香91| 五月天激情综合网| 涩涩婷婷五月| www久久艹| 99人人操人人操人人精| 夫妻超碰在线| WWW.久久久久久久久久久久久| 久久九九亚洲| 九九中文字幕九| 丁香 亚洲 久久| 婷婷大乡焦噜噜| 九九热自拍| 色综合丁香婷婷| 另类专区在线| 久久五月婷| 五月丁香六月婷婷,婷| 亚洲天堂AV免费片| 这里只有精品视频看看| 久久九精品| 婷婷五月视频| 五月婷婷官网色| 深爱五月天| 九月丁香亭亭| 开心婷婷五月| 亚洲精品久久久无码| 婷婷在线中文字幕| 最新日韩AV中文字幕| 狠狠操天天干| 婷婷色五月91啪啪| 在线免费观看激情视频| 玖玖婷婷免费| 色吧网综合| 小泽玛利亚视频一区二区| 日本婷久久| 亚洲婷婷五月天在线激情综合网| www.夜夜操.con| 颜射 精品性爱av| 五月婷婷丁香狠狠撸久久| 丁香五月天论坛| 99精品视频偷拍| 婷婷六月丁香五月| 国产露脸150部国语对白| 五月婷婷 激情按摩| 五月婷婷黄色毛片| 999九九九久久久99HD| 五月天丁香久久| 亚洲精品网站色视频| 五月婷婷五月天天| 色色色9| 久热99热| 97婷婷色| 超碰人人摸AV| 91九色在线观看免费| 狠狠色色综合| 久久99免费视屏| 蜜臀丁香黄色婷婷五月天| 99精彩视频在线观看| 久久只有18视频| 色婷婷综合久久久久| 九九在线视频| 激情婷婷22月间| 色五月成人| 色视五月天婷婷| 草综合14| 人妻AV在线| 国产JK精品白丝AV在线观看| 人妻在线网站| se99高清无码| 色婷五月| 日韩成人电影在线播放| 婷婷综合五月天| 91/九色黑人| 日本操片| 婷婷丁香高潮了| 亚洲综合五月天婷婷| 很很干天天干| 少妇人妻偷人精品无码视频新浪| 丁香婷婷婷五月综合色情| 婷婷丁香五月天婷婷| 五月综合精品| 九九亚洲综合| 成人午夜天| 丁香五月婷婷Av| 人人人人人人人人人草| 丁香六月成人| 日本五月婷| 伊人久久婷婷五月综合97色| 国产.亚洲.欧洲视频在线| 五月丁香五月丁香| 色五月丁香五月| 丁香五月色| 99九九中文字幕视频| 天天成人综合| 亚州操操| 久在热99| 婷婷五月色播网| anquye五月| 色吧五月婷婷| 毛片蕉地一二| 久久99激情| 深爱激情综合| 麻豆AV一区二区三区| 伊人婷婷大香蕉| 99国产小视频2013| 玖玖精品视频| 国产毛片精品一区二区色欲黄A片 欧美交换配乱吟粗大25P | 天天搞天天色综合| 99久久综合网| 久久玖玖综合| 色婷婷九月综合| 日韩无码色色| 人操91在线| 五月丁香激情片| 丁香六月激情| 精品国产乱码久久久久夜深人妻| 激情综合婷婷久久| 亚洲人人干| 五月婷丁香| 亚洲AV无码影院| WWW.夜夜| 97色碰| 亚洲综合视频网| a久久免费视频| 色99热| 91九色在线| 色99无码| 色色色色色爱| 国产看真人毛片爱做A片| 久久色天堂| 丁香六月婷婷色XXXXX| 久久一级AV| 婷婷第六色| 五月丁香色综合| 亚洲成人日韩无码精品| 色。 婷婷婷| 日韩AAAAA| 五月丁香六月激情综合| 婷婷五月激情视频在线| 五月综合色| 五月天啪啪| 五月天网站免费欧美| 五月激情综合网婷婷| 欧美日韓成人亚洲精品另类| www.精品99| 嫩草国产| 久久偷拍综合五月天| 久久婷婷老| 538在线| 97五月天| 久久99综合| 在线看片av| 五月天久久网站| 99精品性爱| 国产综合A片| 综合五月天天天天天五月| 国产人妻人伦精品一区二区 | 3p九色在线| 这里只有精品99www| 五月天激情网站| 97人妻碰碰中文无码久热丝袜| 操久久网| 色情久久久| www.色九月| 嫩草视频观看| 日本激情五月天‘| 婷婷综合中文字幕| 色婷婷精品小视频| 日日爽夜夜爽| 亚洲第一色色色| 五月天综合在线| 婷婷久久午夜网| www.minyis.com【JT】实力收量可预付QQ2101460746 | 婷婷五月丁香激情| 色婷婷五月网| 亚洲午夜成人av电影网| 成人网站免费sxj| 最近免费中文字幕大全高清大全1| 九九视频这里只有精品在线播放| 五月丁香六月香香蕉| 亚洲AV免费国产电影| 激情综合一| 中文字幕成人日韩| 五月婷av| 亚州婷婷五月激情综合| 五月色丁香| 久久香蕉丁香| 另类激情五月| 亚洲天堂爱爱| 99久久综合网| 青青热视频| 色丁香五月婷婷| 婷婷五月天777| 免费看欧美成人A片无码| 开心五激情网| 亚洲日本韩国| 日日干干天天干| av国产精品| 丁香六月婷婷开心| 国产67194| 日韩狠狠色婷婷| 国产午夜成人AV在线播放| 五月色丁香国产在线视频| 影音先锋女人AA鲁色资源| 亚洲婷婷丁香五月在线| 国产精品a无线| 天天干天天操天天上| 九九艹女| 26uuu日韩| 91精品久久久久久久久久久久| 天天综合 99久久婷婷| 1024日韩| 国产乱子轮XXX农村| 婷婷开心激情综合五月天| 夜色.cnm| 丁香久久久| 婷婷久久99| 亚洲这里只有精品| 丁香五月网| 丁香五夜激情四射夜夜夜| 97色色网| 精品思思久久| 香蕉AV777XXX色综合一区| 婷婷五月婷婷五月| 丁香五月婷婷色偷偷| www.91操| 婷婷五月天激情偷拍| 天天色中文字幕女优AV| 5月婷婷6月六月丁香| 狼友视频在线观看18| 大香蕉综合| 五月天色婷婷视频| 超碰A V在线| 狠狠人妻色综合| 亚洲激情淫网| 久久9情免费| 国产毛片精品一区二区色欲黄A片| 俺来也综合网精品一区| 日本女色人人| 婷婷丁香六月| 97操视频| 国产人妻777人伦精品HD| 六月丁香好婷婷| 色99色| 精品色色| 国语精品探花| 色色五月天网站| 欧美肉大捧一进一出免费视频| 久久丁香久久| 狠狠五月激情丁香六月| 97色婷婷| 国产精品色婷婷AV综合色色| AV在线免费播放| 欧美大片| 婷婷 丁香 精品| 伊人青草成人| 黑人糟蹋人妻HD中文字幕| 狠狠做深爱婷婷久久综合一区| 日韩婷婷| 91九色白丝| 99久久99九九九99九他书对| 久99热| 天堂美国久久| 婷婷激情综合| 9 1在线视频| 五月天开心网| 都市激情蜜桃婷婷五月天 | 婷婷基地成人五月天| 亚洲av网站| 久热这里精品免费| 99日本视频| 中文字幕欧美日韩VA免费视频| 99这里只有精品视频| 日日日,com| 色欲色香,www,com| 久久色天堂| 99热精国产这里只有精品| 大香蕉五月天婷婷丁香91| 操B视频在线播放| 99久久久久久| 天天日天天操天天干| 99操久久| 久久婷婷原创视频| 天天日,天天插| 五月天激情www| 色综合中文色综合网| 色狠狠色噜噜AV天堂五区| 黄网免费观看| 玖玖资源站蜜臀| 五月丁香六月在线欧美| 激情婷婷。| 97色色色| 9月色婷婷| 免费播放99性爱视频| 蜜臀丁香黄色婷婷五月天| 9久久狠狠的| 中文字幕AV网址| 激情综合色| 五月婷婷 欧美| 天天搞天天色综合| 97伦乱| 俺也去色| 五月天啪啪| 五月婷婷九| 婷婷激情五月天视频在线| 第四色色六月色综合| 成人 视频免费观看网站| 欧美色色色色色色色色| 日本操B视频| www.夜夜| 五月婷婷天天| www.色五月天.com| 激情开心五月婷婷| 久久五月婷婷电影| 激情床戏| 成人VAV视频在线观看| 日本精品人妻无码77777| 我爱大香蕉| 大香蕉伊人久久| 久久婷婷丁香| 五月天婷婷亚洲| 婷婷丁香五月天小说| 偷偷狠狠久久婷婷五月天| 伊人碰碰碰| 国产三级在线播放| 任我干视频在线观看| 五月天开心网| 色综合五月天| 色婷婷欧美| 中文久久婷婷| wwwxxx五月婷婷小说| 欧美色色色色色色色色色色影视| 色五月成人| 五月丁香色婷婷色| 色色色色色色五月婷婷| 好叼操在线观看| 逼特逼在线免费播放| 日日夜夜狠狠| 丁香五月五月婷婷| 超碰激情网| 久久久无码精品成人A片小说| 五月播播| 99热九九这里只有精品| 91操熟女| 欧美日本国产欧美日本韩国99| 久久影视婷婷五月| 无遮羞AV| 少妇大叫太大太粗太爽了A片| www狠狠| 五月花婷婷| 色综合色|