欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

嵌入式工程師必讀:深入理解TCP/IP模型與lwIP協(xié)議棧實(shí)戰(zhàn)

嵌入式工程師必讀:深入理解TCP/IP模型與lwIP協(xié)議棧實(shí)戰(zhàn) 1. 為什么嵌入式工程師需要真正理解TCP/IP模型先從一個(gè)真實(shí)場(chǎng)景說(shuō)起。我調(diào)試過(guò)一塊基于Cortex-M4的板子跑的是輕量級(jí)協(xié)議棧設(shè)備需要定時(shí)向服務(wù)器上報(bào)溫濕度數(shù)據(jù)。功能代碼很快就寫(xiě)完了但聯(lián)調(diào)時(shí)發(fā)現(xiàn)一個(gè)詭異的現(xiàn)象設(shè)備運(yùn)行幾個(gè)小時(shí)之后服務(wù)器端就收不到數(shù)據(jù)了ping設(shè)備卻一直通。折騰了大半天最后定位到問(wèn)題出在TCP連接沒(méi)有做異常斷線檢測(cè)服務(wù)器早就把連接斷開(kāi)了設(shè)備端卻還傻傻地以為連接是好的一直往一個(gè)失效的連接上寫(xiě)數(shù)據(jù)。這個(gè)問(wèn)題的根子其實(shí)就在對(duì)TCP/IP模型的理解不夠透徹。當(dāng)時(shí)我只知道“要建立一個(gè)TCP連接”但不清楚這個(gè)連接在協(xié)議棧內(nèi)部到底是怎么維護(hù)的、服務(wù)器斷開(kāi)時(shí)設(shè)備端為什么感知不到、數(shù)據(jù)從應(yīng)用層到網(wǎng)口之間到底經(jīng)過(guò)了哪些處理。對(duì)于搞嵌入式網(wǎng)絡(luò)開(kāi)發(fā)的人來(lái)說(shuō)TCP/IP模型不是一門(mén)需要死記硬背的理論課而是排查問(wèn)題的底層工具。你不需要像計(jì)算機(jī)網(wǎng)絡(luò)專(zhuān)業(yè)的學(xué)生那樣把每個(gè)RFC都翻一遍但你必須要搞清楚數(shù)據(jù)從你的send()函數(shù)出發(fā)到變成網(wǎng)線上的電信號(hào)中間經(jīng)歷了什么反過(guò)來(lái)網(wǎng)線上一堆亂七八糟的字節(jié)流又是怎么被層層剝離最終變成你recv()函數(shù)能讀到的干凈數(shù)據(jù)的。這篇文章不會(huì)去抄教科書(shū)上那套“OSI七層模型”的官話我按自己實(shí)際開(kāi)發(fā)中理解它的方式來(lái)重新講一遍。你會(huì)看到每一層在嵌入式開(kāi)發(fā)里對(duì)應(yīng)的是什么組件、什么代碼、什么現(xiàn)象以及我在實(shí)際項(xiàng)目中踩過(guò)的和這些層直接相關(guān)的坑。2. 數(shù)據(jù)從應(yīng)用到網(wǎng)線一次發(fā)送請(qǐng)求的完整旅程2.1 應(yīng)用層你寫(xiě)的代碼只負(fù)責(zé)到這里拿lwIP一個(gè)輕量級(jí)TCP/IP協(xié)議棧在嵌入式領(lǐng)域用得非常多舉例。當(dāng)你在代碼里調(diào)用tcp_write()或者BSD Socket接口的send()時(shí)你以為數(shù)據(jù)已經(jīng)“發(fā)出去”了但實(shí)際上此刻數(shù)據(jù)只是被拷貝到了協(xié)議棧內(nèi)部的發(fā)送緩沖區(qū)里。這里有個(gè)很多人容易忽略的點(diǎn)send()函數(shù)返回成功只代表數(shù)據(jù)被協(xié)議棧接收了不代表數(shù)據(jù)已經(jīng)到達(dá)對(duì)端甚至不代表數(shù)據(jù)已經(jīng)離開(kāi)本機(jī)網(wǎng)卡。在TCP協(xié)議下如果你調(diào)用send()之后程序崩潰了數(shù)據(jù)很可能就丟在緩沖區(qū)里永遠(yuǎn)發(fā)不出去。應(yīng)用層在TCP/IP模型里的職責(zé)說(shuō)穿了就三件事第一把業(yè)務(wù)數(shù)據(jù)準(zhǔn)備好第二通過(guò)Socket接口把數(shù)據(jù)交給傳輸層第三指定跟誰(shuí)通信目標(biāo)IP和端口。至于數(shù)據(jù)怎么分包、怎么重傳、怎么路由到對(duì)端應(yīng)用層一概不管。這也意味著你代碼里寫(xiě)的所有跟“發(fā)送”相關(guān)的業(yè)務(wù)邏輯都屬于應(yīng)用層范疇。我在實(shí)際項(xiàng)目里見(jiàn)過(guò)一種很典型的錯(cuò)誤寫(xiě)法用send()的返回值來(lái)判斷數(shù)據(jù)是否發(fā)送成功。如果返回值等于數(shù)據(jù)長(zhǎng)度就認(rèn)為發(fā)送成功然后立刻釋放緩沖區(qū)。這在局域網(wǎng)內(nèi)大概率沒(méi)事但在公網(wǎng)或者網(wǎng)絡(luò)抖動(dòng)的情況下這種判斷方式會(huì)出大問(wèn)題。正確的做法是send()只是入隊(duì)操作真正要確認(rèn)數(shù)據(jù)送到對(duì)端需要依賴應(yīng)用層的ACK機(jī)制、業(yè)務(wù)層的應(yīng)答包或者在TCP層面開(kāi)啟SO_LINGER等選項(xiàng)來(lái)檢測(cè)發(fā)送隊(duì)列的狀態(tài)。2.2 傳輸層TCP和UDP的分岔路口數(shù)據(jù)從應(yīng)用層下來(lái)進(jìn)入傳輸層。這一層是嵌入式網(wǎng)絡(luò)開(kāi)發(fā)中碰到的第一個(gè)真正有技術(shù)含量的分水嶺因?yàn)門(mén)CP和UDP的選擇直接影響整個(gè)通信架構(gòu)的設(shè)計(jì)。先看TCP。TCP的核心工作是給數(shù)據(jù)流“編號(hào)”和“記賬”把應(yīng)用層扔過(guò)來(lái)的一長(zhǎng)串字節(jié)切成一個(gè)個(gè)Segment報(bào)文段給每個(gè)Segment編上序號(hào)然后發(fā)送出去。接收端收到之后要回一個(gè)ACK確認(rèn)告訴發(fā)送端“我收到0到1000字節(jié)了”。如果發(fā)送端一段時(shí)間內(nèi)沒(méi)收到ACK就會(huì)觸發(fā)超時(shí)重傳——數(shù)據(jù)沒(méi)送達(dá)重發(fā)一遍。這個(gè)機(jī)制在嵌入式開(kāi)發(fā)里最直接的影響就是TCP是有狀態(tài)的而且狀態(tài)很多。建立一個(gè)連接要三次握手?jǐn)嚅_(kāi)要四次揮手中間還有各種狀態(tài)遷移SYN_SENT、ESTABLISHED、FIN_WAIT_1、TIME_WAIT等等。在MCU這種資源受限的環(huán)境里每一條TCP連接都需要占用幾十KB的RAM來(lái)維護(hù)發(fā)送緩沖區(qū)、接收緩沖區(qū)、擁塞窗口等狀態(tài)信息。這也是為什么很多低端MCU設(shè)備選擇UDP的原因之一——內(nèi)存實(shí)在扛不住。再看UDP。UDP就簡(jiǎn)單粗暴了數(shù)據(jù)報(bào)封裝好加上源端口和目的端口直接扔給網(wǎng)絡(luò)層發(fā)送完就完了。沒(méi)有ACK、沒(méi)有重傳、沒(méi)有擁塞控制、沒(méi)有連接狀態(tài)。所以UDP的頭開(kāi)銷(xiāo)極小處理邏輯也簡(jiǎn)單特別適合數(shù)據(jù)量小、實(shí)時(shí)性要求高、能容忍少量丟失的場(chǎng)景比如傳感器數(shù)據(jù)上報(bào)、設(shè)備狀態(tài)心跳、局域網(wǎng)內(nèi)的控制指令等。嵌入式開(kāi)發(fā)里經(jīng)常有一個(gè)誤區(qū)認(rèn)為“TCP比UDP可靠所以能用TCP就用TCP”。但在實(shí)際項(xiàng)目里TCP的可靠是有代價(jià)的它在網(wǎng)絡(luò)擁塞時(shí)會(huì)主動(dòng)降低發(fā)送速率擁塞控制延遲會(huì)變大而UDP雖然可能丟包但延遲穩(wěn)定可控。比如你要做一個(gè)實(shí)時(shí)音頻流傳輸TCP在丟包后的重傳反而會(huì)導(dǎo)致音頻卡頓UDP配合前向糾錯(cuò)才是更合理的選擇。選哪一層協(xié)議本質(zhì)是在丟包率、延遲、內(nèi)存開(kāi)銷(xiāo)之間做取舍而不是無(wú)腦選“可靠”的那個(gè)。2.3 網(wǎng)絡(luò)層IP地址和路由選擇傳輸層把數(shù)據(jù)交給了網(wǎng)絡(luò)層也就是IP層。這一層干的事情可以概括為在報(bào)文頭部寫(xiě)上源IP地址和目的IP地址然后根據(jù)目的IP查找路由表決定從哪個(gè)網(wǎng)口把數(shù)據(jù)發(fā)出去。對(duì)于嵌入式設(shè)備來(lái)說(shuō)這個(gè)“路由選擇”多數(shù)時(shí)候非常無(wú)腦——因?yàn)樵O(shè)備通常只有一張網(wǎng)卡所有非本機(jī)地址的數(shù)據(jù)默認(rèn)扔給默認(rèn)網(wǎng)關(guān)處理。但在某些場(chǎng)景下路由邏輯會(huì)變得復(fù)雜比如設(shè)備同時(shí)接了以太網(wǎng)和Wi-Fi或者設(shè)備承擔(dān)了某種網(wǎng)關(guān)功能需要對(duì)不同網(wǎng)段的數(shù)據(jù)做轉(zhuǎn)發(fā)。IP層的另一個(gè)重要工作是分片和重組。在嵌入式開(kāi)發(fā)里你更可能遇到的是MTU最大傳輸單元問(wèn)題以太網(wǎng)的MTU通常是1500字節(jié)如果你的應(yīng)用層一次性發(fā)送的數(shù)據(jù)超過(guò)這個(gè)值還要減去IP頭和TCP頭實(shí)際能承載的最大應(yīng)用數(shù)據(jù)大約是1460字節(jié)IP層就需要對(duì)數(shù)據(jù)分片。分片后的每個(gè)IP包如果有一個(gè)丟了整個(gè)原始數(shù)據(jù)包都要重傳效率極低。我在項(xiàng)目里遇到過(guò)一個(gè)典型問(wèn)題設(shè)備向服務(wù)器上傳圖片圖片大小在10KB左右。底層直接調(diào)用send()發(fā)送整個(gè)圖片緩沖區(qū)結(jié)果傳輸速度奇慢無(wú)比甚至偶爾還會(huì)超時(shí)。抓包一看發(fā)現(xiàn)數(shù)據(jù)被分成了二十多個(gè)分片在Wi-Fi網(wǎng)絡(luò)環(huán)境下丟包一多性能就崩了。解決方案其實(shí)不復(fù)雜在應(yīng)用層主動(dòng)把數(shù)據(jù)切成合適的大小通??刂圃?400字節(jié)以內(nèi)而不是讓IP層去分片。這就是很多協(xié)議在設(shè)計(jì)時(shí)規(guī)定“一條消息不超過(guò)XXX字節(jié)”的原因。2.4 數(shù)據(jù)鏈路層和物理層網(wǎng)卡、驅(qū)動(dòng)和網(wǎng)線上的電信號(hào)最后數(shù)據(jù)到達(dá)數(shù)據(jù)鏈路層和物理層。這一層對(duì)于嵌入式工程師來(lái)說(shuō)就是網(wǎng)卡芯片和對(duì)應(yīng)的驅(qū)動(dòng)程序常見(jiàn)的有SPI接口的W5500、內(nèi)部集成的MAC外部PHY比如STM32的MAC配上LAN8720、或者是各種Wi-Fi模組內(nèi)部自帶的協(xié)議棧。MAC層負(fù)責(zé)把IP層傳下來(lái)的數(shù)據(jù)包封裝成以太網(wǎng)幀加上目的MAC地址、源MAC地址、類(lèi)型字段尾部再附上CRC校驗(yàn)。然后物理層把這個(gè)幀變成電信號(hào)或者光信號(hào)發(fā)到網(wǎng)線上。最直接的一個(gè)例子是兩塊板子用網(wǎng)線直連IP地址配在同一個(gè)網(wǎng)段它們能互相ping通但如果你用的路由器開(kāi)了端口隔離或者交換機(jī)配置了VLAN那么鏈路層可能出現(xiàn)“物理連接正常但數(shù)據(jù)不通”的詭異現(xiàn)象。這一層在開(kāi)發(fā)中最常遇到的問(wèn)題就是CRC錯(cuò)誤和過(guò)高的丟包率。CRC錯(cuò)誤意味著接收到的數(shù)據(jù)包在傳輸過(guò)程中被損壞了通常跟硬件布線有關(guān)——比如RJ45接口的差分信號(hào)線走的太長(zhǎng)、阻抗匹配沒(méi)做好、或者板子上的復(fù)位電路設(shè)計(jì)有問(wèn)題。我排查過(guò)一個(gè)案例板子在常溫下一切正常但放到高低溫環(huán)境中網(wǎng)絡(luò)就開(kāi)始頻繁斷開(kāi)重連最后查到是網(wǎng)口變壓器的選型不當(dāng)溫度漂移導(dǎo)致信號(hào)質(zhì)量嚴(yán)重劣化。3. TCP/IP模型在嵌入式協(xié)議棧中的實(shí)際映射3.1 三種典型的嵌入式協(xié)議棧形態(tài)TCP/IP模型在嵌入式平臺(tái)上的落地方式跟PC上完全不一樣。PC上是操作系統(tǒng)自帶完整的協(xié)議棧你只管調(diào)Socket API就行但在MCU世界里協(xié)議棧的形態(tài)直接決定了你能用它做什么、不能做什么。第一種形態(tài)硬件協(xié)議棧芯片典型代表是WIZnet的W5500。TCP/IP協(xié)議棧整個(gè)燒在芯片內(nèi)部MCU通過(guò)SPI接口跟芯片通信MCU只負(fù)責(zé)發(fā)數(shù)據(jù)、收數(shù)據(jù)所有TCP狀態(tài)機(jī)的維護(hù)、IP分片、校驗(yàn)和計(jì)算全在芯片里完成。好處是MCU內(nèi)存開(kāi)銷(xiāo)極小代碼邏輯簡(jiǎn)單壞處是功能固定靈活性差并發(fā)連接數(shù)通常有限協(xié)議棧的很多高級(jí)特性比如自定義擁塞控制、抓包調(diào)試用不上。第二種形態(tài)純軟件輕量級(jí)協(xié)議棧典型代表是lwIP、uIP、TinyTCP這類(lèi)開(kāi)源方案。協(xié)議棧代碼跟你的應(yīng)用代碼跑在同一個(gè)CPU上共同分享那幾百KB的RAM。這種方案靈活性最高你可以自己裁剪功能、打開(kāi)調(diào)試日志、甚至修改協(xié)議棧源碼來(lái)適配特殊場(chǎng)景。代價(jià)是需要占用一定的FLASH和RAM資源CPU也要花時(shí)間處理協(xié)議棧的運(yùn)算。lwIP是這類(lèi)方案里用得最多的后面重點(diǎn)講它。第三種形態(tài)RTOS自帶的協(xié)議棧比如FreeRTOSTCP、RT-Thread的SALSocket抽象層組件、ThreadX的NetX Duo。這類(lèi)協(xié)議棧跟操作系統(tǒng)的調(diào)度機(jī)制緊密結(jié)合TCP/IP的任務(wù)作為RTOS里的一個(gè)線程運(yùn)行應(yīng)用層通過(guò)標(biāo)準(zhǔn)Socket API或者RTOS自定義的接口來(lái)訪問(wèn)網(wǎng)絡(luò)。這種方案的好處是生態(tài)統(tǒng)一跟RTOS的其他組件信號(hào)量、消息隊(duì)列、互斥鎖聯(lián)動(dòng)方便但學(xué)習(xí)曲線比前兩種形態(tài)都陡。3.2 lwIP的分層架構(gòu)與內(nèi)存管理如何呼應(yīng)TCP/IP模型lwIP的分層設(shè)計(jì)非常清晰地映射了TCP/IP模型搞清楚這個(gè)映射關(guān)系對(duì)排查問(wèn)題非常有幫助。lwIP最底層是網(wǎng)絡(luò)接口層對(duì)應(yīng)到代碼里就是struct netif結(jié)構(gòu)體。你在代碼里寫(xiě)netif_add()就是向lwIP注冊(cè)一個(gè)物理網(wǎng)口。這個(gè)層面對(duì)應(yīng)TCP/IP模型里的數(shù)據(jù)鏈路層和物理層——它負(fù)責(zé)收發(fā)包把網(wǎng)卡驅(qū)動(dòng)收到的以太網(wǎng)幀轉(zhuǎn)交給上層或者把上層發(fā)下來(lái)的IP包交給網(wǎng)卡驅(qū)動(dòng)發(fā)出去。如果你在lwIP里開(kāi)了LWIP_NETIF_LINK_CALLBACK當(dāng)網(wǎng)線插拔時(shí)驅(qū)動(dòng)會(huì)通過(guò)回調(diào)函數(shù)告訴協(xié)議棧鏈路狀態(tài)變了這個(gè)過(guò)程就發(fā)生在這一層。再往上是網(wǎng)絡(luò)層對(duì)應(yīng)ip4.c、ip6.c這些文件。這一層處理IP頭部的解析和封裝、路由查找、分片重組。調(diào)試網(wǎng)絡(luò)問(wèn)題時(shí)經(jīng)常用到的pingICMP請(qǐng)求就是lwIP網(wǎng)絡(luò)層的一部分功能。然后是傳輸層對(duì)應(yīng)tcp.c、udp.c。tcp.c實(shí)現(xiàn)了完整的TCP狀態(tài)機(jī)——三次握手、滑動(dòng)窗口、重傳超時(shí)、擁塞控制全在這一層。lwIP號(hào)稱輕量級(jí)但對(duì)TCP的實(shí)現(xiàn)依然相當(dāng)完整代碼量很大這也是為什么lwIP的編譯配置項(xiàng)特別多的原因每個(gè)功能都可以通過(guò)宏開(kāi)關(guān)來(lái)裁剪。最上面是應(yīng)用層接口lwIP提供了兩種一種是BSD Socket API需要開(kāi)啟LWIP_SOCKET給人一種在PC上編程的熟悉感另一種是raw API或者叫callback API通過(guò)注冊(cè)回調(diào)函數(shù)來(lái)收發(fā)數(shù)據(jù)效率更高適合內(nèi)存緊張的場(chǎng)景。lwIP的內(nèi)存管理機(jī)制是理解這套架構(gòu)的關(guān)鍵。lwIP有兩種內(nèi)存模式一種是靜態(tài)內(nèi)存池提前分配好固定大小的內(nèi)存塊給PBUF包緩沖區(qū)用分配快、不會(huì)產(chǎn)生碎片但靈活性差大包裝不下另一種是動(dòng)態(tài)內(nèi)存堆heap靈活分配但反復(fù)分配釋放會(huì)產(chǎn)生碎片長(zhǎng)時(shí)間運(yùn)行后可能分配不出大的連續(xù)內(nèi)存。這個(gè)特性是很多嵌入式網(wǎng)絡(luò)設(shè)備“跑幾天就死機(jī)”的元兇之一——頻繁的tcp_write()和斷開(kāi)重連會(huì)產(chǎn)生內(nèi)存碎片最終導(dǎo)致pbuf_alloc()失敗TCP連接發(fā)不出去數(shù)據(jù)應(yīng)用程序表現(xiàn)就是“網(wǎng)絡(luò)卡死”。我調(diào)過(guò)的一個(gè)問(wèn)題非常有代表性設(shè)備每10秒上報(bào)一次數(shù)據(jù)但每次上報(bào)前都會(huì)建立一個(gè)TCP連接上報(bào)完就斷開(kāi)。運(yùn)行大約一天之后設(shè)備就再也沒(méi)法聯(lián)網(wǎng)了。查了很久最后確認(rèn)是tcp_abort()調(diào)用得太頻繁協(xié)議棧的PCBsProtocol Control Blocks資源耗盡。TCP/IP模型里的“傳輸層狀態(tài)機(jī)”映射到底層就是這些PCBs和緩沖區(qū)資源你在應(yīng)用層每建立一個(gè)連接都會(huì)占用一個(gè)PCB連接不在正確的時(shí)間釋放資源就會(huì)被慢慢耗盡。這個(gè)案例讓我真正理解了TCP/IP模型的每一層都不是概念而是實(shí)打?qū)嵉膬?nèi)存和狀態(tài)。3.3 狀態(tài)機(jī)與緩沖區(qū)傳輸層的兩個(gè)核心概念TCP的復(fù)雜本質(zhì)上來(lái)源于它是一個(gè)有限狀態(tài)機(jī)。從連接建立到數(shù)據(jù)傳輸?shù)竭B接關(guān)閉連接的狀態(tài)依次經(jīng)歷CLOSED、SYN_SENT、ESTABLISHED、FIN_WAIT_1、FIN_WAIT_2、TIME_WAIT等若干狀態(tài)。每個(gè)狀態(tài)下收到什么樣的數(shù)據(jù)包應(yīng)該做什么樣的反應(yīng)都是由代碼預(yù)先定義好的。嵌入式開(kāi)發(fā)里最常碰到的狀態(tài)問(wèn)題有兩個(gè)。第一個(gè)是連接保持Keepalive問(wèn)題。TCP協(xié)議本身有一個(gè)Keepalive機(jī)制可以周期性發(fā)送探測(cè)包來(lái)檢查對(duì)端是否存活但它在lwIP里是默認(rèn)關(guān)閉的LWIP_TCP_KEEPALIVE宏為0因?yàn)闀?huì)額外消耗帶寬和CPU。很多設(shè)備長(zhǎng)期運(yùn)行后連接失效就是因?yàn)闆](méi)有開(kāi)Keepalive底層連接斷了應(yīng)用層卻不知道。第二個(gè)是TIME_WAIT問(wèn)題。主動(dòng)關(guān)閉連接的一方在收到對(duì)端最后一個(gè)ACK之后會(huì)進(jìn)入TIME_WAIT狀態(tài)等2個(gè)最大報(bào)文段壽命MSL后才真正釋放連接。如果設(shè)備頻繁主動(dòng)斷開(kāi)連接同時(shí)又沒(méi)有什么地址和端口復(fù)用配置就會(huì)出現(xiàn)端口被占滿、無(wú)法建立新連接的尷尬。緩沖區(qū)的概念也很重要。TCP發(fā)送方有一個(gè)發(fā)送緩沖區(qū)接收方有一個(gè)接收緩沖區(qū)。send()成功只是把數(shù)據(jù)放進(jìn)了發(fā)送緩沖區(qū)緩沖區(qū)什么時(shí)候真正被清空取決于網(wǎng)絡(luò)擁塞情況和對(duì)端接收窗口的大小。接收緩沖區(qū)同理對(duì)端發(fā)的數(shù)據(jù)到達(dá)后如果應(yīng)用層不及時(shí)recv()緩沖區(qū)就會(huì)滿TCP的流控機(jī)制會(huì)通知對(duì)端把發(fā)送窗口調(diào)小數(shù)據(jù)發(fā)送速度就會(huì)降下來(lái)。這個(gè)“滑動(dòng)窗口”機(jī)制在嵌入式設(shè)備上表現(xiàn)得很直接如果你接收端的應(yīng)用線程處理速度慢偶爾卡一下就會(huì)看到對(duì)端的上報(bào)頻率變慢。我個(gè)人建議任何做嵌入式TCP開(kāi)發(fā)的人都應(yīng)該養(yǎng)成一個(gè)習(xí)慣在腦子里把TCP的每一次收發(fā)都過(guò)一遍狀態(tài)機(jī)。發(fā)了一個(gè)SYN包期望收到SYNACK收不到就是連接超時(shí)連接建立好了數(shù)據(jù)發(fā)送后要啟動(dòng)重傳定時(shí)器收到ACK就取消定時(shí)器收不到就重傳。這個(gè)思維模式建立起來(lái)了網(wǎng)絡(luò)問(wèn)題排查的能力會(huì)上升一個(gè)臺(tái)階。4. 用抓包和日志驗(yàn)證模型一次溫控設(shè)備的數(shù)據(jù)交互拆解4.1 搭建一個(gè)最小的抓包分析環(huán)境理論說(shuō)得再多不如實(shí)際操作一遍。在嵌入式開(kāi)發(fā)中驗(yàn)證TCP/IP模型理解程度的最好工具就是抓包軟件——PC端用Wireshark板子端配合Wireshark抓包。為了演示我以一塊搭載了lwIP協(xié)議棧的以太網(wǎng)板子為例。板子的IP地址設(shè)為192.168.1.100PC的IP地址設(shè)為192.168.1.50兩者通過(guò)一臺(tái)交換機(jī)連接。板子每秒向PC的7000端口發(fā)送一組數(shù)據(jù)內(nèi)容是溫濕度傳感器的數(shù)值比如“T25.3,H60.1”。抓包分兩種情況第一種數(shù)據(jù)只經(jīng)過(guò)交換機(jī)PC的網(wǎng)卡能直接看到所有廣播幀和發(fā)給自己的單播幀第二種板子發(fā)出的數(shù)據(jù)走了路由PC放在另一個(gè)網(wǎng)段這時(shí)需要在交換機(jī)和路由器上配置端口鏡像把板子的流量鏡像到PC網(wǎng)卡。絕大部分調(diào)試場(chǎng)景是第一種結(jié)構(gòu)非常簡(jiǎn)單。在PC上打開(kāi)Wireshark選擇PC的以太網(wǎng)卡過(guò)濾器輸入tcp.port 7000回車(chē)開(kāi)始抓包。如果你的板子SOCKET綁定的是7000端口你立刻就能看到板子發(fā)上來(lái)的TCP報(bào)文。你會(huì)看到連接建立時(shí)先是SYN包接著板子收到PC回復(fù)的SYN, ACK再是板子發(fā)出的ACK——三次握手三個(gè)包次序特別清晰然后就是一堆PSH, ACK包這是TCP層攜帶應(yīng)用數(shù)據(jù)的包最后斷開(kāi)連接時(shí)是FIN, ACK的交互過(guò)程。這個(gè)場(chǎng)景雖然簡(jiǎn)單但如果你想驗(yàn)證自己是否真的理解TCP/IP模型先把這個(gè)流程從抓包里完整地指認(rèn)出來(lái)哪個(gè)是SYN、哪個(gè)是ACK、哪個(gè)是應(yīng)用數(shù)據(jù)、IP頭部里源地址是多少、MAC幀里目標(biāo)地址又是多少、CRC校驗(yàn)在哪一層做的、應(yīng)用層的數(shù)據(jù)在圖上哪個(gè)位置能看到。能答清楚這些TCP/IP模型就不再是概念了。4.2 從抓包結(jié)果逐層讀數(shù)據(jù)拿其中一個(gè)PSH, ACK包來(lái)逐層拆解。Wireshark打開(kāi)這個(gè)包從上到下依次是四段信息。第一段是**Frame幀**信息幀總長(zhǎng)度126字節(jié)這是物理層和鏈路層看到的數(shù)據(jù)——整個(gè)以太網(wǎng)幀的長(zhǎng)度。第二段是**Ethernet II以太網(wǎng)幀頭**信息目的MAC地址是PC網(wǎng)卡的MAC源MAC地址是板子MAC類(lèi)型字段0x0800表示上層承載的是IPv4數(shù)據(jù)報(bào)。這里有個(gè)小細(xì)節(jié)如果路由器做了NAT轉(zhuǎn)發(fā)Wireshark抓到的包可能來(lái)自不同源MAC如果板子發(fā)送的時(shí)候用錯(cuò)了MAC地址比如MAC沒(méi)有燒錄導(dǎo)致全是FF或者和同網(wǎng)段另一塊板子沖突數(shù)據(jù)就會(huì)發(fā)不出去。鏈路層在嵌入式開(kāi)發(fā)里比想象中重要很多。第三段是**Internet Protocol Version 4IP頭**信息協(xié)議字段值為6表示上層是TCP源IP是192.168.1.100目的IP是192.168.1.50頭部長(zhǎng)度20字節(jié)IHL: 5表示5個(gè)32位字標(biāo)識(shí)字段Identification是針對(duì)原始數(shù)據(jù)包的分片ID這里的數(shù)據(jù)包從未分片。還有一個(gè)很重要的字段是TTLTime To Live每經(jīng)過(guò)一個(gè)路由器減1如果減到0包就會(huì)被丟棄。開(kāi)發(fā)中偶爾會(huì)遇到TTL配置過(guò)小導(dǎo)致多跳網(wǎng)絡(luò)不通的情況大多發(fā)生在復(fù)雜局域網(wǎng)場(chǎng)景中。第四段是**Transmission Control ProtocolTCP頭**信息源端口隨機(jī)分配的一個(gè)高位端口目的端口是7000Sequence Number是數(shù)據(jù)字節(jié)流的序號(hào)Acknowledgment Number是期望對(duì)端下一個(gè)發(fā)的字節(jié)序號(hào)也就是“你的序號(hào)N表示N字節(jié)之前的數(shù)據(jù)全部收到”頭部偏移20字節(jié)表示TCP頭長(zhǎng)度。如果你展開(kāi)TCP頭的Flags字段會(huì)看到Push和Ack置位。Push表示發(fā)送緩沖區(qū)有數(shù)據(jù)要立即交給應(yīng)用層處理Ack表示這是一個(gè)確認(rèn)包。TCP頭部之后就是Wireshark解析出來(lái)的應(yīng)用層數(shù)據(jù)這里是T25.3,H60.1十四個(gè)字符。這一層一層地拆下來(lái)其實(shí)就是TCP/IP模型的解碼過(guò)程鏈路層看MAC幀頭網(wǎng)絡(luò)層看IP頭傳輸層看TCP頭應(yīng)用層看真正的業(yè)務(wù)數(shù)據(jù)。反過(guò)來(lái)你要從板子發(fā)送數(shù)據(jù)的角度整體看這個(gè)過(guò)程就是從應(yīng)用層數(shù)據(jù)開(kāi)始逐層加頭、封裝最后變成一個(gè)以太網(wǎng)幀發(fā)出去。4.3 抓包中常見(jiàn)的異?,F(xiàn)象和排查思路抓包分析的最大價(jià)值不是看正常情況而是看異常情況。分享幾個(gè)我在嵌入式調(diào)試中實(shí)際遇到過(guò)的異?!,F(xiàn)象一只有SYN發(fā)出沒(méi)有回應(yīng)。Wireshark里看到板子發(fā)了SYN包但之后沒(méi)有任何包回過(guò)來(lái)。先查網(wǎng)絡(luò)層Ping板子的IP看通不通。如果不通大概率是IP地址沖突或ARP解析失敗板子沒(méi)有回答ARP請(qǐng)求。如果通再看傳輸層PC上對(duì)應(yīng)的端口有沒(méi)有開(kāi)監(jiān)聽(tīng)有沒(méi)有防火墻規(guī)則攔掉了入站連接通常我會(huì)用netstat在PC上查端口監(jiān)聽(tīng)狀態(tài)?,F(xiàn)象二TCP報(bào)文出現(xiàn)大量Dup ACK和Retransmission。丟包率升高了說(shuō)明鏈路質(zhì)量差。在嵌入式場(chǎng)景下首先查的是硬件問(wèn)題網(wǎng)線接觸不良、PHY芯片配置錯(cuò)誤導(dǎo)致速率和雙工模式不匹配比如一邊是100M全雙工一邊是自動(dòng)協(xié)商成了10M半雙工這就會(huì)出現(xiàn)大量沖突和重傳、PCB板上差分信號(hào)走線過(guò)長(zhǎng)導(dǎo)致信號(hào)完整性差。其次查CPU負(fù)載如果MCU中斷優(yōu)先級(jí)配置不合理網(wǎng)卡驅(qū)動(dòng)的中斷被頻繁搶占協(xié)議棧處理不過(guò)來(lái)也會(huì)導(dǎo)致丟包重傳?,F(xiàn)象三接收緩沖區(qū)被撐爆TCP窗口變成0。Wireshark里能看到Win0的包。這說(shuō)明接收端應(yīng)用層取數(shù)據(jù)的速度太慢接收緩沖區(qū)滿了。嵌入式設(shè)備上最常見(jiàn)的原因是接收線程優(yōu)先級(jí)設(shè)置太低被其他任務(wù)餓死了或者代碼里在recv()回調(diào)中做了耗時(shí)的數(shù)據(jù)處理比如加了文件寫(xiě)入、加了解密操作把接收通路堵死了。這個(gè)現(xiàn)象在TCP/IP模型里對(duì)應(yīng)的是傳輸層的流控機(jī)制在正常工作——它不是在制造故障而是防止數(shù)據(jù)溢出。5. 嵌入式網(wǎng)絡(luò)開(kāi)發(fā)中與模型強(qiáng)相關(guān)的常見(jiàn)坑5.1 板子能Ping通但TCP連不上端口、防火墻和半開(kāi)連接“Ping得通但TCP連不上”是在嵌入式集成調(diào)試中排名前三的怪問(wèn)題。Ping用的是ICMP協(xié)議走的是網(wǎng)絡(luò)層TCP連接建立走的是傳輸層這兩者的故障路徑完全不同所以Ping通不代表一切正常。遇到這個(gè)問(wèn)題時(shí)排查順序應(yīng)該是先確認(rèn)PC或服務(wù)器端的服務(wù)端口有沒(méi)有監(jiān)聽(tīng)。在Linux下用ss -lntp在Windows下用netstat -an | findstr 7000。然后關(guān)掉或者放行對(duì)應(yīng)端口的防火墻規(guī)則。如果這兩步都確認(rèn)了沒(méi)問(wèn)題就要考慮是不是設(shè)備端創(chuàng)建TCP連接失敗——看一下lwIP的tcp_connect()返回值常見(jiàn)的錯(cuò)誤是ERR_MEM內(nèi)存不夠和ERR_VAL參數(shù)錯(cuò)誤。對(duì)于前者要調(diào)大MEMP_NUM_TCP_PCB和MEM_SIZE。還有一個(gè)非常隱蔽的坑是半開(kāi)連接Half-open Connection設(shè)備斷電重啟之前沒(méi)有正常關(guān)閉TCP連接服務(wù)器端保留了半開(kāi)狀態(tài)此時(shí)遠(yuǎn)程服務(wù)器會(huì)認(rèn)為舊連接還存在而設(shè)備端重啟后試圖用新的連接配置不當(dāng)會(huì)在服務(wù)器端出現(xiàn)端口占用或者連接重置。解決方式見(jiàn)仁見(jiàn)智我習(xí)慣在所有TCP客戶端里設(shè)置足夠的重傳超時(shí)參數(shù)并且在設(shè)備喚醒時(shí)主動(dòng)清理掉所有遺留的TCP狀態(tài)然后在應(yīng)用層實(shí)現(xiàn)一個(gè)“心跳重連”的機(jī)制。5.2 黏包與拆包問(wèn)題TCP的字節(jié)流特性TCP是流協(xié)議不是消息協(xié)議這一點(diǎn)在嵌入式里會(huì)引發(fā)非常經(jīng)典的問(wèn)題——黏包和拆包。先看黏包設(shè)備連續(xù)調(diào)用兩次send()發(fā)送兩條消息比如先發(fā)“HELLO”再發(fā)“WORLD”。接收端調(diào)用兩次recv()理論上期望先收到“HELLO”再收到“WORLD”但實(shí)際上兩次recv()中第一次收到的可能是“HELLOWORLD”——因?yàn)門(mén)CP層會(huì)把小塊數(shù)據(jù)累積在一起一次性提交給應(yīng)用層這就是黏包。再看拆包設(shè)備一次send()發(fā)送一個(gè)很大的數(shù)據(jù)塊超過(guò)接收端的接收緩沖區(qū)或MTU接收端需要多次recv()才能收到完整數(shù)據(jù)——每一次recv()收到的是整個(gè)消息的一部分這就是拆包。解決黏包、拆包問(wèn)題的核心是在應(yīng)用層設(shè)計(jì)一種“幀格式”或者說(shuō)“消息協(xié)議”。最簡(jiǎn)單的做法是“長(zhǎng)度前綴法”每條消息由“4字節(jié)消息長(zhǎng)度消息正文”組成。接收端先收4個(gè)字節(jié)解析出消息長(zhǎng)度再收對(duì)應(yīng)長(zhǎng)度的正文數(shù)據(jù)控制好緩沖區(qū)邊界就行復(fù)雜一點(diǎn)的做法是使用特殊的幀分隔符比如AT指令的\r\n結(jié)尾但需要對(duì)正文做轉(zhuǎn)義處理起來(lái)稍繁瑣。從TCP/IP模型的角度看黏包和拆包是TCP的字節(jié)流特性在應(yīng)用層的體現(xiàn)。TCP只保證字節(jié)的可靠有序不保證字節(jié)的邊界。你的應(yīng)用層必須自己處理邊界。做了這么多年代碼我的強(qiáng)烈建議是所有設(shè)備上行的數(shù)據(jù)統(tǒng)一設(shè)計(jì)成固定格式的JSON或者TLVType-Length-Value并且劃分好命令I(lǐng)D和數(shù)據(jù)長(zhǎng)度這樣無(wú)論對(duì)端是PC、是網(wǎng)關(guān)還是云平臺(tái)大家都有統(tǒng)一的解析規(guī)則。5.3 IP分片導(dǎo)致的性能問(wèn)題這個(gè)問(wèn)題在前面第2.3節(jié)提到過(guò)但值得單獨(dú)列出來(lái)再講一遍因?yàn)樗且粋€(gè)隱蔽又影響巨大的優(yōu)化點(diǎn)。嵌入式設(shè)備偶爾需要上報(bào)較大的數(shù)據(jù)塊比如OTA升級(jí)包的分包下發(fā)、設(shè)備日志批量上傳、圖片抓拍上傳。如果你在應(yīng)用層直接把大塊數(shù)據(jù)交給send()底層就會(huì)進(jìn)行IP分片。IP分片在日常網(wǎng)絡(luò)環(huán)境里能工作但性能非常差。原因在于IP分片的重組機(jī)制接收端收到第一個(gè)分片后會(huì)占據(jù)一個(gè)重組緩沖區(qū)等待其他分片到齊。只要有一個(gè)分片丟失整個(gè)原始分組就要全部重傳。Wi-Fi環(huán)境的丟包率本來(lái)就比有線網(wǎng)絡(luò)高分片越多整體丟失概率就越大再加上重傳的數(shù)據(jù)包要全部重新走一遍T(mén)CP如果是TCP的話效率極其低下。解決方案前面提過(guò)應(yīng)用層自己做分包。在TCP場(chǎng)景下把每個(gè)發(fā)送單元控制在基于MSS最大分段大小的一個(gè)安全值以內(nèi)通常是1200字節(jié)比較保守但也最穩(wěn)。在UDP場(chǎng)景下更需要注意因?yàn)閁DP報(bào)文分片后任何一個(gè)分片丟失整個(gè)數(shù)據(jù)報(bào)就廢了而且UDP沒(méi)有重傳機(jī)制。所以要嚴(yán)格把每個(gè)UDP數(shù)據(jù)報(bào)的大小控制在鏈路MTU減去IP頭和UDP頭的范圍內(nèi)。5.4 啟動(dòng)過(guò)程中協(xié)議棧初始化順序問(wèn)題嵌入式網(wǎng)絡(luò)設(shè)備的啟動(dòng)過(guò)程實(shí)際上比看起來(lái)復(fù)雜得多。大部分MCU上電后要完成時(shí)鐘初始化、GPIO配置、MAC外設(shè)初始化、PHY芯片復(fù)位、讀取PHY狀態(tài)、分配MAC地址、協(xié)議棧初始化、創(chuàng)建Socket、綁定端口、開(kāi)始監(jiān)聽(tīng)或連接。如果這個(gè)順序錯(cuò)了就會(huì)出現(xiàn)上電后第一次網(wǎng)絡(luò)連接失敗的詭異問(wèn)題。我遇到過(guò)最典型的例子板子重新上電后需要大約30秒才能ping通但如果板子在啟動(dòng)過(guò)程中同時(shí)被串口中斷反復(fù)打擾偶爾會(huì)永遠(yuǎn)ping不通。抓日志發(fā)現(xiàn)PHY芯片的復(fù)位引腳拉低時(shí)間不夠長(zhǎng)PHY沒(méi)有完成內(nèi)部初始化就開(kāi)始訓(xùn)練鏈路。PHY芯片的自動(dòng)協(xié)商Auto-Negotiation在嵌入式開(kāi)發(fā)里是個(gè)大頭尤其是一些低成本的PHY上電穩(wěn)定時(shí)間很長(zhǎng)。解決方案其實(shí)很簡(jiǎn)單上電后給PHY留足穩(wěn)定時(shí)間不要立即查詢它的狀態(tài)寄存器要輪詢直到狀態(tài)寄存器的鏈路建立標(biāo)志位置1然后才開(kāi)始配置MAC和協(xié)議棧。這一步看著不起眼但對(duì)產(chǎn)品上電一次成功率影響極大。5.5 應(yīng)用層重傳與底層重傳的疊加陷阱最后聊一個(gè)很容易被忽視的系統(tǒng)性問(wèn)題應(yīng)用層重傳和TCP底層重傳疊加后會(huì)導(dǎo)致“數(shù)據(jù)風(fēng)暴”。很多嵌入式工程師為了“可靠”在應(yīng)用層實(shí)現(xiàn)了一套超時(shí)重傳機(jī)制發(fā)送一條指令后如果5秒內(nèi)沒(méi)有收到應(yīng)答就重發(fā)。這個(gè)策略本身沒(méi)有問(wèn)題但如果底層的TCP也在做重傳兩個(gè)機(jī)制就會(huì)疊加。假設(shè)網(wǎng)絡(luò)狀況不好TCP的重傳定時(shí)器設(shè)的是3秒應(yīng)用層的超時(shí)時(shí)間也是5秒那應(yīng)用層就會(huì)在TCP還沒(méi)成功送出數(shù)據(jù)時(shí)啟動(dòng)重傳最終導(dǎo)致同一份數(shù)據(jù)被重復(fù)發(fā)送多次對(duì)端收到一堆重復(fù)的指令處理邏輯如果沒(méi)做去重就會(huì)出現(xiàn)重復(fù)下單、重復(fù)控制等嚴(yán)重問(wèn)題。正確的設(shè)計(jì)是明確分工TCP底層負(fù)責(zé)數(shù)據(jù)到達(dá)對(duì)端的可靠性應(yīng)用層負(fù)責(zé)業(yè)務(wù)級(jí)別的確認(rèn)和邏輯去重。如果業(yè)務(wù)確實(shí)需要應(yīng)用層確認(rèn)比如指令要執(zhí)行完成才算數(shù)那么應(yīng)用層的超時(shí)時(shí)間一定要設(shè)計(jì)得比底層TCP最大重傳時(shí)間大很多不能跟TCP的重傳定時(shí)器在同一數(shù)量級(jí)。這個(gè)“明確分工”的思路其實(shí)也是在使用TCP/IP模型時(shí)最重要的一條心法每一層解決每一層的問(wèn)題不要越層也不要重疊。6. 調(diào)試TCP/IP棧時(shí)的幾個(gè)實(shí)用工具與命令原理講清楚了再說(shuō)一下我平時(shí)調(diào)試嵌入式TCP/IP棧時(shí)幾乎必用的工具和手段它們能讓你在工作時(shí)省掉非常多的冤枉路。第一是串口打印時(shí)間戳。在lwIP里打開(kāi)LWIP_DEBUG配合LWIP_DBG_ON和對(duì)應(yīng)的層調(diào)試開(kāi)關(guān)LWIP_DBG_TCP_ON等可以在串口上看到協(xié)議棧內(nèi)部打印的大量狀態(tài)變化。如果是自己寫(xiě)的協(xié)議棧代碼也建議在關(guān)鍵的收包入口、發(fā)包入口、狀態(tài)遷移處打印帶毫秒級(jí)時(shí)間戳的日志。嵌入式系統(tǒng)沒(méi)有g(shù)db遠(yuǎn)程調(diào)試網(wǎng)絡(luò)協(xié)議棧的便利條件串口頭日志就是最可靠的觀測(cè)手段。第二是Wireshark的過(guò)濾器語(yǔ)法。不要看到一堆包就懵。常用的幾組過(guò)濾表達(dá)式tcp.port 7000只看跟7000端口相關(guān)的TCP流量ip.src 192.168.1.100只看某個(gè)源IP的包tcp.flags.syn 1只看SYN包用來(lái)分析連接建立過(guò)程tcp.analysis.retransmission高亮所有TCP重傳包觀察丟包情況http、mqtt、dns按應(yīng)用層協(xié)議過(guò)濾服務(wù)器調(diào)試時(shí)非常常用這里有個(gè)經(jīng)驗(yàn)是抓包時(shí)要盡量直接抓在嵌入式設(shè)備發(fā)出來(lái)的那個(gè)網(wǎng)段不要隔著路由器抓。隔著路由抓到的包經(jīng)過(guò)了NAT和重新封裝源IP、源端口都可能變化根本認(rèn)不出來(lái)哪個(gè)包是設(shè)備發(fā)的。第三是主動(dòng)注入故障來(lái)驗(yàn)證您的排錯(cuò)思路。比如你想確認(rèn)丟包重傳機(jī)制是否工作正??梢灾苯釉诮粨Q機(jī)和設(shè)備之間加一個(gè)可編程的損耗模塊模擬5%的丟包率然后觀察設(shè)備端是否發(fā)生TCP重傳、延遲有多高。這種主動(dòng)測(cè)試的好處是等到最終上線時(shí)遇到類(lèi)似問(wèn)題你已經(jīng)知道根因在哪一層了。在開(kāi)發(fā)階段做這種測(cè)試的成本遠(yuǎn)遠(yuǎn)低于在客戶現(xiàn)場(chǎng)調(diào)試的代價(jià)。第四是協(xié)議棧統(tǒng)計(jì)信息的暴露。lwIP提供了stats.h里的全局統(tǒng)計(jì)結(jié)構(gòu)體可以讀出TCP重傳次數(shù)、丟棄包數(shù)量、內(nèi)存分配失敗次數(shù)等等。我用過(guò)不少客戶的固件在出廠時(shí)把這些統(tǒng)計(jì)接口全部裁剪掉了調(diào)試時(shí)無(wú)從下手。我一般是保留統(tǒng)計(jì)功能但只在調(diào)試版開(kāi)啟正式發(fā)布時(shí)再裁剪。這樣出問(wèn)題時(shí)只要客戶能反饋一個(gè)統(tǒng)計(jì)信息往往比看串口日志還管用。7. 針對(duì)嵌入式場(chǎng)景的TCP/IP模型優(yōu)化建議7.1 調(diào)整內(nèi)核參數(shù)適配資源受限環(huán)境嵌入式設(shè)備的內(nèi)存資源極其有限需要對(duì)協(xié)議棧參數(shù)做精細(xì)化調(diào)整。不同協(xié)議棧的宏定義名稱不同但優(yōu)化的維度大致相同。TCP PCB數(shù)量默認(rèn)情況下lwIP只支持MEMB_NUM_TCP_PCB個(gè)并發(fā)TCP控制塊mini版本這個(gè)值只有幾個(gè)。如果你的設(shè)備需要同時(shí)維持多個(gè)連接比如一個(gè)連云端、一個(gè)連配置工具就要相應(yīng)調(diào)大。但每個(gè)PCB會(huì)占掉幾百字節(jié)的RAM在MCU上要精打細(xì)算。發(fā)送和接收緩沖區(qū)大小lwIP里對(duì)應(yīng)的宏是TCP_SND_BUF和TCP_WND。發(fā)送緩沖區(qū)小了大塊數(shù)據(jù)要被拆成很多個(gè)TCP段發(fā)送效率低接收窗口小了對(duì)端的發(fā)送速度會(huì)被流控壓住。但調(diào)大又占內(nèi)存。一般我會(huì)先用Wireshark統(tǒng)計(jì)設(shè)備在正常業(yè)務(wù)下的最大吞吐量把緩沖區(qū)設(shè)置成夠用但留存30%余量的水平。注意TCP_WND如果太小會(huì)讓TCP的吞吐量大打折扣而且遇到高延遲網(wǎng)絡(luò)時(shí)性能會(huì)非常差。這個(gè)窗口大小在嵌入式里是很有講究的不是越大越好要在內(nèi)存和性能之間取一個(gè)平衡點(diǎn)。重傳超時(shí)參數(shù)lwIP的TCP_RTO_MS和TCP_RTO_MAX控制重傳定時(shí)器的最小值和最大值。對(duì)于室內(nèi)局域網(wǎng)環(huán)境默認(rèn)值夠用對(duì)于跨公網(wǎng)通信的設(shè)備建議把RTO的最小值調(diào)大一些避免在擁塞情況下瘋狂重傳浪費(fèi)帶寬。這個(gè)參數(shù)如果不調(diào)設(shè)備在弱網(wǎng)環(huán)境下的表現(xiàn)會(huì)非常糟糕。7.2 零拷貝與內(nèi)存池的取舍嵌入式協(xié)議棧的性能瓶頸經(jīng)常不在CPU而在內(nèi)存拷貝。每次數(shù)據(jù)在應(yīng)用層緩沖區(qū)和內(nèi)核緩沖區(qū)之間拷貝都要消耗CPU周期和總線帶寬。lwIP提供了一種思路通過(guò)PBUF的引用計(jì)數(shù)機(jī)制讓?xiě)?yīng)用層直接對(duì)接協(xié)議棧的緩沖區(qū)減少一次拷貝。這個(gè)機(jī)制在數(shù)據(jù)量大的時(shí)候收益非常明顯。但要注意的是零拷貝意味著緩沖區(qū)所有權(quán)和管理權(quán)要交給協(xié)議棧應(yīng)用層不能隨意釋放。這在使用上容易引入內(nèi)存泄漏。如果你的應(yīng)用場(chǎng)景是高頻小包就只有幾十字節(jié)左右零拷貝的收益不大反而增加代碼復(fù)雜度如果你要傳輸音頻、視頻這種大塊數(shù)據(jù)零拷貝就是必選項(xiàng)。我個(gè)人的原則是600字節(jié)以下的數(shù)據(jù)走普通路徑1KB以上的數(shù)據(jù)考慮零拷貝方案。內(nèi)存池和動(dòng)態(tài)堆的選擇也是一樣。內(nèi)存池管理固定大小內(nèi)存塊分配快、無(wú)碎化、確定性高在中斷回調(diào)函數(shù)里分配PBUF時(shí)幾乎只能選它動(dòng)態(tài)堆靈活但長(zhǎng)時(shí)間運(yùn)行之后可能碎片化。lwIP默認(rèn)是內(nèi)存池動(dòng)態(tài)堆結(jié)合的方案PBUF_POOL用于接收PBUF_RAM用于發(fā)送。一個(gè)經(jīng)驗(yàn)法則是接收側(cè)用池因?yàn)榻邮瞻拇笮∠鄬?duì)可控發(fā)送側(cè)用堆因?yàn)閼?yīng)用數(shù)據(jù)大小多變。這樣配置可以在內(nèi)存碎片和分配效率之間取得平衡。7.3 設(shè)計(jì)低功耗設(shè)備時(shí)的網(wǎng)絡(luò)策略低功耗是嵌入式網(wǎng)絡(luò)設(shè)備繞不開(kāi)的話題而TCP/IP協(xié)議棧恰好是低功耗的大敵。TCP連接需要周期性發(fā)送Keepalive包來(lái)維持連接Wi-Fi模組在接收模式下功耗極高UDP雖然開(kāi)銷(xiāo)小但也需要定期向服務(wù)器發(fā)送心跳才能讓NAT映射不老化。低功耗設(shè)備通常采用非對(duì)稱通信模式設(shè)備大部分時(shí)間在休眠只在需要上報(bào)數(shù)據(jù)時(shí)醒來(lái)快速發(fā)送數(shù)據(jù)然后再次休眠。這種模式下TCP長(zhǎng)連接不適合因?yàn)榫S持一條空閑TCP連接的開(kāi)銷(xiāo)遠(yuǎn)超傳輸幾字節(jié)數(shù)據(jù)的收益。更合理的方案是UDP應(yīng)用層心跳或者M(jìn)QTT/CoAP這類(lèi)針對(duì)受限設(shè)備設(shè)計(jì)的應(yīng)用層協(xié)議它們本身有輕量級(jí)的連接?;顧C(jī)制。再往深一層講低功耗設(shè)備的網(wǎng)絡(luò)策略不應(yīng)只考慮功耗還要考慮“窄帶物聯(lián)網(wǎng)”、“LoRa”這類(lèi)傳輸帶寬極小、半雙工的特點(diǎn)。在這種鏈路上跑TCP基本上是個(gè)反模式因?yàn)門(mén)CP的頭開(kāi)銷(xiāo)大、重傳機(jī)制在極窄帶上會(huì)雪崩。正確的做法是用UDP加上前向糾錯(cuò)或使用CoAP這種基于UDP的應(yīng)用層協(xié)議。理解這一點(diǎn)也就能理解為什么LwIP在很多NB-IoT模組里被裁剪到只剩UDP功能了。8. 編譯運(yùn)行一個(gè)基于lwIP的最小實(shí)例講了這么多理論最后用一段可以直接跑的代碼來(lái)收尾。這是一個(gè)基于lwIP STM32F429 Discovery板子的最小TCP客戶端上電后自動(dòng)獲取IPDHCP連接一個(gè)固定的TCP服務(wù)器每秒發(fā)送一條消息。這段代碼雖然簡(jiǎn)單但囊括了從PHY初始化、MAC注冊(cè)、協(xié)議棧初始化到Socket收發(fā)完整流程。首先要做的準(zhǔn)備工作是把lwIP的源碼我用的是2.1.2版本比較穩(wěn)定放進(jìn)工程并在lwipopts.h里配置好關(guān)鍵宏// lwipopts.h 核心配置 #define NO_SYS 0 // 使用RTOS #define LWIP_SOCKET 1 // 啟用Socket API #define LWIP_NETCONN 1 // 啟用netconn API #define LWIP_DHCP 1 // 啟用DHCP客戶端 #define LWIP_STATS 1 // 啟用統(tǒng)計(jì)信息 #define MEM_SIZE (1600 * 10) // 內(nèi)存堆大小 #define TCP_MSS 1460 #define TCP_WND (4 * TCP_MSS) // 接收窗口 #define TCP_SND_BUF (8 * TCP_MSS) // 發(fā)送緩沖區(qū)主程序里主要的初始化流程大致是這樣精簡(jiǎn)版忽略了一些底層驅(qū)動(dòng)細(xì)節(jié)// main.c 核心流程 #include stm32f4xx.h #include lwip/init.h #include lwip/dhcp.h #include lwip/sockets.h #include netif/etharp.h static struct netif g_netif; static cyw43_t cyw43; // 以CYW43為例實(shí)際根據(jù)網(wǎng)卡更改 static char server_ip[] 192.168.1.50; static int server_port 7000; static struct dhcp *g_dhcp; static void network_init(void) { // 1. MAC驅(qū)動(dòng)和PHY初始化這里省略具體硬件操作 cyw43_init(cyw43); // 2. 向lwIP注冊(cè)網(wǎng)卡接口 netif_add(g_netif, NULL, NULL, NULL, cyw43, low_level_output, // 驅(qū)動(dòng)發(fā)送接口 low_level_init, // 驅(qū)動(dòng)初始化接口 ethernet_input); // 收包入口 netif_set_default(g_netif); netif_set_up(g_netif); // 3. 啟動(dòng)DHCP獲取IP地址 g_dhcp dhcp_start(g_netif); while (g_dhcp-state ! DHCP_STATE_BOUND) { sys_check_timeouts(); // 處理協(xié)議棧定時(shí)器 HAL_Delay(10); } } static void tcp_client_task(void *arg) { int sock -1; char buf[64]; for (;;) { if (sock 0) { // 1. 創(chuàng)建Socket sock socket(AF_INET, SOCK_STREAM, 0); if (sock 0) { vTaskDelay(pdMS_TO_TICKS(1000)); continue; } // 2. 連接服務(wù)器 struct sockaddr_in saddr; saddr.sin_family AF_INET; saddr.sin_port htons(server_port); saddr.sin_addr.s_addr inet_addr(server_ip); if (connect(sock, (struct sockaddr *)saddr, sizeof(saddr)) ! 0) { close(sock); sock -1; vTaskDelay(pdMS_TO_TICKS(5000)); continue; } } // 3. 模擬采集溫濕度并上報(bào) float temp 25.0 (rand() % 10) / 10.0; float hum 60.0 (rand() % 10) / 10.0; int len snprintf(buf, sizeof(buf), T%.1f,H%.1f\r\n, temp, hum); int ret send(sock, buf, len, 0); if (ret 0) { close(sock); sock -1; } vTaskDelay(pdMS_TO_TICKS(1000)); // 1秒發(fā)送一次 } }這里有個(gè)非常重要的細(xì)節(jié)TCP客戶端的重連邏輯。這段代碼中如果connect()失敗、send()返回值異常就關(guān)閉Socket并重新創(chuàng)建。如果不寫(xiě)這段邏輯設(shè)備在服務(wù)器重啟或網(wǎng)絡(luò)斷開(kāi)的場(chǎng)景下會(huì)永遠(yuǎn)卡在舊連接上。這是嵌入式TCP客戶端最基本也最核心的可靠性設(shè)計(jì)之一。此外lwIP是一個(gè)非阻塞的事件驅(qū)動(dòng)協(xié)議棧它必須通過(guò)sys_check_timeouts()周期性地處理重傳定時(shí)器、ARP老化等內(nèi)部事件。在裸機(jī)環(huán)境下你要在主循環(huán)里調(diào)用它在上面的RTOS環(huán)境下也要有某個(gè)任務(wù)負(fù)責(zé)周期性調(diào)用它。初學(xué)者最容易犯的錯(cuò)就是忘了調(diào)這個(gè)函數(shù)導(dǎo)致TCP連接永遠(yuǎn)建立不起來(lái)、ARP表永遠(yuǎn)不刷新。編譯燒錄之后在PC上用nc -l 7000監(jiān)聽(tīng)端口板子上電啟動(dòng)后你應(yīng)該能在終端看到每秒一行Txx.x,Hxx.x的輸出。如果看到這個(gè)輸出恭喜你的板子已經(jīng)能通過(guò)完整的TCP/IP模型鏈路收發(fā)數(shù)據(jù)了。這時(shí)候再回頭看我前兩章講的那些概念你會(huì)有一個(gè)完全不同的感受——它們不再是紙面上的圖而是實(shí)實(shí)在在地在你的板子和PC之間流動(dòng)著。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99九九热视频| se99在线| 丁香五月天堂亚洲社区| 激情五月婷婷综合| 停停五月丁香| 五月天婷婷在看| 99久久婷婷国产综合亚洲| 无码色色| 操操操av| 激情九月综合| 91色吧网| 五月丁香婷婷狠狠操| 99碰网站| 26uuu日韩| 色青青五月| 天天综合久久| 操操熟女| 国产精品91抖高| www.99久久久| 丁香激情四射| 俺去也婷婷| 五月婷婷综合色啪首页| 秋霞午夜理论| 中文字幕在线日亚州9| 婷丁香五月天| 久久性爱视频免费| 色五月xxx| 日韩无码乱轮| 亚洲久艹| www.99免费视频| 久草热8精品视频在线观看| 久久草中文日韩欧美| 久久AV电影| 婷婷综合欧美| www.日本久久videos| 五月婷天堂视频| 99精品网| 中文毛片无遮挡高潮免费| 久久丝袜婷婷| 91碰超| www,婷婷| 五月丁香在线综合| 99精品色| 99在线精品视频| 欧美啄木乌丝袜人妻系列| 久久黄色网扯| 翔田千里无码| 色天天综合| 熟女乱论网| 综久久久| 激情婷婷六月| 无码色色色| 黄急一级视频| 婷婷免费无视频| 无码日本精品XXXXXXXXX | 久久加勒比| 午夜五月天| 人妻久久久| 第一区久久网站| 亚洲小电影在线观看黄999| 夜丁香五月婷婷| 97色女人在线| 九九九激情综合| 丁香五月天激情AV| 99热地址| AV九九| 色婷婷大香蕉| 99亚色色色| 激情综合网五月婷婷| 爆乳熟女一区二区三区爆乳| 久久香蕉影院| 欧美日韩91| 亚州精品色情无码A片| 在线观看免费狠狠色丁香香综合| 狼友视频在线观看18| 色V狠狠的干| 婷婷色中文| 色婷婷操逼网| 97人妻碰碰碰久久久久-最近国语高清| 91大屁股在线| 激情综合久久| 色婷婷五月亚洲| 海外网站专业操老外| 色婷婷性爱| 99久久玖玖| 久久婷婷青青草| 丁香婷婷久久综合在线| 991精品在线视频| 九月婷婷在线视频| 婷婷涩涩网| 中文字幕在线视频播放| 91疯狂操操操操| 婷婷成人AV| 人妻激情综合| 嫩BBB槡BBBB搡BBBB视频| 久草xx性爱视频| 日本操逼九九九九58日本操逼| 激情丁香六月| 久久综合五月天| 久久激情网| 成功精品影院| 九97免费视频| 99操久久| 99热这是里只有精品| 六月丁香婷婷天堂| 婷婷五月天亚洲| 9一精品视频观看| 成人片在线免费看| 99欧美| 五月丁色AV| 天天日夜夜操五月| 五月丁香婷婷色色| 欧美A A A A A| 99热销国产这里有精品| 色五月在线| 99热精品在线免费观看| 91色色色| 欧美性猛交99久久久99| 人人做天天爱| 91一起操| 91黄址| 丁香五月欧美色综合| 99re思思热久久| 成片免费观看视频大全| www.激情五月天.con| 久月久在线视频| 激情婷婷22月间| 色婷婷五月综合| 色噜噜狠狠狠综合曰曰曰| 九九热啪啪| 五月婷婷,六月丁香| 亚洲免费看片| 大香蕉啪啪| 激情小说之五月| 日本综合久久| 亚洲另类视频| 国模狼狼| 狠狠操天天操天天操| a久久| 久久人妻精品| 丁香五月婷婷狠狠色| 色综合综合网| 98国产精品综合一区二区三区| 97超级碰碰碰| 激情小说视频图片| 伊人久久丁香五月91| 婷婷五月丁香五月| 青青草tp| 九洲一级A片| 99在这里有精品| 五月丁香激情啪啪| 久青操| 五月丁香亭亭天天舔| 亚洲va欧美va天堂v国产综合| 婷婷综合五月天| 97极品在线| 天天综合网亚洲网站| 五月丁香激情啪啪| 可以免费看av网站| 婷婷成人视频| 人人草成人视频| 天天爽免费视频| 丁香婷婷综合激情五月色| 五月丁香免费视频| 色色色色色色色色网站| 婷婷五月天成人在线视频| 婷婷 丁香 精品| 伦乱人妻| 婷婷五月激情图片| 五月婷婷综合久久| 91久久国产综合久久| 六月婷婷私欲| 欧美婷婷丁香社区在线播放| 日韩在线婷婷五月天综合| 国产肥白大熟妇BBBB视频| 另类专区在线| 十一月婷婷激情四射| www91色网站| 精品人妻久久久久久久| 五月天婷婷综合色| 婷婷婷婷婷开心无码播放| 婷婷情色开心五月天99| 亚洲 五月 婷婷 成人| 拍真实国产伦偷精品| 综合狠狠伊人| 国产成人精品一区二三区熟女在线 | 亚洲亚洲人成综合网络| 韩国婷婷丁香五月| Www.se.久久| 99综合激情久久精品久久| 色色三级视频| 久久这里都是精品| 成人电影AV在线观看| 天天色丁香| 97干网站| 成人无码髙潮喷水A片| 色激情综合狠狠婷婷| 五月婷婷六月丁香| 一本伊人色婷| 五月婷婷深深爱| 91肏| 熟女激情网| 婷婷啪啪| 婷婷开心五月| 9l视频自拍九色9l视频自拍九色9l社区 | 色级婷婷| 99九九99九九九视频精彩| 性爱五月丁香| 八戒青柠影视剧在线观看| 思思99精品视频在线观看| 色婷婷基地 | 婷婷五月激情片| 激情九月婷婷九月| 久久色五月天激情小说| 五月天色色色色色| 96丁香六月婷婷蜜桃综合久久| 深爱 五月天| 六月丁花香啪啪激情欧美| 日日插日日干| 俺来也综合网精品一区| 日本97人人| 婷婷娌伦网| 99视频色在线观看| av人人操| 另类激情综合| 5月丁香六月婷婷| 国产亚洲av片| 色婷婷久久| 婷婷五月色丁香在线看| 大香蕉五月天婷婷| 久久婷婷网址| 五月天色区| www.狠狠干com| www.99热这里精品 | 丁香五月激情视频在线| 色色丁香五月天社区| 91色五月| 美女美女美女三级色天天天天天| 色欲影香| 婷婷五月天综合亚洲| 五月天综合在线观看视频| 综合激情五月丁香| 风流少妇A片一区二区蜜桃 | 欧美激情综合色综合啪啪五月| 开心久久xxx色| 日本在线观看99| 黄色AV日韩| 激情5月天天天| 婷婷综合97| 欧美成人猛片AAAAAAA| 激情丁香五月婷婷| 99爱免费视频在线观看| 五月丁香爱婷婷深深| 国产欧美大香蕉一区| 欧美激情综合| 啪啪 综合网| 五月综合精品| 五月婷婷少妇之| 亚洲人妻电影| 六月婷婷日| 日本狠狠干| se99视频| 日日狠夜夜狠| 99精品视频在线| 激情久久丁香| www.九九婷婷| 性爱网五月婷婷| www.色五月| 99免费热视频在线| 99免费视频网| 六月婷色六月| 影音先锋秋秋五月婷婷| 丁香色色网| 婷婷综合色图| 亚洲AV中文在线| 九九精品视频在线6| 色之综合网| 久久宗合影| 国产精品五月丁香| 色婷婷基地 | 丁香五月天啪啪| 五月丁香久久| 性爱视频99| 婷婷色五月久久| 综合五月草| 成人av中文字幕| .comwww在线观看免费操| 国外亚洲成AV人片在线观看| 日产精品一线二线三线芒果| 99九九热在线观看| 久草视频一,二三四| 天天爽天天| 五月天色婷婷小说| 久久婷五月综合| 五月激情站| 99热99色| 亚洲成人五月| 久久色亭亭五月天| 99久久99久久| 一级黄色影片| 色婷婷网| 亚洲亚洲人成综合网络| 92久久精品一区二区| 天天日夜夜拍| 婷婷久草| 碰99在线| 五月天色站| 一级黄色操B| 日韩啪啪自拍| 五月婷婷综合影院| 99久在线精品| www.狠狠| 97婷婷丁香五月天激情图片| 九九视频热| 综合色五月天| 丁香五月天网站| 成年AAAA色情| 六月激情婷婷综合| 99热99热99热99热| 69色婷婷| 日韩成人电影AV| 亚洲综合另类| 99@久久@99精品视频| www.丁香黄色五月天人与| 丁香激情网| 国产黄大片在线观看画质优化| 少妇性BBB搡BBB爽爽爽视頻| 在线不卡的视频| 五月丁香日逼| 99在线播放视频| 色色色综合网| 婷婷丁香人妻久久在线观看| 五月丁香六月欧美综合网站| 大香蕉520| 亚洲色五月| 日日躁夜夜躁狠狠久久AV| 一级片操逼视频| 91女人18毛片水多国产| 五月丁香色婷婷色| 婷婷五月天美女| 99在线精品观看99| 伊人六月无码视频| 婷婷五月天亚洲综合| 五月婷婷中文| 久久性爱99国产| 99热这里都是精品| 久久综合婷婷| 青青草伊人婷婷| 深爱激情六月天| 激情另类综合| 久人人操| 精品五月丁香| 五月丁香在线观看| 色综合色色色色色| 超碰免费大香蕉| 亚洲无码影音| 婷婷丁香先锋资源网站| 婷婷WWW久久| 亚洲激情综合| 天天插天天干| 丁香九月综合| 夜夜天天久久婷婷| 亚洲av成人在线| 亚洲国产精品VA在线看黑人| 麻豆精品| 先锋资源 996| 99re热在线视频| 国产视频色色色色色色色| 在线亚洲综合| 精品国产va久久久久久久| 六月丁香婷婷综合在线| 丁香五月婷久久| 亚洲国产精品二二三三区| 99九九精品视频推荐| 日本综合久久| 婷婷夜夜操| 色五月人妻| 五月婷婷9| ,99视频久久| 婷婷五月影院| 亚洲天堂婷婷| 另类图片五月天婷婷| 99热精品在线| 伊人丁香五月天丁香在线婷| 五月婷婷色播视频| 99热这里只有精品1025| 久久日本wwww色| 亚洲avjiujiur91| 婷婷的色色五月天| 色综合播放| 26UUU成人网| 色婷另类| 亚洲无码影片| 婷婷色五月色妇| 久久99热这里只有精品| 色色丁香婷婷综合| 五月婷婷综合网| 懂色av粉嫩AV蜜臀AV| 538在线| 999激情视频| 丁香五月色激情| 玖玖伦理电影| 亚洲综合99| 激情啪啪五月| 五月丁香婷婷三级| 色婷丁香91| 99久久国产成人精品| 色综合区| 超碰色色综合| 999激情视频| 超碰97色| 成人va在线播放| 色婷婷色丁香色欲av| 日日鲁鲁夜夜爽爽| 成人国产欧美大片一区| 欧美激情五月天婷婷| AAA久久| www色综合亚洲92| 深爱激情av| 精品二区| 五月天五月天激情网| 激情四射亚洲| 亚洲色无码| 免费观看全黄做爰的视频| 这里只有视频精品| 国产精品18久久久| av网站中文| 免费91久久精品| 国产精品五月丁香| 天天综合五月| www.婷婷五月天啪啪| 国产一区二区av免费| 美女妹子后射视频网站在线观看| www.jiujiujiu| 亚洲国产精品VA在线看黑人| 婷婷五月天堂| 草草影院爱爱| 欧美综合激情五月| 精品思思久久| 高清无码网址| 久久这里只有精品16| 六月 丁香 视频| 伊人久久丁香婷婷六月五月综合| 六月五月天婷婷涩播在线| hd五月婷婷在线| 91se视频| 激情五月天无人视频在线| 啪啪操网| 99re热在线视频| 色波激情五月天| 另类少妇人与禽zOZZ0性伦| 婷婷五月俺要去| 男同91| 美女美女美女三级色天天天天天| 99热国产婷婷| 丁香五月六月综合激情| 五月婷婷欲色| 99九九玖玖| 色色99| 有码人妻久久| 无码字幕中文| 免费婷婷| 激情丁香五月激情婷婷| 中文字幕五月久久婷婷| 夜夜爽天天爽| 日本色色色| 日本九九视频| 99噜噜噜在线播放| 亚洲丁香五月天视频| 色五月婷婷自拍| 五月丁香网站| 人妻操逼视频| 久久婷婷精品| 激情婷婷护士激情| 婷婷色在线观看| 日本五月丁香| 九九热啪啪| 91操碰| 色五月丁香五月婷婷五月成人网 | 天天色宗合| 逼逼AV| 2013AV天堂| 亚洲综合激情五月久久| 综合五月天完整| 成人 在线 日韩| 色哟呦av| 天堂A∨在线| 五月婷婷干| 99日精品视频| WWW.亚洲无码| 婷婷五月丁香五月| 97五月久久丁香婷婷| 色婷婷在线视频久| 婷婷久久五月天丁香| 青草视频在线播放| 久久人人看| 婷婷中文字暮| 婷香五月网在线| 自拍视频99| a久久| 久久hd| 五月天激情Av| 五月丁香六月婷婷精品| 日熟女| 北条麻妃九九九国产精品视频| 97热在线精品| 丁香五月天激情网| 婷婷深爱色五月| 中文无码婷婷| 色婷婷国产精品综合在线观看| 另类少妇人与禽zOZZ0性伦| 亚洲人妻Av| 婷婷五月丁香综合人妻| 婷婷丁香水多多视频| 亚洲视频无| 九九99九九精品免费 | 久操操| 五月激情婷婷丁香天堂| 成人五月天综合网| 97操碰视频| 青青草五月天| 久久久久视剧HD| 无码激情AAAAA片-区区| 天天综合色| 婷婷色丁香五月| 久久性爱视频网站| 五月婷六月| 国产性色蜜乳| 深爱网深爱综合网| 久1色色| 碰碰91| 婷婷伊人綜合中文| 51精品国自产在线| 少妇被下春药玩弄A片| 五月天综合视频| 日韩啪| 亚洲免费观看高清完整版AV线| 色狠久| 五月婷AV| 成 人片 黄 色 大 片| 中文字幕人妻在线| 超碰99久久| www.狠狠艹| 日日日日操| 色婷婷综合网站| 五月婷综合性中心| 欧美综合五月丁香六月婷| 婷婷激情五月天在线视频| 综合激情啪啪| 五月婷婷久久开心网| 九九九精品视频免费观看| 日韩啪啪视频| www.婷婷网| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 久九色| 97干视频| 久热99| 丁香六月婷婷久久综合八月| 色婷婷在线视频久| 第一区久久网站| 色99欧洲色19| 少妇人妻人伦A片| 天天综合五月天| 伊人五月天在线| 色色色色热| 色天天综合| 狠狠狠狠狠狠狠狠| 五月天婷婷基地综合网| 五月天综合视频| 五月综合视频| 丁香五月婷婷操逼| 99啪99| 91精品久久久久| 3pAV| 色五月丁香五月婷婷五月成人网| 五月丁香天堂网| www,色婷婷| 天天干天天日天天操| 91丨九色丨大屁股| 97久久精品视频| www.综合久久.com| 久久婷婷五月国产色综合激情| 日本特黄aaaaa| 五月婷婷说| 色私五月婷婷| 黑人糟蹋人妻HD中文字幕 | 久色网址| 色综合久久88色综合中文字幕| 天天做 天天爱| 九九视屏| 九九热精品在线| 激情五月天天| 99热综合在线| 欧美五月丁香在线观看| 六月份天丁香婷婷| 天天色播| 99热在线看| 五夜婷婷| 99精色| 激情无码网| 强壮公让我夜夜高潮A片视频| 日韩成人影片在线观看| 99视频色在线观看| 天天日,天天干,天天操| 开心五月激情网| 五月天婷婷丁香人人操91| 五月丁香狠狠爱| 婷婷五月天BBw| 色五月婷婷影院| 九色在线五月婷婷网址| 97在线精品| 久久思思热视频| 中文字幕在线不卡| 第四色色色色色丁香五月天| 9九热视频| 人人爱国产| 婷婷久久五月天| 成人AV网站在线| 久久五月丁香| 亚洲综合五月| 啪啪日本欧美| 欧美激情 日韩无码 婷婷 五月天 久久婷婷丁香五月一二三 | 在线综合网| 伊人在线视频| 久久大香蕉同僚| 性欧美大战久久久久久久83| www.激情五月| 六月激情婷婷| 伊人网碰碰| 婷婷五月天偷拍| 亚洲色五月天在线| 五月激情丁香五月| 夜夜 操无码| 国产美女无遮挡裸体毛片A片| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 天天色视频| 狠狠做六月爱婷婷综合aⅴ| 婷婷五月色综合| 97色精品视频| 香蕉婷婷色五月| 欧美婷婷日本| 婷婷 伊人 久久| 色婷婷九月| 亚洲亚洲人成综合网络| 九九碰九九爱97| 影音先锋91资源站| www.99免费视频| 五月天另类小说亚洲| 色综合九九色综合88| 久久精品日| 久久996re热这里只有精品无码| 超碰国产在线观看| 精品九九网| 俺去啦综合网| 天堂在线伊久| 婷婷五月天亚洲精品| 亚洲精品视频在线| 婷婷丁香六月五月天| 色综合久久天天综合网| 激情亚洲婷婷| 超碰在线精品| 色综合久久久久| 另类图片激情五月| 天天插插天天| 69久久久| 五月色婷婷综合| 五月天激情黄色网址| 五月天,激情四射,婷婷频道| 亚洲av电影网站| 丁香六月天婷婷开心综合| 99ER热精品视频| 婷婷深爱五月天在线| 五月天社区| 日本熟女三区| 色欲五月丁香| 99九九精品| 久久青草国| 日日爽日日| 日韩成人电影Av| AA丁香综合激情| 中文AV在线观看| 99在线观看精品| 天天综合久久| 色五月综合| 婷婷六月激情小说网| 五月综合在线| 99日精品视频| 色五月综合在线| 欧美天天草人人草| 天天色情站| 色综合播放| 这里只有精品96| 欧美日韩AAAA| 丁香五月91| 激情五月婷婷| 美女100%露全身无挡网站| 国产精品99久久久久久久女警| 手机AVAV天堂看网| 狠狠色综合久久久久| 亚洲五月天激情| 在线观看av网站| 久99久精品| 丁香婷婷激情综合五月激情| 丁香五月天堂网| 六月亭亭久久综合激情| 中文AV网站| 人人操人人干AV| 思思色播| 大香蕉丁香五月| 991精品在线视频| 色婷婷五月天天天天天| 超碰妻人人| 激情五月丁香五月| 天天情色五月天| 五月丁香色婷婷色| 人妻丰满精品一区二区A片| 九九婷婷五月天影视| 97在线日本| 激情五月天 婷婷| 婷婷丁香五月,狠狠综合| 91视频免费后入强操| 天天综合精品| 丁香五月天啪啪a日本| 九久久精品视频99| 成 人片 黄 色 大 片| 天天激情站| 五月天激情综合在线| 91在线观看九区| 狠狠综合网| 婷婷五月天熟妇| 色99在线视频| 五月天大香蕉婷| 色色色色色色网站| 久久A区B区| 日韩在线视频中文字幕| 91九色PORNY肉丝在线| 超碰人人艹| 丁香六月婷婷姐网| 视频综合网| 色婷亚洲五月丁香| www五月婷婷| 天天日夜夜拍| 日本婷婷| 五月丁香六月婷综合成人综合| 色色色国产| 五月刺激丁香月综合| 色婷婷五月在线| 九九婷婷网五月天| 丁香五月天精品| 99热偷拍| 在线观看996精品| 99热综合在线观看| 欧美槡BBBB槡BBB少妇| 丁香五月综合激情啪啪| 五月花综合视频| 婷婷五月免费观看| 久久婷五月综合| 爱iii做iiii日日| 99热精品在线| 92久久| 五月天婷婷在线AN| 天天草天天日| 最新激情五月天| 综合久久99| 五月丁香色婷婷久久| 伊人大香久久| 国产精品成人网址| 97精品人人A片免费看| 九九热只有精品| 原琪琪色影院| 99色色| 天堂草在线看www| 26UUU精品一区二区Com| 99热香港| YJLZZJLZZ亚洲乱熟无码| 色婷婷五月影视| 丁香影院五月综合| 草草色情综合网| 日产精品久久久久久久蜜臀 | 碰碰91| 97干综合网| 亚洲视频99| 丁香五月婷婷色播艳门照| 婷婷玉月丁香五月在线视频| 日韩免费乱轮网站| 色色日韩| 丁香六月婷婷综合色| 9l视频自拍九色9l视频自拍九色9l社区 | 9精品在线| 久久久一级AAA| 五月开心播播网| 亚洲无码影音| 激情五月婷婷欧美极品| 开心深爱五月天| 久久99久久99精品免观看粉嫩| 色色色视频免费无码| 网色99| 五月深情久久| 色九九九综合| 日本操B视频| 狠狠干在线| 亚洲六月色婷婷| 91九色中文| 五月天婷婷基地| 色五月亚洲开心网| 婷婷丁香基地在线| cao视频,现在观看| 91色综合| 丁香五月婷婷六月婷婷| 另类在线免费视频| 色婷婷五月综合网| 99无码免费视频| 婷婷国产五月天17c| 色约约视频一区二区三区四区五区 | 丁香六月婷婷久久高清| 婷婷久久精品| 久综合网| 婷婷丁香高潮了| 性小说五月天| peg 2区三区四区的| 亚洲五月天天| 五月丁香成人| 大香蕉久久| 另类专区在线观看| 少妇AB又爽又紧无码网站| 综合狠久久| 久久精品日| 五月婷婷啪啪网| 思思99热热热99| 天天婷婷操| 我要看激情五月天| 99热国产免费| 久久婷婷六月综合| 99国产精品白浆在线观看免费 | 五月婷婷六月丁香玖玖玫瑰91| 久久激情五月婷婷| 激情深爱婷婷网| 99热这里只有是亚洲国产| 日本美女五月天| 五月丁香婷婷色| 黄急一级视频| 五月激情婷婷国产精品久久久久久| 丁香六月婷婷久久亚洲天堂| 狠狠香蕉| 天天夜天天色天天| 色婷婷19| 欧美成人猛片AAAAAAA| 丁香九月综合在线| 欧亚色色| 丁香五月激情在线| 婷婷色婷婷| 久久婷婷综合五月| 日本九九视频| 色婷婷五月天激情综合| 婷婷五月天基地| 依人大香蕉| 综合 蜜月 婷婷| 人妻性爱av网站| 久久性爱视频这里只有精品 | 五月丁香性| 亚洲色啪| 91|九色|动漫| 深爱五月中文字幕| 久久 婷婷 五月天| 亚洲黄色网址| 欧美日韩999| 亚洲丁香五月| 激情综合色网| 色久五月天| 91一起操| 区美毛片子| www.色五月天.com| 久久免片| 9999热在线观看| 热久久视频99| 久久久久人妻| 久9精品视频在线| 爱操人妻| www.婷婷.com| 老师的粉嫩小又紧水又多A片视频| 丁香五月婷婷亚洲色图| 伊人色欲五月天| 99∨VTV| w婷婷五月婷婷w| 丁香六月天堂| 综合AV网| 丁香五月天欧洲在线| 九九人人精品| 五月丁香婷婷伊人| 影音先锋四区| 色五月天电影| www.99精品日操伊人乱碰在线| 极品色丁香| 婷婷五月天天爽| av一区免费看| 襙逼网| 丁香激情网| 五月婷婷激情网| 久久婷婷五月综合| 丁香五月停停av| oVV4WIB3vFi8D| 九九RE视频在线精品| 超碰在线观看成人视| 六月天丁婷婷| 亚洲最大成人综合网720P| 五月激情四射婷婷丁香| 中文字幕婷婷| WWW色色色COm| 夜夜操天天爽| 果冻传媒A片一二三区| 26UUU在线观看| 国产精品美女久久久久AV超清| 丁香九九九九| 日本天天操| 免费超碰在线| 免费不卡狠操美女视频网| 一区操| 操啊操av| 亚洲AV日韩在线观看| 26uuu91| 中日韩美欧成人一区二区精品在线| 26uuu四色| AV电影在线播放| 99这里是99在线视频| 久久九九热视频| 香蕉久久国产AV一区二区| 激情性爱五月天| 色五月婷婷操逼| www.久久爱| 色色婷婷丁香| 亚洲色视频| 9er热在线精品视频| 色五月丁香婷婷| 国产精品成人在线| 婷婷爱五月天| 五月丁香亭亭成人电影| 搡BBBB搡BBB搡五十| 日日鲁鲁夜夜爽爽| 苗黎美女四级成人版一级二级毛片| 人妻久久久久久久久| 成人国产欧美大片一区| 丁香五月激情六月| 99色综合久久| 婷婷五月天成人小说| 久婷自拍视频| 欧美VA在线| 色综合色色色色| 午夜成人AV在线| www.91操| 裸体做A爰片毛片A片免费| 天天添天天摸天天天天做| 沈娜娜av| 久久久久久久人妻| 草一草avb| 九九久久99| 69激情小说| 日韩天堂久久| 51XX午夜影福利| 99惹在线精品免费观看| 风流少妇A片一区二区蜜桃| 色婷婷影音| 丁香五月天啪啪| 无套内射极品大美女| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 婷婷成人综合免费视频| 欧美性爱丁香五月| 色99在线视频| 亚洲无线视频| 婷婷天天五月天| 欧美色五月| 五月丁香六月婷婷在线观看| 色五月激情问网站| 亚洲成人av在线| 欧美WW在线网| www.色色com| 五月天婷婷偷拍| 成人做爰A片免费看视频| 日本视频欧美观看免费| 中文人妻AV久久人妻18| 91狠狠色丁香婷婷综合久久| 婷婷五月天激情AV影院| 久久婷婷五月综合色和| 欧美丁香五月| XXXX岛国| 一区二区你懂的| 中文字幕在线免费观看视频| 丁香五月激情站| 婷婷五月天 偷拍| 色婷五月天综合网| 激情五月丁香六月综合AVXXXX| 五月天婷婷社区| 天天人人人人人人人人人人人| 色婷婷狠狠干芒果TV| 久久婷婷一级片| 日日操日日射| 婷婷久久五月天亚洲欧美国产日韩在线观看 | 亚洲va综合va国产va中文| 日韩一66精品| 99热观看| 99久久这里只有精品| 婷婷六月视频| 九九Av| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 久啪欧美| 五月天婷婷色色| 五月激情影院| 激情综合婷婷| 欧美va视频| 色天使久久综合| 老司机日日夜夜青草| 99热在线精品观看| 这里只有精品视频222| 天天爱天天做天天操| 五月婷婷 激情五月| www久| 久久大香蕉| 久久五月天婷婷| 欧美婷婷五月| 狠狠操天天操综合| 久久亚洲色导航| 97色天堂| 婷婷综合在线网| 婷婷另类开心| 日韩成人电影AV| 色色日本欧美| 五月天全国最大成人网| 激情五月天视频| www.99热这里精品| 性天天中文网| 天天干天天色综合| 日本三久久| 精品久久这里热66| 五月婷婷黄| 影音先锋一区| 亚洲 视频 导航 一区| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 色婷婷六月精品| 99riAV国产精品视频| 婷婷九月久久| 激情六月五月婷婷综合网| 久久停停超碰| 婷婷色吧| 一本综合丁香日日狠狠色| 99热这里只有精品66| 夜夜躁婷婷AV| 五月天com| 婷婷五月天综合久久日美女| se色99| 久9视频| 操操国产| 狠狠久久婷五月| 狠狠色噜噜狠狠| 九九热视频在线观看| 日本在线观看91| 久久丁香五月婷| 五月丁香久久激情综合| 婷婷五月久久| 九九婷婷热| 激情五月,激情综合网| 丁香五月婷婷久久久| 91热在线| 五月丁激情| 久久久久久久人妻| 狠狠色丁香久久久婷| 丁香五月在线| 99狠狠操一| 五月丁香婷婷AV天堂| 香蕉婷婷色五月| 99在线视频免费| 丁香五月中文字幕色播| 久操人| 五月婷婷丁香综合| 婷婷 久综合| 日日操夜夜擼| 五月丁香婷色| 国产av第一专区| va婷婷| 亚洲黄色精品| 99热| 99热精在线九九久久保| 91碰免费视频| 亚洲综合另类| 中文网AV| 精品成人在线观看| 91久久综合| 激情AV在线| 91九色精品| 深爱激情综合| 99九九99九九九视频精彩| 色久女| 色综合久久88| 99ree6| 色五月婷婷网| 婷婷伊人| 极品少妇XXXX精品少妇偷拍| 99热在线观看| 5月丁香婷婷| 色五月天丁香婷婷| 思思re最新视频| 六月色播| 我爱宗和色| 伊人久久大香蕉网| 天天日日| 成人无码髙潮喷水A片| 人妻体体内射精一区二区| 丁香色五月天| 丁香九月久久| 国产成人综合亚洲| 久久a热| av中文在线| 色婷婷丁香AV综合| 直接看的AV| 婷婷综合另类| 91久久日日| 中文字幕日产A片在线看| 久久六月天| 99热大片| 五月婷婷激情性爱| 91久久国产自产拍夜夜91久久精品文字>91麻豆精品国产 | 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 99亚洲综合| 激情丁香婷婷六月天| 91viP在线看| 99爱99操| 99热在线观看精品| av色婷婷| 第四色激情网| 99九九中文字幕视频| 天天爽天天操| www.99视频| 色色色色热| 天天色粽合合合合合合合| AAA久久久| 久热超碰91| 日韩久久色| 激情綜合網址| 亚洲五月天婷婷在线| 丁香婷婷啪啪啪| 日韩成人五月天| 婷婷五月激情四月综合| 91视频精品99| 色色精品色| 五月丁香激情综合| 91色婷婷综合久久中文字幕二区| 丁香五月天堂网AV| 久久婷婷综合基地| 丁香五月色色色色| 婷婷永久在线| 丁香六月欧美| 深爱激情六月天| 色五月在线综合| 丁香六月婷婷色播| 九热视频| A片试看120分钟做受图片| 99色嘟嘟精品网站| 99天堂在线观看免费视频| 丁香六月激情毛片| 五月婷婷免费在线| 日日噜狠狠色综合久久| 岛国av网站| 五月天激情影院| 激情五月天福利| 九九热九九| 五月丁香直播| 97色天堂| 91se视频| 人人操人人看97干| 再綫Av免费視品| 五月天激情国产综合婷婷| 日本九九九九九九| 色老久久| 麻豆五月丁香婷婷| 亚洲视频99| 五月丁香毛片| www.五月天婷婷姐姐| 99热91| 丁香五月婷婷婷桃花影院| 国产五月丁香在线| 99r这里| 99网| 日本一级一级一级一级| 欧美va在线| 97日韩无套内| 激情丁香婷婷| 国产精品色婷婷AV综合色色| 九九色热| 国产.亚洲.欧洲视频在线| 婷婷五月丁香网| 开心五月婷婷| 日韩综合网络男女香蕉a片| 五月综合婷婷开心网| 成人免费在线电影| 久久九九一區| 婷婷五月美女直播| 亚洲欧美在线观看| 丁香五月天色| 能看的av| 五月色亭丁香| 内射综合网| 激情婷婷久久| 丁香六月狠狠干| 色色免费网站| 庭庭久久内射| 亚洲激情综合网| 91色五月| 99操逼| www.91.com黄| 日韩一级网站| 91碰碰视频| 婷婷综合激情| 色99色| 久操大香蕉| 天天玩夜夜操| 91九色无码日韩| 亚洲综合激情五月久久| 免费看成人747474九号视频在线观看| 五月丁香啪啪激情| 婷婷六月激情综合| 激情婷婷五月天日本系列| 4399精品一区二区| 婷丁香五月天| 啪啪 综合网| 婷婷丁香六月| 九热在线这里有精品6| 国产性av| 色色cOm| 色五月中文字幕| 婷婷综合97| 久久看婷婷| 另类少妇人与禽zOZZ0性伦| 五月丁香六月婷婷网站| 九九久久精品國產| 天天日天天摸| 丁香六月婷婷综合激情欧美 | 色五月婷婷久久| 99色在线视频观看| 国外亚洲成AV人片在线观看| 婷婷综合网在线| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 色青五月天| 丁香五月婷婷色| 99爱在线精品视频免费观看| 久操婷婷| 久草热8精品视频在线观看| 色色色综合| 亚洲瑟瑟精品在线| 丁香九月婷婷综合| 丁香六月婷| 五月激情天| 激情色情五月天| 99热综合在线| 五月婷婷七月丁香| 69精品人人人人| 色久女| 狠狠va| 成人在线不卡| www色综合亚洲92| 99热超碰在线| 五月色影院| 五月天开心激情网色欲无码| 色播激情婷婷| 少妇高潮A片无套内谢麻豆传| 国产日韩欧美性爱| 丁香成人色情五月天| 久久这里只有精品07 | 成人视频在线免费播放|