欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

百度校招核心網(wǎng)絡(luò)研發(fā)筆試題解析:從TCP/IP到SDN

百度校招核心網(wǎng)絡(luò)研發(fā)筆試題解析:從TCP/IP到SDN 1. 核心網(wǎng)絡(luò)研發(fā)考什么先看懂這張卷子的出題邏輯拿到“百度2018校招核心網(wǎng)絡(luò)研發(fā)工程師筆試題第三批”這個標(biāo)題的時候我的第一反應(yīng)是這屆題目應(yīng)該挺硬核的。核心網(wǎng)絡(luò)研發(fā)工程師這個崗位在百度內(nèi)部對應(yīng)的大多是基礎(chǔ)設(shè)施部門——負(fù)責(zé)數(shù)據(jù)中心網(wǎng)絡(luò)、骨干網(wǎng)、流量調(diào)度、自研網(wǎng)絡(luò)設(shè)備或者高性能網(wǎng)關(guān)這一類方向。和普通后端研發(fā)不一樣這個崗位的筆試題不會讓你寫業(yè)務(wù)接口也不會讓你做用戶表設(shè)計它考的是你對網(wǎng)絡(luò)協(xié)議棧、數(shù)據(jù)轉(zhuǎn)發(fā)路徑、路由控制平面和系統(tǒng)底層能力的綜合理解。我認(rèn)識不少當(dāng)年一起投這個崗位的朋友大家的反饋出奇一致這批題的區(qū)分度很高。高在哪里高在它不考死記硬背的協(xié)議細(xì)節(jié)而是考你“在一個真實網(wǎng)絡(luò)場景里能不能用協(xié)議知識做出正確判斷”。所以如果你打算投遞類似的崗位第一件事不是埋頭背OSI七層模型而是先把這張卷子的出題邏輯摸清楚。從我了解到的信息和多方比對來看第三批筆試題大致覆蓋了四個核心模塊。第一個模塊是網(wǎng)絡(luò)基礎(chǔ)與協(xié)議棧主要考察TCP/IP、HTTP、DNS這些日常最常接觸但又最容易被忽視的細(xì)節(jié)。第二個模塊是路由與交換技術(shù)重點在路由協(xié)議、轉(zhuǎn)發(fā)原理和網(wǎng)絡(luò)設(shè)計。第三個模塊是系統(tǒng)與編程能力畢竟核心網(wǎng)絡(luò)研發(fā)不是純網(wǎng)絡(luò)工程你得會寫代碼得理解操作系統(tǒng)底層。第四個模塊是數(shù)據(jù)中心網(wǎng)絡(luò)與SDN/NFV相關(guān)的前沿技術(shù)百度在自研網(wǎng)絡(luò)設(shè)備、SDN控制器和流量調(diào)度系統(tǒng)上投入很大筆試必然會對這個方向有所傾斜。理解了這張卷子的整體結(jié)構(gòu)你再去看題就不會慌。它其實是在篩選兩類人一類是網(wǎng)絡(luò)底子扎實、遇到問題能追到報文級別的工程師另一類是系統(tǒng)能力強、能在高性能網(wǎng)絡(luò)場景里寫出可靠代碼的工程師。如果你兩項都占那這張卷子對你來說就是友好且能拉開差距的。2. TCP/IP協(xié)議棧高頻題細(xì)節(jié)決定你能不能進下一輪TCP/IP協(xié)議棧是核心網(wǎng)絡(luò)研發(fā)崗位的“吃飯本事”這部分題目的特點是看起來簡單一做就錯。我梳理了幾個在第三批題目里出現(xiàn)頻率較高的考點每一個都值得你重新過一遍。2.1 三次握手的邊界條件第三次ACK丟了會怎樣這幾乎是必考題但大多數(shù)人的答案最多得一半分。很多人只記得“客戶端進入ESTABLISHED服務(wù)端收不到ACK會重傳SYNACK”但真正值錢的細(xì)節(jié)在于如果客戶端在第三次握手ACK發(fā)出后立刻發(fā)送數(shù)據(jù)包服務(wù)端在SYN_RCVD狀態(tài)下收到這個數(shù)據(jù)包會怎么處理正確的鏈路是服務(wù)端在SYN_RCVD狀態(tài)收到客戶端的數(shù)據(jù)包時如果該數(shù)據(jù)包不帶ACK標(biāo)志那么根據(jù)RFC 793服務(wù)端會把這個數(shù)據(jù)包丟棄并重新發(fā)送SYNACK。但如果這個數(shù)據(jù)包攜帶了ACK標(biāo)志哪怕它不是純粹的ACK包服務(wù)端也會認(rèn)為握手已經(jīng)完成把狀態(tài)切換為ESTABLISHED同時處理數(shù)據(jù)。這個細(xì)節(jié)考的是你對TCP狀態(tài)機和報文交互的理解深度而不僅僅是背一個三次握手流程。還有一個變體如果客戶端的第三次ACK在網(wǎng)絡(luò)上延遲了很久才到達服務(wù)端在此期間已經(jīng)因為重傳超時關(guān)閉了連接那這個遲到的ACK到了之后服務(wù)端會回一個RST。這個RST會導(dǎo)致客戶端從ESTABLISHED狀態(tài)直接跳到CLOSED。這種場景在處理高并發(fā)短連接服務(wù)時非常常見尤其是客戶端連接池需要大量新建連接時。2.2 擁塞控制的演進別只停留在Reno和CUBIC2018年的校招題已經(jīng)明顯開始考察BBR了。百度這樣的體量帶寬利用率哪怕提升1%節(jié)省的成本都是天量級的所以擁塞控制算法是核心網(wǎng)絡(luò)團隊的重點研究方向。題目通常這樣出解釋Reno、CUBIC和BBR在擁塞窗口調(diào)整上的核心差異以及在什么網(wǎng)絡(luò)場景下BBR能比CUBIC獲得更好的吞吐。CUBIC是BDP探測型的它通過三次曲線來探測帶寬遇到丟包會乘性減窗。BBR換了一套思路它不再以丟包作為擁塞信號而是通過實時測量最小RTT和最大帶寬來建模網(wǎng)絡(luò)管道然后用pacing的方式讓發(fā)送速率貼合帶寬。這里有一個關(guān)鍵點值得展開BBR的ProbeRTT階段會周期性把擁塞窗口降到4個MSS目的是重新測量最小RTT。因為路徑上的排隊延遲會隨時間變化如果一直保持一個很大的發(fā)送速率RTT會虛高。這個“故意降速重新測量”的操作和傳統(tǒng)算法“發(fā)送速率越高越好”的直覺完全相反但恰恰是BBR能夠在高丟包鏈路上保持高吞吐的原因。答題時如果能把這個機制解釋清楚面試官對你的評價會直線上升。2.3 HTTP隊頭阻塞從HTTP/1.1到HTTP/2再到HTTP/3這批題里HTTP相關(guān)的題目卡了不少人原因在于它考的已經(jīng)超出了“GET和POST的區(qū)別”這個level而是直接問你HTTP/2解決了HTTP/1.1的隊頭阻塞為什么還會出現(xiàn)隊頭阻塞HTTP/1.1的隊頭阻塞發(fā)生在應(yīng)用層一個TCP連接上只能串行處理請求前面的響應(yīng)慢了后面的請求全部排隊。HTTP/2引入了多路復(fù)用通過stream在一條TCP連接上并發(fā)傳輸多個請求看起來解決了問題。但HTTP/2的底層仍然是TCPTCP保證有序傳輸?shù)臋C制導(dǎo)致如果某個stream的包丟了后續(xù)所有stream的包都不能被應(yīng)用層處理必須等待重傳。這就是TCP層的隊頭阻塞HTTP/2解決不了。真正的解法是HTTP/3它把傳輸層換成了QUIC基于UDP實現(xiàn)可靠傳輸每個stream獨立有序丟包只影響它自己所在的stream。這個問題在核心網(wǎng)絡(luò)研發(fā)面試?yán)飵缀跏潜貑柕囊驗樗疾斓牟皇悄阌眠^多少HTTP庫而是你對分層模型和傳輸機制之間交互關(guān)系的深入理解。3. 路由與轉(zhuǎn)發(fā)題從CIDR聚合到BGP路徑選擇的計算邏輯路由與轉(zhuǎn)發(fā)是核心網(wǎng)絡(luò)研發(fā)的“物理基礎(chǔ)”這部分題目通常不是簡單的概念問答而是需要實際計算的。第三批題目里計算題的占比不低而且計算量都不大但思路要清晰。3.1 路由聚合的邊界不是所有地址都能老老實實聚合有一道經(jīng)典題目是這樣的有四個網(wǎng)段192.168.1.0/24、192.168.2.0/24、192.168.3.0/24、192.168.4.0/24要求寫出能覆蓋前三個網(wǎng)段的最小聚合路由以及能覆蓋四個網(wǎng)段的最少路由條目數(shù)。前三個網(wǎng)段聚合很簡單192.168.1.0/24的二進制是11000000.10101000.00000001192.168.2.0/24是00000010192.168.3.0/24是00000011。前22位相同所以聚合結(jié)果是192.168.1.0/22。但加上192.168.4.0/24就麻煩了它是00000100和前面的公共前綴只有20位相同。如果你強行聚合四個網(wǎng)段得到的是192.168.0.0/20這個路由會覆蓋192.168.0.0到192.168.15.255多覆蓋了12個網(wǎng)段在實際網(wǎng)絡(luò)中可能造成路由黑洞或流量被錯誤轉(zhuǎn)發(fā)。所以正確答案是兩條路由192.168.0.0/22和192.168.4.0/24它們才能精確覆蓋四個網(wǎng)段。這個題目的價值不在于計算本身而在于考察你是否明白一個道理路由聚合必須“精確”寧可多一條路由也不能讓聚合后的路由覆蓋到不存在的網(wǎng)段。3.2 OSPF與BGP協(xié)作角色不同路徑選擇邏輯不同另一道常考計算題是路由優(yōu)先級和選路規(guī)則的混合場景。題目會給你一個網(wǎng)絡(luò)拓?fù)湟慌_路由器同時運行OSPF和BGPOSPF學(xué)習(xí)到一條到達目標(biāo)網(wǎng)段的路徑cost為110BGP學(xué)習(xí)到同一條路徑local_pref為200MED為50。問你最終優(yōu)選哪條路徑。在華為、思科設(shè)備上不同協(xié)議之間比較的是路由優(yōu)先級華為叫preference思科叫administrative distance。OSPF內(nèi)部路由的優(yōu)先級通常是10BGP是255思科eBGP是20iBGP是200。但很多時候題目會故意省略這些默認(rèn)值而是把比較邏輯放在同一個協(xié)議內(nèi)部。如果是BGP內(nèi)部比較local_pref優(yōu)先然后才是AS路徑長度、MED等。這里真正的考點是跨協(xié)議比的是優(yōu)先級同協(xié)議內(nèi)部才比選路屬性。很多考生把這兩個規(guī)則混在一起結(jié)果得出完全相反的答案。題目里還會附帶一個“為什么BGP要有這么多選路屬性”的加分題。這個問題的本質(zhì)是IGPOSPF、IS-IS在同一個AS內(nèi)部已經(jīng)能算出最短路徑了但AS之間的運營商有復(fù)雜的商業(yè)關(guān)系客戶、上游、對等需要一套可策略化控制的選路機制來體現(xiàn)這些商業(yè)決策。理解了這層邏輯你就懂了為什么BGP的選路規(guī)則不是單純的技術(shù)最優(yōu)而是商業(yè)策略驅(qū)動的。3.3 轉(zhuǎn)發(fā)面的最長前綴匹配硬件層面的核心邏輯路由與轉(zhuǎn)發(fā)的計算題有時候也會往硬件方向延伸比如問TCAM如何實現(xiàn)最長前綴匹配。TCAM三態(tài)內(nèi)容尋址存儲器的每個bit都有三個狀態(tài)0、1、X不關(guān)心所以它天然適合存儲路由前綴。要匹配時所有表項同時參與比較命中的條目里優(yōu)先級最高的就是最長匹配的那個。這里有一個補充考點因為TCAM貴且功耗高但路由表越來越大所以業(yè)界會有“把路由分級把常用前綴放到DRAM里用算法匹配不常用的才放TCAM”這類思路。這些內(nèi)容在筆試?yán)锟嫉蒙俚绻忝嬖嚂r能主動提出來會讓面試官覺得你有工程視野。4. 高性能網(wǎng)絡(luò)與系統(tǒng)底層DPDK、零拷貝和網(wǎng)卡多隊列的實戰(zhàn)理解核心網(wǎng)絡(luò)研發(fā)工程師的工作場景里有相當(dāng)一部分是高性能網(wǎng)絡(luò)轉(zhuǎn)發(fā)比如百度自研的四層負(fù)載均衡、流量網(wǎng)關(guān)、緩存加速代理等這些系統(tǒng)的核心就是處理海量并發(fā)報文。所以筆試?yán)锍霈F(xiàn)系統(tǒng)與性能類題目一點都不意外。4.1 內(nèi)核協(xié)議棧的瓶頸和DPDK為什么能繞過去題目常常這樣出一臺普通的x86服務(wù)器跑Linux內(nèi)核協(xié)議棧處理64字節(jié)小包轉(zhuǎn)發(fā)性能通常只能到幾十萬PPS想提升到千萬PPS甚至更高需要怎么做答案的核心就是“繞過內(nèi)核”或“優(yōu)化內(nèi)核收包路徑”。展開來說內(nèi)核協(xié)議棧的瓶頸有三個。第一系統(tǒng)調(diào)用開銷每個包都要經(jīng)過recvfrom/sendto或read/write用戶態(tài)和內(nèi)核態(tài)頻繁切換。第二數(shù)據(jù)拷貝包從網(wǎng)卡緩沖區(qū)拷貝到內(nèi)核內(nèi)存再從內(nèi)核內(nèi)存拷貝到應(yīng)用緩沖區(qū)多一次訪存開銷。第三內(nèi)核鎖競爭多核CPU同時處理網(wǎng)絡(luò)包時協(xié)議棧里的全局鎖和共享數(shù)據(jù)結(jié)構(gòu)會形成爭搶。DPDK的處理思路是通過UIOUserspace I/O把網(wǎng)卡設(shè)備映射到用戶態(tài)用輪詢模式PMD替代中斷通知應(yīng)用程序直接通過大頁內(nèi)存與網(wǎng)卡交換描述符繞過內(nèi)核協(xié)議棧。這個方案能把單核收包性能從幾十萬PPS提升到上百萬PPS級別在業(yè)界已經(jīng)是非常成熟的實踐。答題時如果能提到“大頁內(nèi)存減少TLB miss”這一層說明你真的看過代碼而不是只背了概念。4.2 零拷貝的幾種實現(xiàn)mmap、sendfile和網(wǎng)卡分片零拷貝是高性能網(wǎng)絡(luò)服務(wù)里繞不開的話題。題目通常給你一個文件下載服務(wù)的場景問你如何減少數(shù)據(jù)在用戶態(tài)和內(nèi)核態(tài)之間的拷貝次數(shù)。傳統(tǒng)方式要經(jīng)歷磁盤到內(nèi)核緩沖區(qū)內(nèi)核到用戶緩沖區(qū)用戶到socket緩沖區(qū)socket緩沖區(qū)到網(wǎng)卡一共四次拷貝四次上下文切換。用sendfile可以達到兩次拷貝用DMA直接內(nèi)存訪問配合網(wǎng)卡Scatter-Gather功能可以做到真正意義上的“零拷貝”——數(shù)據(jù)從磁盤到頁緩存后通過DMA引擎直接描述符指向頁緩存中的數(shù)據(jù)不經(jīng)過CPU拷貝直接發(fā)送到網(wǎng)卡。這里有個細(xì)節(jié)很多人會忽略零拷貝的瓶頸不再在CPU拷貝上而是轉(zhuǎn)移到了頁緩存和socket緩沖區(qū)之間的一致性維護上如果頻繁讀寫可能觸發(fā)page fault反而性能下降。實測下來對小文件高并發(fā)的場景用sendfile不一定比精心調(diào)優(yōu)的傳統(tǒng)readwrite快因為DMA描述符的建立和拆除也有開銷。這個反直覺的結(jié)論如果在筆試的論述題里寫出來會很加分。4.3 網(wǎng)卡多隊列與RSS讓每個CPU核心都有活干另一個常見考點是網(wǎng)卡多隊列和Receive Side ScalingRSS。單隊列網(wǎng)卡在接收報文時需要靠一個中斷來處理所有包多核CPU無法分?jǐn)偸瞻鼔毫Α⒂枚嚓犃泻缶W(wǎng)卡可以根據(jù)四元組或五元組哈希把不同的流分散到不同的RX隊列每個隊列由獨立的CPU核心處理這樣就能并行收包。題目會問RSS的哈希因子有哪些如果哈希因子包含源IP和目的IP來自同一個IP的不同端口連接會被分到多個隊列嗎答案是如果哈希計算包含端口那會分散到不同隊列但如果只基于IP那同一對IP的流會固定在同一個隊列可能在某些負(fù)載均衡場景下造成隊頭熱點。這個問題的價值在于它讓你意識到看似“自動分散”的網(wǎng)卡哈希如果不和實際業(yè)務(wù)流特征匹配反而會成為性能瓶頸。5. 數(shù)據(jù)中心網(wǎng)絡(luò)與SDN/NFV從VXLAN到控制器設(shè)計的必考題百度在數(shù)據(jù)中心網(wǎng)絡(luò)方向的布局很早從自研交換機、SDN控制器到流量調(diào)度系統(tǒng)都有成熟的落地。這批筆試題里出現(xiàn)數(shù)據(jù)中心相關(guān)題目非常合理也代表著國內(nèi)頭部互聯(lián)網(wǎng)公司對這個方向的重視程度。5.1 VXLAN封裝細(xì)節(jié)外層UDP的源端口到底怎么選VXLAN幾乎是數(shù)據(jù)中心網(wǎng)絡(luò)必考項。題目通常會給你一個虛擬機遷移的場景虛擬機從物理機A遷移到物理機B但IP地址保持不變對端如何通過VXLAN隧道繼續(xù)訪問它VXLAN把二層幀封裝在UDP報文里VTEPVXLAN Tunnel Endpoint負(fù)責(zé)封裝和解封裝。關(guān)鍵點在于外層UDP的源端口它是根據(jù)內(nèi)層MAC、IP、端口等信息哈希計算出來的目的端口固定是4789IANA分配的端口。源端口設(shè)計成哈希值的目的是為了在底層網(wǎng)絡(luò)上實現(xiàn)負(fù)載均衡——ECMP等價多路徑協(xié)議可以根據(jù)外層五元組把流量打散到不同的物理鏈路上。如果不做這個哈希所有VXLAN流量在底層看來都走同一個五元組ECMP會把所有流量都壓到一條鏈路上這就是經(jīng)典的“Hash極化”問題。答題時如果能把這個設(shè)計意圖講清楚就不僅僅是答了一道題而是在展示你理解了VXLAN“為什么這么設(shè)計”的工程智慧。5.2 SDN控制器集中式優(yōu)于分布式但沒有全局看到底行不行SDN相關(guān)題目在第三批里也有一席之地。常見問法是SDN控制器的核心職責(zé)是什么為什么數(shù)據(jù)中心網(wǎng)絡(luò)要用SDN做流量調(diào)度而不是傳統(tǒng)的分布式路由協(xié)議SDN把網(wǎng)絡(luò)控制平面和數(shù)據(jù)轉(zhuǎn)發(fā)平面分離控制器掌握全局拓?fù)淇梢杂萌忠暯怯嬎阕顑?yōu)路徑下發(fā)流表到交換機。相比之下傳統(tǒng)路由協(xié)議是分而治之的每臺設(shè)備只知道自己的鄰居關(guān)系無法感知全局擁塞情況。數(shù)據(jù)中心網(wǎng)絡(luò)流量模型極其復(fù)雜流量矩陣動態(tài)變化集中式控制器可以根據(jù)實時負(fù)載做全局優(yōu)化。但集中式控制器也帶來可靠性問題——控制器掛了整個網(wǎng)絡(luò)的路徑計算就癱瘓了所以實際工程中控制器通常以集群方式部署用分布式數(shù)據(jù)庫同步網(wǎng)絡(luò)狀態(tài)。這里有一個容易踩坑的認(rèn)知很多人以為SDN就是OpenFlow的代名詞但實際工程中OpenFlow只是SDN南向接口的一種實現(xiàn)方式。百度早期的SDN方案里也大量使用了自研的南向協(xié)議或者通過BGP、NETCONF等“傳統(tǒng)”協(xié)議實現(xiàn)控制器的集中控制。SDN的本質(zhì)是“控制與轉(zhuǎn)發(fā)分離”這個思想而不是某一種具體協(xié)議?;卮饡r點出這層才能體現(xiàn)出工程視野。5.3 CLOS架構(gòu)與ECMP現(xiàn)代數(shù)據(jù)中心網(wǎng)絡(luò)的骨架數(shù)據(jù)中心網(wǎng)絡(luò)設(shè)計題通常圍繞CLOS架構(gòu)展開。CLOS解決的是“大二層網(wǎng)絡(luò)如何擴展”的問題核心層Spine和接入層Leaf之間通過ECMP形成等價多路徑所有Leaf都能通過多條路徑到達任何其他Leaf帶寬可水平擴展。題目會問為什么CLOS架構(gòu)比傳統(tǒng)三層樹形架構(gòu)更適合數(shù)據(jù)中心核心原因有兩個。第一樹形架構(gòu)的匯聚層是瓶頸流量越高匯聚層設(shè)備壓力越大而且難以水平擴展。第二CLOS架構(gòu)下所有路徑都是等價的通過ECMP實現(xiàn)負(fù)載均衡鏈路利用率高故障轉(zhuǎn)移也快——一條鏈路斷了流量立刻均勻分?jǐn)偟狡渌葍r路徑上。這個題目還有一個衍生問法ECMP的哈希因子和前面VXLAN的哈希源端口設(shè)計有什么關(guān)聯(lián)對的VXLAN外層UDP源端口哈希就是為了解決ECMP哈希極化問題兩道題是一套組合拳。你如果能把它們串起來回答面試官會知道你是真的理解而不是背概念。6. 編程與系統(tǒng)實現(xiàn)題網(wǎng)絡(luò)工程師的代碼功底不能拉胯核心網(wǎng)絡(luò)研發(fā)工程師的日常不是天天調(diào)路由器而是寫代碼——寫網(wǎng)關(guān)、寫轉(zhuǎn)發(fā)面、寫控制面組件、寫網(wǎng)絡(luò)監(jiān)控系統(tǒng)。所以卷子里一定有代碼題和系統(tǒng)設(shè)計題這些題目的水平和難度和純后端崗位的題風(fēng)格截然不同。6.1 C語言的字節(jié)序與內(nèi)存對齊最容易栽跟頭的地方第一類高頻題是C語言和操作系統(tǒng)底層細(xì)節(jié)。字節(jié)序問題是網(wǎng)絡(luò)編程的經(jīng)典陷阱x86機器是小端序網(wǎng)絡(luò)字節(jié)序是大端序用htonl/ntohl轉(zhuǎn)換。但如果處理的是一個結(jié)構(gòu)體——比如一個自定義報頭里面有uint8_t、uint16_t、uint32_t混合字段直接強制類型轉(zhuǎn)換再發(fā)送就會因為內(nèi)存對齊產(chǎn)生填充字節(jié)導(dǎo)致接收端解析出錯。正確的做法是用packed結(jié)構(gòu)體__attribute__((packed))或者每個字段單獨序列化。筆試?yán)锟赡軙o你一段代碼問你這個結(jié)構(gòu)體在64位系統(tǒng)上會占用多少字節(jié)如果加了packed又是多少字節(jié)。這種題考察的是你寫網(wǎng)絡(luò)協(xié)議代碼時能否處理字節(jié)序和內(nèi)存布局問題這在高性能網(wǎng)絡(luò)開發(fā)里非常常見坑很深。6.2 生產(chǎn)者消費者模型從互斥鎖到無鎖隊列的設(shè)計取舍題目會給你一個場景多個生產(chǎn)者線程把網(wǎng)絡(luò)數(shù)據(jù)包寫入隊列多個消費者線程從隊列中取包處理如何設(shè)計這個隊列第一層答案是互斥鎖加條件變量這是教科書方案。第二層答案是讀寫鎖、自旋鎖的取舍在臨界區(qū)極小的情況下自旋鎖比互斥鎖更合適因為它避免陷入內(nèi)核態(tài)。第三層答案才是面試官真正想聽的無鎖隊列。用CASCompare-And-Swap實現(xiàn)lock-free的MPMC隊列或者更務(wù)實的SPSC隊列——單生產(chǎn)者單消費者隊列通過ring buffer就能實現(xiàn)無鎖這在DPDK的rte_ring里就是經(jīng)典實現(xiàn)。這里有一個關(guān)鍵取舍無鎖隊列在讀多寫少、臨界區(qū)極短的高并發(fā)場景下性能優(yōu)勢巨大但無鎖不等于無坑ABA問題、內(nèi)存序問題memory ordering都可能導(dǎo)致詭異bug。所以筆試答題時最好能說明白什么場景選什么隊列以及為什么而不是一味追求花哨的無鎖實現(xiàn)。6.3 多線程并發(fā)中的原子操作與內(nèi)存屏障再往后有一類題圍繞多線程同步的正確性展開兩個線程一個寫一個讀都操作同一個變量如何保證讀到的一定是最新值答案是volatile?錯。在C/C里volatile只能告訴編譯器不要優(yōu)化不能保證多核間的可見性也不提供原子性。正確做法是用C11的atomic、std::mutex或者提供內(nèi)存屏障的原子操作。進一步會問為什么CPU會亂序執(zhí)行為什么需要內(nèi)存屏障現(xiàn)代CPU為了性能會進行指令重排多核之間還有緩存一致性協(xié)議比如MESI帶來的偽共享問題。cache line是64字節(jié)如果兩個線程頻繁修改同一cache line上不同變量會因為偽共享導(dǎo)致性能雪崩。用__attribute__((aligned(64)))把變量對齊到cache line邊界可以規(guī)避這個問題。這類題考的是你對系統(tǒng)底層的理解一個合格的核心網(wǎng)絡(luò)研發(fā)工程師必須能寫出“確定性強”的高并發(fā)代碼。7. 綜合設(shè)計題實戰(zhàn)模擬從零設(shè)計一個高可用四層接入網(wǎng)關(guān)網(wǎng)絡(luò)方向的綜合設(shè)計題通常是卷子的壓軸大題分值高、難度大。它往往不以“寫代碼”的形式出現(xiàn)而是要求你畫架構(gòu)圖、說清楚關(guān)鍵模塊和容災(zāi)方案。這里我結(jié)合網(wǎng)絡(luò)上找到的類似題型和崗位要求還原了一道比較有代表性的設(shè)計題并附上完整的解題思路筆試面試都能用得上。題目大意公司需要設(shè)計一個高可用的四層接入網(wǎng)關(guān)承接所有外部流量并轉(zhuǎn)發(fā)到后端服務(wù)集群要求支撐10萬QPS、可用性99.99%請設(shè)計整體架構(gòu)并說明關(guān)鍵設(shè)計點。這道題想拿高分需要從四個層面去回答。第一層是整體架構(gòu)接入網(wǎng)關(guān)采用集群部署多臺機器通過ECMP等價路由對外提供服務(wù)使用BGP與上層交換機互通任何一臺機器故障流量自動被ECMP重新哈希到其他機器。在網(wǎng)關(guān)機器內(nèi)部使用DPDK接管網(wǎng)卡業(yè)務(wù)邏輯全部在用戶態(tài)實現(xiàn)。四層轉(zhuǎn)發(fā)不做太多復(fù)雜邏輯只做DNAT和SNAT所以可以做到很高吞吐。第二層是會話一致性四層網(wǎng)關(guān)必須保證同一個客戶端的連接五元組始終落在同一臺后端機器上否則TCP連接會斷開。用一致性哈希表保存會話狀態(tài)會話表需要定期同步或者將狀態(tài)存到分布式KV里保證故障切換時會話不丟。但分布式KV帶來的延遲在數(shù)據(jù)路徑上不可接受所以實踐中會在每臺機器本地保存會話表配合主備同步極少數(shù)情況下故障會導(dǎo)致連接重建這是99.99%可用性可以容忍的。第三層是健康檢查與故障剔除網(wǎng)關(guān)需要定期探測后端服務(wù)的健康狀態(tài)探測失敗要自動摘除該后端并重新建立會話同時不能影響現(xiàn)有連接。這里要考慮“探活頻率”和“誤判”之間的權(quán)衡探得太頻繁會對后端產(chǎn)生額外壓力探得太慢故障轉(zhuǎn)移時間過長。一般會設(shè)計成TCP連接探測和HTTP探測的雙層機制。第四層是安全與防洪作為公網(wǎng)入口網(wǎng)關(guān)必須能抵抗SYN Flood。解法是開啟SYN Cookie或者用硬件卸載卡做DDoS清洗只有通過驗證的流量才進入內(nèi)核態(tài)處理。這個問題在百度真實場景里是繞不開的所以出現(xiàn)在筆試?yán)锓浅:侠?。這道題的完整回答至少要涵蓋ECMP接入、DPDK轉(zhuǎn)發(fā)、會話一致性、健康檢查、故障轉(zhuǎn)移、DDoS防護、安全隔離、監(jiān)控和日志統(tǒng)計這幾個模塊答得越全越接近核心網(wǎng)絡(luò)研發(fā)工程師的真實工作畫像。8. 備考與答題策略筆試?yán)锏臅r間管理同樣決定成敗最后聊點實際的這部分是我和幾個參加過百度校招的朋友交流后總結(jié)出的經(jīng)驗不一定寫在任何帖子里的但非常關(guān)鍵。8.1 時間分配和答題順序這套筆試題給人的體感是“時間不夠”。我有朋友當(dāng)年在這套題上有些題目只能留空白原因不是不會做而是前面在二叉樹、哈希表這類基本功題目上花了太久后面的大題反而沒時間展開。我個人的建議是先做綜合設(shè)計題和論述題再做計算題最后做選擇題和填空題。為什么綜合設(shè)計題是開放性的只要你框架清晰、要點齊全即使細(xì)節(jié)不夠完美也能拿到大部分分?jǐn)?shù)。計算題如果思路錯了可能什么都得不到但如果是列了步驟但算錯結(jié)果通常還能拿到過程分。選擇填空是純客觀題一題就一兩分占比不大放在最后反而不會心慌。8.2 答題時的表述技巧請用“工程師的語言”而非“課本的術(shù)語”筆試答題尤其是簡答和設(shè)計題極其看表述方式。舉個例子同樣的意思“TCP的擁塞窗口會減小”和“窗口大小根據(jù)當(dāng)前鏈路的RTT和丟包率動態(tài)調(diào)整丟包時進入擁塞避免階段通過乘性減窗降低發(fā)送速率以緩解鏈路擁塞”給閱卷人的專業(yè)程度印象完全不同。再一個細(xì)節(jié)設(shè)計題里圖要畫關(guān)鍵模塊的名稱要寫清楚接口要標(biāo)注箭頭方向不要只寫一堆文字。閱卷人和面試官都偏好“能一眼看到架構(gòu)全貌”的答案。畫圖不需要多精美但核心鏈路和容災(zāi)鏈路必須用不同顏色或線型區(qū)分開。8.3 結(jié)合個人經(jīng)驗談?wù)勥@套題的復(fù)習(xí)方向如果你正打算投遞核心網(wǎng)絡(luò)研發(fā)崗我建議你按照“基礎(chǔ)協(xié)議棧-路由交換-高性能轉(zhuǎn)發(fā)-數(shù)據(jù)中心網(wǎng)絡(luò)-SDN/NVF-系統(tǒng)編程”的順序系統(tǒng)復(fù)習(xí)。但要注意不要停留在背概念每學(xué)一個協(xié)議問自己三個問題——它解決什么問題、它的報文格式里每個字段為什么存在、它在真實網(wǎng)絡(luò)里有哪些常見的坑。把這三個問題想清楚無論是筆試還是面試你都能對答如流。我當(dāng)年復(fù)習(xí)TCP時用一個笨方法用Wireshark抓自己機器上瀏覽網(wǎng)頁的包跟著TCP流看三次握手、窗口變化、重傳超時再對照RFC看報文頭。這個過程看起來慢但對建立“報文級直覺”特別有效。筆試?yán)镉行╊}是“紙上談兵”考不出來的但你如果見過真實的報文交互一眼就能看穿考點在哪里。9. 寫在最后幾個容易被忽略但考試高頻的“邊角料”這些內(nèi)容我在前面沒有具體展開但它們出現(xiàn)的概率極高而且一旦考到如果沒看過就是完全空白所以我單獨拉出來講一下。9.1 DNS解析細(xì)節(jié)遞歸、迭代與緩存TTL的坑DNS相關(guān)題目在網(wǎng)絡(luò)崗筆試?yán)锖苌偃毕?。常見問法是用戶在瀏覽器輸入一個域名完整解析過程是怎樣的這里要答清遞歸查詢和迭代查詢的區(qū)別、本地hosts文件、系統(tǒng)resolver、客戶端本地DNS緩存、運營商LocalDNS、根服務(wù)器、頂級域服務(wù)器、權(quán)威服務(wù)器以及每個環(huán)節(jié)的緩存TTL機制。有意思的考點是TTL過短會導(dǎo)致DNS查詢爆量TTL過長會導(dǎo)致域名切IP后客戶端不生效。2018年前后正是各家互聯(lián)網(wǎng)大廠開始大規(guī)模使用HTTPDNS的年代原理就是繞過運營商LocalDNS避免被劫持和調(diào)度不精準(zhǔn)所以題目也有概率延展到HTTPDNS的優(yōu)缺點——相比傳統(tǒng)DNSHTTPDNS是應(yīng)用層通過HTTP接口直接拿到IP列表避免中間環(huán)節(jié)的污染和緩存問題但需要客戶端SDK配合。這題考的是你對“域名解析鏈路”的完整理解。9.2 BGP路由振蕩正則表達式和route-map實際怎么用BGP的題目有時候會出一些實操向的給出幾條BGP路由填寫正則表達式匹配特定前綴或者設(shè)計route-map完成基于AS路徑的選路控制。這類題要求你真用過BGP知道AS_PATH里各種字符的含義。正則表達式里有一個坑^192_和_192_的區(qū)別。前者匹配的是以192開頭的AS路徑后者匹配路徑中包含192的任意位置。如果只是求包含某個AS號的所有路由用后者如果限定起源AS用前者。這種題目答案很明確但很多沒實操經(jīng)驗的人會混淆。我建議備考時在模擬器里建一個BGP環(huán)境手動配幾條route-map把正則表達式和過濾邏輯親手跑幾遍記憶會牢固很多。9.3 網(wǎng)絡(luò)質(zhì)量觀測RTT、抖動、丟包率到可用性的推導(dǎo)關(guān)系最后一類容易被忽略的題目是網(wǎng)絡(luò)質(zhì)量觀測類。它會給你一組數(shù)據(jù)某條鏈路的RTT是20ms抖動5ms丟包率0.1%問這條鏈路的可用性是多少這里“可用性”的定義不是簡單的1減去丟包率而是要看業(yè)務(wù)模型。比如嚴(yán)格依賴TCP傳輸?shù)臉I(yè)務(wù)0.1%的丟包率會導(dǎo)致大量TCP重傳和擁塞窗口退化實際吞吐可能下降超過5%可用性遠(yuǎn)低于99.9%。這個問題的深層考點是網(wǎng)絡(luò)質(zhì)量指標(biāo)不能只看單個值需要結(jié)合協(xié)議行為和應(yīng)用場景做聯(lián)合分析。核心網(wǎng)絡(luò)研發(fā)工程師在真實工作中就是干這個的——接報警、看指標(biāo)、定位鏈路瓶頸、優(yōu)化轉(zhuǎn)發(fā)路徑每一步都需要這套分析能力。我把這些“邊角料”單獨拎出來是因為它們在我的經(jīng)驗里恰恰是拉開分差的地方?;A(chǔ)題大家都會協(xié)議細(xì)節(jié)背一背也能過關(guān)但能把DNS解析、BGP實操、鏈路質(zhì)量分析這些細(xì)碎知識融會貫通的人才是真正適合核心網(wǎng)絡(luò)研發(fā)崗位的人。這套筆試的第三批題目本質(zhì)上就是在篩選這批人。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
韩国中文字幕91| 尔尔AV一区| 狠狠色婷婷777| 久久九网| 射久久丁香五月| 天天操天天曰天天射| 久久婷婷综合国产| 91大屁股| 色色色综合网| 9999热在线观看| 九九视频在线观看| 欧美日韩成人在线网站| 婷婷五月深深爱| 五月丁香六月婷婷啪啪| 日B日潘金莲BB| 丁香五月欧美午夜视频| 秋霞成人毛片一级A片| 亚洲精品成人| 伊人婷婷五月天| 亚洲va日| 91偷拍视频| 99久视频| 日本激情91| www.99热国产| 国产超碰在线| 色婷婷免费观看| 狠狠爱综合| 色偷偷色婷婷| www,天天干| 99久久成人| 丁香婷婷色九月| 色婷婷久久| 免费不卡狠操美女视频网| 激情丁香社区| 久99热| 任我干视频在线观看| 五月丁香综合啪啪| 日韩无码专区| 國語久久婷| 天天干夜夜b| 4399欧美另类视频| www.9797国产| 婷婷五月天丁香久久| 激情九月婷婷| 91九色视频| 五月婷婷六月丁香在线视频| 五月婷婷综合潮喷| 丁香五月婷婷激情蜜桃| 色色色色热| 久色国产| 亚洲色综合性| 开心深爱激情网| 伍月婷婷免费视频| 欧美日韩大黄| 婷婷成人综合免费视频| 丁香六月色香蕉视频| 欧美色色色色色色| 亚洲啪啪视频| 夜夜骑夜夜撸| 亚洲超碰在线| 爱99干99| 97成人超碰免| 丁香五月六月综合激情| 婷婷九月色| 婷婷视频网| 六月丁香综合| 91色逼| 色婷婷偷拍| 免费看欧美成人A片无码| 久久97| 五月色婷婷影院| 噜噜色婷婷| 亚洲色婷婷五月| 插插五月天| 国产av基地| 五月天久久激情| 婷婷五月天丁香久久| 久月久在线视频| 激情综合视频| 婷婷爱爱蜜臀天天操| 久久狠婷婷| 青草青草久9视频在线视频| 婷婷中文字幕在线| 在线观看五月婷婷网| 欧美狠狠草| 九九这里只有精品在线视频| 成年人99热| 五月丁香六月情亚洲| 色播播五月天| 综合色色五月| 久久婷婷网站| 久久久久久丁香五月| 五月婷婷之美女图片| 日日夜夜婷婷| 五月婷婷片| 这里只有精品视频| 国产69久久久欧美黑人A片| 蜜桃五月天| 五月天婷婷色播综合在线| 美女婷婷激情亚洲| 五月丁香综合啪啪| 99精吕视频在线观看了| 99久视频| 激情色情五月天| 涩五月婷婷| 五月综合婷婷开心网| 秋霞簧片| 日本久久精品| 色欧美一级| 婷婷五月丁香色播| 婷婷激情区| 五月在线| 牛色色碰| 在线,国产,色,热视频| 欧洲综合色| 五月丁香综合网| 九九在线视频| 9l视频自拍九色9l视频自拍九色9l社区 | 99久久五月婷婷| 精品五月天| 婷婷中文字幕网站| 五月丁香五月丁香| 激情另类综合| 1024亚洲| 欧美猛片| av在线资源| 亚洲狠狠终合停停终合| 99视频精品视频| 日本天天操| 婷色五月| 色综久久AV| 色色无码| 91久久精品无码一区二区三区| 综合大香蕉| 天天摸人人摸| 人五月天婷婷喷水| 五月丁婷婷| 99日在线视频| 日本久久视频| 亚洲成人无码网站| 婷婷五月色影视先锋| 夜夜夜叫天天天做| 99亚州综合精品成人网| 日本婷婷色| www.激情五月天。com| 丁香婷婷成人网| 国产乱妇无乱码大黄AA片| 婷婷午夜综合| 狠狠狠狠狠狠色| 美女被操一区二区| 婷婷五月婷| 另类天堂| 五月天色五月天| 激情亚洲网| 五月狠狠| 99热在线精品播放| 久久新地址| 色婷婷综合影院| 啪啪色激情五月天| 四色五月婷婷| 色婷婷超碰| 日日噜狠狠色综合久| 日韩av手机在线观看| 99视频地址| 青草五月天| 在线你懂的亚洲欧| 激情欧美五月丁香| 99热欧| www久| 深情六月婷婷综合久久| 中文成人在线| 99热这里有精力| 国产伦亲子伦亲子视频观看| 99日韩网站| 日韩成人中文| 天天草天天爽| 五月天婷婷一起草| 国产婷婷婷| 99热九九在线| 五月婷婷深深爱| 91精品久久久久、久五月天| 一区二区成人电影| 免费看欧美成人A片无码| 五月 丁香 欧美| 五月天色色无码| 另类综合国产| 97碰人人操| 婷婷色五月开心五月| 色综合中文色综合网| 99在线免费视频| 中文字幕黄色片| 日本欧美成人片AAAA| 三区激情四射av| 黑人巨粗进入警花疼哭A片| 激情五月综亚网| 国产精产国品一二三在观看| 丁香五月天婷婷激情| 精品99在线看| 操人妻AV| 99热播放| 色噜噜在线| 日韩成人综合| 五月丁香激情综合| 久久思思99| 成人网页在线观看| 综合网色| 五月综合色| 淫荡家庭AV| 综合色色网| 亚洲色激婷| 日本人妻伦在线中文字幕| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 色综合色综合婷婷热| 婷婷亚洲综合| 婷婷丁香激情五月天色色| 蜜臀综合久草| 99热碰碰热| 9er热在线精品视频| 疯狂做受XXXX高潮A片动画| 人妻操操色| 精品操逼一区二区| 婷婷五月天色播| 五月婷免费视频久久久| 婷婷五月a| 色99热| 色婷婷狠狠| 欧美大片免费播放器| 激情综合另类| 激情综合五| 色五月网址| 色色色色色色综合| www..999热久| 99色免费观看全部| 91九色丨国产丨爆乳| 色五月婷婷亚洲| 天天插夜夜爽| 99re热在线视频| 久久伊人五月天| 亚洲激情综合免费| 婷婷 久综合| 久久综合66| 超碰日日操| 久久五月天激情婷婷| 9 7总站超级碰免费视频| 综合婷婷五月天| 久久九九视频网站| 亚洲午夜一区二区| 2018夜夜草| 六月色播| 亚洲第一第二网站| 六月丁香深深爱| 婷婷五月天久久综合88| 丁香五月综合狠狠| 超碰人人色| 嫩草乱码一区三区四区| 五月亭亭六月激情| 久久久婷婷婷| 玖玖婷婷精品| 大香久久综合网| 日狠狠| 丁香婷婷视频| 欧美性爱5月天天天看| 综合久久综合久久| www.com.色色| 抽插特写| 激情小说色五月| 99色天堂| 五月丁香六月激情综合| 9久热在线视频精品| 校花娇喘呻吟校长陈若雪视频| 噜噜狠狠色综合久| 婷婷亚洲欧美丁香五月| 噜噜噜色噜噜| 婷婷丁香久久五月综合| 操操操www.com| 超碰93在线观看| 天天日色情| 丁香成人五月天| 丁香五月区| 桔色成人在线| 色99欧洲色19| 另类图片婷婷五月天| 这里只有精品在线视频精品| 欧美99热| 日韩综合久久| 香蕉久久六月| 97色97干| 久综合| 丁香五月熟女| 99在线免费视频播放| 免费看欧美成人A片无码| 色综合婷婷| 婷婷丁香五月综合| 91ncm视频| 久久人妻人人| 丁香五月成人| 五月婷婷我| 亚洲九九在线| 99热中文字幕久久| 天天草比天天爽| 婷婷五月图片小说网| 米奇影视资源婷婷狠狠色激情欧美五月丁香| 五月丁香六月在线欧美| 99热这里都是精品| 高清无码网址| 亚洲AV影片在线观看| 婷婷五月综合激情| 日本久久久97| 日日噜噜久久婷婷五月天| 久久久久久久久18久久| 色五月中文字幕| 91色碰| 停停六月 综合| 狠狠色婷婷色| 日本啪啪网| 超碰在线免费9| 亚洲一区国产传媒| 人妻AV在线| 91色久| 亚洲色啪| 夜夜做天天爽| 综合色五月| 五月开心色| 无人精品在线视频| 超碰人人干| 婷婷五月丁香综合| BBWCUCKOLD精品熟妇| 一本色道久久88综合日韩精品| 国产肥白大熟妇BBBB视频| 中国女人内射6XXXXX| 日韩AV免费看| 中文在线成人| 久久婷婷激情五月天一区二区| 婷婷亚洲激情在线观看视频| 日本欧美国产| 久久久ww| A片试看120分钟做受视频红杏| 中国女人做爰A片| 亚洲中文字幕在线电影| 日本三级中国三级99人妇网站| 久久曰曰| 五月天婷a在线| 亚洲99一级无嗎特制在线| 99视频在线啪| 婷婷四月 成人 狠狠干| 噜噜噜噜噜色| 色色日本| 欧美婷婷色五月网| 五月丁香大香蕉| 久久五月网| 色婷婷五月天天天干天天操天天爽 | 丁香婷婷天堂| 99热国内精品| 99热精品9| 激情五月激情综合网| 婷婷综合网| 开心色色五月天综合| 日本三级毛片| 四虎婷婷五月天| 日日夜夜狠狠操| 欧美日韩成人在线| 激情五月天.色网| 中美日韩成人在线| 一级操逼内射在线视频| 久久这里有精品| 97人人操人人插| 婷婷四色五月| 婷婷婷婷色| 亚洲激情五月| 97热久久五月婷婷| 五月丁香欧美综合免费视频| 五月天色社区| 人人插9| 亚洲激情免费久久| 午夜激情婷婷| 丁香五月婷婷在线视频| 婷婷色网| 人妻AV在线观看| 婷婷播播五月天| 午夜成人AV在线| 久久五月天激情| 五月丁香自拍| 色婷五月天激情| 婷婷久久大香蕉| 超级碰碰碰91| 色色哒五月婷婷六月丁香| 色婷婷亚洲精品天天综| 99视频在线观看网址| 色欲香综合网| www久| 超碰色天堂| 婷婷五月天日日日干干干| 婷婷九月综合| 无码九九九九| cc精品国产性传播| 男女啪啪视频久 9| www.色婷婷。com| 大香蕉啪啪| 婷婷五月天涩涩| 色婷婷丁香五月天在线视频| 日韩AV大全| 26uuu偷拍亚洲欧洲综合| 色色色色色色色色色999| 狠狠干狠狠色| 91热在线| 色五月婷婷综合| 五月婷综合激情| 激情亚洲色图片丁香综合| 欧美25p| 91视频五月丁香| 青青草激情网| 91精品国产综合久久蜜芽解析速度| 久久成人综合五月天| 91九色在线| 激情另类综合| 91精品久久久久久77777| 久久99看免费| 日本婷婷五月天| 成人免费超碰| 久久久精品色色色| 中文字幕av网站| 五月婷婷狠狠干| 精品亚洲国产成AV人片传媒| 激情图片婷婷| 97碰碰久久| 日撸夜撸日操| 久久婷婷桃花五月天| 色五月成人在线| av高清无码| 久久香蕉婷婷五月天| 91丨九色丨大屁股| 五月婷婷久久爱| 噼里啪啦完整版中文在线观看| 色婷婷五月天亚洲| 色婷婷五月天| 国产片色| www亚洲无码| AV性爱网| 激情AV| 亚洲综合激情五月久久| 精品久久人妻热| 丁香六月婷婷综合| 激情九九这里只有精品| 色八戒操婷婷| 另类小说五月天| 五月婷婷色播| 五月丁香综合啪啪| 开心激情久久久久久久| 久久全色| 91一起操| 五月丁香狠狠爱婷婷综合| 国产毛片精品一区二区色欲黄A片| peg 2区三区四区的| 婷婷99狠狠| 色七色九九| 婷婷综合性爱网| 婷婷五月图片小说视频| 日本久久人| 大香蕉av在线| 另类激情五月| 久久思思99| 国产 亚洲 在线| 婷婷激情五月天网站| 色婷婷狠狠| 五月婷AV| 99热日韩| 国产在线网| 亚洲成人在线五月天| 久久久27操| 婷婷色五月天在线观看| 五月婷婷干| 亚洲成片在线观看| 九九碰九九爱97| 精品久久久久久久人妻| 4399亚洲视频| 操逼五月婷婷| 久久婷婷色| 狠狠干在线视频| 亚洲人妻电影| 久久AAAA片一区二区| 日日爱激情| 日韩成人无码人妻| 婷婷六月香| 激情婷婷色色| 激情综合色播| 婷婷丁香五月视频| 亚洲色激情| 久草五月| 婷婷五点亚洲| 日韩欧洲亚洲| 色偷偷人人| 人妻久久久久久| 国产玖玖资源| 色婷丁香五月| 五月丁香好婷婷A片网| 99热国品| 婷婷色五月天在线观看| 色欲色香伊人| 色五月丁香一区在线| 激情五月婷黄版| 国产成人精品一区二三区熟女在线 | 五月天无码| 免费日本aⅴ中文字幕| 九九色热| WWW.99视频| 五月丁香天堂网婷婷| 色婷六月| 中文超碰视在线| 五月色丁香| 夜夜干天天操| 96五月丁香熟女| 久鲁鲁色网| 噜噜操操| 久久精品日| 777精品久无码人妻蜜桃| 亚洲精品色| 人人射av| 丁香六月激| www久久久久久| 国产精品人成A片一区二区| 秋霞AV淫| 色日本五月天| 丁香美女主播视频在线观看| 色欲香综合网| 欧美成人无码一区二区三区| 天天射美女| 中文字幕成| 国产高潮白浆一区二区| 91免费啪视频| 曰韩五月丁香色婷婷无码| 久久婷五月| 五月丁香狠狠爱| www..999热久| 97碰碰在线看视频免费| 亚卅毛片| www.婷婷,com| 七七色色综合| 99色精品| 久久与婷婷| 日本婷婷五月天| 99亚州综合精品成人网| 亚洲另类噜噜| 婷婷深爱五月丁香| 少妇达人正片在线播放_ikun_福利吧| 天天射夜夜骑| 开心五月深爱婷婷| 激情五月天开心总和网| 激情欧美丁香五月| 色色色综合网| 99这里有精品视频| 99九九99九九九视频精彩| 人妻久久久久久| 狠狠色噜噜狠狠狠狠综合| www.亭亭五月天| 丁香久久久| 五月天深爱激情网| 夜夜夜夜夜骑撸| 熟女激情五月天 | 桔色成人在线| 色色国产| 午夜成人AV在线| 粉嫩av蜜桃av蜜臀av| 日本九九视频| 久草热在线视频| 伊人久久婷婷| 婷婷丁香激情五月天色色色| 日本97在线看片| 久久网址99热| 成人av中文字幕| 五月婷婷综合网| 色八月婷婷| 色综合天天网| 五月天影院| 色久综合| 亚洲色网络| 婷色五月天| 婷婷丁香18| 色色婷婷色色| 狠狠色婷婷| 国产va在线视频| 丁香五月激情综合啪啪| 五月丁香无码| 公的粗大挺进了我的密道 | 色老久久| 激情五月激情综合网| 日韩ww| 日韩AV中文字幕在线| 色呦呦美女| 韩国情人在线电视剧免费观看高清版全集 | 大地资源色婷婷视频在线| 久久5 9视频免费观看| www.久9| 国产成人av在线| 五月婷婷少妇之| 五月婷六月婷婷| www.婷婷五月| 久久人妻超碰一区| 伊人网大香| 北条麻妃九九九国产精品视频| 91九色 熟| 久久综合综合久久| 亚洲人妻一区二区| 日日噜噜夜夜狠狠久久丁香六月| 久久人妻熟女一区二区| 五月天久久综合| 深爱激情四射| 欧美在线97| 日本一級黃色一級片| 91久久九久久九久久九久久九久久 | 婷婷91| 激情综合网激情五月丁香五月俺也去| 五月丁香久人妻中文| 婷婷五月天,影院| 激情丁香五月婷婷| 97在线观视频免费观看| 婷婷五月丁香啪啪| www.色擼擼.com| 91色久| 免费一区二区三区| 伊人久久激情图区五月| 综合网啪| 色综合99无码 | 99综合自拍| 日日干夜夜撸夜夜骑| 五月天婷婷綜合院| 色五月婷婷丁香凹凸| 色就是色婷婷五月亚洲激情| 色久丁香五| 国产古装妇女野外A片| 亚洲天堂啪啪| 九九热99热| 丁香激情五月天| 性天堂久久| 婷婷色爱| 久久AAAA片一区二区| 五月丁香久久久久| 操操操Av| 雪千夏麻豆| 免费99情趣网视频| 五月天婷婷在线播放| 亚洲热久| 79色色| 99性爱| 欧美日韩99| 日日干夜夜干| 日韩精品无码AV| 六月天丁婷婷| 国产AV一区二区三区最新精品| 国产操碰| 久久精品五月天| 国洲夜色亚热在线久久| 亚洲色综合性| 日本操B视频在线观看| 五月欧美色播| 超碰国产在线| 六月婷欧美| 天天做天天爱天天要| 国产午夜精品AV一区二区麻豆| 五月婷婷综合网| 丁香五月成人| 97久久精品视频| 日韩综合大黄| 激情五月成年| wwwC0maV五月花| 91九九九九| 天天操夜夜玩!| 五月综合色| 丁香五月综合色婷婷| 日本五月婷婷| 天天五月香欧美| www.激情五月| 五月天婷亚洲综合在线嫩草网| 激情五月综合网| 久久精品99| 大香蕉九九| 五月天社区| 99婷婷| 婷香五月网在线| 色婷婷在线视频| 激情五月天婷婷免费观看| 五月网激情| 搡BBBB搡BBB搡18| 人人操Av| 色五月,com| 人妻自慰高清合集| 久久五月情| 中文AV在线观看| 全高清无码视頻| 色五月综合激情| 91狠狠综合久久| 激情五月天婷婷五月天| 99热在线免费观看精品| 欧美成人AAA片一区国产精品| 久久五月激情网| 婷婷丁香九色| 五月婷婷六月丁香在线| 天堂中文国产| 另类小说五月天| 久久伊人日日夜夜| 成片免费观看大全| 色三级色三级| 色欲婷婷夜夜| 日本三级99人妇网站| 婷婷天天色| 丁香蜜臀黄色婷婷五月天| 五月丁香色| 色综合9| 97碰人人操| 激情五月丁香婷婷夜夜操| 国产精品99久久久久久久女警| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 思思热在线观看| 淫荡工a| 啪啪操操| 五月丁香婷婷色| 激情五月婷婷综合色播小说| 婷婷五月天精品| 色吧五月婷婷| 66精品成人免费网站在线观看| 激情国产综合| 色色五月丁香| 一起草性爱不卡视频| 丁香婷婷基地| 久久综合五月天激情小说网站| 五月花激情网| 亚洲日日日| 日日操日日爽| 色天堂A| 99干日日干| 亚洲综合视频网| 五月丁香久久综合精品| 97碰碰在线观看视频| 欧美人与性动交CCOO| 玖玖婷婷五月天| 色婷婷五月基地在线| 五月天堂六月丁香亚州中文字幕久久| 亚洲av骚货| 婷婷五月视频| 色五月之第四色| 97超碰欧美中文字幕| 五月天综合在线| 丁香五月成人网| 五月综亚洲| 婷婷五月AV| 天堂在线观看视频| 另类激情中文| 天天干天天插| 激情久久综合网| 婷婷色婷婷亚洲成人| 极品五月天| 乱精品一区字幕二区| 婷婷丁香五月综合免费视频百花| www.伊人天堂偷偷婷婷| 亚洲精品无码久久| 人人看人人97| 激情5月婷婷| 婷婷丁香18| 婷婷丁香六月天| www.六月丁香看AV| 99在线观看这里都是精品| 99色在线观看视频| 色色色色色日韩午夜激情| 搡BBBB搡BBB搡18| 亚洲操逼片| 99视频精品在线| 五月天伊人手机在线播放AV| 婷婷欧美色| 亚洲精品影视| 五月开心久久| 亚洲成人无码片| 99综合97| 亚洲网站观看视频| 日韩精品AV一区二区三区| 午夜大香蕉| xxxx久| 婷婷五月天天天| 中文国产五月天| WWW色综合| www.久久爱| 香蕉中文在线| 激情综合网婷婷五夜| 激情99| 久久婷婷成人综合色怡春院| 成人 视频免费观看网站| 五月天com| 99热这里只有精品86| 国精产品一区二区三区| 亚洲无码成人性爰网| www.狠狠操.co m| www.粉嫩av.com| 五月丁香综合啪啪| 色欲天天综合网| 99综合视频| 色色哒五月婷婷六月丁香| 婷婷开心激情综合五月天| 高清激情av在线观看| 伊人五月天综合网| 久久婷婷六月综合| 亚洲操人| 婷香五月网在线| 天天综合亚洲综合网天天αⅴ| 人妻AV在线| 综合亚洲六月婷婷在线| 这里只有精品免费在线视频| 肏屄色播伊人97婷婷| 在线成人视频免费| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 无码任你操| 色五月五月婷婷| 91丨九色丨熟女高潮| 99在线精品视频| 97碰在线| 色五月激情五月开心五月| 色五月丁香网| 丁香五月综合| 色色国产| 激情图片亚洲| 欧美婷婷色五月网| 亚洲乱码w在线观看| 99九九精品视频| 九九热这里只有精品7| 欧美成人无码高清一区二区三区| 婷婷六月爽| 欧美性色五月天| www.99情趣网| 色99热| 五月天开心网| 日欧一片内射VA在线影院| 欧美在线视频99| 精品国产AV色一区二区深夜久久 | 久久9精品| 五月丁香久久综合| 日逼免费视频| 播五月,色五月,开心五月播放器| 欧美色色色色色| AA片在线观看视频在线播放| 国产做A爰片毛片A片美国| 亚洲综合色婷| 国产a视频| 欧美性爱五月天| 能看的av片| 99热日韩| 久久五月视频| 天海翼中文字幕高| 玖玖色资源| 涩综合在线| 涩涩激情五月婷婷| 色v综合网| 天天成人综合| 久久这里只有精品热在99| www.99热视频| 2015在线中文字幕| 久久久久9999| 国产精品久久7777777精品无码| www.99日本| 极品人妻VIDEOSSS人妻| 亚洲丁香五冃97色| 91偷拍视频| 五月丁香六月停停| 婷婷五月丁香久久| 伊人婷婷福利网| 十区AV| 午夜爱爱爱成人| 91碰碰视频| 久久精品一区二区三区四区| 国产激情在线| 久久视频九九视频| 久久久久久久人妻| 伊人在线视频| 9精品在线| 亚洲丁香五月| 婷婷伊人网| 人人叉久| 国产精品-第3页-91JQ就要激情网91JQ5.JQJQ926.XYZ | 丁香婷婷五月天色播| 婷婷刺激综合| 影音先锋美国A| 成人五月丁香社区| 国产成人99久久亚洲综合精品| 婷婷欧美| 狼友超碰| 丁香婷婷婷五月| 欧美成人精品A片免费一区99| 婷婷五月欧美| 天天做天天干天天综合网| 色域五月婷婷丁香| 九九无毛| 天天干天天日日| 97碰啪啪| 久色88| 色噜综| 成人日韩欧美| 国产av基地| 人人视频色| av亚洲国产小电影| 青青.com| 久久久大香蕉| 91精品啪| www.久久av.com| 日本啪啪视频HD| 另类综合激情| 婷婷色成人| 久久久com| 99re6热在线精品视频播放速度| 亚洲另类日本| 久久香视频| 激情五月com| 五月香婷婷| 婷婷丁香人妻天天爽| 免费成人中文字幕| 天天日狠狠| 丁香五月社区| 99热久| 91九色首页| 内射综合网| 欧美日韩成人一区二区| 97碰碰碰| 婷婷伊人五月天| 99只有精品9| 夜夜骑日日夜夜| 日本猛少妇色XXXXX猛叫| 久久九九怡红院| 99re在线观看| 色色五月婷婷| 99视频在线精品免费观看2| 色播婷婷五月天| 99精品视频偷拍| 另类精品视频在线观看| 啪啪 综合网| 婷婷五月电影| 婷婷月综合| 五月丁香欧美综合| 亚洲综合网 665566| 亚洲欧洲国产精品| 久99视频| 色性综合| 婷婷啪啪| 一二三区视频韩国| 日韩AC在线免费观看| site:minyis.com| 婷婷综合激情| 思恩热国产视频右线观看| 色五月亚洲| 操国产人妻| 4399无码视频| 色五月丁香五月婷婷五月成人网| 久久综合图片| 亚洲无码99| 色丁香五月| 91精品久久久久| 五月婷婷色播视频| 噼里啪啦在线观看免费完整版视频| 婷婷四月 成人 狠狠干| 亚洲精品又粗又大又爽A片| 午夜精品777| 激情综合五月丁香六月婷婷| 天天久| 欧美日韩成人免费在线| 99亚洲精品视频| 婷婷大美在线| 91久久18| 婷婷综合亚洲| 久久五月天合网| 婷婷五月激情欧美大胆视频| 色综合久久88色综合中文字幕| 综合五月激情| 五月丁香婷婷婷激情爱爱| 99色视频在线观看最新| 俺去也五月天| wwwC0maV五月花| 狠狠久综合| 91在线日| 久久久婷丁香五月| 毛片蕉地一二| 成人精品在线观看| 五月色导航| 五月天大香蕉视频| 久久丁香五月婷婷| 爱的综合网| 激情五月婷婷视频一区二区三区| 五月丁香手机在线| 青草视频在线播放| 狠狠色综合网| 亚洲欧洲99| 牛牛热这里只有jingpin| 99热只有| 立川无码av| 婷综合六月| 五月色亚洲| 五月婷婷欧美激情| 狠狠色狠狠| 影音先锋91在线资源站| 亚洲成人av在线播放| 成人婷婷桔色| 视频1区2区| 婷婷中文字幕| 99re这里只有| 热的国产,热的综合,热的有码 | 国产婷婷五月中文字幕高清| 一级黄色操B| 人妻久久久久久| 色五月婷婷综合| www.婷婷网| 亚洲Av成人在线观看| 99视频在线| 99re这里只有精品视频了| 成人电影在线免费试看| 五月婷丁香| 狠狠色婷婷777| 色婷婷五月天天天天天| 久久大香蕉伊人| 久久激情五月| 中文字幕丰满人妻无码专区| 天天天添天天操| 五月婷婷啪啪网| 五月天婷婷无码| 久久久97| 久久92| 91久久婷婷人人澡草 | 狠狠婷婷色综合| 玖玖色综合| 天天狠狠六月婷丁香影院| 天天免费成年人视频| 六月婷欧美| 中文字幕人妻一区二区| 深爱五月天| 久热黄色| 五月天啪啪| 五月天a婷婷伊人| 91天天操天天干天天射| 人妻五月天激情开心网| 日韩精品一区二区三区,四区,五区视频| 久久永久视频| 五月天婷婷亚洲| 99热精品一区| 婷婷五月天伊人在线| 久久永久视频| 五月丁香中文婷婷中文| 伊人久久婷婷五月综合97色| 91久久婷婷| 99热这里是精品| 操操自拍| 青青草六月丁香| 婷婷五月天亚洲天堂| 丁香五月亚洲激情婷婷射| A1片久久久| 婷婷综合另类| 色9999综合久久| 久久色六月| 日本少妇裸体做爰高潮片| 五月香婷婷| 99色中文| 国产激情在线| 99亚洲精品| 五月天成人综合| 色婷婷狠狠18| 六月丁香社区| 97韩国久久电影院| 中字幕视频在线永久在线观看免费| 久久99精品视频| 亚洲激情网| 九九这里都是精品| 日本99视频| 开心五月激情网| 这里只有精品免费| 色五月婷婷在线| 国产在这里只有精品| 婷婷五月天激情免费在线观看| 欧美VA在线观看| 韩国久久少妇视屏| 婷婷五月丁综合| 日日操日日爽| 五月天婷婷婷| 五月天开心激情综合网| 五月婷婷丁香俺日污视频| 终合激情网| 丁香五月天资源网| 夜夜爽天天爽| 成人在线综合| 久久婷婷五月丁香网| 激情久久肏屄视频| 色999;丁香五月| 色五月婷婷综合| 综合色99| 99ER热精品视频| 丁香五月婷婷激情97| 五月天天丁香婷婷| 久久33视频| 成人短视频在线免费观看| 五月婷婷丁香五月| 色婷婷影音| 丁香九九九九| 久久综合丁香五月| 亚洲激情高潮| 婷婷五月骚厕所| 欧美中文五月天| 91九色|疯狂|高潮|对白|| 亚洲中文字幕网| 人人爱操| 亚洲无码影音| 婷五月天丁香婷五月| 婷婷色色丁香五月天| 日韩人妻无码精品| 九九热这里只有精品556| 五月丁香网视频| α久久| 色色a| 五月六月婷| 人人摸人人干| 天天干,天天日| 九九香蕉网| 婷婷99视频全集高清| 91热网址| av在线资源| 婷婷五月天伊人网在线观看视频| 激情网 五月天| www.日韩艹| 婷婷五月草| 天天操天天曰| 亚洲妇女熟BBW| 色偷偷人人| 久色网| www.久久五月天.com| 99亚州综合精品成人网| 日本色道视频网站| 91狠狠综合久久久| www久久久久久久| 久月婷婷| 日逼免费视频| www.久久久久久久| 亚洲成av人影院| 71在线精品视频一区| 色婷久久| 五月丁香网中文字幕| 五月天婷婷爱| 99热6这里只有精品| Aaa久久| 99热偷拍| 性天天中文网| 欧美黄色AA片哗啦啦啦| 91日在线视频| a在线观看| 色永久| 97碰在线视频| 婷婷六月成人| 狠狠色丁香久久久婷| 亚洲亚洲永久无码777777| 天天搞天天爽| 99视频综合网| 婷婷涩涩网| 99ri国产| 九九这里都是精品| 玖玖在线视频| 久久综合首页| 五月丁香激情在线| 五月丁香在线观看| 婷婷久久婷婷色五月| 99无码视频| 五月天婷婷综合免费| 日产精品久久久久久久蜜臀| 久久婷中文字幕| 蜜臀丁香黄色婷婷五月天| 婷婷五月天成人小说| 五月天激情网图片| 五月丁香激情怕怕| 成 人 色 色| 99热超碰在线| 久久92| 欧州色色| 国产69久久久欧美黑人A片| 色色九九五月天| 五月激情丁香| JAPANRCEP老熟妇乱子伦视频 | 丁香婷婷五月香蕉91| 99精品在线播放| 激情五月天视频| 波多婷婷久久| 五月丁香婷婷无码A∨| av在线中文| 色婷婷最新域名 | 国产永久一二一起草| 色色色婷婷五月天| 国产亚洲色婷婷久久99精品91 www.riverspirits.org www.hnnun.com www.changh | 亚洲视频操| 美女五月天| 九九九激情网| 五月丁香六月婷婷中合网| 99热在线精品观看| 在线天堂9| 丁香五月色| 婷婷中文字幕欧美| 韩国情人在线电视剧免费观看高清版全集| 亚洲色综合| 操逼毛片国语对白| 影音先锋偷偷色男人站| 婷婷五月天天激情| 五月丁香激情婷婷综合| 福利视频在线播放| 亚洲五月天伊人| A短视频免费在线观看| 丁香五月天婷婷中文字幕| 99热这里只有精品8| 丁香五月天黄色片| 99视频在线播放大全| 东京热免费视频网站| 色狠久| 国产精品日本一区二区在线播放| 久久九九怡红院| 天天肏天天肏天天肏| 日本婷婷色| 久久99美女精彩视频| 碰超亚洲| 99热只有精| 国产乱人偷精品人妻A片| 婷婷五月天影视| 国产成人精品一区二区三区视频 | 丁香啪啪| 婷婷丁香六月五月天| 99亚洲视频| 亚洲五月天综合色| 久久ab| 激情久久久久久久久久| 久草热在线视频| 激情五月综合第一页| 六月婷婷八月丁香| 婷婷五月丁香花综合| 婷婷成人综合| 色婷婷小说| 丁香婷婷啪啪| 天堂爱爱| 欧美性猛交XXXX乱大交极品| 色婷五月天网站| 亚洲超碰中文字幕| 天天透天天爱| 欧美日韩国产一区二区| 精品成人久久久久久久_一二三四视| 九九色99| 九月丁香| 79成人网| 亚洲免费成人电影AV| 这里只有精彩视频| 国产精品操| 99精品热| 丁香婷婷久久激情| av五月天婷婷丁香| 九九这里有精品| 婷婷激情在线| 天天天天天日| 色婷婷综合五月| 亚洲中文字幕在线电影| 丁香五月六月| 久九色| 操人无码| 婷婷六月网| 蜜乳AV成人| 国产精品电影网| 色婷婷AAA| 99精品偷自拍| 亚洲五月天婷婷在线| 久久总和99| 日本三级日本三级99| 色大综合| 五月婷婷七月丁香| 丁香五月激情综合| 99re这里只有精品首页| 九色激情网|