亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

嵌入式外設(shè)不確定性排查:PSRAM、NOR Flash與USB實戰(zhàn)經(jīng)驗

嵌入式外設(shè)不確定性排查:PSRAM、NOR Flash與USB實戰(zhàn)經(jīng)驗 做嵌入式這幾年P(guān)SRAM、NOR Flash、USB這三個名字我?guī)缀跆焯齑蚪坏馈R粋€是內(nèi)存擴展一個是代碼與參數(shù)的存放地一個是和外部世界通信的接口——聽起來都是再標準不過的外設(shè)??烧嬲阉鼈兘M合在一個系統(tǒng)里跑穩(wěn)定尤其是要在量產(chǎn)線上批量復(fù)現(xiàn)時你會發(fā)現(xiàn)不確定性這三個字幾乎無處不在。同一顆芯片、同一份代碼有的板子一次過有的板子偶發(fā)枚舉失敗有的設(shè)備低溫下代碼加載直接卡死。這不是玄學(xué)而是這三類器件在物理層和協(xié)議層本身就帶著一批說不準的行為工程上如果不去理解這些不確定性就會在排障時走很多彎路。這篇文章把我這些年調(diào)PSRAM、NOR Flash、USB時踩過的坑、驗證過的方法和最終沉淀下來的排查套路一次性整理出來適合正在做MCU/嵌入式Linux產(chǎn)品方案的工程師也適合剛?cè)胧諷TM32、ESP32等平臺、被外設(shè)穩(wěn)定性問題折磨的新手。內(nèi)容不追求面面俱到重點是把為什么會出現(xiàn)不確定性和怎么把它管住講透看完你至少能少熬夜調(diào)幾個Bug。1. 一個翻車現(xiàn)場引出的三個不確定性1.1 項目背景PSRAM、NOR Flash、USB為什么會湊到一起先還原一下我經(jīng)歷過的一個典型場景。某款帶屏的IoT產(chǎn)品主控選了帶PSRAM擴展的MCU方案PSRAM用來跑UI緩沖和音頻緩沖固件放在一顆8MB的NOR Flash里上電后由Bootloader從Flash搬運到內(nèi)部SRAM/PSRAM執(zhí)行同時設(shè)備通過USB Device接口連接電腦既要做USB虛擬串口CDC做日志輸出還要支持DFU固件升級。這個組合在今天其實非常常見。PSRAM解決內(nèi)存不夠用NOR Flash解決代碼和參數(shù)怎么可靠存放USB解決怎么跟PC交互。三者看似各管一攤但在實際調(diào)試中它們會互相作用USB枚舉瞬間的電流波動能干擾PSRAM的供電NOR Flash擦除時被USB的中斷打斷可能導(dǎo)致擦除流程異常PSRAM初始化沒完成時USB描述符中斷來了系統(tǒng)直接死機。要理清這些就得先把每一類器件的不確定性單獨拿出來看。1.2 所謂不確定性到底指的是什么我理解的不確定性不是量子力學(xué)那種真隨機而是指器件的某個行為在datasheet的典型條件下是確定的但在真實系統(tǒng)里因為供電、溫度、時序、代碼順序、總線復(fù)用等原因結(jié)果變得難以預(yù)測。具體分四類時序不確定性上電穩(wěn)定時間、指令間隔、擦寫完成時間都有最小/最大范圍超時和欠時都可能出錯。電氣不確定性信號沿的抖動、電源紋波、PCB寄生參數(shù)、線纜阻抗等會讓數(shù)據(jù)采樣點在臨界區(qū)浮動。協(xié)議狀態(tài)不確定性USB枚舉、Flash狀態(tài)機、PSRAM刷新等都有內(nèi)部狀態(tài)外部事件如中斷、掉電切入時狀態(tài)機會落在不可預(yù)期的位置。上下文不確定性同樣的代碼在不同主頻、不同編譯器優(yōu)化等級、不同GPIO初始化順序下行為不同。這類最坑因為復(fù)現(xiàn)困難。這四類不確定性的背后是物理和協(xié)議的復(fù)雜機制。后面三章我會逐個拆解并且給出實操層面的管住它們的辦法。2. PSRAM的藏著掖著刷新與時序的不確定性2.1 先說原理PSRAM為什么叫偽SRAMPSRAMPseudo SRAM偽靜態(tài)隨機存儲器的存儲核心其實是DRAM只是外部接口做成了SRAM的樣子。你不需要像用SDRAM那樣去管理行激活、預(yù)充電、刷新這些細節(jié)直接像SRAM一樣讀寫就行。代價是芯片內(nèi)部有一個隱藏的刷新邏輯它會周期性對存儲單元做刷新。這個刷新過程對使用者來說是不可見的但它會對總線的可用帶寬產(chǎn)生影響。某些時候你讀一個地址正好碰上內(nèi)部刷新周期返回數(shù)據(jù)的延遲就會比平時大一點。這就是PSRAM第一個不確定性的來源——訪問延遲不是恒定值。另一個層面SPI接口的PSRAM比如APS6404、LY68L6400、IPS6404在MCU項目里用得越來越多。它的好處是引腳少、布線簡單但代價是協(xié)議里引入了等待周期Latency的概念。讀操作發(fā)出命令后數(shù)據(jù)并不會立刻出現(xiàn)在MOSI上而是要等若干個dummy cycle。這個dummy cycle的數(shù)量又跟工作頻率、指令模式、芯片配置有關(guān)。配置錯了要么讀到全0要么數(shù)據(jù)錯位而且不同廠家的芯片行為還不完全一樣非常容易出問題。2.2 初始化與讀寫時最容易踩的時序坑SPI PSRAM的初始化一般分幾步上電等待VCC穩(wěn)定至少幾百微秒到1ms具體看型號、發(fā)送復(fù)位命令、發(fā)送設(shè)置命令比如設(shè)置Quad模式、設(shè)置延遲、設(shè)置驅(qū)動強度、讀取設(shè)備ID確認芯片在線、然后才能正常讀寫。很多人在上電后立刻讀寫PSRAM結(jié)果讀回的ID是錯的或者讀到的數(shù)據(jù)偶發(fā)錯誤就是因為上電穩(wěn)定時間不夠芯片內(nèi)部狀態(tài)還沒準備好。讀寫時序上最容易被忽略的是寫使能機制。PSRAM和Flash一樣寫操作前通常需要發(fā)送Write Enable0x06命令然后才能執(zhí)行Page Program等寫命令。如果你在代碼里漏了這一步或者中斷在寫使能之后、寫命令之前插入導(dǎo)致時序被拉長某些芯片會判定操作非法數(shù)據(jù)就沒寫進去。實測中這類問題在SPI時鐘開得越高時越明顯因為時序裕量變小了。還有一個坑是刷新與DMA的配合。SPI PSRAM內(nèi)部刷新時會暫緩來自外部總線的訪問這在單次CPU讀寫上感覺不到但如果你用DMA做大批量傳輸而且DMA的超時設(shè)置比較緊就可能偶發(fā)超時。別問我怎么踩到的——調(diào)試一塊PSRAM上的攝像頭圖像緩沖區(qū)時圖像正常了99%但每隔幾秒就閃一幀花屏最后查到DMA配置里把PSRAM讀寫超時設(shè)成了實時性要求更高的數(shù)值放寬后問題消失。2.3 實測幾個典型的PSRAM翻車場景場景一低溫下初始化失敗。有一批板子在常溫實驗室一切正常放到-20℃環(huán)境做老化測試大概有3%的板子啟動后內(nèi)存檢測失敗。排查發(fā)現(xiàn)是PSRAM上電穩(wěn)定時間在低溫下變長了固件里固定的延時不夠。把初始化前的等待從500μs加到了2ms并增加了讀取ID后校驗的邏輯失敗率歸零。這里要注意datasheet給的是典型值工程上要做覆蓋全溫區(qū)的裕量設(shè)計。場景二Quad模式讀出來是亂的。當(dāng)時為了提升刷新率把PSRAM切到Quad I/O模式結(jié)果屏幕開始出馬賽克。檢查發(fā)現(xiàn)是切換模式后后續(xù)所有訪問命令都要帶上模式位Mode Bit但代碼里只有部分路徑寫了模式位另一條DMA訪問路徑?jīng)]帶導(dǎo)致芯片一直在不同模式間橫跳。這類問題最好的排查方法就是抓SPI波形逐個命令比對不要猜。場景三PSRAM和外部Flash共享SPI總線的沖突。某些低成本方案會讓PSRAM和SPI NOR Flash掛在同一個SPI控制器上用片選分開。如果片選切換之間沒有留足夠的時間一般要求CS拉高再拉低之間至少有個小延時兩條總線上的設(shè)備可能被對方的殘余信號干擾。我一般至少留250ns~500ns。實測某些芯片對CS釋放后的保持時間非常敏感少了它偶爾就會出現(xiàn)Flash寫入失敗或PSRAM數(shù)據(jù)錯亂。3. NOR Flash的慢性子擦寫壽命與掉電的不確定性3.1 NOR和NAND別再傻傻分不清討論NOR Flash之前先回應(yīng)很多新手朋友問過的問題NAND Flash和NOR Flash到底有什么區(qū)別簡單版回答NOR可以按字節(jié)/字隨機讀取讀得快、可靠性高適合直接XIP執(zhí)行代碼但寫和擦除很慢容量做大之后成本高NAND按頁讀寫寫入擦除快、容量大、成本低但隨機讀取延遲高、壞塊多、需要文件系統(tǒng)層做壞塊管理和ECC不適合直接執(zhí)行代碼。所以產(chǎn)品里通常拿NOR放Bootloader和固件拿NAND或eMMC放文件系統(tǒng)和大塊數(shù)據(jù)。但要說清不確定性必須補充一個深層區(qū)別NOR Flash的存儲單元是浮柵晶體管擦除操作靠Fowler-Nordheim隧穿把電子從浮柵里拉出來編程操作則往浮柵里注入電子。隧穿和注入都是概率性物理過程所以擦除和編程時間天然有浮動。datasheet里會給出典型值和最大值比如Sector Erase典型值45ms最大值400ms這個最大不是隨隨便便寫的你不等夠狀態(tài)機就可能沒走完。3.2 上電、擦寫、復(fù)位里那些說不準的環(huán)節(jié)NOR Flash在上電時有一段Power-On Reset時間期間器件對命令不響應(yīng)。如果你在上電后立即發(fā)JEDEC ID讀取命令0x9F很多芯片會返回垃圾數(shù)據(jù)或者直接不拉低MISO。我見過一堆代碼在Bootloader里讀Flash ID來校驗硬件版本結(jié)果因為延時不夠讀回0xFFFFFFFF就誤報硬件錯誤。解決方法是上電后至少延時幾十毫秒再訪問Flash并且對ID做多重校驗。擦寫流程里最容易被坑的是狀態(tài)寄存器的寫保護位。SPI NOR Flash為了保證可靠性默認會對狀態(tài)寄存器做非易失寫保護Status Register ProtectSRP位。很多人拿到新片直接發(fā)擦除命令結(jié)果怎么擦都擦不動因為WP#引腳被拉高時寫保護生效。不同的芯片默認保護級別也不同比如W25Q系列默認BP位為0、不保護主存儲區(qū)但某些國產(chǎn)芯片出廠BP位是設(shè)置好的所以兼容性測試一定要做讀取狀態(tài)寄存器這步。這個我在后面速查表里還會提。還有一個經(jīng)常被忽略的點4字節(jié)地址模式。容量超過16MB的Flash默認上電大多在3字節(jié)地址模式訪問高16MB地址時必須發(fā)命令切換到4字節(jié)地址模式B7h有些芯片是帶Entry/Exit的。切換命令本身是非易失的還是易失的芯片間也有差異。如果你用的是類似MX25L25645G這樣的芯片一定要查清楚上電后的默認地址模式否則燒錄地址超過16MB時數(shù)據(jù)會寫到錯誤的位置。3.3 量產(chǎn)燒錄與掉電保護的實操要點量產(chǎn)場景下NOR Flash不確定性最典型的表現(xiàn)是燒錄中途掉電固件變成磚。對此我的做法是固件里設(shè)計A/B雙分區(qū)加啟動標志位新固件先寫到B區(qū)全部寫完并校驗通過后再更新啟動標志指向B區(qū)如果中途掉電Bootloader檢測到標志無效自動回退到A區(qū)。這套流程看起來多占一倍的Flash空間但換來的是現(xiàn)場幾乎不再出現(xiàn)救磚任務(wù)。對于沒有雙分區(qū)空間的低成本產(chǎn)品至少要保證先擦后寫過程中意外掉電后Bootloader能檢測到固件區(qū)校驗失敗并進入DFU等待狀態(tài)而不是直接跳到空代碼區(qū)執(zhí)行。此外擦除/編程的超時處理一定要用輪詢WIP位 最大超時兜底的方式。WIPWrite In Progress位在狀態(tài)寄存器1的最低位bit 0每次發(fā)0x05命令讀狀態(tài)寄存器bit 0為1表示忙輪詢到0表示操作完成。很多工程師只做一次性等待固定延時這在溫度漂移和芯片批次差異面前早晚會翻車。輪詢邏輯本身很簡單但要注意輪詢間隔一般建議100μs左右防抖次數(shù)按datasheet最大值的1.5~2倍來設(shè)這樣既不會過早超時報錯也不會卡死系統(tǒng)。4. USB的社交枚舉、驅(qū)動與協(xié)議的不確定性4.1 枚舉一次連接本質(zhì)上是一場握手談判要理解USB的不確定性先要理解它的本質(zhì)USB是一種主機主動、設(shè)備被動響應(yīng)的協(xié)議。設(shè)備插入后主機通過D/D-電平變化檢測到設(shè)備連接然后對設(shè)備地址0發(fā)起一系列控制傳輸Get Device Descriptor、Set Address、Get Configuration Descriptor等這個過程叫枚舉。枚舉的成功與否取決于設(shè)備能否在150ms左右的時間窗口內(nèi)按照主機期望的節(jié)奏響應(yīng)每一個請求。不確定性就藏在這個過程里。任何一個環(huán)節(jié)慢了、錯了、超時了主機就會認為設(shè)備異常要么報告無法識別的USB設(shè)備要么設(shè)備在設(shè)備管理器里反復(fù)嘆號。更要命的是不同主機控制器Intel、AMD、ASMedia、瑞薩對時序的嚴格程度不一樣同一臺設(shè)備在A電腦上插入即用在B電腦上就是不穩(wěn)定。這也是USB調(diào)試最磨人的地方——你沒法保證用戶手上的電腦形態(tài)。4.2 設(shè)備端常見枚舉失敗硬件、描述符、時鐘設(shè)備端導(dǎo)致枚舉失敗的原因按我踩坑的頻率排序D/D-上拉電阻不對全速設(shè)備Full Speed 12Mbps需要在D上拉1.5kΩ到3.3V低速設(shè)備在D-上拉。如果用MCU內(nèi)部上拉阻值偏差會導(dǎo)致主機檢測不到連接。很多MCU比如STM32系列內(nèi)部集成了這個上拉但需要軟件在檢測到VBUS后再使能順序錯了設(shè)備就不出現(xiàn)在總線上。時鐘精度不夠USB全速要求源時鐘誤差在±0.25%以內(nèi)高速更是要到±0.05%。這個精度直接決定位時間對不對很多低成本MCU用內(nèi)部RC振蕩器跑USB會偶發(fā)枚舉失敗換外部晶振后就好了。我遇到過一批板子用內(nèi)部HSI跑STM32F407的USB虛擬串口90%能枚舉成功10%需要拔插兩次才行最后全部改成外部25MHz晶振問題消失。描述符錯誤描述符里任何一個長度、端點地址、接口數(shù)量不匹配主機都可能拒絕設(shè)備。尤其是CDC虛擬串口需要類特殊描述符Union Functional Descriptor、Call Management Functional Descriptor等少一個或者順序不對Windows會直接報告該設(shè)備無法啟動Code 10。排查這類問題最有效的是用USB協(xié)議分析儀或抓包軟件下面細說。供電不足設(shè)備從USB口取電如果板載外圍太多、瞬間電流超過500mAUSB 2.0標準主機端口會過流保護。這個屬于電氣不確定性但復(fù)現(xiàn)率不低、誤判率也高排查時先量一下設(shè)備實際功耗。4.3 主機端驅(qū)動與工具從FT232R到Wireshark主機端最常見的不確定性來自驅(qū)動。USB轉(zhuǎn)串口芯片F(xiàn)T232R、FT231X、CP2102N、CH340這些本身很成熟但驅(qū)動安裝不上、版本沖突、簽名問題能讓人折騰半天。我自己處理這類問題的小技巧優(yōu)先用官方驅(qū)動不要用第三方萬能驅(qū)動。FTDI的驅(qū)動對FT232R/FT231X支持很完善Silicon Labs的CP2102N驅(qū)動也比較干凈。裝了驅(qū)動后在設(shè)備管理器里看端口號是否出現(xiàn)、驅(qū)動版本是否匹配。如果設(shè)備在設(shè)備管理器里顯示未知設(shè)備先用USB Device Tree Viewer去看設(shè)備到底有沒有成功枚舉——它能顯示設(shè)備處于什么狀態(tài)、拿到了什么地址、配置描述符解析是否正常。如果是枚舉成功了但驅(qū)動沒加載那是驅(qū)動問題如果連配置都沒有那是設(shè)備端問題。抓包分析用Wireshark加USBPcap。很多人以為Wireshark只能抓網(wǎng)絡(luò)包其實它配合USBPcap可以抓USB總線上的URBUSB Request Block能看到主機發(fā)了什么請求、設(shè)備回了什么數(shù)據(jù)。排查枚舉失敗時非常有用。我舉一個真實的排查案例一塊板子的USB虛擬串口在Windows 10上穩(wěn)定但升級到Windows 11后偶發(fā)斷連。用Wireshark抓包發(fā)現(xiàn)新系統(tǒng)會周期性發(fā)送Get Status請求設(shè)備端響應(yīng)偶爾超過150ms超時于是主機把設(shè)備斷開重枚舉。最后定位是USB中斷服務(wù)函數(shù)里有一個耗時很長的Flash擦除操作擦除期間USB中斷被屏蔽了請求得不到及時響應(yīng)。把Flash擦除拆成多段、每段之間開中斷問題解決。這個案例正好能說明USB的不確定性很多時候不是USB本身的問題而是系統(tǒng)里其他設(shè)備的時序問題傳染給了USB。4.4 Host、Device、OTG三模式的區(qū)別與選擇關(guān)于USB Host模式、Device模式和OTG很多新手容易混淆。直接說結(jié)論Host模式負責(zé)供電、管理枚舉類似電腦那端接口用A型口Device模式是被動響應(yīng)類似U盤、手機那端接口用B型口或Micro-BOTG則在一條線纜上通過ID引腳識別自己是Host還是Device適合手機、平板這種需要角色動態(tài)切換的設(shè)備。嵌入式產(chǎn)品選型時如果只是給PC當(dāng)外設(shè)用Device模式即可STM32F407這類MCU的USB模塊做虛擬串口非常方便。如果需要直接插U盤、鍵鼠就得用Host模式這時候要考慮VBUS供電能力、根集線器開銷和驅(qū)動棧復(fù)雜度會上升一個量級。OTG模式適合既想連PC又想插U盤的產(chǎn)品但要注意ID引腳的檢測邏輯以及角色切換時總線的重新枚舉處理不好會出現(xiàn)插上電腦沒反應(yīng)、反插又不能用的怪問題。量產(chǎn)時我通常建議固定角色的產(chǎn)品不要用OTG直接按Host或Device設(shè)計能省掉一半的疑難雜癥。5. 三個子系統(tǒng)聯(lián)動時的不確定性傳染5.1 USB OTG燒寫Flash量產(chǎn)場景下的鏈路梳理搜索熱詞里有一條USB OTG燒寫NAND Flash這確實是量產(chǎn)和售后經(jīng)常會用到的形式主機通過USB把固件發(fā)給設(shè)備設(shè)備里的Bootloader再把固件寫入NOR/NAND Flash。這里面每一環(huán)都帶著前面幾章講到的不確定性很容易做個所謂燒錄成功率99%的上位機結(jié)果現(xiàn)場就是不停有人燒錄失敗。我建議把整條鏈路梳理成可觀測的環(huán)節(jié)再設(shè)計容錯USB枚舉是否成功、設(shè)備是否收到完整固件包CRC校驗、Flash擦寫是否完成WIP輪詢、寫入后回讀校驗是否通過。任何一個環(huán)節(jié)失敗都要有明確反饋和重試機制。我還習(xí)慣在燒錄協(xié)議里加入分塊序號CRC設(shè)計單塊失敗則重傳單塊而不是整包重傳Flash擦除采用按扇區(qū)擦除而不是整片擦除這樣即使掉電已傳完的分區(qū)還能保留支持斷點續(xù)傳。這套方案在代工廠和售后現(xiàn)場用下來燒錄失敗率從千分之一級別降到了幾乎不可見。5.2 共享SPI總線與電源域時的彼此干擾很多中型MCU只有1~2個SPI外設(shè)PSRAM和NOR Flash共用同一SPI總線、用不同CS片選的情況非常常見。這種方案省引腳但換來的是時序耦合。最大的坑是兩個設(shè)備對片選釋放后的保持時間要求不同PSRAM往往要求CS拉高后至少幾十納秒才能再次拉低而某些NOR Flash要求更長。如果你在寫完P(guān)SRAM后立刻切到Flash操作系統(tǒng)里又有其他中斷插入CS之間的間隔就可能不夠?qū)е翭lash識別到異常的SPI通信偶發(fā)地錯誤寫入或狀態(tài)寄存器被改。另外PSRAM是DRAM核心刷新期間對供電紋波比較敏感NOR Flash擦除時電流會突然沖高如果兩個器件共用一個LDO擦除瞬間的電流尖峰會把PSRAM的供電電壓拉低輕則刷新失敗丟數(shù)據(jù)重則系統(tǒng)復(fù)位。我通常會給它們分別配LDO或至少加大Bulk電容并在PCB布局上讓PSRAM的退耦電容盡量靠近電源引腳。5.3 一次USB枚舉把系統(tǒng)搞崩的排查實錄最后分享一個印象很深的聯(lián)調(diào)事故。設(shè)備上電后如果先讓PSRAM完成初始化再開USB一切正常但如果USB先被主機檢測到、枚舉中斷先來了而PSRAM還沒初始化完系統(tǒng)就會在USB中斷服務(wù)里訪問未初始化的PSRAM觸發(fā)總線錯誤直接HardFault。排查時一開始完全沒頭緒現(xiàn)象是偶發(fā)死機且發(fā)生在插拔USB時。后來在HardFault中斷里打印出出錯地址發(fā)現(xiàn)出錯地址落在PSRAM映射區(qū)域內(nèi)才把矛頭指向初始化順序。修復(fù)方案有兩種要么在PSRAM初始化完成前不使能USB中斷要么在USB中斷處理里加一個PSRAM就緒標志的保護。我最后選了第二種因為對系統(tǒng)啟動時間更友好。同時還加了一個調(diào)試開關(guān)可以在初始化階段通過串口打印每個外設(shè)的就緒狀態(tài)避免再次出現(xiàn)這種無聲無息的初始化順序問題。這個案例很能說明三個子系統(tǒng)單獨看都沒問題湊在一起就會出現(xiàn)不確定性傳染。排障的時候不要只盯著USB協(xié)議棧也要看它調(diào)用的資源內(nèi)存、Flash、時鐘是不是還沒準備好。6. 排查方法論與避坑速查表6.1 把玄學(xué)變成科學(xué)的四個步驟這類多外設(shè)聯(lián)動的不確定性問題最忌憑感覺改代碼。我總結(jié)了一套流程按順序執(zhí)行大部分問題都能收斂。第一步固定現(xiàn)場。復(fù)現(xiàn)異常時記錄供電電壓、環(huán)境溫度、固件版本、操作序列最好能截圖或錄屏。不能復(fù)現(xiàn)的問題先不要動代碼先想清楚當(dāng)時的輸入條件。第二步分層隔離。把系統(tǒng)切成獨立模塊逐層驗證。USB枚舉失敗先查設(shè)備端能否單獨枚舉成功再查驅(qū)動再查協(xié)議Flash擦寫異常先單獨驗證Flash讀寫再驗證文件系統(tǒng)層不要一上來就懷疑某一層。第三步加觀測點。在代碼里加日志、狀態(tài)寄存器快照、錯誤計數(shù)。很多偶發(fā)問題其實是狀態(tài)被覆蓋了加上觀測點后能看到真正出錯的位置。觀測點要盡量輕量不要改變原有時序否則可能測不出來。第四步做對照實驗。改一個變量跑一批測試統(tǒng)計成功率。改兩個以上變量結(jié)果就很難歸因了。比如懷疑是PSRAM刷新問題還是USB驅(qū)動問題就分別做只跑PSRAM壓測和只跑USB枚舉測試對比數(shù)據(jù)。6.2 問題速查表癥狀、原因、排查手段下面這個表是我在項目群里經(jīng)常貼出來的基本覆蓋了這三個子系統(tǒng)的常見問題癥狀可能的不確定性來源建議排查手段上電后Flash ID讀錯或全F上電復(fù)位時間不夠、供電不穩(wěn)加大上電延時讀ID前先發(fā)復(fù)位指令校驗IDFlash擦除不成功寫不進去狀態(tài)寄存器寫保護SRP/BP位、WP#引腳被拉高讀狀態(tài)寄存器按需發(fā)解鎖命令檢查WP#硬件Flash擦寫偶發(fā)失敗系統(tǒng)死機擦寫時間超過預(yù)置延時、共享SPI總線沖突改成WIP輪詢最大超時兜底檢查CS切換間隔16MB以上Flash地址錯亂3字節(jié)/4字節(jié)地址模式切換遺漏確認芯片上電默認模式按芯片手冊發(fā)模式切換命令PSRAM初始化失敗/數(shù)據(jù)錯誤上電穩(wěn)定時間不足、Latency配置錯、模式位漏設(shè)增大穩(wěn)定延時讀ID校驗抓SPI波形比對命令序列PSRAM偶發(fā)花屏/數(shù)據(jù)錯亂DMA超時設(shè)置較短、共享總線干擾、電源紋波放寬DMA超時CS間隔加長檢查供電退耦USB枚舉偶爾失敗時鐘精度不足、D上拉時序不對、線纜過長換外部晶振檢查上拉使能時機換短線測試USB在Windows上嘆號描述符錯誤、驅(qū)動異常、供電不足用USB Device Tree Viewer查狀態(tài)抓Wireshark包量電流USB虛擬串口偶發(fā)斷連USB中斷響應(yīng)超時、系統(tǒng)其他任務(wù)占用時間過長檢查中斷服務(wù)耗時拆分長任務(wù)調(diào)整中斷優(yōu)先級USB OTG燒錄Flash失敗鏈路中未做CRC/分塊斷點、Flash擦寫沒確認上位機和固件都加CRC分塊重傳機制輪詢WIP確認6.3 我這些年用下來最順手的工具與習(xí)慣工具方面硬件上我建議備常用的邏輯分析儀至少16通道、100MHz以上、USB協(xié)議分析儀預(yù)算不足可以先用WiresharkUSBPcap替代、支持模擬/數(shù)字雙通道的示波器。軟件上USB Device Tree Viewer、Wireshark、總線抓取工具、串口調(diào)試助手這幾個常備。Flash和PSRAM排障時邏輯分析儀抓SPI波形基本一抓一個準比盲改代碼高效太多。習(xí)慣上我有幾個一直堅持的做法。第一所有外設(shè)初始化代碼都做成可配置、可打印狀態(tài)的調(diào)試接口跑起來后先看狀態(tài)再看現(xiàn)象。第二關(guān)鍵行為Flash擦寫、USB枚舉、PSRAM初始化都加超時監(jiān)控和錯誤上報寧可多打印幾行日志也不要讓錯誤被吞掉。第三凡是涉及延時的地方全部都寫成宏或配置文件方便做全溫區(qū)、全電壓測試時批量調(diào)整。最后也是最重要的遇到玄學(xué)問題先忍住不亂改按上面四步走絕大多數(shù)問題都能在一個小時內(nèi)定位到物理層面或協(xié)議層面的真實原因。我個人這幾年的體會是PSRAM、NOR Flash、USB這類標準外設(shè)之所以還讓人頭疼不是因為它們本身有多復(fù)雜而是因為它們各自的不確定性疊加在一起時會呈現(xiàn)出系統(tǒng)級的詭異現(xiàn)象。把每個子系統(tǒng)的物理原理、時序邊界吃透再配合結(jié)構(gòu)化的排查方法那些看似隨機的問題其實都能收斂成確定的Bug。最后再分享一個小技巧在所有涉及等待外設(shè)就緒的代碼里我都會留一個帶時間戳的日志把每個階段的等待時間打印出來。這樣在復(fù)現(xiàn)故障時只要看一眼日志就能知道到底是哪個環(huán)節(jié)的時間裕量不夠比抓瞎式排查快得多。希望這篇內(nèi)容能幫你在下個項目里少踩幾個坑。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧在线一二区| 香港日本韩国人妇99www.wccm20| 六月丁香啪啪啪| 性爱AV天堂| 久肏视频字幕| 约操熟妇| 噜噜噜亚洲精品| 亚洲乱码精品一区二区| 天天日夜夜爽| 亚洲天堂久久| 亚洲天堂,男人| 欧美日韩国第一区| 免费国产视频| 成人性爱高清视频免费看| 2019天天操天天爽天天拍| 日本淫乱女一区二区三区视频| 精品人妻1区| 99.色网| 久久久久久9| 不卡在线一区,精品一区二区三区中| 嗯嗯啊啊啊好舒服| 中文字幕蜜乳av| 精品无码一区二区| 欧美熟妇精品黑人巨大91| 人人人摸人人| 97天天做| 久操凹凸视频| 999九九九九国产动| 国产97在线视频| 99精品无码| 激情小说激情视频| 人妻久久久久久久久久久久久久久| 色香在线| 亚洲中文日韩欧美大香蕉视频| 91 手机在线播放 绯色| 5252色欧美在线男人的天堂| 激情第四色| 嗯嗯啊啊好大好爽| 久久草在线综合视频| 久久熟女嫩草成人片免费 | 久久精品国产99精品亚洲蜜... | 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 永久免费发布性爱网| 欧美少妇高潮久久91| 中日亚韩免费视频| 台湾佬中文娱乐网久久久久久久久久com | 91热情品| 亚洲高潮少妇| 20cm女自慰在线日韩欧美| 欧美性区| 乱老女人一区二区视频| 欧日韩一二三f区| 开心五月婷婷激情| 久9综合在线| 久久99网站| 国产99热| 九九九九97| 2018天天干在线视频| 亚洲综合888| 婷婷去俺也去六月色| 久久视频,这里只有精品 | 超碰4A| 一品道视频一区二区三区| 亚洲欧美综合| 东北女人性交| 中文字幕第95页| 婷婷久久五月天| 夜草网站| 自拍盗摄一区| 90后性网国产欧美| 国产精品4p在线观看| 亚州欧美一区| 亚州操操穴网| 日本十八禁免费看污网站| 少妇丝袜在线观看AV| 成人丁香五月| 少妇无码av专区线| 九九热国产| 麻豆影音天美视频| 五月天色色色| 午夜男人av| 国产精品视屏| 国产高清在线自在拍69| 久久亚洲色图中文字幕| 亚洲色图美腿丝袜| 一二三啪啪专区| 国产毛片片精品天天看视频 | 色五月69夫妻| 国产欧美日韩女同性恋ww喷水精品 | 麻豆AV一区二区天美传媒| 精品97精品97| 无码一区二区三区四区五区六区七区八区九区十区视频 | 国产极品999| av资源在线观看少妇| 日韩91网站| 96国产污污污丝袜| 久久这里都是精品| 激情五月天网站| 免费观看国产不卡av| 国产一级高清免费观看| 校园春色亚洲色图| …中文字幕亚洲乱,97人妻无码费视… | 久久久久久久亚洲Av无码| 一起草在线视频| 精品一区二区久久| 91九九九吃| 国产福利夜| 欧美三级一级| 亚洲一区二区三区中文字幕| 久久久精精精| 人人澡人人澡人人| 97超碰超欧美。| 五月天色电影| 天天综合影院91| 色五月婷婷麻豆在| 婷婷爱五月| av天堂5| 国产黄片精品在线| 色香综合| 日本欧美不卡| 色天欧美| 欧美人人天天网| 久久亚洲不卡一区二区三区| 欧美午夜色妇色鬼| 99啪啪| 丁香五月激情五月| 99视频内射三四| 操99| 水野优香在线观看| 亚洲综合色男人网| 成年男人的天堂| 亚洲精品成人激情在线| 伊人网综合在线视频| 九九精品网| 人妻喷水| 99最新日韩偷拍视频| 使劲用力艹少妇视频一区二区| 五月丁香大香蕉| a在线观看| 九九精品美女高溯喷水| 久久草视频污视频| 欧美激情黑人| 天久久久噜噜噜久久国产精品爽爽 | 人妻精品综合中文字幕在线| 磁力99AV| 中文字幕在线2| 视频在线97| 超碰97人人乐| 在线日韩精品一区二区三区| av天堂天堂av日韩| 日韩性爱播放| 亚洲AO在线| 91在线页| 97电影院超碰| 亚洲射综合网| 人人色人人射人人妻| 操美女人妻| 亚洲欧洲第二视频在线观看色图| 亚洲国产剧情少妇激情| 九九av| 青草精品视频一日本久久久久网站| 日韩无码AB| 欧美黑人168页欧美黑人167| 欧美99999| 国产91啪| 国产精品久久久视频| 色丁香五月婷婷| 亚洲日韩一区电影| 黄网站黄视频网站进入口| 噜噜噜亚洲精品| 99www.bibizy香蕉资源国产一区二区三区高清 | 天天综合色| 欧美综合色站| 免费男人的天堂| 一起草高清无码| 亚洲精品三区在线观看| 激情抓乳插进去啪啪啪日韩| 欧美黄色片AAAAA| 一级性爱aaaa| 福利一级版子| 国产美女口爆吞精视频| 丁香色五月 97干| 一区久久久二区| 超碰在线1234区| 91欧美性| 久久亚州精品成人Av无| 一本一道人妻久久一区二区三区 | 超碰午夜| 91精品少妇搡搡搡| 97在线观看视频| 婷婷超| 午夜国产成人福利视频| 97视频在线观看高清资源| 精品久久久一本一道| 国产免费黄色一级大片| AV无码久久久精品| 国产高潮AA片免费看| 大香蕉综合| 91天天综合网,天天综合网| 国产97/欧美| 草草影院日本第一页| 韩国久久97| 天天日日日射| 干B网| 中文字幕亚洲永久精品| 男插女青青影院| 花花AV导航| 成人亚欧免费视频| 伊人婷婷五月天| 青女在线| 深夜视频| 五月天成人综合| 超碰97在线中文| 亚洲色欧| 亚洲αv一区二区三区| 丁香五月影院| 人妻喷水| 26uuu国产成人综合| 亚洲色图 欧美热图 清纯唯美 另类自拍| 亚洲情色一区三区| 久久久精品| 五月综合色| 999久久久久久久久| 中文字幕一区电影在线观看| 欧美在线啊啊啊| 91麻豆天美| 九九在线视频| 欧美色图20P| 国产精品久久久三级无码| 91精品久久久久久久久久| 亚洲国产一区二区日韩专区| 欧美综合第一| 蜜桃AV天堂| 成人美女av| 五十路人妻在线| 超碰人妻天天干| 欧美国产有色电影| 性爱边摸边日免费AV| 98精品国产乱码久久久久久| 天天综合网日韩7799| 天天色怡春院| 国产精品人妻无码久久久互動交流 | 婷婷亚洲综合| 亚洲小说视频| 夜夜操二区| 欧美亚洲系列| 操少妇很爽av| 成人a级高清视频在线观看| 亚洲成人精品久久久| 亚洲欧洲自拍图片专区满春格| 日亚韩精品视频二区三| 欧美图片校园春色| 午夜精品99久久久久传媒| 97超碰欧美| 91新在线欧美| 国产免a费看黄片在线| 日噜夜夜夜夜夜夜夜夜夜夜爽爽爽爽爽爽爽爽爽爽爽爽 | 国产高清自拍视频| 国产25页| 99热只有这里有精品| 色鬼在线综合| 午夜寂寞欧美| 九九热av| 国产亚洲色婷婷99精品91| 高清一区AV无码| 久久精品中文字幕女同| 强奸xx国产| 色欲av国内精品久久久久久| 欧美久久婷婷| 自慰白浆在线观看| 绯色一区二区三区不卡少妇| 色网1| 青青免费在线视频一区| 青青草玖玖爱| 国产在线76页| 99精品视频在线观看免费| 久久久天堂| 日韩一区二区熟女| 91操人| 精品一级| 91欧美性| 欧美精品人妻视频| 国产精品嫩草影院免费| 人妻天堂网| 91久久18禁| 日本精品第一视频在'| 伊人国产成人av网站| 1024手机看片欧美日韩| 伊人天堂在线| 国产亚洲精品玖玖玖在线观看| 97爱b| 成人短视频在线观看| 岛国黄片网站| 无码人妻一区二区三区四区老鸭窝| 熟妇操花| 午夜超爽| 久艹日日日| 亚洲性综合| 精品妇女一区二区三区| 殴美大黄片| 秋霞一级鲁丝片A片| 91原创在线观看| 久久久久久国产精品免费网站| 亚洲男人的天堂网| 亚洲αv一区二区三区| 91夜色| 少妇人妻在线| 1024午夜激情男人的天堂| 91男女啊啊啊| 91碰碰碰| 国产成人精品日本亚洲语言| 女同女同恋久久级三级| 男生通女生屁股| 99re69| 欧美日韩一区二区三区四区蜜桃| 性91| 熟女熟妇一区二区三区视频| 香一区二区三区| 日韩中文字幕精品一区在线| 大二网站亚洲| 精品人妻一区二区三区在线视频不卡| yazhousetuoumei| 丁香六月综合激情| 日本中文字幕在线电影| 国语国产操逼伊人AV网| 欧美αv.com| 国产在线综合福利网站| 爱丝福利| 天天91~综合入口| 色情五月综合婷婷| 成人性爱全视频观看| 超碰色男人操熟女| 日本黄色大片一级视频免费麻豆| 91精品人妻| 日本综合色图| 资源新线在线天堂| 夫妻日逼| 91另类| 国产精品噜噜噜日日日| 久久精品区| 国产suv精品一区| 亚洲久久东京热一二三四五区视频| 久久五月视频| 婷婷伊人网| 啊视频在线| 97精品一区二区视频| 大香蕉综合网| 国产AV天美传媒一区二区三区 | 日本欧美一区二区三区免费| 无码粉嫩白虎一线天b区| 男人的天堂久久狠| 人妻美腿丝袜日韩| 国内精品久9| 色色97爱| 天天综合网91| 久久中文字幕不卡人妻| 26uuu欧美日韩| 成人av影院在线观看| 日日摸日日弄日日拍| 午夜福利合集| 男人的午夜天堂| 日韩一二三区| 天天上日日上日韩精品| 国产一区二区三区免费视频在性观看 | 久噜噜| 亚洲国产欧美日韩人妻日中文| 亚洲成人无码影院| 欧洲特黄毛片免费看欧洲毛片| 国产精品97超碰| 大香蕉宅男伊人| 亭亭在线资源| 日韩本不卡视频在线观看 | 国产在线精品偷| 日韩欧美大力操| 无码国产精品96久久久久孕妇| 日日日日做夜夜夜夜做无码97| 久久中日麻豆| 日韩成人人妻网站| 酒色综合网| 日韩免费av片高清无码| 亚洲国产成人精品999| 在线观看成人性爱免费小视频| 成人羞羞视频国产| 操操逼操操逼操操逼逼| 狠狠干婷婷| 国产久久久9999| 日本男人插女人的逼黄色| 极品出轨视频网站| 久久国产逼| 欧美视频边做饭边橾| 久久久一区二区三区四曲免费听| 狠狠色丁香| 久久国产视频专区一二三| 大香蕉亚洲中文| 麻豆精品A片免费观看| AV天堂电影网| 一区二区播放| 久久成人国产精品| 一区二区日韩欧美久久| 伊人991| 91黄站| 亚洲最新av无码成人精品区| 天天日老熟妇| 全国男人天堂网| 一个人免费视频观看在线WWW| 日日爱99| 国产在线视视频有精品| 欧美黑人与女人91~| com 首页 18岁 禁区 女优 免费 精选 同城 | 欧美97在线欧| 亚洲av无线观看| 色呦呦、国产精品| 婷婷8月天青娱乐| 精品亚洲成人免费在线| 日日夜夜狠狠| 神马九九九| 日韩免费中文字幕视频| 色色五月天婷婷| 97久久精品亚洲| 蜜桃臀久久| 激情五月天插| 国产精品老师| 亚洲爱爱视频一区二区| 在线日韩精品一区二区三区| 五月丁香激情啪啪| 啊啊啊啊好大好硬啊啊啊啊啊| 粉嫩久久久极品| 中文字幕日韩电影人妻| 中文字幕精品人妻丝袜| 亚洲国产97| 国产成人+综合亚洲+天堂| 91久久国外网| 亚瑟国产精品久久无码| 国产欧美日韩精品中文| 人妻超碰青青草98| 天天操天天干一区二区| 91麻豆天美国产| 天天操天天日天天干| 欧美日韩啪啪电影| 欧美爆操91| 热99这里有精品综合久久 | 劲爆欧美人妖三区91| 欧美日韩制服| 日韩九区| 大香久久| 国产麻豆福利av在线播放| 久久精品老司| 欧美翘臀视频网站一区二区三区| 成全在线观看免费观看| 美腿丝袜高跟网免费视频免费视频| 99热线麻豆| 激情干在线| 超碰久久综合| 大香蕉乱伦视频网| 欧美热图99| 久久婷婷六月综合| 超碰97 线线 在现| 国产欧美精品日韩区二区麻豆天美| 少妇内射www在线观看视频| 美欧色综合| 欧美亚性天堂| 国产丝袜欧美在线视频| 亚洲免费97免费| 免费一级精品啪啪视频| 亚洲欧美大| 加勒比综合| 日本三级小说中文字幕| 大香蕉中文网| 天天日少妇逼AV| 人妻激情在线视频| 熟女突然公开看18禁影片 | 91激情综合| 亲子敌伦对白在线播放| 丁香五月天堂| 欧美日韩中文视频播放| 欧美天天综| 看大黄色大片原件| 蜜桃臀一区二区三区久久| 国产97色在线| 女性91网站| 中文字幕成人| 久9re热视频这里只有精品| 91伊人大香蕉| 国产精品无码在线| 欧美AB在线| 偷拍超碰| 凹凸视频特色日本特黄| 91精品国产91久久青草| 五月婷婷六月丁香| 一级二级三级黑人无码| 超碰综合97在线| 亚洲激情网一二三四区| 超碰美女97| 自拍二页| 大香蕉AV在线| www.伪伪| 大香蕉狠狠爱| 韩国女主播青草在线| 一级乱伦网站| 青青草中日韩在线| 国产精品情侣啪啪| 欧美亚洲日本视频久久久| 九热久| 天天看高清麻豆| av中文在线| 一区二区三区高清天码| 中文字幕黄色一起草| 麻豆九九九| 干婷婷综合网| 91欧洲入口| 麻豆AV一区二区| 亚洲综合中文字幕有码| 欧美欧美啪啪视频| 亚州五月| 久久啊啊啊视频| 尻女朋友一夜| 五月天婷精品激情| 乱伦一二三区| 激情欧美97| 91男人天堂网| 丁香五月性爱| 日本丝袜人妻内射| 精品无码一区二区三区色欲| 91日韩网站| 97碰碰日本乱偷人妻中文的| 三级网色| 免费成人在线观看91| 亚洲日韩狠狠撸视频| 色大师网站www永久网站视频| 成人av影院在线观看| 肉丝中文无码高清| 天天干美少妇一区| 日韩无码视频黄色| 91人人| 天天综合网~91| 亚洲天堂美臀在线| 国产精品久久久777| 中亚av| 国模精品一区二区三区苹果色戒 | 蜜臀少妇一区二区| 高清无码国产亚洲| 深夜激情无码| 91动漫操逼视频| 久9无限国产| 成人AV在线网站| 久9久精品视频| 女一区二区| 天天操女人| 日本特黄f c2| 色婷婷五月天| 九九色色| 99免费在线视频| 去干网最新版| 国产1024在线播放| 免费操逼91| 九七人妻在线| 丝袜色综合| 天天透伊人| 91neishe| 亚洲男人天堂网久久| 91美女视屏| 九九久久久久久爱| 嗯……啊…嗯嗯…啊…好舒服| 国产91精品福利在线| 国产高清无码一区三区二区| 操人妻视频| 色97干| 啊啊啊啊啊好舒服视频| 欧美日韩人妻婷婷一区| 欧美玖玖爱免费玖玖| 中文字幕文字幕无码一区二区三区电影99| 久久99精品视频| 毛片电影一区二区三区| 婷婷大香蕉| 中文字幕高清20页视频| 91大神电影天堂| 久久97资源 网| 婷婷精品国产一区二区三区日韩| 偷拍网站久久男女男| 欧美日日夜夜| 美女干逼2| 国产丝袜高跟美女av免费观看| 中文字幕加勒比海高清无码免费视频| 99综合免费视频| 男人的天堂网免费| 国产婷婷一区| 偷拍综合亚洲| 九t超碰| 亚洲av成人精品一区| 内射老妇BBWX0C0CK| 欧美精品99久久久**| www成人啪啪18秘 免费| 热久久这里只有精品| 亚州成人a∨| 亚洲 另类 丝袜 自拍 动漫| 一区e区三| 男人的天堂va| 国产在线强奸视频| 亚卅熟女乱色| 91逼逼女人91| 欧美第一页| 熟女人妻一区二区三区免费看 | 国产超碰| 国产精品成人蜜臀AV在线| 国产亚洲99久久精品| 国产天天骚| 超碰在97| 中文字幕在线观| 人人贴人人摸| 99re在线观看| 青青草啪啪网| 男人的天堂久久| 精品人成视频在线观看| 国产精品久久久久久片| 久操视频免费在线观看| 学生妹天天看| 日韩成年人性爱视频| 加勒比久久综合网高清| 亚洲欧美大| 欧美综合网1| 欲香欲色| 日韩国产中文字幕| 青青国产在线拍揄自揄拍| 久久伊人东京热| 亚洲 日本 国产 综合| 五月丁香啪| 天天综合网~91综合网| 欧美激情综合| 这里都是精品在线观看| 国产精品suv一区| 啪啪自拍九九综合| 亚洲最新a在线观看| 色哟哟-国产专区| 国产白丝网站| 亚洲最大的综合性av| 亚洲美欧999| 春色91| 超碰成人人人爽人人爽| 国产AV超爽| 美女诱惑在线一区| 东北女人操逼| 99视频内射三四| 久久99深爱久久99精品| 在线观看不卡一区二区三区| 亚洲色图激情小说| 91白虎| 强奸乱伦av电影| 国产精品视频| 无码直播久久久| 一本一道vs波多野结衣| 国产精品网站www| 女上位精品在线| 老熟女搡BBBB搡BBBB视频| 亚洲 图片 综合91| 熟女少妇视频| 最近的最新的中文字幕视频| 久久久久久少妇| 国产精品嫩草久久久久| 91撸色网 玖玖网 欧美| 亚洲人妻在线精品| 亚洲宅男天堂| 99少妇内射| 你懂得91| 天天色综合影视网| 久久在线观看免费视频| 午夜精品99久久久久传媒| 亚洲欧美洲综合| 99超级碰免费视频| 国产精品另类| 色色婷婷五月天| 青青草中出视频| 亚洲AV无码黄色强奸| 久久草视频污视频| 一起草日韩| 亚洲熟女一区| 久久久久九九九九| 狼天天狼天天大香蕉| 清纯唯美亚洲综合| 人妻久热在线| www.99色| 啊啊啊不要啊啊受不了了视频在线| 日韩电影中文字幕| 久久综合激情| 中文不卡视频| 日韩pv中文| 91免费看一区二区三区| 探花一区在线| 五月天婷婷社区| 啊啊啊啊一区| 操国产高清| 欧美狠狠鲁| 中文字幕亚洲永久精品| 九九热免费国产视频婷婷伊人五月 | 白嫩少妇| 欧美97在线观看| 91精品女厕偷拍视频| 99国产精品人妻人伦| 男女一进一出视频久久| 亚洲激情 欧美色图| 国产精品探花色| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 人妻精品视频一区二区| 清纯唯美综合亚洲| 啊啊啊啊嗯嗯嗯用力好爽| 黄色无码高清黄色无码网站| 天美精品一区二区三区四区在线观看| 亚洲熟女av中文字幕| 99re这里只有精品3| 五月天伊人网| 中文字日本乱码| 91快色色色色色| 97 九色| 精品国产肉丝袜在线拍国语| 2019天天干| 夜夜骑天天燥| 3p国产欧美99热| 欧美狠狠| 超碰久久网| 超碰av人人人| 久久久久亚洲AV无码专区少妇| 久久人妻97久久久久久久| 波多野结衣被操50分钟免费视频| 亚洲男人的天堂AV| 亚洲强奸乱伦影视网| 欧美综合另类| 色娱乐色呦呦夜夜夜夜av| 婷婷色导航| 日韩无码服务区| 亚洲欧美精品福利在线| 黄片免费日韩| 欧美大香蕉97| 国产欧美一区激情交| 桃花色综合影院| 一二区在线观看视频| 一区二区三区网站日日骚| 国产操偷| 国产毛片片精品天天看视频| 精品射1999| 麻豆啪啪啪视频| 最新无码国产| www男人天堂| 97精品国产手机| 天天色香欲综合网| 国产精品成人蜜臀AV在线| 快播久久人人aV| 九月丁香综合网| 久一区久久蜜桃| 九九综合久久| 国产精品自在线发布| 久思思热视频在线观看| 色娱乐色呦呦夜夜夜夜av| 国产一区二区三区久久久精品| 在线国产探花| 天堂亚洲欧美| 青娱乐av在线| 人人操人人干网页| 啊啊啊啊啊啊啊啊啊在线观看| 一区二区三| 综合av影片| 看日韩美女二区三区免费操逼视频| 欧美极品少妇| 色五月首页| 蜜臀视频网站| 色九九综合AV| 中文字幕日韩综合| 欧美熟妇成人一区二区| 91色伦综合| 午夜男女爽爽爽在线视频 | 人人妻人人爽人人精品| 9.1小视频| 男人的天堂久久狠| 亚洲男人天堂视频| 精品妇女一区二区三区| 久久大香蕉手机高清| 神马精品视频| 玖玖综合色| 日本大香蕉| 亚洲一区二区 麻豆传媒| 色呦色呦色精品| 91激情综合| 日韩成人精品中文字幕| 欧美激情久操网| 人妻第一页| 久久久人体| 91精品女厕偷拍视频| 中文字幕第二页| 欧美日韩另类在线| 超碰 另类 欧美| 久久久999日本大片| 少妇高潮特黄A片| 亚洲色图欧美色图日韩色图| 久久透逼视频| 天天综合色图| 亚洲婷婷综合网| 青青草毛片| 91综合色| 亚洲中文字幕熟女| 在线a亚洲视频播放在线| 99热在线观看| 婷婷久久五月综合激情| 亚洲啪啪综合?v一区综合精品区| 亚洲男人天堂2012| 欧美色997| 一区二区 电影 亚洲| 99www.bibizy香蕉资源国产一区二区三区高清| 在线人妻熟女一区二区三区四区五区| 天堂中文资源在线bt| 性爱边摸边日免费AV| 亚洲色色探花| 一级久久性爱视频| 蜜桃无码AV一区二区| 欧美精品自慰系列寂寞少妇| 五月天黄色激情视频| 日本潮催一卡操| 亚洲无码 国产无码| 欧美18老人禁| 国产精品ww久久| 亚洲AV无码乱码| 免费一级黄色录像影片| 麻花传媒免费网站在线观看| 玖玖玖玖精品国产剧情| 高清无码久操视频| 99re国产精品视频| 日美免费黄片| 北约熟女超碰| 久久av成人无码免费| 乱伦熟女区| 2021国产成人精品久久| 日韩强奸av| 欧美日本中字另类在线| 黄片无码在线制服| 这里只有精品视频在线| 天天日老熟妇| 一区二区视频你懂的| 日本不卡卡一区| 日韩精品作爱导航| 欧美一区二区三区成人性生活| 日日天天久久啊啊aaa| 日本五十路在线| 亚洲在钱| 亚洲九九九九| 色欲无码人妻日韩欧美精品| 丁香九月激情啪| 五月天婷婷综合网| 亚洲日韩美国人妻| 亚洲精品九九九| 另类亚洲一区二区三区| 搡老女人老91二区| 欧美色图 人妻| 国产精品肉丝自拍| 精品国产乱码久久久久久影片| 漂亮人妻被强中文字幕hd| 偷拍片久久| 99re在线视频这里只有精品| 欧美激情亚洲色图| 黄呦呦在线| 欧美色图自拍| 亚洲午夜福利在线影院| 蜜臀aV午夜一区二区三区| 新婚人妻扶着粗大强行坐下| 色香欲天天天天综合色| 国产真实野战在线视频| 96精品一区| 蜜桃色色网站视频三区| 欧美少妇色图| 亚州色站 日韩电影| 看大黄色大片原件| 色亚州人久干视频在线观看免费版| 超碰99在线| 中文一区二区婷婷视频| 强奸乱伦AV网址| 日日干夜夜骑| 内射日韩大臀美女| 久思思热视频在线观看| 国产一区二区精品在线视频| 色婷婷五月天| 日韩三A大片在线观看| 大香蕉之青青草原| 男人的天堂网免费| 亚洲av国产av综合av卡| 操91| 久草福利在线资源站| 91久久国产综合精品| 全免费a敌肛交毛片免费| 欧美激情1区| 九九九草| Av色五月| 大香网站| 国产精品视频91久久| 俺去啦自拍| 久久久久骚| 久久激情视频| 都市久久精品激情亚洲| 熟女91网站| 国产一区二区精品在线视频| 日韩美一区| 99色天堂| 日操粉逼逼| 中文字幕一区二区免费在线| 亚洲午夜蜜臀| 一牛一区二区三区久久| 日韩美脚一区二区网站| 国产激情久久久| 男人高清无码一区二区| 亚洲一区在线观看欧洲| 综合夜夜| 婷婷激情四射| 玖玖资源视频一区二区三区| 老汉网| 一区二区 日韩 欧美 国产 传媒| 在线中文字幕| 久热精品在线国产| 丁香色狠狠色综合久久小说| 99精品网站| 国产乱弄免费在线视频。 | 果冻传媒A片麻豆熟妇人妻| 中文字幕女同在线| #NAME?| 中文字幕神马久久| 亚洲综合99999| 久久精9| 蘋果手機免費看成人Av| 久久一二三四不卡| 欧美 亚洲 综合 制服 另类| 操美女高潮抽搐白浆| 国产免费一区在线观看| 欧美性爱系列| 一二三区在线| 欧美日韩高潮喷水91| 天天综合色| 一区二区三区日韩欧美| 天天看特黄的免费网站| 2024人人操人人摸| 很黄很色的视频在线观看| 奇米四色影视777久久久| 乱伦Av网| 天天操狠狠日夜夜干超碰撸com视频在线观看| 无码久久国产| 天天躁日日躁成人字幕aⅴ| 欧美性爱三区二区| 噜噜噜无码AV一级一级久久影院| 久热精品在线国产| 国产 无码 一区二区| 亚洲福利中文字幕在线| 国产精品熟女AV中文字幕在线播放| 亚洲中文字幕三级在线| 天天色播| 热久日综合| 深夜激情| 国产精品久久久午夜夜伦鲁鲁| 懂色AV中文| 久久久久极品| 思思视频免费看网站| 四虎免费在线播放| 亚洲国产精品99久久久| 日本操逼视频导航| 啪啪啪综合网| 26uuu国产成人综合| 日本熟妇人妻中出视频| 欧美亚洲玖玖玖| 99蜜月精品久久| 人人搞人人插人人操| 欧美日韩操逼嗦吊| 伊人 俄罗斯 a v| 97超碰欧美手机| 国产精品无码AV网站| 神马久久中文字幕| 久久久久久久97| 超碰免费人人| 男人的天堂久久狠| 亚洲电影中字一区二区| 无码免费一区二区三区啪啪| 欧美黑人猛交春色影视大全| 很很很很操| 国产av强奸美女| 亚洲中文字幕乱码无码一区二区| 91精品成人| 超清中文乱码字幕| av强奸乱轮| 中文字幕超碰CAO| 囯产精品久久久久久久久久梁医生 | 亚洲 综合 欧美| 91精品操美女| 亚洲av乱伦色图网站| 91激情综合| 久久鲁干| 中文字幕诱惑制服人妻丝袜美丝袜美| 成熟熟女国产精品一区二区| 亚洲精品一区二区精华| 青青草九九九九九| 97久久网| 91 丝袜在线| 欧美一级AAAAAAA| 日韩AV片| 国产乱伦视频污| 丰满少妇一区二区三区四区观看| 性欧美精| 岛国大片在线观看网站入口| 日韩三级一区| 明星性猛交ⅹxxx乱大交| 亚洲最大黄网| 亚洲天天操| 久久111| 强奸乱伦Av网| 青苹果影院男人的天堂| 少妇熟女1区2区3区| 色99在线| 人妻夜夜爽天天爽三区麻豆AV网站| 国内自拍 日韩激情 99| 素人伊尹大香蕉免费下载视频| 蜜乳中文字幕a在线| 亚码人妻| 91久久久久久久| 国产v片在线免费观看| 中文字幕av丝袜| 国产玖玖| 殴美色网| 国产女人成人精品视频| 在线观看啊啊啊啊啊| 深夜啪啪啪视频免费| 精品国产人成在线| 久久伊人影院| 日韩图区| 久久久爆乳翘臀一线天伦理视频| 日天天九九天堂666| 丝袜美腿制服人妻二区中文字幕| 日韩精品大香蕉伊人在线| 9久热| 亚洲二区精品在线观看 | 亚洲在线欧美| 九九九久| 国产美女91视频| 青青草视频久久| 亚洲欧综合另类无码一区| 亚州综合网| 香蕉国产97| 久久精品视频一区三区小泽玛利亚| 在线免费观看日韩一区| 色噜噜国产精品视频一区二区| 精品国产乱码久久久久久久久1| 欧美色涩| 91欧美情色| 96精品一区| 操死我了嗯嗯嗯| 欧美亚洲美少妇一区二区| 婷婷六月天| 99精彩视频| 无码免费精品高清| 欧美黑人精品在线播放| 91在线精品一区二区三区| 综合网91| 97亚洲在线| 国产女人视频三四五区| 嗯啊不要啊啊在线观看视频| 超碰97精品在线| 大香蕉碰碰| 精品无码久久久| 免费观看有码高清视频| 日韩另类色图| 国产成人精品必看| 日韩黄片影院| 日韩欧美成人午夜福利| 久久久亚洲Av| 性爱Av免费| 天天躁日日躁XXXXYY| 成人免费福利在线观看| 婷婷亚洲五月***久久| h无码动漫在线观看| 欧美在线观看综合国产| 国产女人91精品嗷嗷嗷嗷| 色99在线| 久久香蕉国产传媒一区剧情天美| 国产欧美一级在线观看| 国产欧美岛国精品一区| 欧美精品999| 亚洲精品男人的天堂| 亚欧国产无码精品在线| 在线国产探花| 亚洲成熟国产精品美女| 国产a级午夜毛片| 老熟女91av| 蜜屁Av| 久久久91| 无码人妻精品一区二区三区99不卡| 女人综合网| 青青草原av| 亚洲欧洲无码bt精品合集| 91亚洲欧美激情| 亚洲第一页色网| 亚洲亚洲亚洲天堂天堂| 日本欧美中文字幕| 95自拍视频在线观看| 男人的天堂亚洲| 亚洲日产专区婷婷| 欧美色乱| 日本天天操| AND人妻系列| 中文字幕一品色图| 天天视频黄| 国产女人极品高潮毛片| 日本免费一区二| 少妇的嫩逼图片| 天天色,天天干,天天干| 97舔舔| 中出20p| 国产一级操B视频| 天无日色综合| 人妻少妇精品久久久久久| 樱花蜜乳av| 青苹果影院男人的天堂| 国产噜噜噜噜噜久久久久久久久| 极品色电影院| 日本熟女不卡视频| 久久久爆乳翘臀一线天伦理视频| 18一区二区三区| 在线播放欧洲免费av| av草草在线电影| 600国产精品视频| 欧美黄色片AAAAA| 九九九九免费高| 夜夜欢天天干| 自拍偷拍2025在线观看| 智利AV在线网| 久久国产乱子伦精品免费女人| 5278欧美一区二区三区| 亚洲人妻熟妇三十三区| 久久久久久中文| av国产无码| 超碰97.com| 97色色婷婷| 骚货操死你| 五月丁香六月激情| 超碰色97| 97视频网站在线观看| 日韩一区二区精彩视频| 亚洲古典另类欧美在线| 91熟女少妇| 免费一级欧美片片线观看| 超碰99在线| 亚洲色图激情小说| 亚洲欧美国产中文视频| 国产精品成人在线| 国产熟女一区二区| 狼人综合婷婷激情四射 | 清纯唯美第一页| 成人欧美一区二区三区黑人一| 亚洲人久久久网| 一区在线观看中文字幕| 亚洲97超碰| 青青草精玖玖69精品| 大香蕉一线视频| 91精品国产91久久青草| 偷看洗澡一二三区美女| 天天综合网在线91| 欧亚乱色熟一区二区三四区| 免费一级特黄特色大片在线观看看| 亚洲成人在线播放| 色视频蜜乳| 97se亚洲综合自| 99青青草国产视频|