亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Java異常處理全攻略:體系、機(jī)制、性能與排查實(shí)戰(zhàn)

Java異常處理全攻略:體系、機(jī)制、性能與排查實(shí)戰(zhàn) 寫(xiě)Java也寫(xiě)了十個(gè)年頭了異常處理這個(gè)話題每年都會(huì)翻出來(lái)聊但每次看新人的代碼還是會(huì)頭皮發(fā)麻。有的把異常當(dāng)擺設(shè)catch完打一行日志就當(dāng)無(wú)事發(fā)生有的把異常當(dāng)萬(wàn)能藥任何業(yè)務(wù)分支都用拋異常解決。異常處理不是Java語(yǔ)法里最難的那一坨但絕對(duì)是最能看出一個(gè)程序員功底的地方也是面試必問(wèn)、上線必踩的環(huán)節(jié)。這篇內(nèi)容我打算系統(tǒng)地把Java異常處理從頭到尾捋一遍從異常體系本身到底層機(jī)制從實(shí)戰(zhàn)策略到性能考量再到高頻問(wèn)題的排查思路。無(wú)論你是剛學(xué)Java準(zhǔn)備面試的在校生還是工作中時(shí)不時(shí)被線上異常困擾的初級(jí)開(kāi)發(fā)甚至是想幫團(tuán)隊(duì)定一套異常規(guī)范的組長(zhǎng)這篇都能給你一些可以直接用的東西。1. 異常體系全景先搞清楚Java到底把“錯(cuò)誤”分成了幾類很多初學(xué)者看了不少異常處理的代碼但問(wèn)起Throwable和Exception、Error之間的關(guān)系還是說(shuō)不明白。這個(gè)搞不清楚后面設(shè)計(jì)異常和處理策略都會(huì)跑偏。1.1 Throwable家族不要把Error當(dāng)Exception來(lái)處理先看最頂層的Throwable這是Java里所有“可以被拋出”的對(duì)象的共同父類下面分了兩大派系Error和Exception。Error表示的是JVM層面的嚴(yán)重問(wèn)題比如OutOfMemoryError、StackOverflowError、NoClassDefFoundError。這類問(wèn)題基本不是你的代碼能“捕獲后恢復(fù)”的捕獲了也沒(méi)用因?yàn)槌绦虼藭r(shí)大概率已經(jīng)處于半癱瘓狀態(tài)。所以常規(guī)處理原則就一句話不要在代碼里捕獲Error也不要去處理它讓它直接冒泡讓JVM和應(yīng)用進(jìn)程一起完蛋然后靠監(jiān)控報(bào)警去拉起來(lái)。我還有一點(diǎn)要特別提醒catch (Throwable t)這種寫(xiě)法在大項(xiàng)目里幾乎等于定時(shí)炸彈。Throwable是連Error一起捕獲的有些監(jiān)控框架會(huì)用它來(lái)做兜底記錄但如果你在業(yè)務(wù)代碼里寫(xiě)這種捕獲就等于把OOM也一并吞了后面出現(xiàn)詭異的內(nèi)存問(wèn)題排查起來(lái)非常痛苦。Exception是程序運(yùn)行中可恢復(fù)、可處理的問(wèn)題比如文件找不到、網(wǎng)絡(luò)超時(shí)、參數(shù)不合法。這才是我們?nèi)粘R攸c(diǎn)關(guān)注的。1.2 受檢異常與非受檢異常語(yǔ)法規(guī)定背后的歷史包袱Exception又進(jìn)一步分成兩類受檢異常Checked Exception和非受檢異常Unchecked Exception。受檢異常是編譯器強(qiáng)制要求你處理的典型就是IOException、SQLException。如果你調(diào)用了一個(gè)會(huì)拋受檢異常的方法你就必須“聲明throws”或者“try-catch”否則代碼編譯不過(guò)去。這個(gè)設(shè)計(jì)是Java早期的理念認(rèn)為程序應(yīng)當(dāng)對(duì)可預(yù)見(jiàn)的錯(cuò)誤顯式處理。但后來(lái)的實(shí)踐表明這個(gè)設(shè)計(jì)過(guò)度理想化了——很多時(shí)候你根本沒(méi)法在當(dāng)前位置處理這個(gè)異常卻還是被逼著寫(xiě)了一堆try-catch最后只是把異常包一層又拋出去純屬增加噪音。非受檢異常就是RuntimeException的子類以及Error。這類異常編譯器不管你可以選擇不捕獲。NullPointerException、IllegalArgumentException、ClassCastException、IndexOutOfBoundsException都屬于這一類。它們代表的通常是編程邏輯錯(cuò)誤或前置條件未滿足本來(lái)就該在代碼層面提前規(guī)避而不是依賴運(yùn)行時(shí)的異常處理機(jī)制。有個(gè)非常關(guān)鍵的區(qū)別需要理解Spring事務(wù)默認(rèn)只在RuntimeException非受檢時(shí)回滾受檢異常默認(rèn)不回滾。這個(gè)特性讓后來(lái)絕大多數(shù)Java框架更傾向于使用RuntimeException。所以現(xiàn)在寫(xiě)Java新代碼里基本不推薦自定義受檢異常除非你明確知道調(diào)用方必須處理。1.3 自定義異常應(yīng)該怎么選父類自定義異常是項(xiàng)目中不可避免的。你總會(huì)需要一個(gè)BizException或者BusinessException來(lái)表示業(yè)務(wù)規(guī)則被違反。我的建議是業(yè)務(wù)異常統(tǒng)一繼承RuntimeException。理由主要有三個(gè)。第一因?yàn)镾pring事務(wù)默認(rèn)回滾不會(huì)出現(xiàn)事務(wù)提交了一半結(jié)果的情況。第二不用在每個(gè)業(yè)務(wù)方法上逼著調(diào)用方聲明throws代碼更干凈。第三可以通過(guò)異常類型做統(tǒng)一攔截比如在ControllerAdvice里統(tǒng)一處理成錯(cuò)誤碼返回給前端。繼承層次不要太深統(tǒng)一一個(gè)頂層業(yè)務(wù)異常類就夠了。如果確實(shí)需要細(xì)分可以考慮用異常內(nèi)部的錯(cuò)誤碼枚舉來(lái)區(qū)分而不是搞出一堆異常子類。我見(jiàn)過(guò)有些項(xiàng)目里業(yè)務(wù)異常子類幾十個(gè)維護(hù)起來(lái)非常麻煩新增一個(gè)錯(cuò)誤場(chǎng)景就要新建一個(gè)類。2. 核心機(jī)制解析try、catch、finally和try-with-resources的深層邏輯異常處理語(yǔ)法本身不復(fù)雜但真正用好的不多。這一章我重點(diǎn)拆解幾個(gè)容易出問(wèn)題的機(jī)制細(xì)節(jié)。2.1 try-catch-finally執(zhí)行順序與finally陷阱正常場(chǎng)景下try塊里代碼順序執(zhí)行一旦拋出異常直接跳到對(duì)應(yīng)的catch塊無(wú)論是否發(fā)生異常finally塊都會(huì)執(zhí)行。這個(gè)大家都懂但下面幾個(gè)邊界場(chǎng)景很容易踩坑。第一個(gè)陷阱是finally里的return。如果try或catch里有return語(yǔ)句而finally里也有return那么finally里的return會(huì)覆蓋前面的返回值。更離譜的是如果finally里拋出了異常try和catch里原本的異常會(huì)被完全掩蓋。這類代碼在code review時(shí)一定要直接打回finally塊里只做清理資源這類工作不要return、不要throw。第二個(gè)陷阱是System.exit()。如果在try塊里調(diào)用了System.exit()JVM進(jìn)程直接終止finally塊不會(huì)執(zhí)行。有些同學(xué)面試會(huì)被問(wèn)“finally一定執(zhí)行嗎”標(biāo)準(zhǔn)答案就是要排除JVM退出和線程中斷這類場(chǎng)景。第三個(gè)陷阱是catch的順序。多個(gè)catch塊時(shí)子類異常必須放在父類異常前面否則編譯器直接報(bào)錯(cuò)。比如catch (IOException e)必須在catch (Exception e)前面。道理其實(shí)很簡(jiǎn)單異常匹配是自上而下找第一個(gè)能匹配的catch塊如果先寫(xiě)了父類子類異常就被父類“截胡”了。try { // 業(yè)務(wù)代碼... } catch (FileNotFoundException e) { // 更具體的處理邏輯 } catch (IOException e) { // 更通用的IO處理邏輯 }2.2 try-with-resources資源關(guān)閉的標(biāo)準(zhǔn)答案如果你還在用finally去關(guān)閉流或數(shù)據(jù)庫(kù)連接我建議把這段看完。Java 7引入的try-with-resources才是資源關(guān)閉的標(biāo)準(zhǔn)姿勢(shì)它要求資源類實(shí)現(xiàn)AutoCloseable接口InputStream、OutputStream、Connection這些都實(shí)現(xiàn)了。讓我用一個(gè)非常實(shí)際的多資源場(chǎng)景來(lái)演示。以前要正確關(guān)閉兩個(gè)流必須寫(xiě)嵌套的try-finally還得處理各自的異常代碼又長(zhǎng)又容易出錯(cuò)// 推薦寫(xiě)法try-with-resources多個(gè)資源用分號(hào)分隔 try (InputStream input new FileInputStream(input.txt); OutputStream output new FileOutputStream(output.txt)) { byte[] buffer new byte[1024]; int len; while ((len input.read(buffer)) ! -1) { output.write(buffer, 0, len); } }你不需要手動(dòng)close編譯器會(huì)自動(dòng)生成關(guān)閉邏輯而且關(guān)閉順序是逆序的后聲明先關(guān)閉對(duì)應(yīng)先開(kāi)output再關(guān)output再關(guān)input。還有一點(diǎn)做得非常講究如果try塊和close方法都拋出了異常Java會(huì)優(yōu)先保留try塊里的原始異常同時(shí)把close階段拋出的異常作為“被抑制異常”掛到原始異常上。你可以用getSuppressed()方法拿到它們。這樣排查問(wèn)題時(shí)不會(huì)被莫名其妙的關(guān)閉異常干擾主方向這個(gè)設(shè)計(jì)值得手動(dòng)點(diǎn)贊。2.3 throw與throws異常是怎么傳播上來(lái)的throws是方法聲明的一部分表示“我這個(gè)方法可能拋出這個(gè)異常調(diào)用方自己要心里有數(shù)”。throw則是主動(dòng)拋出一個(gè)異常實(shí)例。兩者動(dòng)作不同但經(jīng)常在一段代碼里配合出現(xiàn)。傳播規(guī)則是這樣的異常從最先發(fā)生的地方逐層往外拋如果每一層都不捕獲最終會(huì)到達(dá)線程的頂層處理器。對(duì)于主線程異常會(huì)直接導(dǎo)致程序退出并打印堆棧。對(duì)于線程池里的線程情況要復(fù)雜一些這個(gè)后面會(huì)單獨(dú)說(shuō)。有個(gè)最佳實(shí)踐要強(qiáng)調(diào)在做異常轉(zhuǎn)換和包裝的時(shí)候一定要保留原始堆棧。比如你寫(xiě)throw new BizException(庫(kù)存不足, e);這個(gè)構(gòu)造方式會(huì)把e作為cause傳進(jìn)去。而你寫(xiě)成“手動(dòng)拼接消息”的話throw new BizException(庫(kù)存不足: e.getMessage());就丟失了原始異常的完整堆棧排查問(wèn)題時(shí)幾乎等于廢掉了一條重要線索。所以永遠(yuǎn)記住cause參數(shù)必須傳這是異常處理最基本的職業(yè)素養(yǎng)。3. 實(shí)戰(zhàn)中的異常處理策略什么時(shí)候捕獲、什么時(shí)候拋出、什么時(shí)候自定義機(jī)制明白了真正難的是策略。異常處理本質(zhì)上是“在哪里處理最合適”的問(wèn)題處理早了破壞封裝處理晚了又容易堆滿日志。3.1 捕獲粒度別在底層捕獲你處理不了的異常新手最常見(jiàn)的錯(cuò)誤是在方法內(nèi)部把異常catch掉再打一行日志然后繼續(xù)往下走。這種“假裝處理”的代碼是最毒的因?yàn)槌绦蚍祷刂祷蚝罄m(xù)邏輯很可能已經(jīng)處在一個(gè)錯(cuò)誤狀態(tài)但表面上一片安靜等到數(shù)據(jù)錯(cuò)亂了才顯示出問(wèn)題。核心原則是在當(dāng)前這個(gè)層級(jí)能做出有效應(yīng)對(duì)才捕獲如果不能就往上拋。什么叫有效應(yīng)對(duì)比如你寫(xiě)的是接口的入口層那你可以捕獲業(yè)務(wù)異常并轉(zhuǎn)換為約定的錯(cuò)誤碼返回給前端比如你寫(xiě)的是定時(shí)任務(wù)批處理那你可以捕獲單條數(shù)據(jù)的異常并標(biāo)注這批次里哪些數(shù)據(jù)失敗繼續(xù)處理后面的數(shù)據(jù)。這些都是有效應(yīng)對(duì)。如果只是中間層做數(shù)據(jù)組裝、調(diào)用外部服務(wù)、讀文件你沒(méi)有能力決定“失敗后對(duì)用戶說(shuō)什么”那就別捕獲讓異常繼續(xù)往上走由統(tǒng)一出口處理。3.2 自定義業(yè)務(wù)異常與錯(cuò)誤碼別一股腦拋Exception自定義業(yè)務(wù)異常的核心價(jià)值是讓錯(cuò)誤信息結(jié)構(gòu)化。一個(gè)合格的自定義異常要能表達(dá)三層信息發(fā)生了什么、影響誰(shuí)、具體是哪個(gè)上下文。我常用的做法是定義一個(gè)帶錯(cuò)誤碼枚舉的BizException再加一個(gè)字段用來(lái)攜帶上下文數(shù)據(jù)。比如一個(gè)導(dǎo)入訂單的功能拋出異常時(shí)除了錯(cuò)誤碼還可以把失敗的那一行數(shù)據(jù)一起帶上。這樣統(tǒng)一處理時(shí)能直接把“第xx行數(shù)據(jù)不合法”這樣的提示返回給前端。public class BizException extends RuntimeException { private final ErrorCode errorCode; private final String context; public BizException(ErrorCode errorCode, String context) { super(String.format(%s: %s, errorCode.getMessage(), context)); this.errorCode errorCode; this.context context; } // getter省略... }這里有一個(gè)細(xì)節(jié)異常message要包含足夠的參數(shù)方便日志排查。我經(jīng)??吹接腥藪伋霎惓r(shí)只寫(xiě)“參數(shù)錯(cuò)誤”日志里根本不知道是哪個(gè)參數(shù)錯(cuò)了、值是多少。能把參數(shù)值拼進(jìn)異常消息就能省掉很多日后的“考古工作”。3.3 異常日志規(guī)范同樣一段代碼日志價(jià)值天差地別異常處理和日志是伴生關(guān)系處理得再好日志打不好線上問(wèn)題一樣抓瞎。先說(shuō)不好的寫(xiě)法。第一種是 catch 后只打一行e.getMessage()然后當(dāng)作沒(méi)事。第二種是log.error(error)不帶任何異常對(duì)象。第三種是printStackTrace()把堆棧打到標(biāo)準(zhǔn)輸出一旦線上系統(tǒng)把stdout重定向到別的文件你根本不知道日志去哪了而且這種寫(xiě)法在分布式系統(tǒng)里完全無(wú)法和請(qǐng)求鏈路關(guān)聯(lián)。推薦的做法是用日志框架的占位符并且在最后一個(gè)參數(shù)傳入異常對(duì)象這樣框架會(huì)自動(dòng)打完整堆棧try { orderService.createOrder(orderDTO); } catch (BizException e) { log.error(創(chuàng)建訂單失敗, userId{}, orderNo{}, userId, orderNo, e); throw e; }這段日志的價(jià)值在于不但知道“創(chuàng)建訂單失敗”這個(gè)事實(shí)還有userId、orderNo這種排查問(wèn)題的錨點(diǎn)最后還有完整異常堆棧。如果業(yè)務(wù)里還接入了traceId那就更完美了一個(gè)鏈路上下游的異常都能串起來(lái)。4. 性能與并發(fā)場(chǎng)景異常處理不能拖垮系統(tǒng)“性能”這個(gè)詞大部分人是不會(huì)第一時(shí)間和異常處理聯(lián)系在一起的但等你的系統(tǒng)上了量級(jí)異常的性能開(kāi)銷就會(huì)變得非常明顯。4.1 為什么異常創(chuàng)建比普通對(duì)象創(chuàng)建貴異常的昂貴之處不在try-catch本身而在throw new的那一刻。JVM在創(chuàng)建異常對(duì)象時(shí)要填充線程當(dāng)前調(diào)用棧也就是抓取棧幀快照這個(gè)操作比普通new一個(gè)Object高出兩三個(gè)數(shù)量級(jí)。更致命的是如果你在循環(huán)里頻繁拋出異常這個(gè)開(kāi)銷會(huì)被放大幾十倍。所以實(shí)戰(zhàn)里有一條鐵律不要用異常做控制流。我見(jiàn)過(guò)有人用NumberFormatException來(lái)判斷字符串是不是數(shù)字用ArrayIndexOutOfBoundsException來(lái)檢測(cè)數(shù)組結(jié)束這些都屬于典型的錯(cuò)誤示范。正確做法是直接用正則、Character.isDigit()或顯式判斷。// 反例異常控制流 try { int val Integer.parseInt(str); } catch (NumberFormatException e) { // 認(rèn)為不是數(shù)字 }如果你確實(shí)要對(duì)所有字符串做轉(zhuǎn)換并容忍非法值可以在高頻路徑上用“前置校驗(yàn)parse”組合或者干脆在外面catch但內(nèi)部已經(jīng)限定了這個(gè)方法的調(diào)用頻率。總之異常是給“不該發(fā)生但發(fā)生了”的情況準(zhǔn)備的不是給“預(yù)期會(huì)發(fā)生”的事情準(zhǔn)備的分支邏輯。4.2 批量處理中的異常隔離一條壞數(shù)據(jù)不應(yīng)該帶崩整批批處理是異常設(shè)計(jì)最容易失衡的場(chǎng)景。一條臟數(shù)據(jù)拋個(gè)異常如果沒(méi)處理好整批任務(wù)戛然而止之前處理完的幾千條全部白做。但如果每條都捕獲、打印堆棧那日志量和CPU開(kāi)銷又不劃算。正確設(shè)計(jì)思路是把單條捕獲和失敗收集結(jié)合起來(lái)循環(huán)內(nèi)逐條捕獲收集錯(cuò)誤到List不中斷批量循環(huán)外根據(jù)錯(cuò)誤數(shù)量決定是繼續(xù)還是告警。同時(shí)日志層面要做降噪相同錯(cuò)誤碼只記錄一次完整堆棧后續(xù)只計(jì)數(shù)。ListString failMessages new ArrayList(); for (OrderDTO dto : batchList) { try { processOne(dto); } catch (BizException e) { failMessages.add(訂單 dto.getOrderNo() 失敗: e.getMessage()); } } if (!failMessages.isEmpty()) { alarmService.sendBatchWarn(batchId, failMessages.size(), failMessages.stream().limit(20).collect(Collectors.toList())); }還有個(gè)經(jīng)驗(yàn)批處理里最怕的是“無(wú)差別異常捕獲”把程序Bug也當(dāng)作業(yè)務(wù)失敗一樣吞掉。我的建議是只catch預(yù)期的BizException和明顯的可恢復(fù)異常對(duì)于RuntimeException跑出來(lái)的程序缺陷應(yīng)該讓它中斷一次打出一個(gè)完整堆棧然后修復(fù)代碼而不是偽裝成一條失敗記錄繼續(xù)跑。4.3 線程池和異步任務(wù)中的異常處理異常不會(huì)自動(dòng)消失只會(huì)自動(dòng)被吃掉用線程池的時(shí)候有個(gè)普遍誤區(qū)以為任務(wù)里的異常會(huì)自動(dòng)像主線程那樣打印出來(lái)。其實(shí)Exception在execute()方式提交的任務(wù)里會(huì)被線程池的run()方法捕獲然后靜默丟棄。也就是說(shuō)你在業(yè)務(wù)代碼里沒(méi)捕獲的異常線上日志里什么都看不到任務(wù)看起來(lái)是“沒(méi)報(bào)錯(cuò)”地消失了。這非常危險(xiǎn)。如果你用ExecutorService的execute(Runnable)提交任務(wù)一定記得給線程池設(shè)置一個(gè)UncaughtExceptionHandler作為全局兜底日志。如果你用的是submit(Callable)任務(wù)里的異常會(huì)被存儲(chǔ)在Future內(nèi)部必須調(diào)用future.get()才會(huì)被重新拋出。所以submit之后最好結(jié)合Future的get結(jié)果統(tǒng)一處理別調(diào)了submit就徹底不管了。ThreadPoolExecutorExecutor pool new ThreadPoolExecutor( 4, 8, 60, TimeUnit.SECONDS, new LinkedBlockingQueue(1000), new NamedThreadFactory(order-async), new ThreadPoolExecutor.AbortPolicy() ); pool.setUncaughtExceptionHandler((t, e) - log.error(線程池任務(wù)異常, thread{}, t.getName(), e));5. 常見(jiàn)問(wèn)題速查與排查技巧實(shí)錄與其把每個(gè)異常類都背一遍不如掌握一套排查思路。我在這一章里把高頻異常整理成一份速查表再結(jié)合真實(shí)案例講講排查鏈路。5.1 高頻異常案例NPE、ClassCastException、IndexOutOfBoundsNullPointerException在所有線上異常里排第一。排查NPE的核心是讀堆棧Java高版本會(huì)精確提示“Cannot invoke xxx because the return value of xxx is null”直接定位是哪個(gè)調(diào)用null了。如果堆棧信息里看不出來(lái)最快的辦法是在IDE里設(shè)置 “NPE breakpoint”開(kāi)啟斷點(diǎn)條件后異常拋出的那一瞬間就能看到當(dāng)前作用域里每個(gè)變量的值。它最讓人頭疼的是各種“偽裝NPE”比如Stream里map中調(diào)用方法返回null后續(xù)reduce直接炸。規(guī)避思路無(wú)非兩個(gè)要么源頭杜絕用Optional Objects.requireNonNull盡早暴露要么在邊界防御對(duì)關(guān)鍵接收對(duì)象做isNull判斷。ClassCastException通常不是“強(qiáng)轉(zhuǎn)錯(cuò)類型”而是類加載器問(wèn)題或泛型擦除帶來(lái)的假象。我遇到過(guò)的情況包括不同jar包帶了同一個(gè)類的不同版本代碼里強(qiáng)轉(zhuǎn)成另一個(gè)ClassLoader加載的版本直接ClassCastException。排查時(shí)除了看堆棧還要看是哪個(gè)ClassLoader加載的這兩個(gè)類。至于IndexOutOfBoundsException常見(jiàn)于遍歷時(shí)刪元素、計(jì)算數(shù)組索引越界處理原則是“用迭代器刪除、無(wú)把握就用for倒序或stream filter”。速查表整理如下異常類型常見(jiàn)誘因排查重點(diǎn)NullPointerException調(diào)用鏈中某個(gè)中間值為null高版本直接看堆棧提示是哪個(gè)方法調(diào)用導(dǎo)致ClassCastException強(qiáng)轉(zhuǎn)類型不匹配、類加載器不一致加JVM參數(shù)打印類加載器確認(rèn)jar版本IndexOutOfBoundsException集合動(dòng)態(tài)修改、索引計(jì)算錯(cuò)誤檢查循環(huán)下標(biāo)、刪除操作方式IllegalArgumentException參數(shù)校驗(yàn)失敗但被忽略看是否進(jìn)入異常控制流的錯(cuò)誤場(chǎng)景OutOfMemoryError堆內(nèi)存泄漏或堆參數(shù)過(guò)小dump堆再分析大對(duì)象、GC Roots引用鏈5.2 用堆棧信息定位問(wèn)題的“Caused by”才是關(guān)鍵排查異常的第一個(gè)動(dòng)作不是看第一行而是看完整的堆棧鏈特別是Caused by后面的部分。尤其在異常被層層包裝后只有追到根因才能真正解決問(wèn)題。我舉個(gè)例子一個(gè)調(diào)用第三方接口的服務(wù)一直報(bào)BizException面上消息是“調(diào)用超時(shí)”。表面看是接口問(wèn)題但繼續(xù)往下翻Caused by是SocketTimeoutException再往下還有一層Caused by是DNS解析超時(shí)。真正要處理的是DNS服務(wù)器速度而不是給接口超時(shí)加長(zhǎng)。如果只看第一層這個(gè)問(wèn)題永遠(yuǎn)解決不了。所以我在團(tuán)隊(duì)里反復(fù)強(qiáng)調(diào)“看堆棧只看到Error Line就開(kāi)始回復(fù)這是最不專業(yè)的排查方式。” 至少要看完整堆棧的caused by鏈。5.3 線上異常排查的完整鏈路traceId 日志級(jí)別 分組告警線上問(wèn)題比本地復(fù)現(xiàn)難得多核心武器是鏈路追蹤和日志。一個(gè)請(qǐng)求從網(wǎng)關(guān)進(jìn)入后都會(huì)由框架生成traceId并塞進(jìn)MDC。這樣一條請(qǐng)求在多個(gè)服務(wù)間的所有日志都帶著同一個(gè)traceId用grep一拉就能還原整條鏈路。異常排查最基礎(chǔ)的操作就是報(bào)錯(cuò)發(fā)生時(shí)先用異常信息里的關(guān)鍵字搜traceId再把這條traceId的所有日志按時(shí)間順序捋一遍。日志級(jí)別這里也要有講究。不要把業(yè)務(wù)異常的ERROR級(jí)別當(dāng)洪水猛獸在批量任務(wù)中一條數(shù)據(jù)失敗是正常情況級(jí)別應(yīng)該用WARN只有整批失敗、服務(wù)不可用、內(nèi)存異常才應(yīng)該用ERROR。不然日志系統(tǒng)里全是ERROR真正嚴(yán)重的問(wèn)題反而不容易區(qū)分。告警這塊我建議按異常類型分組而不是按服務(wù)維度無(wú)腦觸發(fā)。BizException可以單獨(dú)設(shè)置低頻告警NPE和類轉(zhuǎn)換異常這類程序Bug可以整頁(yè)郵件告警Infrastructure異常網(wǎng)絡(luò)超時(shí)、數(shù)據(jù)庫(kù)連接池打滿要走獨(dú)立的高優(yōu)告警通道。6. 團(tuán)隊(duì)規(guī)范與異常處理的長(zhǎng)期修養(yǎng)很多人以為異常處理是“語(yǔ)法技巧”但一個(gè)項(xiàng)目里異常處理好不好更多取決于團(tuán)隊(duì)有沒(méi)有形成一致的規(guī)范。有些原則是靠日積月累沉淀出來(lái)的。6.1 異常處理相關(guān)的團(tuán)隊(duì)規(guī)約寧可少吞不可多寫(xiě)我參與過(guò)的幾個(gè)項(xiàng)目都定了一些異常相關(guān)的規(guī)約核心大致是禁止捕獲異常后不處理、不輸出、不重新拋出。實(shí)現(xiàn)了“處理”就一定要有動(dòng)作。禁止捕獲Exception后只打e.getMessage()不打堆棧。禁止用異??刂茦I(yè)務(wù)流程比如用parse異常當(dāng)校驗(yàn)分支。禁止在循環(huán)中創(chuàng)建、拋出、捕獲異常來(lái)做分支判斷。業(yè)務(wù)異常必須使用統(tǒng)一異常類和統(tǒng)一錯(cuò)誤碼禁止直接拋new RuntimeException(中文提示)。禁止在finally里return或throw這是代碼review必掛項(xiàng)。這些規(guī)約不是教條每條背后都有一次深刻的線上事故或者繁瑣排查的教訓(xùn)換來(lái)的。6.2 從“會(huì)用異?!钡健霸O(shè)計(jì)異常”像設(shè)計(jì)API一樣設(shè)計(jì)你的異常更高一層的異常處理能力是把異常當(dāng)作API的一部分來(lái)設(shè)計(jì)。這就意味著異常類型名要說(shuō)明問(wèn)題本質(zhì)比如OrderExpiredException而不是BizException 105異常message要有可操作性異常里要能帶上下文參數(shù)調(diào)用方要能從異常中知道下一步該怎么處理。比如一個(gè)支付回調(diào)接口拋出的異常類型如果叫PaymentStatusMismatchException里面有orderId、currentStatus、expectedStatus調(diào)用方一看就知道是狀態(tài)流轉(zhuǎn)不對(duì)而不是一頭霧水地再去查數(shù)據(jù)庫(kù)。好的異常設(shè)計(jì)能顯著減少跨部門(mén)扯皮尤其在對(duì)接第三方系統(tǒng)時(shí)異常信息越明確聯(lián)調(diào)效率就越高。6.3 最后再分享一個(gè)真正值錢的經(jīng)驗(yàn)從我個(gè)人經(jīng)驗(yàn)來(lái)說(shuō)排查異常時(shí)最容易犯的錯(cuò)誤是過(guò)度依賴異常本身而忽略了正常路徑下的上下文現(xiàn)場(chǎng)。異常只是“結(jié)果先生留下的通知”真正的問(wèn)題往往發(fā)生在拋異常之前的幾步。比如數(shù)組越界越界只是結(jié)果循環(huán)邊界算錯(cuò)了才是根因校驗(yàn)失敗只是結(jié)果數(shù)據(jù)是怎么被污染的才是根因。所以我現(xiàn)在排查異常時(shí)會(huì)養(yǎng)成一個(gè)習(xí)慣不僅看異常堆棧還要順著日志往前翻30秒看看異常發(fā)生前這個(gè)請(qǐng)求都經(jīng)歷了什么。絕大多數(shù)詭異問(wèn)題的答案其實(shí)都在那段“看似正?!钡娜罩纠?。這也是我把異常處理定義為“長(zhǎng)期修養(yǎng)”的原因——它不是幾個(gè)語(yǔ)法點(diǎn)而是一整套排查問(wèn)題、設(shè)計(jì)代碼的思維方式。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久草精品一区| 亚洲av性爱电影| 精品无码一区二区三区| 欧美黄色大片在线观看| 亚洲少妇在线影音| 日本精品一级二级三级| 全国男人天堂网| 天天干天天舔| 久超碰在| 久久专区| 国产 码在线成人网站| 日本淫穴在线| 日韩欧美午夜视频在线| 都市激情人妻一区二区青青操视频| 夜夜躁狠狠躁日日躁av| 男人天堂黄片| 日韩美女久久一区二区三区| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 99热只有这里有精品| 欧美999999| 日本一区二区三区四区五区六区七区八区九区 | 一区操逼| 97超碰巨乳| 中文字幕第9页萱萱影音先锋| 精品人妻1区| 精品性爱一二三区| 国产无遮挡| 99re99| 激情专区综合| 四虎影视永久在线观看精品免费网站| 亚洲欧美97| 日逼视频日本| 五月天久久婷婷亚洲| 春色91| 婷婷色中文字幕| 丰满的三级少妇欧美久久久| 国产精品午夜精品| 伊人女女资源在线观看| 在线免费试看60秒| 久久久亚洲欧美综合| 在线啊啊啊啊| 一本大道不卡一二三区| 久久宗合亚洲| 天天做日日做天天欢。| 日韩欧美蜜桃精品久久中文字幕久久 | 亚洲国产高清福利视频| 97亚洲综合在线| 91neishe| 国内毛片无遮挡国产| 欧美人妻精品| 国产欧美日本亚洲精品| 98福利在线视频| 八人操人人摸人人看| 成人一级二级| 丝袜AV一二三区| 丁香婷婷五月| 易易A毛视频| 亚洲五区熟女| www网站黄| 欧美 亚洲 在线| 亚洲天堂自拍| 性饥渴少妇av无码毛片| 91爱欧美| 久久久久久午夜男人的天堂| 日本中文熟女视频| 久久噜噜噜精品国产亚洲综合| 免费1级a做爰片观看| 韩日欧亚a级| 人妻少妇久久| 国产兽交视频在线播放| 无码外流操逼视频| 另类成人首页一区| 国产原创自拍| 无码乱人伦中文视频| 日本在线15p| 天天操夜夜操| 国内亚洲精彩视频在线| 国产精品欧美在线观看| 欧美日韩婷婷中文| 丁香色五月 97干| 91亚洲电影| 午夜精品久久久久| 久久婷婷亚洲| 老熟妇一区二区三区…| 日本精品五区| 五十路熟女人妻一区二区在线观看| 久久一二三四五六七八九区区| 中日高清无码操逼视频| 久操视频资源站公开| 黄网色一区二区三区四区精品| 肉动漫无遮挡h在线观看| 超碰在线在公开超碰在线在公开| 国产精品懂色tv影视免费观看| 日本一道在线播放高清| 天美国产三级传媒| 超碰69| 国产欧美亚洲精品a第2页| 色天欧美| 97在线观看免费视频l| 十八禁一区二区无码观看| 浪人综合网| 97资源免费视频| 色综合潮| 亚洲色图欧美视频| 亚洲色综合| 久久成人网站| 小说区 图片区色 综合区| 欧美激情欧美精品| 久久欧美1卡2卡3| 成人精品在线| 伊人色综合网电影| 97国产高清视频在线观看| 另类TS人妖一区二区三区| 婷婷另类小说| 亚洲国内精品成人不卡| 久久久女人| 粉嫩国产精品久久久| 日本高清有码网址视频| 国产女s强制榨精视频| 国产丝袜啪啪| 大JI巴好深好爽又大又粗视频| 欧美综合亚洲| 青青草五月份天| 天天舔天天日天天射| 国产又大又粗又色生活片亚洲国产精品成人久久久综合免费 | 蜜臀操逼黄色视频操的好爽| 日本一级婬片试看三分钟| 级做a爱无码性色永久免费| 超碰97亚洲| 婷婷色香伊人| 亚洲人成在线放东京热| av爱爱爱| 亚洲自拍天堂| 视频分类 国内精品| AAAAAAAAA黄片| 中文字幕久热视频在线| 国产热RE99久久6国产精品首| 久久久久国产精品喷潮免费观看臀| 亚洲小电影免费涩涩成人在线高清 | 久久久 国产精品| 久久免费精品视频免一| www.人人cao| 久久久五月天| 95精品在线| 天天日日舔舔| 动漫av中文| 啊啊啊不要嗯嗯在线观看| 9ⅰ久久久天天| 神马麻豆福利院| 中出欧美| 强奸乱伦AV一天堂网| 亚洲性爱电影| 综合欧美日本三级| 9热9热综合网| 久久国产对白激情浪潮 | 秋霞视频一区二区| 日韩欧美视频青青| 啊啊啊啊啊啊好湿好爽视频| 新91视频.cmp| 久久综合九色综合欧洲98| 狠狠操,使劲操| 国产女人高潮嗷嗷嗷叫小说 | 欧综合网| 秋霞无码av鲁丝片一区| 日韩pv中文| 96国产污污污丝袜| 91美女精品| 日本黄大片在线观看视频| 欧美另类精品xxxx| 五月婷婷六月激情| 国产免费久久精品99re韩国| 97资源站日韩| 熟女精品va中文字幕| 五月天激情四射| 佐山爱中文字幕| 97免费视频在线观看视频| 精品久9| 凹凸精品熟女在线观看| 五月丁香成人网| 亚洲城人男人的天堂| 天天操天天日天天干| 久久日本熟妇熟色一区| 日韩午夜精品一区二区三区电影| 中文字幕二区日韩天堂| 伊人91| 强歼乱伦资源网| 日韩紧密久久| 最新AV在线| 9118禁| 91东京热男人的天堂| 日本高清有码网址视频| 九九亚洲精品| 欧美爱三级日韩久久| 果冻国产精品麻豆成人av| 99re6在线视频精品免费完整版安卓版| oumeisetu综合| 人妻天天爽| 国产强奸AV在线| 免费黄色A片| 天天碰操中国年青熟妇| 亚洲无码 国产无码| av凤凰久久久| 四虎精品一区| 99色视频| 91天天综合在线观看| 亚洲国产麻豆一区二区三区| 黑丝日韩av丝袜av| 大屁股人妻女教师撅着屁股| 九九英色视频| 日韩免费在线观看不卡| 国产精品亚洲一区二区三区四区| 国产夫妻一区二区| 男人的天堂 在线一区| 亚洲激情在线一区二区| 夜夜爽爽夜夜精品视频| 久久中文字幕一区不卡| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 少妇高潮对白在线观看| 超碰97起碰| 久久久噜噜噜久久人妻| 九九九久久久久| 99综合| 人妻人妻天天碰| 激情五月天中文字幕色| 欧美色图天堂网m| 91老熟女视频| 久久久五月天| 九九九久| 中文字幕jul-617人妻熟女| 亚洲综合色图欧美| 五月丁香综合| 日产操逼| 99热大香蕉伊在线| 超碰人人妻| 激情文学88| 91人妻超碰| 日本伦乱九九九综合| 亚洲天堂女优在线| 亚洲成人日韩小说| 亚洲天堂男人天堂网| 超碰人人在线| 综合欧美亚洲| 青青草精玖玖69精品| 99这里只有精品国产| 欧美国产一区二区三区麻豆传媒| 日美免费黄片| 91青青在线| 99爱久久视频频| 国产婷婷综合在线观看| 老色鬼成人精品视频下载大在线观看| 98一区二区精品| 亚洲中文字幕精品一区| 裸体美女久久久| 日产国产精品中文久久婷婷| 欧美在线第五页| 清柠毛片| 视频黄色国产一级| 亚洲资源站| 一区二区三区在线资源| 大香蕉专区| 久久激情婷婷| 97在线无精品| 岛国小电影| 在线有码中文字幕| 抽插亚洲无码| 亚洲熟女一区| 夜夜操91744565| 天天干干天天干干| 少妇综合| 欧洲综合色| 日本啊啊啊啊啊视频| 日本性爱少妇| 欧美不卡五十路| 97精品97久久| 99黄页网站| 在线 制服丝袜中出 人妻| 一本大道不卡一二三区| 蜜臀久久99精品久久久久久婷婷| 97久久久久久久精| 色婷视频| 天天拍天天操| 国产欧美一区激情交| 成人97人人超碰人人| 久久久涩| 久久成人东京热人妻| 国产高清不卡视频| 久久综合女优| 少妇被玩视频二三区| 欧美日韩99| 久久三| 国产又色又粗又黄又爽| 超碰97中文| 国产又粗又长又大的视频| 欧美最婬乱婬爆婬性视频| 亚洲人妻久久久| 日韩精品在线观看网站| 久久精品日韩| 亚洲,日韩,欧美,成人播放| 欧美亚洲天堂| 亚洲限制级在线| 亚洲人人操| 免费在线观看AV无码网站| 日韩人成网站在线播放| 不卡中文字幕aⅴ在线| 99精品综合久久久久五月天| 91男人天堂网| 久久一本大香蕉| 大香蕉在线视频15| 成人精品电影| 99青草| 99热色这里只有精品| 爽 好舒服 无码刺激久久| 亚洲精品久久久久毛片A片拉屎| 色噜噜日韩精品| 人妻夜爽夜夜爽| 精品人妻高清麻豆av| KK色在线影院| 老熟女综合| 日韩三级av片| 黄色十八禁| 亚洲aw毛茸茸在线| 99青青草国产视频| 中美日韩毛片| julia中文字幕在线观看| a人欧美综合天堂麻豆| 不卡人妻少妇精品毛片一区23区视频 | 9.1小视频| 人妻无码视频一区二区三区久久| 欧美一级专区免费大片| 99蜜桃臀久久久欧美精品网站| 亚洲精品色| 国产熟女一区二区丰满| 黄色一区三区| 91bbbbbb| 蜜臀网址在线| 97综合网| 欧美一区二区三区另类精品| 久久五月丁香| 91九色丨国产丨爆乳| 熟女丰满人妻一区| 日本欧美色| 精品美女久久一二三| 蜜臀AV一区二区三区激情综合| 91伊人大香蕉| 男人的天堂99| 在线播放免费av福利片| 97摸视频| 你懂得91| 啊啊啊用力在线观看| 人妻 制服 日韩 中文 在线| 日韩特一级久久| 欧美亚洲系列| 老外又粗又长一晚做五次| 2021久久国产综合精品青草| 久久久人妻| 国产青视频| 亚洲色棕合| WWW.操逼.COM| 婷婷午夜成人色中色| 欧美色图天堂在线| 美女91av| 久久精品福利影院| 五月激情小说| 97se综合| 美国黄片aaa| 伊人久久大香大香线蕉中文 | 欧美日韩欧美| 亚洲国产丝袜熟女av| 欧美|91色综合| 亚洲日韩av一区二区三区百合| 亚洲精品欧美专业| 麻豆91熟妇人妻中文字幕茄子| 中文字幕日韩人妻视频| 狠狠干狠狠色| 中文字幕人乱码中文字的预防方法 | 日韩精品国产一区二区| 激情自拍 校园春色| 中文字幕乱偷人妻久久艾草网| 91天天| 国产日韩在线播放| 欧美91网站| 91丝袜在线观看| 欧洲熟妇xxXx欧美老妇裸体| 国产精品熟妇一区二区三| 97视频在线免费观看| 欧美性爱在线无码| 色网综合网| 免费看黄片现成| 91久久久久免| 极品人妻少妇综合| 懂色AV蜜臀无码精品APP | 日韩人妻制服丝袜av| 中文字幕性感少妇av| 国产欧美日韩臀| 精品超碰国产| 九七毛片九九毛片 | 一区二区三区视频国产免费| 人妻久久久| 91美女视频。| 99性爱视频| 天天激情干| 黄色二级片网站| 久久久com| 国产免费永久精品无码| 亚洲资源网| 欧美日韩日产免费网站看| 91色婷婷综合久久中文字幕二区| 五月天婷婷久久| 劲爆欧美人妖三区91| 亚川综合视频| 欧美激情久久久久| 国产 无码 一区二区| 嗯嗯啊好大| 91人妻精华帖| 呻吟 欧美 日本 中出| 国产精品熟女九色九色蜜臀| 久久人妻无码毛片A片麻豆| 2020中文在线一区二区三区| 丝袜美腿校园春色| 强奸乱伦AV网站| 青青青艹在线视频| 日韩欧美中文日韩欧美色| 操逼短片| 亚洲欧美精品一区天堂久久 | 校园春色美腿丝袜| 久久‘黄片视频| 天堂综合| 婷婷精品| 欧美人人曰人人操人人射射| 超碰久久草| 国产极品一区二区三区三州| 国产成人精品网站| 91AV老熟女视频| 91露脸熟女专区| 综合久欧洲| AV不卡在线| 亚洲成人AB| 曰韩精品九九无码| 欧美性第一页| 伊人成人中文字幕久久网| 97天天| 一区二区三区网站日日骚| 国内精品嫩模A∨私拍小视频| 97久久精品国产| 国产精品色片一区二区| 久操国产在线| 啊啊啊啊啊啊啊啊啊啊在线观看| 玖玖爱伊人玖玖爱| 黑人精品XXX一区一二区| 大香蕉综合在线| 国产综合日韩伦理| 99这里只有精品| 中字幕人妻一区二区三区| 操淫穴亚洲五月丁香| 色色婷婷丁香| 综合国产影视三级| 欧美亚洲今日在线| 91丝袜美腿片| AV天天综合| 中文字幕亚韩| 国内偷自视频区视频综合 | 国产精品久久久| 色香在线| 中文字幕在在线观看网站| 中日韩欧美精品无码AⅤ一区二区| 97精品在线视频| 狠操91,com| 夜夜嗨AV蜜臀av| 欧美在线播放aaaa| 国产宅男宅女在线观看| 亚洲中字幕日本一区二区三区| 久久黄黄| 亚洲熟女一区二区| 91N综合网| 欧美日韩青操| 91艹| 精品伊人久久久大香线蕉小说| 91AV天美在线视频| 欧美亚洲中文字幕| 亚洲se91| 美女露胸露奶头| 日韩99精品视频综合区| 中亚黄色三级大片| 日本久久天堂| 久久久久国产精品久久久| 久久精彩视频9| 久久首页| 国产超碰97| 久操热线| 国产丝袜美女在线一区| 久草久日| 五月丁香成人网| 欧美一级专区免费大片| 91碰碰| 又粗又长又大国产不卡| 麻豆 亚洲 97| 日韩婷婷| 26uuu最新| 人妻熟妇久草在线| 日本一本一区二区三区四区五区欧美日韩中文字幕 | 96AV久久久| 天天色天天干天天射| 无码九九九九| 91人妻人人妻| 丁香五月综合| 啊啊啊骚| 亚洲天堂性爱| 激情网色| 外国91| 日韩电影天堂视频一区二区| 欧美一区二区观看在线| 92久久| 久久久∴| 91色情黑丝搞鸡在线观看一区二区三区三州| 伊人热综合| 乱色老一区二区三区的观看方式| 96久久科窝| av午夜影院在线播放| 精品国产乱码久久久A| 国产在线不卡导航| 亚洲一区二区三区不卡国产欧美| 欲色综合| 亚洲自拍欧美色综合| 日本天天操| 天天激情综合站| 亚洲av资源| 欧美中文狠| 综合熟女| 成人乱码一区二区三少妇| 五月丁香激情四射| 久久天堂网| 97色视频在线| 欧美日韩操逼动图| 91丨九色丨国产丨人妻在线| 99999国产精品| 超碰69| 国产女人高潮视频| 日韩免费看黄片| 91久久免费视频互動交流| 校园春色第一页| 秋霞鲁丝午夜无码一区二区三| 日韩美一区| 去干网最新版| 久草免费福利在线播放| 97国产|免费| 九九九草| 日韩欧美偷拍美女视频| 日本一二三高清| 日本久久久久久久久| 久久精品美女一区| 国产亚州精品美女久久久免费| 日韩福利综合一区| 伊人五月天婷婷| 91搡老女人老妇女老熟女歌词翻译| 亚洲狠狠入| 日韩精品人妻中文字有码在线| 欧美丝袜激情| 欧美有码亚洲中文字幕一区二区三区四区| 免费观看欧美日韩操逼视频| 高清在线偷拍自拍视频| 欧美久久伊人| 东京热一区二区中文字幕| 熟妇一区,二区,三区。| 色婷婷一区二区三区久久午夜 | 2020视频1区2区3区| 蜜乳av首页| 欧美日韩日产免费网站看| 超碰97 线线 在现| 快灬快灬 一下爽蜜桃在线观看 | 凌辱美少妇久久aV| 日本熟妇人妻一区二区三区| 99在线精品观看视频中文| 午夜精品久久久99热蜜桃的功能特点 | 偷窥自拍亚洲色图| 九月丁香婷婷| 亚洲精品一二三四区| 天天综合精品| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 久久这里精品国产99丫e6| 91九色网| 水澄无码AV| 天美AV片| 亚洲日韩av一区二区三区百合| 香蕉综合网| 天美传媒一二三区永久网站| 亚洲 综合 欧美| 久久天天性久久伊人| 日韩亚洲美州欧洲综三区一品在线| 青青草视频久久| 东北夫妻性偷拍| 日本丝袜美腿人妻九九| 试看福利| 欧美性五月| 97色欧洲| 麻豆久久精品亚洲精品88| 91丝袜在线播放| 欧美Ⅴ性爱| 国产成年免费大片黄在线观看| 黄色小视频日本txt| 日本三级R| 97资源制服丝袜| 四虎884a| 爱丝福利| 九九九热| 欧美亚洲| 三级三级三级日本99| 日韩AV色图| 久久精品国产久精国产| 亚洲一区二区av| 久久在线观看免费视频| 亚洲中文国际强奸字幕| 五月丁香色综合| 欧美天天综| 欧美最大综合网| 91天堂| 国产成人精品必看 | 女人精品内射国产99| 午夜福利1区2区3区| www黄片免费看com| 久久 国产精品 一区| 久久久久久久久久久97| 日本顶级天天操狠狠操夜夜操中文字幕| 老熟妇一区二区三区| 99999精品| 亚洲一级特黄大片在线播放91| 人妻天堂网| 久久久少妇诱惑精品视频| 青青草日韩免费观看高清在线| 天天操妹子| 免费人成毛片乱码| 欧美久久伊人| 三级片大波波| 夜夜嗨免费视频| 在线视频 亚洲精品| 国产成人拍国产亚洲精品| 一级性爱aaaa| 草久久久| 欧洲综合色| 伊人网综合在线视频| 99热在线观看| 91亚洲丝袜| 国产午夜福利专区综合| 亚洲激情在线| 国产第二页| 亚洲欧洲激情卡通另类文学四射小说网站| 人人操人人搞人人草| 97久久资源| www久| 色色亚洲| 97精品在线| 亚洲性天堂| 日本天天操| 亚洲一二三精品久久网 | 久久久久国产精品久久久| 在线无码操| 97香蕉人人乳| 精品人妻一区二区三区日产| 亚洲日本韩国在线| 91成人久久| 热无码中文亚洲H一道本一区二区| 久久乐| 国产AV天美传媒一区二区三区 | 日本人妻A片成人免费看片| 人妻爽爽啪视频| 又大又大又大又粗爽高潮观看 | 福利在线黄片| 欧美大战久久久伊人| 天天草天天日| 久久超碰爱| 在线女人91| 一级毛片久久久久久久女人18| 大香蕉啪啪啪| 亚洲狠狠入| 在免费jIzzjIzz在线视频| 国产白领连续中出在线播放| 四虎影视欧美| 国产成人精品无码久久| 97爱欧美| 久久AV无码AV| 亚洲 欧美 中文 日韩超碰| 欧美 亚洲 第一页| 婷婷激情五月| 国产免费小视频| 在线观看日韩av不卡| 久久精品电影| 亚洲成人美女无吗| 福利大香蕉| 亚洲熟女中文字幕在线| 香蕉国产97| 九九无码视频| 97超碰9| 桃色五月天| 老熟妇91| 色女综合| 青娱乐欧美激情一区二区| 日韩精品99久久久久久中文字幕| 天天操夜夜嗨| 精品久久9| 国产精品久久久久无码AV会牛| 天堂综合| 手机看片1025| 熟女少妇一区二区三区| 国产精品成人无码a v毛片| 伊人久久蜜月| 激情久久久| 农村少妇久久久久久久| 精品夜夜澡人妻无码| 2021国产成人精品久久| 久插综合| 8050无码八戒| 九九九999久久久网站| 黄色网址久久精品欧美喷水| 日本熟女不卡视频| 老鸭窝黄色视频网站| 人人摸人人摸人人干| 精品国产乱码久久久| 蜜臀久久99精品久久综合| 人妻精品视频一区二区三区| 久久久久久久久久久久黄色 | 亚洲激情网一二三四区| av网站在线看| 99r九九| 黄页视频网站野外| 欧美春色| AV高清一区| 亚洲午夜福利视频| 不卡在线观看视频| 天天综合网1| 99热国产| 少妇一级无码精品| 超碰精品人妻狠狠干| 欧美第一页性| 日本免费人成视频播放120秒| 神马久久久久久久久| 大香蕉伊人网WWWn0n| 一区操逼日比视频| 美女性91| 中文字幕视频免费| 激情五月婷婷| 国产精品一区二区校花| 97视频免费播放| 日本精品免费一区二区三区四区| 丁香五月激情综合国产| 亚洲影视综合| 色呦色呦色精品| 欧美制服网站美腿丝袜| 免费成人在线观看91| 干妹子| 观看免费区二区三区二| 精品人妻中文字幕4399| 好属操| av 模特一区了| 色99视频| AV免费在线播放一区| 欧美91精品国产自产| 东北女人的毛片| 视频二区美腿丝袜制服人妻欧美| 欧美操逼熟女| 中文字幕第9页萱萱影音先锋| 婷婷国产精品一区二区| 超碰97最新人妻| 久久五月份| 麻豆这里只有精品| 久久五月天婷婷丁香中文字幕| 狠狠爱夜夜| 亚洲男人天堂视频| 干b在线性社区| 国产在线视视频有精品| 精品少妇人妻av久久免费| 国产精品操| 国产精品97超碰| 台湾佬激情综合| 日本女人操逼| 成人AV超碰免费在线| 易易A毛视频| 婷婷亚洲天堂| 精品国产久热在线观看| 亚洲 无码 偷拍| 欧美亚洲手机在线| 天天操天天7| 日本不卡二三区| 九九热九九热| 亚洲五月丁香花狠狠干一区二区三区 | 精品乱码在线观看| 欧美 综合| 91人妻超碰| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 久久久久性熟视频| 久操大香蕉手机视频在线看| 免费A V在线| 亚洲阿v天堂无码z2018| AAAA欧美日韩| 看全色黄大色大片免费视频| 亚洲国产亚洲天堂| 亚洲色入欧美| 青青草白白色| 国产一区麻豆免费观看| 91肏屄网| 久久久噜噜噜久久久| 国产精品一区二区 尿失禁| 噜噜噜在线视频| 草莓精品视频在线免费观看| 色香天天| 欧美日韩在线小说 | 精品美女在线视频| 嗯啊不要啊啊在线观看视频| AV天堂丝袜| 久久久久久性爱片| juliaann精品熟女一区| 国内精品不卡无毒99999| 好淫网一二三视区| 人妻激情另类| 天天日天天爽| 丝袜美腿诱惑亚洲欧美视频在线观看| 欧美黄色片AAAAA| 色情五月丁香| 色情五月婷婷| 91亚洲不卡一区| 欧美色图片91| 91成人在线| A一级色女| 九9精品| 亚洲欧美天| 亚州色综合| 成人国产视频在线观看| 肏逼视频日本| 欧洲欧美视频一区二区| 午夜AV人气不卡| 黄色欧美性爱视频| 色5月婷婷| 久都青青视频 | 久热精品色情| 91色图片| 欧洲精品欧洲精品| 男人的天堂久久| 日日超碰亚洲| 欧美人人曰人人操人人射射| 探花熟女,姿勢到位,體驗感也到位| 亚洲AV成人精品网站在AV| 久久天天艹| 在线观看黄色电话| 亚洲欧洲网站免费观看| 99热免费| 日韩另类色图| 日韩国产十八禁| 校园春色欧美| 欧美翘臀视频网站一区二区三区| 日日操夜夜操天天操免费观看麻豆| 日产操逼| 国产免a费看黄片在线| 在线观看免费视频国产| 日本午夜福利影院| 久久久不能久久久久| 久色99999| 亚洲 欧美综合| 日本成熟少妇A∨网站| 美女熟妇色| 欧美日韩婷婷中文| 精品国产一级久久| 91熟女熟妇视频网站| 嗯嗯啊中文字幕| 国产盗摄美女如厕大神作品在线观看| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 亚洲男人天堂2012| 伦在线97| 抽插亚洲无码| 久艾草在线精品视频在线观看| 黄色高清无码无码破解免费暗网| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 99色视频| 91成人在线| 少妇三p| 精品成人无码| 天天日天天插| 久久最新视频免费观看| 国产欧美另类久久久精品课程| 巨爆乳一区二区爆乳区| 日韩人妻大香蕉| 欧美日韩亚洲电影| 日本人妻最新在线中| 99色天堂| 嗯嗯嗯啊啊啊干死我吧| 午夜操一操| 婷婷久久网| 91爱欧美| 13小男生GAY自慰脱裤子| 韩国一级婬片A片AAAAA| 国产熟妇一区二区| 国产综合色精品在线观看| 成人网址在线观看| 大乔未久88一区| 亚洲一区日韩精品中文字幕 | 国产一区二区在线播放| 啪啪啪精品视频| 1024久久高清视频| 日韩AV噜噜噜一区二区三区四区| 日韩强奸av| 亚洲无套久久嗯嗯| 久久亚洲欧美一区二区三区-亚洲国产精品第一区二区 | 亚洲激情色片| 久久精品国产亚洲粉嫩| 色欲蜜臀AV| 在线观看A啊啊啊| 欧美在线91| 九九亚洲视频| 久久久久ab| 福利视频香蕉免费一区二区在线| 色999亚洲人成色| 精品人妻一二三四区视频| 国产日韩欧美中文在线播放| 蜜臀一二三区| 天天插天天插| 超碰在线综合97| 影音先锋视频在线| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 免费在线观看国内色片网站网址| 色婷婷aV一区二区三区麻豆综合| 91亚洲综合在线| 极品尤物女神在线观看| 久久久久久久六六 | 国产91精品在线免费| 久久丁香五月天| av线电影| 亚洲精品国产无码高清| 久久嫩草国产成人一区| 亚洲欧美高清无码| 日本裸体久久色噜噜| 风月影院男女十八禁| 久操网视频| 国产视频第2页| 伊人激情五月天一区二区| 欧美图片色综合| 亚洲国产美女久久久久| 五月天社区| 久久风骚城市| 一区在线国产播放| a啊啊啊啊啊啊啊啊一区二区| 亚洲高清无码免费观看视频| 视频在线中文字幕| 成人日本视频人妻在线| 极品出轨视频网站| 人人操av| 91精品人妻一品二品三品| 色色五月婷婷| 九热中文字幕| 久草婷婷| 波多野结衣先锋影音| 青青草在线视频欧美| WWW啪啪的com| 天天草AV| 97人人模人人爽人人| 精品熟妇视频一区二区| 日本黄 R色 成 人网站| 久久超碰网| 熟女中出视频| 日韩中文9| 美女尤物人人操| 午夜呻吟欧美| 91夜色| 色爱欲亚洲| 岛国黄| 91美| 青青草吊丝| 中日韩一区二区三区欧美| 欧美精品双插| 8050无码八戒| 啊啊啊在线观看| 欲香欲色天天天综合和网| 韩国一级婬片A片无码天美| 久久综合久色欧美综合狠狠 | 国产色精品午夜大片| 9美女超碰在线免费观看| 日韩一级二级| 久久精品熟女亚洲AV麻豆软件| 欧美黑人与女人91~| 亚洲第一精品在线视频| 久久高清无码夜夜操| 色性综合| 亚洲精品一区二区精华| 日韩97精| 欧美在线官网| 男人高清无码一区二区| 超碰久超碰久| 加勒比AV网| 狠狠操夜夜| 色97干| 欧美性爱网97| 熟女精品一区二区三区| 影视综合无码少妇| 91美女精品| 97干天天| 激情五月综合| 自怕偷自怕亚洲精品| 天综合网欧美| 麻豆黄色五月天| 麻豆国产97在线| 国产一区二区久久| 人妻久久久| 欧美 日韩 亚洲 春色| 色妺妺AⅤ| 后入式视频国产自| 97超碰色五月| 亚洲国产成人精品无码专区| 久九九九| 精品久操| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 97精品视频免费| 五月婷婷色色| 亚洲av综合色| 亚洲人成网站7777| 欧美色图片色哟哟| 精品久久久不卡一区二区| 亚洲一区二区三区AV无码| 中文乱码字字幕在线第5页| 国产人妻一区二区三区欧美毛片| 久久精品性| 377p欧洲日本亚洲大胆| 亚洲熟女综合网| 色拍偷亚洲| 久久水蜜臀亚洲AV无码精品| 久久精品国产精品亚洲艾通辽熟妇 | 中文字幕在线观看第二页| 久久99网站| 91久久精品中文字幕| 一级性爱视频免费观看| 超碰99re| 在线天堂资源亚洲| 麻豆a'v电影| 另类图片亚洲加勒比另类图片亚洲加勒比另类图片亚洲加勒比 | 好属操| 久久久一区二区三区麻豆| 色臀aV| 色老牛| 久久天天性久久伊人| 狠狠干狠狠色| 波多野结衣被操50分钟免费视频| 国产区日韩区在线观看| 东京热毛片177b2viP| 91男人综合| 九九九精品一区二区无码| 蜜桃色院一区久久 | 97国产亚洲中文在线| 东北黄色电影| www.操| 国产精品情侣啪啪| 丝袜内射| 国产精品久久久视频| 久久青青草原免费视频| {男男暴菊gay无套网站| av网站国产主播在线| 欧美色宗合| 亚洲欧美不卡线| 熟女人妻精品一区二区视频| 亚洲中文字幕熟女少妇一区二区| 密臀国产在线| 亚洲激情深爱文学小说网站| 色偷偷人人玩人人舔人人操人人摸人人爽| 亚洲在高跟鞋自慰久久在色线| 亚洲第一页欧美| 欧美婷婷久久| 大稥蕉免费视频这里只有精品| 久久香蕉国产线看观看猫咪av| 久久高清欧美国产| 操逼逼无码| 亚洲av无码成人精品国产| 五月天大香蕉| 99热精品在线在线| 91在线色综合| 物业黑人 AV一区| 伊人aaa| 麻豆精品三区视频| 啊啊啊久久久视频| 久久一二三四五六七八九区| 人妻少妇久久| 日产精品久久久一区二区| 久99在线免费观看视频| 麻豆区久久久久亚| 亚洲丝袜二区在线| 成人怡红院| 乱伦熟妇一区二区| 在线免费观看高清无码视频| 日韩精品人妻| 91嫩草在线| 韩日精品福利视频一区不卡在线免| 免费成人在线熟妇网| 伊人久久亚洲色欲综合网站 | 成 人片 黄色大片| 欧美亚洲综合999| 97日视频| 国产精品3| 色噜噜国产精品视频一区二区| 欧美天天| 又大又长又粗又爽又黄| 亚洲精品aa久久伊人| 日本人妻丰满熟妇久久久久久| heyZO天然素人无码AⅤ专区| 中文字幕日韩专区精品系列| 日本东京热加勒比久久| 国产无套粉嫩白浆在| 五月激情小说| 91成人在线| 青青草中出视频 | 日本成人电影资源网| 亚洲欧洲综合成人av一区| 92午夜免费福利视频| 伊人AAA| 国产AV天美| 亚洲少妇激情一区二区三区| 天天干人人乐| 日本东京热加勒比久久| 噜噜噜在线视频| 东京热免费视频| 日本裸体久久色噜噜| 伊人四虎综合| 国产精品熟女一区二区三区| 搞中出久久| 色狠狠综合| 一本一首道人妻少妇免费久久| 中出91视频| 欧洲黄色网| 韩国一级做A片免费的| 久久久久久久九九九九九九| 欧美天天谢综合网| 啊啊啊水好多| 97超碰人人操人人操| 第一高清av中文字幕| 不卡九肏| 麻豆91熟妇人妻中文字幕茄子| 9久在线视频只有精品| 岛国在线国产| 91在线精品| 打av高清| 亚洲色图日韩丝袜制服一区二区五月在线| 操操操五月天婷婷丁香影院| 人人操人人操草草| 久久的网站啊啊啊啊啊| 国产日韩怡红院| 中国一级操逼视频| 亚洲午夜免费狠狠干| 中字一区| 亚洲性爱免费电影| 久久五月份| 欧美黑人日韩少妇色情| 91成人高清在线观看| 伊人影院中文字幕| 破处bbq| 草莓精品视频在线免费观看| 日本一本一区二区三区四区五区欧美日韩中文字幕| 亚洲国产青青| 国产福利一区二| 另类图片五月天| 欧美97视频| 亚洲人久久久久日| 成人一道本免费视频| 亚洲精品819| 蜜桃精品视频一区二区三区| 蜜乳视频网站| 老女人日韩美91| 色欲久久99国产精品久久久久久| 黄色av片三级三级三级免费看|