久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Java異常處理全攻略:體系、機(jī)制、性能與排查實(shí)戰(zhàn)

Java異常處理全攻略:體系、機(jī)制、性能與排查實(shí)戰(zhàn) 寫(xiě)Java也寫(xiě)了十個(gè)年頭了異常處理這個(gè)話題每年都會(huì)翻出來(lái)聊但每次看新人的代碼還是會(huì)頭皮發(fā)麻。有的把異常當(dāng)擺設(shè)catch完打一行日志就當(dāng)無(wú)事發(fā)生有的把異常當(dāng)萬(wàn)能藥任何業(yè)務(wù)分支都用拋異常解決。異常處理不是Java語(yǔ)法里最難的那一坨但絕對(duì)是最能看出一個(gè)程序員功底的地方也是面試必問(wèn)、上線必踩的環(huán)節(jié)。這篇內(nèi)容我打算系統(tǒng)地把Java異常處理從頭到尾捋一遍從異常體系本身到底層機(jī)制從實(shí)戰(zhàn)策略到性能考量再到高頻問(wèn)題的排查思路。無(wú)論你是剛學(xué)Java準(zhǔn)備面試的在校生還是工作中時(shí)不時(shí)被線上異常困擾的初級(jí)開(kāi)發(fā)甚至是想幫團(tuán)隊(duì)定一套異常規(guī)范的組長(zhǎng)這篇都能給你一些可以直接用的東西。1. 異常體系全景先搞清楚Java到底把“錯(cuò)誤”分成了幾類很多初學(xué)者看了不少異常處理的代碼但問(wèn)起Throwable和Exception、Error之間的關(guān)系還是說(shuō)不明白。這個(gè)搞不清楚后面設(shè)計(jì)異常和處理策略都會(huì)跑偏。1.1 Throwable家族不要把Error當(dāng)Exception來(lái)處理先看最頂層的Throwable這是Java里所有“可以被拋出”的對(duì)象的共同父類下面分了兩大派系Error和Exception。Error表示的是JVM層面的嚴(yán)重問(wèn)題比如OutOfMemoryError、StackOverflowError、NoClassDefFoundError。這類問(wèn)題基本不是你的代碼能“捕獲后恢復(fù)”的捕獲了也沒(méi)用因?yàn)槌绦虼藭r(shí)大概率已經(jīng)處于半癱瘓狀態(tài)。所以常規(guī)處理原則就一句話不要在代碼里捕獲Error也不要去處理它讓它直接冒泡讓JVM和應(yīng)用進(jìn)程一起完蛋然后靠監(jiān)控報(bào)警去拉起來(lái)。我還有一點(diǎn)要特別提醒catch (Throwable t)這種寫(xiě)法在大項(xiàng)目里幾乎等于定時(shí)炸彈。Throwable是連Error一起捕獲的有些監(jiān)控框架會(huì)用它來(lái)做兜底記錄但如果你在業(yè)務(wù)代碼里寫(xiě)這種捕獲就等于把OOM也一并吞了后面出現(xiàn)詭異的內(nèi)存問(wèn)題排查起來(lái)非常痛苦。Exception是程序運(yùn)行中可恢復(fù)、可處理的問(wèn)題比如文件找不到、網(wǎng)絡(luò)超時(shí)、參數(shù)不合法。這才是我們?nèi)粘R攸c(diǎn)關(guān)注的。1.2 受檢異常與非受檢異常語(yǔ)法規(guī)定背后的歷史包袱Exception又進(jìn)一步分成兩類受檢異常Checked Exception和非受檢異常Unchecked Exception。受檢異常是編譯器強(qiáng)制要求你處理的典型就是IOException、SQLException。如果你調(diào)用了一個(gè)會(huì)拋受檢異常的方法你就必須“聲明throws”或者“try-catch”否則代碼編譯不過(guò)去。這個(gè)設(shè)計(jì)是Java早期的理念認(rèn)為程序應(yīng)當(dāng)對(duì)可預(yù)見(jiàn)的錯(cuò)誤顯式處理。但后來(lái)的實(shí)踐表明這個(gè)設(shè)計(jì)過(guò)度理想化了——很多時(shí)候你根本沒(méi)法在當(dāng)前位置處理這個(gè)異常卻還是被逼著寫(xiě)了一堆try-catch最后只是把異常包一層又拋出去純屬增加噪音。非受檢異常就是RuntimeException的子類以及Error。這類異常編譯器不管你可以選擇不捕獲。NullPointerException、IllegalArgumentException、ClassCastException、IndexOutOfBoundsException都屬于這一類。它們代表的通常是編程邏輯錯(cuò)誤或前置條件未滿足本來(lái)就該在代碼層面提前規(guī)避而不是依賴運(yùn)行時(shí)的異常處理機(jī)制。有個(gè)非常關(guān)鍵的區(qū)別需要理解Spring事務(wù)默認(rèn)只在RuntimeException非受檢時(shí)回滾受檢異常默認(rèn)不回滾。這個(gè)特性讓后來(lái)絕大多數(shù)Java框架更傾向于使用RuntimeException。所以現(xiàn)在寫(xiě)Java新代碼里基本不推薦自定義受檢異常除非你明確知道調(diào)用方必須處理。1.3 自定義異常應(yīng)該怎么選父類自定義異常是項(xiàng)目中不可避免的。你總會(huì)需要一個(gè)BizException或者BusinessException來(lái)表示業(yè)務(wù)規(guī)則被違反。我的建議是業(yè)務(wù)異常統(tǒng)一繼承RuntimeException。理由主要有三個(gè)。第一因?yàn)镾pring事務(wù)默認(rèn)回滾不會(huì)出現(xiàn)事務(wù)提交了一半結(jié)果的情況。第二不用在每個(gè)業(yè)務(wù)方法上逼著調(diào)用方聲明throws代碼更干凈。第三可以通過(guò)異常類型做統(tǒng)一攔截比如在ControllerAdvice里統(tǒng)一處理成錯(cuò)誤碼返回給前端。繼承層次不要太深統(tǒng)一一個(gè)頂層業(yè)務(wù)異常類就夠了。如果確實(shí)需要細(xì)分可以考慮用異常內(nèi)部的錯(cuò)誤碼枚舉來(lái)區(qū)分而不是搞出一堆異常子類。我見(jiàn)過(guò)有些項(xiàng)目里業(yè)務(wù)異常子類幾十個(gè)維護(hù)起來(lái)非常麻煩新增一個(gè)錯(cuò)誤場(chǎng)景就要新建一個(gè)類。2. 核心機(jī)制解析try、catch、finally和try-with-resources的深層邏輯異常處理語(yǔ)法本身不復(fù)雜但真正用好的不多。這一章我重點(diǎn)拆解幾個(gè)容易出問(wèn)題的機(jī)制細(xì)節(jié)。2.1 try-catch-finally執(zhí)行順序與finally陷阱正常場(chǎng)景下try塊里代碼順序執(zhí)行一旦拋出異常直接跳到對(duì)應(yīng)的catch塊無(wú)論是否發(fā)生異常finally塊都會(huì)執(zhí)行。這個(gè)大家都懂但下面幾個(gè)邊界場(chǎng)景很容易踩坑。第一個(gè)陷阱是finally里的return。如果try或catch里有return語(yǔ)句而finally里也有return那么finally里的return會(huì)覆蓋前面的返回值。更離譜的是如果finally里拋出了異常try和catch里原本的異常會(huì)被完全掩蓋。這類代碼在code review時(shí)一定要直接打回finally塊里只做清理資源這類工作不要return、不要throw。第二個(gè)陷阱是System.exit()。如果在try塊里調(diào)用了System.exit()JVM進(jìn)程直接終止finally塊不會(huì)執(zhí)行。有些同學(xué)面試會(huì)被問(wèn)“finally一定執(zhí)行嗎”標(biāo)準(zhǔn)答案就是要排除JVM退出和線程中斷這類場(chǎng)景。第三個(gè)陷阱是catch的順序。多個(gè)catch塊時(shí)子類異常必須放在父類異常前面否則編譯器直接報(bào)錯(cuò)。比如catch (IOException e)必須在catch (Exception e)前面。道理其實(shí)很簡(jiǎn)單異常匹配是自上而下找第一個(gè)能匹配的catch塊如果先寫(xiě)了父類子類異常就被父類“截胡”了。try { // 業(yè)務(wù)代碼... } catch (FileNotFoundException e) { // 更具體的處理邏輯 } catch (IOException e) { // 更通用的IO處理邏輯 }2.2 try-with-resources資源關(guān)閉的標(biāo)準(zhǔn)答案如果你還在用finally去關(guān)閉流或數(shù)據(jù)庫(kù)連接我建議把這段看完。Java 7引入的try-with-resources才是資源關(guān)閉的標(biāo)準(zhǔn)姿勢(shì)它要求資源類實(shí)現(xiàn)AutoCloseable接口InputStream、OutputStream、Connection這些都實(shí)現(xiàn)了。讓我用一個(gè)非常實(shí)際的多資源場(chǎng)景來(lái)演示。以前要正確關(guān)閉兩個(gè)流必須寫(xiě)嵌套的try-finally還得處理各自的異常代碼又長(zhǎng)又容易出錯(cuò)// 推薦寫(xiě)法try-with-resources多個(gè)資源用分號(hào)分隔 try (InputStream input new FileInputStream(input.txt); OutputStream output new FileOutputStream(output.txt)) { byte[] buffer new byte[1024]; int len; while ((len input.read(buffer)) ! -1) { output.write(buffer, 0, len); } }你不需要手動(dòng)close編譯器會(huì)自動(dòng)生成關(guān)閉邏輯而且關(guān)閉順序是逆序的后聲明先關(guān)閉對(duì)應(yīng)先開(kāi)output再關(guān)output再關(guān)input。還有一點(diǎn)做得非常講究如果try塊和close方法都拋出了異常Java會(huì)優(yōu)先保留try塊里的原始異常同時(shí)把close階段拋出的異常作為“被抑制異常”掛到原始異常上。你可以用getSuppressed()方法拿到它們。這樣排查問(wèn)題時(shí)不會(huì)被莫名其妙的關(guān)閉異常干擾主方向這個(gè)設(shè)計(jì)值得手動(dòng)點(diǎn)贊。2.3 throw與throws異常是怎么傳播上來(lái)的throws是方法聲明的一部分表示“我這個(gè)方法可能拋出這個(gè)異常調(diào)用方自己要心里有數(shù)”。throw則是主動(dòng)拋出一個(gè)異常實(shí)例。兩者動(dòng)作不同但經(jīng)常在一段代碼里配合出現(xiàn)。傳播規(guī)則是這樣的異常從最先發(fā)生的地方逐層往外拋如果每一層都不捕獲最終會(huì)到達(dá)線程的頂層處理器。對(duì)于主線程異常會(huì)直接導(dǎo)致程序退出并打印堆棧。對(duì)于線程池里的線程情況要復(fù)雜一些這個(gè)后面會(huì)單獨(dú)說(shuō)。有個(gè)最佳實(shí)踐要強(qiáng)調(diào)在做異常轉(zhuǎn)換和包裝的時(shí)候一定要保留原始堆棧。比如你寫(xiě)throw new BizException(庫(kù)存不足, e);這個(gè)構(gòu)造方式會(huì)把e作為cause傳進(jìn)去。而你寫(xiě)成“手動(dòng)拼接消息”的話throw new BizException(庫(kù)存不足: e.getMessage());就丟失了原始異常的完整堆棧排查問(wèn)題時(shí)幾乎等于廢掉了一條重要線索。所以永遠(yuǎn)記住cause參數(shù)必須傳這是異常處理最基本的職業(yè)素養(yǎng)。3. 實(shí)戰(zhàn)中的異常處理策略什么時(shí)候捕獲、什么時(shí)候拋出、什么時(shí)候自定義機(jī)制明白了真正難的是策略。異常處理本質(zhì)上是“在哪里處理最合適”的問(wèn)題處理早了破壞封裝處理晚了又容易堆滿日志。3.1 捕獲粒度別在底層捕獲你處理不了的異常新手最常見(jiàn)的錯(cuò)誤是在方法內(nèi)部把異常catch掉再打一行日志然后繼續(xù)往下走。這種“假裝處理”的代碼是最毒的因?yàn)槌绦蚍祷刂祷蚝罄m(xù)邏輯很可能已經(jīng)處在一個(gè)錯(cuò)誤狀態(tài)但表面上一片安靜等到數(shù)據(jù)錯(cuò)亂了才顯示出問(wèn)題。核心原則是在當(dāng)前這個(gè)層級(jí)能做出有效應(yīng)對(duì)才捕獲如果不能就往上拋。什么叫有效應(yīng)對(duì)比如你寫(xiě)的是接口的入口層那你可以捕獲業(yè)務(wù)異常并轉(zhuǎn)換為約定的錯(cuò)誤碼返回給前端比如你寫(xiě)的是定時(shí)任務(wù)批處理那你可以捕獲單條數(shù)據(jù)的異常并標(biāo)注這批次里哪些數(shù)據(jù)失敗繼續(xù)處理后面的數(shù)據(jù)。這些都是有效應(yīng)對(duì)。如果只是中間層做數(shù)據(jù)組裝、調(diào)用外部服務(wù)、讀文件你沒(méi)有能力決定“失敗后對(duì)用戶說(shuō)什么”那就別捕獲讓異常繼續(xù)往上走由統(tǒng)一出口處理。3.2 自定義業(yè)務(wù)異常與錯(cuò)誤碼別一股腦拋Exception自定義業(yè)務(wù)異常的核心價(jià)值是讓錯(cuò)誤信息結(jié)構(gòu)化。一個(gè)合格的自定義異常要能表達(dá)三層信息發(fā)生了什么、影響誰(shuí)、具體是哪個(gè)上下文。我常用的做法是定義一個(gè)帶錯(cuò)誤碼枚舉的BizException再加一個(gè)字段用來(lái)攜帶上下文數(shù)據(jù)。比如一個(gè)導(dǎo)入訂單的功能拋出異常時(shí)除了錯(cuò)誤碼還可以把失敗的那一行數(shù)據(jù)一起帶上。這樣統(tǒng)一處理時(shí)能直接把“第xx行數(shù)據(jù)不合法”這樣的提示返回給前端。public class BizException extends RuntimeException { private final ErrorCode errorCode; private final String context; public BizException(ErrorCode errorCode, String context) { super(String.format(%s: %s, errorCode.getMessage(), context)); this.errorCode errorCode; this.context context; } // getter省略... }這里有一個(gè)細(xì)節(jié)異常message要包含足夠的參數(shù)方便日志排查。我經(jīng)??吹接腥藪伋霎惓r(shí)只寫(xiě)“參數(shù)錯(cuò)誤”日志里根本不知道是哪個(gè)參數(shù)錯(cuò)了、值是多少。能把參數(shù)值拼進(jìn)異常消息就能省掉很多日后的“考古工作”。3.3 異常日志規(guī)范同樣一段代碼日志價(jià)值天差地別異常處理和日志是伴生關(guān)系處理得再好日志打不好線上問(wèn)題一樣抓瞎。先說(shuō)不好的寫(xiě)法。第一種是 catch 后只打一行e.getMessage()然后當(dāng)作沒(méi)事。第二種是log.error(error)不帶任何異常對(duì)象。第三種是printStackTrace()把堆棧打到標(biāo)準(zhǔn)輸出一旦線上系統(tǒng)把stdout重定向到別的文件你根本不知道日志去哪了而且這種寫(xiě)法在分布式系統(tǒng)里完全無(wú)法和請(qǐng)求鏈路關(guān)聯(lián)。推薦的做法是用日志框架的占位符并且在最后一個(gè)參數(shù)傳入異常對(duì)象這樣框架會(huì)自動(dòng)打完整堆棧try { orderService.createOrder(orderDTO); } catch (BizException e) { log.error(創(chuàng)建訂單失敗, userId{}, orderNo{}, userId, orderNo, e); throw e; }這段日志的價(jià)值在于不但知道“創(chuàng)建訂單失敗”這個(gè)事實(shí)還有userId、orderNo這種排查問(wèn)題的錨點(diǎn)最后還有完整異常堆棧。如果業(yè)務(wù)里還接入了traceId那就更完美了一個(gè)鏈路上下游的異常都能串起來(lái)。4. 性能與并發(fā)場(chǎng)景異常處理不能拖垮系統(tǒng)“性能”這個(gè)詞大部分人是不會(huì)第一時(shí)間和異常處理聯(lián)系在一起的但等你的系統(tǒng)上了量級(jí)異常的性能開(kāi)銷就會(huì)變得非常明顯。4.1 為什么異常創(chuàng)建比普通對(duì)象創(chuàng)建貴異常的昂貴之處不在try-catch本身而在throw new的那一刻。JVM在創(chuàng)建異常對(duì)象時(shí)要填充線程當(dāng)前調(diào)用棧也就是抓取棧幀快照這個(gè)操作比普通new一個(gè)Object高出兩三個(gè)數(shù)量級(jí)。更致命的是如果你在循環(huán)里頻繁拋出異常這個(gè)開(kāi)銷會(huì)被放大幾十倍。所以實(shí)戰(zhàn)里有一條鐵律不要用異常做控制流。我見(jiàn)過(guò)有人用NumberFormatException來(lái)判斷字符串是不是數(shù)字用ArrayIndexOutOfBoundsException來(lái)檢測(cè)數(shù)組結(jié)束這些都屬于典型的錯(cuò)誤示范。正確做法是直接用正則、Character.isDigit()或顯式判斷。// 反例異常控制流 try { int val Integer.parseInt(str); } catch (NumberFormatException e) { // 認(rèn)為不是數(shù)字 }如果你確實(shí)要對(duì)所有字符串做轉(zhuǎn)換并容忍非法值可以在高頻路徑上用“前置校驗(yàn)parse”組合或者干脆在外面catch但內(nèi)部已經(jīng)限定了這個(gè)方法的調(diào)用頻率。總之異常是給“不該發(fā)生但發(fā)生了”的情況準(zhǔn)備的不是給“預(yù)期會(huì)發(fā)生”的事情準(zhǔn)備的分支邏輯。4.2 批量處理中的異常隔離一條壞數(shù)據(jù)不應(yīng)該帶崩整批批處理是異常設(shè)計(jì)最容易失衡的場(chǎng)景。一條臟數(shù)據(jù)拋個(gè)異常如果沒(méi)處理好整批任務(wù)戛然而止之前處理完的幾千條全部白做。但如果每條都捕獲、打印堆棧那日志量和CPU開(kāi)銷又不劃算。正確設(shè)計(jì)思路是把單條捕獲和失敗收集結(jié)合起來(lái)循環(huán)內(nèi)逐條捕獲收集錯(cuò)誤到List不中斷批量循環(huán)外根據(jù)錯(cuò)誤數(shù)量決定是繼續(xù)還是告警。同時(shí)日志層面要做降噪相同錯(cuò)誤碼只記錄一次完整堆棧后續(xù)只計(jì)數(shù)。ListString failMessages new ArrayList(); for (OrderDTO dto : batchList) { try { processOne(dto); } catch (BizException e) { failMessages.add(訂單 dto.getOrderNo() 失敗: e.getMessage()); } } if (!failMessages.isEmpty()) { alarmService.sendBatchWarn(batchId, failMessages.size(), failMessages.stream().limit(20).collect(Collectors.toList())); }還有個(gè)經(jīng)驗(yàn)批處理里最怕的是“無(wú)差別異常捕獲”把程序Bug也當(dāng)作業(yè)務(wù)失敗一樣吞掉。我的建議是只catch預(yù)期的BizException和明顯的可恢復(fù)異常對(duì)于RuntimeException跑出來(lái)的程序缺陷應(yīng)該讓它中斷一次打出一個(gè)完整堆棧然后修復(fù)代碼而不是偽裝成一條失敗記錄繼續(xù)跑。4.3 線程池和異步任務(wù)中的異常處理異常不會(huì)自動(dòng)消失只會(huì)自動(dòng)被吃掉用線程池的時(shí)候有個(gè)普遍誤區(qū)以為任務(wù)里的異常會(huì)自動(dòng)像主線程那樣打印出來(lái)。其實(shí)Exception在execute()方式提交的任務(wù)里會(huì)被線程池的run()方法捕獲然后靜默丟棄。也就是說(shuō)你在業(yè)務(wù)代碼里沒(méi)捕獲的異常線上日志里什么都看不到任務(wù)看起來(lái)是“沒(méi)報(bào)錯(cuò)”地消失了。這非常危險(xiǎn)。如果你用ExecutorService的execute(Runnable)提交任務(wù)一定記得給線程池設(shè)置一個(gè)UncaughtExceptionHandler作為全局兜底日志。如果你用的是submit(Callable)任務(wù)里的異常會(huì)被存儲(chǔ)在Future內(nèi)部必須調(diào)用future.get()才會(huì)被重新拋出。所以submit之后最好結(jié)合Future的get結(jié)果統(tǒng)一處理別調(diào)了submit就徹底不管了。ThreadPoolExecutorExecutor pool new ThreadPoolExecutor( 4, 8, 60, TimeUnit.SECONDS, new LinkedBlockingQueue(1000), new NamedThreadFactory(order-async), new ThreadPoolExecutor.AbortPolicy() ); pool.setUncaughtExceptionHandler((t, e) - log.error(線程池任務(wù)異常, thread{}, t.getName(), e));5. 常見(jiàn)問(wèn)題速查與排查技巧實(shí)錄與其把每個(gè)異常類都背一遍不如掌握一套排查思路。我在這一章里把高頻異常整理成一份速查表再結(jié)合真實(shí)案例講講排查鏈路。5.1 高頻異常案例NPE、ClassCastException、IndexOutOfBoundsNullPointerException在所有線上異常里排第一。排查NPE的核心是讀堆棧Java高版本會(huì)精確提示“Cannot invoke xxx because the return value of xxx is null”直接定位是哪個(gè)調(diào)用null了。如果堆棧信息里看不出來(lái)最快的辦法是在IDE里設(shè)置 “NPE breakpoint”開(kāi)啟斷點(diǎn)條件后異常拋出的那一瞬間就能看到當(dāng)前作用域里每個(gè)變量的值。它最讓人頭疼的是各種“偽裝NPE”比如Stream里map中調(diào)用方法返回null后續(xù)reduce直接炸。規(guī)避思路無(wú)非兩個(gè)要么源頭杜絕用Optional Objects.requireNonNull盡早暴露要么在邊界防御對(duì)關(guān)鍵接收對(duì)象做isNull判斷。ClassCastException通常不是“強(qiáng)轉(zhuǎn)錯(cuò)類型”而是類加載器問(wèn)題或泛型擦除帶來(lái)的假象。我遇到過(guò)的情況包括不同jar包帶了同一個(gè)類的不同版本代碼里強(qiáng)轉(zhuǎn)成另一個(gè)ClassLoader加載的版本直接ClassCastException。排查時(shí)除了看堆棧還要看是哪個(gè)ClassLoader加載的這兩個(gè)類。至于IndexOutOfBoundsException常見(jiàn)于遍歷時(shí)刪元素、計(jì)算數(shù)組索引越界處理原則是“用迭代器刪除、無(wú)把握就用for倒序或stream filter”。速查表整理如下異常類型常見(jiàn)誘因排查重點(diǎn)NullPointerException調(diào)用鏈中某個(gè)中間值為null高版本直接看堆棧提示是哪個(gè)方法調(diào)用導(dǎo)致ClassCastException強(qiáng)轉(zhuǎn)類型不匹配、類加載器不一致加JVM參數(shù)打印類加載器確認(rèn)jar版本IndexOutOfBoundsException集合動(dòng)態(tài)修改、索引計(jì)算錯(cuò)誤檢查循環(huán)下標(biāo)、刪除操作方式IllegalArgumentException參數(shù)校驗(yàn)失敗但被忽略看是否進(jìn)入異常控制流的錯(cuò)誤場(chǎng)景OutOfMemoryError堆內(nèi)存泄漏或堆參數(shù)過(guò)小dump堆再分析大對(duì)象、GC Roots引用鏈5.2 用堆棧信息定位問(wèn)題的“Caused by”才是關(guān)鍵排查異常的第一個(gè)動(dòng)作不是看第一行而是看完整的堆棧鏈特別是Caused by后面的部分。尤其在異常被層層包裝后只有追到根因才能真正解決問(wèn)題。我舉個(gè)例子一個(gè)調(diào)用第三方接口的服務(wù)一直報(bào)BizException面上消息是“調(diào)用超時(shí)”。表面看是接口問(wèn)題但繼續(xù)往下翻Caused by是SocketTimeoutException再往下還有一層Caused by是DNS解析超時(shí)。真正要處理的是DNS服務(wù)器速度而不是給接口超時(shí)加長(zhǎng)。如果只看第一層這個(gè)問(wèn)題永遠(yuǎn)解決不了。所以我在團(tuán)隊(duì)里反復(fù)強(qiáng)調(diào)“看堆棧只看到Error Line就開(kāi)始回復(fù)這是最不專業(yè)的排查方式。” 至少要看完整堆棧的caused by鏈。5.3 線上異常排查的完整鏈路traceId 日志級(jí)別 分組告警線上問(wèn)題比本地復(fù)現(xiàn)難得多核心武器是鏈路追蹤和日志。一個(gè)請(qǐng)求從網(wǎng)關(guān)進(jìn)入后都會(huì)由框架生成traceId并塞進(jìn)MDC。這樣一條請(qǐng)求在多個(gè)服務(wù)間的所有日志都帶著同一個(gè)traceId用grep一拉就能還原整條鏈路。異常排查最基礎(chǔ)的操作就是報(bào)錯(cuò)發(fā)生時(shí)先用異常信息里的關(guān)鍵字搜traceId再把這條traceId的所有日志按時(shí)間順序捋一遍。日志級(jí)別這里也要有講究。不要把業(yè)務(wù)異常的ERROR級(jí)別當(dāng)洪水猛獸在批量任務(wù)中一條數(shù)據(jù)失敗是正常情況級(jí)別應(yīng)該用WARN只有整批失敗、服務(wù)不可用、內(nèi)存異常才應(yīng)該用ERROR。不然日志系統(tǒng)里全是ERROR真正嚴(yán)重的問(wèn)題反而不容易區(qū)分。告警這塊我建議按異常類型分組而不是按服務(wù)維度無(wú)腦觸發(fā)。BizException可以單獨(dú)設(shè)置低頻告警NPE和類轉(zhuǎn)換異常這類程序Bug可以整頁(yè)郵件告警Infrastructure異常網(wǎng)絡(luò)超時(shí)、數(shù)據(jù)庫(kù)連接池打滿要走獨(dú)立的高優(yōu)告警通道。6. 團(tuán)隊(duì)規(guī)范與異常處理的長(zhǎng)期修養(yǎng)很多人以為異常處理是“語(yǔ)法技巧”但一個(gè)項(xiàng)目里異常處理好不好更多取決于團(tuán)隊(duì)有沒(méi)有形成一致的規(guī)范。有些原則是靠日積月累沉淀出來(lái)的。6.1 異常處理相關(guān)的團(tuán)隊(duì)規(guī)約寧可少吞不可多寫(xiě)我參與過(guò)的幾個(gè)項(xiàng)目都定了一些異常相關(guān)的規(guī)約核心大致是禁止捕獲異常后不處理、不輸出、不重新拋出。實(shí)現(xiàn)了“處理”就一定要有動(dòng)作。禁止捕獲Exception后只打e.getMessage()不打堆棧。禁止用異??刂茦I(yè)務(wù)流程比如用parse異常當(dāng)校驗(yàn)分支。禁止在循環(huán)中創(chuàng)建、拋出、捕獲異常來(lái)做分支判斷。業(yè)務(wù)異常必須使用統(tǒng)一異常類和統(tǒng)一錯(cuò)誤碼禁止直接拋new RuntimeException(中文提示)。禁止在finally里return或throw這是代碼review必掛項(xiàng)。這些規(guī)約不是教條每條背后都有一次深刻的線上事故或者繁瑣排查的教訓(xùn)換來(lái)的。6.2 從“會(huì)用異?!钡健霸O(shè)計(jì)異常”像設(shè)計(jì)API一樣設(shè)計(jì)你的異常更高一層的異常處理能力是把異常當(dāng)作API的一部分來(lái)設(shè)計(jì)。這就意味著異常類型名要說(shuō)明問(wèn)題本質(zhì)比如OrderExpiredException而不是BizException 105異常message要有可操作性異常里要能帶上下文參數(shù)調(diào)用方要能從異常中知道下一步該怎么處理。比如一個(gè)支付回調(diào)接口拋出的異常類型如果叫PaymentStatusMismatchException里面有orderId、currentStatus、expectedStatus調(diào)用方一看就知道是狀態(tài)流轉(zhuǎn)不對(duì)而不是一頭霧水地再去查數(shù)據(jù)庫(kù)。好的異常設(shè)計(jì)能顯著減少跨部門(mén)扯皮尤其在對(duì)接第三方系統(tǒng)時(shí)異常信息越明確聯(lián)調(diào)效率就越高。6.3 最后再分享一個(gè)真正值錢的經(jīng)驗(yàn)從我個(gè)人經(jīng)驗(yàn)來(lái)說(shuō)排查異常時(shí)最容易犯的錯(cuò)誤是過(guò)度依賴異常本身而忽略了正常路徑下的上下文現(xiàn)場(chǎng)。異常只是“結(jié)果先生留下的通知”真正的問(wèn)題往往發(fā)生在拋異常之前的幾步。比如數(shù)組越界越界只是結(jié)果循環(huán)邊界算錯(cuò)了才是根因校驗(yàn)失敗只是結(jié)果數(shù)據(jù)是怎么被污染的才是根因。所以我現(xiàn)在排查異常時(shí)會(huì)養(yǎng)成一個(gè)習(xí)慣不僅看異常堆棧還要順著日志往前翻30秒看看異常發(fā)生前這個(gè)請(qǐng)求都經(jīng)歷了什么。絕大多數(shù)詭異問(wèn)題的答案其實(shí)都在那段“看似正?!钡娜罩纠?。這也是我把異常處理定義為“長(zhǎng)期修養(yǎng)”的原因——它不是幾個(gè)語(yǔ)法點(diǎn)而是一整套排查問(wèn)題、設(shè)計(jì)代碼的思維方式。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
热九九精品| 日本亚洲vr欧美不卡高清专区| 精品少妇一区二区三区在线视频| 97精品中文字幕| 国产精品熟女一区二区三区| 色性综合| 黑人性欧美| 特级特黄一级毛片免费| 欧美高清性猛交| 日韩性色| 一级做受视频免费是看美女| 91 刺激在线| 男人的天堂kva| 国产亚洲性生活视频播放| www.激情| 九久精品| 亚洲色图大香| 97视频播放| 日本高清有码网址视频| 日本一天色道久久久精品视频| 乱欲视频| 国产a级精品| 日韩有码专区| 狠狠色丁香| chaopen97久久| 激情网色| 一区二区不卡免费| 亚洲巨爆乳一区二区三区四季网| 99re6久热只有精品6在线直播| 天天综合网在线91| 男人天堂婷婷五月天校园春色| 91欧美www| av国产无码| 五月婷婷青青草娱乐伊人| 极品尤物自安慰| 91色色综合| 综合欧美激情网| 999久久久久久久精| 澳门黄片一香蕉视频| 高凊专区人人操| 97爱综合| 成人在线午夜视频一区| 日本高清一区二区在线| 亚州精品人妻一二三区| 中文字幕在线日亚州9| 午夜精品久久久久久久久久久久久 | 久久精品国产亚洲AV成人直播| 日本一二三免费久久| 99re这里只有精品2| 狠狠躁AV| 超碰97久久| 日本久久天堂| 欧美高清18A片| 九久9热| 老熟女乱伦片| 丰满人妻一区二区中文| 国产日韩欧美三级片| 亚洲欧洲日韩中文字幕一区| 少妇一区二区三区在线观看| 超碰成人公开| 亚洲牲交| 九九综合网| 色婷婷丁香五月| A级国产欧美激情在线| 欧美日韩亚洲五月天婷婷| 国产伦乱91| 一本久道久久综合狠狠爱一密臀精| 激情四射婷婷四五月天| 精品日韩中文在线| 东京热,男人的天堂| 99久久com免费视频′| 国产精品白丝在线播放| 久久东京热成人| 翘臀vidoes| 乱论91| 九久久九九久视频| 欧美 熟女 日韩| 东京热亚洲一区二区| 一区二区三区亚洲| 国产成人五月天丁香花| 精品国产乱码久久久兰草影视| 蜜臀久久99精品久久久电影| 一区二区无码视频| 妇女视频网站| 操狠狠| 亚洲aV性爱| 日本精品中文字幕视频| 欧美巨大性舒爽顶到了| 中出20p| 啊啊啊97视频| 欧美黄色片AAAAA| 精品国产一区二区三区四区在线看| 人妻色情天天操| 久久色一区二区| 偷拍 精品另类 凸凹了四区| 色婷网| 秋霞一级鲁丝片A片| 日本不卡在线二区三区| 九九九九精| 果冻传媒一区二区三区| 人妻在线大香蕉| 亚洲精品一区中文字幕乱码| 九月婷婷| 人妻22p| 蜜臀AV网站| 啪啪啪东京| 日韩猛交| 国语少妇精| 亚洲的天堂网| 亚洲大胆人体av| 久久久久久久久久久久久久久性生活视频| 东京热免费视频| 日韩成人性爱AV| av网站免费线看| 国内一区二区三区| 天天综合网亚洲综合网| 欧美极品少妇| 97伦综合| 久夜视频| 成年人网站在线免费观看| 91性网| 色色九区| 亚洲开心网| 97在线免费| 九九九九九九九九九国产精品| 男人成人黄色视频在线观看免费下载| 97久久国产精品| 久久久精品一区二区| 国产精品不卡一区二区三区| 色阁阁AV综合网| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 国产无马av| 五月婷久久| 国产黄a三级三级三级av在线看| 黄污污污污| www.夜夜操| 超碰亚洲97| 欧美熟妇精品黑人巨大一二三区| 中文字幕乱碼在线| 日韩中文字幕宗合在线| 男人的天堂VA| 欧美v日韩v亚洲v最新在线| 777超碰| 999综合网| 日韩一区二区精彩视频| 欧美日韩第一页| 伊人97超碰| 日本一区99| 啊啊啊97视频| 麻豆视频一区二区| 99在线无码精品秘 入口黑人| 欧美亚洲日本激情在线| 成人欧美一区二区三区黑人一| 无码又爽又硬又激情免费视频 | 亚洲妇色| 60秒免费视频| A 天堂| 一级性爱视频免费观看| 人人考人人摸人人干| 亚洲无线码一区国产欧美国| 淫色网综合| 日韩图区| 午夜精品久久99蜜桃的功能章节| 国产Av超碰| 日韩成人精品| 亚洲色五月| 亚洲情色一区三区| 欧美激情视频一区二区| 久久亚州精品成人Av无| 狠狠色色| 亚洲天天精品| 偷拍 欧美 日韩| 精品毛片久久久精品毛片| 神马视频久久久久久| 先锋音影AV| 熟女熟妇一区二区三区视频| 插入逼91| 亚洲男人天堂2019| 久湿久久 | 大香蕉日韩欧美| 美女天天干| 欧美特大AA级黄片| 男女一级A片大黄,一进一出| 嗯嗯嗯啊啊啊操的我好爽| 麻豆精品三区视频| 国产精品美女久久久久久网站| 啪一啪免费视频| 中文字幕91综合| 欧美精品不卡一二三四在线91| 十八禁视频一区二区| 丁香六月综合激情| 限制级中的三级片中的黑粗大屌屌日人妻熟女| 久久国产逼| 久久免费老司机精品| 久9爱精品| 国产精品免费日韩| 99热 按摩 日韩| 2023天天操夜夜操| 成功精品影院| 日本熟妇自慰性高潮一区二区三区| 丝袜美腿操av| 天天肏天天干| 久久99热这里只频精品6学生| 桃色人妻在线视频| 一级aaaaa欧美中文字幕录像片| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 国产自偷自拍一区| 国产高清不卡视频| 中文字幕在线免费观看2| 日本色色色色色视频| 91视频成人福利网站在线一区 | 欧美成人9797| 一区,二区,三区视频| 丝袜喷水在线| 女人爽到高潮久久久| 99国产精品免费| 日韩欧美麻豆 | 亚洲综合图文| 亚洲无码超碰免费| 欧美玖玖爱免费玖玖| 强奸乱伦亚洲第一页| 青青久操| 亚洲成人福利电影免费| 麻豆一区二区AV天美| 四色永久成人网站| 日韩一级性爱无码| 欧美韩国你懂得在线| 伊人网青青| 婷婷情色五月天| 人妻 丝袜美腿 中文字幕| 久久伊人青青草| 欧美顶级黄色大片免费| 国产第二页| 在线无码视频| 老熟女阿 国产91| 在线观看日韩av不卡| 久久大香蕉97| 丝袜喷水在线| 日韩人妻播放| 欧美色图欧美| 亚洲天堂热| 久久大| 亚洲 欧美 另类 综合 偷拍| 亚州性色| 大香蕉伊人亚洲| 无码丰满熟妇一区二区浪潮AV| 欧美综合 站| 日本性爱网址| 亚洲熟女av中文字幕| 欧美天天谢综合网| 激情综合婷婷| 国产综合久久久麻桃个| 殴美,日韩国产伦精品| 青青草一区二区高清无码视频| 久久免费中文字幕在线观看| www色色色com| 人人澡人人干| 成人精品视频| 超碰免费在线| 粉嫩av在线一区二区| 日夜精品| 不卡六六在线91| 久久久精久久久| 3P乱轮视频| 亚洲福利影院一区久久| 中文一区二区| 香蕉久久AⅤ...| 四虎av在线| 久久久婷婷| 九色视频91| 欧美日韩另类在线播放| 欧美人妻制服| 91女色| 中国熟女网站| 女一区二区| 凸凹视频在线观看| 久久综合国产精品国产| dy888午夜老子影视达达兔| 熟妇人妻一区二区三区| 中日高清无码操逼视频| 另类图片欧美激情综合| 色臀AV| 大乔未久88一区| 有码人妻系列| 99re6久热只有精品6在线直播| 九九综合九九综合| 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 国产亚洲精品一区二区三区| 久久岛国| 成人资源中文字幕在线观看| 99蜜桃臀久久久欧美精品网站| 欧亚乱色熟一区二区三四区| 成人综合色网| 亚洲日韩一区电影| 亚洲.欧美.丝袜.中文.综合| 欧美99热| 韩日性爱av| 久久久精品| 久久久久久久久久久精| 9精品久久| 第四色色综合91| 天天爽爽爽爽| 混色激情av| 99热这里只有精品8| 免费少妇一区二区| 亚洲成人黄色在线观看| 乱伦一区二区三区‘| 影音先锋日本乱伦| 国产成人无码a| 国产激情综合| 91第一页| 亚欧美色图| 亚洲 欧美 日韩另类 麻豆| 中字乱伦AV| 果冻传媒A片麻豆熟妇人妻| 青青草日本中文字幕| 黄色性爱网网| 午夜精品久久久久久久99热影院| 久久天堂| 歐美性天天| 区一二区日韩亚洲乱码av电影| 尹人大香蕉视频在线| 爱做久久久久久| 日韩av不卡在线看| 欧美性爱www免费版| a级成人毛片免费视频高清| 思思热er精品视频| 五月婷婷爱六月丁香色| 日本三级中国三级99人妇网站| 五月丁香六月婷| 亚州色交| 偷拍欧美激情| 久久鲁夜| 超碰在线综合97| 国产一二三福利视频网| 久久久成人免费av电影| 日本五区不卡| 欧美不卡五十路| 欧美熟妇成人一区二区| 国产精品无套内谢| 一区二区娱乐网站| 屌逼传媒| 98一区二区精品| 日逼五月天| 免费97视频| 啊v在线观看视频| 操逼无码操逼| 亚洲欧美日韩精品久久久一区二区| 欧美99热| 男人天堂.AB| 91老熟女老女人国产老太| 欧美性五月| 91丝袜在线观看| ..日韩av毛片精品久久久| 中国国国产一级特黄毛片| 久久99热这里只频精品6学生| 九九热最新| 粘花网06av视频| 91精品少妇搡搡搡| 99久久精品国产系列| 免费伦费视频在线观看| 蜜桃视频精品一区二区| 蜜臀一二三区| 国产JDAV无码视频在线观看| 综合激情五月天| 亚洲欧洲色情高清| 大屁股人妻女教师撅着屁股| 懂色AV蜜臀无码精品APP| 国产在线不卡导航| 制服诱惑亚洲一区二区三区在线观看| 91黄射| 91精品人妻偷情| 久久五月丁香| 宗合情欲网| 亚洲熟妇A V黑人| 亚洲精品人妻吞精av| 91最新综合| 亚洲女人91| 51一区二区三区| 亚洲,欧美,春色,另类 | 欧美日韩人妻婷婷一区| 伊人精品视频| 色姑娘综合网| 青青草日韩无码| 91色人| 久久久久久日韩| 91狼人| 97人人射| 精品97久久综合| 99少妇| 综合一区中亚洲国产成人综合精品| 超碰在线974| 亚洲综合网91| 久99| 97中文字幕一区| 亚洲少妇综合在线播放| 999综合色| 国产成人 综合亚洲 天堂| 丁香激情网| 怡春院久久| 久9视频| 大香交| 在线观看日韩av不卡| 色天欧美| 国产亚州日韩欧美看片| 久热精品在线| 超碰av在线| 熟人人妻少妇精品久久| 亚洲欲色9532548967一区| 狠狠爱夜夜| 国产成人午夜视频网址| 亚州春色| 成人性爱美曰韩| 性性欧美| 欧美日韩操逼嗦吊| 亚洲高清综合网| 992这里有精品| 97日韩欧美亚洲| 香蕉久久国产AV一区二区| 免费视频观看60秒| 在线人人人人人人精品超| 久久一二三四五六七八九区| 中文字幕一区二区三区视频播放| 欧美色视| 二对二中文字幕。| 超碰在线香蕉| 99操逼| 久久99黄色卞西瓜| 美女熟妇色| 九九九九97| 乱色视频中文字幕| 久操视频在线观看| 日韩情色AV| 亚洲,日韩,欧美,成人播放 | 亚洲人成在线放东京热| 亚洲欧洲色情高清| 国产成人无码网站在线视频| 91精片| 亚州综合AⅤ| 美女黄频a美女大全免费皮| 五月情色天| 色婷婷婷五月天激情四射| 国产一级操B视频| 蜜臀99久久国产| 精产国品一区二三产品| 韩国黄片aaaa| 在线洲亚线| 手机不卡视频不卡在线一二三区| 精品人成视频在线观看| 操死我了啊啊啊| 亚洲图片欧美在线视频| 国产成年女黄特黄| 日韩传媒在线| 黄色电影观看久久9| 九九久久久| 亚洲www91| 亚洲日产专区| 三级精品三级在线观看| 一本久道久久综合狠狠爱一密臀精| www.99热在线只有精品| 东京热亚洲一区二区| 天天日天天搞天天干| 97超级久久| 色老牛| 精品人妻1237| 丁香婷婷啪啪| 美中日韩无码| 国产三级在线现体验区| 97超碰色色| 国产成自自拍在线观看| renqi久久久久久久久久久久| 少妇久久久久久| 亚洲人人夜夜澡人人爽| 黄呦呦在线| 青青草在线成人视频| 立川理惠无码一区二区| 乱欲一区二区| A级毛片在线看免费| 日本免费一区二区不卡| 麻豆 亚洲 97| AV中文在线| 日va操| 伦激情人妻另类人妻| 亚洲综合在线91| 伊人96在线| 日韩精品怡红院| 97se综合网| 国产精品制服丝袜中文字幕日韩一区二区三区 | 插入综合网| 久久老子无码午夜伦不卡| 黄色片一区二区三区四区五区 | 欧美美女在线高潮999| 小草三级久久观看| 人人摸人人干| 激情久久久| 日韩午夜精品一区二区三区电影| 免费公开人人操| 久草视频观看视频在线| 蜜乳AV一区| 凹凸视频在线一区二区| 精品少妇高潮久久| 日韩欧美麻豆 | 欧美日韩99| 综合色图区| 一区在线国产播放| 开心五月天激情网| 国产一区二区三区中文字幕| 精品熟女一区=区三区| 欧美熟妇视频| 久久偷拍人| 青青青国产| 日韩AV色图| 97人亚洲综合字幕| 欧美视频激情久久久久久| 超碰综合色| 亚洲AV免费在线观看| 超碰 另类 欧美| 欧洲亚洲人妻无码中字久久三区四区| 99啪啪| 日韩 人妻 精品| 亚洲成人一二三区| 午夜福利在线合集| 国产精品禁久久久精品| 啊啊啊慢点| 色欲天天综合久久久无码网中文| 国产欧美在线观看免费观看| 国产一级高跟丝袜| 国产成人bd在线观看| 99视频只有精品| 亚洲人在线成线成人| 久久m| 96国产精品| 精品玖九九久| 伊人久久综合影院精品久久久| 能在线播放的国产三级| 亚洲国产高清福利视频| 亚洲宅男天堂| 97精品国产精品免费观看| 一二三四区电影| 一区在线精品中文字幕| 午夜120视频在线观看| 国产操逼逼网| 天天干天天操天天干天天操| 天天做天天爱天天爽| 欧美日韩222| 尤物AV免费网站| 亚洲一区二区三区在线激情| 中国东北熟女老太婆内谢| 无码色| 性色国产东北露脸精品视频| 嗯嗯啊啊亚欧精品| 亚洲精品蜜桃久久久| 欧美翘臀视频网站一区二区三区| 亚洲国产尤物yw在线观看| 婷婷中文网| 日本三级小说中文字幕| 亚洲自拍小说| 一区二区三| 家庭乱伦网站国产| 中文字幕精品丝袜| 一本色道久久综合精品婷婷| 亚洲一卡二卡在线免费| 黄色片大香蕉| 这里只有精品久久| 97天天在线| 性videos欧美熟妇hdx| 丁香婷婷久久 | 九九在线视频| 国产熟码AV| 成年人三级黄色片视频| 强奸乱伦资源| 偷拍在线观看视频| 亚洲 无码 偷拍| www.狠狠干.coom | 男女做爰猛烈动高潮A片免费应用 少妇厨房愉情理伦片bd在线观看 不卡中文字幕aⅴ在线 | 免费观看一区| 岛国在线国产| 国产乱婷婷精品二区三区| 亚洲Av诱惑| 被体育老师抱着c到高潮| 久婷婷一区| 曰韩人妻中文字幕在线| 极品五月天噜噜| 欧美 亚洲精品首页| 欧美黄色大香蕉一区二区| 1204av韩国| 9国产超碰| 久久综合中文国产| 欧美日韩在线小说| 国产后入精品| 中文乱码字字幕在线第5页| 欧美图片偷拍| 蜜臀久久久99久久久久 | 亚洲久久久久| 人妻天天操天天爽视频免费| 啪啪啪亚欧美视频| 久久草草欧美精品| 蜜臀一区二区三区亚洲最新章节在线观看 - 高清蜜臀一区二区三区亚洲全集播放 | 欧美色狠| 99re视频在线观看这里只有精品| 国产搭汕a级片| 色婷婷小说| 97精品一区二区三区免费| 免费观看的av| 日韩在线国产字幕| 夜夜嗨av午夜成人| 久久五月天婷婷丁香中文字幕| 久久97资源 网| 久久伊人最新网址视频| 99re69综合| 黄色av网站在线播放| 天天操美美| 日韩一区二区高清在线观看的| 一区中文字幕二区日韩| 国产精品 久久久精品一牛| 97九色人妻| 性爱综合一区二区| 97超碰天天爱天天爱| 国产精品亚洲无码| 中精品一区二区三区| 99久久久99久久91熟女| 四虎精品永久在线播放| 久插综合| 亚洲国产另类在线中文| 亚洲精品天天影视综合网 | 国产精品一区午夜福利| 欧美后入式| 五月天婷婷久久| 欧美色图欧美| 亚洲城人男人的天堂| 亚洲制服aⅴ中文字幕| 97超碰国产亚洲精品| 人妻激情偷乱视频一区二区三区 | 日韩在线观看中文字幕视频| 青青草无码视频| 激情久久久| 久久精品国产精品一区| 亚洲情色综合网| 成人夜夜爽| 亚洲国产ⅴ高清在线观看| 大色网久久| 熟女丝袜视频| 国产精品一区二区 尿失禁| 91视频综合| 亚洲精品黑丝| 一本正道久久熟女| 久久久久亚洲?V片无码V| 日日骚一区二区三区| 国产精品网站www| 免费看日产一区二区三区| 野狼福利社区| 91熟女少妇| 成人日韩中文字幕| 亚洲丁香花色| 操逼无码一区| 亚洲熟女诱惑| 日韩 欧美 国产 麻豆| 小草精彩毛片| 亚洲天堂热| 一线黄色免费性爱片| 综合久久9| 久久秀这里有精品| 综合久久中文字幕综合日韩精品| 秋霞网—男女啪啪亚洲免费体验区 | 久久久久久久强迫| 超碰在线日韩一区| 日韩精品国模| 色爱欲亚洲| 翘臀vidoes| 色区久久| 大香蕉乱级| 超碰色综合| 综合色久欲| 久热99| 欧美,日韩综合久久| 男女无套 免费网站| 国产sv美女内射| 欧美色997| 精精夜夜| 国产亚洲精品自在线亚洲情侣| 成人a大片在线观看| 大二网站亚洲| 1000部熟女视频在线观看| 亚洲在线91| 美女97超碰| 五月婷婷大香蕉| 婷婷AV一区二区三区| 伊人一区二区在线播放| 亚洲欧美日韩不卡人妻| 91美女片在线| 亚洲情色 自拍| 夜夜无码| 精品一区二区三区蜜桃| 久久高清无码夜夜操| 亚州欧美总和| 日韩大香蕉精品在线视频| 九九av| 亚洲交换| 久九九九九九九热| 狠狠干狠狠干| 综合一区中亚洲国产成人综合精品 | 男人的天堂2010| 天天爽天天| 欧美日不卡| 91美女视屏| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 性爱视频久久| 亚洲麻豆精品二区三区| 婷婷伊人一区| 午夜.DJ高清在线观看免费7 | 伊香蕉综合久久久久久久噜噜噜| 天天综合网~91入口| 国产成人精品午夜福利| 国产免费一区| 亚洲激情在线| 污色区网站| 国产成年精品高清在线观看91| 人人操人人操人人操人人操人人操人人人11.CM| 综合色欧美| AAAA级日本片免费视频| 人妻丝袜美腿中文字幕| 97亚洲欧美| 日韩99精品视频综合区| 日韩一性一交一A片俄罗斯| 操逼视频免费日韩无码| 欧美国产日韩清纯唯美| 桃色六月天| 91 丝袜在线| 欧亚日韩综合精品国产| 天天操天天日青青草超碰av| 免费在线视频97| 日本伦乱九九九综合| 91伊人久| 国产一级内射无挡观看| 亚洲午夜AV| 91麻豆天美传媒HD| 91在线国产后入风骚翘臀美女素人| 国产性爱欧美性爱在线 | 爱逼综合| 国产AV久久野战精品| 中文字幕日韩综合| 欧美 亚洲 另类 综合| 无码粉嫩白虎一线天b区| 人人操人人插 - 百度 - 百度| 91强热人妻| 天天影视色香色欲| 国产精品久久久久久久久久久久久久久| 一本色道熟妇| 涩涩涩综合| 人成午夜免费大片| 蜜桃久久久久久久| 2017超碰| 久久春色| 国产强奸超碰AV| 国产乱婷婷精品二区三区| 福利风月五月天影院| 亚洲成人帖图| 午夜激情成人在线观看| 亚洲色图超碰在线| 色五月AV在线| 久久日韩精品一区二区| 夜夜嗨一区二区| 99福利社| 久草视频在线视频在线视频在线观看 | 欧美精品系列| 国产51色综合久久免费| 色人久久| 欧美综合色综合| 国产精品久久久无码aV去| 黄色一区二区秘书性感| yazhousetuoumei| 亚洲交换| 黑人无码一区二区| 九九九影院| 粉嫩av平台| 人人爽天天爽| 欧美天堂在线| 爽 好舒服 无码刺激久久| 91在线丝袜视频| 熟女探花啪啪| 国产剧情一区在线观看| 97久久国产精品| 99性爱在线观看| 九九九九九九视频| 亚洲色图尤物视频| 蜜臀AV成人精品蜜臀AV久久| 亚洲成人ab| 亚洲1区| AV色五月天| 欧美性爱www免费版| 亚洲精品1区| 91在线精品一区二区三区| 99热色这里只有精品| 亚洲一二三四区| 久久99操天天日| 天美传媒AV在线播放| 激情五月丁香五月| 春色综合网| 翔田千里Av在线| 爱啪精品一区| 激情网色| 婷婷精品国产一区二区三区日韩| 国产黄色在线播放观看| 色97| 九99久久| 91狠狠色丁香婷婷综合久久| 精品国产丝袜一区二区三区乱码| CCYY草草影院地址入口| 亚洲综合在线高清| 久久一二三四| 久久久久国产亚洲一区欧美色图日韩 | 亚洲精品亚洲人成在线麻豆| 99re6国产精品99re| 五十路六十路七十路熟婆| 99精品热| 天堂无码精品国产久| 麻豆a'v电影| 日韩欧美成人午夜福利| 超碰在97| 色999;丁香五月| 亚洲丝袜诱惑| 乱理日韩中文| 国产中文精品一区二区在线观看| 久久久精| 性色一线| 手机在线中文字幕国产| 9久9久9久9久视频网站| 精品国产乱码久久久久久久久1| 激情综合网亚洲| 婷婷伊人一区| 九九九久| 一个人在线看的黄色电影网站| 日逼逼免费看| 国产精品白丝AV| 国产精品肉丝自拍| 美女写真| 久久精品成人| 青青草视频久久久久| 国产综合网站在线播放 | 天天综合亚洲综合| 美国aaaaa一级黄片| A级片日韩欧美国产欧美视频精选观看| 色色五月天激情| 78精品| 日韩无码AB| 99re不伦| ′ !γ}丶。。久久精品欧美一区二区三区| A级国产欧美激情在线| 天天操女人| 国产午夜精品在线观看| 岛国激情视频软件| 国产三级资源在线观看| 成人精品无码| 日韩精品人妻一| 久久久爆乳翘臀一线天伦理视频| 开心激情婷婷| 激情文学网伊人| 可以在线观看的黄色网址| 屁屁影院一区二区三区国产| 成人日韩3| 三级日本一区二区三区| 中文字幕乱码在线| 精品九九九九九九| 久久欲| 中国少妇啪啪视频| 九九热视频这里只有精品| 久久欧洲| 69久久| 一起草在线视频| 国产高清吃奶免费视频网站| 操逼1区| 91狠狠综合久久久久久| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 欧亚第一综合网| 日本中文字幕熟妇| 丝袜AV一区二区三区| 久久国产乱子伦精品免费女,网站| 蜜臀av中文字幕| 久操视频在线| 嗯嗯不要视频| 国产中出内射一区二区| 欧美极品性爱天天射| 高清在线偷拍自拍视频| 中文97国产| 天天综合~91| 国产av波波国产精品| 久久怡红院| 91无码人妻| 国产色产精品在线观看| 日本肉体xxxx裸交| 国产精品网站www| 青青草国产一区二区三区| 天天日天天操天天射河南省| 久操精品网| 精品人妻一区春色| 韩国三级一线观看久| 日韩av女优在线免费一区| 情侣操 逼视频99| a男人的天堂久久一级A毛片| 综合五月婷婷亚洲一区| 色性欧美| 天天做天天爱夜夜爽毛片试看| 人人看欧美性爱| 欧美视频激情久久久久久| 狠狠操使劲操| 亚洲av夫妻操穴网| 综合另类| wwe 天天干.com| 国产无马在线| 久久伊人青青草| 亚洲精品国产熟女| AV大香蕉| 超碰97色| 欧美性爱一区二区三区四区 | 亚洲影视综合| 青青草色插素人| 98人妻精品一区二区色欲| 国产伦精品一区二区三区视频女| 青青草大香蕉视频| 天天爽夜夜操| 超碰97久久| 亚洲综合性网址| 日本护士高潮| 天天综合网网欲色| 久久25| 操逼操逼操| 神马久久网| 探花一区在线| 午夜传煤十二区精品| 亚洲av热热色| 美女操逼福利视频| 97超碰香蕉| 67194无码不卡| 国产精品一二三在线看| 色99999| 视频在线观看青青99国产| 久久五月份| 黑人综合网| 欧美三级免费伊人| 秋霞Av理论一级在线| av午夜玫瑰| 欧美gv在线观看| 久久东京热成人| 超碰97资源大奶| 亚洲制服aⅴ中文字幕| 2017,超碰| 综精品久久久aaaa| 影音先锋视频在线| 精品熟妇视频一区二区| 嗯嗯啊啊啊好舒服| 日本福利二区视频| 欧美岛国精品在线观看| 欧洲综合色图| 91网站在线播放| 久久爽爽精品| 日本天天人人狠狠在线日美女 | 欧美久久人妻少妇一区二区| 黄色性爱网网| 熟女这里只有精品6| 亲子敌伦对白在线播放| 久久熟女久| 在现视频女上位好爽| 26uuu性物| 热99这里有精品综合久久| 欧美日本天堂| 极品白嫩福利在线| 亚洲天堂无码| 亚洲成人免费中文字幕| 久久亚洲av成人无码国产| 最新欧洲欧美日本激情网站| 亚洲精品一区中文字幕乱码| 久插综合| 9久9久9久9久视频网站| 欧美午夜熟妇黑人精品91| 放黄片放3级黄片没穿衣服| 韩国黄片aaaa| 色播丁香| 激情五月综合网| 欧美丝袜制服久久| 日韩性爱小视频在线观看| 国产女人成人精品视频| 强奸乱伦av电影| 丝袜熟女2P| 日韩熟妇二区| 97天天摸天天碰| 熟妇熟女视频一区二区三区| 无码一区二区三区四区五区六区七区八区九区十区视频 | 新怡红院| 粉嫩不卡一区二区性爱| WWW美腿丝袜香蕉中文| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 日韩午夜国产| 亚洲天堂久久| 日本色色视频网站| 蜜臀久久99精品久久久久电影| 在线女人91| 无码国产精品久久久久| 热99这里有精品综合久久| 天天综合网~91综合网| 激情婷婷五月天| 97天天插| 亚洲综合图片在线| 欧美色吧综合| 欧成人精品H无码| 97超碰站| 乱伦av国产| 三级特黄60分钟播放| 久久亚洲AV无码专区国产精品 | 欧美成年人性爱视频免费观看| 夜夜操av亚洲一区二区| 成人免费不卡在线视频| AAAA级日本片免费视频| 日曰骚久久精品| 亚洲大胆人体av| 久久久久久久久久久久久9999| 看一级黄色视频| 精品亚洲国产成人精品| 加勒比海人人操超碰在线| 超碰久久精品| 色爱综合网欧美| 久久极品伊人| 强免费黄色网址| 精品中文字幕第一页| 久久精品国产亚洲AV先锋| 日日骚一区二区三区| 歐美性天天| 国产精品色哟哟| 精品国产91久久久久久一区黄无| 亚洲少妇色| 欧美一级三级| www.色婷婷| 欧美性爱伊人| 操逼网免费无码视频| 在线看片国产精品每日更新| av一区二区三区四区| 久久久精品电影| 三级日韩一区二区三区| 亚洲国产97| 91一区二匹| 少妇高潮九九九九| 不卡视频一区蜜桃视频| 国产熟女一区二区| 欧美92| 国产99精品一区二区三区免费| 嗯嗯啊啊用力视频免费| 久久青青草在线视频| 天天爽天天爽| 天天草AV| 333kkkk·亚洲com久久| 嗯啊不要啊啊在线观看视频| 97超碰超碰| 亚洲国产午夜真人一级片中文字幕精品黄网站 | 91精品国产日韩欧美综合| 青青欧洲黑| 欧美日韩操逼嗦吊| 精品制服美女中文一区二区三区| 人人人摸人人| 手机av天堂久久久久| 日本高清一本二本免费不卡| 1级黄色夫妻对换性交免费看| 久操大香蕉手机视频在线看 | 国产精品永久免费10000| 久久久亚洲| 欧洲久久一二线| 91丝袜在线观看| 东北少妇高潮zzzz| 精品国产av一区二区三区四区入口| 成人线上超碰| 美女高潮国产高清| 欧美综合另类| 秋霞 色色| 欧美人与动性人交a| 色视频蜜乳| 五码视频在线观看| 粉嫩粉嫩一区性色AV片| 91强奸乱轮| 大香蕉宗合网在线| 不卡九肏| 亚洲最大黄网| 天美精品一区二区三区四区在线观看| 欧美视频激情久久久久久| 天天超级碰碰碰| 欧美,日韩,中文,另类| 四虎精品一区| 久9九综合在线| 亚洲欧洲成人在线电影| 午夜激情成人在线观看| 亚洲一卡2卡3卡4卡乱码网站| 丁香五月成人| 日本不卡码黄色| 亚洲综合贴图91 | 亚洲色婷婷| 97久精品| 熟女一区二区三区| 午夜福利 成人 91| 久久久久久久唑| 自拍偷拍草一草| 96久久精品一二三区色欲| 伊人亚洲国产一成人久久精品,久久| 91女网站| 超碰 国产熟女精品一区| 91天堂| 84YTCOM性无码| 嫩草一区二区在线观看| 淮穴色AV| 欧洲精品久久| 蜜臀久久99精品久久久电影| 国产毛片在线| 97精品国产97久久久久久| 日韩精品9999| 怡红院成人视频| 麻花豆传媒剧国产MV出差| 丁香五月婷婷色| 青青国产在线拍揄自揄拍| 欧美自拍网| 人人操人人干xxx| 99久久久久| 夜夜国产一区| 久久一区二区蜜桃| 亚洲AO在线| 久久久久久亚洲精品中文字幕人妻| 一区二区三区蜜桃成人撸久久东京热| 天欧美在线| 午夜福利一区二区影院| 户外裸露刺激视频第一区| 久视频在线观看| 干美女人妻| 国产精品久久aV| 亚洲五月婷婷| 九草在线大香蕉| 97色亚洲| 国产欧美亚洲精品a第2页| 6080yy午夜理论三级一区二区三区无码| 久久久久久性爱视频| 麻豆福利视频导航| 国产在线激情| 亚洲最新av无码成人精品区| 综合婷婷| 中文字幕乱码人妻一区二区三区,99精品 | 97亚洲欧美日韩| 亚洲牲交| 在线观看黄色电话| 亚洲精品不卡一二三区| ,成人免费啪啪视频| 欧美精品第四五页中文字幕在线观看| 亚洲阿v天堂在线| 男女激情黄色网址| 亚州操操穴网| 上特色A在线| 色色五月天激情| 偷偷人人精品女女久久| 国产二区视频在线观看电影| 中文字幕在线24| 精品九区| 91 亚洲 欧美 日韩 国产 综合| 色蜜AV| 51一区二区三区| 日韩 欧美 视频 在线 一区| 亚洲色图a| 色五月AV|