色五月色开心色婷婷色丁香,五月婷婷丁香花综合网,婷婷丁香五月激情综合在线,五月婷婷六月丁香动漫,婷婷丁香五月激情综合在线,丁香花中文字幕在线观看,播五月色五月开心五月网,开心激情综合网,狠狠色丁香婷婷综合最新地址,丁香视频在线观看,狠狠做六月爱婷婷综合av,久久激情五月丁香伊人

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Java異常處理全攻略:體系、機(jī)制、性能與排查實(shí)戰(zhàn)

Java異常處理全攻略:體系、機(jī)制、性能與排查實(shí)戰(zhàn) 寫(xiě)Java也寫(xiě)了十個(gè)年頭了異常處理這個(gè)話題每年都會(huì)翻出來(lái)聊但每次看新人的代碼還是會(huì)頭皮發(fā)麻。有的把異常當(dāng)擺設(shè)catch完打一行日志就當(dāng)無(wú)事發(fā)生有的把異常當(dāng)萬(wàn)能藥任何業(yè)務(wù)分支都用拋異常解決。異常處理不是Java語(yǔ)法里最難的那一坨但絕對(duì)是最能看出一個(gè)程序員功底的地方也是面試必問(wèn)、上線必踩的環(huán)節(jié)。這篇內(nèi)容我打算系統(tǒng)地把Java異常處理從頭到尾捋一遍從異常體系本身到底層機(jī)制從實(shí)戰(zhàn)策略到性能考量再到高頻問(wèn)題的排查思路。無(wú)論你是剛學(xué)Java準(zhǔn)備面試的在校生還是工作中時(shí)不時(shí)被線上異常困擾的初級(jí)開(kāi)發(fā)甚至是想幫團(tuán)隊(duì)定一套異常規(guī)范的組長(zhǎng)這篇都能給你一些可以直接用的東西。1. 異常體系全景先搞清楚Java到底把“錯(cuò)誤”分成了幾類很多初學(xué)者看了不少異常處理的代碼但問(wèn)起Throwable和Exception、Error之間的關(guān)系還是說(shuō)不明白。這個(gè)搞不清楚后面設(shè)計(jì)異常和處理策略都會(huì)跑偏。1.1 Throwable家族不要把Error當(dāng)Exception來(lái)處理先看最頂層的Throwable這是Java里所有“可以被拋出”的對(duì)象的共同父類下面分了兩大派系Error和Exception。Error表示的是JVM層面的嚴(yán)重問(wèn)題比如OutOfMemoryError、StackOverflowError、NoClassDefFoundError。這類問(wèn)題基本不是你的代碼能“捕獲后恢復(fù)”的捕獲了也沒(méi)用因?yàn)槌绦虼藭r(shí)大概率已經(jīng)處于半癱瘓狀態(tài)。所以常規(guī)處理原則就一句話不要在代碼里捕獲Error也不要去處理它讓它直接冒泡讓JVM和應(yīng)用進(jìn)程一起完蛋然后靠監(jiān)控報(bào)警去拉起來(lái)。我還有一點(diǎn)要特別提醒catch (Throwable t)這種寫(xiě)法在大項(xiàng)目里幾乎等于定時(shí)炸彈。Throwable是連Error一起捕獲的有些監(jiān)控框架會(huì)用它來(lái)做兜底記錄但如果你在業(yè)務(wù)代碼里寫(xiě)這種捕獲就等于把OOM也一并吞了后面出現(xiàn)詭異的內(nèi)存問(wèn)題排查起來(lái)非常痛苦。Exception是程序運(yùn)行中可恢復(fù)、可處理的問(wèn)題比如文件找不到、網(wǎng)絡(luò)超時(shí)、參數(shù)不合法。這才是我們?nèi)粘R攸c(diǎn)關(guān)注的。1.2 受檢異常與非受檢異常語(yǔ)法規(guī)定背后的歷史包袱Exception又進(jìn)一步分成兩類受檢異常Checked Exception和非受檢異常Unchecked Exception。受檢異常是編譯器強(qiáng)制要求你處理的典型就是IOException、SQLException。如果你調(diào)用了一個(gè)會(huì)拋受檢異常的方法你就必須“聲明throws”或者“try-catch”否則代碼編譯不過(guò)去。這個(gè)設(shè)計(jì)是Java早期的理念認(rèn)為程序應(yīng)當(dāng)對(duì)可預(yù)見(jiàn)的錯(cuò)誤顯式處理。但后來(lái)的實(shí)踐表明這個(gè)設(shè)計(jì)過(guò)度理想化了——很多時(shí)候你根本沒(méi)法在當(dāng)前位置處理這個(gè)異常卻還是被逼著寫(xiě)了一堆try-catch最后只是把異常包一層又拋出去純屬增加噪音。非受檢異常就是RuntimeException的子類以及Error。這類異常編譯器不管你可以選擇不捕獲。NullPointerException、IllegalArgumentException、ClassCastException、IndexOutOfBoundsException都屬于這一類。它們代表的通常是編程邏輯錯(cuò)誤或前置條件未滿足本來(lái)就該在代碼層面提前規(guī)避而不是依賴運(yùn)行時(shí)的異常處理機(jī)制。有個(gè)非常關(guān)鍵的區(qū)別需要理解Spring事務(wù)默認(rèn)只在RuntimeException非受檢時(shí)回滾受檢異常默認(rèn)不回滾。這個(gè)特性讓后來(lái)絕大多數(shù)Java框架更傾向于使用RuntimeException。所以現(xiàn)在寫(xiě)Java新代碼里基本不推薦自定義受檢異常除非你明確知道調(diào)用方必須處理。1.3 自定義異常應(yīng)該怎么選父類自定義異常是項(xiàng)目中不可避免的。你總會(huì)需要一個(gè)BizException或者BusinessException來(lái)表示業(yè)務(wù)規(guī)則被違反。我的建議是業(yè)務(wù)異常統(tǒng)一繼承RuntimeException。理由主要有三個(gè)。第一因?yàn)镾pring事務(wù)默認(rèn)回滾不會(huì)出現(xiàn)事務(wù)提交了一半結(jié)果的情況。第二不用在每個(gè)業(yè)務(wù)方法上逼著調(diào)用方聲明throws代碼更干凈。第三可以通過(guò)異常類型做統(tǒng)一攔截比如在ControllerAdvice里統(tǒng)一處理成錯(cuò)誤碼返回給前端。繼承層次不要太深統(tǒng)一一個(gè)頂層業(yè)務(wù)異常類就夠了。如果確實(shí)需要細(xì)分可以考慮用異常內(nèi)部的錯(cuò)誤碼枚舉來(lái)區(qū)分而不是搞出一堆異常子類。我見(jiàn)過(guò)有些項(xiàng)目里業(yè)務(wù)異常子類幾十個(gè)維護(hù)起來(lái)非常麻煩新增一個(gè)錯(cuò)誤場(chǎng)景就要新建一個(gè)類。2. 核心機(jī)制解析try、catch、finally和try-with-resources的深層邏輯異常處理語(yǔ)法本身不復(fù)雜但真正用好的不多。這一章我重點(diǎn)拆解幾個(gè)容易出問(wèn)題的機(jī)制細(xì)節(jié)。2.1 try-catch-finally執(zhí)行順序與finally陷阱正常場(chǎng)景下try塊里代碼順序執(zhí)行一旦拋出異常直接跳到對(duì)應(yīng)的catch塊無(wú)論是否發(fā)生異常finally塊都會(huì)執(zhí)行。這個(gè)大家都懂但下面幾個(gè)邊界場(chǎng)景很容易踩坑。第一個(gè)陷阱是finally里的return。如果try或catch里有return語(yǔ)句而finally里也有return那么finally里的return會(huì)覆蓋前面的返回值。更離譜的是如果finally里拋出了異常try和catch里原本的異常會(huì)被完全掩蓋。這類代碼在code review時(shí)一定要直接打回finally塊里只做清理資源這類工作不要return、不要throw。第二個(gè)陷阱是System.exit()。如果在try塊里調(diào)用了System.exit()JVM進(jìn)程直接終止finally塊不會(huì)執(zhí)行。有些同學(xué)面試會(huì)被問(wèn)“finally一定執(zhí)行嗎”標(biāo)準(zhǔn)答案就是要排除JVM退出和線程中斷這類場(chǎng)景。第三個(gè)陷阱是catch的順序。多個(gè)catch塊時(shí)子類異常必須放在父類異常前面否則編譯器直接報(bào)錯(cuò)。比如catch (IOException e)必須在catch (Exception e)前面。道理其實(shí)很簡(jiǎn)單異常匹配是自上而下找第一個(gè)能匹配的catch塊如果先寫(xiě)了父類子類異常就被父類“截胡”了。try { // 業(yè)務(wù)代碼... } catch (FileNotFoundException e) { // 更具體的處理邏輯 } catch (IOException e) { // 更通用的IO處理邏輯 }2.2 try-with-resources資源關(guān)閉的標(biāo)準(zhǔn)答案如果你還在用finally去關(guān)閉流或數(shù)據(jù)庫(kù)連接我建議把這段看完。Java 7引入的try-with-resources才是資源關(guān)閉的標(biāo)準(zhǔn)姿勢(shì)它要求資源類實(shí)現(xiàn)AutoCloseable接口InputStream、OutputStream、Connection這些都實(shí)現(xiàn)了。讓我用一個(gè)非常實(shí)際的多資源場(chǎng)景來(lái)演示。以前要正確關(guān)閉兩個(gè)流必須寫(xiě)嵌套的try-finally還得處理各自的異常代碼又長(zhǎng)又容易出錯(cuò)// 推薦寫(xiě)法try-with-resources多個(gè)資源用分號(hào)分隔 try (InputStream input new FileInputStream(input.txt); OutputStream output new FileOutputStream(output.txt)) { byte[] buffer new byte[1024]; int len; while ((len input.read(buffer)) ! -1) { output.write(buffer, 0, len); } }你不需要手動(dòng)close編譯器會(huì)自動(dòng)生成關(guān)閉邏輯而且關(guān)閉順序是逆序的后聲明先關(guān)閉對(duì)應(yīng)先開(kāi)output再關(guān)output再關(guān)input。還有一點(diǎn)做得非常講究如果try塊和close方法都拋出了異常Java會(huì)優(yōu)先保留try塊里的原始異常同時(shí)把close階段拋出的異常作為“被抑制異常”掛到原始異常上。你可以用getSuppressed()方法拿到它們。這樣排查問(wèn)題時(shí)不會(huì)被莫名其妙的關(guān)閉異常干擾主方向這個(gè)設(shè)計(jì)值得手動(dòng)點(diǎn)贊。2.3 throw與throws異常是怎么傳播上來(lái)的throws是方法聲明的一部分表示“我這個(gè)方法可能拋出這個(gè)異常調(diào)用方自己要心里有數(shù)”。throw則是主動(dòng)拋出一個(gè)異常實(shí)例。兩者動(dòng)作不同但經(jīng)常在一段代碼里配合出現(xiàn)。傳播規(guī)則是這樣的異常從最先發(fā)生的地方逐層往外拋如果每一層都不捕獲最終會(huì)到達(dá)線程的頂層處理器。對(duì)于主線程異常會(huì)直接導(dǎo)致程序退出并打印堆棧。對(duì)于線程池里的線程情況要復(fù)雜一些這個(gè)后面會(huì)單獨(dú)說(shuō)。有個(gè)最佳實(shí)踐要強(qiáng)調(diào)在做異常轉(zhuǎn)換和包裝的時(shí)候一定要保留原始堆棧。比如你寫(xiě)throw new BizException(庫(kù)存不足, e);這個(gè)構(gòu)造方式會(huì)把e作為cause傳進(jìn)去。而你寫(xiě)成“手動(dòng)拼接消息”的話throw new BizException(庫(kù)存不足: e.getMessage());就丟失了原始異常的完整堆棧排查問(wèn)題時(shí)幾乎等于廢掉了一條重要線索。所以永遠(yuǎn)記住cause參數(shù)必須傳這是異常處理最基本的職業(yè)素養(yǎng)。3. 實(shí)戰(zhàn)中的異常處理策略什么時(shí)候捕獲、什么時(shí)候拋出、什么時(shí)候自定義機(jī)制明白了真正難的是策略。異常處理本質(zhì)上是“在哪里處理最合適”的問(wèn)題處理早了破壞封裝處理晚了又容易堆滿日志。3.1 捕獲粒度別在底層捕獲你處理不了的異常新手最常見(jiàn)的錯(cuò)誤是在方法內(nèi)部把異常catch掉再打一行日志然后繼續(xù)往下走。這種“假裝處理”的代碼是最毒的因?yàn)槌绦蚍祷刂祷蚝罄m(xù)邏輯很可能已經(jīng)處在一個(gè)錯(cuò)誤狀態(tài)但表面上一片安靜等到數(shù)據(jù)錯(cuò)亂了才顯示出問(wèn)題。核心原則是在當(dāng)前這個(gè)層級(jí)能做出有效應(yīng)對(duì)才捕獲如果不能就往上拋。什么叫有效應(yīng)對(duì)比如你寫(xiě)的是接口的入口層那你可以捕獲業(yè)務(wù)異常并轉(zhuǎn)換為約定的錯(cuò)誤碼返回給前端比如你寫(xiě)的是定時(shí)任務(wù)批處理那你可以捕獲單條數(shù)據(jù)的異常并標(biāo)注這批次里哪些數(shù)據(jù)失敗繼續(xù)處理后面的數(shù)據(jù)。這些都是有效應(yīng)對(duì)。如果只是中間層做數(shù)據(jù)組裝、調(diào)用外部服務(wù)、讀文件你沒(méi)有能力決定“失敗后對(duì)用戶說(shuō)什么”那就別捕獲讓異常繼續(xù)往上走由統(tǒng)一出口處理。3.2 自定義業(yè)務(wù)異常與錯(cuò)誤碼別一股腦拋Exception自定義業(yè)務(wù)異常的核心價(jià)值是讓錯(cuò)誤信息結(jié)構(gòu)化。一個(gè)合格的自定義異常要能表達(dá)三層信息發(fā)生了什么、影響誰(shuí)、具體是哪個(gè)上下文。我常用的做法是定義一個(gè)帶錯(cuò)誤碼枚舉的BizException再加一個(gè)字段用來(lái)攜帶上下文數(shù)據(jù)。比如一個(gè)導(dǎo)入訂單的功能拋出異常時(shí)除了錯(cuò)誤碼還可以把失敗的那一行數(shù)據(jù)一起帶上。這樣統(tǒng)一處理時(shí)能直接把“第xx行數(shù)據(jù)不合法”這樣的提示返回給前端。public class BizException extends RuntimeException { private final ErrorCode errorCode; private final String context; public BizException(ErrorCode errorCode, String context) { super(String.format(%s: %s, errorCode.getMessage(), context)); this.errorCode errorCode; this.context context; } // getter省略... }這里有一個(gè)細(xì)節(jié)異常message要包含足夠的參數(shù)方便日志排查。我經(jīng)??吹接腥藪伋霎惓r(shí)只寫(xiě)“參數(shù)錯(cuò)誤”日志里根本不知道是哪個(gè)參數(shù)錯(cuò)了、值是多少。能把參數(shù)值拼進(jìn)異常消息就能省掉很多日后的“考古工作”。3.3 異常日志規(guī)范同樣一段代碼日志價(jià)值天差地別異常處理和日志是伴生關(guān)系處理得再好日志打不好線上問(wèn)題一樣抓瞎。先說(shuō)不好的寫(xiě)法。第一種是 catch 后只打一行e.getMessage()然后當(dāng)作沒(méi)事。第二種是log.error(error)不帶任何異常對(duì)象。第三種是printStackTrace()把堆棧打到標(biāo)準(zhǔn)輸出一旦線上系統(tǒng)把stdout重定向到別的文件你根本不知道日志去哪了而且這種寫(xiě)法在分布式系統(tǒng)里完全無(wú)法和請(qǐng)求鏈路關(guān)聯(lián)。推薦的做法是用日志框架的占位符并且在最后一個(gè)參數(shù)傳入異常對(duì)象這樣框架會(huì)自動(dòng)打完整堆棧try { orderService.createOrder(orderDTO); } catch (BizException e) { log.error(創(chuàng)建訂單失敗, userId{}, orderNo{}, userId, orderNo, e); throw e; }這段日志的價(jià)值在于不但知道“創(chuàng)建訂單失敗”這個(gè)事實(shí)還有userId、orderNo這種排查問(wèn)題的錨點(diǎn)最后還有完整異常堆棧。如果業(yè)務(wù)里還接入了traceId那就更完美了一個(gè)鏈路上下游的異常都能串起來(lái)。4. 性能與并發(fā)場(chǎng)景異常處理不能拖垮系統(tǒng)“性能”這個(gè)詞大部分人是不會(huì)第一時(shí)間和異常處理聯(lián)系在一起的但等你的系統(tǒng)上了量級(jí)異常的性能開(kāi)銷就會(huì)變得非常明顯。4.1 為什么異常創(chuàng)建比普通對(duì)象創(chuàng)建貴異常的昂貴之處不在try-catch本身而在throw new的那一刻。JVM在創(chuàng)建異常對(duì)象時(shí)要填充線程當(dāng)前調(diào)用棧也就是抓取棧幀快照這個(gè)操作比普通new一個(gè)Object高出兩三個(gè)數(shù)量級(jí)。更致命的是如果你在循環(huán)里頻繁拋出異常這個(gè)開(kāi)銷會(huì)被放大幾十倍。所以實(shí)戰(zhàn)里有一條鐵律不要用異常做控制流。我見(jiàn)過(guò)有人用NumberFormatException來(lái)判斷字符串是不是數(shù)字用ArrayIndexOutOfBoundsException來(lái)檢測(cè)數(shù)組結(jié)束這些都屬于典型的錯(cuò)誤示范。正確做法是直接用正則、Character.isDigit()或顯式判斷。// 反例異常控制流 try { int val Integer.parseInt(str); } catch (NumberFormatException e) { // 認(rèn)為不是數(shù)字 }如果你確實(shí)要對(duì)所有字符串做轉(zhuǎn)換并容忍非法值可以在高頻路徑上用“前置校驗(yàn)parse”組合或者干脆在外面catch但內(nèi)部已經(jīng)限定了這個(gè)方法的調(diào)用頻率。總之異常是給“不該發(fā)生但發(fā)生了”的情況準(zhǔn)備的不是給“預(yù)期會(huì)發(fā)生”的事情準(zhǔn)備的分支邏輯。4.2 批量處理中的異常隔離一條壞數(shù)據(jù)不應(yīng)該帶崩整批批處理是異常設(shè)計(jì)最容易失衡的場(chǎng)景。一條臟數(shù)據(jù)拋個(gè)異常如果沒(méi)處理好整批任務(wù)戛然而止之前處理完的幾千條全部白做。但如果每條都捕獲、打印堆棧那日志量和CPU開(kāi)銷又不劃算。正確設(shè)計(jì)思路是把單條捕獲和失敗收集結(jié)合起來(lái)循環(huán)內(nèi)逐條捕獲收集錯(cuò)誤到List不中斷批量循環(huán)外根據(jù)錯(cuò)誤數(shù)量決定是繼續(xù)還是告警。同時(shí)日志層面要做降噪相同錯(cuò)誤碼只記錄一次完整堆棧后續(xù)只計(jì)數(shù)。ListString failMessages new ArrayList(); for (OrderDTO dto : batchList) { try { processOne(dto); } catch (BizException e) { failMessages.add(訂單 dto.getOrderNo() 失敗: e.getMessage()); } } if (!failMessages.isEmpty()) { alarmService.sendBatchWarn(batchId, failMessages.size(), failMessages.stream().limit(20).collect(Collectors.toList())); }還有個(gè)經(jīng)驗(yàn)批處理里最怕的是“無(wú)差別異常捕獲”把程序Bug也當(dāng)作業(yè)務(wù)失敗一樣吞掉。我的建議是只catch預(yù)期的BizException和明顯的可恢復(fù)異常對(duì)于RuntimeException跑出來(lái)的程序缺陷應(yīng)該讓它中斷一次打出一個(gè)完整堆棧然后修復(fù)代碼而不是偽裝成一條失敗記錄繼續(xù)跑。4.3 線程池和異步任務(wù)中的異常處理異常不會(huì)自動(dòng)消失只會(huì)自動(dòng)被吃掉用線程池的時(shí)候有個(gè)普遍誤區(qū)以為任務(wù)里的異常會(huì)自動(dòng)像主線程那樣打印出來(lái)。其實(shí)Exception在execute()方式提交的任務(wù)里會(huì)被線程池的run()方法捕獲然后靜默丟棄。也就是說(shuō)你在業(yè)務(wù)代碼里沒(méi)捕獲的異常線上日志里什么都看不到任務(wù)看起來(lái)是“沒(méi)報(bào)錯(cuò)”地消失了。這非常危險(xiǎn)。如果你用ExecutorService的execute(Runnable)提交任務(wù)一定記得給線程池設(shè)置一個(gè)UncaughtExceptionHandler作為全局兜底日志。如果你用的是submit(Callable)任務(wù)里的異常會(huì)被存儲(chǔ)在Future內(nèi)部必須調(diào)用future.get()才會(huì)被重新拋出。所以submit之后最好結(jié)合Future的get結(jié)果統(tǒng)一處理別調(diào)了submit就徹底不管了。ThreadPoolExecutorExecutor pool new ThreadPoolExecutor( 4, 8, 60, TimeUnit.SECONDS, new LinkedBlockingQueue(1000), new NamedThreadFactory(order-async), new ThreadPoolExecutor.AbortPolicy() ); pool.setUncaughtExceptionHandler((t, e) - log.error(線程池任務(wù)異常, thread{}, t.getName(), e));5. 常見(jiàn)問(wèn)題速查與排查技巧實(shí)錄與其把每個(gè)異常類都背一遍不如掌握一套排查思路。我在這一章里把高頻異常整理成一份速查表再結(jié)合真實(shí)案例講講排查鏈路。5.1 高頻異常案例NPE、ClassCastException、IndexOutOfBoundsNullPointerException在所有線上異常里排第一。排查NPE的核心是讀堆棧Java高版本會(huì)精確提示“Cannot invoke xxx because the return value of xxx is null”直接定位是哪個(gè)調(diào)用null了。如果堆棧信息里看不出來(lái)最快的辦法是在IDE里設(shè)置 “NPE breakpoint”開(kāi)啟斷點(diǎn)條件后異常拋出的那一瞬間就能看到當(dāng)前作用域里每個(gè)變量的值。它最讓人頭疼的是各種“偽裝NPE”比如Stream里map中調(diào)用方法返回null后續(xù)reduce直接炸。規(guī)避思路無(wú)非兩個(gè)要么源頭杜絕用Optional Objects.requireNonNull盡早暴露要么在邊界防御對(duì)關(guān)鍵接收對(duì)象做isNull判斷。ClassCastException通常不是“強(qiáng)轉(zhuǎn)錯(cuò)類型”而是類加載器問(wèn)題或泛型擦除帶來(lái)的假象。我遇到過(guò)的情況包括不同jar包帶了同一個(gè)類的不同版本代碼里強(qiáng)轉(zhuǎn)成另一個(gè)ClassLoader加載的版本直接ClassCastException。排查時(shí)除了看堆棧還要看是哪個(gè)ClassLoader加載的這兩個(gè)類。至于IndexOutOfBoundsException常見(jiàn)于遍歷時(shí)刪元素、計(jì)算數(shù)組索引越界處理原則是“用迭代器刪除、無(wú)把握就用for倒序或stream filter”。速查表整理如下異常類型常見(jiàn)誘因排查重點(diǎn)NullPointerException調(diào)用鏈中某個(gè)中間值為null高版本直接看堆棧提示是哪個(gè)方法調(diào)用導(dǎo)致ClassCastException強(qiáng)轉(zhuǎn)類型不匹配、類加載器不一致加JVM參數(shù)打印類加載器確認(rèn)jar版本IndexOutOfBoundsException集合動(dòng)態(tài)修改、索引計(jì)算錯(cuò)誤檢查循環(huán)下標(biāo)、刪除操作方式IllegalArgumentException參數(shù)校驗(yàn)失敗但被忽略看是否進(jìn)入異常控制流的錯(cuò)誤場(chǎng)景OutOfMemoryError堆內(nèi)存泄漏或堆參數(shù)過(guò)小dump堆再分析大對(duì)象、GC Roots引用鏈5.2 用堆棧信息定位問(wèn)題的“Caused by”才是關(guān)鍵排查異常的第一個(gè)動(dòng)作不是看第一行而是看完整的堆棧鏈特別是Caused by后面的部分。尤其在異常被層層包裝后只有追到根因才能真正解決問(wèn)題。我舉個(gè)例子一個(gè)調(diào)用第三方接口的服務(wù)一直報(bào)BizException面上消息是“調(diào)用超時(shí)”。表面看是接口問(wèn)題但繼續(xù)往下翻Caused by是SocketTimeoutException再往下還有一層Caused by是DNS解析超時(shí)。真正要處理的是DNS服務(wù)器速度而不是給接口超時(shí)加長(zhǎng)。如果只看第一層這個(gè)問(wèn)題永遠(yuǎn)解決不了。所以我在團(tuán)隊(duì)里反復(fù)強(qiáng)調(diào)“看堆棧只看到Error Line就開(kāi)始回復(fù)這是最不專業(yè)的排查方式。” 至少要看完整堆棧的caused by鏈。5.3 線上異常排查的完整鏈路traceId 日志級(jí)別 分組告警線上問(wèn)題比本地復(fù)現(xiàn)難得多核心武器是鏈路追蹤和日志。一個(gè)請(qǐng)求從網(wǎng)關(guān)進(jìn)入后都會(huì)由框架生成traceId并塞進(jìn)MDC。這樣一條請(qǐng)求在多個(gè)服務(wù)間的所有日志都帶著同一個(gè)traceId用grep一拉就能還原整條鏈路。異常排查最基礎(chǔ)的操作就是報(bào)錯(cuò)發(fā)生時(shí)先用異常信息里的關(guān)鍵字搜traceId再把這條traceId的所有日志按時(shí)間順序捋一遍。日志級(jí)別這里也要有講究。不要把業(yè)務(wù)異常的ERROR級(jí)別當(dāng)洪水猛獸在批量任務(wù)中一條數(shù)據(jù)失敗是正常情況級(jí)別應(yīng)該用WARN只有整批失敗、服務(wù)不可用、內(nèi)存異常才應(yīng)該用ERROR。不然日志系統(tǒng)里全是ERROR真正嚴(yán)重的問(wèn)題反而不容易區(qū)分。告警這塊我建議按異常類型分組而不是按服務(wù)維度無(wú)腦觸發(fā)。BizException可以單獨(dú)設(shè)置低頻告警NPE和類轉(zhuǎn)換異常這類程序Bug可以整頁(yè)郵件告警Infrastructure異常網(wǎng)絡(luò)超時(shí)、數(shù)據(jù)庫(kù)連接池打滿要走獨(dú)立的高優(yōu)告警通道。6. 團(tuán)隊(duì)規(guī)范與異常處理的長(zhǎng)期修養(yǎng)很多人以為異常處理是“語(yǔ)法技巧”但一個(gè)項(xiàng)目里異常處理好不好更多取決于團(tuán)隊(duì)有沒(méi)有形成一致的規(guī)范。有些原則是靠日積月累沉淀出來(lái)的。6.1 異常處理相關(guān)的團(tuán)隊(duì)規(guī)約寧可少吞不可多寫(xiě)我參與過(guò)的幾個(gè)項(xiàng)目都定了一些異常相關(guān)的規(guī)約核心大致是禁止捕獲異常后不處理、不輸出、不重新拋出。實(shí)現(xiàn)了“處理”就一定要有動(dòng)作。禁止捕獲Exception后只打e.getMessage()不打堆棧。禁止用異??刂茦I(yè)務(wù)流程比如用parse異常當(dāng)校驗(yàn)分支。禁止在循環(huán)中創(chuàng)建、拋出、捕獲異常來(lái)做分支判斷。業(yè)務(wù)異常必須使用統(tǒng)一異常類和統(tǒng)一錯(cuò)誤碼禁止直接拋new RuntimeException(中文提示)。禁止在finally里return或throw這是代碼review必掛項(xiàng)。這些規(guī)約不是教條每條背后都有一次深刻的線上事故或者繁瑣排查的教訓(xùn)換來(lái)的。6.2 從“會(huì)用異?!钡健霸O(shè)計(jì)異常”像設(shè)計(jì)API一樣設(shè)計(jì)你的異常更高一層的異常處理能力是把異常當(dāng)作API的一部分來(lái)設(shè)計(jì)。這就意味著異常類型名要說(shuō)明問(wèn)題本質(zhì)比如OrderExpiredException而不是BizException 105異常message要有可操作性異常里要能帶上下文參數(shù)調(diào)用方要能從異常中知道下一步該怎么處理。比如一個(gè)支付回調(diào)接口拋出的異常類型如果叫PaymentStatusMismatchException里面有orderId、currentStatus、expectedStatus調(diào)用方一看就知道是狀態(tài)流轉(zhuǎn)不對(duì)而不是一頭霧水地再去查數(shù)據(jù)庫(kù)。好的異常設(shè)計(jì)能顯著減少跨部門(mén)扯皮尤其在對(duì)接第三方系統(tǒng)時(shí)異常信息越明確聯(lián)調(diào)效率就越高。6.3 最后再分享一個(gè)真正值錢的經(jīng)驗(yàn)從我個(gè)人經(jīng)驗(yàn)來(lái)說(shuō)排查異常時(shí)最容易犯的錯(cuò)誤是過(guò)度依賴異常本身而忽略了正常路徑下的上下文現(xiàn)場(chǎng)。異常只是“結(jié)果先生留下的通知”真正的問(wèn)題往往發(fā)生在拋異常之前的幾步。比如數(shù)組越界越界只是結(jié)果循環(huán)邊界算錯(cuò)了才是根因校驗(yàn)失敗只是結(jié)果數(shù)據(jù)是怎么被污染的才是根因。所以我現(xiàn)在排查異常時(shí)會(huì)養(yǎng)成一個(gè)習(xí)慣不僅看異常堆棧還要順著日志往前翻30秒看看異常發(fā)生前這個(gè)請(qǐng)求都經(jīng)歷了什么。絕大多數(shù)詭異問(wèn)題的答案其實(shí)都在那段“看似正?!钡娜罩纠?。這也是我把異常處理定義為“長(zhǎng)期修養(yǎng)”的原因——它不是幾個(gè)語(yǔ)法點(diǎn)而是一整套排查問(wèn)題、設(shè)計(jì)代碼的思維方式。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲欧美在线观看2021| 艳尻美人妻| 亚洲资源吧| www.99视频| 午夜国产成人精品视频 | 国产一区麻豆免费观看| 欧美日产国产在线成人第一区| 91亚洲丝袜| 欧美极品女人的天堂| 久久久亚洲Av| 欧美综合第一页| 刺激性视频黄页| 18禁美女裸体无遮挡啪啪| 黑人性欧美| 欧美综合加勒比在线| 一区二区三区黄片免费观看| 明星性猛交ⅹxxx乱大交| 午夜呻吟欧美| 国产精品久久久三级无码| 亚洲精品久久久久毛片A片拉屎 | 精品人妻av在线播放| 九九九九精品精| 九九九精品一区二区无码| 天天日天天色| 日本操BAV| 影音先锋少妇| 成人性爱av.com| 最新亚洲黄色免费电影| 亚洲色图欧美色18直播在线| 国产夫妻性生活视频| 综合久欧洲| 国语对白在线播放视频| 免费精品中文字幕| 久久首页| 97人人操人人摸| 无码国产精品96久久久久孕妇| 亚洲素人综合| 新91视频.cmp| 天天噜| 伊人久日| 日产123区精品免费观看| 玖玖爱一区在线| 超碰中文字幕人妻草一区| 男人的天堂2018东京热啪啪啪| 色牛牛AV| 开心五月婷婷激情| 最新加勒比丝袜在线| 五月丁香六月激情综合| 97人人模人人爽人人| 91影库| 欧美天天综合站| 一个人在线看的黄色电影网站| 欧美十八禁在线看| 日本欧美韩国国产在线| 欧美精品日韩久久久九| av资源在线观看少妇| 八人操人人摸人人看| 成人一二| 天天操天天舔| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 亚洲91av| 日本精品人妻少妇一区二区| 一区黄二区黄| 日日夜夜青青草母狗| 色婷婷蜜臀av| 国产自啪精品视频网站黑丝| 大香蕉草草| 亚洲国产97| 日韩操啪| 亚洲精品成人激情在线| 中文字幕在线观看第二页| 久久久噜噜噜久久久| 91狠狠色丁香婷婷综合久久精品| 亚洲骚女一区二区三区| 欧美中文狠| 一本正道久久熟女| 日韩三级性| 91天天综合在线| 婷婷五月天激情四射| 韩国三级色呦呦| 午夜一区二区三区国产| 99精品网| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 草B在线| 东京热伊久| 国产h小视频在线观看免费| 岛国片在线播放| 青青草中文-久久青草精品一区二区三| 五月丁香在线| 色路综合| 精品九九九九九九| 在线αⅴ| 婷婷五月激情综合| 偷拍在线观看视频| 欧美国产精品久久九九| 睡产熟女乱伦| 第四色亚洲色图| 国产熟码AV| 超碰97伊人| 欧美五十路熟| 操逼日韩无码 | 啊啊啊啊啊啊啊啊在线观看| 福利在线观看一区二区| 91视频国品一二三区| 2017天天透天天通天天擦| 草久在线| 国内毛片国产专区二| 精品丰满人妻一区二区三区免费观| 中文字幕亚洲欧美在线不卡| henhen91| 亚洲激情综合| 第二页中文字幕| heyZO天然素人无码AⅤ专区| 色五月婷婷麻豆在| 97这里有精品| 色噜噜婷婷| 日本国产二线女色| 欧美午夜视频精品久久| 天堂涩涩| 亚洲一曲日韩精品| 亚洲第一二区另类图| 后入国产| 国产福利av精彩对白| 国产传媒美日韩av| 夜草网站| 国产大片精久久久久久| 日韩av性爱在线播放| 人妻一区视频| 少妇熟女视频一二三区| 伊人久久大香大香线蕉中文| 天天热精品| 国产一区二区三区久久久精品| 五月激情视频| 久久综合久色欧美综合狠狠| 富女玩鸭子一级毛片| 91女人的网站| 日韩偷拍一区二区三区| 色哟哟1区2区| 日韩性爱高清免费视频| 天天操熟妇| 免费的黄片wwwwww| 亚州色图片在线色| 日韩AC| 中文字幕乱妇免费视频| 香蕉在线一区二区三区| 天天日天天操天天射河南省| 夜夜狠狠躁日日躁色视频| 秋霞一集毛片观看| 欧美综合在线91| 精品成人无码| 亚洲自拍青操视频| 99热超碰| 激情熟女12P| 国产又大又粗又长视频在线| 色狠狠 - 百度| 成人资源中文字幕在线观看| 久热超碰| 日本 色 导航| 青青草在线视频美女| 久干9操| 成人熟女视频一区二区三区| 日本污ww视频网站| 精品国产三级av韩国在线 | 色九九综合AV| 玖玖爱综合| 亚洲国产av中文字幕久久| 国产AV人人夜夜澡人人爽麻豆| 人人看欧美性爱| 久久曰曰| 乱老女人一区二区视频| 免费精品无码一级毛片牛牛影视 | 国产视频一区二区在线| 一类无码操逼视频| 亚洲欧美黄| 精品97精品97| www.99视频| 日韩av电影成人在线| 亚洲日韩XXX| 色婷婷aV一区二区三区麻豆综合| 国产精品白丝在线播放| 日日躁狠狠躁天天躁精品| 久久亚洲不卡| 亚洲五月婷| 日韩强奸av| 天天热精品| 插欧洲美女欧美精品| 国产尤物在线三区| 1区2区3区在线视频| 免费的很黄很污的全部视频| 少妇久久久久久| 五月天亚洲网| 在线观看视频91| 偷拍伦理视频| 吻戏激情性巴克| 另类欧美色| 日韩色欲久久一二三四区| 天天夜夜rb| 青青草字幕AV| 天天干天天舔| 亚洲日韩肥臀视频在线观看| 后入人妻无码| 亚洲最大无码中文字幕网站| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 精品人妻视频一区二区三区蜜桃视频| 亚洲精品97| 丁香五月激情啪啪| 97鸡把在线视频| 91精品无码人妻系列| 欧美欲色| 在线观看免费视频国产| 欧美久久人妻少妇一区二区| 丰满人妻一区二区三区性色| 91中文精品日韩欧美在线| 中文三一区| 亚洲精品官网在线观看| 九九九九九用不成了| 中文日本免费高清| 超碰这里有精品| 日韩福利综合一区| 精品九九九九九九九| se..亚洲欧美| 999日韩中文精品观看视频。| 91亚洲综合在线| 午夜免费视频1000| 在线人成亚洲视频免费观看| 嫩草伊人久久精品| 久久精品欧美一区二区三区不卡| 久久综合女优| 立川理惠被中出无码| 开心婷婷五月| 国产无码精品成人| 校园春色家庭伦理欧美激情| 偷窥自拍A片| 亚洲素人综合| 四虎影库国产精品免费| 操东北女人| 国产农村妇女精品一| 看日韩黄片| 久久偷拍人| 人人妻人人爽 97人人看碰人免费公开视频| 精品91摸| www.91逼逼.com| 东北女人性交| 日韩伦理久 久久 清纯| 亚洲欧美自拍偷拍| 成人网欧美风情| AAAA欧美日韩| 日本免费二区三区| 超碰97在线 欧美 国产| 国产自产自拍| 美女久久久| 亚洲男人天堂2013| 久久九九综合| 日本综合色图| 欧洲综合色| 九九毛片这里只有精品| 18禁网站在线播放| 国产成人亚洲精品无码最新在线| 蜜桃午夜视频一区二区| 超碰爽人妻熟女Av| 青青草天天亲夜夜操网| 欧美一级AAAAAAA| 中文熟女五十乱码在线| 亚洲色图加勒比| 欧美成va视频网站| 福利伊人玖玖国产| 懂色av一区二区三区天美传媒| 东北女人| 国产精品制服丝袜中文字幕日韩一区二区三区| 国产一级137片内射麻豆| 欧美激情一| 欧美一二在线| 狠狠操综合| 欧美十八禁视频| 蜜臀99久久精品| 嗯嗯啊操我| 91影库| 日韩中文字墓| 2020中文字幕在线观看| 国产青青美女玩逼视频| 亚洲另类综合欧美| 五月天婷婷基地| 日本不卡高清视频| 巨爆乳一区二区爆乳区| 色综合久久夜色精品国产天堂| 亚洲 欧美 91| 欧美精品99久久久| 在线观看中文av字幕| 亚洲欧美999| 午夜啊啊| 人妻少妇精品久久久久久| 7月婷婷综合| 91婷婷| 十八禁的黄污污免费网站| 欧美日韩*字幕一区| 91精品国产一区三一| 抽插一区二区视频| 东北老熟女| 国产精品粉嫩福利在线| 国产1727欧美| 97热视频在线观看| 欧美性生活内射| 精品十三区| 91麻豆天美国产| 99r九九| 女人天堂AV五区在线| 亚洲天堂,男人| 激情综合网激情五月天| 五月婷婷综合激情| 性吧在线视频| 色女女女导航| 久热色情精品| 久久久九97| 日本123区操B视频| 日操粉逼逼| 久久一区二区三区入口| 国产 三级自拍| 久草精品在线| 大香蕉淫人网| 午夜超爽| 自怕偷自怕亚洲精品| 91欧美在线| TS人妖另类精品视频系列| 97精| 黄片qw| 国产女人和拘做爰视频 | 日本人妻天堂网站在线播放| 婷婷15月天青娱乐| 亚洲一区制服诱惑| 天天干电影| 激情综合网激情综合| 美女啊啊啊啊啊啊| 国产女主播视频在线观看| 丝袜美腿丝袜| 放黄片放3级黄片没穿衣服| 成人五月天丁香激情综合| 久久亚州精品成人Av无| 日本护士高潮| 你操综合| 一区二区国产视频在线观看| 十八禁电影伊人网| 97爱| 秋霞一级视频在线观看免费| h4610国产人妻| 亚洲欧洲日韩国产自在线| 国产精品一二三在线看| 日本久操视频| 91无摭挡| 亚洲成人ab| 亚洲国产成人7777| 无码国产精品午夜不卡(| 超碰日本97美女人妻人人玩人人爱| 大香蕉综合| 亚洲色图自拍| 亚洲天天更新| 欧美成人午夜免费福利785| 天天躁日日躁AAA片李宗瑞| 91在线页| 亚洲黄色电影| 淫荡熟女乱伦网| 欧亚综合一卡二卡中文字幕| 综合激情一一91| 久久久久久99999国产精品| av草草在线电影| 中文字幕欧美日韩三级| 肉嘟嘟www视频在线观看高清| 国产日本久久免费精品| 美女91在线观看| 蜜桃天美传媒AV一区二区三区| w w w.久久精品| a级理论午夜日本| 精品美女在线视频| 日本Suv精品一区二区| 热99这里有精品综合久久| 极品尤物女神在线观看| 久久亚洲熟妇在线视频| 91被操| 黄片色区软件| 综合网~91综合网| 人人妻人人爽一区二区三区| 精品人人插人人操| 九热超碰| 青娱乐福利99| 天天透伊人| 欧美综合天堂| 91Chinese在线| 欧美美女在线高潮999| 大逼色网站| 日韩欧美中文| 青青草成人视频在线观看二区| 男人午夜天堂| 欧美另类色图片| 亚洲黄色电影| 亚洲日韩精品一区视频在线| 99国产精品久久久久久久成人热| 日本羞羞的视频在线播放 | 老女人碰碰在线碰碰视频| 亚州高清色综合| 97超碰久久| 亚洲男人bt天堂| 欧美人妻制服| 26uuu国产免费观看| 国产精品3| 伊人影院日本| 澳门成人网站久国产日韩| 综合网 欧美| 夜夜嗨AV一区天天| 超碰久久.com| 91狠婷| 91美女在线观看| 天天色香欲综合网| 久久久99免费| 射丝袜高跟鞋99| 亚洲熟妇一,二,三期| 婷婷成人五月天| 中国91AV| 自拍盗摄一区| 91社区拍啪人妻| 加勒比av官网在线| 色五月首页| 97天天操| 亚洲欧洲网站免费观看| 亚洲色人| 欧美传媒一区| 99国产在线 精品 视频| 亚洲有薄码区久久在线一区| 中文字幕精品区先锋资源| 亚州五月| 91色图片| 日本狂喷奶水在线播放212| 久久综合精品一区二区三区| 黄片色区软件| 欧美综合1性辶| 精品免费一区二区三区在线亚洲人成| 91东京热男人的天堂| 国产一区二区在线播放,久久亚洲精品中文字幕第一区,亚洲精品在线中文字幕视频 | av在线不卡一区二区三区| 99综合网| 老熟女乱伦一区| 国产99999久久精品| 女同性恋久久| 国产 日韩,欧美 自拍| 亚洲中文电影| www.久久久久| 亚洲第一精品在线视频| 欧美日韩色| 六月婷激情福利天堂69| 人人人人插| 久草资源在线| 丝袜色综合| 国人欧美精品一区二区| 亚洲情色综合| 91N综合网在线| 98一区二区精品| 国产品精品自在在线午夜免费| 999 久久久| 亚洲精品男人的天堂| 嫩呦国产一区二区三区AV| 97在线/亚洲| 狠狠热这里都是精品| 99re6在线视频播放免费精品| 哈哈操电影AV| 五月天精品| 国产精品嫩草久久久久| 亚洲高清男人天堂| 日本九九九九| 免费成人自拍视频在线| 96精品一区| 老熟女熟妇| www成人啪啪18秘 免费| 免费成人在线观看91| 日本最新1区2区3区| 超碰av人人人| 国产一进一出视频网站| 天堂精品| 加勒比五月天| 人妻少妇三级| 色吧综合网| 天堂中文日本在线观看| 免费久久一级毛片大黄| 日韩性爱长视频免费| 亚州欧美另类| 嗯嗯啊啊好大好爽| 久久熟妇五十路一区| 97中文天堂| 中文字幕日本久久| 自拍偷拍2025在线观看| 99久久婷婷丁香| 亚洲一区二区在线观看91| 偷拍视频青青草在线视频| 国产精品大屁股999| 国产天美传媒精品| 97干天天| 亚洲综合贴图91| 大香蕉手机在线视频| 操碰97| 在线观看成人性爱免费小视频| WWW美腿丝袜香蕉中文| 91在线综合网| 日韩在线观看中文字幕视频| 亚洲91在线播放影院| 日韩性爱长视频免费| 国产精品剧情| 自拍偷拍草一草| 日韩偷拍一区二区三区| 亚洲一曲日韩精品| AV乱伦专区| 熟女人妻精品一区二区视频| 亚州综合网| 97色网| 日韩无码视频黄色| 国产午夜精品理论片一二三区区| 久久久新亚洲AV| 男女啊啊啊啊啊| 色臀AV| 久久大黄片| 青青青青操国内视频在线| 欧美色图99| 一区超碰一区| 色九九九综合| 色香在线| 国产精品伦理| 啪啪视频免费在线观看| 国产黄色在线播放观看| 亚欧性爱ab| 激情综合五月| 亚洲AV成人无码一区二区三区在线观看| 少妇一区二区三区高速| 日韩欧美成人综合在线| 91爱啪| 国产人妻精品一区二区三区秋霞| 欧美少妇第一页| 亚洲色图超碰在线| 超碰夫妻97| 91精品操美女| 综合伊人网12色| 极品尤物自安慰| 婷婷五月天基地| 日韩懂色网| 色老牛| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 亚洲一区中文字幕久久,果冻传媒一区二区天美传媒| 校园春色之综合网| 国产精品久久久久久久久久久久久久久久久久| 亚洲国产亚洲天堂| 中文字幕国产在线天堂| 国产亚洲精品无码三区| 草莓精品视频在线免费观看| 欧美激情另类一区二区| 人妻AV 中文字幕的| 一区二区 电影 亚洲| 丝袜美腿射精91| 九九AV| 手机在线观看不卡无码av| 欧美另类色| 亚洲精品国产精品乱码不卡| 欧美天天综合在线| 日韩乱伦影音先锋| 激情露脸爱| 97中文字幕九区| 人人艹亚洲| 亚洲AV无码天美传媒一区| 亚洲色图 综合| 强奸抽插av| 在线免费观看日韩一区| 亚洲国产精品乱码在线观看| 欧美综合网站999| 色欧美综合| 肉嘟嘟www视频在线观看高清| 国产视频一区二区三区久久亚洲天堂 | 97在线青| 偷拍三区| 青青操狠狠撩| 国产13区| 蜜臀久久99精品久久久久| 图片区小说区| 色噜噜狠狠色综合日日| 老鸭窝在线视频播放| 久99| 93人人操人人| 久久只有精品| 91N五十路| 久久久久久国产无码精品| 国产伦精品一区二区三区视频女| 久久大陆| 国产最新小视频在线播放下载| 久久综合18p| 精品无吗m| 日韩久久三区| 男人天堂新在线| 国产精品久久久久综合| 18岁禁 茉莉成人久久| 亚洲?V高清一区二区三区尤物| 性在久久久久久| 91天天爱| 国产精品久久久久久久黄无码 | 91操熟妇| 99久久99九九99九九九| 中文字幕色AV| 动漫爆乳3D奶水一区在线观看| 色99久草| 99精品免费| 日韩成人小视频| www.夜夜操| 亚洲精品久久久久毛片A片拉屎 | 懂色AV网| 成人夜夜爽| 七月丁香婷婷| 亚洲中文字幕乱码无码一区二区| 天天射天天| A啊啊在线观看| 日韩欧美国产一区二区三区四区| 久久久精品久久| 日韩女模中文造逼| 天天综合-91入口| 夜夜操av亚洲一区二区| 亚洲成人性爱网站在线播放| 亚洲诱惑天堂| 大香蕉人妻| 精品国产一区探花在线观看| 欧美91精彩| 人人做天天爱| 国产中文字幕在线| 91人人爽人人爽| 久久久久久久九九九九九九| 久久久久国产精品人妻aⅴ天堂| 久久老子无码午夜伦不卡| 91美女小视频| 久久99草| 久久久久久午夜男人的天堂| 亚洲在线欧美| 亚洲综合射| 天天干天天干天天| 亚洲无码国产精品久久| 欧美三四五区| 蜜臀亚洲中文| 中文字幕亚洲在线一区| 国产成人在线观看网址| 国产乱子伦一区二区三区免看| 色色操| 久久久久久久九九九九九九| 亚洲 无码 有码 中文字幕| 日韩AV电影网站| 大香蕉乱级| 97ai亚洲| 二三四区精品| 亚洲色天堂日韩中| 国产精品无码av在线| 97精品一区| 亚洲永久永久永久永久一级一级一级精品| 国产自产一区视频在线| 超碰91在线| 精品丰满熟妇人妻一区 | 天天久久| 加勒比久久av| 亚洲AV高潮| 色婷婷激情| 亚洲国产91精品一区二区久久| 国产精品白领在线观看| 北条麻妃99精品青青久久| 超碰精品日韩欧美国产| 国产性爱欧美性爱在线| 91人妻超碰| 91天天美女| A一区片| 家庭乱伦国产精品| 探花精品 一区二区| 日韩肏逼视频| 青青草国产一区二区三区| 超碰在线974| 久草精品国产99| 97久久国产精品女不卡| 性感美女啊啊啊在线| 97干天天| 有码人妻系列| 久操B网| 国产美女销魂在线观看不卡| 亚州久久9| 狠狠欧美| 精品色色| 日本久久网| 日韩av乱伦| 亚欧Av| 亚洲色图日韩精品| 国产精品无码久久久久2025| 无码久久亚洲高清,| 啊啊啊好大好湿| 欧美 亚洲 大香| 日韩伦理视频| 色色色热| 99热精品在线在线| 激情综合婷婷| 99熟女| 国模精品娜娜一二三区| 熟女乱伦A| 国产在线视频午夜精华在| 东北女人操逼| 最新国产精品| 久久这里只精品免费福利| 沈阳熟女高潮对白视频| 草草草视频在线免费看| 天天综合青苹果| 综合亚洲欧美| 91网站在线播放| julia ann久久| 91国产美女丝袜足交精品视频 | 五月天伊人| 中文字幕日韩精品一区二区三区| 国产精品三级视频网站| 激情综合网激情五月天| 99热在线播放| 久久久久久久久久久人妻| 国产一区二区视频在线播放| 桃花色涩综合影院| 亚洲av综合色区无码一| 亚洲黄网在哪免费看| 综合色99| 韩国黄色片精品久久久 | 九月丁香婷婷| 欧美精品双插| 97热视频在线观看| 男人的天堂Va| jazzjazz国产精品麻豆| 国产二区视频在线观看电影| 另类 日韩 熟女| 无遮挡猛进视频免费无限观看| 综合影视国产无码| 六月丁香五月婷婷| 日韩影片中文字幕一区二区三区| 97色涩| yazhououmeizongya| 亚洲毛片基地专区| 久久国产乱子伦精品免费女人| 多乙久久久久久| 粉嫩AV一区夜夜嗨| 97欧美日韩精品| 亚洲中文字幕在现观看| 欧美日韩国产黄色片| 国产野战露脸在线播放| 丰满岳乱妇一区二区三区| 综合欧美日本三级| 国产树林里野战在线看| 日本精品一区三区| 久久欧美1卡2卡3| 青青操少妇| 99热这里只有精品1| 香蕉欧美| 国产精选三级在线观看| 91在线免费观看处女| 国产天美传媒精品| 亚洲性天堂| 萌白酱自拍视频| 欧美亚洲综合色| 国产青青美女玩逼视频| 97色色国产视频| 综合色久欲| 欧美亚洲国产91在线| 色小视频蜜乳| 青娱乐蜜桃臀AV色婷| 资源新线在线天堂| 日韩性爱电影一区| 美女裸体麻豆天美蜜桃91| 一二三四视频在线社区中文字幕| 91情色| 国产特级毛片AAAAAA高潮流水| 婷婷五月天av| 91真人天天在线| 一起草三级AV电影在线观看 | 91精品久久久| 不卡啪啪视频| 99国内熟女露脸视频| 99热这里都是精品| 亚州操逼网| 欧美v亚洲v日韩v最新在线二区| 大香蕉免| 后入国产| 亚洲欧洲综合av在线| 欧美色图天堂网m| 国产精品欧美在线观看| 日本色色色视频| 男生女生啊啊啊啊| 2023天天操夜夜操| 96AV精品| 91少妇人妻| 五月天成人综合| 亚洲人精品久久久| 亚洲国产精品成人无码久久久| 91国产美女丝袜足交精品视频 | 青青草手机在线免费观看| AV丝袜少妇| 国产在线观看一区二区三区| 超碰人人妻| 大香蕉中文网| 99久久久久| 青草伊人网| 久久久国产成人一区二区三区在线| 精品九九九九九九九九九| 伊人五月天婷婷| 婷婷色网| 尤物黄色在线观看网站| 日本 成 人 小说 电影 一区二区| 一卡二卡三卡| 色婷婷香蕉| 国产精品丝袜在线| 91亚洲精品青草| 成人五月天丁香激情综合| 国产超碰人人操| 亚洲中文字幕av | 日本999精品| 亚洲日韩精品久久久久一区壹牛 | 久久精品91| 日韩乱插| 中文字幕乱码在线观看| 亚洲欧美大香蕉| 少妇久久久| 久久久久ab| 人人爱人人操人人性| 超碰 欧美| 人妻啊啊人妻啊啊| 亚洲小说视频| 成人国产精品三级A片| 国产精品夜夜夜| 五月天伊人| 91被操| 国产精品在线一区二区| 国产福利精品最新在线| 黄页av| 91久久伊人婷婷青青草| 久久久国产亚洲精品系列| 伊人欧美大香蕉视频| 日韩精品一区二区三区四虎影视| 97碰| 亚洲 图片 欧美 色图| 亚洲不卡三级手机播放| 日韩欧美中文字| 九九色影院| 日本伦乱九九九综合| 乱久久久| 欧美大香蕉在线观看| www.av在线视频| 中日亚韩免费视频| 另类图片五月天| 1024亚洲中文字幕久在线看片你懂的| AV一起草在线| 久久一二三四不卡 | 把腿张开老子CAO烂你| 亚洲黄色AV电影| 亚洲视频小说| 九九色色| 一级性爱视频免费在线| 国产少妇内射| 久久熟妇五十路一区| 国产成人无码高清| 国语对白露脸XXXXXX| 久久久久婷婷精品av电影| 伊人97色天使| 上海一级黄片| 大香蕉99re| 丰满精品人妻少妇久久字幕| 激情五月婷婷| 亚洲国产麻豆一区二区三区| 亚洲伊人成综合成人网| 天天内射| 1区2区3区在线视频| 久久久久九九九| 久久精品国产亚洲AV高清演员表| 91亚洲欧美激情| 秋霞男人网| 伊人影院综合是一个与深夜成人在线| 亚洲成人激情小说视频| 日本孕妇孕交| 欧美色图亚洲特色| 五月综合久久| 欧洲一级性爱视频在线观看| 国产一区二区免费福利片| 欧美色图91| 亚洲国产97在线精品一区| 最新精品久久蜜桃| 按摩中文字幕| 久久欧美按摩999| 亚洲AV无码黄色强奸| 伊人专区一区二区三区| 无码78| 亚洲天天自拍| 亚洲成人AB| 久久视频,这里只有精品 | 国语对白在线播放视频| 久久久久久久久久9| 另类图片五月天| 超碰到97情色| 试看60秒| 日本啊啊啊啊啊视频| 亚洲精品一二区| 日本色色视频网站| 精品午夜福利国产一区二区在线观看| 日本孕妇一区二区视频操逼免费看 | 人妻精品综合中文字幕在线 | 欧洲一区二区三区四区在线观看| 成人影 天天操 亚洲| 一色网男人的天堂| 亚洲 综合 欧美| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 久久精品国产精品亚洲艾通辽熟妇| 亚洲操人| 五月丁香激情综合| 亚洲激情av| 青青草日韩无码| 涩涩五月天| 国产刺激视频| 欧美亚洲玖玖玖| 在线观看AV不卡| 97人人爱人人做人人乐| 在线视频一区二区传媒| 欧美少妇内射| 久久人妇| 啊啊啊啊,啊啊好多水| 五月天久久婷婷亚洲| 最新av在线| 劲爆欧美人妖三区91| 中文无线日韩一区| 国产精品农村妇女精品| 欧美成人精品一区| 午夜精品久久久| 98人妻精品一区二区色欲| 久久久精品电影| 国产一区二区精品久久99| 日韩欧美国产高清视频| 婷婷久久五月| 91九久| 久久久久久91香蕉国产| 青青草久久| 欧美九九九| 久久永久无码人妻视频| 国产中文精品一区二区在线观看| 久久免费精品视频免一| 亚洲天堂,男人| 97大色网| 蜜乳av一区二区三区四区不卡| 精品在线78| 亚洲 日本 不卡| 亚洲网站一区二区在线| 日韩亚洲国产视频| 久久婷婷精品| 九九在线视频| 精品精品精品| 亚熟hd视频在线| 91久热| 91丰满| 永久免费av无码网站国产app| 午夜偷拍久久熟女| 九色97| 国产传媒1234区| 熟女AV一区| 夜夜高潮夜夜爽夜夜爱爱一区| 嗯嗯啊好大| 国产一区二区三区久久精品太古里| 天天搞在线综合网| 亚洲精品无码久久AV| 青青网三级视频| 麻豆激情综合| 91老司机在线| 亚洲精品国产熟女久久久久久| 久99视频| 五月天久久婷婷亚洲 | 蜜臀Av一区二区三区| 香蕉国产精品麻豆亚洲欧美日韩| 亚洲第一无码播放立川理惠| 伊人青青一区成人视频在线观看区| 麻豆黄站| 欧美不卡在线一区二区| 曰韩无码777| 蜜桃久久久久久| 精品成人久久久人人亚洲| 人妻偷拍一区二区三区| 日韩中字av一区| 蜜臀久久99精品久久久久电影| 国产家庭乱伦表演| 婷婷丁香六月天| 综合九九| 欧美十八禁视频| 日韩在线76| 一区超碰一区| 久久亚洲欧美中文字幕国语| 性色一线| 成人一二三区| 天天澡天天狠天天天做| 五月丁香影院| 久草线上视频免费看| 国产极品馒头逼| www.夜夜操| 中文字幕日韩精品一区二区三区| 欧美综合777| 久操com| 91成人在线免费视频| 青娱乐大香蕉| 97香蕉网| 91麻豆天美国产欧美| 欧美综合1性辶| 在线观看黄色电话| 囯产精品强| 人人妻人人玩人人澡人人爽| 女人被添高潮免费视频| 热久久99999| 日本人妻伦在线中文字幕| 亚洲毛片一级带毛片基地| 中文字幕人乱码中文字的预防方法| 国产肏逼网站| 天天综和| 成 人 A V免费视频在线观看| 亚洲精品日韩国产欧美| 看看日B真人视频| 97欧美性爱| 日韩电影天堂视频一区二区| 日日橹狠狠爱欧美超碰| 亚欧免费观看视频| 男人的天堂,欧美亚洲另类国产日韩,日本高清一区二区 | 超碰91在线| 亚洲精品天天影视综合网| 日韩欧美日韩| 欧美第一页性| 97免费在线| 日韩欧美女优电影| 极品出轨视频网站| 啪啪免费| 好看的久久不射无码影视影院| 97超碰大| 91色黑人少妇| 午夜无遮挡男女啪啪视频| 美女91在线观看| 99精品欧美一区二区三区桃色| 天堂网 主播 亚洲| 一区操逼日比视频| 女同性恋中文字幕| 亚洲一区二区麻豆影院| 蜜臀中文字幕| 老女人老91妇女老热女| av日韩在线观看电影| 美女t无毒不卡不卡| 神马视频久久久久久| 亚洲欧洲中文日韩女优乱码| 青青草无码视频| 麻豆啪啪啪视频| 欧洲精品一级二级精品综合视频综合| 欧美九九99久久精品| 免费的很黄很污的全部视频| 天天摸天天操视频| 99国内精品| 日韩欧美成人综合在线| 欧美A√综合网 | 97人人爱人人做人人乐| 国产家庭乱伦表演| 日产成人久久| ′ !γ}丶。。久久精品欧美一区二区三区 | 嗯嗯嗯啊啊啊操的我好爽| 四虎国产精品永久在线囯在线| 欧美精品 - 91爱爱| 老子午夜伦不卡影院| 天美久久久久| 大香蕉伊人一区在线观看| 上海一级黄片| 久久东京热久久| 欧美亚洲美少妇一区二区| 97综合在线| 亚洲情欲| 亚洲怡春院| 神马视频久久久久久| h无码动漫在线观看| 99无码| 国产精品久久久999| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 大香蕉免费中文| 被男人添B超爽视频| 78操B| 亚洲综合射| 麻豆国产96在线| 91P0RNY大屁股人妻| 精品人妻一区二区蜜桃视频| 欧美色图片91| 97干com| 破苞ⅩXXX性无码动漫无码| 在线视频97| 欧洲一级性爱视频在线观看| 久久久久久日韩| 国产精品99久久久www| 乱伦AVxx| 免费黄色片。| 五月婷婷丁香| 久久久久久久久九九久孕交| 女优视频第10页| 久久神马影院| 91美女视频直播| 欧美激情亚洲情色| 亚洲人综合19| 人人弄人人摸| 国产精品人人爽人人做可爱福利 | 欧美72网页| 亚洲精品九九九九九九| 99久久婷婷丁香| 国产极品粉嫩馒头一线天av| 人人做,人人操,人人摸| 国产日韩精品人妻久久久久色欲网站 | 天天操女人| 婷婷AV一区二区三区| 国产日韩在线播放| 国产精品成人午夜福利| 夜夜操av亚洲一区二区| 啪啪视频mP4| 色综合99| 无码抄逼网| 久久久97| 妺妺跟我一起洗澡没忍住| 国产乱伦视频污| 精品一区二区三区麻豆| 另类欧美综合| 欧美一区二区三熟女剧情| 精品国产国产AV| 大香蕉综合网| 91亚州日韩高清| 五月丁香六月婷综合成人综合| 女人被男人桶爽视频网站| 欧美美女视频| 97干色| 亚洲欧美高清| 日韩少妇无码| 91中文字幕在线观看| 加勒比久久av| 亚洲丰满很很操| 91久久堂| 久久久精品一区二区| 日本 免费 一区二区三区 久久香蕉| 久久秀这里有精品| 亚洲色五月| 色综合五月天| 夜夜爽爽爽| 婷婷中文字幕| aⅴ日韩成人电影av在线免费看av大全| 白天啪啪晚上啪啪视频| 九九久久一区二区伦理| 亚洲国产成人精品久久久国产成人一区二区三. | 日韩啪啪啪啪啪| 国产欧美美女免费观看视频| 乱人伦 国语对白:视频直接看| 日本裸体久久色噜噜| 九九九九日本| 怡红院怡春院| 96久久久精品| 漂亮人妻被强中文字幕hd| 啊啊啊久久| 久久综合九色综合欧洲98| 欧美一级A片不卡视频。| 强奸乱伦大香蕉网| 天天干,夜夜爽| 91 国产丝袜在线放观看| 69精品人人人人| 锕锕好爽 死我在线观看| 欧美激情 一区| 久久在肏| 色97干| 成人av福利在线观看| 插日本熟女视频|