色五月色开心色婷婷色丁香,五月婷婷丁香花综合网,婷婷丁香五月激情综合在线,五月婷婷六月丁香动漫,婷婷丁香五月激情综合在线,丁香花中文字幕在线观看,播五月色五月开心五月网,开心激情综合网,狠狠色丁香婷婷综合最新地址,丁香视频在线观看,狠狠做六月爱婷婷综合av,久久激情五月丁香伊人

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

ADG同步性能優(yōu)化:從WAIT_FOR_LOG到standby redolog正確配置

ADG同步性能優(yōu)化:從WAIT_FOR_LOG到standby redolog正確配置 1. 項(xiàng)目背景與核心痛點(diǎn)為什么你的ADG總卡在WAIT_FOR_LOG先聊一個很多DBA都撞過的場景主庫業(yè)務(wù)量一上來ADG備庫的v$standby_log視圖里THREAD#組的狀態(tài)長期停在WAIT_FOR_LOG歸檔日志堆積如山主庫切換日志時備庫半天追不上甚至跑出GAP告警。這時候不少人第一反應(yīng)是“網(wǎng)絡(luò)帶寬不夠”或者“備庫磁盤太慢”吭哧吭哧調(diào)了半天網(wǎng)絡(luò)參數(shù)問題卻一點(diǎn)沒緩解。我早些年也干過類似的蠢事。有一次生產(chǎn)環(huán)境主庫頻繁log switch備庫延遲從幾十秒一路飆到四十分鐘查v$dataguard_stats看到transport lag不大但apply lag越拉越長。當(dāng)時第一直覺是備庫的DB_FILE_MULTIBLOCK_READ_COUNT或者PARALLEL_EXECUTION_MESSAGE_SIZE有問題調(diào)了一圈沒卵用。后來冷靜下來查了備庫的v$standby_log發(fā)現(xiàn)癥結(jié)根本不在這——備庫的standby redolog配置一塌糊涂組數(shù)不夠、大小不匹配MRP進(jìn)程大多數(shù)時間都在干等日志硬生生把ADG干成了“異步追趕模式”。這就是標(biāo)題里那個WAIT_FOR_LOG狀態(tài)的典型來源。ADG同步性能優(yōu)化很多時候拼的并不是網(wǎng)絡(luò)和硬件而是你有沒有把standby redolog這個最容易忽略的基礎(chǔ)配置搞對。這篇文章我會從standby redolog的底層機(jī)制講起把它的數(shù)量規(guī)劃、大小設(shè)計(jì)、狀態(tài)判斷、故障排查完整過一遍把我實(shí)際踩過的坑和驗(yàn)證過的優(yōu)化手段都寫出來。適合正在維護(hù)ADG環(huán)境的DBA、剛接手容災(zāi)項(xiàng)目的運(yùn)維同學(xué)以及那些被GAP告警搞得焦頭爛額的朋友們。2. 先把底層機(jī)制搞明白WAIT_FOR_LOG到底在等什么2.1 備庫日志應(yīng)用的基本鏈路要理解WAIT_FOR_LOG就得先清楚ADG備庫處理日志的完整鏈路。主庫每次log switch后LGWR或ARCH進(jìn)程把redo數(shù)據(jù)傳輸?shù)絺鋷靷鋷斓腞FSRemote File Server進(jìn)程負(fù)責(zé)接收然后寫入備庫的standby redolog或者直接寫歸檔日志。接下來MRPManaged Recovery Process從歸檔日志或者standby redolog里讀取redo記錄一層層應(yīng)用到數(shù)據(jù)文件。整個鏈條里備庫的MRP進(jìn)程是絕對的核心執(zhí)行者。MRP有兩種讀取模式從standby redolog直接讀取并應(yīng)用這種模式適合實(shí)時應(yīng)用REAL TIME APPLYredo一到備庫就能立刻被MRP消費(fèi)延遲最小。等待歸檔完成后從歸檔日志讀取通常是ARCHIVE_LAG_TARGET或者FAL機(jī)制觸發(fā)的備用路徑延遲會明顯更高。WAIT_FOR_LOG字面意思就是“MRP進(jìn)程正在等待新的redo數(shù)據(jù)到來”。看似只是一個正常狀態(tài)但如果它長時間占據(jù)主導(dǎo)說明MRP大部分時間都在“歇著”真正干活的窗口很小apply lag自然居高不下。2.2 為什么會出現(xiàn)長時間WAIT_FOR_LOG從機(jī)制上看MRP等待日志的場景分為兩類一類是主庫確實(shí)沒有新日志產(chǎn)生這是健康的空閑等待另一類是主庫有日志產(chǎn)生但備庫因?yàn)榉N種原因一直拿不到、或者拿到了卻沒法立即應(yīng)用這種就是不健康的空轉(zhuǎn)。不健康空轉(zhuǎn)的常見原因我在實(shí)踐中總結(jié)成四個字供不應(yīng)求。具體來說standby redolog組數(shù)太少M(fèi)RP頻繁在“等待當(dāng)前組寫滿”和“等待下一組切換”之間來回橫跳。standby redolog大小和主庫redo不匹配備庫被迫頻繁切換每次切換都有額外開銷。備庫端的日志應(yīng)用速度跟不上主庫產(chǎn)生的速度典型瓶頸包括備庫IOPS、CPU、歸檔目錄所在的文件系統(tǒng)性能。備庫的STANDBY_FILE_MANAGEMENT設(shè)置不對導(dǎo)致日志應(yīng)用時陷入文件管理開銷。這里需要特別澄清一個誤區(qū)WAIT_FOR_LOG并不等于同步就在正常工作。同樣一個狀態(tài)名健康的空閑等待和病態(tài)的空轉(zhuǎn)等待表象一樣底層邏輯完全不同。判斷的關(guān)鍵就看主庫是不是在持續(xù)產(chǎn)生日志以及備庫是否有持續(xù)的RFS寫入行為。2.3 理解standby redolog在ADG中的角色很多從傳統(tǒng)Data Guard轉(zhuǎn)過來的DBA容易把standby redolog當(dāng)成“可選優(yōu)化項(xiàng)”覺得沒有它ADG也能跑。確實(shí)早期Data Guard確實(shí)可以不配standby redolog備庫只靠歸檔日志追進(jìn)度。但那是異步模式的舊世界了。在ADG環(huán)境中standby redolog幾乎可以說是一等公民。打個比方如果主庫redo是一輛輛駛來的集裝箱卡車那standby redolog就是備庫這邊的卸貨碼頭。沒有碼頭不配standby redolog卡車到了只能先停到遠(yuǎn)處停車場寫歸檔日志等MRP有空再去一趟一趟拉回來有了碼頭配好standby redolog卡車直接開進(jìn)碼頭卸貨MRP隨到隨取。你說哪個快而且standby redolog直接影響一個關(guān)鍵能力備庫實(shí)時應(yīng)用Real-Time Apply。只有配置了standby redologMRP才能做到邊收邊應(yīng)用否則就算你開了REAL TIME APPLY備庫也只能等歸檔完成后才動手。3. 關(guān)鍵參數(shù)拆解standby redolog該怎么配才算“正確”3.1 組數(shù)規(guī)劃不是越多越好但要滿足切換需求關(guān)于standby redolog需要多少組Oracle官方文檔和大多數(shù)最佳實(shí)踐給的建議是“至少比主庫的redo log group多一組”。這個建議背后的邏輯其實(shí)是為了保證在極端切換場景下不出現(xiàn)寫堵塞。我解釋一下為什么需要“多一組”當(dāng)主庫某組redo寫滿準(zhǔn)備切換時RFS同時也可能正在往備庫的對應(yīng)standby redolog寫當(dāng)前日志。如果備庫只有和主庫數(shù)量相同的組那么當(dāng)主庫切換到下一組時備庫的上一組standby redolog可能正在被MRP讀取應(yīng)用此時這組還不能被RFS重用覆蓋于是RFS只能干等導(dǎo)致主庫的log switch也被拖慢甚至出現(xiàn)“主庫等備庫”的連鎖反應(yīng)。多出的一組好比是給系統(tǒng)多留了一個緩沖空位保證RFS寫當(dāng)前日志的那一組永遠(yuǎn)不會和MRP正在讀的那一組撞車。我自己在生產(chǎn)環(huán)境里一般會給備庫配置主庫組數(shù)2組的standby redolog留一點(diǎn)余量應(yīng)對突發(fā)切換。比如主庫4組redo備庫就建6組standby redolog。這樣即使主庫短時間內(nèi)連續(xù)多次切換備庫也始終能騰出空組給RFS寫。3.2 大小設(shè)計(jì)和主庫redo對齊是黃金法則standby redolog的大小設(shè)計(jì)很多人容易犯一個錯隨手建一個固定大小比如全部256MB完全不管主庫redo有多大。我見過最典型的故障案例是主庫redo是2GB備庫standby redolog只有200MB結(jié)果RFS往備庫寫日志時頻繁觸發(fā)切換MRP根本來不及跟上apply lag一路暴漲。正確做法非常樸素讓備庫的standby redolog大小和主庫redo一致。這樣的好處在于主庫切換一次redo備庫正好也是切換一次standby redolog日志讀寫節(jié)奏完全同步不存在“這邊寫半組那邊就要切”的錯位問題。當(dāng)然也有例外。如果主庫redo特別大比如8GB你又給備庫配了比較弱的存儲可以適當(dāng)縮小standby redolog大小讓備庫“少吃多餐”。但要注意小尺寸意味著更頻繁的日志切換會增加切換開銷需要權(quán)衡。3.3 文件分布不要把雞蛋放在一個籃子里standby redolog的文件存放位置同樣是一個容易被忽視但影響重大的配置點(diǎn)。我見過不少環(huán)境的standby redolog和datafile放在同一塊盤上甚至和歸檔日志放在同一個文件系統(tǒng)。起初看不出問題一旦主庫業(yè)務(wù)高峰來臨備庫同時要寫standby redolog、寫歸檔日志、還要讀數(shù)據(jù)文件做恢復(fù)所有IO請求全部擠在一塊磁盤上apply lag必然飆升。理想情況下standby redolog應(yīng)該放在獨(dú)立的、高性能的存儲路徑上至少也要和歸檔日志目錄分開。用ASM的話可以單獨(dú)規(guī)劃一個diskgroup放standby redolog。用文件系統(tǒng)的話最好放到單獨(dú)的裸設(shè)備或者SSD掛載點(diǎn)上。我還建議把同一個standby redolog組的兩個成員放到不同的物理磁盤上避免單盤故障導(dǎo)致整組不可用。這一點(diǎn)跟普通redolog的鏡像原則完全一致。3.4 添加standby redolog的具體操作以O(shè)racle 19c環(huán)境為例在備庫上添加standby redolog的標(biāo)準(zhǔn)做法如下。先查主庫redo狀態(tài)作為參照-- 主庫執(zhí)行 SELECT GROUP#, BYTES, STATUS FROM V$LOG ORDER BY GROUP#; SELECT GROUP#, BYTES, STATUS FROM V$LOG_HISTORY;然后在備庫上創(chuàng)建對應(yīng)的standby redolog-- 備庫執(zhí)行 ALTER DATABASE ADD STANDBY LOGFILE GROUP 10 (/u01/oradata/dgdb/stdredo10a.log, /u02/oradata/dgdb/stdredo10b.log) SIZE 2G; ALTER DATABASE ADD STANDBY LOGFILE GROUP 11 (/u01/oradata/dgdb/stdredo11a.log, /u02/oradata/dgdb/stdredo11b.log) SIZE 2G; ALTER DATABASE ADD STANDBY LOGFILE GROUP 12 (/u01/oradata/dgdb/stdredo12a.log, /u02/oradata/dgdb/stdredo12b.log) SIZE 2G; ALTER DATABASE ADD STANDBY LOGFILE GROUP 13 (/u01/oradata/dgdb/stdredo13a.log, /u02/oradata/dgdb/stdredo13b.log) SIZE 2G; ALTER DATABASE ADD STANDBY LOGFILE GROUP 14 (/u01/oradata/dgdb/stdredo14a.log, /u02/oradata/dgdb/stdredo14b.log) SIZE 2G; ALTER DATABASE ADD STANDBY LOGFILE GROUP 15 (/u01/oradata/dgdb/stdredo15a.log, /u02/oradata/dgdb/stdredo15b.log) SIZE 2G;注意幾點(diǎn)如果備庫使用了db_create_online_log_dest_n參數(shù)可以省略文件路徑直接用SIZE創(chuàng)建但為了可控性我建議顯式指定路徑。SIZE務(wù)必和主庫redo大小一致這是前面說的核心原則。如果你的備庫是Physical Standby且在MOUNT狀態(tài)直接執(zhí)行上述語句即可如果是OPEN狀態(tài)也可以在線添加不影響當(dāng)前同步。4. 實(shí)操過程實(shí)錄從配置到驗(yàn)證的一次完整優(yōu)化4.1 環(huán)境摸底動手前先知道自己的家底在做任何優(yōu)化之前我會先花幾分鐘摸底環(huán)境把幾個關(guān)鍵視圖都掃一遍。這步看起來簡單但能幫你避免很多“瞎調(diào)”的彎路。主要是這幾個查詢-- 備庫查看standby redolog狀態(tài) SELECT GROUP#, THREAD#, SEQUENCE#, BYTES, USED, ARCHIVED, STATUS, FIRST_TIME, LAST_TIME FROM V$STANDBY_LOG; -- 備庫查看MRP進(jìn)程狀態(tài) SELECT PROCESS, STATUS, THREAD#, SEQUENCE#, BLOCK#, BLOCKS FROM V$MANAGED_STANDBY; -- 備庫查看同步延遲 SELECT NAME, VALUE, UNIT, TIME_COMPUTED FROM V$DATAGUARD_STATS WHERE NAME IN (transport lag, apply lag);重點(diǎn)看V$STANDBY_LOG的狀態(tài)列。正常情況下應(yīng)該有一組ACTIVE或CURRENT至少一組UNACTIVE可以隨時被覆蓋。如果看到所有組都處于ACTIVE狀態(tài)或者頻繁出現(xiàn)WRITING狀態(tài)卡住不動就得好好排查了。把主庫redo信息拉出來做對比然后決定是否需要調(diào)整組大小或數(shù)量。4.2 模擬故障初始配置不當(dāng)?shù)奈:Ψ糯筮^程我之前在一個測試環(huán)境做過一次對照實(shí)驗(yàn)效果非常直觀這里分享給大家作為參考。測試環(huán)境是一臺兩節(jié)點(diǎn)的Data Guard物理備庫主庫redo是4組每組2GB。備庫初始配置了6組standby redolog但每組只有512MB。我用一個簡單的循環(huán)寫入模擬事務(wù)負(fù)載持續(xù)跑30分鐘觀察備庫狀態(tài)。結(jié)果前10分鐘就出問題了。由于standby redolog太小RFS寫日志的頻率比主庫redo切換頻繁得多MRP還沒把上一組的日志應(yīng)用完下一組又寫滿了。隨后V$STANDBY_LOG出現(xiàn)多組同時為ACTIVE的現(xiàn)象apply lag穩(wěn)步攀升10分鐘時已經(jīng)達(dá)到約5分鐘。到30分鐘時apply lag已經(jīng)漲到不可接受的20分鐘整個備庫實(shí)際上處于“持續(xù)追趕”模式。這個實(shí)驗(yàn)很好地說明了為什么“大小不匹配”會是頭號殺手——它直接打亂了RFS和MRP之間的協(xié)作節(jié)拍。4.3 調(diào)整配置按照正確規(guī)范重建standby redolog針對上述問題我按正確規(guī)范重建了standby redolog。步驟分三步走第一清理原來的小尺寸組-- 備庫執(zhí)行先確認(rèn)要刪除的組沒有被使用 ALTER DATABASE DROP STANDBY LOGFILE GROUP 10; ALTER DATABASE DROP STANDBY LOGFILE GROUP 11; -- 依此類推刪除所有不合適的組第二按照主庫redo大小重新創(chuàng)建2GB的組數(shù)量按“主庫組數(shù)2”來建ALTER DATABASE ADD STANDBY LOGFILE GROUP 10 (DATA, DG1) SIZE 2G; ALTER DATABASE ADD STANDBY LOGFILE GROUP 11 (DATA, DG1) SIZE 2G; ALTER DATABASE ADD STANDBY LOGFILE GROUP 12 (DATA, DG1) SIZE 2G; ALTER DATABASE ADD STANDBY LOGFILE GROUP 13 (DATA, DG1) SIZE 2G; ALTER DATABASE ADD STANDBY LOGFILE GROUP 14 (DATA, DG1) SIZE 2G; ALTER DATABASE ADD STANDBY LOGFILE GROUP 15 (DATA, DG1) SIZE 2G; -- 如果使用ASM建議把standby redolog單獨(dú)放一個diskgroup例如DGREDO ALTER DATABASE ADD STANDBY LOGFILE GROUP 10 (DGREDO) SIZE 2G;第三用前面提到的幾個查詢確認(rèn)新配置生效并檢查V$STANDBY_LOG狀態(tài)是否回到健康狀態(tài)。調(diào)整完成后我再次用同樣的負(fù)載跑了30分鐘。結(jié)果apply lag始終保持在秒級V$STANDBY_LOG里始終有一組UNACTIVE空位可以供RFS切換使用MRP進(jìn)程的STATUS顯示為APPLYING_LOG這才是ADG真正健康運(yùn)行的形態(tài)。4.4 性能驗(yàn)證優(yōu)化前后縱向?qū)Ρ葹榱俗尨蠹矣袀€直觀感受我把優(yōu)化前后的關(guān)鍵指標(biāo)整理成一張對比表指標(biāo)優(yōu)化前512MB/組優(yōu)化后2GB/組standby redolog組大小512MB2GB組數(shù)6組6組apply lag峰值20分鐘5秒MRP等待狀態(tài)WAIT_FOR_LOG長時間占優(yōu)APPLYING_LOG為主歸檔日志堆積有持續(xù)累積無能及時歸檔清空主庫log switch影響有延遲風(fēng)險無明顯影響這個對比驗(yàn)證了一個核心結(jié)論在ADG同步性能優(yōu)化中standby redolog配置的正確性遠(yuǎn)遠(yuǎn)比加大帶寬、堆硬件重要得多。4.5 優(yōu)化后的日常監(jiān)控怎么判斷配置一直在“健康檔”配置完成不代表一勞永逸日常監(jiān)控仍然必不可少。我常用的監(jiān)控SQL有這幾條也都是網(wǎng)上各路Oracle老炮們總結(jié)出來的經(jīng)驗(yàn)實(shí)測很穩(wěn)-- 監(jiān)控standby redolog狀態(tài) SELECT GROUP#, STATUS, ARCHIVED, THREAD#, SEQUENCE# FROM V$STANDBY_LOG WHERE STATUS NOT IN (UNACTIVE, CURRENT); -- 監(jiān)控MRP進(jìn)程是否健康 SELECT PROCESS, STATUS, THREAD#, SEQUENCE#, BLOCK#, BLOCKS FROM V$MANAGED_STANDBY WHERE PROCESS LIKE MRP%; -- 監(jiān)控是否有歸檔GAP SELECT THREAD#, LOW_SEQUENCE#, HIGH_SEQUENCE# FROM V$ARCHIVE_GAP;如果V$ARCHIVE_GAP返回了記錄說明備庫已經(jīng)出現(xiàn)歸檔缺口需要盡快手動補(bǔ)齊缺失的歸檔日志。熱詞里那個“adg顯示gap”大概率指的就是這里——V$ARCHIVE_GAP出現(xiàn)非空記錄或者V$DATAGUARD_STATS里的apply lag異常漲高。5. 常見問題速查表與獨(dú)家避坑經(jīng)驗(yàn)5.1 典型問題場景和排查方向我把自己和同行在ADG優(yōu)化中遇到的典型問題整理成一個速查表希望能幫大家少走彎路現(xiàn)象可能原因排查方法處理建議WAIT_FOR_LOG長時間占優(yōu)standby redolog數(shù)量不足查V$STANDBY_LOG狀態(tài)增加組數(shù)至少主庫組數(shù)1apply lag持續(xù)增長standby redolog大小太小對比主庫redo大小重建為與主庫redo一致的大小主庫log switch變慢備庫RFS寫日志阻塞查主庫alert日志、備庫RFS進(jìn)程檢查備庫存儲IO、網(wǎng)絡(luò)延遲V$ARCHIVE_GAP有記錄日志傳輸斷檔或備庫應(yīng)用太慢查V$ARCHIVE_GAP、V$DATAGUARD_STATS手動補(bǔ)歸檔優(yōu)化應(yīng)用側(cè)配置備庫日志應(yīng)用突然變慢歸檔目錄所在磁盤IO瓶頸用iostat/dstat看磁盤利用率遷移歸檔日志到獨(dú)立磁盤或ASM多組standby redolog同時ACTIVE組數(shù)或大小配置與主庫不匹配查V$STANDBY_LOG調(diào)整組數(shù)和大小保證有空閑組5.2 我看過的幾次“經(jīng)典翻車”和對應(yīng)教訓(xùn)再分享幾個我親歷過的失敗案例每一個都是錢和時間買來的教訓(xùn)。第一個案例發(fā)生在某個業(yè)務(wù)大促前的容災(zāi)演練。開發(fā)同學(xué)在主庫跑了一套大數(shù)據(jù)清洗任務(wù)日志量猛增備庫V$DATAGUARD_STATS里的apply lag十分鐘內(nèi)漲到近一小時。當(dāng)時我查主庫網(wǎng)絡(luò)、帶寬、備庫CPU、內(nèi)存全部正常。后來才發(fā)現(xiàn)備庫的standby redolog是2組256MB而主庫redo是2GB。因?yàn)榇笮〔黄ヅ銻FS瘋狂切換MRP永遠(yuǎn)在追。這個教訓(xùn)讓我徹底明白了“大小對齊”是硬道理。第二個案例是備庫使用了存儲設(shè)備自帶的壓縮功能standby redolog寫在壓縮卷上。平時沒啥主庫一寫大事務(wù)RFS寫日志時壓縮CPU開銷飆升日志到達(dá)備庫的時間翻倍transport lag明明不大apply lag卻被拖高。雖然存儲壓縮的本意是省空間但在ADG這種對日志寫入時延高度敏感的場景里壓縮反而成了負(fù)優(yōu)化。后來我把standby redolog單獨(dú)放到非壓縮的卷上問題迎刃而解。第三個案例是備庫自動刪除歸檔日志的腳本配置失誤。某個DBA為了省空間寫了個cron每小時刪掉3小時前的歸檔日志。正常情況下MRP早就應(yīng)用完了不會有什么影響。結(jié)果有一次主庫業(yè)務(wù)高峰MRP應(yīng)用速度跟不上3小時前的日志還沒應(yīng)用完就被刪了直接制造了一個巨大的GAP。最后只能全量重新同步備庫折騰了一整天才恢復(fù)。這個案例提醒我們歸檔日志保留策略必須給MRP留出足夠的緩沖余量不能只盯著磁盤空間。5.3 獨(dú)家避坑技巧我在日常維護(hù)中堅(jiān)持的幾條原則這幾條原則不算什么官方文檔里的大道理純粹是我自己在生產(chǎn)環(huán)境中反復(fù)驗(yàn)證后形成的肌肉記憶分享給大家參考第一永遠(yuǎn)不要通過“臨時加一組大的standby redolog”來解決問題。組大小不一致會帶來管理混亂而且下次調(diào)整時很容易遺漏。要么一次性統(tǒng)一要么干脆推倒重來。第二添加或刪除standby redolog時盡量在備庫處于較空閑時操作。雖然支持在線操作但如果正好趕上主庫大日志量備庫的RFS寫日志會被文件操作短暫阻塞可能引發(fā)不必要的log switch延遲。第三定期檢查V$STANDBY_LOG的空閑組數(shù)量。我每周會跑一次巡檢腳本重點(diǎn)關(guān)注STATUS為UNACTIVE的組數(shù)是否小于2。如果小于2說明緩沖余量已經(jīng)告急需要盡快介入。第四主庫redo大小調(diào)整時同步評估備庫standby redolog。很多企業(yè)會在主庫做redo resize優(yōu)化卻忘了同步改備庫的standby redolog結(jié)果主庫redo從512MB調(diào)到2GB備庫還停在512MB同步性能瞬間退化。這是一條非常容易踩的聯(lián)動坑。6. 影響范圍分析正確配置standby redolog能帶來什么6.1 對同步延遲的直接改善這是最直觀的收益。正確配置后WAIT_FOR_LOG不再是病態(tài)的空轉(zhuǎn)MRP能持續(xù)處于APPLYING_LOG狀態(tài)apply lag可以被壓到秒級甚至亞秒級。我們實(shí)測中優(yōu)化前備庫apply lag經(jīng)常在5到30分鐘之間波動優(yōu)化后穩(wěn)定在2到3秒以內(nèi)。對于金融、電商這類對RPO有嚴(yán)格要求的場景這個差距就是“容災(zāi)可用”和“容災(zāi)不可用”的區(qū)別。6.2 對主庫性能的間接保護(hù)很多人沒意識到備庫standby redolog配置不合理不僅影響備庫自身還可能反過來拖累主庫。當(dāng)RFS在備庫寫日志受阻時主庫的LGWR可能被迫等待備庫的ACK特別是SYNC模式導(dǎo)致主庫事務(wù)提交延遲上升。我在一個SYNC模式的ADG環(huán)境里就見過這種現(xiàn)象。備庫standby redolog偏小RFS頻繁切換主庫log file sync等待事件飆升業(yè)務(wù)側(cè)反映寫入變慢。把備庫standby redolog改大并增加組數(shù)后主庫log file sync等待立刻回落。ADG是雙向聯(lián)動的備庫的配置直接影響主庫的健康度。6.3 對GAP和容災(zāi)演練的影響standby redolog配置正確后V$ARCHIVE_GAP的出現(xiàn)概率會顯著降低。因?yàn)镸RP始終在實(shí)時應(yīng)用主庫切換產(chǎn)生的新日志很快被備庫消費(fèi)歸檔日志的產(chǎn)生和刪除節(jié)奏也趨于平滑不太會因?yàn)閭鋷旆e壓太多未應(yīng)用日志而出現(xiàn)缺口。容災(zāi)演練的時候正確配置的收益更是肉眼可見。之前我們做一次主備切換演練從主庫SWITCHOVER到備庫接管業(yè)務(wù)全程只用了兩三分鐘備庫幾乎沒有丟任何日志。而配置不合理的時候同樣的演練可能要花十幾分鐘甚至更久中途還得處理歸檔補(bǔ)齊的麻煩事。6.4 對運(yùn)維成本的影響配置正確的ADG環(huán)境日常運(yùn)維會輕松很多。apply lag監(jiān)控不報(bào)警了歸檔日志堆積問題少了GAP告警也不再三天兩頭出現(xiàn)。省下來的精力可以投入到更重要的容量規(guī)劃和架構(gòu)優(yōu)化上。當(dāng)然正確配置只是第一步后續(xù)還需要持續(xù)的監(jiān)控和巡檢。但從投入產(chǎn)出比來看把standby redolog這個基礎(chǔ)打牢絕對是ADG運(yùn)維里性價比最高的一筆投資。7. 寫在最后的幾點(diǎn)實(shí)操感悟這些年在ADG環(huán)境上踩過的坑讓我對同步性能優(yōu)化有一個很深的體會大多數(shù)ADG性能問題都不是“高級技巧不夠”而是“基礎(chǔ)配置不達(dá)標(biāo)”。網(wǎng)絡(luò)再快、硬件再強(qiáng)如果standby redolog的組數(shù)、大小、分布不對所有流量都會堵在備庫這個“窄口”上。我自己現(xiàn)在接手任何一套ADG環(huán)境第一件事永遠(yuǎn)是先查V$STANDBY_LOG看組數(shù)和大小是否與主庫匹配再看有沒有足夠多的空閑組。這兩步只要達(dá)標(biāo)后面的同步性能優(yōu)化基本就成功了一半。如果這兩步不達(dá)標(biāo)就算你后面調(diào)再多的PARALLEL_EXECUTION_MESSAGE_SIZE、DB_FILE_MULTIBLOCK_READ_COUNT參數(shù)也都是在沙地上蓋樓。最后再分享一個小技巧如果你在備庫執(zhí)行ALTER DATABASE ADD STANDBY LOGFILE時報(bào)ORA-00314或者ORA-00315這類錯誤多半是文件路徑下有殘留的舊日志文件。先把舊文件清掉或者在備份目錄確認(rèn)沒有活動成員引用了同名文件再重新添加就能解決。這個坑很小但碰到的時候挺折騰人提前寫在這里供大家參考。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
日本黄 R色 成 人网站| 久久99精品视频| 丁香五月成人| 久久综合精品一区二区三区| 亚洲少妇综合| 国产又黄又粗的视频| 婷婷操逼| 亚洲情色一区二区三区| 午夜小电影在线插入淫高潮| 国产AV超爽| 欧美性区| 大香蕉狠狠爱| A 天堂在线观看视频| 国产欧美一区二区| 亚洲欧美日韩电影网站一区| 久久免费9| 翔田千里一区二区三区奶水| 97色在线观看| 欧美丝袜中文字幕07在线| 无码 黑人一区二区三区| 亚洲精品一区中文字幕乱码| 国产91丝袜在线播放蜜月| 国产呦精品系列在线观看| 人人考人人摸人人干| 91网亚洲| 黄片www视频免费| 成视频在线观看免费看| 金典av| 国产精品96| 婷婷亚洲综合| 91女优在线观看 | 超碰久超碰久| 91动漫操逼视频| 久久综合女优| 91肉片| 超碰av人人人| 噜噜噜噜久久久精品免费| 综合久久六月久久婷婷| 91黑丝美女| 国产高清亚洲日韩一区| 亚洲 综合 欧美| 91久久国外网| 久久黄色视频一区二区三区 | 超碰97人妻免费在线| 五月天婷婷综合网| 亚州,欧美在线| 亚洲成人久久一区二区| 是还免费视频1727我| 最新日本中文字幕| 欧美激情视频一区二区三区不卡| 九九亚洲| 五月丁香啪啪啪| 久久久久久久久女黄| 手机在线视频国内精品| 国产亚洲精品美女| 久久精品国产AV一区二区三区| 婷婷五月天网| 98超碰欧美| 亚洲欧洲精品视频发布| jiujiujiujingpin| 美女午夜福利免费视频| 亚洲精品不卡一二三区| 粉嫩av在线一区二区| 日日日大屁股骚女人精品| 91色人妻| 99re69| 成人一道本免费视频| 1024亚洲中文字幕久在线看片你懂的| 国产一级高清免费观看| 殴美牲| 人妻熟女一区二区三区视频| 小泽玛利亚一二三| 男人的天堂com| 四虎影院成年人片| 久久线上视频免费看| 成视频在线观看免费看| 亚洲 欧美 日本 国内 首页| 久久久久9| 91狠狠狠| AND人妻系列| 日本精品九九九| 日本三级网页| 天美传媒av一区二区| 精品午夜福利导航| 操学生天天| 欧美精品一区二区少妇免费A片 | 中文字幕在线免费观看2| 91亚洲黑人| 曰韩中文人妻视频| 日韩av三四区| 麻豆综合一区av| 自拍视频大全亚洲专媒视频/一区二区三区 | 久久久精久久久| 91精品无码久久久久久久| 久久久亚洲精品电影免费看| 日韩强奸av| 亚洲激情 欧美色图| 欧美国产精品| 蜜臀在线看片| 欧美亚性天堂| 欧美一级AAAAAAA| 97碰碰日本乱偷人妻中文的| 开心五月婷婷激情| 嗯嗯啊啊操我| 日日做夜狠狠爱欧美黑人| 人人摸人人添人人操 | 人妻酒店出差被中出免费在线播放| 亚洲牲交| 欧美色图成人网一区二区 | 福利偷拍视频-中文字幕2019国语完整视频大全-S91AV | 伊蕉97蜜桃97狠狠综合干| 一级二级三级黑人无码| 九九九九97| 国产精品99久久久www| 熟妇一区二区| 久久久久久久久久黄色网| 强歼乱伦资源网| 精品妇操一区二区三区| 午夜免费视频1000| 国产1024在线播放| 欧美色道啊| 中文字幕在线观看丝袜| 韩美日操逼| 国桃视频产巨乳精品一区二区在线| 亚洲操逼视频网站| 粉嫩av在线| 啊啊啊啊啊好大好舒服想要| 国产aⅴ无码片毛片一级网站| 超碰97极品9| 欧美老熟另类| 中国一区二区亚洲人妻| 色婷婷国产精品一区在线观看| 麻豆一区在线| 日本福利二区视频| 精品人妻一区二区三区四区石在线| 精品人妻一区春色| 强奸xx国产| 日本一区二区中文字幕久久| 超碰在97| 超碰久久性爱| 日韩AV一起草| 国产日韩精品suv| 97频视在线| 高清无码网址| 中文字幕奈奈美被公侵犯| 一区二区三区看视频| 久久精品一区| 婷婷五月天基地| 韩三级a视频在线观看| 亚洲影视高清第一页| 人妻碰碰碰碰碰碰| 2019久久久久久久久福利| 中文三一区| 操b网站亚洲无码| 无码人妻丰满热妇又大又粗| 国产强奸无码乱伦| 色欧美色交综合| 麻豆国产原创AV色哟哟| 中文字幕在线观看视频www| 先锋影音av先锋一区| 精品白丝一区| 人妻少妇色综合| 激情五月丁香五月| 亚洲蜜乳av| 欧美激情综合网| 麻豆a'v电影| 性欧美另类高清| 国产三级日产三级韩国三级| 夜夜操青青草| 综合久久97| 亚洲加勒比色图| 97在线欧洲| 国产在线视视频有精品| 国产亚洲精品久久久久小| 91欧美色| 超碰97男女| 青青色综合| 69精品人人人人| 国产一级作爱毛片| 日本人妻中文字幕| 小说区 图片区色 综合区| 亚洲第一视频 欧美风情 日韩| 爱射综合| 啊啊啊好爽快点啊啊啊嗯嗯| 开心婷婷五月| 啪一啪免费视频| 成 人 影视 一区 二区 三区 四区 | 摸奶性爱视频网站在线免费播放| 久久双插| 屁屁影院一区二区三区国产| 超碰狠狠操| 岛国片在线播放| 婷婷五月天网| 一本一首道人妻少妇免费久久| 五月婷婷六月丁香网址| 天天影视网色欲色香| 久久久久久亚洲精品中文字幕人妻| 国产福利夜| 人伦四五区| 超碰97亚洲| 大二网站亚洲| AAAAAAAAA黄片| 亚洲精品第一| 韩国久久97| 人妻爽爽啪视频| 国产美女高潮视频| 中文久久| 国产野战露脸在线播放| 激情99| 欧美天堂超碰97| 人妻久久一区二区三区| 综合国产影视三级| 精品视频久久久久九九九九9999| 超碰人妻久久人妻中文97| 男人的天堂视频精品乱在线| 国产A v无码专区| 91Chinese在线| 久久这里| 人人干黄色| 欧美男人一区| 一卡二卡三卡| 欧美日韩国产另类综合| 97人人草| 日本不卡一区二区三区| 久久受www免费人成| 亚洲色吧网| 精品二区三四区五电影 | 超碰78| 中文字幕性感少妇av| 国产一区二区三区久久精品太古里| 91亚洲高清| 性爱乱伦网址| 99re只有精品| 97色网| 国产99 中文字幕日韩小视频| 亚洲综合九| 少妇久久久久久久久| 偷看洗澡一二三区美女| 亚洲综合影片| 操啊国产| 欧美黑人猛交春色影视大全| 蜜臀久久99精品久久久久久| 久久久亚洲Av| 少妇国产不卡| 亚洲日韩在线a不卡99精品| 成人欧美一区二区三区黑人一| 亚洲清纯唯美| 激情接吻视频久久久久久| 亚洲天天影视色综合| 17c嫩草51久久91嫩草| 97超碰国产精品| 97久久久| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 国内毛片热久久思思热| 九九玖玖精品| 成年人网站在线免费观看| 日韩乱码Av| 97超碰人人模人人拍人人| 精品国产乱码久久久久A| 好吊色综合| 4141514逼喷水三级片| 精品人妻少妇| 色婷婷在线视频| 一二三区视频在线观看| 老司机射| 狠狠操狠狠燥| 嫖老熟女A片一二三区| 成人热久久精品| 国产高清精品一区二区三区毛片 | 日韩欧美大力操| 欧美国产有色电影| av无码av无码专区| 婷婷性网| 在线精品福利免费播放| 亚洲欧美清纯| 在线精品福利免费播放| 国产黄片在线免费观看| 丝袜无码a片| 婷婷色香| 国产精品成久久久久午夜午夜| 人妻碰碰碰碰碰碰| 91精品久久久| 香蕉av一区二区三区| 99热这里只有精品地址| 天天色欧美| 综合网久久| 国产乱人伦AVA麻豆软件.| 欧美日韩亚洲国产中文永久天天看| 色五月首页| 日韩操p| 台湾佬中文娱乐网久久久久久久久久com | 久久这里只精品99re66图| 97天天操| 你草精品在线视频| 99热精品在线观看| 久久无码成人| 亚洲欧美电影| 干妹子| 亚洲日本韩国极品一区二区| 日B操| 91路www| 东京热视频网| 麻豆尤物视频网| 熟女天天干| 中文字幕永久在线| 两性色网| 日本色色色网站免费看不卡| 嗯嗯嗯啊啊在线观看| 97国产色综合| **一级毛片国产| 成人97人人超碰人人| 国产精品久久久午夜夜伦鲁鲁| 熟妇亚洲一区二区三区| 久9热| 美国黄片aaa| 亚洲猛交| 狠插 制服 自拍| 亚洲一卡2卡3卡4卡乱码网站| 蜜臀久久99精品久久久| 一区二区三区成人| 欧美在线伊人色| 人妻激情偷乱视频一区二区三区| 免费黄色A片| 久久丁香久草综合网| 欧美色图片欧美色图| 二对二中文字幕。| 高清无码 国产精品| 四虎午夜影院| 欧美乱伦专区| 欧美78P| 久久这里只精品| 人妻激情在线视频| 久久视网78| 男人天堂2012| 熟女乱伦二区| 久久男女激情视频网站| 黄片在线免费在线观看| 伊人丁香五月婷婷| 无遮挡男女激烈动态图| 国内成人圈中文字幕无码视频| 亚洲色91C| 国产精品久久久777| 中文字幕丝袜美腿| 欧美美女在线高潮999| 欧美性暴力猛交XXXX| 欧美 青青草| 麻豆一区二区三区精品| 中文字幕97色| 少妇人妻激情四射| 超碰久草| 国产精品一区二区麻豆| 青青草导航在线视频| 亚洲涩涩| 久久久久久久综合,国产| 99热日| 97在线资源| 熟妇高潮精品一区二区三区下载| 欧美亚洲美少妇一区二区| 天天摸天天插天天日| 久久久亚洲精品电影免费看| 久草色悠悠在线视频| 欧美日韩国产男人| 97热视频在线观看| 97伦综合| 亚洲天堂精品日韩电影| 亚洲黄色视频在线观看视频| 秋霞无码av鲁丝片一区| 欧美黄色大香蕉一区二区| 91GD.COM| 成人片在线播放| 另类在线| 亚洲一卡2卡3卡4卡乱码网站| 少妇二级| 天天日老熟妇| 久久这里是精品| 亚洲天堂资源网| 亚洲精品一二牛牛| 久久亚州精品成人Av无| 国产日韩欧美中文在线播放| 久久香蕉国产线看观看猫咪av| 99这里只有精品| 久久97资源 网| 色九九九综合| 玖玖爱视频网站| 亚洲阿v天堂在线| 影音先锋日本一区二区| 人人操人人摸人| 激情五月综合网| 日本狠狠干| 伊人久久大香线综合无码| 久久草草欧美精品| 精品中文日韩字幕视频| 亚洲欧洲日韩中文字幕一区| 天天射天天| 婷婷亚洲综合| 诱惑人妻欧美一区在线播放| 日本二三四区| 国产一区二区三三视频| 91精品丝袜在线观看| 国产视频三区四区| 日韩欧美中文字亚洲慕| 26UUU欧美日本| 日本岛国黄色网址| 韩国轻伦国内自拍一区| 91老妇女| 性在久久久久久| 91国产精品在线看| 国产深喉| 性久久久| 2011国产精品| nuu12国产麻豆精品| 黄片国产精品一区二区| 一道本久久棕合爱| 99re在线精品78| 国产自制av蜜乳| 一区二区三区激情在线观看| 亚洲天堂区| 日韩另类| 九九九久久久久| 91性感在线| 亚洲成熟国产精品美女| 国内精品不卡无毒99999| 成年人免费观看网站| 操屄日韩| 春色校园综合网| 97精品国产| 午夜男人一级A片7777| 神马久久久久久久久久| 欧州一区二区三区四区| 亚洲日韩AV视色| 视频二区美腿制服人妻欧美| 午夜寂寞欧美| 成人热久久精品| 日本在线观看网址| 另类综合另类| 九九久久久| 99无码精品| 久久久性少妇| 亚洲色诱惑| 久久9精品网站| 久久久久亚洲?V片无码V| 久久人爽| 影音先锋视频在线| 亚洲欧美色综合| 自拍内地三级在线观看| 九草在线大香蕉| 亚洲精品一区二区精品| 熟女天天干| 日本免费一级AAA大片器 | 亚卅熟女乱色| 欧美性爱超碰97| 爽 好舒服 无码刺激久久| 97久久国产精品| 韩国一级婬片A片AAAAA| 中文字幕1区2区| 久久婷婷一区二| 欧美色涩| 欧美色图亚洲色图成人在在线| av一区二区三区不卡| 二级久久网| 久久久久久电影| 天天操美美| 成人免费视瓶| 伊人久久亚洲色欲综合网站| 白嫩国模丰满一二三区| 超碰97人人乐| 九九九九久久久| 日韩欧美亚洲自拍偷拍| 91色爽欧美| 97亚洲色图| 欧美疯狂做爰xxxx| 91性感在线| 九热大香蕉| yellow网站免费观看日韩高清无码| 午夜精品人妻二区三区| 日韩免费性爱视频在线观看| 97资源站国产精品| 美女性91| 色婷婷影院| 日韩一级片| 骚女高跟AV在线| 亚洲成人一区二区精品| 超碰9 7女人| 97超级久久| 色婷婷狠狠18禁| 亚洲久草AV色图| 久久极品伊人| 精品一区二区三区免费古装毛片香港三级日本三级人妇 | 亚洲天堂男人天堂网| 超碰国产情侣自拍网| 国产免a费看黄片在线| 亚洲精品国产拍免费91在线| 久久9久9久99久9久9| 亚洲乱码国产乱码精网站| 欧美草草高清日韩视频| 人妻无码后入| 久久五月综合| 九色精品视频导航1| 91熟女网| 9999久久久久| 91人妻视频| 99这里只有精品| www.大香| 亚洲无码精品AV久久久| 欧美久久人体| 久久人人妻| 国产偷拍自拍在线视频| 欧美91精品国产自产| 国产中文字幕在线观看| 色香在线| 在线人妻熟女一区二区三区四区五区| 99综合| 操逼啊啊啊91| 一个色导综合| 97超碰超碰| 热热色AV| 色拍偷亚洲| 中美日韩毛片| 国产超碰国产97| 色九九综合| 亚洲超碰AV| 国产一区在线观看无码AV| 久草在线| 综合久久2017| 91性网| 久久风骚城市人| 亚洲精品 欧美精品| 久热伊人99re| 狠狠狠一区二区三区| 超91综合网| 99热这里都是精品| 在线无码操| 9丨亚洲一区二区在线| 天天综合亚洲综合| 精品午夜福利| 国产精品扒开腿做爽爽爽视频| 97亚洲在线| 天天影视综合色| 久久熟女精品不卡一区| 91美女在线视频| 淫色网综合| 人妻精品一区二区全免费| 91精品人妻一区二区三区蜜桃臀| 嗯嗯啊啊啊好舒服| 激情综合久久| 思思热在线观看| 日韩女优在线| 97AV爱| 丁香五月天婷婷姐| 久久综合日韩亚洲欧美| 欧美精品久久96人妻无码| 少妇毛片久久| 色婷婷婷五月天激情四射| 女人妻一区| 在线综合 亚洲 欧美中文字幕 | 亚洲 欧美 制服 另类 自拍| 精品国产乱码| 高清成年美女黄网站免费大全 | 免费看黄视频亚洲网站| 色香综合| 亚洲高清无毛一区二区| 日本丝袜人妻内射| 日本肉体xxxx裸交| 久7色| 99re只有精品| 欧美综合1性辶| 色姑娘综合网| 3d成人精品一区二区| 久久久久国产无av| 白丝1区2区3区| 精品一二三区女同| 97亚洲色图| 私人尤物在线精品不卡| 丁香五六月啪啪| ?亚洲伊人伊成久久人综合网| 婷婷深爱五月| 麻豆亚洲Av成人无码一区精品| 女同在线视频一区| 人妻丝袜肏逼| 91丝袜美女视频| 人妻一区二区三区视频| 丁香五月综合| 人妻激情偷乱视频一区二区三区| 夜夜操天天肏| 亚洲老司机123专区| 东京太热男人的天堂久久久| 国产综合在线视频网站| 日本三级日本三级99| 插入综合网| 久久亚洲天堂| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 欧洲与亚洲欧美精品中文字幕| 台湾成人无码AV| 国产欧美另类久久久精品课程| 欧美日韩天堂| 久久二| 欧美亚洲宗合色性图| 熟妇人妻一区二区| 国产无遮挡| 亚洲欲色9532548967一区| 欧美 亚洲 综合 制服| 婷婷六月天| 麻豆天美国美国产| 久久AV无码1区2区3区| 亚洲大色堂| 欧美国产一区二区三区麻豆传媒| 九九九九九精品十六| 久艹99| 男人久久天堂| 国产色产精品在线观看| 老熟女搡BBBB搡BBBB视频| 把腿张开老子CAO烂你| 91丨九色丨国产打屁股| 亚洲一区中文字幕久久,果冻传媒一区二区天美传媒 | 91痴汉| 日日躁天天躁狠狠躁| 伊人久久AV诱惑悠悠| 2024黄色视频| 人人插人人搞人人操| 97九色人妻| 国产第二页| 一区二区三区四区理论片| 78久久| 亚洲人妻在线一区| 五月婷婷激情综合| 欧美色图亚州激情| 国产免费一区2区3区| 中文字幕一区二区三区高清| 精品国产99999| 免费?级毛片无码?∨蜜芽试看| 爱我干综合| 97精品国产精品免费观看| 东京热天堂网| 在线视频日韩欧美国产| 97精品第3页| 天天噜| 人人做人人妻人人夜视频| 中文伊人大香蕉视频| 日本久久久精品电影| 日韩 国产 欧美自拍| 色色综合网站| 免费看国产大AB| 欧美五十路熟| 旡码电影特区| 久久中文字幕人妻熟av女蜜柚| 操逼视频色| 亚洲美乱| 日韩99999| 亚洲欧美一区二区三区一猛片| 97超碰天天| 久久久久久久精| 亚洲av无线观看| 9999九九九久久久| 国产无码精品高清| 超碰 97国产熟女| 99少妇| 人看人人摸人人操| 啊啊啊啊二区好大| 国产成人欧美精品在线| 992这里有精品| 97精品一区| 成人激情无码在线视频| 二级久久网| 国产婷婷综合在线观看| 日韩精品.久久精品.AV女优.天美传媒| 97超碰久久色| 可以免费看黄片的视频| 日本精品人妻少妇一区二区| 国产传媒一区二区三区| 五月天综合| 一本大道青青| 日韩性爱网址| 五十路熟女,国产欧美精品区一区二区三区 | 亚洲在钱| 国产激情av女片自拍| 啊嗯嗯啊好大好爽| 国产日韩欧美亚洲精品95 | 日本999精品| 蜜乳AV免费观看| 日本九九久久99播| 人人操人人摸人人骑| 欧美第一页性| 97操| 中文字幕视频2区| 一级性爱网| AV天堂电影网| aaa亚无码专区| 亚洲欧美天堂在线| 九九九精品成人免费视频小说| 夫妻四区五区六区| 日韩性爱一级片| 免費人妻夜夜爽天天爽爽一区| 在线视频亚洲无码| 一二三啪啪专区| 亚洲欧洲中文日韩女优乱码| 爽爽爽免费视频| 天天躁日日躁成人字幕aⅴ| aaa淫乱视频| 国产女同在线观看视频| 亚州成人a∨| 八戒无码国产午夜福利| 91成人社区| 做爱A级亚欧| 五月开心久久AV官网| 中国东北熟女老太婆内谢| 精彩久久中文| 在线国产探花| 96久久久久久久| 麻豆天美久久91| 欧美黄色手机在线观看| 看黑丝美女操逼青青网站| 久久久99免费| 亚洲精品蜜桃久久久久久久| 亚洲五码一区二区三区| 国产三级中文字幕粉嫩| 色五月av| 新亚洲无码| 欧美熟女妇同| 欧美日本国产日韩激情视频| 精品一区二区2| 97色色色| 四虎国产精品永久在线囯在线 | 伊香蕉综合久久久久久久噜噜噜 | 1024精品在线| 91n美女视频| 精品成人亚洲午夜电影| 精品二区三四区五电影 | 欧美顶级黄色大片免费| 日韩欧美麻豆| 久久久艹艹艹| 亚洲国产一区二区入口| 狠狠97| 欧美第一页性| 国产乱伦亚洲| 欧美日韩国产精品久久色婷婷| 色婷婷亚洲婷婷| 囯产精品久久久久久久久久梁医生 | 淫淫总合网| 免费av高清无码| 久久久久久久久久久久久女过产乱-少妇高潮一区二区三区喷水-成人AV | AV乱伦国产| 九九久久99| 新版天堂中文资源8在线| 无码78| 久久久久久久久久久999| 爱av免费| 欧美天天综合网| 久久嫩草国产成人一区| 顶级丝袜熟女一区二区三区| 97鸡把在线视频| 大香蕉综合| 日韩欧美午夜视频在线| 久久高潮妇女视频| 欧美性,色九九| 国产精点久久久成人| 中日韓欧美高清| 影音先锋一区二区在线资源| 亚洲一区日韩| 国产无吗在线播放| 粉嫩久久久极品| 久操99| 国产家庭乱伦网址| 综合夜夜| 日韩精品系列| 久久久无码国精品无码三区三区| 福利社区午夜一区二区| 99这里都是精品| 久久发布国产伦子伦精品| 男人高清无码一区二区| 国产400孕妇孕交群| 九九九九九九九九九九精品视频| 熟女精品一区二区三区| 波多野结衣一级视频| 日本大香蕉综合网红本杳社区| 欧美97日韩| 性爱综合网| 欧美αv.com| 麻豆成人影音在线| 久久久久斤小| 狠狠躁AV| 婷婷AV一区二区三区| 日本人妻中文字幕精品| 欧洲精品二区| 美日韩一二三区| 男人兔费天堂| 国产精品成人蜜臀AV在线| 欧美激情区| 国产后入清纯| 日本有码影片下载| 操逼操操操91| 欧美日韩另类在线播放| 深夜激情| 99re热| 91伊人影视综合| 丁香五月天啪啪| 伊人激情五月天一区二区| 1769一区| BBBBB97COM| 国产丸一视频| 久久有碼| 97亚洲综合电影| 九九色影院| 久久久久久久九九九九九九| 久久久久久久久999| 欧美人妻一区二区| 99只有精品| 无码一区二区三区四区五区六区七区八区九区十区视频 | 久久伊人亚洲AV无码网站| 色97干| 99re6国产精品99re| 久久综合精品一区二区三区| 狠狠干,狠狠操| 亚洲一区二区精品福利| 天天躁日日躁AAAAXXXX国产| 精品少妇999| 五月天婷婷社区| 十八禁电影伊人网| 91国精产品| 欧美狠狠鲁| 116美女午夜| 99热这里只有精品99| 久久精品国产72国产精品福利| 亚洲成人无码影院| 日韩中文字幕国产| 久久精品国产精品一区| 日韩少妇无码| 国产精品久久久久久久久久久久久久| 免看60秒涩涩视频| 成人精品欧洲亚洲| 骚女高跟AV在线| 操香逼| 亚洲夜色在线| 亚洲精品视频在线播放| 91足交| 国内偷自视频区视频综合| 亚洲春色一区二区三区| 91天天综合网| 啊啊啊啊啊在线| 99re视频这里只有精品| 日韩人人精品| 色悠久久久av| 国产吹潮女在线观看| 国产成人天堂| 日韩av色图| 躁躁日曰躁2020| 色婷婷激情| 日韩另类| 婷婷激情四射| 超碰人人在线| 97人人干| 野狼激情网| 日本 成 人 小说 电影 一区二区| 99爱在线视频| 志村玲子视频一区二区| 99热精品在线在线| www.色婷婷.com| julia高潮后不停追击中出| 99操| 日本欧美韩国日产片片在线看免| 亚洲精品819| 91是天天| 九九热免费在线国产视频伊人五月| 一牛影视久久久一区二区三区| 开心激情站| 私色综合网| 欧美制服另类丝袜| 日本天堂网| 97久久精品国产| 亚洲熟女乱色一区二区三区久久久| 欧洲精品区| 人人摸人人舔一区二区| 久9综合在线| 肉丝中文无码高清| 欧美色图20P| 东京热毛片177b2viP| 国产农村妇女精品| 日韩三级在线观看网站| 久久精品国产AV一区二区三区| 强奸乱伦AV网址| 18禁精品网站在线看| 日本性爱网址| 久久香蕉国产线看观看猫咪av| 亚洲成人网站在线观看| 日本三级日本三级99| 婷婷五月花| 日韩 人妻 精品| 91草草草| 大屁股熟女一区二区三区| 日日摸日日弄日日拍| 加勒比综合88| 九久精品| 欧美一区二区日韩三区| 久久直播国产| 国产精品视频精品一二| 五月激情小说| 乱码熟妇人妻久久久| 久久熟女久| 五月天精品| 国产一区在线播放| 欧美性爱第一页久久| 欧美国产精品| 亚洲欧美日韩夜夜| 加勒比无码一区二区三区| 色香伊人| 久久久99久9| 欧洲精品网| 亚洲猛交| 偷拍精品一区二区三区| 亚洲一曲日韩精品| 免费精品福利在线观看| 亚洲 欧美都市激情| 欧美精品 - 91爱爱| 青青欧洲黑| 欧美日韩制服| 亚洲在线网站| 色五天伊人| 九九色影院| 少妇与黑人高潮在线| 欧美综合777| 射综合网| 欧美日韩电影成人在线| 日韩成人精品视频自拍| 97在线精品| av午夜玫瑰| 自拍啪啪视频| 日韩欧美亚欧在线视频| 99精品视频在线观看免费| WWW黄片COM| 久久a久久| 国产精品久久久久久夜夜夜夜| 国产自偷| 在线毛片片免费观看| 欧美强奸乱| 在线观看十八禁| 91在线/欧洲| 天天92av| 911av网站免费观看| 五月丁香啪| 丝袜视频一区二区在线播放国产中文| 东京男人天堂| 国内精品嫩模A∨私拍小视频| 久久鲁干| 91色噜噜狠狠| 97超碰超| 无码丰满熟妇一区二区浪潮AV| 任你草| 欧美大香蕉97| 色97干| 久久久久久亚洲中文| 少妇超碰在线| 99国产精品自在自在| 操国产高清| 中文字幕久热视频在线| 丁香六月综合激情| 99re这里| 97国产精品视频| 爱av免费| 五月天激情四射| 屌妞视频久久久久久久 | 精品国模无码| 五月丁香激情综合| 国产精品高潮久久AV| 草草草草视频| 国产真实野战在线视频| 校园春色亚洲欧洲| 91高清欧美| a亚洲欧美色欲| 久久9视频| 亚洲欧洲无码一区夜| 七月婷婷综合| 无套内射性感少妇视频| 91天天爱| 亚洲网站一区二区在线| 婷婷五月天av| 免费亚洲国产精品久久一区| 青春草莓视频在线观看网址| 午夜丁香| 日韩无码AB| 2017av无码免费无线播| 五月丁香啪啪网| 青青三级视频| 国产极品精品美女视频| 九九热免费国产视频婷婷伊人五月 | 立川理惠被中出无码| 午夜男人一级A片7777| 97一区二区三区视频| 人人操人人干xxx| 夜夜操2028| 97在线观看视频| 一级啊性爱在线视频| 色色综合97| 欧美不卡五十路| 777奇米影视777四色| 日本孕妇孕交| 青娱乐国产剧情av一区| 在线只有精品| 亚洲中文sv| 狠狠色噜噜狠狠狠狠狠色综合久久 | 亚洲AV无码成人精品久久| 91色伦综合| 无码 黑人一区二区三区| 偷窥自拍亚洲色图| 日韩91网站| 国产亚州高清国产拍精| 青青三级视频| 99在线免费公开视频| 日韩av熟女一区二区三区成人| 欧美一级A一级a爱片久久| 国产综合永久精品日韩鬼片| 亚洲区限制级| 91精品国产91综合久久蜜臀| 亚洲色图超碰在线| 伊人超碰97| 91丨九色丨东北熟女| 黑人性暴力毛片| 午夜国产成人福利视频| 久湿久久| 91丨熟女丨丰满熟女| 欧美激情久久久久| 小视频国产| 禁止观看美女黄| 亚洲欧美小说| 欧美美女自慰一区二区三区| 97超碰色中文字幕| 欧美日本一区二区a人| 91欧美综合在线| 亚洲一区二区三区播放在线| 人人手机欧洲亚洲国产人妻| 九九九免费视频| 天天操av懂色| 中文字幕在线免费观看2| 91啪9色| 综合久久少妇中文字幕| 亚洲 欧美 91| 加勒比综合网| 老女人日韩美91| 九九九精品| 亚洲一二三精品久久网| 国产毛片片精品天天看视频| 久碰视频| 欧美综合自拍| 人妻天天爽夜夜爽爽| 中文字幕在线观| 天堂九九九九九九九九九| 亚洲国产成人精品女人久久久| 久久久com| 久久国产逼| 歐美性天天| AV不卡在线| 伊人久大| 色香蕉影院| 少妇熟女一区二区三区| 丰满少妇一区二区三区专区| 欧亚无码视频| 91黑丝美女| 久久精品毛片免费不卡| 男女性扦B| 久久久久国产无av| 久久超碰日韩精品| 久久久久久大| 91露脸熟女专区| 日韩精品一区,二区 九九...老司机| 狠狠色噜噜狠狠狠狠狠色综合久久 | 久久久精品中文字幕爱豆| 青青草密桃在线播放| 伊人热综合| 日韩欧美中文字| 欧美很很操视频| 欧美国产婷婷久久| 淫色网综合| 国产野战露脸在线播放| 中国熟女91| 91色情黑丝搞鸡在线观看一区二区三区三州| 蜜臀va69| 婷婷久草一区二区三区| 豆花视频操逼网址| 一区二区三区色综合| 国内精品久久久久影院亚洲| 欧美天天射| 欧美另类自拍 | 国产精品999aaa| 国产盗摄美女如厕大神作品在线观看| 乱伦3P视频| 97这里有精品| 艾草av| 亚洲Av无码成人精品国产| 9Ⅰ超碰| 中文伊人大香蕉视频| 老熟妇一区二区三区…| 欧美97se| 97色冈| 夜嗨影院| 夜夜躁狠狠躁日日躁av| 97 超碰 人人做 人人爱| 人人干人人搞人人摸| 精品国产AV一区天美传媒| 超AV色女| 天堂中文日本在线观看| 九九九精品美女| 青久操| 久久av成人无码免费| 97鸡把在线视频| 四虎视频在线观看| 思思热免费视频观看| 色欲av国内精品久久久久久| 精品一久久久| 亚洲国产无码精品首页久久久| 欧美色狠| 欧美偷偷网| 日本久久久久久久久| 操逼www.| 91熟女视频| 亚洲污污网站| 色9999日韩国产| CCYY草草影院地址入口| 欧美淫乱视频| 欧美色偷拍 | 97精品久久久久中文字幕| 亚洲综合在线视频| 国内偷拍精品一区二区| 久久精品国产97欧美精品亚洲 | 欧美一二三级精品在线| 青青草原av| 毛片视频白嫩| 亚洲AV无码国产精品久久久久| 久久久精品| 九九九九九九免费视频| 4141514逼喷水三级片| 欧美成人午夜免费福利785| 欧美精品成人一区二区在线观看| 男人的天堂三级| 国产AV天美| 国产亚洲日韩在线三区黑人| 丰满人妻一区二区三区免费 | 九一精品牛牛一区二区| 91人妻做a观看视频| 青青在线视频日韩欧美| 亚洲 综合 第一页| 免费看污网站| 探花激情视频| 国产久久成人| 美女诱惑一区| 少妇高潮喷水无套久久久久久| 九色97| 十八禁视频网站| 中文字幕一区二区三区四区在线视频| 国产精选视频| 亚洲天堂日本| 欧美成人精品一区二区三区| 97人人草| 国产黄色小视频网站| 日韩情色一区二区| 五月天AV资源| 美女AV一区二区| 大香蕉免| 五月天婷婷色| 蜜乳性色无码专日粉嫩骚逼AV| 尤物视频一区| 亚洲九九九九| 嗯嗯不要视频|