色五月色开心色婷婷色丁香,五月婷婷丁香花综合网,婷婷丁香五月激情综合在线,五月婷婷六月丁香动漫,婷婷丁香五月激情综合在线,丁香花中文字幕在线观看,播五月色五月开心五月网,开心激情综合网,狠狠色丁香婷婷综合最新地址,丁香视频在线观看,狠狠做六月爱婷婷综合av,久久激情五月丁香伊人

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Spring Boot + JPA 高并發(fā)選課系統(tǒng)實(shí)戰(zhàn):防超賣與重復(fù)選課

Spring Boot + JPA 高并發(fā)選課系統(tǒng)實(shí)戰(zhàn):防超賣與重復(fù)選課 1. 選課系統(tǒng)為什么值得認(rèn)真做一遍學(xué)生選課系統(tǒng)這個(gè)題目幾乎每個(gè)計(jì)算機(jī)專業(yè)的學(xué)生都碰過(guò)招聘面試?yán)镆渤1荒脕?lái)當(dāng)場(chǎng)景題。但真正把它當(dāng)回事、按生產(chǎn)標(biāo)準(zhǔn)做一遍的人并不多。大多數(shù)人寫(xiě)出來(lái)的版本是一張學(xué)生表、一張課程表、一張選課記錄表Controller 里調(diào)一下 ServiceService 里查一下有沒(méi)有余量有就插入一條記錄完事。本地跑起來(lái)沒(méi)問(wèn)題一放到幾百人同時(shí)點(diǎn)選課的場(chǎng)面立刻出現(xiàn)超賣、重復(fù)選課、數(shù)據(jù)庫(kù)連接打滿。我前后做過(guò)三版選課系統(tǒng)第一版是課程設(shè)計(jì)交作業(yè)的水平第二版給一個(gè)學(xué)院內(nèi)部試用第三版才真正把并發(fā)問(wèn)題處理干凈。這篇文章就把這三版踩過(guò)的坑、改過(guò)的方案完整講一遍從數(shù)據(jù)建模講到高并發(fā)防超賣。技術(shù)棧用的是Spring Boot MySQL JPA這套組合上手快、生態(tài)成熟適合作為練手項(xiàng)目也足夠撐起一個(gè)真實(shí)可用的系統(tǒng)。文章適合三類人看正在做課程設(shè)計(jì)、想拿一個(gè)能寫(xiě)進(jìn)簡(jiǎn)歷的項(xiàng)目練手的同學(xué)準(zhǔn)備面試、需要把“高并發(fā)”從八股文變成能講清楚實(shí)戰(zhàn)細(xì)節(jié)的人以及已經(jīng)寫(xiě)過(guò)選課系統(tǒng)、但被超賣問(wèn)題卡住的開(kāi)發(fā)者。我會(huì)把每一步為什么這么做講透參數(shù)怎么算、鎖怎么加、索引怎么建都給出可以直接抄的代碼和配置??赐曛竽銘?yīng)該能獨(dú)立復(fù)現(xiàn)一個(gè)扛得住并發(fā)選課的系統(tǒng)并且能說(shuō)清楚每個(gè)設(shè)計(jì)決策背后的理由。2. 整體架構(gòu)與數(shù)據(jù)建模思路2.1 為什么先定架構(gòu)再寫(xiě)代碼很多人一上來(lái)就打開(kāi) IDE 建 Spring Boot 工程邊寫(xiě)邊想表結(jié)構(gòu)結(jié)果寫(xiě)到一半發(fā)現(xiàn)字段不夠用回頭改表、改實(shí)體、改接口返工成本極高。選課系統(tǒng)雖然不大但它涉及的核心矛盾很典型讀多寫(xiě)少、寫(xiě)操作有強(qiáng)一致性要求、并發(fā)集中在少數(shù)熱門(mén)課程上。這三個(gè)特點(diǎn)決定了架構(gòu)和數(shù)據(jù)模型必須先想清楚。我的做法是先畫(huà)一張業(yè)務(wù)流轉(zhuǎn)圖在紙上畫(huà)就行不用工具學(xué)生登錄 → 瀏覽課程列表 → 點(diǎn)擊選課 → 系統(tǒng)校驗(yàn)資格與余量 → 扣減余量并生成選課記錄 → 返回結(jié)果。這條鏈路里真正需要保護(hù)的是“校驗(yàn)余量”和“扣減余量”這兩步它們必須是一個(gè)原子操作否則并發(fā)下必然超賣。想清楚這一點(diǎn)后面的技術(shù)選型就順了。分層上我采用經(jīng)典的 Controller → Service → Repository 三層但額外加了一層Domain Service專門(mén)處理選課這種跨實(shí)體的業(yè)務(wù)邏輯。這樣做的原因是選課邏輯既不屬于學(xué)生實(shí)體也不屬于課程實(shí)體硬塞進(jìn)任何一個(gè)實(shí)體里都會(huì)讓代碼變味。分層清晰之后單元測(cè)試也好寫(xiě)后面加緩存、加鎖都有明確的落點(diǎn)。2.2 數(shù)據(jù)表設(shè)計(jì)三張核心表加兩張輔助表選課系統(tǒng)的表不多但每張表的字段和索引都有講究。核心是三張學(xué)生表、課程表、選課記錄表。另外兩張輔助表是學(xué)期表和教師表看需求決定要不要。先看課程表這是并發(fā)爭(zhēng)搶的焦點(diǎn)CREATE TABLE course ( id BIGINT PRIMARY KEY AUTO_INCREMENT, course_code VARCHAR(32) NOT NULL COMMENT 課程編號(hào), course_name VARCHAR(128) NOT NULL COMMENT 課程名稱, teacher_id BIGINT NOT NULL COMMENT 授課教師, semester VARCHAR(32) NOT NULL COMMENT 學(xué)期, capacity INT NOT NULL DEFAULT 0 COMMENT 總?cè)萘? selected_count INT NOT NULL DEFAULT 0 COMMENT 已選人數(shù), version INT NOT NULL DEFAULT 0 COMMENT 樂(lè)觀鎖版本號(hào), status TINYINT NOT NULL DEFAULT 1 COMMENT 1開(kāi)放 0關(guān)閉, create_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP, update_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP, UNIQUE KEY uk_code_semester (course_code, semester), KEY idx_semester_status (semester, status) ) ENGINEInnoDB DEFAULT CHARSETutf8mb4;這里有幾個(gè)關(guān)鍵決策。第一容量和已選人數(shù)放在課程表里而不是每次去 count 選課記錄表。count 操作在并發(fā)下既慢又容易讀到不一致的數(shù)據(jù)用一個(gè)冗余字段selected_count直接維護(hù)配合事務(wù)保證一致性性能好得多。第二加了version字段用于樂(lè)觀鎖這是防超賣的核心手段之一。第三uk_code_semester唯一索引保證同一學(xué)期同一課程編號(hào)不重復(fù)idx_semester_status支撐按學(xué)期查開(kāi)放課程的常見(jiàn)查詢。選課記錄表的設(shè)計(jì)要點(diǎn)在于唯一約束CREATE TABLE course_selection ( id BIGINT PRIMARY KEY AUTO_INCREMENT, student_id BIGINT NOT NULL, course_id BIGINT NOT NULL, select_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP, status TINYINT NOT NULL DEFAULT 1 COMMENT 1有效 0已退選, UNIQUE KEY uk_student_course (student_id, course_id), KEY idx_course_status (course_id, status) ) ENGINEInnoDB DEFAULT CHARSETutf8mb4;uk_student_course這個(gè)唯一索引非常重要它是防止同一學(xué)生重復(fù)選同一門(mén)課的最后一道防線。即使應(yīng)用層的校驗(yàn)因?yàn)椴l(fā)出現(xiàn)漏洞數(shù)據(jù)庫(kù)這一層也會(huì)直接拒絕重復(fù)插入。我第一版就是漏了這個(gè)約束測(cè)試時(shí)用腳本并發(fā)提交同一個(gè)學(xué)生的選課請(qǐng)求結(jié)果插進(jìn)去好幾條重復(fù)記錄排查了半天才發(fā)現(xiàn)是應(yīng)用層校驗(yàn)有競(jìng)態(tài)。學(xué)生表相對(duì)簡(jiǎn)單但要注意密碼字段的存儲(chǔ)和學(xué)號(hào)的唯一性CREATE TABLE student ( id BIGINT PRIMARY KEY AUTO_INCREMENT, student_no VARCHAR(32) NOT NULL COMMENT 學(xué)號(hào), name VARCHAR(64) NOT NULL, password VARCHAR(128) NOT NULL COMMENT 加密存儲(chǔ), major VARCHAR(64), grade INT, create_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP, UNIQUE KEY uk_student_no (student_no) ) ENGINEInnoDB DEFAULT CHARSETutf8mb4;2.3 JPA 實(shí)體映射與幾個(gè)容易踩的坑用 JPA 做 ORM 映射代碼量比手寫(xiě) SQL 少很多但有幾個(gè)坑必須提前知道。第一個(gè)是關(guān)聯(lián)關(guān)系的加載策略。選課記錄關(guān)聯(lián)學(xué)生和課程如果默認(rèn)用 EAGER 加載查一次選課記錄會(huì)連帶把學(xué)生和課程全查出來(lái)N1 問(wèn)題立刻出現(xiàn)。我的做法是全部用FetchType.LAZY需要的時(shí)候再用JOIN FETCH顯式加載。Entity Table(name course) public class Course { Id GeneratedValue(strategy GenerationType.IDENTITY) private Long id; Column(name course_code, nullable false) private String courseCode; Column(name course_name, nullable false) private String courseName; Column(nullable false) private Integer capacity; Column(name selected_count, nullable false) private Integer selectedCount; Version private Integer version; // getter/setter 省略 }注意Version注解這是 JPA 樂(lè)觀鎖的開(kāi)關(guān)。加上它之后每次更新這條記錄JPA 會(huì)自動(dòng)在 where 條件里帶上 version并且把 version 加一。如果兩個(gè)事務(wù)同時(shí)讀到 version5一個(gè)先提交把 version 改成 6另一個(gè)提交時(shí)發(fā)現(xiàn) version 已經(jīng)不是 5 了就會(huì)拋OptimisticLockException。這就是樂(lè)觀鎖防超賣的底層機(jī)制。第二個(gè)坑是批量操作的性能。選課高峰期可能有大量查詢?nèi)绻織l都單獨(dú)發(fā) SQL數(shù)據(jù)庫(kù)壓力很大。JPA 提供了BatchSize和hibernate.jdbc.batch_size配置來(lái)優(yōu)化但對(duì)于選課這種單條寫(xiě)入為主的場(chǎng)景更重要的是把查詢緩存和連接池配好。2.4 技術(shù)選型為什么是 JPA 而不是 MyBatis-Plus網(wǎng)上關(guān)于 Spring Data JPA 和 MyBatis-Plus 的對(duì)比文章很多我的實(shí)際體會(huì)是選課系統(tǒng)這種領(lǐng)域模型清晰、以實(shí)體為中心的 CRUD 場(chǎng)景JPA 更合適。JPA 的實(shí)體映射和樂(lè)觀鎖支持是開(kāi)箱即用的Version一個(gè)注解就搞定MyBatis-Plus 雖然也有樂(lè)觀鎖插件但配置起來(lái)多幾步。而且 JPA 的方法名派生查詢比如findBySemesterAndStatus寫(xiě)起來(lái)非??焓〉舸罅亢?jiǎn)單 SQL。但 JPA 也有短板復(fù)雜查詢和批量更新不如 MyBatis 靈活。所以我的方案是混合使用常規(guī) CRUD 走 JPA防超賣的核心扣減操作用原生 SQL 或者M(jìn)odifying的 JPQL把控制權(quán)拿回來(lái)。這樣既享受了 JPA 的開(kāi)發(fā)效率又在關(guān)鍵路徑上保留了精細(xì)控制的能力。3. 防超賣的核心機(jī)制拆解3.1 超賣到底是怎么發(fā)生的先把問(wèn)題講清楚。假設(shè)一門(mén)課容量 50當(dāng)前已選 49。兩個(gè)學(xué)生 A 和 B 幾乎同時(shí)點(diǎn)選課。系統(tǒng)處理 A 的請(qǐng)求時(shí)讀到 selected_count49判斷 49 50通過(guò)準(zhǔn)備寫(xiě)入。就在 A 還沒(méi)提交事務(wù)的瞬間B 的請(qǐng)求也讀到了 selected_count49因?yàn)?A 還沒(méi)提交B 讀的是舊值同樣判斷通過(guò)。然后兩個(gè)事務(wù)先后提交selected_count 變成 51超賣發(fā)生。這個(gè)問(wèn)題的本質(zhì)是**“讀-判斷-寫(xiě)”這三步不是原子的**。解決思路無(wú)非幾種把這三步變成原子操作數(shù)據(jù)庫(kù)行鎖或原子更新或者讓并發(fā)的一方失敗重試樂(lè)觀鎖或者把并發(fā)擋在數(shù)據(jù)庫(kù)之外分布式鎖、消息隊(duì)列。選課系統(tǒng)的并發(fā)量通常在幾百到幾千用數(shù)據(jù)庫(kù)層面的方案就夠了不必上分布式鎖那么重。3.2 方案一悲觀鎖簡(jiǎn)單但要注意鎖粒度悲觀鎖的思路是“先鎖住再操作”。在 JPA 里可以用Lock(LockModeType.PESSIMISTIC_WRITE)實(shí)現(xiàn)對(duì)應(yīng)數(shù)據(jù)庫(kù)的SELECT ... FOR UPDATE。public interface CourseRepository extends JpaRepositoryCourse, Long { Lock(LockModeType.PESSIMISTIC_WRITE) Query(select c from Course c where c.id :id) OptionalCourse findByIdForUpdate(Param(id) Long id); }在選課服務(wù)里這樣用Transactional public void selectCourse(Long studentId, Long courseId) { Course course courseRepository.findByIdForUpdate(courseId) .orElseThrow(() - new BizException(課程不存在)); if (course.getSelectedCount() course.getCapacity()) { throw new BizException(課程已滿); } // 校驗(yàn)是否已選 if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(已選過(guò)該課程); } course.setSelectedCount(course.getSelectedCount() 1); courseRepository.save(course); CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selectionRepository.save(selection); }悲觀鎖的優(yōu)點(diǎn)是邏輯直觀一定能防住超賣。但缺點(diǎn)也明顯鎖的粒度是整行而且持有鎖的時(shí)間覆蓋了整個(gè)事務(wù)。如果事務(wù)里還有其他耗時(shí)操作比如遠(yuǎn)程調(diào)用、發(fā)消息鎖會(huì)被長(zhǎng)時(shí)間占用其他學(xué)生選同一門(mén)課全部阻塞。所以用悲觀鎖的鐵律是事務(wù)里只做必要的數(shù)據(jù)庫(kù)操作越快越好。還有一個(gè)隱蔽的坑SELECT ... FOR UPDATE在沒(méi)有命中索引時(shí)會(huì)鎖表而不是鎖行。所以findByIdForUpdate必須走主鍵索引這一點(diǎn)要確認(rèn)執(zhí)行計(jì)劃。我第二版就遇到過(guò)因?yàn)椴樵儣l件沒(méi)走索引導(dǎo)致鎖范圍擴(kuò)大到全表整個(gè)選課接口響應(yīng)時(shí)間從幾十毫秒飆到幾秒。3.3 方案二樂(lè)觀鎖高并發(fā)下的更優(yōu)解樂(lè)觀鎖的思路是“先操作提交時(shí)檢查有沒(méi)有沖突”。JPA 的Version已經(jīng)幫我們實(shí)現(xiàn)了這套機(jī)制代碼寫(xiě)起來(lái)更自然Transactional public void selectCourseOptimistic(Long studentId, Long courseId) { Course course courseRepository.findById(courseId) .orElseThrow(() - new BizException(課程不存在)); if (course.getSelectedCount() course.getCapacity()) { throw new BizException(課程已滿); } if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(已選過(guò)該課程); } course.setSelectedCount(course.getSelectedCount() 1); courseRepository.save(course); // 提交時(shí)檢查 version CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selectionRepository.save(selection); }當(dāng)并發(fā)沖突發(fā)生時(shí)save會(huì)拋OptimisticLockException。這時(shí)候不能直接把異常拋給用戶而是應(yīng)該捕獲異常并重試。重試次數(shù)一般設(shè) 3 次超過(guò)就返回“系統(tǒng)繁忙請(qǐng)重試”。public void selectWithRetry(Long studentId, Long courseId) { int maxRetry 3; for (int i 0; i maxRetry; i) { try { selectCourseOptimistic(studentId, courseId); return; } catch (OptimisticLockException e) { if (i maxRetry - 1) { throw new BizException(選課人數(shù)過(guò)多請(qǐng)稍后重試); } // 短暫退避后重試 try { Thread.sleep(50L * (i 1)); } catch (InterruptedException ignored) {} } } }樂(lè)觀鎖相比悲觀鎖的優(yōu)勢(shì)在于不阻塞讀、鎖持有時(shí)間短在沖突不激烈的場(chǎng)景下吞吐量更高。選課系統(tǒng)的沖突集中在少數(shù)熱門(mén)課程大部分課程沖突很少樂(lè)觀鎖整體表現(xiàn)更好。但要注意如果某門(mén)課被幾千人同時(shí)搶樂(lè)觀鎖的重試次數(shù)會(huì)急劇上升反而拖慢系統(tǒng)。這時(shí)候需要配合限流或者排隊(duì)機(jī)制。3.4 方案三原子更新 SQL把判斷和扣減合成一步前面兩種方案都是在應(yīng)用層做判斷還有一種更徹底的做法把判斷條件寫(xiě)進(jìn) SQL 的 where 里讓數(shù)據(jù)庫(kù)來(lái)保證原子性。public interface CourseRepository extends JpaRepositoryCourse, Long { Modifying Query(update Course c set c.selectedCount c.selectedCount 1 where c.id :id and c.selectedCount c.capacity) int incrementSelectedCount(Param(id) Long id); }調(diào)用時(shí)判斷返回值Transactional public void selectCourseAtomic(Long studentId, Long courseId) { if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(已選過(guò)該課程); } int updated courseRepository.incrementSelectedCount(courseId); if (updated 0) { throw new BizException(課程已滿); } CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selectionRepository.save(selection); }這條 update 語(yǔ)句在數(shù)據(jù)庫(kù)層面是原子的selectedCount capacity這個(gè)條件在更新時(shí)求值天然避免了超賣。它的性能最好因?yàn)椴恍枰渔i也不需要重試。但有個(gè)前提必須保證選課記錄的唯一性校驗(yàn)也在同一個(gè)事務(wù)里并且唯一索引兜底。因?yàn)閑xistsByStudentIdAndCourseId這個(gè)檢查本身有競(jìng)態(tài)兩個(gè)并發(fā)請(qǐng)求可能都通過(guò)檢查然后都執(zhí)行 update最后靠唯一索引攔住其中一個(gè)。3.5 三種方案的對(duì)比與選型建議方案原理優(yōu)點(diǎn)缺點(diǎn)適用場(chǎng)景悲觀鎖SELECT FOR UPDATE邏輯直觀一定防住阻塞嚴(yán)重鎖粒度大并發(fā)低、事務(wù)短樂(lè)觀鎖Version 版本號(hào)不阻塞讀吞吐高沖突多時(shí)重試多沖突分散的場(chǎng)景原子更新UPDATE 帶條件性能最好無(wú)鎖邏輯分散需唯一索引兜底高并發(fā)搶課我的最終方案是原子更新為主唯一索引兜底配合限流。這是三版迭代下來(lái)最穩(wěn)的組合。原子更新解決了超賣唯一索引解決了重復(fù)選課限流解決了突發(fā)流量把數(shù)據(jù)庫(kù)打垮的問(wèn)題。4. 完整實(shí)操?gòu)牧愦罱ㄟx課系統(tǒng)4.1 環(huán)境準(zhǔn)備與工程初始化先把環(huán)境搭好。JDK 用 17 或 21MySQL 用 8.0Maven 3.8 以上。Spring Boot 版本選 3.2.x這個(gè)版本對(duì) Java 21 的虛擬線程支持比較好后面可以順手體驗(yàn)一下。用 Spring Initializr 建工程依賴勾選Spring Web、Spring Data JPA、MySQL Driver、Validation、Lombok。建好之后先改application.ymlspring: datasource: url: jdbc:mysql://localhost:3306/course_selection?useUnicodetruecharacterEncodingutf8serverTimezoneAsia/ShanghairewriteBatchedStatementstrue username: root password: your_password hikari: maximum-pool-size: 20 minimum-idle: 5 connection-timeout: 3000 max-lifetime: 1800000 jpa: hibernate: ddl-auto: validate show-sql: false properties: hibernate: format_sql: true jdbc: batch_size: 50 order_inserts: true連接池參數(shù)不是隨便填的。maximum-pool-size設(shè) 20 是基于這樣的估算假設(shè)單次選課事務(wù)耗時(shí) 20ms那么一個(gè)連接每秒能處理 50 個(gè)請(qǐng)求20 個(gè)連接就是 1000 QPS足夠應(yīng)對(duì)大部分校園場(chǎng)景。設(shè)太大反而會(huì)因?yàn)榫€程上下文切換和數(shù)據(jù)庫(kù)連接開(kāi)銷拖慢系統(tǒng)。connection-timeout設(shè) 3000ms意思是拿不到連接最多等 3 秒超過(guò)就快速失敗避免請(qǐng)求堆積。ddl-auto用validate而不是update這是生產(chǎn)環(huán)境的習(xí)慣。update會(huì)自動(dòng)改表結(jié)構(gòu)看著方便但線上環(huán)境自動(dòng)改表是災(zāi)難。表結(jié)構(gòu)用 SQL 腳本手動(dòng)管理啟動(dòng)時(shí)只校驗(yàn)實(shí)體和表是否匹配。4.2 核心選課接口的實(shí)現(xiàn)Controller 層保持輕薄只做參數(shù)校驗(yàn)和結(jié)果包裝RestController RequestMapping(/api/selection) public class SelectionController { private final SelectionService selectionService; public SelectionController(SelectionService selectionService) { this.selectionService selectionService; } PostMapping(/select) public ResultVoid select(RequestBody Valid SelectRequest request) { selectionService.selectCourse(request.getStudentId(), request.getCourseId()); return Result.success(); } }Service 層是核心把前面講的原子更新方案落地Service public class SelectionService { private final CourseRepository courseRepository; private final CourseSelectionRepository selectionRepository; public SelectionService(CourseRepository courseRepository, CourseSelectionRepository selectionRepository) { this.courseRepository courseRepository; this.selectionRepository selectionRepository; } Transactional(rollbackFor Exception.class) public void selectCourse(Long studentId, Long courseId) { // 1. 快速失敗已選過(guò)直接返回 if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(您已選過(guò)該課程); } // 2. 原子扣減條件不滿足返回 0 int updated courseRepository.incrementSelectedCount(courseId); if (updated 0) { throw new BizException(課程已滿或不存在); } // 3. 寫(xiě)入選課記錄唯一索引兜底 try { CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selection.setStatus(1); selectionRepository.save(selection); } catch (DataIntegrityViolationException e) { // 唯一索引沖突說(shuō)明并發(fā)下重復(fù)選課回滾扣減 throw new BizException(請(qǐng)勿重復(fù)選課); } } }這段代碼有幾個(gè)細(xì)節(jié)值得說(shuō)。第一existsByStudentIdAndCourseId這個(gè)前置檢查是為了減少無(wú)謂的數(shù)據(jù)庫(kù)寫(xiě)操作它本身不能保證唯一性真正的保證是唯一索引。第二incrementSelectedCount返回 0 有兩種可能課程不存在或者已滿。為了給用戶更準(zhǔn)確的提示可以先查一次課程是否存在但那樣又多一次查詢。我的做法是統(tǒng)一提示“課程已滿或不存在”用戶體驗(yàn)上可以接受。第三捕獲DataIntegrityViolationException后拋業(yè)務(wù)異常事務(wù)會(huì)回滾扣減的 selected_count 也會(huì)恢復(fù)不會(huì)出現(xiàn)“扣了名額但沒(méi)選上”的情況。4.3 退選邏輯與名額回補(bǔ)退選比選課簡(jiǎn)單但也要注意并發(fā)。退選時(shí)把選課記錄狀態(tài)改成 0同時(shí)把課程已選人數(shù)減一Transactional(rollbackFor Exception.class) public void dropCourse(Long studentId, Long courseId) { int updated selectionRepository.updateStatus(studentId, courseId, 0); if (updated 0) { throw new BizException(未找到有效的選課記錄); } courseRepository.decrementSelectedCount(courseId); }decrementSelectedCount的 SQL 要加個(gè)保護(hù)避免減成負(fù)數(shù)Modifying Query(update Course c set c.selectedCount c.selectedCount - 1 where c.id :id and c.selectedCount 0) int decrementSelectedCount(Param(id) Long id);退選和選課如果同時(shí)發(fā)生可能出現(xiàn)“退了又選”的競(jìng)態(tài)但因?yàn)槎际窃痈伦罱K一致性是能保證的。這里有個(gè)經(jīng)驗(yàn)退選接口一定要做冪等用戶連點(diǎn)兩次退選第二次應(yīng)該返回“未找到有效記錄”而不是報(bào)錯(cuò)前端體驗(yàn)更好。4.4 用虛擬線程提升并發(fā)處理能力Java 21 的虛擬線程是個(gè)好東西Spring Boot 3.2 開(kāi)始支持。選課接口是 IO 密集型等數(shù)據(jù)庫(kù)用虛擬線程能顯著提升吞吐。開(kāi)啟方式很簡(jiǎn)單spring: threads: virtual: enabled: true開(kāi)啟后Tomcat 的請(qǐng)求處理會(huì)使用虛擬線程每個(gè)請(qǐng)求一個(gè)虛擬線程阻塞在數(shù)據(jù)庫(kù) IO 時(shí)不會(huì)占用平臺(tái)線程。實(shí)測(cè)在同樣的硬件上選課接口的 QPS 能提升 30% 到 50%。但要注意虛擬線程不是銀彈如果數(shù)據(jù)庫(kù)連接池只有 20 個(gè)連接虛擬線程再多也得排隊(duì)等連接。所以虛擬線程要和連接池大小配合調(diào)優(yōu)不能盲目開(kāi)大。4.5 壓測(cè)驗(yàn)證用 JMeter 模擬搶課寫(xiě)完代碼不壓測(cè)等于沒(méi)寫(xiě)。我用 JMeter 模擬 500 個(gè)并發(fā)用戶同時(shí)搶一門(mén)容量 50 的課驗(yàn)證防超賣是否生效。測(cè)試計(jì)劃這樣配線程數(shù) 500Ramp-up 時(shí)間 1 秒循環(huán) 1 次。HTTP 請(qǐng)求指向/api/selection/select參數(shù)用 CSV 數(shù)據(jù)文件提供不同的 studentId。跑完之后查數(shù)據(jù)庫(kù)SELECT selected_count, capacity FROM course WHERE id 1; SELECT COUNT(*) FROM course_selection WHERE course_id 1 AND status 1;正確的結(jié)果應(yīng)該是selected_count 50選課記錄數(shù)也是 50一條不多一條不少。如果 selected_count 大于 50說(shuō)明防超賣失效如果記錄數(shù)大于 50說(shuō)明唯一索引沒(méi)生效。我第一版壓測(cè)時(shí) selected_count 跑到了 63就是沒(méi)用原子更新導(dǎo)致的。壓測(cè)還要關(guān)注響應(yīng)時(shí)間。正常情況下選課接口的 P99 應(yīng)該在 200ms 以內(nèi)。如果超過(guò) 1 秒說(shuō)明有鎖競(jìng)爭(zhēng)或者連接池不夠需要排查。5. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄5.1 超賣問(wèn)題的排查思路超賣是最常見(jiàn)也最要命的問(wèn)題。排查時(shí)按這個(gè)順序來(lái)先確認(rèn)扣減操作是不是原子的如果用的是“先查再改”的寫(xiě)法基本可以確定是競(jìng)態(tài)再看事務(wù)邊界對(duì)不對(duì)Transactional有沒(méi)有加在 public 方法上加在 private 方法上不生效這是新手常犯的錯(cuò)最后看數(shù)據(jù)庫(kù)隔離級(jí)別MySQL 默認(rèn)的 REPEATABLE READ 在并發(fā)下可能出現(xiàn)快照讀導(dǎo)致判斷用的是舊數(shù)據(jù)。一個(gè)實(shí)用的排查技巧是在扣減前后打日志記錄當(dāng)前 selected_count 和線程 ID壓測(cè)后分析日志能清楚看到哪些請(qǐng)求讀到了相同的值。我當(dāng)初就是靠這個(gè)定位到問(wèn)題的。5.2 重復(fù)選課的三種成因重復(fù)選課通常有三個(gè)原因。第一是唯一索引沒(méi)建這是最基礎(chǔ)的檢查SHOW INDEX FROM course_selection確認(rèn)。第二是唯一索引建了但沒(méi)生效可能是字段類型不一致或者字符集問(wèn)題比如 student_id 在兩張表里一個(gè)是 BIGINT 一個(gè)是 VARCHAR索引匹配不上。第三是應(yīng)用層用了saveOrUpdate之類的邏輯把已存在的記錄又更新了一遍這種情況要改成先查后插或者直接用 insert ignore。5.3 數(shù)據(jù)庫(kù)連接池打滿的處理壓測(cè)時(shí)如果看到HikariPool-1 - Connection is not available, request timed out說(shuō)明連接池打滿了。先別急著調(diào)大maximum-pool-size要分析連接被誰(shuí)占著。常見(jiàn)原因是事務(wù)里有慢查詢或者遠(yuǎn)程調(diào)用導(dǎo)致連接長(zhǎng)時(shí)間不釋放。用SHOW PROCESSLIST看數(shù)據(jù)庫(kù)端的連接狀態(tài)用 Arthas 的trace命令看哪個(gè)方法耗時(shí)最長(zhǎng)。如果確實(shí)是并發(fā)量太大可以調(diào)大連接池但要同步調(diào)大數(shù)據(jù)庫(kù)的max_connections否則應(yīng)用端連接多了數(shù)據(jù)庫(kù)端反而拒絕。我的經(jīng)驗(yàn)是應(yīng)用連接池總數(shù)不要超過(guò)數(shù)據(jù)庫(kù)max_connections的 70%留點(diǎn)余量給運(yùn)維和其他應(yīng)用。5.4 常見(jiàn)問(wèn)題速查表問(wèn)題現(xiàn)象可能原因排查方法解決方案超賣扣減非原子壓測(cè)后查 selected_count改用原子更新 SQL重復(fù)選課缺唯一索引SHOW INDEX加 uk_student_course連接超時(shí)連接池打滿SHOW PROCESSLIST優(yōu)化慢查詢或調(diào)大池接口變慢鎖競(jìng)爭(zhēng)看 P99 響應(yīng)時(shí)間縮短事務(wù)或改樂(lè)觀鎖事務(wù)不回滾異常被吞檢查 catch 塊拋 RuntimeException樂(lè)觀鎖重試多熱點(diǎn)課程看異常日志頻率改原子更新或限流5.5 幾個(gè)我踩過(guò)的坑第一個(gè)坑是在事務(wù)里做遠(yuǎn)程調(diào)用。我第二版在選課成功后調(diào)用了一個(gè)消息服務(wù)發(fā)通知結(jié)果消息服務(wù)偶爾超時(shí)導(dǎo)致選課事務(wù)被拖長(zhǎng)鎖一直不釋放其他學(xué)生全卡住。后來(lái)改成用事務(wù)同步回調(diào)事務(wù)提交后再發(fā)消息問(wèn)題解決。第二個(gè)坑是**Transactional和synchronized混用**。有同學(xué)想用 synchronized 保證并發(fā)安全但 synchronized 鎖的是 JVM 內(nèi)的對(duì)象多實(shí)例部署時(shí)完全失效而且和事務(wù)的提交時(shí)機(jī)配合不好容易出現(xiàn)“鎖釋放了但事務(wù)還沒(méi)提交”的情況。正確做法是把并發(fā)控制交給數(shù)據(jù)庫(kù)。第三個(gè)坑是索引失效導(dǎo)致鎖表。前面提過(guò)SELECT FOR UPDATE沒(méi)走索引會(huì)鎖全表。用EXPLAIN確認(rèn)執(zhí)行計(jì)劃確保 type 是const或eq_ref不要出現(xiàn)ALL。第四個(gè)坑是壓測(cè)數(shù)據(jù)不真實(shí)。一開(kāi)始我用 100 個(gè)學(xué)生壓測(cè)怎么都測(cè)不出問(wèn)題后來(lái)加到 500 個(gè)才復(fù)現(xiàn)超賣。壓測(cè)的并發(fā)數(shù)要接近真實(shí)峰值否則測(cè)了個(gè)寂寞。6. 性能優(yōu)化與擴(kuò)展方向6.1 緩存課程列表減輕數(shù)據(jù)庫(kù)壓力選課高峰期學(xué)生反復(fù)刷新課程列表這個(gè)讀操作量很大。用 Redis 緩存課程列表能顯著減輕數(shù)據(jù)庫(kù)壓力。緩存策略是課程列表緩存 30 秒選課成功后主動(dòng)刪除對(duì)應(yīng)課程的緩存。30 秒這個(gè)值是個(gè)權(quán)衡太短緩存沒(méi)意義太長(zhǎng)學(xué)生看到的名額不準(zhǔn)。Cacheable(value courseList, key #semester) public ListCourseVO listCourses(String semester) { return courseRepository.findBySemesterAndStatus(semester, 1) .stream().map(this::toVO).collect(Collectors.toList()); } CacheEvict(value courseList, allEntries true) public void selectCourse(Long studentId, Long courseId) { // 選課邏輯 }注意緩存和數(shù)據(jù)庫(kù)的一致性。選課成功后清緩存下次查詢會(huì)重新加載。這個(gè)方案在選課場(chǎng)景下夠用因?yàn)槊~的實(shí)時(shí)性要求沒(méi)那么高學(xué)生看到緩存里的名額稍微舊一點(diǎn)可以接受真正扣減時(shí)以數(shù)據(jù)庫(kù)為準(zhǔn)。6.2 限流保護(hù)數(shù)據(jù)庫(kù)突發(fā)流量是選課系統(tǒng)的常態(tài)開(kāi)放選課的那一秒可能有幾千人同時(shí)點(diǎn)。限流是保護(hù)數(shù)據(jù)庫(kù)的最后一道防線。用 Guava 的 RateLimiter 或者 Sentinel 都行我用的簡(jiǎn)單方案是基于 Redis 的令牌桶public boolean tryAcquire(String key, int limit, int windowSeconds) { String script local current redis.call(incr, KEYS[1]) if current 1 then redis.call(expire, KEYS[1], ARGV[1]) end if current tonumber(ARGV[2]) then return 0 else return 1 end; Long result redisTemplate.execute( new DefaultRedisScript(script, Long.class), Collections.singletonList(key), String.valueOf(windowSeconds), String.valueOf(limit)); return result ! null result 1; }限流的粒度可以按學(xué)生維度防止單個(gè)學(xué)生刷接口也可以按課程維度防止熱門(mén)課程被打爆。我兩個(gè)都做了學(xué)生維度限制每秒 5 次課程維度限制每秒 500 次。6.3 后續(xù)可以擴(kuò)展的方向這個(gè)系統(tǒng)做完之后還有幾個(gè)方向可以繼續(xù)深挖。一是選課排隊(duì)熱門(mén)課程用消息隊(duì)列削峰請(qǐng)求先入隊(duì)后臺(tái)按順序處理前端輪詢結(jié)果。二是分庫(kù)分表如果學(xué)生規(guī)模到幾十萬(wàn)選課記錄表可以按學(xué)期分表。三是多級(jí)緩存本地緩存加 Redis進(jìn)一步降低數(shù)據(jù)庫(kù)壓力。四是監(jiān)控告警用 Micrometer 加 Prometheus 監(jiān)控選課接口的 QPS、響應(yīng)時(shí)間、錯(cuò)誤率出問(wèn)題能第一時(shí)間發(fā)現(xiàn)。我個(gè)人在實(shí)際操作中的體會(huì)是選課系統(tǒng)這個(gè)項(xiàng)目最大的價(jià)值不在于功能多復(fù)雜而在于它把并發(fā)、事務(wù)、索引、緩存這些后端核心知識(shí)點(diǎn)串成了一條線。把這一條線走通比看十篇八股文都管用。最后再分享一個(gè)小技巧壓測(cè)的時(shí)候把數(shù)據(jù)庫(kù)的慢查詢?nèi)罩敬蜷_(kāi)long_query_time設(shè)成 0.1 秒跑完壓測(cè)分析慢查詢?nèi)罩就馨l(fā)現(xiàn)一些平時(shí)注意不到的索引問(wèn)題。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
草b在线| 无码高清少妇久久| 麻豆91熟妇人妻中文字幕茄子| 中文字幕一区二区三区高清| 五十路熟女工口 | A片三级无码| 久久鲁干| 精品人妻av区天天看片| 久久久艹艹艹| 国产激情片在线观看| 大香蕉中文201| 校园春色综合色| 中文字幕日韩专区精品系列 | 久草精品在线| 亚洲色吧网| 四虎国产精品永久在线囯在线| 免费看污网站| 大香樵伊人网| 日本操BAV| 欧美不卡在线一区二区| 91蜜桃传媒精品久久久一区二区| 99re6久热只有精品6在线直播| 天天综合网合集91| 久久只有精品一区二区三区| 色99视频| 日韩强奸av| 久操国产在线| 国产精品白丝AV| 热热热热日日漂亮永久永久国产日| 日韩在线观看字幕精品| 亚洲国产成人福利在线观看| 日日操免费视频| 久久久久久九九九| 欧美96精品在线| wwe 天天干.com| A V少妇特黄三级| 久草福利在线资源站| 岛国免费视频在线| 天美麻豆精品视频99| 欧美日韩小说| 精品人妻15区| 九九九热| 家庭乱伦国产精品| 国产野战露脸在线播放| 亚洲欧洲综合成人av一区| 欧美国产精品久久九九| 东京热视频网| 久久高清欧美国产| 能看的AV| 欧美精品 - 91爱爱| 日日碰狠狠添天天爽超| 国产欧美日韩精品中文| 久久精品国产72国产精品福利| 色综合久久88色综合久久天天| 青草草免费网站av| 三男一女不戴套的A片| 日本韩高清无砖码22o| 91伊人| 国产日韩欧美三级片| 变态另类专区| 囯产精品强| 中文字幕亚韩| 日本99久久| 国产乱伦性爱AV| 91久久99久久91熟女精品| 国产精品秘 福利姬在线观看| 2010男人的天堂| 97人人超| 第二页中文字幕| 一二三卡欧美日韩人妻免费精品| 中文字幕三四区| 琪琪精品免费一区二区三区| 人人操人人大香蕉| 亚洲美女 晚间男人天堂| 清纯唯美亚洲另类| 97最新在线播放视频| 99性爱| 国产传媒美日韩av| 日本乱人伦片中文三区| 色吧综合网| 99色婷婷中文字幕乱色| 91视频综合| 一区二区三区视频在线观看免费| 人人喜人人妻| 九九九偷拍| 乱伦Av网| 丝袜加勒比| 精品成人亚洲午夜电影| 日欧美色| 多毛小伙内射老太婆| 嗯阿好爽好紧| 超碰国产精品无码| 色综合加勒比四四季| 午夜美女诱惑电源网| 风流老熟女一区二区三区l| 青久操| 尹人免费观看视频在线| 淫乱图区| 久久美女福利是上海美女| 成熟熟女国产精品一区二区| 中国zzijzzijzzwww精品| 69AV女优男人的天堂| 91久久青青草原精品| 97久精品| 国产高清在线观看欧美| 亚洲男人天堂2012| 无色无码| …亚洲黄色厕厕女女在线播…| 亚洲五码一区二区三区| 欧亚三区动漫| 日逼五月天| 日本中文字幕在线视频| 丁香六月激情| 自拍偷拍第26| 精品亚洲天堂| 97伊人超碰| 国产女生在线| 亚洲欧洲精品视频发布| 无码国产精品96久久久久孕妇| 无码heyzo高清一区| 色情乱伦AV| 97免费在线观看| 五月天欧美色图| 亚洲第一二区另类图| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 91强热人妻| 青青草中文字幕| 国产精品高朝久久久久久久| 久久人人爽爽爽人久久久| 日韩精品永久在线观看| 精品在线观看视频在线| 丝袜剧情| 丁香啪啪| 在线 制服丝袜中出 人妻| 九月丁香婷婷色| av在线播放国产一区| 亚洲无码一区成人免费午夜| 欧洲精品二区| 欧美999| 黄页av| 久久精品店| 欧美丝袜中文字幕07在线| 天天在线91| 久久久96精品| 色综91| 777超碰| 上特色A在线| 久久午夜色播影院免费高清| 男人女人18禁片免费看网站| 午夜精品久久久久久久久久蜜桃| 亚洲黄色网址视频| 精品无人区麻豆乱码1区2区图片| 久久99草| 国产熟女无套内射| 中文字幕人乱码中文字的预防方法 | av大香蕉| 久久久精品国产亚洲伊人| 国产A v无码专区| 亚洲熟女综合一区二区| 精品国产乱码久久久久久久久久毛片| 97玖玖人妻| 大香蕉 222| 激情四射五月天| 加勒比久久av| 日本黄色大片一级视频免费麻豆| 久9综合在线| 91性感在线| 欧美探花网| 天美麻花大全视频| 男人的天堂欧美| 国产suv精品一区二六| 大香蕉在线视频重口味毛片在线| 久久是精品| 国产精品不卡一区二区三区av | 国产免费一区| 69av一区二区三区| 夜夜中出国产| 91老司机在线| 九月丁香| 四虎884| 黄色人人| 亚洲男人的天堂AV| 人妻一区二区三区熟女| 99久久99九九99九九九| 啊啊啊啊啊好舒服视频| 亚洲精美粉嫩嫩泬在线观看| 久久一区无码| 日韩精品国产一区二区| 久久99手机免费视频| 激情五月天中文字幕色| 日韩在线女优天天干| 国产精品熟女一区二区三区| 97人人操人人干| 本道综合精品| 校园春色制服丝袜中文字亚洲| 日韩成人人妻网站| 丁香六月婷婷久久综合| 中文字幕制服诱惑| 伊人97色天使| 素人一区二区三区日韩| 亚州日韩97| 国产中文大片资源中文字幕 | www.色五月| 美女好片色日本| 婷婷亚洲色| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 蜜桃一区二区三区| 日本国产高清色www视频在线| 91l欧美在线| 人妻喷水| 久久精品熟女亚洲AV麻豆软件| av九九| 东北毛片| 国产精品久久久久久久免牛肉蒲团| 国产日韩色综合| 超碰97在线色男人??| 国产操操日韩三级黄| 亚洲欧美综合网站| 日韩精品高清资源在线| 国产精品久久99日日| 色偷综合| 超碰 97国产熟女| 午夜福利1区2区3区| 精品无码一区二区人妻久久蜜桃| 五月天婷婷成人网| 国产日韩欧美亚洲精品95| 亚洲综合校园春色| 亚洲天堂,男人| 大象AV在线| 久久是精品| 熟女自慰久久久| 婷婷五月影院| 91成人在线免费视频| 国产成年女黄特黄| 美女高潮国产高清| 日韩色女精品| 日韩欧美被操黄免费观看| 五月天婷婷色| 五月婷婷色色| 色综合久久久久| 久久五十路熟女人妻| 日日夜夜精品视频| 日日摸天天爽夜夜欢| 清纯唯美综合亚洲| 日本免费一区二区不卡| 天天天天做夜夜夜夜做| 99久久婷婷国产综合精品草原| 欧美Aⅴ| 欧美日韩*字幕一区| 一区二区三区男人的天堂| 亚洲综合在线高清| 台欧久久精品视频| 亚洲AV无码国产成人| 久久五月天婷婷丁香中文字幕| 亚洲天堂久久久久久粉红视频| 大香蕉草草| 狠狠干精品一二三四五六2022| 麻豆国产尤物AV| 丁香婷婷色五月| 色色丁香| 蜜臀亚洲中文| 欧美人人天天网| 天天操天天射青青草| 91oumei| 97国产精品国| 日日摸日日碰| 99在线精品视频| 黑人娇小av在线播放| 沈阳熟女高潮对白视频| 日韩丰满熟妇| 亚洲一区中文字幕久久,果冻传媒一区二区天美传媒 | 东京热99999| 爱丝福利| 亚洲欧美日韩制服另类| 人妻精品一区二区在线| 久久综合乱子伦国产免费| 99热99色| 日韩精品99999| 日韩精品人妻中文字幕久久久| 一区二区国产视频在线观看| 超碰美国| 91久久婷婷| 北京美女一区二区| 青青草毛片| 日本一区二区三区四区免费观看| 亚洲最大黄网| 极品AV网站在线观看| 久久嫩草| 国产精品一区二区三区在线密挑| 97人妻色| 精品欧美乱码久| 一区二区三区 日韩欧美| 77777亚洲蜜臀精品久久综合蜜臀| 欧美伦乱爱| 日韩特级毛片免费观看全集| 日本人体九九九九九九| 男人的天堂久久| 秋霞曰韩R级| 亚洲男人天堂手机版| 蜜臀一区二区三区在线| 久久久久国产| 国产性刺激| 伊人网青青| 狠狠夜色午夜久久综合在线| 亚洲无码久久久久久久| 白嫩嫩一区| 日日AV加勒比| 人人模人人看| 中文字幕日韩综合| 国内毛片免费h片在线| 亚欧无码线免费观看视频| 99亚洲精品| 国产亲戚伦亲在线| 国产精品久久久视频| 日韩乱码av| 无码人妻丰满热妇又大又粗| 99国内精品| 双插在线| 亚洲97成人在线观看| 久久五月天婷婷| 亚洲性猛| 午夜.DJ高清在线观看免费7 | 懂色影视久久| 淫荡网址| 青青草中文-久久青草精品一区二区三 | 9ⅰ久久久天天| 亚洲国产熟妇综合色专区| 日本日逼高清| 老熟妇一区二区三区啪啪| 无码久久国产| 东北老女人的激情视频| 中文字幕日韩电影人妻 | 伊人网免费视频| 在线观看视频91| 色亚洲欧美| 免费αⅴ在线观看| 国产精品午夜成人福利| 欧美性爱第一页久久| 精品一区二区三区最新| 亚洲九九视频| 欧美黑人与女人91~| 日韩无码精品综合久久| 九一国产精品| 欧美性生活综合| 啊啊啊轻点在线观看| 亚洲美女自拍偷拍视频| 制服中出中文人人精品| 久久高清欧美国产| 亚洲瓯美色图| www.99在线| 91人人| 天天综合香 ld视频| 精品无码久久久久久久杏吧| 99国产精品久久久久久久成人热| 国产JDAV无码视频在线观看| 成熟熟女国产精品一区二区| 人妻啊啊人妻啊| 人妻 丝袜美腿 中文字幕| 97日韩| 97少妇人妻中文字幕久久| 伊人色综合超碰| 午夜大香蕉| 激情综合网五月婷婷五月天| 夜夜操美女| 怡红院成人视频| 91精品少妇搡搡搡| 风间由美日韩欧美久久| 大香蕉视频一二三区| 粉嫩AV输入| 操我啊啊啊啊啊| 能看的AV| 婷婷色一区| 六月激情网| 中文字幕 人妻不满 在线视频| 90后性网国产欧美| 精品国产91久久久久久一区黄无| 九九色综合| 亚洲综合图片在线| 校园春色 亚洲| 欧美春色| 秋霞免费AV| 中国熟妇| 99热精品在线| 天天日天天搞天天干| 无码国产Av| 无码丰满熟妇一区二区浪潮AV| 国产91 丝袜在线播放 | 国产成人拍国产亚洲精品| 亚洲在线欧美| 五月丁香影院| 欧美男人一区| 亚洲中文字幕网| 日本狠狠干| 一个色导综合| 少妇综合| 2017天天插| 国内精品a| 香蕉黄色一级视频| 中国AV美女| 中字幕人妻一区二区三区| 97色碰| 啊啊啊想要| 色综合加勒比| 韩国手机不卡无码三级视频| 91av一区二区在线观看| 在线观看成人性爱免费小视频| 无码一区二区精品视频久久久春药 | 囯产精品强| 蜜臀无码一区二区| 久久精品区| 青青草久草| 欧美日韩国产一区二区小黄片大全| 啪啪视频免费在线观看| 亚洲成人免费中文字幕| 久操婷婷| 人妻无码后入| 97爱啪| 91精品人妻| 国产黄色视频久久| 日韩探花精品在线视频| 五月天婷婷基地| 九九无码久久精品视频| 69丨亚洲丨精品丨入口免费播放| 亚洲综合网91| 国产日韩欧美操逼视频| 午夜天堂啪啪| 亚洲男人的天堂一区二区| 亚洲天天影视色综合| 偷偷人人精品女女久久| www久久国产精品| 久久一级无码精品毛片6| 日本精品一区三区| 不卡一区视频| 日本中文熟女视频| 久久精品性| 欧美日日夜夜| 欧美劲爆第一页| 国产探花精品在线| 精品国产乱码久久久久A| 亚洲有码第一页| 偷拍 亚洲 欧美| 久草视频在线视频在线视频在线观看| 人妻熟女一区在| 久久这里| 欧美一二三级精品在线| 东京热激情视频一二三区| 色天堂在线观看| 操逼操2| 亚洲国产欧美中文永久| 色超碰综合| 翔田千里AV无码秘 三区| 不卡一区二区日本视频| 青久操| 天天久久| 91色情黑丝搞鸡在线观看一区二区三区三州 | 超碰在线第一页| 久热这里只有精品9| 国产精品嫩草久久久久| 96爱综合| 成人a v在线播放免费| 婷婷五月天小说| 日本最新1区2区3区| 亚川综合视频| 精品国产国产AV| 欧美片第一页| 黑丝91视频| 成人性交免费视频| av大香蕉| 久九九九| 中文字幕一区二区三区人妻少妇在线| 一区二区乱码福利| 日本久久久久久久久| 青青草依人大香蕉| 99re在线观看| 91精品导航| 综合激情婷婷| 啊啊啊啊网站| 欧美性猛交美女自慰91| 极品销魂美女一区二区| 福利风月五月天影院| 97色碰| 人妻日日夜夜精品| 日韩免费中文字幕视频| 东北女人的毛片| 美女视频尤物网在线看| 国产第11页| 国产92麻豆天美精品色欲5| 亚洲欧美日韩国产丝袜自拍中文| 国产91乱伦| 欧美日韩精品久久久久东北老熟妇| 性爱精品一区| 97超碰色色| 在线人妻熟女一区二区三区四区五区| 国产美女口爆吞精视频| 日本999精品| 国产精品午夜高潮呻吟久久av| 一摸二插三插| 天天综合网国产| 思思热在线视频免费| 性爱欧美五月| 亚洲四虎熟女精品| 天天噜| 91精品丝袜久久久久久无码人妻| 思思热久久成人| 超碰在线综合97| 91一区二区| 欧美性爱第一页久久| 97在线观视频免费观看| 热九九精品| 91视频伊人| 国产AB视频| 五月黑AⅤ| 成全在线观看免费观看| 九九操久久国产免费视频| 小草精彩毛片| 操比国产| 视频一区二区三区精品| 亚洲综合色在线| 亚洲s在线观看| 操操操日本的逼| 91久久久久久久久18| 青青草字幕AV| 丝袜六区| 极品极品色影院| 超清福利精品视频在线| 精品女同一区二区三区| 久久久久网站-538在线视频-欧美永久乱码| 强奸乱伦αv片| 天天干天天舔| 亚洲 在线| 碰超人人在线一区二区三区| 男人天堂站| 超碰人人色| 韩国一级AAA| 96精品久久久久久久久| rivers-china.com| 97资源免费视频| 国产精品一区二区在钱播放| 色区久久| 竹菊影视国产一区二区| 91丨豆花丨熟女| 久久成人国产| 亚洲欧美色图小说| 91精品国产91久久青草| 久久精品国产亚洲粉嫩| 99re在线视频| 亚洲综合情色| 超碰538| 67194无码不卡| 情色AV电影| 丁香五月天堂| 亚洲AV成人无码一区二区三区在线观看| 婷婷色色五月天福利| 1240青青草一区二区三区视频天爱| 玖玖综合视频| 91熟女视频网| 美女上床网站| 青青草原成人| 欧美后入式| 久欲AV| 日本黄色XXX| 亚洲日韩欧美一区二区| 加勒比海成人视频网| 蜜臀99999| 污污污8888| 欧美日动态视频| 欧美A√综合网 | 啪啪啪东京| 激情五月天插| 男人高清无码一区二区| 成人网站 免费观看| 人妻人人做人人澡人人爽欧美一区| 操婢日韩| 人妻在线视频| 99碰碰| 成人日韩欧美| 67194无码不卡| 欧美一级欧美三级在线观看| 久久只有精品一区二区三区| 北条麻妃性愛视频| 加勒比五月天| 一本色道久久综合精品婷婷| 成人怡红院| 国产精品内射婷婷一级二| 成人精品在线免费视频| 强奸国产精品视频| 黄网色一区二区三区四区精品| 色官网在线| 人人色97| 亚洲欧洲无码97久久精品| 超碰久久精品| 亚洲不雅视频1区二区| 神马久久久久久| 一区二区精品日韩欧美在线观看| 欧美久久伊人| 97超碰美国| 欧美猛交黑寡妇中文字幕| 91色人| 99re9| 久久毛卡| 精品少妇后入一区二区三区四区人妻巨乳 | 白丝在线一区| 91性感在线| 天堂а√在线最新版在线 | 东京热99999| 东京热大香蕉| 国产精品久久久久久 百度| 六六久久日韩不卡| 熟女AV一区| 蜜臀久久99精品久久久久久无删减| 国产精品人人爽人人做可爱福利| 五月婷色| 亚洲自拍欧美色综合| 9Ⅰ超碰| 日韩图区 偷拍| 女优免费一区二区永久| 最新9久久久9免费视频| 国内偷拍精品一区二区| av凤凰久久久| 丝袜av一区二区三区| 999综合网| 久久久国产成人一区二区三区在线| 天堂av2019| 啊啊在线| 国产免a费看黄片在线| 青青草在线成人视频| 四虎免费在线播放| 日韩在线性爱免费视频| 啊啊啊用力在线观看| 精品人妻一区二区蜜桃视频| 最新岛国大片| 97人亚洲综合字幕| 久久久人妻| 婷婷综合| 男人的天堂Va| 色综合尤物| 91美女視頻| 另类小说综合网| 伊人青青一区成人视频在线观看区| 精品十八在线观看| 日韩精品中文字幕二区| 黄色十八禁| 看大黄色大片原件| 精品小视频在线| 精品国产av一区二区三区四区入口| 91久久久久久久久18| 色眯眯av| 免费av大片| 青青青草伊人精品| 少妇高潮对白在线观看| 91欧美丨精品丨入口| 亚瑟国产精品久久无码| 黄呦呦在线| 黄色片一区二区三区四区五区| 成人AV素股で擦久久| 热99这里有精品综合久久| 久久五月丁香| 97综合激情| 丁香激情网| 久久九色| 曰本精品久久久| 国产真乱mangent| 四虎视频在线观看| 日韩免费在线视频观看| 久久夜精品一区二区三区| 国产绿奴视频在线观看| 东北操逼| 这里只有精品视频在线| 天美传媒AV在线| 激激五月| 欧美一级美片在线观看免费| 330dv亚洲成年视频网| 亚洲天堂7777| 国产精品日日摸天天碰| 久久久久13| 啪啪啪精品| 天美传媒av一区二区| 在线观看日韩av不卡| 色图四区| 伊人国产视频| 亚洲偷拍自拍在线视频| 亚洲少妇在线观看| 欧美78| 强奸乱亚洲| 性色亚洲| 亚洲综合射| 99热精品在线播放| 国产精品视频自拍在线| 亚洲图片偷拍欧美| 久久最新免费视频23| 91人妻精华帖| 超碰人妻久久| 伦在线97| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 午夜激情床戏激情| 熟女色综合久久| 日韩在线观看三级电影| 天天躁狠狠躁av| 欧美熟妇视频| HEYZO高无码国产精品227| 91综合站| 亚洲加勒比色图| 日韩av三四区| 久热婷婷| 国产熟女完整版中字| 91性片| 人妻无码视频一区二区三区久久| 98一区二区精品| 午夜无码精品免费看性色| 97日韩| 中文字幕av一区二区三区人妻少妇| 欧插网站| 亚洲第一综合| 国产操逼逼网| 国产乱伦亚洲色图高清无码| 九九热国产| 屁股久久久久久久久| 欧美日韩222| 中文字幕 人妻不满 在线视频| 日韩色| 美日韩男女操屄视频| 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 青青操在线亚洲视频观看欧美在线| 9l视频自拍9l九色成人| 鸡巴插逼视频| 国产日韩无码一区二区三区久久区| 日韩欧美女求操每天更新| 天天操天天7| 欧美少妇性乱| 久久视网78| 宅男91视频在线播放| 一本一道人妻久久一区二区三区| 国产男女无套视频免费观看| 综合 欧美 亚洲 日本| AV一区观看| 亚洲日韩精品久久久久一区壹牛| 欧美 亚洲 第一页 | 欧美午夜视频精品久久| 色狠狠 - 百度| 久久亚洲欧美中文字幕国语| 乱伦熟女专区| 性饥渴少妇av无码毛片| 黑人免费福利视频| 蜜乳视频网站| 欧美黄色大片在线观看 | 国产女大学生AV| 国产精品久久久| 97爱爱| 免费人成毛片乱码| 91人精品妻入口| 日韩激情无码影院| 亚洲另类小说卡通动漫| www.av在线视频| 亚洲av影音先锋| 亚欧国产无码精品在线| 爆操无码| 精品一区二区三区蜜桃臀赵总 | 午夜啪啪片| 国产熟女乱论| 亚洲五月婷婷| 亚洲天堂性爱| 天天日天天舔东京热| 色欲人妻一区二区在线| 亚州欧美总和| 久久大香蕉97| 97色碰| 欧 美 自 拍 偷 拍| 日韩欧美tv一区二区在线观看| 欧美激情中文字幕另类小说| 丁香五月婷婷色| 青娱乐导航AV| 新视频sss国产| 国语精品对白| 久久草草亚洲蜜桃臀| 日韩亚洲国产视频| 婷婷五月成人| 91色爽欧美| 一本色道久久综合熟妇| 欧美天天综合网版| 日韩人妻有码免费视频| 午夜男女爽爽爽在线视频 | 九九热只有精品| 视频不卡中文字幕| 久久久99免费| 伊人色综合网电影| 欧美黄色图片| 欧美第一页| 欧美色图亚洲激情| 日产精品久久久一区二区| 91人人| 九月丁香综合网| 人人操AV| 大乔未久88一区| 97美日韩视频| 蜜乳Av成人片网站| 大香蕉乱伦视频网| 青春草A| 国产91 丝袜在线播放| 国产福利视频精品视频| 日韩 欧美 另类 人妻| 超碰在线国产| 久草在| 九九九九热只有精品| 超碰国产精品无码| 99re久久| 久久久久久久久久久久久久久久9| 日韩成人小视频| 18禁免费视频| 人夜夜精品网站香蕉嫩草| 色综合 加勒比| 欧美淫乱视频| 成人小说视频在线精品欧美| 中文字幕五区| 超碰这里有精品| 不卡中文字幕aⅴ在线| 曰韩av中文字幕专区| 综合91网| 2024黄色视频| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 国产精品亚洲天堂网址| 五月天丁香| 久啪视频| 中日韩久久久| surenchaopeng| 乱欲视频| 粉嫩国产精品久久粉嫩| 91模特在线观看| 黄片免费久久久久久久| 久久一二三四不卡 | 岛国激情视频软件| 久久婷婷在线观看视频| V A在线| 日日夜夜天天| 欧美亚州综合网图片| 加勒比久久综合网高清| 激情综合网一盗摄| 久久性爱精品一区| 欧美 日韩 另类 亚洲| 大色综合| 免费视频无码| 97日韩| 国产欧美一区二区| 久久午夜色播影院免费高清| 国产精品久久久亚洲一区| 96国产精品| 欧美一级色| 疯操AV| 国产精选三级在线观看| 中文字幕人乱码中文字的预防方法 | 天美传媒AV国产在线| 成年人网站在线免费观看| 五月天色图| 日本孕妇一区二区视频操逼免费看 | 久久无码电影| 怡红院亚洲怡春院av| 加勒比综合网| 欧美 青青草| 国产最新小视频在线播放下载| 大香蕉免| 免费精品人妻一区二区三| 330Dv国产女人终合视频极品人与兽 | 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 欧美最大综合网| 亚卅熟女乱色| 偷拍导航视频网站| 久久最新免费视频23| 中字幕人妻一区二区三区| 国产偷仑| 伊人色综合网电影| 99久久99九九99九九九| 久久久久久久少妇| 欧美少妇人妻| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 青青草丝袜在线视频| 欧美丝袜亚洲| 六六久久日韩不卡| 在线视频亚洲无码| 日本一天色道久久久精品视频| 日日噜噜夜夜狠狠视频无| 日韩资源网| 又大又白奶子| 成人怡红院| 骚逼一区二区| 亚洲 日韩 欧美 国产综合体| 91亚洲综合在线| 9+1视频网址| 久久久久久久久久久久久久久久9| 国产精品人妻一区二区| 91综合网在线| 97超碰久久色| 亚洲丝袜天堂| 欧美成人国产精品| 97天天综合| 久久久18禁| 日本精品加勒比海一区| 尹人大香蕉视频在线| 成人性爱AV在线免费观看| 亚洲自拍青操视频| 国产欧美第五页| 新久久AV| 精品人妻少妇| 亚洲情色在线| 欧美成人午夜免费福利785| 中文字幕一区二区三区人妻不卡| 国产超碰在线一区| 激情久久av一区av二区av| 香港澳门日本三级网站| 亚洲精品黑丝| 亚洲中文电影| 夜夜肏2021| 亚洲国产精品有声| 免费岛国一级片| 日日AAvv| 超碰97在线中文| 日本九九久久99播| 激情五月天丁香社区| WWW啪啪的com| 日本精品五区| 黄色工厂这里只有精品| ...日韩成人一区二区三区字幕| 大香蕉123| 丁香五月婷婷基地| 宅男影院久久久,99| 美女被啪到深处抽搐视频| 九九九999久久久网站| 欧美日韩青操| 青苹果影院男人的天堂| 亚洲精品无码成人久久久99| 精品一区二区国产日韩| 91黑人狂躁丰满熟妇| 中文字幕午夜精品久久久| 97在线青| 欧美日韩色图片| www超碰| 久久精品中文字幕无码l| 亚洲欧美日韩制服另类| 农村女一级毛卡片| 九九亚洲色在线观看| 欧美亚洲成人在线一区二区三区| 吉田爱美AV在线| 中文字幕91综合| 国产高清1234区| 国产人妻精品久久久一区二区三区 | 亚洲天堂一区二区久久| 97操| 亚欧高清| 亚洲中文字幕精品一区| 日本精品一区二区三区四区的功能| 天天日天天看| 国产超碰欧美| 人妻激情视频| 国产精品久久蜜乳av| 精品人妻少妇| 97免费在线观看| 操一操摸一摸| 亚洲综合第一页| 日本影视久久免费| 久久的免费性爱视频| 在线有码中文字幕| 色黄色美女大长腿午夜视频| 欧美激情另类一区二区| 欧美性爱一级操| 五月天色图| 欧美成人精品A片免费一区99| 亚洲国产第一页综合视频| 亚洲男人bt天堂| 熟妇一区二区三区| 欧美在线色| 久久9免费视频| 丝袜 中出 制服 人妻 美腿 中文字幕| 四方色播| aV中亚| 搡老女人老妇女AAA一VU麻豆| 国产传媒操逼视频| 99啪啪| 天天综合香 ld视频| 动漫区日韩区欧美区| 97精品视频在线播放| 亚洲综合首页| 7777奇米影视久久| 亚洲欧美精品福利在线| 91成人在线免费视频| 发朗少妇买婬全视频中文| 日本裸体久久色噜噜| 蜜桃视频一区二区三区| 欧美色蜜桃97| 无码精品久久| 性做久久久久久久| 97爱爱爱综合| 亚洲在钱| 国产91 丝袜在线播放00-百度| 无码不卡八戒| 福利操逼| 九九热精品视频在线观看| 久久九七| 欧美,日韩,中文,另类| 乱伦一二三| 成人国产精品三级A片| 久久男人的天堂国产| 亚洲国产中文字幕| 黑人娇小av在线播放| 免费精品中文字幕| 色av中文字| 亚洲自拍青操视频| 精品免费视频国产一区| 日韩免费性爱视频在线观看| 4141514逼喷水三级片| 亚洲色图第一页| 在线毛片片免费观看| 最近的最新的中文字幕视频| 熟女天天干| 99re超碰| 在线观看AV片| 精品人妻一区二区免费蜜桃| 九九九国产| 人人艹亚洲| 欧美永久激情一区二区| 欧综合网| 国产 日韩 欧美 中文 另类,国产 欧美 另类 制服 变态,高清 日韩 欧美 中文,高 | 国产黑白丝在线| 搞中出久久| 91丨九色丨大屁股| 岛国999| 自怕偷自怕亚洲精品| 天天摸,夜夜摸| 视频二区美腿制服人妻欧美| 亚欧无码在线| 97久久超碰国产网站| 久久久久九九九| 色99色| 欧美色图97| 国产高清在线观看欧美| 夜夜国产一区| 亚洲精品久久久久毛片A片拉屎 | 欧美 日韩 婷婷 五月| 日本熟女不卡视频| 97 亚洲 日韩 欧美 在线| 后入人妻无码| 337p大胆噜噜噜噜噜91Av| 搡老熟女国产1000部| 欧美性爱第一区| AV99热18这里只有精品| 性久久久| 有码人妻系列| 久久久久久99AV无码免费网站| yirendaxiangjiashipin| 欧美性夜| 翘臀vidoes| 伊人天天久久动态图| 中文字幕黑人大片| 91bbb| 夜夜高潮夜夜爽| 亚洲自拍偷拍视频在线| 日本一二三高清| 伊人黄色片| 亚洲AV不卡在线观看尤物| 精品中文字幕第一页| 亚洲综合射| 欧美日韩 强奸乱伦| 精品无人区麻豆乱码1区2区图片| 色婷婷久久| 91bbbbbb| 夜夜嗨AV蜜臀av| 91午夜无码| 校园春色亚洲欧洲| 国产精品爽爽v| 欧美综合狠| 亚洲免费成人精品电影| 91视频综合在线| 亚洲另类电影| 天天综合网网欲色| 久久e6只有精品| 日韩性爱免费视频在线网站| 清纯唯美综合亚洲| 97精品综合久久| 视频不卡中文字幕| 亚洲第91页| 亚洲欧美国产成人综合不卡| 中文有码9| 色 婷97| 国产精品嫩草影院免费| 天堂亚洲精品| 蜜桃精品一区二区三区ww| 日韩BBN| 啊好爽受不了无码| 国产精品岛国片在线观看| 亚洲色图欧美| 成人日本精品九区| 另类一区| 偷拍 欧美 日韩| 欧美在线视频播放| 青草视频在线看看看看看看看看看| 国产又猛又粗又爽又黄| 色眯眯av| 操少妇很爽av| 亚洲乱码国产乱码精网站| 大香蕉日亚洲日本亚大 | 九九九久久久| 日影院久久婷婷夜夜网| 操碰91| 激情小说成人日本无码一| 国产精品成人午夜福利| 亚洲欧美九九九| 激情六月天| 风流老熟女一区二区三区l| JuliaAnnXXX888| 美美91成人国产精品欧美精品久久久久久久| 激情五月天社区| 九九精品无码专区免费| 日本不卡中文| 精品一二三区四视频| 精品久久久久,69国产成人精| 一级黄色视频网| 日本人妻最新在线中| 97超碰公开| 久久中日麻豆| 婷婷国产精品九区| 成人丁香五月| 思思热在线cao| 性色aV一区二区三区噜噜| 97在线欧| 裸体美女久久久| 97精品国产97久久久| 另类专区在线观看| 强奸乱伦大香蕉网| 亚洲好看强奸乱伦| 射综合网| 久久午夜神马| nuu12国产麻豆精品| 日韩一级二级在线| 亚洲情色电影网| 激情五月婷婷综合| 久久久精品成人国产| 亚洲图片色图欧美另类| 啪啪性爱免费视频| 99rre在线精品99re8| 青青操狠狠撩| 另类小说综合网| 在线观看一级α片刺激高潮视频| 澳门色噜噜色噜噜色噜噜色噜噜色噜噜| 亚洲情色在线| 国产亚洲欧洲在线观看| 亚洲s在线观看| 校园春色之综合网| 99热精品在线| 91chinese在线| 五月色综合| 日本 欧美 国产一区| 91精品伊人久久久大香线蕉91| 超97在线精品视频| 黄片免费看的| 欧美亚洲第一页| 十八禁av无码免费网站APP| 岛国在线国产| 国产美女自拍视频| 美女啊啊啊啊啊啊| 91春色| 91精品人妻偷情| 富女玩鸭子一级毛片| 国产亚洲精品一区二区三区|