色五月色开心色婷婷色丁香,五月婷婷丁香花综合网,婷婷丁香五月激情综合在线,五月婷婷六月丁香动漫,婷婷丁香五月激情综合在线,丁香花中文字幕在线观看,播五月色五月开心五月网,开心激情综合网,狠狠色丁香婷婷综合最新地址,丁香视频在线观看,狠狠做六月爱婷婷综合av,久久激情五月丁香伊人

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

用Python實(shí)現(xiàn)愛因斯坦棋AI:規(guī)則、搜索與調(diào)參指南

用Python實(shí)現(xiàn)愛因斯坦棋AI:規(guī)則、搜索與調(diào)參指南 簡(jiǎn)介棋類博弈是人工智能中經(jīng)典且易于上手的研究場(chǎng)景。從國(guó)際象棋到各類棋類變體博弈樹搜索與剪枝算法構(gòu)成了許多AI程序的核心。愛因斯坦棋是一種5×5小棋盤上的棋類變體規(guī)則簡(jiǎn)潔但戰(zhàn)術(shù)豐富非常適合作為棋類AI的入門實(shí)驗(yàn)場(chǎng)。圍繞這一棋盤可以用Python搭建一套完整可對(duì)弈的棋類引擎涵蓋走法生成、將軍判定、minimax搜索、alpha-beta剪枝、評(píng)估函數(shù)與迭代加深等關(guān)鍵技術(shù)。通過參數(shù)調(diào)優(yōu)與批量自我對(duì)弈驗(yàn)證開發(fā)者能夠快速掌握搜索算法在具體博弈項(xiàng)目中的工程落地方法并規(guī)避規(guī)則版本差異、棋子阻擋判斷、GUI線程卡死等常見陷阱。從簡(jiǎn)單棋類入手理解AI決策原理是通往更復(fù)雜棋類與強(qiáng)化學(xué)習(xí)路徑的務(wù)實(shí)起點(diǎn)。1. 愛因斯坦棋一個(gè)比國(guó)際象棋更容易上手的AI實(shí)驗(yàn)場(chǎng)如果你手上有一塊5x5的棋盤和雙方各5枚棋子別急著擺國(guó)際象棋——試試愛因斯坦棋。這個(gè)常被稱為“小國(guó)際象棋”的變體規(guī)則是每方擁有王、后、車、象、馬各一枚沒有兵也沒有升變30秒就能講完規(guī)則但搜索空間和戰(zhàn)術(shù)組合又足以讓AI程序忙一陣子。我最早接觸它是在給一個(gè)教學(xué)項(xiàng)目找棋類引擎時(shí)標(biāo)準(zhǔn)國(guó)際象棋的走法生成和評(píng)估太成熟拿來練手沒有挑戰(zhàn)而愛因斯坦棋足夠新沒有現(xiàn)成滿大街的開局庫(kù)反而適合把決策樹、剪枝、評(píng)估函數(shù)這些概念從頭跑一遍。這篇筆記會(huì)從規(guī)則說清楚給出一套Python實(shí)現(xiàn)再把AI搜索的調(diào)參經(jīng)驗(yàn)和你容易踩的坑一次性攤開。2. 愛因斯坦棋規(guī)則拆解為什么5x5棋盤是天然的AI測(cè)試床網(wǎng)上的愛因斯坦棋規(guī)則有不少版本有的用6x6棋盤有的加了兵和升變甚至還有人把它和“愛因斯坦謎題”混在一起。為了避免代碼對(duì)著一個(gè)永遠(yuǎn)跑不起來的黑匣子發(fā)呆我先把這套實(shí)現(xiàn)所采用的規(guī)則固定下來棋盤為5行5列雙方各持5枚棋子目標(biāo)是將死對(duì)方王。你可以在這個(gè)基礎(chǔ)上小幅調(diào)整后面我會(huì)明確指出哪個(gè)地方最容易受版本差異影響。2.1 棋盤、棋子與初始布局把物理規(guī)則變成數(shù)據(jù)字典棋盤坐標(biāo)用(row, col)表示白方初始在第0行黑方初始在第4行中間三行空置。雙方棋子從左到右分別是車、馬、象、后、王黑方從自己的視角看也是車、馬、象、后、王所以從鏡像角度看黑方的排列是王、后、象、馬、車。我把棋子的移動(dòng)能力先匯總成一張表方便后面寫方向向量時(shí)對(duì)照棋子數(shù)量走法距離越子王1橫豎斜八個(gè)方向1格否后1橫豎斜八個(gè)方向任意格否車1橫豎四個(gè)方向任意格否象1斜向四個(gè)方向任意格否馬1L形橫走2豎走1或相反1步是為什么把王和后都放在5格的行里因?yàn)?列剛好放滿5枚棋子沒有兵的位置也就沒有過路兵、升變、王車易位這些“邊角規(guī)則”。對(duì)于AI程序來說狀態(tài)空間比標(biāo)準(zhǔn)國(guó)際象棋小幾個(gè)數(shù)量級(jí)但棋子走法仍然有“阻擋”“僅馬可越子”的判定足夠練習(xí)走法生成器的健壯性。在代碼里我習(xí)慣用枚舉表示棋子類型而不是字符串因?yàn)槊杜e在debug時(shí)更直觀還能避免手寫字符大小寫帶來的混亂。下面這段是初始布局的最小表示# constants.py import enum WHITE, BLACK 0, 1 class Kind(enum.Enum): KING K QUEEN Q ROOK R BISHOP B KNIGHT N def empty_board(): return [[None for _ in range(5)] for _ in range(5)] def initial_board(): board empty_board() # 白方 row 0黑方 row 4 top [Kind.ROOK, Kind.KNIGHT, Kind.BISHOP, Kind.QUEEN, Kind.KING] bottom [Kind.KING, Kind.QUEEN, Kind.BISHOP, Kind.KNIGHT, Kind.ROOK] for c, kind in enumerate(top): board[0][c] kind for c, kind in enumerate(bottom): board[4][c] kind return board這里把board直接存Kind枚舉空位存None。這個(gè)版本的代碼只記錄棋子種類還沒記錄顏色真實(shí)引擎里必須額外用一個(gè)數(shù)組或把顏色編進(jìn)棋子類。我特意先展示這種“半成品”是想說明一個(gè)取舍棋盤只有25格用二維列表足夠快沒必要在入門階段上位棋盤bitboard。位棋盤在8x8棋盤上能大幅加速并行位運(yùn)算但在這里反而會(huì)增加調(diào)試成本尤其對(duì)于剛接觸棋類編程的人你會(huì)發(fā)現(xiàn)自己一整天都在算位掩碼。2.2 走法與勝負(fù)將軍、將死、還有“送將”違例大多數(shù)棋類走法生成都要分兩步走先生成“偽合法走法”再過濾掉會(huì)讓己方王被吃的走法。許多人一上來就寫遞歸生成器卻忘了送將檢查最后AI會(huì)走出把自己的王送到對(duì)方嘴里的棋那感覺就像看了半天棋譜發(fā)現(xiàn)第一步就是錯(cuò)的。偽合法走法指的是“按照棋子移動(dòng)規(guī)則走完不越界且不落到己方棋子上的走法”。它不管走完之后自己王是否處于被攻擊狀態(tài)。比如王從角落走到中心如果對(duì)方車正好控制這一行這個(gè)走法在偽合法階段會(huì)被放進(jìn)列表但在第二階段的合法性過濾時(shí)必須刪掉。過濾邏輯很簡(jiǎn)單模擬每一步然后調(diào)用將軍判定函數(shù)如果己方王在對(duì)手攻擊范圍內(nèi)該走法不合法。這一步會(huì)反復(fù)執(zhí)行所以將軍判定一定要寫得高效。判斷一個(gè)格子是否被某顏色棋子攻擊通常用反向掃描站在目標(biāo)格子上逆推是否有棋子能按自己的走法到達(dá)這里。棋盤小直接枚舉對(duì)手所有棋子的攻擊目標(biāo)也行。下面是一個(gè)更貼近代碼的思路def is_square_attacked(board, r, c, by_color): # 枚舉 by_color 的所有棋子檢查它們能否一步到達(dá) (r,c) # 注意馬不需要檢查中間阻擋車、象、后必須檢查路徑是否被堵 for each piece owned by by_color: if piece_can_reach(board, piece, r, c): return True return False將軍與將死的判定不能只用“能吃到王”來推。正確順序是先獲取當(dāng)前玩家的全部合法走法列表如果列表為空再檢查己方王是否正被攻擊——被攻擊就是將死否則就是無棋可動(dòng)。在國(guó)際象棋標(biāo)準(zhǔn)規(guī)則里無棋可動(dòng)判和棋但在愛因斯坦棋的某些流傳版本里無棋可動(dòng)直接判負(fù)。我建議在代碼里做成配置項(xiàng)因?yàn)槲乙娺^同一個(gè)項(xiàng)目里兩種寫法都有人用最后在判負(fù)判和上吵了三天。3. 用 Python 寫出可對(duì)弈的愛因斯坦棋走法生成與狀態(tài)管理現(xiàn)在進(jìn)入能跑的代碼。我采用一個(gè)自定義Piecedataclass來同時(shí)記錄種類和顏色比單純存枚舉更完整。棋盤狀態(tài)就用二維列表每格元素是Piece或None。這一章給出的代碼可以直接復(fù)用也可以作為你寫其他小型棋類引擎的骨架。3.1 棋盤類設(shè)計(jì)從格子坐標(biāo)到合法走法列表先定義基礎(chǔ)類和棋盤初始化from dataclasses import dataclass from enum import Enum class Kind(Enum): KING K QUEEN Q ROOK R BISHOP B KNIGHT N WHITE, BLACK 0, 1 dataclass(frozenTrue) class Piece: kind: Kind color: int def __str__(self): return self.kind.value if self.color WHITE else self.kind.value.lower() class EinsteinBoard: def __init__(self): self.board self._initial_board() self.turn WHITE self.state_stack [] # 悔棋/搜索用 def _initial_board(self): board [[None for _ in range(5)] for _ in range(5)] top [Kind.ROOK, Kind.KNIGHT, Kind.BISHOP, Kind.QUEEN, Kind.KING] bottom [Kind.KING, Kind.QUEEN, Kind.BISHOP, Kind.KNIGHT, Kind.ROOK] for c, kind in enumerate(top): board[0][c] Piece(kind, WHITE) for c, kind in enumerate(bottom): board[4][c] Piece(kind, BLACK) return boardPiece是frozen dataclass保證哈希和比較都可靠后面在走法集合里做去重很方便。state_stack用來配合悔棋和AI搜索時(shí)的狀態(tài)回退這個(gè)設(shè)計(jì)在3.2里會(huì)展開。核心的走法生成器按“方向向量最大步數(shù)”來組織。車、象、后能走任意格但中途遇到棋子就必須停馬直接跳到目標(biāo)格不受阻擋。我寫了一個(gè)_attacks_from函數(shù)它會(huì)返回一個(gè)棋子能到達(dá)的所有格子def _attacks_from(self, r, c): piece self.board[r][c] if piece is None: return [] vectors { Kind.KING: [(1,0,1),(-1,0,1),(0,1,1),(0,-1,1), (1,1,1),(1,-1,1),(-1,1,1),(-1,-1,1)], Kind.QUEEN: [(1,0,5),(-1,0,5),(0,1,5),(0,-1,5), (1,1,5),(1,-1,5),(-1,1,5),(-1,-1,5)], Kind.ROOK: [(1,0,5),(-1,0,5),(0,1,5),(0,-1,5)], Kind.BISHOP: [(1,1,5),(1,-1,5),(-1,1,5),(-1,-1,5)], Kind.KNIGHT: [(2,1,1),(2,-1,1),(-2,1,1),(-2,-1,1), (1,2,1),(1,-2,1),(-1,2,1),(-1,-2,1)], } result [] for dr, dc, max_step in vectors[piece.kind]: for step in range(1, max_step 1): nr, nc r dr * step, c dc * step if not (0 nr 5 and 0 nc 5): break target self.board[nr][nc] if target is None: result.append((nr, nc)) elif target.color ! piece.color: result.append((nr, nc)) break else: break return result這里有個(gè)細(xì)節(jié)馬的方向向量步長(zhǎng)為1但用了(2,1)這種二元組和max_step1的組合所以馬不會(huì)進(jìn)入“連續(xù)走多步”的路徑檢查。其他棋子的max_step設(shè)為5但棋盤只有5行所以range(1, 6)也會(huì)自然越界退出。這個(gè)實(shí)現(xiàn)簡(jiǎn)單缺點(diǎn)是每次都要重新構(gòu)造vectors字典如果你追求性能可以把這個(gè)字典提到類屬性或模塊常量里避免高頻搜索時(shí)反復(fù)分配。有了單子走法再匯總整個(gè)棋盤所有己方棋子的偽合法走法然后逐條模擬并過濾送將def get_legal_moves(self, color): pseudo [] for r in range(5): for c in range(5): piece self.board[r][c] if piece is None or piece.color ! color: continue for tr, tc in self._attacks_from(r, c): pseudo.append((r, c, tr, tc)) legal [] for move in pseudo: state self._snapshot() self._apply_move(*move) if not self.is_in_check(color): legal.append(move) self._restore(state) return legal_snapshot和_restore這對(duì)方法在3.2里實(shí)現(xiàn)作用是對(duì)整盤狀態(tài)做深拷貝。為什么要深拷貝因?yàn)槠灞P只有25格拷貝一次開銷極小而且能避免增量回退時(shí)的邊界錯(cuò)誤——比如你吃掉對(duì)方馬之后悔棋要恢復(fù)如果你不拷貝就得額外保存“吃掉的棋子是什么”邏輯容易漏。3.2 落子、吃子與悔棋狀態(tài)棧和“悔棋”按鈕的實(shí)現(xiàn)def _snapshot(self): import copy return (copy.deepcopy(self.board), self.turn) def _restore(self, state): self.board, self.turn state def _apply_move(self, r, c, tr, tc): self.board[tr][tc] self.board[r][c] self.board[r][c] None self.turn BLACK if self.turn WHITE else WHITE def push_move(self, move): self.state_stack.append(self._snapshot()) self._apply_move(*move) def undo(self): 悔棋回退到上一個(gè)狀態(tài)并取出棧頂狀態(tài)。 if self.state_stack: self.board, self.turn self.state_stack.pop() return True return Falsepush_move在落子前快照再落子。undo用于GUI里的“悔棋”按鈕也用于AI搜索時(shí)的回退。你可能會(huì)擔(dān)心深拷貝會(huì)讓搜索變慢但實(shí)測(cè)在5x5棋盤上一次deepcopy大約幾微秒一次alpha_beta搜索幾千個(gè)節(jié)點(diǎn)總耗時(shí)不過幾十毫秒完全可以接受。如果你以后要移植到C或要做更深的搜索再改成“保存被吃棋子起點(diǎn)”的增量回退不遲。有一點(diǎn)要提醒如果你在搜索循環(huán)里用push_move和undo每次進(jìn)入子節(jié)點(diǎn)都要_snapshot那棧會(huì)越積越大。正確做法是直接用_apply_move_restore不要經(jīng)過state_stack。所以我在3.1的走法過濾里用的是_snapshot和_restore而不是push_move。搜索時(shí)的回退應(yīng)該手動(dòng)保存舊狀態(tài)而不是依賴undo因?yàn)閡ndo面向的是人機(jī)對(duì)弈的“悔棋?!眱商讞2荒芑煊谩?.3 命令行對(duì)弈最小可玩版本跑起來既然有了棋盤和走法先用命令行跑一個(gè)能雙人對(duì)戰(zhàn)的版本。輸入格式是r c tr tc從起點(diǎn)到終點(diǎn)q退出def print_board(board): for r in range(5): row [] for c in range(5): p board.board[r][c] row.append(str(p) if p else .) print( .join(row)) def main(): b EinsteinBoard() while True: print_board(b) print(Turn:, White if b.turn WHITE else Black) moves b.get_legal_moves(b.turn) if not moves: print(No legal moves. Game over.) break cmd input(enter move: r c tr tc (q to quit): ) if cmd.strip().lower() q: break try: r, c, tr, tc map(int, cmd.split()) except ValueError: print(bad input) continue move (r, c, tr, tc) if move not in moves: print(illegal move) continue b.push_move(move) opponent BLACK if b.turn WHITE else WHITE if b.is_in_check(opponent): print(Check!)這個(gè)主循環(huán)沒有任何AI但它能幫你驗(yàn)證規(guī)則自己跟自己下幾盤檢查有沒有走法漏生成有沒有把無棋可動(dòng)判成將死。命令行版本是后面加AI的基礎(chǔ)不要跳過。4. 給愛因斯坦棋裝上大腦minimax 搜索與 alpha-beta 剪枝的參數(shù)調(diào)優(yōu)黑白棋、五子棋、國(guó)際象棋的AI思路在愛因斯坦棋上完全通用核心就是帶剪枝的深度優(yōu)先搜索。不要一上來就上強(qiáng)化學(xué)習(xí)因?yàn)閻垡蛩固蛊迨峭昝佬畔⒋_定狀態(tài)搜索樹小到能用經(jīng)典方法解沒必要讓一局棋的訓(xùn)練時(shí)間長(zhǎng)得像練一個(gè)深度網(wǎng)絡(luò)。4.1 先算復(fù)雜度為什么要剪枝而不是直接上強(qiáng)化學(xué)習(xí)我粗略統(tǒng)計(jì)過空棋盤中間位置的車大約能走8格象能走4格左右后能走8到10格馬最多8格王3格。平均每個(gè)棋子大約能走6到8步每方5個(gè)棋子分支因子B大約在10到15之間。這是可觀的。如果做4層深度搜索B15時(shí)未剪枝的葉子節(jié)點(diǎn)是15^450625非常輕松6層深度是15^6≈1130萬單層遍歷勉強(qiáng)能算但已經(jīng)不夠優(yōu)雅。alpha-beta剪枝在理想情況下能把復(fù)雜度從O(B^d)降到O(B^(d/2))也就是搜索同樣深度只需要大約sqrt(1130萬)≈3400個(gè)節(jié)點(diǎn)完全可以在毫秒級(jí)完成。因此先寫minimax和alpha-beta是你投入產(chǎn)出比最高的方案。那么強(qiáng)化學(xué)習(xí)呢它的價(jià)值在于棋類狀態(tài)特征復(fù)雜、評(píng)估函數(shù)難以手工設(shè)計(jì)或者你需要一個(gè)能從自我對(duì)弈中自動(dòng)學(xué)習(xí)評(píng)估的網(wǎng)絡(luò)。但愛因斯坦棋棋盤小、棋子少一個(gè)幾十行的評(píng)估函數(shù)已經(jīng)夠用強(qiáng)化學(xué)習(xí)要處理獎(jiǎng)勵(lì)稀疏、回合長(zhǎng)、對(duì)局?jǐn)?shù)量大這些工程問題不適合作為入門首選。4.2 最小可用的評(píng)估函數(shù)子力位置機(jī)動(dòng)性評(píng)估函數(shù)是AI風(fēng)格的“黑匣子”但我們可以先手工打開它。最簡(jiǎn)單的評(píng)估用子力價(jià)值后9分、車5分、象3分、馬3分、王10000分因?yàn)橥醣怀粤擞螒蚪Y(jié)束。在此基礎(chǔ)上給靠近中心的棋子加一點(diǎn)點(diǎn)位置分因?yàn)橹行目刂屏Ω鼜?qiáng)。代碼長(zhǎng)這樣PIECE_VALUES { Kind.KING: 10000, Kind.QUEEN: 9, Kind.ROOK: 5, Kind.BISHOP: 3, Kind.KNIGHT: 3, } POSITION_BONUS [ [0, 1, 2, 1, 0], [1, 2, 3, 2, 1], [2, 3, 4, 3, 2], [1, 2, 3, 2, 1], [0, 1, 2, 1, 0], ] def evaluate(board): score 0 for r in range(5): for c in range(5): p board.board[r][c] if p is None: continue bonus POSITION_BONUS[r][c] if p.color WHITE else POSITION_BONUS[4 - r][4 - c] value PIECE_VALUES[p.kind] bonus * 0.1 score value if p.color WHITE else -value return score if board.turn WHITE else -scorebonus * 0.1是為了讓位置分遠(yuǎn)小于一個(gè)兵的價(jià)值不至于出現(xiàn)“為了搶中心而白送一個(gè)馬”的蠢事。實(shí)際上這個(gè)0.1本身就是可以調(diào)的參數(shù)我建議在0.05到0.3之間實(shí)驗(yàn)。更大的系數(shù)會(huì)讓AI更激進(jìn)地?fù)屨贾行牡菀缀鲆曌恿Π踩C(jī)動(dòng)性評(píng)估沒有寫進(jìn)代碼因?yàn)橛?jì)算合法走法數(shù)量在搜索中已經(jīng)天然存在不需要額外統(tǒng)計(jì)。如果你發(fā)現(xiàn)AI總是走成僵局再考慮加上“己方合法走法數(shù)減去對(duì)方合法走法數(shù)”這一項(xiàng)。但記住評(píng)估函數(shù)不是越復(fù)雜越好加項(xiàng)越多越難調(diào)你先跑通0.1版再說。4.3 迭代加深與超時(shí)控制三個(gè)必調(diào)參數(shù)正式對(duì)弈時(shí)你不能只固定搜索深度因?yàn)椴煌置鎻?fù)雜度不一樣。常見做法是迭代加深從深度1開始逐步加深直到時(shí)間預(yù)算用完采用最近一次完整搜索的最佳走法。這樣你能精確控制在3秒內(nèi)返回一步棋而不是在最差局面里卡死。import time def alpha_beta(board, depth, alpha, beta, maximizing): moves board.get_legal_moves(board.turn) if depth 0 or not moves: return evaluate(board) if maximizing: value -float(inf) for move in moves: board._apply_move(*move) value max(value, alpha_beta(board, depth - 1, alpha, beta, False)) board._restore((board_copy_state, board.turn)) # 需要保存狀態(tài) alpha max(alpha, value) if alpha beta: break return value else: value float(inf) for move in moves: board._apply_move(*move) value min(value, alpha_beta(board, depth - 1, alpha, beta, True)) board._restore((board_copy_state, board.turn)) beta min(beta, value) if alpha beta: break return value上面這段代碼省略了_apply_move前后的狀態(tài)保存實(shí)際使用時(shí)你需要在每次進(jìn)入子節(jié)點(diǎn)前把board.board和board.turn存到臨時(shí)變量里。我在這里不展開完整搜索類因?yàn)樗蜆?biāo)準(zhǔn)國(guó)際象棋AI完全一致。關(guān)鍵是下面的迭代加深循環(huán)def iterative_deepening(board, time_budget2.0, max_depth6): deadline time.time() time_budget best_move None depth 1 while depth max_depth and time.time() deadline: # 每層先保存一個(gè)候選最佳走法層結(jié)束才更新 current_best None best_value -float(inf) for move in board.get_legal_moves(board.turn): board.push_move(move) value alpha_beta(board, depth - 1, -float(inf), float(inf), False) board.undo() if value best_value: best_value value current_best move if current_best is not None: best_move current_best depth 1 return best_move這里三個(gè)必調(diào)參數(shù)是參數(shù)推薦起點(diǎn)作用調(diào)整方向max_depth6硬性最大深度上限防止時(shí)間預(yù)算失效時(shí)無限加深想棋力更強(qiáng)就加到8但要配合更快的走法生成time_budget2.0秒每次落子的時(shí)間預(yù)算實(shí)時(shí)對(duì)戰(zhàn)設(shè)1秒分析模式可設(shè)5秒evaluation_coeff0.1位置分系數(shù)影響評(píng)估函數(shù)的激進(jìn)度0.05保穩(wěn)0.3冒險(xiǎn)吃中心迭代加深還有一個(gè)隱藏好處如果你實(shí)現(xiàn)了“上一步搜索的最佳走法在開局庫(kù)附近”它可以用在啟發(fā)排序里讓alpha-beta剪枝更容易觸發(fā)。不過在愛因斯坦棋上你先把這三個(gè)參數(shù)調(diào)好已經(jīng)能打敗絕大多數(shù)隨便下棋的人類玩家。5. 避坑指南愛因斯坦棋實(shí)現(xiàn)中的 5 個(gè)常見翻車現(xiàn)場(chǎng)這一章是血淚經(jīng)驗(yàn)。我確實(shí)在這些地方翻過車每次都要花至少一個(gè)晚上排查。按現(xiàn)象→原因→解決的方式寫希望你不用走回頭路。5.1 規(guī)則版本不同兵/升變引發(fā)的連鎖反應(yīng)現(xiàn)象從網(wǎng)上下載的“愛因斯坦棋”代碼開局第一排除了重子以外還有一排兵走幾步就報(bào)索引越界。原因愛因斯坦棋本身有多個(gè)變體有的版本是6x6棋盤加兵有的版本甚至允許兵升變。解決入手前先確認(rèn)規(guī)則版本。如果你手中的項(xiàng)目確實(shí)帶兵就在Kind里加PAWN并在_attacks_from里實(shí)現(xiàn)兵的單步前進(jìn)和斜吃同時(shí)處理升變。如果按我這套無兵規(guī)則遇到“對(duì)方底線出現(xiàn)第6個(gè)子”要直接報(bào)錯(cuò)防止靜默bug。5.2 重復(fù)局面與“無棋可動(dòng)”把和棋判成輸棋怎么辦現(xiàn)象AI走到只剩兩個(gè)王時(shí)程序提示“Game over”但明明合法走法沒了王也沒被將軍應(yīng)該是和棋。原因我在剛開始寫勝負(fù)判定時(shí)只檢查了legal_moves為空就判定對(duì)方贏了沒進(jìn)一步查王的攻擊狀態(tài)。解決把將死和無棋可動(dòng)分開。先判斷l(xiāng)en(legal_moves)0再用is_in_check檢查當(dāng)前玩家王是否被攻擊。無棋可動(dòng)默認(rèn)判和但保留一個(gè)STALEMATE_IS_LOSS開關(guān)應(yīng)對(duì)那些把“無棋可動(dòng)”當(dāng)輸棋的規(guī)則版本。5.3 馬能跳其他棋子不能穿人實(shí)現(xiàn)阻擋時(shí)的邊界錯(cuò)誤現(xiàn)象AI在殘局里經(jīng)常用車穿過自己的兵走到后方評(píng)估分看起來很高但按規(guī)則就是非法走法。原因_attacks_from里車、象、后沿方向逐格走但我的第一版沒有在碰到第一個(gè)棋子后break導(dǎo)致繼續(xù)掃描后方格子。馬則不需要檢查路徑所以馬的邏輯是獨(dú)立的。解決在偽合法走法生成時(shí)遇到第一個(gè)非空格就分支若是我方棋子停止若是對(duì)方棋子記錄格子并停止。馬的馬步直接跳過該檢查。一個(gè)快速自測(cè)是在5x5棋盤上把車圍在中心一圈棋子車應(yīng)該一個(gè)格都走不出去。5.4 GUI線程卡死遞歸搜索別放在渲染線程現(xiàn)象在Qt里點(diǎn)“AI下棋”按鈕后整個(gè)窗口變成“未響應(yīng)”點(diǎn)哪都沒反應(yīng)要等好幾秒才恢復(fù)。原因AI搜索的alpha_beta是同步遞歸主線程被占滿事件循環(huán)無法刷新。解決把搜索放到子線程用queue或者信號(hào)把結(jié)果傳回UI。更簡(jiǎn)單的做法是先用命令行版本驗(yàn)證AI再接GUI。我自己的習(xí)慣是讓AI計(jì)算線程每次只搜一個(gè)深度等迭代加深結(jié)束后回到主線程更新棋盤。如果不想引入多線程至少要在搜索循環(huán)中插入time.sleep(0)或QCoreApplication.processEvents()但這不是根治只是喘口氣。5.5 評(píng)估函數(shù)像玄學(xué)用自我對(duì)弈代替肉眼調(diào)參現(xiàn)象我把位置分系數(shù)從0.1改成0.3肉眼看了幾局覺得AI更兇了但和人下反倒輸多贏少。原因肉眼評(píng)估有巨大偏差位置分過高讓AI為了占中心狂送棋子。解決把兩個(gè)不同參數(shù)的AI放在一起自我對(duì)弈200局統(tǒng)計(jì)勝負(fù)和平局。勝率差異不到5%時(shí)基本可以認(rèn)為是噪聲跑滿200局再看通常能找到趨勢(shì)。不要只調(diào)一個(gè)參數(shù)就下結(jié)論至少要用固定對(duì)手和固定隨機(jī)種子跑批量對(duì)局。這也是我后來養(yǎng)成的習(xí)慣任何評(píng)估函數(shù)的改動(dòng)都要用--games參數(shù)跑批量測(cè)試不憑“感覺還不錯(cuò)”上線。6. 進(jìn)階玩法從“會(huì)下”到“下得好”的驗(yàn)證閉環(huán)現(xiàn)在你已經(jīng)有一個(gè)能下棋、能搜索、能悔棋的程序。想讓它更強(qiáng)不用急著換強(qiáng)化學(xué)習(xí)框架先把這三個(gè)進(jìn)階動(dòng)作做扎實(shí)。6.1 用自我對(duì)弈生成離線數(shù)據(jù)反哺評(píng)估函數(shù)把兩個(gè)不同評(píng)估參數(shù)的AI寫進(jìn)同一個(gè)腳本里讓它們自動(dòng)對(duì)弈200局記錄每局的走法序列、棋子被吃情況和最終結(jié)果。你不需要人工標(biāo)注因?yàn)閯儇?fù)天然就是標(biāo)簽。用這些對(duì)局可以回歸出“哪種子力比值更優(yōu)”的經(jīng)驗(yàn)值甚至可以訓(xùn)練一個(gè)簡(jiǎn)單的線性評(píng)估模型替代原來拍腦袋的PIECE_VALUES。6.2 做個(gè)開局庫(kù)前5步不再“天馬行空”棋盤這么小AI搜到第4層時(shí)已經(jīng)能穩(wěn)定判斷前幾步。但為了節(jié)省時(shí)間預(yù)算你可以用高深度AI離線生成前5步的最優(yōu)走法存成一個(gè)字典鍵是“棋盤狀態(tài)”值是好走法。對(duì)局時(shí)前5步直接查表把時(shí)間預(yù)算留給中殘局。我自己試過用8層搜索跑一晚上能覆蓋絕大多數(shù)前期變體線上AI前5步的思考時(shí)間直接降到0。6.3 驗(yàn)證方法讓兩個(gè)AI打一場(chǎng)用勝率和平均回合數(shù)說話不要再用“哪一步讓我感覺厲害”來驗(yàn)證。正確做法是用同一套引擎、不同參數(shù)跑200局記錄勝率、平均回合數(shù)、每步平均耗時(shí)。表格比感覺可靠得多版本勝率平均回合平均耗時(shí)v0.1 位置系數(shù)0.158%42.31.8sv0.2 位置系數(shù)0.342%38.71.9s這組數(shù)據(jù)一眼就能看出位置系數(shù)0.1更穩(wěn)。那怎么選我會(huì)把勝率作為第一指標(biāo)平均回合數(shù)作為調(diào)優(yōu)參考因?yàn)榭焖仝A棋不一定意味著棋力強(qiáng)。慢慢養(yǎng)成這個(gè)習(xí)慣后你會(huì)發(fā)現(xiàn)所謂“棋感”變成了可重復(fù)的實(shí)驗(yàn)而不是玄學(xué)。希望這套從規(guī)則到驗(yàn)證的流程能讓你在下一個(gè)棋類項(xiàng)目里少花幾個(gè)通宵。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
AV天天综合| 中文字幕在线免费观看2| 九色黄站| 国产精品一区av在线| 色噜噜人妻丝袜a∨先锋影| 日本精品一区三区| 天天激色| 制服诱惑亚洲一区二区三区在线观看| 久久在肏| 久久久麻豆精品| 97色在线观看| 亚洲日韩乱码中文无码蜜桃臀网站| 999久久芭蕾| 欧美999| 操逼天美3区| www.婷婷六月天| 99re69| 九九热精品视频六| 国产aⅴ无码片毛片一级网站| 深爱激情五月天| 超碰中文字幕人妻草一区| 大香蕉中文201| 免费看片黄| 99久久婷婷国产综合| 欧美三级免费伊人| 蜜臀AV午夜精品久| 午夜福利视频在线一区| 91天堂视频| 97久久久久| 国产精品麻豆视频网站| 久操B网| 极品少妇久久久久| 日逼国产| 五月婷婷hd| 91亚洲网站| 很很干很很操| 五月婷在线| 婷婷久久五月| 韩日巨乳美女免费视频在线观看| 9久精品| 黄片在线免费在线观看| 欧美情色贴图| 囯产精品久久久久久久久久梁医生 | 六月激情网| 天综合网欧美| 国产一级高跟丝袜| AV老汉| 国产熟女一区二区| 日韩欧美亚洲一区二区三区影院 | 立川理惠无码一区二区| 一级黄碟| 精品一区二区人妖| 久久亚洲色图中文字幕| 热久久国产| 2001天天操| 超碰诱惑| 99精品无码| 日本幼女18+| 亚洲黄网在哪免费看| 精品综合久久久久久97| jk白丝没脱就开始啪啪| 久久精品国产99国产精品亚洲| 色图综合网| 婷婷五月综合激情| 加勒比综合在线| 欧亚性爱视频免费看| 在线观看视频91| 欧美视频一| 国产av白丝| 国产9区| 夜夜夜久久| 亚洲欧美色图片| 国产毛片精品一区二区色欲黄A片| 91亚洲黄色网| 久久婷婷视频| 成人怡红院| 少妇免费视频| 亚洲在线网站| 日日夜夜国产综合| 亚洲精品三区在线观看| 中文字幕一二三av| 亚洲操操| 国产女同视频在线播放| 我中文字幕6区 | asc国产精品| 天天躁日日躁AAA片李宗瑞| 99re在线视频| 日韩欧美经典在线观看| 欧美成97爱| 加勒比大香蕉视频在线| 中文字幕第9页萱萱影音先锋| 国产福利夜| 亚洲成aⅴ人片不卡无码| 9久精品视频在线观看| 淫荡少妇免费| 欧美综合色| 五月丁香激情综合| 亚洲婷婷丁香在线| 亚洲吊色| 日本午夜精品理论片A级APP发布| 国产美女自拍视频| 人妻在线大香蕉| 欧美日本一区二区a人| 综合天天。| 一块操欧美性爱| 欧美成人精品欧美一级乱黄一区二…| 9999伦理视频| 免费一级特黄特色大片在线观看看| 久污| 99热综合| 艹比视频国产精品| 视频国产欧美在线播放| 亚州日韩97| 国产超碰| 久久性生大片免费观看性| 国产五码丝袜屁眼| 精品国产乱码久久久久久久久1| 成人羞羞视频国产| 男人的天堂日韩| 青青草操逼逼视频| 伦伦成年午夜免费视频| 3PAV乱伦视频| 十八禁一区二区无码观看| 久久性爱城| a级免费在线观看| 成人热久久精品| 国产中文字幕曰本毛片| 97亚洲欧美| AV在线资源| 无码伊人久久大杳蕉中文无码| 日韩欧美女求操每天更新| 欧美色一二三| 五月丁香六月激情综合| 人妻81p| 超碰97国产欧美| 91jk色拍| 国内91熟女人妻丝袜天天精品视频在线 | 一区 欧美 日韩 麻豆| 日日操丁香五月天| 尤物网站91| 蜜桃臀一区二区三区久久| 精品一区二区啪啪啪| 金莲网址| 久久专区| 91亚.色| 久久深夜无码| 日韩97超碰中文字幕| 人干人人人操人人摸| 少妇的嫩逼图片| 久久精品72| 色香色香欲天天天影视综合网| 黄在线| 国产白丝精品在线观看| 伊香蕉综合久久久久久久噜噜噜| 9999亚洲精品| 色噜噜国产在线| 91人妻Pr| 搡老人老9丨女老熟人| 超碰78| 日韩无码第3页| 免费99精品国产自在在线| 色哟哟-国产专区| 99精品久久久久久久婷婷蜜桃| 欧美一区二区福利在线| 永久免费观看的毛片的网站| 人妻熟女一区二区三区视频| 亚洲色图 图片| 亚洲男人的天堂一区二区| 凹凸视频特色日本特黄| 亚洲午夜福利在线影院| 国产av激情无码久久天堂| 99999久久精| 中文字幕一区二区三区蜜桃视频| 天天干天天日天天射黄色片| yirendaxiangjiashipin| 天天爱天天操| 五月天丁香网| 精品女人999| 国产又色又爽又舒服的三级视频| 操逼不卡中文字幕| 操迟操逼在巾线Fre看| 97亚洲精品| 亚洲欧美碰碰| 四虎AV在线播放| 久久青娱乐| 屁股久久久久久久久| 欧美少妇性乱| 大肉棒导航| 打av高清| 啊灬快c我灬啊灬用力灬啊灬-国产精品性做久久久久久-成人AV | 国产又色又粗又黄又爽| 欧美人与动性人交a| 国产综合色精品在线观看| 蜜臀久久99精品久久久久久酒店| 一二三区视频在线观看| 日本亚洲嫩草影院啪啪| 色香综合| 99中文字幕| 男人天堂资源| 99久久无码| 无码动漫av中文字幕| 9久在线视频只有精品| 婷婷五月天激情四射| 色综合91好| 亚洲高清色综合| 奶水 人妻 哺乳 在线| 日韩精品 欧美激情| 99在线精品观看视频中文| 欧美综合传媒| 97伊人超碰| 成年在线视频日本亚洲在线视频区精品江靖宇公司 | 国产成年女人免费视频播放a| 青娱乐欧美激情一区二区| 在线播放免费av福利片| 国产AV精久久| 日韩欧美一级特黄大片| 999岛国大片| 99综合免费视频| 99熟女| 天天日天天舔| 亚洲欧美色综合| 东京成人一区| 一区超碰一区| 欧美天天综合网| 国产福利合集| 亚洲成人性爱网站在线播放| 欧美成人黄网色网站| 免费一级视频特黄色大片| 九九久久精品| 精品美女少妇一区二区三区| 亚洲欧美激情小说| 日韩av在线精品观看| WWW操逼| 国产性爱乱伦AV| 久久久婷婷婷| 超碰爽人妻熟女Av| 色九九综合AV| 韩国三级色呦呦| 麻豆国产97在线| 99re公开精品免费视频 | 97色诱| 人人妻天天做天天爽| 美女9118禁| 69XX一中文字幕人妻91| www黄片免费看com| 暖暖精品二区三区观看| 足交视频老司机| 国产日韩怡红院| 校园春色五月天| 亚洲欧洲日韩天堂av| 2024人人操人人摸| 亚州色站 日韩电影| 男女香蕉一区二区| 亚洲无码电影久久久| 国产一进一出视频网站| 99在线精品观看99| 草久久久| 国产精品扒开腿做爽爽爽视频| 日韩一区二区精彩视频| 亚洲午夜AV| 97色97好| 午夜传煤十二区精品| 亚洲好看强奸乱伦| 嗯嗯啊啊视频在线看 | 国产精品久久久久久久久久久久久久| 国产精品盗摄 偷窥盗摄| 96久久精品一二三区色欲| 亚洲情色电影网| 日韩有码回春沙龙第一页| 九九九热| 欧美一区二区亚洲天堂| 亚洲精品国产精品乱码不卡| 日本一二区不卡| 日韩激情中文字幕有码| 欧美国产成人在线| 久久久四区| 激情无码日韩| 天天日日本| 人妻另类| 日本肉体xxxx裸交| 九九九久久久久| 天美传媒AV在线| 黄色网址在线免费观看| 求求你操操我| 欧美性天天| 日本高清有码网址视频| 啊啊啊不要啊啊受不了了视频在线| 精品国产乱码久久久久久蜜臀| 国产高清26uuu| 国产精品久久久久久夜夜夜| 先锋女优在线观看视频| 日韩免费性爱视频在线观看| 91丨精品丨国产丨丝袜| 黄色片A级一区二区三区| 色九月婷婷| 欧洲性人爱视频| 国产一级137片内射麻豆| 偷拍 精品 另类 四区| 91宗合网| 婷婷综合激情| 东北女人性交| 日韩少妇一区二区三区| 国产久久一区二区| 国产区性爱在线视频秋霞豆| 嗯嗯啊啊视频一区二区三区| 另类亚洲一区二区三区| 狼人综合婷婷激情四射| 超碰人妻久久| 五月天色图影视| 亚洲精品97p| 影音先锋乱| 日韩电影天堂视频二区三区| 北约熟女超碰| 亚洲第一二区另类图| 久久国产熟女影院| 99在线视频播放| 97超碰亚洲| 乱伦熟女论坛| 大香蕉天天看妹子| 国产一区二区三三视频| 东方亚洲在线操逼天堂| 久久香蕉国产线看观看猫咪av| 欧美激情久久久久| 免费作爱一级视频| 午夜久久久| 无码视频黄色网战| 九九九国产| 色婷婷综合视频| 欧洲亚洲综合| 色情五月丁香| 欧美宗合色| 久久黄黄| 12一15性XXXX粉嫩国产| 国产精品欧美激在线| 51久久夜色精品国产麻豆| 九九十八精品| 日韩精品黄片免费观看| 亚洲se电影| 伊人婷婷五月天| 久操免费观看| 日本不卡码黄色| 国产亚洲日韩欧| 97一区二区三区视频| 无码av永久免费专区网站| 国产精品第一页国产大屁股视频免费区i| 人妻乱仑一区二区三区| 亚洲人妻色图| 91人妻丝袜无码| 人人操人人色人人摸| 亚州 综合 色图| 亚洲国产麻豆一区二区三区| 色路综合| 久久25| 美国一区二区三区视频| 精品久操| 午夜福利av电影在线| 久久噜| 99热精品在线观看| 日韩黄色片子| 九九九九一区| 亭亭丁香激情| 日操粉逼逼| 丰满少妇一区二区三区免费看| 九久9热| 黄色AAAAA欧美| 人妻熟女一区二区三区视频| 麻豆天美制片厂网站视频| 99在线无码精品秘 入口黑人| 超碰99在线| 你草精品在线视频| 狠狠干狠狠色| 欧美日韩国产另类综合| 欧美色图99| 有码人妻系列| 中国亚洲呦女专区| 亚洲欧美高清无码| 天天影视之亚洲综合网| 116美女午夜| 太久视频| 欧美在线播放| 999色欧美中文字幕| 少妇蜜汁| 美女黄频a美女大全免费皮| 午夜小电影在线插入淫高潮| 少妇蹲下买菜露大唇0| 免费的av网| 牛牛aV| 国产精品黑人一区二区三区| 亚洲久草AV色图| 中文字幕在线观看网页| 久热婷婷| 啪啪资源网| 黄色大片视频在线免费看| 亚洲清纯唯美| 区一二区日韩亚洲乱码av电影| 国产伦精品一区二区三区在线观| 日本1区2区不卡视频| 亚洲欧美日韩不卡人妻| 色爱综合网| 波多野结衣一级视频| 久久久四区| asc国产精品| 97天天做| 精品人人| 国产成人网| 岛国毛片手机在线观看| 福利视频合集| 蜜屁av| 国产人妻精品一区二区三区秋霞 | 国产久久久久久久久一区二区| 国产又色又粗又黄又爽| 欧美97| 欧亚 另类 久| 在线小说视频一区| 日韩美女,国产传媒,视频一区| 日本人体九九九九九九| 大香蕉黄色一区| 色网在线视频观看免费| 蜜乳中文字幕a在线| 九九九九久久久久| 加勒比综合88| 久草免费在线视频| 欧美激情内射| 国产麻豆91欧美一区二区久久婷婷国产精品| 玖玖爱一区在线| 夜夜狼人妻| 亚洲最大91网| 性吧在线视频| 天天爱天天操| 色色婷婷五月| 五月色网| 久操不卡视频| 人人透人人操| 综合网色| 成人av免费观看| 久久久 国产精品| 日韩激情啪啪| 亚洲欧美日韩精品久久久一区二区| 精品中文字幕第一页| 人妻啪| 高潮毛片无遮挡高清免费| 欧美性生活男人的天堂| 台湾一区国产高清在线| 成人AV超碰免费在线| 黄色香蕉视频网站一区| 99re热有精品视频国产| 免费一级精品啪啪视频| 国产成人综合在线播放| 久草免费福利在线播放| 中文字幕成人理论在线| 精品亚洲国产成人AV制服丝袜| 亚洲二区精品在线观看| 日本在线不卡v二区| 97国产高清视频在线观看| 亚洲高清无码AAA久久久精品| 手机在线人成免费视频| 国产成人精品日本亚洲语言| 蜜乳AV一区二区三区四| 婷婷激情综合网| 天天爽夜夜操| 2001天天操| 久久做97| 91老熟女91老女人| 色淫网站优优视频| 久久一区二区三区四区五区| 凹凸视频在线一区二区| 日韩性爱1级片视频| 嗯啊抽插大香蕉网页| 熟女字幕| 丁香六月综合激情| 久久久久久久极品香蕉视频| 亚洲三级网址久久最新| 欧美大片一区二区三区| 亚洲脚交| 麻豆精品一区二区三区四区免费观看| 18禁看网站一区| 欧美一级特黄淫片在线观看| 人妻精品视频一区二区| 91美女在线精品视频| 99国产精品久久久久久久成人热 | 日韩欧美中文日韩欧美色| 国语对白在线播放视频| 日本精品一区三区| 国产AV人人 夜夜人人澡| 色踪合AV| 91人人操| 黄色AAAAAAAAAAA大片| 亚洲啪啪性视频| 日本天天吊| 久久m| 欧美亚洲首页| 色欲av一区二区三区蜜芽| 在线视频日韩欧美国产| 男人的天堂,欧美亚洲另类国产日韩,日本高清一区二区 | 激情抓乳插进去啪啪啪日韩| 色情综合网| 夜夜嗷嗷一区二区| 亚州,欧美在线| J?P?NESEHD熟女熟妇伦| 国产一区二区av综合| 亚洲人妻一区二区三区| 日本黄色裸日本黄色裸体 | 97碰碰日本乱偷人妻中文的| 97chaopengongkai| av天堂精品久久| 久久综合婷婷| 亚洲欧美日韩电影网站一区 | 国产精品不卡一区二区电影| 小情侣高清国产在线视频| 国产人妻精品久久久一区二区三区 | 日本青青草在线| AV天黑人| 国产三级在线现体验区| 五月丁香综合| 日日干夜夜欢| 成 人 A V免费视频在线观看| 亚洲综合中文字幕有码| 91骚妇| 青青青青操国内视频在线| 人妻少妇被猛烈进入中| 国产精品久久久亚洲一区| 九一综合网| 2024年最新色情网站在线观看| 人人操人人摸人| 91麻豆天美传媒HD| 懂色Av一区二区三区| 国产亚洲精品农村妇女| 日韩 人妻 精品| 99热精品在线观看| 天天视频黄网站| 国产黄色动态精品| 亚洲丝袜诱惑| 国产欧美一区激情交| 人妻熟妇久草在线| 无码不卡八戒| 操少妇很爽av| 超碰久超碰久| 操逼操操操91| 一本久久精品中文字| 天天射天天操天天干天天吃2018 | 亚州综合网| 九九色精品| 综合激情一一91| 久久精品久久九九精品| 亚洲国产剧情少妇激情| 日日爱99| 亚洲最大91网| 日韩精品 欧美激情| 国产乱伦一二三区| 欧美在线 亚洲| 老外又粗又长一晚做五次| 看看小穴| 国产精品不卡高清在线观看| 另类小说五月天| 精品国产乱码久久久久久久| 亚洲熟女av日韩熟女| 久操影视| 亚洲色图殴美色图激情乱伦| 亚洲男人的天堂网| 成人性爱av.com| 精品999日本| 大香蕉www.超碰| 97中文字幕色| 小日子操bb在线看| 10000部十八禁看电影| 91精品人妻偷情| 亚洲av总站| 永久电影三级在线观看| 麻豆久久久久久久久丝袜 | 亚洲日韩国产欧美综合v| 偷拍综合亚洲| 日本人人操人人操| 淫穴高潮色图| 探花激情视频| 蜜臀AV一区二区三区| 一区二区三区机械有限公司| 男人的天堂1024| 成功精品影院| 极品另类| 97天天综合网| 人人 操人人 操人人| 欧美 亚洲 另类 综合| 日本性爰一道本| 啊啊啊啊啊啊啊在线| 日韩性爱电影一区| 青青草这里只有精品| 婷婷色婷婷| 啊啊啊好想要| 成人A片男人的天堂| 国产人妖的免费的视频| 青青草久草AV| 亚洲综合另类| 亚洲成a人v欧美综合天堂下载| 日韩精品人妻中文字幕有码午| 国产精品日韩在线一区| 日日骚精品视频| 亚洲欧洲国产综合av| 亚洲丝袜少妇在线| 日韩在线人妻网站| 搡老人老9丨女老熟人| 日1区2区3区2020| 欧美亚洲综合色| 尤物av网站免费在线播放| 天天日天天舔东京热| 欧美人妻久久精品二区三区| 巨乳特殊服务按摩| 久久久久久久 九九九九九九九| 99久国产精品午夜性色福利| 亚洲无无码αⅴ每日更新| 亚洲色图 图片| 色悠久| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 欧美日韩国内不卡| 亚洲天堂资源网| 黄网站黄视频网站进入口| 岛国艾薇凹凸视频天堂| 国产AV中文| 密臀AV在线| 五月婷婷久久综合| 久久久久久久强迫| 91亚洲欧美综合高清在线 | 国产欧洲精品亚洲午夜拍精品| 午夜精品视频777| 在线日韩日本亚洲国产| 搡老女人老91妇女熟女| 韩国一区二区精品亚洲| 国产精品制服丝袜清纯唯美| 超碰97丝袜| 91综合国产精品| 久草五月| 99国产在线 精品 视频| 欧美 色 亚洲| 色超碰综合| 亚洲一区二区麻豆影院| 亚洲人妻在线一区| 久久久久久性爱免费视频| 91精品国久久久久久无码| 五月天激情婷婷| 亚洲综合另类小说色区亚洲成av人片在www| 人妻激情视频| 欧美大片一区二区三区| 2001天天操| 久久这里只精品99re66图| 欧美爆乳精品一区二区| 欧美在线亚洲| 96久久久精品| 绯色AV粉色AV蜜臀AV| 国产精品亚洲免费| 高清无码一区二区三区| 91色狼| 国产91丝袜在线播放蜜月| 无码99| 天美麻花大全视频| 久久人人爽爽人人爽人人片αV| 亚欧成人一级片在线播放| 亚洲区限制级 99| 久草精品国产蜜臀| 91亚州日韩高清| 久久男女激情视频网站| 乱伦a片视频| 国产精品人妻无码久久久老鸭窝| 少妇色欲综合网2| 亚洲色悠悠久久88| 综合干干干av久久久综合网| 激情五月激情综合网| 日韩人妻大香蕉| 亚洲欧洲国产综合av| 人妻中文字幕精品无码| a片在线播放| 哈哈操电影| 国产精品午夜福利| AV久日| 青青草成人视频在线观看二区| 亚洲不卡不卡中文字幕不卡| www.91色综合| 久99| 中文字幕成人| 人妻精品视频一区二区| 久久国内| 欧美日韩香蕉| 成人a大片在线观看| 国产精品免费1区2区视频| 久久午夜色播影院免费高清| 欧美97色| 久久久久久久久久9| 国内外激情在线| 久久成人东京热人妻| 人妻无码一区二区三区久久99| 加勒比海成人视频网| 中文在线久久字幕| 久久久穴999| 一区二区三区日韩欧美| 熟妇最新先锋一二三区| 久久久久性熟视频| 按摩中文字幕| Av色五月| 涩爱AV在线| 日韩超碰精品综合| 亚洲欧美另类少妇精品| 国产婷婷一区| AV天堂男人的天堂| 久久鲁夜| 综合视频91| 色呦色呦色精品| 天天综合网亚洲综合网| 九色 蝌蚪 熟女自| 97操碰| 易易A毛视频| 亚洲色宗合| 中国一级αV| 亚洲人体视频在线观看| 9国产超碰| 国产亚洲精品无码三区| 激情网色| 在线性黄高清免费视频| 99综合网| 99热97| 色色99| 中文字幕在线2| 欧美日韩国产色五月综合在线| 国产精品一区二区麻豆| 草久在线| 久久AV无码AV| 国内毛片无遮挡国产| 免费公开人人操| 日韩午夜精品一区二区三区电影| 丁香六月啪| 日韩啪啪啪啪啪| 91色黑人少妇| 日日夜夜模| 中文字幕国产| 在线视频97| 精品午夜福利国产一区二区在线观看 | 五月丁香啪啪网| 欧美78p| 亚洲中文字幕日产无码久久| 青草影院内射高潮| 在线天堂资源亚洲| 国产拍偷精品网站| 日本Xx性爱| 国产亚洲在线观看| 国产精品午夜成人福利| 亚州欧美综合| 亚洲天堂一区| 可以免费观看的日韩av毛片| 婷婷色色五月天| 色九月综合| 国产蜜臀在线| 亚洲国产美女久久久久| 男人高清无码一区二区| 水野优香在线观看| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 日韩精品午夜操呦呦不卡影院| 2024黄色视频| 日本一级二级三级网站| 999日韩中文精品观看视频。| 1204金沙人妻懂旧版免费| 久久久天堂| 呦呦影院| 九九久久精品| 99久在线精品99re8a| 97这里有精品| αⅴ天堂| 九九毛片这里只有精品| A一级色女| 超碰午夜| 女人被添高潮免费视频| 物尤视频一区二区| 久久黄人人爽视频| 人人看欧美性爱| 色综合91| 天天综合站| 欧美区亚洲区偷拍区| 97色婷| 国产精品视频在线播放 | 女人天堂网| 伊人五月天婷婷| AA丁香综合激情| 久久女同性恋一二区| 亚洲黑人在线| 去干网最新版| 神马影院午夜福利久久久| 97精品视频| 亚洲精品人妻吞精av| 国产九区| 国产 日韩,欧美 自拍| 色爱国产| 是还免费视频1727我| 少妇被c 黄 免费观看| 去干网最新版| 乱码人妻一区二区三区| 欧美一二三级精品在线| 婷婷久草一区二区三区| 亚洲人精品久久久| 男人高清无码一区二区| 欧美一二在线| 亚洲97| 午夜免费视频1000| 亚洲第一页综合在线| 欧美一级黄片视频在线| 人妻在线中出视频| 99av| 超碰免费在线| 97 国产精品| 中文字幕亚洲热播人妻| 欧美另类自拍 | 五十路熟女人妻一区二区在线观看| 免费a在线播放v| 成人在线午夜视频一区| 中文日本免费高清| 久久精品72| 国产二区三区免费视频| 精品国产自在在线99| av天堂电影网| 一区二区激情国产熟女| 清纯唯美综合| 91操碰| 992大香蕉| 九九热九九| 快播久久人人aV| 中文字幕成人理论在线| 久久久精品一区二区| 黄页视频网站野外| 青青草久草AV| 午夜福利免费精品视频| 亚洲综合大片| 婷婷五月天激情网| 免费国产| 国产成人精品日本亚洲语言| 亚洲中字慕不卡| 国产做?爰片久久毛片?片美国| 嫩草91| 乱伦熟女区| 中文字幕免费在线观看| 91久久99久久91熟女精品| 欧美性色欧美| 欧日韩不卡视.频| 久久97超碰| 97玖玖人妻| 亚洲欧洲自拍图片专区满春格| 亚洲欧美九九九| 肏逼福利网站| 黄呦呦在线| 国产 日韩 欧美高清| 97精品97久久| 欧美日韩操逼嗦吊| 天天天干977| 91久久国产综合久久| 亚洲中文字幕熟女| 99re在线观看| 国产精品无套内谢| 精品无人区麻豆乱码1区2区图片| 1024日韩| 不卡av免费在线网址| 欧美久久婷婷| 一区二区三区 日韩欧美| 91麻豆天美国产欧美高潮| 九九这里只有精品| 人妻少妇久久中文字幕一区二区 麻豆| 第四色色综合91| 欧美黄片免费在线观看视频| 日本不卡免费二区| 五月天婷婷影院| 超碰精品日韩欧美国产| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 99热欧美| 中国一级αV| 一本大道综合伊人精品热热| 午夜福利免费精品视频| 天天干人人乐| 日本999精品视频| 色久桃花影院在线观看| 天天天干977| 亚洲情色1区| 操高情无码| 怡春院久久| 一区二区首页| 亚洲超碰AV| 亚州综合在线| 一区,二区,三区视频| 熟妇操花| 张柏芝国产一区在线观看| 亚洲老司机123专区| 亚洲经典啪啪| 日韩免费av片高清无码| 欧美激情黑人| 操穴国产| 极品尤物女神在线观看| 91性情| 国产熟妇一区二区| 熟女乱伦二区| 高清国产无码av| 美女上床网站| 亚洲城人男人的天堂| 多乙久久久久久| 久久久999| 亚州Av天美传媒| 东北黄色电影| 91强奸乱轮| 91香蕉国产尤物视频| 日本不卡一区二区三区| 亚洲婷婷综合网| 天天干夜夜肏| 亚洲AO在线| 91干熟女| 成人26uuu| 校园激情狠狠四射| 神马久久啊啊| 97亚洲国产影视| aⅴ日韩成人电影av在线免费看av大全| 五月婷亚洲精品天堂| daxiangjiao你懂的| 久久9精品视频| 亚洲AV无码乱码在线观看性色| 久久 国产 无码| 美女网站91| 天天天堂影视日韩亚洲91| 欧美日韩资源在线| www久久久| 超碰成人最新最好看| 天天看精品动漫视频一区| 精品人妻一区二区三区免费视频| 狠色婷婷久久一区二区三区_| 久久本道| 五月天激情小说网| 色爱三区| 日本免费一级AAA大片器| 日本影视久久免费| 亚洲男人天堂手机版| 欧美高潮| 狠狠亚洲| 欧美一二三区四五区| www.狠狠| 丁香五月激情综合国产| 口爆吞精在线观看| 大香蕉一区二区在线观看.| 性综合网| 97精品一区二区三区免费| 夜夜嗨免费视频| 亚州综合色图| 日韩av色图综合| 久久久久久久久久久久久9999| 日日夜夜狠狠| 国产视频一区二区免费| 国产人妖视频一区在线观看| 久久久久久亚洲Av无码精| 欧美色图20p| 日韩大香蕉AV影片| 亚洲区小说| 九九人妻| 久久超碰av在线| 午夜毛片高清免费不卡| 超碰99热中文字幕| 不卡九肏| 97国产精品国| 999日韩中文精品观看视频。| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 在线看片国产精品每日更新| 久久久久久电影| 国内偷自视频区视频综合| 色色色日本| 国产成人超碰在线| 日本伦乱九九九综合| 人妻精品视频一区二区三区| 久久男人天堂| 91美女视频| 国产 日韩,欧美 自拍| 国产成人在线观看网址| 中国人高清www色视频免费| 国内一区二区免费| 亚洲欧美人妻| 84YTCOM性无码| 2024年最新色情网站在线观看| 青青草字幕AV| 久久精品中文| 亚洲精品国产熟女久久久| 97久久国产精品| 亚洲好色人妻| 肥佬影院91| 亚洲成人贴图| 青娱乐休闲视频在线观看| 国产午夜精品理论片一二三区区 | 九久久九九久视频| 久久尹人大香焦视| 亚洲91色| 激情小说图片亚洲首页| 熟妇xxxxx性春色| 18禁精品网站在线看| 3P乱轮视频| 国产一区二区啪啪视频| 精品久热| 黄页18禁| 国产精品熟女九九九| 国产后入内射| aV中文麻| 亚州欧美色图| 免费观看网黄| 久久久久久久亚洲Av无码| 黄片不用下载在线观看| 天天做天天爱天天高潮| 97精品国产97久久久| 天天爽夜夜欢视| 大香蕉之青青草原| 少妇九九九九| 夜夜爽夜夜爽| 91精品微拍福利| 四季av一区二区凹凸精品小说| 欧美自拍网| 欧美国产精品久久九九| 久久久久人妻二区精品叶可怜| 最新三级网址| 婷婷香蕉| 91精品人妻一区二区三区蜜桃臀| 欧美久久婷婷| 一二三四区电影| 国产性爱强奸乱伦大全| 国产精品4p在线观看| 欧美专区日本专区| 首页亚洲国产高跟丝袜诱惑视频| 95精品在线| yy少妇精品久久| 999国产精品999久久久久久| 欧美色图欧美| 干我久操| 十八禁啪啦拍视频无遮挡| 色噜噜国产在线| 色网在线| 欧美se综合| 国产精品探花色| 伊人女女资源在线观看| 丝袜夫妻自拍| 土豪酒店各种姿势玩弄极品幼稚| 9 1果冻精品视频| 中文字幕AV乱伦| 婷婷激情五月| 欧美嗯啊……在线观看视频免费| 亚洲视频二区| 日韩小电影| 家庭乱伦性爱av| 日本99热| 好看的久久不射无码影视影院| 阿姨一区二区免费视频-高清正片西瓜视频下载app-T450AV | 床上啊啊啊一区二区三区| 国产精品高潮久久AV| 国产精品一二三| 男女猛烈无遮掩视频免费软件| 综合一区中亚洲国产成人综合精品| 日韩AV一区二区三区四四| 久草草一二三四区久久| 婷婷五月天激情四射| 国产中文大片资源中文字幕 | 久久久九九九| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 9999免费精彩视频| 99999无码| 亚州色图欧美色图| 亚欧免费| 午夜天堂精品久久久久91| 欧美成人一区二区| a'v在线资源| 国产又黄又粗的视频| 无码色| 天美一区在线| 日韩激情无码影院| 91超碰人人操| 久久久久久久久久精| 久久狠狠色噜噜狠狠狠狠97| 黄色免费网页无码| 一区二区三区国产精产| 日韩成人人妻网站| 麻豆成人影音在线| 日韩免费av片高清无码| av九九| 成人在线午夜视频一区| 91肉片| 午夜高清成人在线视频| 啪啪91| 一本久久久精品| 丁香五月综合| 老鸭窝黄色视频网站| 亚洲日韩人妻中文字幕一区| 婷婷91| 另类老少妇| 一区二区三区免费岛国片| 少妇免费视频| 久久久久久人体| 日韩欧美字幕亚洲一区二区| 欧美青青视频| 国产在线观看一区二区三区| 天天干天天干天天| 亚洲欧美综合图片| 色噜噜人妻丝袜a∨先锋影| 国产精品视频播放| a亚洲欧美色欲| 男女打扑克高清网站| 99操逼| 色综合婷婷| 欧美后入式| 午夜国产成人福利视频| 神马久久69| 91九色蝌蚪在线观看| 欧美激情一区二区| 国产精品久久久无码aV去| 天美麻豆精品视频99| 欧美天天干| 久久久久成人蜜桃精品| 91无码人妻精品一区二区三区蜜桃 | 最新av网站在线观看| 精品v1区| 伊人久久综合影院精品久久久| 国产精品熟女AV中文字幕在线播放| 九九九九九精品视频| 日日干夜夜干| 久久国产精品m码| 激情婷婷五月天| 欧美日韩不卡传媒| 亚洲成人免费电影| 少妇天堂| 黑操B| 亚州性色| 色999人与兽| 中文字幕一区二区视频在线观看| 天美国产三级传媒| 国产精品诱惑| 色月天AV导航| 一区二区三区美女超清| 91麻豆天美国产欧美| 91视频综合| 超碰国产情侣自拍网| 大香蕉乱级| 五月天伊人| 亚洲国产欧美一区二区潘金莲| 超碰夫妻97| 日本国产欧美高清在线| 懂色av中文字幕一区二区三区天美| 日本熟妇人妻中出视频| 欧美日韩性爱精品| 九九综合色| 丰满人妻一区二区三区四区| 狠狠色婷婷| 热99这里有精品综合久久 | 国产内射爽爽大片| 激情文学 国产一二三aV| av无线看| 一区超碰一区| 日本污ww视频网站| 好爽视频在线观看视频| 视频在线观看一二三区| 涩涩涩综合| 日本孕妇孕交| 97人人干人人操| 97精品视频| 久久久久久久国产| 亚洲导航深夜福利| 日韩91网| 九九九午夜| 中国国产精品一区视频| 亚洲AV在线资源| 五月丁香在线| 级做a爱无码性色永久免费|