国产成人欧美一区二区三区vr_久久国产精品人人爽人人爽_国产精品永久免费播放_肉欲啪啪a∨无码精品一区二区_国产超短裙jk丝袜在线_亚洲AV片高清资源在线观看_国模无码一区二区三区久久_国产成年人未进视频_中文字幕无码精品夜_一区二区三区在线视频免费看_亚洲成AV人片在线观看网址_日本激情视频高清综合久久_亚洲午夜视频福利_国内大量揄拍人妻精品視_久久国产精品福利二区三区

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

用Python實(shí)現(xiàn)愛因斯坦棋AI:規(guī)則、搜索與調(diào)參指南

用Python實(shí)現(xiàn)愛因斯坦棋AI:規(guī)則、搜索與調(diào)參指南 簡介棋類博弈是人工智能中經(jīng)典且易于上手的研究場景。從國際象棋到各類棋類變體博弈樹搜索與剪枝算法構(gòu)成了許多AI程序的核心。愛因斯坦棋是一種5×5小棋盤上的棋類變體規(guī)則簡潔但戰(zhàn)術(shù)豐富非常適合作為棋類AI的入門實(shí)驗(yàn)場。圍繞這一棋盤可以用Python搭建一套完整可對(duì)弈的棋類引擎涵蓋走法生成、將軍判定、minimax搜索、alpha-beta剪枝、評(píng)估函數(shù)與迭代加深等關(guān)鍵技術(shù)。通過參數(shù)調(diào)優(yōu)與批量自我對(duì)弈驗(yàn)證開發(fā)者能夠快速掌握搜索算法在具體博弈項(xiàng)目中的工程落地方法并規(guī)避規(guī)則版本差異、棋子阻擋判斷、GUI線程卡死等常見陷阱。從簡單棋類入手理解AI決策原理是通往更復(fù)雜棋類與強(qiáng)化學(xué)習(xí)路徑的務(wù)實(shí)起點(diǎn)。1. 愛因斯坦棋一個(gè)比國際象棋更容易上手的AI實(shí)驗(yàn)場如果你手上有一塊5x5的棋盤和雙方各5枚棋子別急著擺國際象棋——試試愛因斯坦棋。這個(gè)常被稱為“小國際象棋”的變體規(guī)則是每方擁有王、后、車、象、馬各一枚沒有兵也沒有升變30秒就能講完規(guī)則但搜索空間和戰(zhàn)術(shù)組合又足以讓AI程序忙一陣子。我最早接觸它是在給一個(gè)教學(xué)項(xiàng)目找棋類引擎時(shí)標(biāo)準(zhǔn)國際象棋的走法生成和評(píng)估太成熟拿來練手沒有挑戰(zhàn)而愛因斯坦棋足夠新沒有現(xiàn)成滿大街的開局庫反而適合把決策樹、剪枝、評(píng)估函數(shù)這些概念從頭跑一遍。這篇筆記會(huì)從規(guī)則說清楚給出一套Python實(shí)現(xiàn)再把AI搜索的調(diào)參經(jīng)驗(yàn)和你容易踩的坑一次性攤開。2. 愛因斯坦棋規(guī)則拆解為什么5x5棋盤是天然的AI測試床網(wǎng)上的愛因斯坦棋規(guī)則有不少版本有的用6x6棋盤有的加了兵和升變甚至還有人把它和“愛因斯坦謎題”混在一起。為了避免代碼對(duì)著一個(gè)永遠(yuǎn)跑不起來的黑匣子發(fā)呆我先把這套實(shí)現(xiàn)所采用的規(guī)則固定下來棋盤為5行5列雙方各持5枚棋子目標(biāo)是將死對(duì)方王。你可以在這個(gè)基礎(chǔ)上小幅調(diào)整后面我會(huì)明確指出哪個(gè)地方最容易受版本差異影響。2.1 棋盤、棋子與初始布局把物理規(guī)則變成數(shù)據(jù)字典棋盤坐標(biāo)用(row, col)表示白方初始在第0行黑方初始在第4行中間三行空置。雙方棋子從左到右分別是車、馬、象、后、王黑方從自己的視角看也是車、馬、象、后、王所以從鏡像角度看黑方的排列是王、后、象、馬、車。我把棋子的移動(dòng)能力先匯總成一張表方便后面寫方向向量時(shí)對(duì)照棋子數(shù)量走法距離越子王1橫豎斜八個(gè)方向1格否后1橫豎斜八個(gè)方向任意格否車1橫豎四個(gè)方向任意格否象1斜向四個(gè)方向任意格否馬1L形橫走2豎走1或相反1步是為什么把王和后都放在5格的行里因?yàn)?列剛好放滿5枚棋子沒有兵的位置也就沒有過路兵、升變、王車易位這些“邊角規(guī)則”。對(duì)于AI程序來說狀態(tài)空間比標(biāo)準(zhǔn)國際象棋小幾個(gè)數(shù)量級(jí)但棋子走法仍然有“阻擋”“僅馬可越子”的判定足夠練習(xí)走法生成器的健壯性。在代碼里我習(xí)慣用枚舉表示棋子類型而不是字符串因?yàn)槊杜e在debug時(shí)更直觀還能避免手寫字符大小寫帶來的混亂。下面這段是初始布局的最小表示# constants.py import enum WHITE, BLACK 0, 1 class Kind(enum.Enum): KING K QUEEN Q ROOK R BISHOP B KNIGHT N def empty_board(): return [[None for _ in range(5)] for _ in range(5)] def initial_board(): board empty_board() # 白方 row 0黑方 row 4 top [Kind.ROOK, Kind.KNIGHT, Kind.BISHOP, Kind.QUEEN, Kind.KING] bottom [Kind.KING, Kind.QUEEN, Kind.BISHOP, Kind.KNIGHT, Kind.ROOK] for c, kind in enumerate(top): board[0][c] kind for c, kind in enumerate(bottom): board[4][c] kind return board這里把board直接存Kind枚舉空位存None。這個(gè)版本的代碼只記錄棋子種類還沒記錄顏色真實(shí)引擎里必須額外用一個(gè)數(shù)組或把顏色編進(jìn)棋子類。我特意先展示這種“半成品”是想說明一個(gè)取舍棋盤只有25格用二維列表足夠快沒必要在入門階段上位棋盤bitboard。位棋盤在8x8棋盤上能大幅加速并行位運(yùn)算但在這里反而會(huì)增加調(diào)試成本尤其對(duì)于剛接觸棋類編程的人你會(huì)發(fā)現(xiàn)自己一整天都在算位掩碼。2.2 走法與勝負(fù)將軍、將死、還有“送將”違例大多數(shù)棋類走法生成都要分兩步走先生成“偽合法走法”再過濾掉會(huì)讓己方王被吃的走法。許多人一上來就寫遞歸生成器卻忘了送將檢查最后AI會(huì)走出把自己的王送到對(duì)方嘴里的棋那感覺就像看了半天棋譜發(fā)現(xiàn)第一步就是錯(cuò)的。偽合法走法指的是“按照棋子移動(dòng)規(guī)則走完不越界且不落到己方棋子上的走法”。它不管走完之后自己王是否處于被攻擊狀態(tài)。比如王從角落走到中心如果對(duì)方車正好控制這一行這個(gè)走法在偽合法階段會(huì)被放進(jìn)列表但在第二階段的合法性過濾時(shí)必須刪掉。過濾邏輯很簡單模擬每一步然后調(diào)用將軍判定函數(shù)如果己方王在對(duì)手攻擊范圍內(nèi)該走法不合法。這一步會(huì)反復(fù)執(zhí)行所以將軍判定一定要寫得高效。判斷一個(gè)格子是否被某顏色棋子攻擊通常用反向掃描站在目標(biāo)格子上逆推是否有棋子能按自己的走法到達(dá)這里。棋盤小直接枚舉對(duì)手所有棋子的攻擊目標(biāo)也行。下面是一個(gè)更貼近代碼的思路def is_square_attacked(board, r, c, by_color): # 枚舉 by_color 的所有棋子檢查它們能否一步到達(dá) (r,c) # 注意馬不需要檢查中間阻擋車、象、后必須檢查路徑是否被堵 for each piece owned by by_color: if piece_can_reach(board, piece, r, c): return True return False將軍與將死的判定不能只用“能吃到王”來推。正確順序是先獲取當(dāng)前玩家的全部合法走法列表如果列表為空再檢查己方王是否正被攻擊——被攻擊就是將死否則就是無棋可動(dòng)。在國際象棋標(biāo)準(zhǔn)規(guī)則里無棋可動(dòng)判和棋但在愛因斯坦棋的某些流傳版本里無棋可動(dòng)直接判負(fù)。我建議在代碼里做成配置項(xiàng)因?yàn)槲乙娺^同一個(gè)項(xiàng)目里兩種寫法都有人用最后在判負(fù)判和上吵了三天。3. 用 Python 寫出可對(duì)弈的愛因斯坦棋走法生成與狀態(tài)管理現(xiàn)在進(jìn)入能跑的代碼。我采用一個(gè)自定義Piecedataclass來同時(shí)記錄種類和顏色比單純存枚舉更完整。棋盤狀態(tài)就用二維列表每格元素是Piece或None。這一章給出的代碼可以直接復(fù)用也可以作為你寫其他小型棋類引擎的骨架。3.1 棋盤類設(shè)計(jì)從格子坐標(biāo)到合法走法列表先定義基礎(chǔ)類和棋盤初始化from dataclasses import dataclass from enum import Enum class Kind(Enum): KING K QUEEN Q ROOK R BISHOP B KNIGHT N WHITE, BLACK 0, 1 dataclass(frozenTrue) class Piece: kind: Kind color: int def __str__(self): return self.kind.value if self.color WHITE else self.kind.value.lower() class EinsteinBoard: def __init__(self): self.board self._initial_board() self.turn WHITE self.state_stack [] # 悔棋/搜索用 def _initial_board(self): board [[None for _ in range(5)] for _ in range(5)] top [Kind.ROOK, Kind.KNIGHT, Kind.BISHOP, Kind.QUEEN, Kind.KING] bottom [Kind.KING, Kind.QUEEN, Kind.BISHOP, Kind.KNIGHT, Kind.ROOK] for c, kind in enumerate(top): board[0][c] Piece(kind, WHITE) for c, kind in enumerate(bottom): board[4][c] Piece(kind, BLACK) return boardPiece是frozen dataclass保證哈希和比較都可靠后面在走法集合里做去重很方便。state_stack用來配合悔棋和AI搜索時(shí)的狀態(tài)回退這個(gè)設(shè)計(jì)在3.2里會(huì)展開。核心的走法生成器按“方向向量最大步數(shù)”來組織。車、象、后能走任意格但中途遇到棋子就必須停馬直接跳到目標(biāo)格不受阻擋。我寫了一個(gè)_attacks_from函數(shù)它會(huì)返回一個(gè)棋子能到達(dá)的所有格子def _attacks_from(self, r, c): piece self.board[r][c] if piece is None: return [] vectors { Kind.KING: [(1,0,1),(-1,0,1),(0,1,1),(0,-1,1), (1,1,1),(1,-1,1),(-1,1,1),(-1,-1,1)], Kind.QUEEN: [(1,0,5),(-1,0,5),(0,1,5),(0,-1,5), (1,1,5),(1,-1,5),(-1,1,5),(-1,-1,5)], Kind.ROOK: [(1,0,5),(-1,0,5),(0,1,5),(0,-1,5)], Kind.BISHOP: [(1,1,5),(1,-1,5),(-1,1,5),(-1,-1,5)], Kind.KNIGHT: [(2,1,1),(2,-1,1),(-2,1,1),(-2,-1,1), (1,2,1),(1,-2,1),(-1,2,1),(-1,-2,1)], } result [] for dr, dc, max_step in vectors[piece.kind]: for step in range(1, max_step 1): nr, nc r dr * step, c dc * step if not (0 nr 5 and 0 nc 5): break target self.board[nr][nc] if target is None: result.append((nr, nc)) elif target.color ! piece.color: result.append((nr, nc)) break else: break return result這里有個(gè)細(xì)節(jié)馬的方向向量步長為1但用了(2,1)這種二元組和max_step1的組合所以馬不會(huì)進(jìn)入“連續(xù)走多步”的路徑檢查。其他棋子的max_step設(shè)為5但棋盤只有5行所以range(1, 6)也會(huì)自然越界退出。這個(gè)實(shí)現(xiàn)簡單缺點(diǎn)是每次都要重新構(gòu)造vectors字典如果你追求性能可以把這個(gè)字典提到類屬性或模塊常量里避免高頻搜索時(shí)反復(fù)分配。有了單子走法再匯總整個(gè)棋盤所有己方棋子的偽合法走法然后逐條模擬并過濾送將def get_legal_moves(self, color): pseudo [] for r in range(5): for c in range(5): piece self.board[r][c] if piece is None or piece.color ! color: continue for tr, tc in self._attacks_from(r, c): pseudo.append((r, c, tr, tc)) legal [] for move in pseudo: state self._snapshot() self._apply_move(*move) if not self.is_in_check(color): legal.append(move) self._restore(state) return legal_snapshot和_restore這對(duì)方法在3.2里實(shí)現(xiàn)作用是對(duì)整盤狀態(tài)做深拷貝。為什么要深拷貝因?yàn)槠灞P只有25格拷貝一次開銷極小而且能避免增量回退時(shí)的邊界錯(cuò)誤——比如你吃掉對(duì)方馬之后悔棋要恢復(fù)如果你不拷貝就得額外保存“吃掉的棋子是什么”邏輯容易漏。3.2 落子、吃子與悔棋狀態(tài)棧和“悔棋”按鈕的實(shí)現(xiàn)def _snapshot(self): import copy return (copy.deepcopy(self.board), self.turn) def _restore(self, state): self.board, self.turn state def _apply_move(self, r, c, tr, tc): self.board[tr][tc] self.board[r][c] self.board[r][c] None self.turn BLACK if self.turn WHITE else WHITE def push_move(self, move): self.state_stack.append(self._snapshot()) self._apply_move(*move) def undo(self): 悔棋回退到上一個(gè)狀態(tài)并取出棧頂狀態(tài)。 if self.state_stack: self.board, self.turn self.state_stack.pop() return True return Falsepush_move在落子前快照再落子。undo用于GUI里的“悔棋”按鈕也用于AI搜索時(shí)的回退。你可能會(huì)擔(dān)心深拷貝會(huì)讓搜索變慢但實(shí)測在5x5棋盤上一次deepcopy大約幾微秒一次alpha_beta搜索幾千個(gè)節(jié)點(diǎn)總耗時(shí)不過幾十毫秒完全可以接受。如果你以后要移植到C或要做更深的搜索再改成“保存被吃棋子起點(diǎn)”的增量回退不遲。有一點(diǎn)要提醒如果你在搜索循環(huán)里用push_move和undo每次進(jìn)入子節(jié)點(diǎn)都要_snapshot那棧會(huì)越積越大。正確做法是直接用_apply_move_restore不要經(jīng)過state_stack。所以我在3.1的走法過濾里用的是_snapshot和_restore而不是push_move。搜索時(shí)的回退應(yīng)該手動(dòng)保存舊狀態(tài)而不是依賴undo因?yàn)閡ndo面向的是人機(jī)對(duì)弈的“悔棋?!眱商讞2荒芑煊谩?.3 命令行對(duì)弈最小可玩版本跑起來既然有了棋盤和走法先用命令行跑一個(gè)能雙人對(duì)戰(zhàn)的版本。輸入格式是r c tr tc從起點(diǎn)到終點(diǎn)q退出def print_board(board): for r in range(5): row [] for c in range(5): p board.board[r][c] row.append(str(p) if p else .) print( .join(row)) def main(): b EinsteinBoard() while True: print_board(b) print(Turn:, White if b.turn WHITE else Black) moves b.get_legal_moves(b.turn) if not moves: print(No legal moves. Game over.) break cmd input(enter move: r c tr tc (q to quit): ) if cmd.strip().lower() q: break try: r, c, tr, tc map(int, cmd.split()) except ValueError: print(bad input) continue move (r, c, tr, tc) if move not in moves: print(illegal move) continue b.push_move(move) opponent BLACK if b.turn WHITE else WHITE if b.is_in_check(opponent): print(Check!)這個(gè)主循環(huán)沒有任何AI但它能幫你驗(yàn)證規(guī)則自己跟自己下幾盤檢查有沒有走法漏生成有沒有把無棋可動(dòng)判成將死。命令行版本是后面加AI的基礎(chǔ)不要跳過。4. 給愛因斯坦棋裝上大腦minimax 搜索與 alpha-beta 剪枝的參數(shù)調(diào)優(yōu)黑白棋、五子棋、國際象棋的AI思路在愛因斯坦棋上完全通用核心就是帶剪枝的深度優(yōu)先搜索。不要一上來就上強(qiáng)化學(xué)習(xí)因?yàn)閻垡蛩固蛊迨峭昝佬畔⒋_定狀態(tài)搜索樹小到能用經(jīng)典方法解沒必要讓一局棋的訓(xùn)練時(shí)間長得像練一個(gè)深度網(wǎng)絡(luò)。4.1 先算復(fù)雜度為什么要剪枝而不是直接上強(qiáng)化學(xué)習(xí)我粗略統(tǒng)計(jì)過空棋盤中間位置的車大約能走8格象能走4格左右后能走8到10格馬最多8格王3格。平均每個(gè)棋子大約能走6到8步每方5個(gè)棋子分支因子B大約在10到15之間。這是可觀的。如果做4層深度搜索B15時(shí)未剪枝的葉子節(jié)點(diǎn)是15^450625非常輕松6層深度是15^6≈1130萬單層遍歷勉強(qiáng)能算但已經(jīng)不夠優(yōu)雅。alpha-beta剪枝在理想情況下能把復(fù)雜度從O(B^d)降到O(B^(d/2))也就是搜索同樣深度只需要大約sqrt(1130萬)≈3400個(gè)節(jié)點(diǎn)完全可以在毫秒級(jí)完成。因此先寫minimax和alpha-beta是你投入產(chǎn)出比最高的方案。那么強(qiáng)化學(xué)習(xí)呢它的價(jià)值在于棋類狀態(tài)特征復(fù)雜、評(píng)估函數(shù)難以手工設(shè)計(jì)或者你需要一個(gè)能從自我對(duì)弈中自動(dòng)學(xué)習(xí)評(píng)估的網(wǎng)絡(luò)。但愛因斯坦棋棋盤小、棋子少一個(gè)幾十行的評(píng)估函數(shù)已經(jīng)夠用強(qiáng)化學(xué)習(xí)要處理獎(jiǎng)勵(lì)稀疏、回合長、對(duì)局?jǐn)?shù)量大這些工程問題不適合作為入門首選。4.2 最小可用的評(píng)估函數(shù)子力位置機(jī)動(dòng)性評(píng)估函數(shù)是AI風(fēng)格的“黑匣子”但我們可以先手工打開它。最簡單的評(píng)估用子力價(jià)值后9分、車5分、象3分、馬3分、王10000分因?yàn)橥醣怀粤擞螒蚪Y(jié)束。在此基礎(chǔ)上給靠近中心的棋子加一點(diǎn)點(diǎn)位置分因?yàn)橹行目刂屏Ω鼜?qiáng)。代碼長這樣PIECE_VALUES { Kind.KING: 10000, Kind.QUEEN: 9, Kind.ROOK: 5, Kind.BISHOP: 3, Kind.KNIGHT: 3, } POSITION_BONUS [ [0, 1, 2, 1, 0], [1, 2, 3, 2, 1], [2, 3, 4, 3, 2], [1, 2, 3, 2, 1], [0, 1, 2, 1, 0], ] def evaluate(board): score 0 for r in range(5): for c in range(5): p board.board[r][c] if p is None: continue bonus POSITION_BONUS[r][c] if p.color WHITE else POSITION_BONUS[4 - r][4 - c] value PIECE_VALUES[p.kind] bonus * 0.1 score value if p.color WHITE else -value return score if board.turn WHITE else -scorebonus * 0.1是為了讓位置分遠(yuǎn)小于一個(gè)兵的價(jià)值不至于出現(xiàn)“為了搶中心而白送一個(gè)馬”的蠢事。實(shí)際上這個(gè)0.1本身就是可以調(diào)的參數(shù)我建議在0.05到0.3之間實(shí)驗(yàn)。更大的系數(shù)會(huì)讓AI更激進(jìn)地?fù)屨贾行牡菀缀鲆曌恿Π踩?。機(jī)動(dòng)性評(píng)估沒有寫進(jìn)代碼因?yàn)橛?jì)算合法走法數(shù)量在搜索中已經(jīng)天然存在不需要額外統(tǒng)計(jì)。如果你發(fā)現(xiàn)AI總是走成僵局再考慮加上“己方合法走法數(shù)減去對(duì)方合法走法數(shù)”這一項(xiàng)。但記住評(píng)估函數(shù)不是越復(fù)雜越好加項(xiàng)越多越難調(diào)你先跑通0.1版再說。4.3 迭代加深與超時(shí)控制三個(gè)必調(diào)參數(shù)正式對(duì)弈時(shí)你不能只固定搜索深度因?yàn)椴煌置鎻?fù)雜度不一樣。常見做法是迭代加深從深度1開始逐步加深直到時(shí)間預(yù)算用完采用最近一次完整搜索的最佳走法。這樣你能精確控制在3秒內(nèi)返回一步棋而不是在最差局面里卡死。import time def alpha_beta(board, depth, alpha, beta, maximizing): moves board.get_legal_moves(board.turn) if depth 0 or not moves: return evaluate(board) if maximizing: value -float(inf) for move in moves: board._apply_move(*move) value max(value, alpha_beta(board, depth - 1, alpha, beta, False)) board._restore((board_copy_state, board.turn)) # 需要保存狀態(tài) alpha max(alpha, value) if alpha beta: break return value else: value float(inf) for move in moves: board._apply_move(*move) value min(value, alpha_beta(board, depth - 1, alpha, beta, True)) board._restore((board_copy_state, board.turn)) beta min(beta, value) if alpha beta: break return value上面這段代碼省略了_apply_move前后的狀態(tài)保存實(shí)際使用時(shí)你需要在每次進(jìn)入子節(jié)點(diǎn)前把board.board和board.turn存到臨時(shí)變量里。我在這里不展開完整搜索類因?yàn)樗蜆?biāo)準(zhǔn)國際象棋AI完全一致。關(guān)鍵是下面的迭代加深循環(huán)def iterative_deepening(board, time_budget2.0, max_depth6): deadline time.time() time_budget best_move None depth 1 while depth max_depth and time.time() deadline: # 每層先保存一個(gè)候選最佳走法層結(jié)束才更新 current_best None best_value -float(inf) for move in board.get_legal_moves(board.turn): board.push_move(move) value alpha_beta(board, depth - 1, -float(inf), float(inf), False) board.undo() if value best_value: best_value value current_best move if current_best is not None: best_move current_best depth 1 return best_move這里三個(gè)必調(diào)參數(shù)是參數(shù)推薦起點(diǎn)作用調(diào)整方向max_depth6硬性最大深度上限防止時(shí)間預(yù)算失效時(shí)無限加深想棋力更強(qiáng)就加到8但要配合更快的走法生成time_budget2.0秒每次落子的時(shí)間預(yù)算實(shí)時(shí)對(duì)戰(zhàn)設(shè)1秒分析模式可設(shè)5秒evaluation_coeff0.1位置分系數(shù)影響評(píng)估函數(shù)的激進(jìn)度0.05保穩(wěn)0.3冒險(xiǎn)吃中心迭代加深還有一個(gè)隱藏好處如果你實(shí)現(xiàn)了“上一步搜索的最佳走法在開局庫附近”它可以用在啟發(fā)排序里讓alpha-beta剪枝更容易觸發(fā)。不過在愛因斯坦棋上你先把這三個(gè)參數(shù)調(diào)好已經(jīng)能打敗絕大多數(shù)隨便下棋的人類玩家。5. 避坑指南愛因斯坦棋實(shí)現(xiàn)中的 5 個(gè)常見翻車現(xiàn)場這一章是血淚經(jīng)驗(yàn)。我確實(shí)在這些地方翻過車每次都要花至少一個(gè)晚上排查。按現(xiàn)象→原因→解決的方式寫希望你不用走回頭路。5.1 規(guī)則版本不同兵/升變引發(fā)的連鎖反應(yīng)現(xiàn)象從網(wǎng)上下載的“愛因斯坦棋”代碼開局第一排除了重子以外還有一排兵走幾步就報(bào)索引越界。原因愛因斯坦棋本身有多個(gè)變體有的版本是6x6棋盤加兵有的版本甚至允許兵升變。解決入手前先確認(rèn)規(guī)則版本。如果你手中的項(xiàng)目確實(shí)帶兵就在Kind里加PAWN并在_attacks_from里實(shí)現(xiàn)兵的單步前進(jìn)和斜吃同時(shí)處理升變。如果按我這套無兵規(guī)則遇到“對(duì)方底線出現(xiàn)第6個(gè)子”要直接報(bào)錯(cuò)防止靜默bug。5.2 重復(fù)局面與“無棋可動(dòng)”把和棋判成輸棋怎么辦現(xiàn)象AI走到只剩兩個(gè)王時(shí)程序提示“Game over”但明明合法走法沒了王也沒被將軍應(yīng)該是和棋。原因我在剛開始寫勝負(fù)判定時(shí)只檢查了legal_moves為空就判定對(duì)方贏了沒進(jìn)一步查王的攻擊狀態(tài)。解決把將死和無棋可動(dòng)分開。先判斷l(xiāng)en(legal_moves)0再用is_in_check檢查當(dāng)前玩家王是否被攻擊。無棋可動(dòng)默認(rèn)判和但保留一個(gè)STALEMATE_IS_LOSS開關(guān)應(yīng)對(duì)那些把“無棋可動(dòng)”當(dāng)輸棋的規(guī)則版本。5.3 馬能跳其他棋子不能穿人實(shí)現(xiàn)阻擋時(shí)的邊界錯(cuò)誤現(xiàn)象AI在殘局里經(jīng)常用車穿過自己的兵走到后方評(píng)估分看起來很高但按規(guī)則就是非法走法。原因_attacks_from里車、象、后沿方向逐格走但我的第一版沒有在碰到第一個(gè)棋子后break導(dǎo)致繼續(xù)掃描后方格子。馬則不需要檢查路徑所以馬的邏輯是獨(dú)立的。解決在偽合法走法生成時(shí)遇到第一個(gè)非空格就分支若是我方棋子停止若是對(duì)方棋子記錄格子并停止。馬的馬步直接跳過該檢查。一個(gè)快速自測是在5x5棋盤上把車圍在中心一圈棋子車應(yīng)該一個(gè)格都走不出去。5.4 GUI線程卡死遞歸搜索別放在渲染線程現(xiàn)象在Qt里點(diǎn)“AI下棋”按鈕后整個(gè)窗口變成“未響應(yīng)”點(diǎn)哪都沒反應(yīng)要等好幾秒才恢復(fù)。原因AI搜索的alpha_beta是同步遞歸主線程被占滿事件循環(huán)無法刷新。解決把搜索放到子線程用queue或者信號(hào)把結(jié)果傳回UI。更簡單的做法是先用命令行版本驗(yàn)證AI再接GUI。我自己的習(xí)慣是讓AI計(jì)算線程每次只搜一個(gè)深度等迭代加深結(jié)束后回到主線程更新棋盤。如果不想引入多線程至少要在搜索循環(huán)中插入time.sleep(0)或QCoreApplication.processEvents()但這不是根治只是喘口氣。5.5 評(píng)估函數(shù)像玄學(xué)用自我對(duì)弈代替肉眼調(diào)參現(xiàn)象我把位置分系數(shù)從0.1改成0.3肉眼看了幾局覺得AI更兇了但和人下反倒輸多贏少。原因肉眼評(píng)估有巨大偏差位置分過高讓AI為了占中心狂送棋子。解決把兩個(gè)不同參數(shù)的AI放在一起自我對(duì)弈200局統(tǒng)計(jì)勝負(fù)和平局。勝率差異不到5%時(shí)基本可以認(rèn)為是噪聲跑滿200局再看通常能找到趨勢。不要只調(diào)一個(gè)參數(shù)就下結(jié)論至少要用固定對(duì)手和固定隨機(jī)種子跑批量對(duì)局。這也是我后來養(yǎng)成的習(xí)慣任何評(píng)估函數(shù)的改動(dòng)都要用--games參數(shù)跑批量測試不憑“感覺還不錯(cuò)”上線。6. 進(jìn)階玩法從“會(huì)下”到“下得好”的驗(yàn)證閉環(huán)現(xiàn)在你已經(jīng)有一個(gè)能下棋、能搜索、能悔棋的程序。想讓它更強(qiáng)不用急著換強(qiáng)化學(xué)習(xí)框架先把這三個(gè)進(jìn)階動(dòng)作做扎實(shí)。6.1 用自我對(duì)弈生成離線數(shù)據(jù)反哺評(píng)估函數(shù)把兩個(gè)不同評(píng)估參數(shù)的AI寫進(jìn)同一個(gè)腳本里讓它們自動(dòng)對(duì)弈200局記錄每局的走法序列、棋子被吃情況和最終結(jié)果。你不需要人工標(biāo)注因?yàn)閯儇?fù)天然就是標(biāo)簽。用這些對(duì)局可以回歸出“哪種子力比值更優(yōu)”的經(jīng)驗(yàn)值甚至可以訓(xùn)練一個(gè)簡單的線性評(píng)估模型替代原來拍腦袋的PIECE_VALUES。6.2 做個(gè)開局庫前5步不再“天馬行空”棋盤這么小AI搜到第4層時(shí)已經(jīng)能穩(wěn)定判斷前幾步。但為了節(jié)省時(shí)間預(yù)算你可以用高深度AI離線生成前5步的最優(yōu)走法存成一個(gè)字典鍵是“棋盤狀態(tài)”值是好走法。對(duì)局時(shí)前5步直接查表把時(shí)間預(yù)算留給中殘局。我自己試過用8層搜索跑一晚上能覆蓋絕大多數(shù)前期變體線上AI前5步的思考時(shí)間直接降到0。6.3 驗(yàn)證方法讓兩個(gè)AI打一場用勝率和平均回合數(shù)說話不要再用“哪一步讓我感覺厲害”來驗(yàn)證。正確做法是用同一套引擎、不同參數(shù)跑200局記錄勝率、平均回合數(shù)、每步平均耗時(shí)。表格比感覺可靠得多版本勝率平均回合平均耗時(shí)v0.1 位置系數(shù)0.158%42.31.8sv0.2 位置系數(shù)0.342%38.71.9s這組數(shù)據(jù)一眼就能看出位置系數(shù)0.1更穩(wěn)。那怎么選我會(huì)把勝率作為第一指標(biāo)平均回合數(shù)作為調(diào)優(yōu)參考因?yàn)榭焖仝A棋不一定意味著棋力強(qiáng)。慢慢養(yǎng)成這個(gè)習(xí)慣后你會(huì)發(fā)現(xiàn)所謂“棋感”變成了可重復(fù)的實(shí)驗(yàn)而不是玄學(xué)。希望這套從規(guī)則到驗(yàn)證的流程能讓你在下一個(gè)棋類項(xiàng)目里少花幾個(gè)通宵。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99久久婷婷国产综合精品草原| 国产对白刺激视频| 中日韩免费看男女操逼大全| 亚洲熟女中文字幕在线| 嗯嗯啊啊好疼| 麻豆国产视频精品观看| 久久少妇人妻| 亚洲欧洲精品视频发布| 夜夜骑日日| 一本色道久久综合精品婷婷| 国产夜夜操| 五月天精品| 国产av强奸美女| 人人乐大香蕉| 中文字幕二区| 久久精品中文字幕观看| 伊人久久亚洲中文字幕| 丰满欧美放荡少妇在线| 无码抄逼网| 素颜老阿姨乱情色| 日亚韩精品视频二区三| 囯产精品强| 高清无码一区二区三区| 欧美香蕉视xxx| 欧美99999| 狼人综合婷婷激情四射 | 亚洲欧美97√| 2017人人操,人人摸| 久久精品天美| 奇米狠999| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 亚洲资源吧| 91日本在线观看| 性九九九九九九| 欧美日韩性爱电影在线| 人妻五十路在线| 日韩人妻制服丝袜av| 熟妇艹鸡八| 不卡中文字幕aⅴ在线| 夜夜嗨AV蜜臀av| 大二网站亚洲| 久久亚洲熟妇在线视频| 国产精品蜜臀久久久久无码AV| 成人网欧美风情| 日韩在线地址一| www.99热在线只有精品| 密乳AV免费观看| 91老熟女老女人国产老太| 乱伦a片视频| 超碰精品人妻狠狠干| 日人妻视频91| 94色色电影网| 青青草成人视频在线观看二区 | 97九色人妻| 男人的天堂VA| 人妻一区二区三区| 人人操人人大香蕉| av天堂加勒比| 日韩国产品视频中文字| 白丝被操91| 成人情色综合网| 极品五月天噜噜| 自慰白浆在线观看| 狠狠狠狠狠干| 中文字幕第9页萱萱影音先锋| 久久这里只有精品9| 女人的天堂大香蕉网| 亚洲性高潮| 五月色网| 香蕉色网| 麻豆天美电影一区二区| 99性爱在线观看| 日韩精彩视频| 国产久久日韩网站导航| 免费的黄片wwwwww| 熟妇xxxxx性春色| 欧美老妇女内射网址| A 天堂在线观看视频| 欧美精品欧美精品系列 | 久久草视频污视频| 五月丁香综合啪啪| 久久久久成人亚洲国产| 亚洲欧美首页| 99热99re6国产在线播放| 激情五月天婷婷| 免费的很黄很污的全部视频| 久久久久夜夜夜夜| 中国少妇啪啪视频| 日本黄色XXX| 久久五月婷| 人妻干天天| 亚洲成人ab| 和协影院中文字幕三区| 后入 亚洲 美女 射| 自拍偷拍国产欧美日韩韩| 亚洲日精品| 97 九色| 色五月综合| 女色综合| 九九热九九| 伊人嫩草| 综合网97| 亚洲天堂日本| 大香蕉伊在线久草麻豆天堂故事| 极品五月天噜噜| 国产一区二区三区视频在线看| 91N综合网| 丁香婷婷激情五月天无毒不卡 | 欧美啪啪啪91| 夜夜爽爽夜夜精品视频| 97AV在线免费观看| 人妻插插人妻人| 国产麻豆一级精品视频| 欧洲色色| 久久人妻视频网| 国产无码一二三区| 欧美日韩第一页| 久久毛卡| 久久东京国产精品视频| 免费在线观看国内色片网站网址 | 日韩精品色呦呦| 白丝av| 啊啊啊免费| 深爱伊人影院| 亚洲图片欧美偷拍| 青青色在线观看| 国产精品扒开腿做爽爽爽视频| 超碰97极品9| 日本性一区| 日韩人妻无码精品系列| 青青草成人视频在线观看二区| 久久超碰、| 91在线丝袜视频| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师 | 肉动漫无遮挡h在线观看| 久久精品人妻一区| 色九九综合| 人妻少妇精品久久久久久| 欧美熟女妇同| 啪啪AV导航| 久久香蕉国产线看观看猫咪av| 亚洲情色一区综合| 91欧美偷拍| 欧美性,色九九| 美女裸体麻豆天美蜜桃91| 黄色二级片网站| 亚洲色入欧美| 精品人妻一区二区免费蜜桃视频| PMv在线观看| 台湾成人无码AV| 99热只有这里有精品| 亚洲美女自拍偷拍视频| 97色婷婷| 亚洲欧美setu| 9美女超碰在线免费观看| 天天综合中文字幕 91| 国产老女人久久毛| 大香蕉一区二区在线观看.| 91影库| 久久久精品视频免费观看| 99久热| 五月天丁香欧洲日韩| 91色黑人少妇| 亚洲,欧美,综合网| 亚洲日本激情| 啊a一区在线| 一区二区三区日韩欧美| 男人高清无码一区二区| 国产亚洲禁久一区二区| 啪啪91| 97精品综合久久网| 97视频在线观看免费高清| 亚洲国产精品无石码久久 | 黄色电影在线播放综合网站| 天天做日日做| 日韩ab网| 日少妇视频| 亚乱色| 日本 成 人 小说 电影 一区二区| 青青草国产亚洲精品久久| 亚洲精品九九九九九九| 高清无码一区二区三区| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 99久久综合| 秋霞午夜视频一区二区| 亚洲欧美首页| 97亚洲一区| 亚洲第一男人天堂| 国产欧美日韩精品中文| 欧美熟妇精品黑人巨大一二三区| rivers-china.com| 久久久精品国产亚洲AV无码| 中文精品少妇天堂| 亚洲精品成人动漫在线| 99色视频| 91色夜| 岛国精品视频在线观看| 狠狠久久亚洲欧美专区| 无码九九| 亚洲九月丁香| 亚洲AV在线资源| 操操操五月天婷婷丁香影院| 大鸡巴久久久| 欧美91变态| 色色综合网站| 欧美成人一区二区| 亚洲成人在线高清| 欧美熟妇精品黑人巨大一二三区| 人人妻人人玩人人澡人人爽| 久久久婷| 蜜臀th| 中文字幕日韩人妻视频一区二区三区| 蜜臀久久久国产| 日本性感人妻91| 99自拍B亚洲 | 亚洲综合一| 国产又黄又爽又刺激久久久久久| 国产欧美日韩女同性恋ww喷水精品| 欧美人妻色| 国产乱色国产精品免费视| 爆乳免费黄网站| 伊人热综合| 国产精品午夜成人福利| 波多野结衣一级视频| 欧美日韩国产在线| 国产精品日本无码A片| 超碰人人妻| 丝袜美腿亚洲| 久久精品72| 一区二区三区免费视频入口| 欧美激情久久久久| 亚洲成人性爱在线观看| 日日噜噜夜夜久久亚洲一区二区| 日韩熟女无码| 国产女人9999| 五月丁香婷婷色| 春色综合网| 91新在线欧美| 综合色播| 正在播放国产精品一区| 久久人人爽av亚洲精品天堂桃色 | 国产一区二区在线看| av天堂精品久久| 亚州Av天美传媒| 97色婷| 中文字幕一区二区三区50路| 97资源免费视频| 美女黄频a美女大全免费皮| 精品性爱久久视频| 国产一区二区啪啪视频| 蜜臀久久99精品久久久电影| 热久久无毒不卡| 亚州男人天堂| 97色妞| 日本亚洲熟女视频| 3PAV乱伦视频| 男人天堂久久精品不卡| 北京专精特新企业招聘信息| 国产69精品久久久久99尤物| 视频一区二区免费在线| 婷婷九月国产| 天无日色综合| 国产精品交换一区二区| 青青操网| 天堂亚洲精品| 国产精品色哟哟| 国产精品久久久久久 百度| 高精欧美色| 亚洲自拍欧美国产首页网曝| 久久香蕉国产传媒一区剧情天美| 一级啊性爱在线视频| 久久区| 土豪酒店各种姿势玩弄极品幼稚| 4141514逼喷水三级片| 欧美专区日本专区| 一级毛片电影免费看| 欧美色图97| 在线日韩视频| 囯产乱伦一区二区三女| 先锋激情∨在线视频播放| 人人妻人人爽| 美国三级日本三级久久99| 久九干| 成年女人18级毛片毛片免费观看| 国产视频人人网| 男人的天堂三级| 啊啊好多水| 久久久爆乳翘臀一线天伦理视频| xxx0国产在线播放| 操www| 久久久久久久九九九九| 日本一线产区和二线产区伦理片| 亭亭在线资源| 狠狠做深爱婷婷久久二区| 久久久久9久久久久| 超碰人人妻| 在线观看综合精品亚洲| www.99中文字幕| 中文操逼字幕| 91天堂网| 桑老女人九区| 亚洲极品| 精品一区二区三区蜜桃| 中文字幕视频免费| 精品国产91久久久久久一区黄无| 日本久操视频| 免费看美国人人爽,人人操| 日韩成人电影AV| 日本日皮视频逼| 日本色色色色色视频| 天堂俺去俺来也www久久婷婷| 日韩成人性日韩成人性爱视频在线免费观看| 婷婷激情四射| 很很操在线| 91一区二区三区蜜桃| 91无码西班牙视频在线| 97色伦97色伦国产欧美| 成人性爱av| 黄页| 欧美乱欲| 亚州综合色| 99热一区二区三区四区| 狠狠久久手机视频精品| 欧美性生活免费网| 日韩精品中文字幕二区| 99色色网| 天天操狠狠日夜夜干超碰撸com视频在线观看| 国产精品亚洲一区二区三区四区 | 9I1性色影院| 欧美性色欧美| 96麻豆精品一区二区三区| 九九九九免费| 老司机福利青青草| 国产又黄又爽又刺激久久久久久| 亚洲成人久久一区二区| 欧美人妻精品一区二区| av资源在线观看少妇| 人人性爱视频免费| 欧美经典一区二区三区 | 欧美精品三级黄片| 婷婷操视频| 日韩欧无码一区二区三区免费不卡 | 亚洲 欧美 综合 91| 亚欧洲一区二区视频| 91成人亚洲色图| 老女人综合网| 天天操夜夜操狠很操| 97综合在线| 九九亚洲| 精品一区二区成人| 中文字幕av久久爽Av| 欧美国产一区二区三区麻豆传媒| 婷婷精品久久av影视| 9久久久久| 黄色工厂这里只有精品| 精品一区二区成人| 亚洲综合小说另类图欧美视频激情小说色五月天 | 亚洲春色激情小说| 亚州综合色图| 91人妻熟女| 久久久久亚洲熟妇熟女| 9999免费精彩视频| 男生女生啊啊啊啊| 欧美日韩久久精品爱爱| 7777奇米影视久久| 98色网| 伊人991| 亚洲丝袜诱惑| 亚洲精品日韩国产欧美| 福利风月五月天影院| 国产第二页| 欧美视频一区二区三区| 亚洲一级性爱视频免费看| 91精品微拍福利| AV九九| 国产丸一视频| 成人无码在线超碰网| 99操碰| 欧美论理片| 国产精品又黄又猛又粗| 二色av| 伊人久久亚洲中文字幕不卡| 成年人黄色视频免费| 九九久久综合| 0755午夜福利视频| 超碰成人国产| 色香在线| 精品国产人成在线| 大香蕉啪啪啪啪在线| 日韩AV噜噜噜一区二区三区四区| 国产成人欧美一区二区三区的国产| 亚洲熟女av日韩熟女| 精品美女少妇一区二区三区| 日本高清一本二本免费不卡| 免费又黄又裸乳的视频| 长长久久免费视频| 亚洲一区制服诱惑| 91足交| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 久久久久久亚洲Av无码精| 婷婷色婷婷| 国产熟妇一区二区| 性爱视频啪啪啪啪| 97超碰天天爱天天爱| 国产精品乱码久久久久| 青青草密桃在线播放| 91麻豆天美传媒在线| 大香蕉婷婷| 午夜精品久久久久久久第一页按摩| 播播亚洲小说亚洲| 校园春色美腿丝袜| 精品一二三区久久AAA片| 亚洲男人的天堂在线看| 亚洲囯产精品女人久久久| 丝袜喷水在线| 日韩熟女三十乱伦| 久久亚码| 天堂种子在线www网资源| 久久综合久色欧美综合狠狠| av片在线观看免费播放| 天天天干977| 免费观看有码高清视频| 亚州一区二区| 三级片大波波| 人人摸.人人色| 国产精品91ai| 国产精品一区二区三区,亚洲综合| av线电影| 欧美婷婷| 欧美熟妇色| 91美女在线精品视频| 国产 日韩 欧美一区| 狠肏骚人妻| 久久久久亚洲熟妇熟女| 亚洲第91页| 激情专区综合| 91精品老女人| 99啪啪| 久久久免费一级黄片| 久久99干一本高清| 婷婷丁香五月综合| 国产一区二区三区久久久精品| 天天综合网合集91| 高潮内射在线| 中文字幕日韩电影人妻| 啊嗯嗯啊好大好爽| 色老汉玖玖爱| 懂色中文一区二区三区| www久久精品| 天美精品av| 日韩人妻制服丝袜av| 一区二区播放| 少妇三P| 色婷久久| 国产午夜激片Av毛片不卡| 狠狠入| 久久蜜色情在线视频xxx免费观看| 91爆操视频| 欧美—性—交—色| 亚91亚洲网| www.色99| 91人妻人人澡人人爽人人精品| 97超碰超欧美。| 爆操无码| 亚洲丨在线| 欧美另类自拍 | 爽爽淫人网| 91成人久久| 麻豆国产精品午夜视频| 午夜噜噜噜| 伊人aaa| 九月丁香| 久久直播国产| 色欲天天综合久久久无码网中文| 国产精品另类一区大香蕉| 5252色欧美在线| 九九综合色| 亚洲乱码国产乱码精网站| 国产女大学生AV| 亚洲综合在线91| 丝袜狂射91| 大香蕉在线86| 91女在线观看| 久久久久久久久久久久97 | 人人插人人搞人人操| 日本精品网站在线中文| 天堂v无码免费视频| 四虎精品亚洲| 久久综合超碰| 97超碰亚洲| 欧美精品丝袜久久久中文字幕| 草草影院日本第一页| 人人弄人人摸| 深喉吞精| 少妇的嫩逼图片| 91美女国产在线| 狠狠做深爱婷婷久久二区| 你草精品在线视频| 久草成人福利导航| 日本三级小说中文字幕| 国产性感骚丝袜在线| 色香色香欲天天天影视综合网| 久久久久久久久成人av解说| 日韩久久.一级黄色片| 粉嫩av久久一区二区三区| 亚洲无无码αⅴ每日更新| 曰韩人妻中文字幕在线| 人人操人人爽人人操人人| 少妇综合网| 99亚洲国产精品色一区二区三区| 超碰成人人人爽人人爽| 91久青| 96久久科窝| 97人人超| www.四虎在线| 亚洲蜜臀懂色| 天天天乱色综合全| 九九九九97| 青操影院| 久久人妻一区二区三区高清| 干b网| 992大香蕉| 国产女人9999| 91视频女生| 天天亚洲| 综合网欧美| 97香蕉网| 久久久久久久九九九九九九| 日韩性爱一级片| 大香蕉乱级| 国产亚洲精品av一区| 亚洲色图欧美视频| 国内精品999| 亚洲色图超碰在线| 77国产精品| 五月天久久人妻| 97精品中文字幕| 另类欧美| 激情小说在线视频| 日韩无码一级黄色av片| 蜜乳中文字幕a在线| www.91人妻.com| 在线另类| 久久熟女久| 亚洲精品电影| 91精品在线播放| 国产精品丝袜在线| 日日插夜夜| 五月天色色色| 综合97亚洲| 亚洲淫色网中文| chaopen97久久| 100啪啪视频大全| 91在线超高颜值国产| 国模精品娜娜一二三区| 亚洲国成人情色好看电影| 中国黄色特级精品一区二区三区片| 欧美亚洲首页| av网站免费线看| 国产亚洲深夜激情| 99热亚洲天堂| 色欧美在线| 家庭乱伦国产| 992这里有精品| 中字一区| 成人精品久久久午夜福利| www.zbzhongsen.com| 一区二区三区无卡视频在线观看| 久久久91| 久久精品国产72国产精品福利 | 色香网| 欧美aa一级片| 色色热| 国产精品97超碰| 欧美一级特黄淫片在线观看| 国产日韩精品一区二区三区| 清纯唯美综合| 性色av婷婷久久一区二区点复制| 熟妇人妻一区二区三在线| 蜜臀久久99精品久久久久久-DVD原版全| 福利色色| 性色av一区二区| 欧州一区二区三区四区| 亚洲色偷偷色噜噜狠狠99网| 精品国产乱码久久久影院| 国产精品制服丝袜清纯唯美| 亚洲欧洲日韩国产自在线| 四虎影库国产精品免费| 亚洲a色| 动漫爆乳3D奶水一区在线观看| 久久一二三四五六七八九区区区| 久九九九九九九九热| 日逼国产| q2午夜理论片夜色av| 亚洲无码超碰免费| 色色色网站| 红桃视频高潮| 可以免费看黄片的视频| 久久一二三四五六七八九区区| 中文字幕丰满人妻日本| 色综合九九| 欧美日韩一二三| 天天色粽合合合合合合合| a啊啊啊啊啊啊啊啊一区二区| 无码乱人伦中文视频| 另类老少妇| 日本熟女中文| 9118禁| 99999精品成人| 豆花视频操逼网址 | 岛国福利在线精品播放| 狼人综合婷婷激情四射 | 肉嘟嘟www视频在线观看高清| 情色五月天网| 亚洲aV性爱| 久久久亚洲精品中文字幕人妻| 丁香五月色情| 看全色黄大色大片免费视频| 日本高清一区二区在线| 9Ⅰ超碰| 很狠操| 国产99久久99热这里只有精品15| 九九在线精品| 欧美性爱第一页久久| 91成人国产综合久久精品蜜月| 国产av强奸美女| 国产成人精品一区| 日本欧美成人片AAAA| 东北少妇高潮zzzz| 大香蕉亚洲中文| 少妇久久久久| WWW.加勒比人妻一区不卡.com| 色综合久久88色综合久久天天| 乱操9999| 99精品在线| 精品无吗m| 99亚洲人人| 国产精品自拍xxxx| 久久久日本电影| 大香蕉综合网| 国产精品另类一区大香蕉| 家庭乱伦网站国产| 精品久久97| 亚洲综合图色在线| 国产精品呦一区二区三区| 91亚洲黄色网| 91精品国久久久久久无码| 五月丁香成人网| 亚洲国产av中文字幕久久| 欧美与日韩97| 超AV色女| 99热99在线| 亚洲精品乱码线路中文字幕| 高清视频一区| 男人的天堂2010| 精品视频免费在线一区| 日本熟妇自慰性高潮一区二区三区| 五月天色图| 欧美aa一级片| 神马久久午夜| 激情四射五月天| 亚洲男人的天堂V| 久久婷色| 一级@啪啪视频| 大干人妻| 乱码熟妇人妻久久久| 91一起操| 一级啊性爱在线视频| 国产精品亚洲色婷婷久久久| 综合第一页| 美女天天干| 狠狠干综合| 思思热影视| 性综合网| 伊人久久AV诱惑悠悠| 人妻少妇久久中文| 久久精品视频在线观看| 精品久久久av| 午夜精品一区二区三区三上悠亚| 亚洲操人| 五月天玖玖资源站| 97人人操人人摸人人爱| 无码 黑人一区二区三区| 夜夜无码| 蜜臀在线看片| 亚洲综合色在线| 欧洲精品一二三在线| 国产天天看| 人人爽夜夜操| 欧美18禁91| 操我啊啊啊啊啊| 色综合中文字幕不卡| 26uuu欧美| 色色婷| 五月婷婷无码| 污啪啪啪视频| 天天狠| 91蜜臀在线久久久久| 一本一道人妻久久一区二区三区| 五月婷婷六月天| 天天综合精品| 丁香啪啪| 久久婷婷综合国际产色怕| 欧美一区二区三区日韩| 成人福利视频网| 成人网址在线观看| 五月综合激情| 天天干一区二区| 国产福利夜| 超碰97最新人妻| 超碰 另类 欧美| 啊操爽品善一区二区三区| 亚洲精品骚逼| 亚洲人综合| 97人人夜| 色综合大香蕉| 欧美性xxxxx狂欢| 尹人免费观看视频在线| 亚洲欧美综合区自拍另类| 最新中文字幕精品在线| 欧美精品1区2区3区| 日日干夜夜干| 欧美日韩人人早| 91超碰在线播放| 久久久久久十| 男女做爰猛烈动高潮A片免费应用 少妇厨房愉情理伦片bd在线观看 不卡中文字幕aⅴ在线 | 中文字幕大片三级狠狠干| 91女人的网站| 99热在线不卡| 美女淫穴| 少妇高潮九九九九九九九| 91观看 国产白丝| 国产精品乱码久久| 国产AV色黄看到爽| 亚洲精品久久久久久久蜜桃臀| 国产 日韩 欧美 人妻 熟女 中文| 嗯嗯嗯嗯啊啊啊好紧好大| 按摩中文字幕| 青青草中日韩在线| 国产精品操| 亚洲欧美日韩免费电影| 九九色逼| www.高清无码诱惑一区.com | 国产av高清版| 亚洲高清在线se| 中文字幕乱亚洲美女精品一区| 女同女同恋久久级三级| 亚洲国产一级精品毛一级精品看免费视频| 久久五月天婷婷| 亚洲人成网www| 天美传媒在线一区| 亚洲黑人在线| 女人午夜视频777| 中文字幕精品丝袜| 丝袜加勒比| 九九九精品| 91丨九色丨国产丨人妻在线 | 综合大香蕉美。| 久久产精品一区二区三区电影| 秋霞免费AV| 99热导航| 91高清欧美| 日韩av电影成人在线| 一块操欧美| 九九九九九精品十六| 久久久精品网站| 欧美视频在线视频免费va| 人人综合| 麻豆三极片| 亚洲欧美日韩综合在线尤物 | 60秒免费小视频| 久久免费少妇| 九九99精品| 超碰 国产熟女精品一区| 91网站18+| 久久五十路熟女人妻| 日本片日本片祼观看网站在线看中文版网页在线看 | 麻豆一区在线| 91综合色噜噜| 激情小说五月天| 97精品一区二区视频在线观看| 色黄色美女大长腿午夜视频| 久久久婷婷| JIZZJIZZ亚洲女人被躁| 91爽啪| 久久久久99精品成人片蜜臀| 日韩激情中文字幕有码| 骚女高跟AV在线| 欧美区亚洲区偷拍区 | 国产精品人妻无码久久久老鸭窝| 9久热| 噜噜噜噜天天狠狠| 九色视频91| 蜜臀色乳| 日韩无码a片| 老女人日韩美91| 97精品视频| 欧美性特| 久久三区四区| www久久久| 国产午夜精品一区二区三区牛牛| 国产又猛又粗又爽又黄| 欧美性爱一区| 国产无马在线| 超碰人妻久久人妻中文97| 成人性爱免费播放| 国产这里只有精品| 91丝袜在线播放| 亚洲AV小说| 亚洲欲色| 高清不卡国产| 老熟女乱伦一区| 天天综合网1| 亚洲五码一区二区三区| 啊啊啊啊啊舒服| 欧美精品999| 久久系列| 中文字幕精品人妻丝袜| 欧洲一区二区三区四区在线观看| 99re在线视频国产| 久久男女激情视频网站| 欧美无圣光在线| 九九精品99| 91亚洲狠狠色| 婷婷综合五月| 久久一区二区蜜桃| 97在线免费看| 亚洲成人在线高清| 亚洲欧洲第二视频在线观看色图| 午夜偷拍久久熟女| daxiangjiao你懂的| 成人5码视频| 淫淫综合网| 色噜噜国产在线| 欧美亚洲素人制服精品| 国产精品熟妇一区二区三| 亚洲国产一区二区日韩专区| 蜜臀久久99'精品久久久| www.99视频| 92性色国产午夜福利在线661 | 岛国毛片手机在线观看| 加勒比五月天| 久久99午夜精品一区人妻| 亚洲男人天堂AV| 黄呦呦在线| 男人的天堂一区三区| 超碰97护士| 人妻内射一区二区在线视频| 91成人在线免费视频| 久久九九网| 久久久亚洲| 国产热av| 久久综合日韩亚洲欧美| 美女写真| a片自拍直播视频| 超碰久久网| 97天天爽| 伊人黄色片| 男同专区一区二区三区在线| 久久精品视频28| 日本污ww视频网站| 收看日本人日bb| 欧洲精品二区| 亚州综合图片| 91美女视屏| 国产精品永久免费10000| 九久久精品| 久久免费看高潮毛片韩国| 婷婷五月天av| 国产高清MV操逼视频| a片在线播放| 啪啪啪男女亚洲中文字幕99| 亚州高清色综合| 久久精品视-一级做a爰片性色毛片16美国-中国女与老外在线精品 | 在线视频日韩欧美国产| 超碰在线91| 超碰在97| 日本一天色道久久久精品视频| 密桃99999| 国产女人成人精品视频| 中文字幕日韩人妻视频一区二区三区| 日日夜夜摸| 综合色久欲| 粉嫩小泬久久久一区二区| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 精彩视频日韩| 欧美强奸乱| 日韩欧美大力操| 国产白丝av| 91精品国产91熟女| 女上位精品在线| 加勒比AV天堂| 高跟伊人julia ann| 欧美成不卡网| 欧美日不卡| 久久午夜伦| 色色色热| 亚洲丝袜色| 日本精品一区三区| 丁香五月天社区| www激情| 嗯啊抽插大香蕉网页| 日韩中文字幕国产| 国产后入式在线观看| 日韩人人精品| a人欧美综合天堂麻豆| 夜夜操天| 熟妇最新先锋一二三区| 野狼激情网| 久综合网| 五月婷婷色| 激情自拍 校园春色| 亚洲中文一区二区三区视频| 人、人、摸,人、人、草| 免费观看国产小粉嫩喷水精品午| 激情 欧美 亚洲 小说| 欧美一级A一级a爱片久久| 久9爱精品| 黄色高清久久无码依人| 亚洲欧美综合色| 97久久超碰国产网站| 色天堂综合| 日韩一级二级三级免费看完整版国语版 | 婷婷五月天激情四射| 亚洲91色| 欧美亚洲自拍另类人妻| 国产精品久久天天干| 三级特黄60分钟播放| 国产精品一级特黄aaa大片在线观看| 色综合av男人天堂| 少妇无码av专区线| 国产精品盗摄 偷窥盗摄| 日韩国产欧美伦理在线| 久久鲁干| 天天影视综合网欧美精品| 亚洲综合网图| 色悠久久久av| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 日韩在线性爱免费视频| 日本羞羞的视频在线播放| 国产日韩区| 操美女高潮抽搐白浆| 中文字幕黑人大片| 国模不卡一本二本三电影| 91碰碰| 亚洲狠| 久久性爱视频免费看| 91在线视频免费播放| 性爱av网站| 中文字幕精品丝袜| 91天美传媒精品| 国产深喉| 国产乱伦视频污| 肉嘟嘟www视频在线观看高清| 狠狠干婷婷| 久久伊人网视频一区二区三区| 伊人亚洲综合| 亚洲另类春色| 午夜福利精品| 久久精品欧美一区蜜桃| 超碰97色色| 91九九九吃| 日本三级精品| 日本免费人成视频播放120秒| 久久综合激情| 精品一区二区麻豆| 先锋女优在线观看视频| 中文色综合| av国产无码| 97久久久精品| 青青草久草| 97欧美性爱| 成人熟女视频一区二区三区| 久色99999| 色综合av综合久久| 久久久夜夜嗨免费视频| 亚洲永久AV无码精品秋霞| 骚熟女AV网| 中文字幕一区二区在线日韩精品| 午夜精品久久久久久久男人的天堂 | 国产精品午夜福利视频| 亚洲一二三四区| 色综合久| 91少妇香蕉久久精品| 欧美日韩小说| 日韩丰满熟妇| 欧美大香蕉97| 亚洲欧美人妻| 激情五月综合| 疯操AV| 操国产高清| 欧美激情五月天| WWW美腿丝袜香蕉中文| 影音先锋日本一区二区| 国产蜜臀精品一区免费尤物| 96超碰网| 国产女人与拘做受视频免费| 色婷婷亚洲婷婷| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 99av| 啪啪啪综合网| 91精品国产91久久久久久久久久久久| 色网在线视频观看免费| 久久精品天美| 国产强奸乱伦无码视频| 91麻豆天美国产欧美日| 9 1果冻精品视频| 亚洲欧洲网站免费观看| 成熟熟女国产精品一区二区| 三级激情网站| 人人手机欧洲亚洲国产人妻| 美女黄页网站| 99热这里只有精品9| AV女资源| 国产亚洲99久久精品| 亚洲日韩av一区二区三区百合| 日本加勒比无码专区| 资源在线观一 二| 加勒比海人人操超碰在线| 国产成人网| 久久香蕉国产线看观看亚洲女人| 青青操综合网| 破处bbq| 国产日本久久免费精品| 婷婷探花久久精品一区| 丁香五月天堂| 久久久久久九九九九九| 婷婷五月天激情网| 国产日产欧产美韩系列麻豆免费| 人人干人人操人人..com| 九热超碰| 久久久久9| 久欲AV| 在线看片国产精品每日更新| 久久久成人免费av电影| 成人午夜无码视频| 成人国产二区三区在线,男女精品。| 九九亚洲| 精品久| 欧美色图片91| av网站在线观看了| 高清不卡 中文 人妻| 亚洲精品国产熟女| 亚洲日韩久久精品一区| 久久久久国产一区二| 拍拍拍拍大尺度黄色三级片拍拍拍拍拍照| 国产粉嫩出水在线播放| 日夜尻逼网| 九九黄色网| 欧美乱伦专区| 男人的亚洲天堂| 国产精品久久久久中文字幕| 91免费看中出视频| 五月婷网站| 久久久96精品| 夜夜操91744565| 精品人妻av在线播放| 97久操| 久久久久亚洲精品| 成人一级性爱| 欧美亚洲综合高清在线| 操美女人妻| 青娱乐日韩无码| 一级成人性爱| 人妻铁牛TV| 久噜噜| 蜜臀在线免费观看在线免费观看| 2020中文在线一区二区三区| 亚洲男人天堂av| 老司机午夜福利视频一区二区| 99热久| 人人干人人搞人人摸| 97在线免费观看| 大屁股熟女一区二区三区| 75大香蕉| 日本高清一区二区在线| 欧美操人视频| 在线视频资源| 中国小夫妻勾搭露脸淫荡对白| 色五月亚洲| 黄色av一区二区在线| 欧美真人抽搐一进一出gif| 97综合久第一页| 欧美激情欧美精品| 国产女上位好爽在线| 在线无码操| 一区二区三区免费视频入口| 97超碰日韩| 久久精品综合| 97精品97| 97精品久久久久久久| 亚洲美女精品| 五月丁香影视| 婷婷综合激情| 999岛国大片| 国产av又色又爽又黄| 中文字幕精品一区欧美| 天堂精品| 欧美少妇高潮久久91| 少妇三P| 国产四虎在线| 久热99| 亚洲精品人妻吞精av| 岛国网址国产| 中文字幕日韩人妻视频一区二区三区 | 无码聚合| 日本免费专区| 2018天天干在线视频| 青娱乐淫乱1314| 精品亚洲| 欧美日韩在线视频网站| 91天天| 97亚洲欧美| 日韩一级欧美一级国产一级台湾| 97久久超碰日韩精品| 亚洲AV色图一区| 亚洲综合 欧美| 亚av顶级裸体一区二区三区四区五区 | www.久久超碰| 丝袜美腿丝袜| 97在线播放| 加勒比综合88| 91丝袜在线观看| 日本综合色图| 殴美性天天| 老熟女91| 加勒比综合网| 青娱乐国产剧情av一区| 日韩激情电影中文字幕| 人人操人人狠狠操| 国产区性爱在线视频秋霞豆| 亚洲精品无码少妇久久| 国产精品蜜乳AV| 啪啪免费| 日韩乱中文| 中文字幕亚韩| 五月天成人综合| 婷婷精品| 神马精品视频| 久久鲁夜| 久久久96精品| 67914在线兔费成人视频| 久久99国产精品| 国产成人超碰在线| 亚洲欧美色图小说| 国产精品探花在线| h在线看免费版在线看| 偷拍伦理视频| 91扒丝袜综合在线| 不卡一区视频| 亚洲人妻久久久| 超碰在线免费一区二区三区| www.男人的天堂| 综合伊人网12色| 久久精品国产亚洲AV高级北京| 免费啪啪啪网站18岁| 色哟哟的毛片| 97资源免费视频| juliaann欧美丝袜办公室|