Pac-Man游戲中NPC的進(jìn)化神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)方法.pdf

1、Pac-Man是一款風(fēng)靡世界的追逐躲避類游戲，其中的非玩家角色（一般稱為NPC，即Non-Player Character）Ghost是由腳本控制的，而腳本控制的NPC通常存在著行為單一的缺點(diǎn)。使用進(jìn)化神經(jīng)網(wǎng)絡(luò)訓(xùn)練NPC使其行動(dòng)靈活多變，得到自學(xué)習(xí)自適應(yīng)的agent。目前關(guān)于Pac-Man的研究主要集中于如何使得Pac-Man具有更強(qiáng)的躲避能力，而對(duì)于NPC角色Ghost的研究還比較缺乏。
　　Yannakakis曾使用進(jìn)化神經(jīng)網(wǎng)

2、絡(luò)來(lái)訓(xùn)練Ghost，但他的方法存在一些缺點(diǎn)。其一是訓(xùn)練得到的Ghost只有一種行動(dòng)類型，表現(xiàn)不出原版中Ghost行為多樣的特點(diǎn)；其二是他所使用的游戲場(chǎng)景過(guò)于簡(jiǎn)單，適應(yīng)度函數(shù)、參數(shù)的選擇設(shè)定不能適用于真實(shí)環(huán)境。針對(duì)以上問(wèn)題，我們做了以下工作：首先，尊重原游戲中Ghost性格不同的設(shè)定，對(duì)需要訓(xùn)練的Ghost設(shè)計(jì)相應(yīng)的適應(yīng)度函數(shù)，單獨(dú)訓(xùn)練，達(dá)到它們表現(xiàn)各異的效果；其次，通過(guò)使用WCCI2008的Pac-Man游戲引擎進(jìn)行仿真，既恢復(fù)了原游戲