飞机大战ai通过dqn实现

借鉴

飞机大战源码 github
王者荣耀ai训练(试了一下，发现电脑带不动，就改了一点，训练其他游戏)

源码

通过网盘分享的文件：PlaneWar (2).zip
[链接]（https://pan.baidu.com/s/1N4OorR7b36Zml8MadGmI6g?pwd=1234）提取码: 1234

dqn的介绍(ai回复)

深度Q网络（DQN）：
DQN是一种结合了深度学习和Q学习的强化学习算法。它使用深度神经网络来估计状态-动作值函数（Q值）。
在代码中，self.policy_net和self.target_net分别是策略网络和目标网络，它们都是深度神经网络。
经验回放（Experience Replay）：
经验回放是一种常用的技术，用于打破数据之间的相关性，提高训练的稳定性和泛化能力。
在代码中，transitions是从经验池中随机抽取的一批经验，这些经验被用来训练网络。
目标网络（Target Network）：目标网络用于稳定训练过程，通过定期将策略网络的参数复制到目标网络，减少训练过程中的不稳定性和噪声。
在代码中，self.target_net是目标网络，每隔self.target_update步，将self.policy_net的参数复制到self.target_net。
策略梯度（Policy Gradient）：策略梯度是一种强化学习算法，通过最大化期望回报来更新策略。
在代码中，通过计算当前状态-动作值和期望状态-动作值之间的差异（即损失），然后使用反向传播和优化器来更新策略网络。
梯度下降（Gradient Descent）：梯度下降是一种优化算法，用于最小化损失函数。
在代码中，使用PyTorch的优化器（如self.optimizer）来执行梯度下降，更新策略网络的参数。
Epsilon-Greedy 策略：Epsilon-Greedy策略是一种探索与利用的平衡策略，通过以一定概率随机选择动作，以探索未知状态，同时以一定概率选择当前最优动作，以利用已知信息。
在代码中，self.epsilon控制了探索的概率，如果self.epsilon大于self.epsilon_min，则将其乘以self.epsilon_decay，以逐渐减少探索的概率。
损失函数（Loss Function）：损失函数用于衡量预测值和真实值之间的差异，常见的损失函数包括均方误差（MSE）和交叉熵损失（Cross-Entropy Loss）。
在代码中，使用均方误差损失函数（self.criterion）来计算当前状态-动作值和期望状态-动作值之间的差异。