DQN 将 Q-Learning与深度学习结合，用深度网络来近似动作价值函数，而 Q-Learning 则是采用表格存储；
DQN 采用了经验回放的训练方法，从历史数据中随机采样，而 Q-Learning 直接采用下一个状态的数据进行学习。