reinforcement-learning - OpenAI Gymnasium，是否有支持算法的库？

Question

OpenAI 发布了一个名为 Gymnasium 的新库，该库将取代 Gym 库。有许多库具有支持健身房环境的 RL 算法实现，但是界面随着 Gymnasium 发生了一些变化。是否有支持 Gymnasium 算法的库？我尝试了 CleanRL、KerasRL、RLib 和其他一些，但它们都不起作用，目前唯一的方法是手动实现它们，我说得对吗？

Answer 1

Stable Baselines3 还没有支持 Gymnasium 的版本，但是这个 pull request解释了如何在 gymnasium 中安装和使用它。

首先安装该 PR 的版本:

$ pip install git+https://github.com/carlosluis/stable-baselines3@fix_tests

假设你已经安装了gymnasium，你可以运行:

# Important step to override `gym` as `gymnasium`.
import sys
import gymnasium
sys.modules["gym"] = gymnasium

# Sample code which works
from stable_baselines3 import PPO
env = gymnasium.make("CartPole-v1", render_mode="rgb_array")
model = PPO("MlpPolicy", env, verbose=1)