교육 OpenAI의 강화학습 교육 리소스인 Spinning Up 메인 사이트: https://spinningup.openai.com/ GitHub 저장소: https://github.com/openai/spinningup 딥러닝 강화학습(Deep RL)에 입문하려는 사람들을 위해 OpenAI에서 제작한 교육용 문서 구현 목적 내용 기타 강화학습 대표 예제 수행을 통한 이론 이해 및 프로그래밍 OpenAI Gym 강화학습 환경을 이용 인터넷에 Gym 환경기반 강화학습 오픈소스가 많음으로 해당 코드를 참고해서 구현 기존 코드에 환경에 추가 동작(actions)을 넣거나 추가 기능을 넣어서 확장 확장된 환경에서 강화학습이 잘 동작하는지 확인 강화학습 테스트를 위한 많은 환경 시뮬레이터 이용 책이나 인터넷에서 소개한 강화학습 환경 시뮬레이터를 이용해서 강화학습을 구현 책이나 인터넷에서 사용한 강화학습 방법과 다른 방법으로 해당 문제에 적용해서 성능을 비교 Gymnasium Documentation ( ★ ★ ★ ) GitHub - openai/gym OpenAI Gym Beta Atari - Gymnasium [1606.01540] OpenAI Gym (arxiv.org) 대표적인 RL 테스트/벤치마크 사이트 Arcade Learning Environment (Atari) – Atari 2600 게임 환경 모음, Gymnasium API로도 사용 가능. ALE gymnasium.farama.org Procgen Benchmark (OpenAI) – 절차적 생성 16개 환경, 일반화·샘플 효율성 평가. OpenAI GitHub OpenAI DeepMind Control Suite / dm_control – MuJoCo 기반 연속제어 태스크. GitHub arXiv MuJoCo – 로보틱스 연구용 물리엔진(무료/오픈소스). MuJoCo GitHub MuJoCo Documentation Meta-World – 로봇 조작 50개 태스크의 메타/멀티태스크 RL 벤치마크. 메타월드 Proceedings of Machine Learning Research PyBullet Gym – MuJoCo 대체 오픈소스 물리엔진 기반 Gym 호환 환경. GitHub Brax (Google) – TPU/GPU에서 대규모 병렬 시뮬레이션 가능한 미분가능 물리엔진. GitHub Google 연구 Unity ML-Agents – Unity 씬을 RL 환경으로 사용/학습(3D 게임·시뮬레이션). unity-technologies.github.io Unity Documentation GitHub NVIDIA Isaac Lab / Isaac Sim – 로보틱스 RL·모션학습; (참고) Isaac Gym은 현재 레거시. isaac-sim.github.io docs.isaacsim.omniverse.nvidia.com NVIDIA Developer PettingZoo – 표준화된 멀티에이전트 RL 환경 인터페이스. pettingzoo.farama.org Safety-Gymnasium – 제약/안전 조건을 포함한 Safe-RL 벤치마크. safety-gymnasium.readthedocs.io ACM Digital Library MineRL (Minecraft) – 대규모 인간 시연 데이터 포함, Gym 인터페이스 제공. minerl.readthedocs.io 강화학습 환경 툴킷 Gymnasium – RL 에이전트 테스트를 위한 표준 환경 인터페이스 (이전 OpenAI Gym). gymnasium.farama.org 강화학습 구현 Frameworks Stable Baselines3 – 안정적인 PyTorch 기반 단일 에이전트 RL 알고리즘 구현. stable-baselines3.readthedocs.io RLlib – 대규모 분산 학습 및 멀티 에이전트 RL에 특화된 확장성 높은 라이브러리. docs.ray.io/en/master/rllib/index.html TorchRL – PyTorch 재단에서 개발한 모듈식 고성능 RL 라이브러리. pytorch.org/rl/ CleanRL – 알고리즘 작동 원리 이해를 돕는 투명하고 간결한 단일 파일 RL 구현 프레임워크.
OpenAI Gym 강화학습 환경을 이용
강화학습 테스트를 위한 많은 환경 시뮬레이터 이용
Arcade Learning Environment (Atari) – Atari 2600 게임 환경 모음, Gymnasium API로도 사용 가능. ALE gymnasium.farama.org
Procgen Benchmark (OpenAI) – 절차적 생성 16개 환경, 일반화·샘플 효율성 평가. OpenAI GitHub OpenAI
DeepMind Control Suite / dm_control – MuJoCo 기반 연속제어 태스크. GitHub arXiv
MuJoCo – 로보틱스 연구용 물리엔진(무료/오픈소스). MuJoCo GitHub MuJoCo Documentation
Meta-World – 로봇 조작 50개 태스크의 메타/멀티태스크 RL 벤치마크. 메타월드 Proceedings of Machine Learning Research
PyBullet Gym – MuJoCo 대체 오픈소스 물리엔진 기반 Gym 호환 환경. GitHub
Brax (Google) – TPU/GPU에서 대규모 병렬 시뮬레이션 가능한 미분가능 물리엔진. GitHub Google 연구
Unity ML-Agents – Unity 씬을 RL 환경으로 사용/학습(3D 게임·시뮬레이션). unity-technologies.github.io Unity Documentation GitHub
NVIDIA Isaac Lab / Isaac Sim – 로보틱스 RL·모션학습; (참고) Isaac Gym은 현재 레거시. isaac-sim.github.io docs.isaacsim.omniverse.nvidia.com NVIDIA Developer
PettingZoo – 표준화된 멀티에이전트 RL 환경 인터페이스. pettingzoo.farama.org
Safety-Gymnasium – 제약/안전 조건을 포함한 Safe-RL 벤치마크. safety-gymnasium.readthedocs.io ACM Digital Library
MineRL (Minecraft) – 대규모 인간 시연 데이터 포함, Gym 인터페이스 제공. minerl.readthedocs.io
Stable Baselines3 – 안정적인 PyTorch 기반 단일 에이전트 RL 알고리즘 구현. stable-baselines3.readthedocs.io
RLlib – 대규모 분산 학습 및 멀티 에이전트 RL에 특화된 확장성 높은 라이브러리. docs.ray.io/en/master/rllib/index.html
TorchRL – PyTorch 재단에서 개발한 모듈식 고성능 RL 라이브러리. pytorch.org/rl/
CleanRL – 알고리즘 작동 원리 이해를 돕는 투명하고 간결한 단일 파일 RL 구현 프레임워크.