정성훈
    기말과제 주제 선정 시 고려해야 할 사항들 (계속 업데이트) ★★★



교육
딥러닝 강화학습(Deep RL)에 입문하려는 사람들을 위해 OpenAI에서 제작한 교육용 문서
   
구현 
목적 내용 기타
강화학습 대표 예제 수행을 통한 이론 이해 및 프로그래밍

OpenAI Gym 강화학습 환경을 이용

  • 인터넷에 Gym 환경기반 강화학습 오픈소스가 많음으로 해당 코드를 참고해서 구현
  • 기존 코드에 환경에 추가 동작(actions)을 넣거나 추가 기능을 넣어서 확장
  • 확장된 환경에서 강화학습이 잘 동작하는지 확인

 

강화학습 테스트를 위한 많은 환경 시뮬레이터 이용

  • 책이나 인터넷에서 소개한 강화학습 환경 시뮬레이터를 이용해서 강화학습을 구현
  • 책이나 인터넷에서 사용한 강화학습 방법과 다른 방법으로 해당 문제에 적용해서 성능을 비교

 

 

대표적인 RL 테스트/벤치마크 사이트

 

강화학습 환경 툴킷 
  • Gymnasium – RL 에이전트 테스트를 위한 표준 환경 인터페이스 (이전 OpenAI Gym). gymnasium.farama.org
강화학습 구현 Frameworks
  • Stable Baselines3 – 안정적인 PyTorch 기반 단일 에이전트 RL 알고리즘 구현. stable-baselines3.readthedocs.io

  • RLlib – 대규모 분산 학습 및 멀티 에이전트 RL에 특화된 확장성 높은 라이브러리. docs.ray.io/en/master/rllib/index.html

  • TorchRL – PyTorch 재단에서 개발한 모듈식 고성능 RL 라이브러리. pytorch.org/rl/

  • CleanRL – 알고리즘 작동 원리 이해를 돕는 투명하고 간결한 단일 파일 RL 구현 프레임워크. cleanrl.dev

  • Tianshou – 고성능, 병렬 및 분산 RL을 위한 PyTorch 기반의 유연한 라이브러리. tianshou.readthedocs.io

 

학생 수준 측면
단계 상황 내용 기타
초급

기계학습, 딥러닝 이론 조금 알고
pytorch 구현 경험 없는 저학년 학생

OpenAI gym 에서 제공하는 게임환경에서 새로운 규칙/행동 등을 정의하여 구현하고 해당 규칙/행동을 추가되었을 때 최적의 행동을 찾는 에이전트를 강화학습으로 구현

OpenAI Gym Beta

gym github 사이트

중급

기계학습, 딥러닝 이론 잘 알고
pytorch 구현 경험 있는 고년차 학생으로 안정적 주제 선정하려는 학생

OpenAI gym 에서 게임환경을 스스로 정의하여 구축하고 해당 게임 환경을 강화학습으로 해결하는 주제

국내논문이나 해외 논문에서 다룬 주제를 참고해서 그 수준으로 구현

ALE Documentation

Environments - ALE Documentation

고급

기본적인 이론과 딥러닝 구현 경험이 모두 있는 학생으로 도전적인 주제를 선정하려는 학생

강화학습의 다양한 응용분야 중 본인이 관심있는 응용분야에서 강화학습으로 해당 문제를 해결하는 주제를 선정해서 구현

본인이 관심있는 주제를 강화학습으로 해결하는 방법을 스스로 제안해서 해결

강화학습의 문제점을 해결하는 새로운 방법론 제시
예)
- 보상함수 설계의 어려움
- 복잡한 문제에서 조숙 수렴 문제

 

   

 

 

 

 

 

 

  등록일 : 2023-11-04 [02:01] 조회 : 1883 추천 : 3 다운 : 0   
 
△ 이전글기말과제 제안발표 내용
▽ 다음글2023 강화학습 기말과제 조편성 및 주제
강화학습
번호 ⓒ 제 목 추천
⊂최근 게시글⊃ 2026 강화학습 기말과제 조편성 및 주제
26-11-05
기말과제 제안발표 내용
기말과제 최종발표 내용
기말과제 최종보고서 내용/양식
기말과제 주제 선정 시 고려해야 할 사항들 (계속 업데이트) ★★★©
기말과제 주제 선정 관련 자료 (기술 전망, 저널 논문, 석사/박사 학위 논문 등) ★...
바닥부터 배우는 강화 학습 (강의노트 전체)
149 2026 강화학습 기말과제 조편성 및 주제 비공개o 0
148 2025 강화학습 기말과제 조편성 및 주제 14
147 l비지도 학습의 예(Self-Organizing Feature Map, SOFM) 2
146 └❶ SOFM 학습 방법 10
145 개념 정리 4
144 └❶ 알파고와 MCTS 비공개o 0
143 └❶ Q함수 추가 설명 비공개o 0
142 2024 강화학습 기말과제 조편성 및 주제 13
141 기말과제 최종보고서 내용/양식 3
140 기말과제 최종발표 내용 4
139 기말과제 제안발표 내용 3
138 기말과제 주제 선정 시 고려해야 할 사항들 (계속 업데이트) ★★★© 3
137 2023 강화학습 기말과제 조편성 및 주제 22
136 2022 강화학습 기말과제 조편성 및 주제 11
135 2021 강화학습 기말과제 조편성 및 주제 13

[1][2][3][4][5][6][7][8][9][10]