datawhalechina/easy-rl

해결하는 문제

강화 학습(RL)은 종종 밀도 높은 수학과 분산된 자료를 통해 가르쳐져서, 초보자(특히 중국어 사용 학습자)가 시작하기 어렵게 만듭니다. 이 프로젝트는 잘 알려진 강의 노트(리홍이의 딥 강화 학습, 저우보레이의 RL 개요, 리커자오의 RL 과정 및 기타 고전 자료)를 하나의 일관된 책(일명 '머쉬룸 북')으로 결합한 완전하고 초보자 친화적인 중국어 튜토리얼을 구성합니다. 또한 연습 문제, 코드 노트북, 논문 읽기를 제공하여 학습자가 한 곳에서 이론에서 실습으로 진행할 수 있게 합니다.

작동 방식

튜토리얼은 13개 이상의 장으로 구성되어 핵심 RL 주제를 단계별로 다룹니다: 기초, 마르코프 결정 과정, 테이블 기반 방법으로 시작하여 정책 그래디언트, PPO, DQN 및 그 변형, 액터-크리틱, 희소 보상, 모방 학습, DDPG, 그리고 AlphaStar에 대한 심층 분석까지. 각 장은 연습 문제와 함께 제공되며, 관련된 경우 실용적인 코드 노트북(예: Q-learning, Sarsa, Monte Carlo, Policy Gradient, PPO, DQN, Double DQN, Dueling DQN, PER DQN, Noisy DQN, A2C, DDPG)도 제공됩니다. 콘텐츠는 온라인으로 공개되어 언제든지 읽을 수 있으며, PDF로 다운로드할 수도 있습니다. 인쇄판도 존재합니다(人民邮电出版社에서 출판, 편집자가 초기 초안을 넘어 다듬음).

대상 독자

이 프로젝트는 중국어로 강화 학습을 배우고자 하는 모든 사람을 위해 설계되었습니다—학생, 실무자, 독학자 모두. 리홍이 강의의 유머러스하고 예제 중심의 교수 스타일과 체계적인 연습 문제 및 코드 덕분에 RL이 처음이라도 접근하기 쉽습니다. 이 책의 별명 '머쉬룸 북'은 독자가 마리오가 버섯을 먹은 후처럼 에너지와 힘을 얻기를 바라는 마음을 반영합니다.

하이라이트

• 잘 알려진 중국어 RL 강의 콘텐츠를 중심으로 구성되어 고전 이론을 접근하기 쉽게 만듭니다.
• 대부분의 장에 연습 문제가 포함되어 있으며, 수정 사항을 위한 정오표 페이지가 있습니다.
• 많은 알고리즘에 대해 실행 가능한 코드 노트북, 두 가지 프로젝트 워크스루(Q-learning 및 DQN, DDPG), JoyRL 링크(오프라인 및 온라인 버전)를 제공합니다.
• RL이 Minecraft를 플레이하는 ICLR'25 오럴 및 시각적 RL 논문 목록을 포함한 고전 RL 논문 해석 섹션이 포함되어 있습니다.
• 무료 온라인 버전, 다운로드 가능한 PDF(압축된 저해상도 버전 포함), 그리고 정교한 인쇄본(구매 링크 포함)으로 제공됩니다.