RL-Factory

(★ 1,780)

Train your Agent model via our easy and efficient framework

  • .gitignore
  • install.sh
  • LICENSE
  • main_eval.sh
  • main_grpo.sh
  • main_grpo_megatron.sh
  • main_gspo_megatron.sh
  • main_ppo.sh
  • pyproject.toml
  • README.md
  • requirements.txt
  • requirements_sglang.txt
  • setup.py
  • swift_grpo.sh

# 설치 가이드

1. 코드 내려받기
git clone https://github.com/Simple-Efficient/RL-Factory

깃허브에서 프로젝트 코드 전체를 내 컴퓨터로 내려받습니다.

cd RL-Factory

방금 내려받은 프로젝트 폴더 안으로 이동합니다.

2. 공식 설치 스크립트

쉬움 추천
사전 준비물
  • Python 3 pip 명령어를 쓰려면 Python이 필요합니다.
pip3 install accelerate bitsandbytes datasets deepspeed==0.16.4 einops flash-attn==2.7.0.post2 isort jsonlines loralib optimum packaging peft pynvml>=12.0.0 ray[default]==2.46.0 tensorboard torch==2.6.0 torchmetrics tqdm transformers==4.51.3 transformers_stream_generator wandb wheel

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

pip3 install vllm==0.8.5 # Mainly for Qwen3 model support

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

pip3 install "qwen-agent[code_interpreter]"

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

pip3 install llama_index bs4 pymilvus infinity_client codetiming tensordict==0.6 omegaconf torchdata==0.10.0 hydra-core easydict dill python-multipart mcp==1.9.3

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

설치 후 새 터미널을 열고, 프로그램의 버전 확인 명령(예: --version)으로 정상 설치됐는지 확인하세요.

이 레포의 README에 적힌 실제 명령어를 그대로 가져왔습니다.

3. Docker

쉬움
사전 준비물
  • Git GitHub에서 프로젝트 코드를 내려받으려면 필요합니다.
  • Docker Desktop 컨테이너를 빌드하고 실행하려면 필요합니다. 설치 후 실행해서 백그라운드에 켜두세요.
docker build -f docker/Dockerfile.megatron -t rl-factory .

Dockerfile을 기반으로 실행 가능한 이미지를 빌드합니다.

docker run -p 8080:80 rl-factory

빌드된 이미지를 실제 컨테이너로 실행합니다.

터미널에 docker compose ps 를 입력해 컨테이너들이 Up 상태인지 확인하세요. README에 포트 번호가 적혀있다면 브라우저에서 http://localhost:포트번호 로 접속해보세요.

4. Python

쉬움
사전 준비물
  • Git GitHub에서 프로젝트 코드를 내려받으려면 필요합니다.
  • Python 3 설치 시 'Add Python to PATH' 옵션을 꼭 체크하세요 (Windows).
pip3 install accelerate bitsandbytes datasets deepspeed==0.16.4 einops flash-attn==2.7.0.post2 isort jsonlines loralib optimum packaging peft pynvml>=12.0.0 ray[default]==2.46.0 tensorboard torch==2.6.0 torchmetrics tqdm transformers==4.51.3 transformers_stream_generator wandb wheel

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

pip3 install vllm==0.8.5 # Mainly for Qwen3 model support

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

pip3 install "qwen-agent[code_interpreter]"

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

pip3 install llama_index bs4 pymilvus infinity_client codetiming tensordict==0.6 omegaconf torchdata==0.10.0 hydra-core easydict dill python-multipart mcp==1.9.3

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

pip3 install -e . --no-deps

requirements.txt 등에 명시된 파이썬 라이브러리를 설치합니다.

에러 메시지 없이 실행되고 터미널에 안내 문구가 출력되면 정상입니다.

이 레포의 README에 적힌 실제 명령어를 그대로 가져왔습니다.

// repository documentation