openrlhf/openrlhf

Ray·vLLM 기반 분산 아키텍처 위에서 SFT·DPO와 PPO·DAPO·GRPO 등을 지원하는 RLHF 프레임워크 openrlhf/openrlhf의 최신 릴리스 v0.11.2와, 근거 자료가 밝히는 범위와 한계를 정리한 글.

GitHub 설명: An Easy-to-use, Scalable and High-performance Agentic RL Framework based on Ray (PPO & DAPO & REINFORCE++ & VLM & TIS & vLLM & Ray & Async RL)

스타

★ 10.1K

포크

1K

언어

Python

라이선스

Apache-2.0

최신 릴리스

v0.11.2