Hugging Face Jobs에 Async GRPO with LoRA 기능 추가

hugging face가 자사의 hf jobs 플랫폼 전반에 걸쳐 async grpo와 lora의 통합을 발표했습니다. 이번 업데이트는 특히 대규모 언어 모델에 대해 더욱 효율적인 모델 학습 및 튜닝을 가능하게 합니다. deepseek-ai/deepseek-r1-distill-qwen-1.5b 모델은 이 새로운 기능을 활용한 최초의 모델 중 하나입니다. 유사한 모델을 다루는 연구자와 엔지니어들은 이번 업데이트의 혜택을 받을 것입니다. 이번 통합은 학습 과정을 간소화하여 nccl에 대한 필요성을 줄여줍니다.