LLM X/Twitter
Nemotron 3 Nano, 5달러 미만 RL로 수학 정확도 22%에서 91%까지 상승
소형 오픈 모델도 짧은 RL 루프로 특정 과제 성능을 크게 끌어올릴 수 있다는 신호다. NVIDIA는 Nemotron 3 Nano가 5달러 미만 실험에서 22%에서 91%로 올랐다고 전했다.
1분 소요 20 조회
태그
#prime-intellect 태그가 달린 기사
소형 오픈 모델도 짧은 RL 루프로 특정 과제 성능을 크게 끌어올릴 수 있다는 신호다. NVIDIA는 Nemotron 3 Nano가 5달러 미만 실험에서 22%에서 91%로 올랐다고 전했다.
MIT와 Prime Intellect가 주도하는 RLM은 LLM이 Python REPL과 서브-LLM을 활용해 자체 컨텍스트를 능동적으로 관리하게 하며, 모델 컨텍스트 윈도우 대비 100배 긴 입력을 처리한다.