d1-3B 의사결정 모델 커스텀 데이터 파인튜닝 가이드: Unsloth와 TRL 활용법
무료 GPU 환경에서 Unsloth와 Hugging Face TRL을 사용해 d1-3B 의사결정(Decision) 모델을 30분 만에 파인튜닝하는 2종의 실습 노트북과 데이터 분할·옵션 셔플링 핵심 주의사항을 정리했습니다.
TAU-HOME.COM에서 TRL 태그로 묶인 글입니다.
무료 GPU 환경에서 Unsloth와 Hugging Face TRL을 사용해 d1-3B 의사결정(Decision) 모델을 30분 만에 파인튜닝하는 2종의 실습 노트북과 데이터 분할·옵션 셔플링 핵심 주의사항을 정리했습니다.
하네스나 학습 코드 수정 없이 Claude Code, Codex 등 10개 코딩 하네스를 강화학습 환경으로 전환하는 허깅페이스 OpenEnv 프록시와 TRL 기반 훈련 스택이 완전 오픈소스로 공개되었습니다.
허깅페이스와 리퀴드 AI가 특정 에이전트 하네스 종속을 탈피하기 위해 공개한 멀티 하네스 강화학습 구조와 OpenEnv, Harbor, TRL 연동 워크플로우를 정리합니다.
Impact-Site-Verification: 9b3ebd10-6c45-44cf-a014-5b8c19b7b285