중요팁Reddit
LoRA 파라미터 자동 튜닝 파이프라인 'Auto-SFT' 오픈소스 공개
성공 기준만 정하면 최적 설정 탐색·GGUF 변환·HF 업로드까지 자동화. MIT 라이선스라 사내 파인튜닝 실험에 바로 적용 가능.
요약
Auto-SFT는 입력 데이터셋과 베이스 모델을 바탕으로 최적의 파라미터를 자동으로 탐색하고 파인튜닝을 수행하는 파이프라인 도구입니다. 성공 기준을 설정하면 루프를 통해 여러 테스트를 자동으로 실행하여 최적의 구성을 찾아내고 이를 바탕으로 모델 학습을 진행합니다. 학습이 완료되면 자동으로 GGUF 변환 및 Hugging Face 업로드까지 지원합니다. CLI와 웹 인터페이스를 모두 제공하여 사용 편의성을 높였습니다. MIT 라이선스로 공개되어 실무자 누구나 활용 가능합니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Auto-SFT: Optimizes Parameters to Data and Model
원문 보기 ↗