TAU-HOME.COM
LOADING

Muse-Glimmer-30B를 절반으로 줄인 14B 툴콜링 모델 Xyntetik-Kvist-14B 공개

14B급 텍스트 생성 모델 Xyntetik-Kvist-14B가 에이전트 워크플로와 툴콜링용으로 공개됐습니다. 너비 프루닝과 증류로 만든 14.4B dense student 구조, safetensors·GGUF 제공, 연구 환경 한정 57/60 툴 작업 통과 수치를 정리합니다.

tau · 2026년 10월 8일

#Xyntetik-Kvist-14B #툴콜링 #오픈모델 #에이전트 #증류

Muse-Glimmer-30B를 절반으로 줄인 14B 툴콜링 모델 Xyntetik-Kvist-14B 공개

2026년 10월 7일, 14B급 텍스트 생성 모델 Xyntetik-Kvist-14B가 에이전트 워크플로와 툴콜링용으로 소개됐습니다. Hugging Models 계정의 X 스레드가 모델을 소개했고, 모델 가중치는 Hugging Face에서 공개됐습니다.

API 호출과 구조화된 출력으로 툴콜링 에이전트 루프를 실행하는 14B급 오픈 모델 개념도

이미지 출처: @HuggingModels X 게시물 첨부 이미지

이번 공개의 핵심은 크기 자체가 아니라 제작 방식에 대한 설명입니다. X 스레드는 너비 프루닝(width pruning)과 증류(distillation)를 결합해 모델을 가볍게 유지하면서 실제 작업을 처리하도록 만들었다고 소개합니다. 제공 형태는 safetensors와 GGUF이며, 로컬 또는 클라우드에서 실행할 수 있다는 점이 X 스레드에서 확인됩니다.

14.4B dense student 구조와 학습 예산

공개된 학습 기록과 릴리스 설명을 종합하면, 모델 계보는 30B급 부모 모델을 너비 방향으로 프루닝해 52개 레이어를 유지한 14.4B dense student로 증류했다는 설명으로 일치합니다.

  • 파라미터 규모: 약 14.4B의 dense student 구조라는 설명이 학습 기록 데이터셋과 릴리스 글에 일치합니다.
  • 학습 예산: 증류 6,000스텝(98.3M 토큰, 162시간)과 에이전트 궤적 학습 1,440스텝으로 제시됩니다.
  • 학습 방식: 강화학습(RL) 없이 증류만 사용했다는 설명이 복수 증거에 일치합니다.
  • 정책 교사: 툴 선택 정책 교사로는 Ornith-1.0-9B가 언급됩니다.

다만 부모 모델이 Muse-Glimmer-30B라는 점은 X 스레드에서 muse_glimmer 태그가 시사한다는 추론형 표현으로 제시됐습니다. 모델 카드 원문 확인 전까지 단정하지 않는 편이 안전하며, 이 글도 태그 기반 시사 수준으로만 다룹니다.

연구 환경 한정의 57/60 수치와 실제 의미

실용성을 판단할 때 가장 중요한 수치는 xyntetik.com과 Hugging Peers, MindPattern 요약에 일치하는 대목입니다. 학생 모델이 부모가 푸는 60개 중 57개의 held-out 클로즈드루프 툴 작업을 통과했다는 연구 범위 한정 성능입니다.

이 수치가 의미하는 바와 한계는 다음과 같습니다.

  • 대상 작업: 연락처, 날씨, 항공편, 환율, 날짜, 단위, 주식 등 60개 held-out 클로즈드루프 툴 작업 중 학생 모델이 57개 통과로 설명됩니다.
  • 실행 환경 한정: 해당 연구 환경과 Runner의 muse 와이어 포맷에 한정된 수치이며, 범용 성능으로 확대 해석해서는 안 됩니다.
  • 일반 모델 대체 아님: Hugging Peers 요약은 이 모델이 부모나 범용 모델의 드롭인 대체재가 아니며, held-out 텍스트에서 부모 대비 KLD 0.762를 기록했다고 명시합니다.
  • 실용 조건: 24GB 카드에서 Q8_0(약 15.4GB)으로 구동되는 툴콜링 에이전트 루프용 연구 student라는 설명이 일관됩니다. 160회 실행 중 7회에서 추론 루프가 보고됐으므로 계산기 같은 보조 툴 구성이 권장된다는 요약도 있습니다.

X 스레드가 언급한 1,036회 다운로드 수치는 2026년 10월 7일 게시 시점 수치로, 시간이 지나면 변합니다. 관심 있는 독자는 가중치가 아니라 학습 기록 데이터셋과 증거 페이지를 함께 읽는 편이 정확합니다.

출처