아티피셜 애널리시스, 10월 말 'Intelligence Index v5' 공개 예고… Terminal-Bench Science 및 비공개 코딩 벤치마크 도입
AI 벤치마크 분석 플랫폼 아티피셜 애널리시스(Artificial Analysis)가 10월 말 차세대 모델 종합 평가 지표인 'Intelligence Index v5'를 출시합니다. 프론티어 AI 모델 측정을 위해 Terminal-Bench Science와 비공개 데이터셋 기반 신규
#TerminalBench
TAU-HOME.COM에서 TerminalBench 태그로 묶인 글입니다.
상태·행동 대조 학습 기반 초고속 System 1 모델 'CLM-8B' 공개: DeepSWE 81.6% 달성
Azalia Mirhoseini와 Jacky Kwok 연구팀이 상태와 액션을 대조 학습으로 연결하는 시스템 1 모델 CLM-8B를 공개했습니다. 경량 파인튜닝을 통해 DeepSWE 81.6% 및 Terminal-Bench 2.1 87.6%로 에이전틱 코딩 SOTA를 경신하고 기존 Jev