Techyon
학습 절차 공개가중치·데이터·학습단계 체크포인트

제38호11월 18일

K2-Horizon, 전체 학습 절차 공개

K2-Horizon은 K2 Team이 공개한 언어 모델 6종이다. 저자들은 완성된 가중치뿐 아니라 전체 개발 이력을 함께 공개했다고 밝혔다. 함께 발표한 arXiv 사전 공개 논문은 이용 가능한 학습 데이터, 학습 중간 단계의 모델 체크포인트, 학습 로그, 개발부터 평가와 배포까지 아우르는 코드를 설명한다.

출처

논문K2-Horizon: A Frontier Fleet of Open Source Language Models

출처를 바탕으로 AI가 작성