Techyon
오픈 웨이트사전 학습 체크포인트 다운로드 가능

제10호11월 7일

Baidu, 100만 토큰 베이스 모델 공개

Baidu가 ERNIE 5.5 Flash Base의 사전 학습 가중치를 공개했다. 회사에 따르면 사전 학습 시 문맥 길이는 128K 토큰이며, 미세 조정과 추론에서는 1M 토큰을 지원한다. 텍스트 전용 베이스 모델로, 개발자가 특정 분야에 맞게 조정하거나 지시 이행 학습, 강화 학습 연구에 활용할 수 있다.

출처

모델baidu/ernie-5.5-flash-base

출처를 바탕으로 AI가 작성