바이두 문신이 ERNIE 5.5 플래시 미리보기를 발표하며, 11월 25일 전에 오픈소스 가중치를 공개합니다

IT 가정 에 따르면, 바이두의 문신 대모델이 ERNIE 5.5 Flash Preview를 발표했습니다. 이는 이전에 발표된 Base 모델을 기반으로 한 첫 번째 후 훈련 버전입니다. 이 모델은 총 매개변수 280B, 활성화 매개변수 14B를 가지고 있으며, 1M의 맥락을 지원합니다. 공식적으로 프로그래밍, 3D 모델링, 지식 작업, 콘텐츠 창작 등에서 뛰어난 성능을 보인다고 합니다.

ERNIE 5.5 Flash Preview는 지능 수준과 추론 효율성을 모두 고려하여 여러 기준 테스트에서 경쟁력 있는 점수를 기록했으며, 빠른 디코딩 속도를 유지합니다. 모델 API는 천범 플랫폼에 온라인 되었으며, 가중치는 11월 25일 이전에 오픈 소스화될 예정입니다.

바이두는 이 모델이 후 훈련 과정에서의 중간 버전이라고 밝혔으며, 동일한 크기의 모델 중에서 비교적 경쟁력 있는 성능을 보였지만, 여전히 훈련이 충분하지 않아 일부 능력 결함이 있을 수 있다고 덧붙였습니다. 후 훈련은 계속 진행 중이며, 이후 공식 버전에서 최적화될 예정입니다.