Introducing Mistral Large 4
Summary
Mistral AI가 코딩, 에이전트 워크플로, 사이버 보안 등에 특화된 1조 개 파라미터 규모의 차세대 오픈 웨이트 멀티모달 모델 'Mistral Large 4'의 공개 프리뷰를 발표했습니다.
Key Points
- ML4(Mistral Large 4)는 총 1조 개의 파라미터 중 520억 개의 활성 파라미터를 사용하는 네이티브 멀티모달 모델로, 이달 말 오픈 웨이트로 공개될 예정입니다.
- 유럽 내 자체 데이터센터에서 3,800개의 NVIDIA Grace Blackwell GPU를 사용해 처음부터 학습되었으며, 160개 이상의 다국어 데이터를 포함합니다.
- 사이버 보안, 금융, 법률 등 엔터프라이즈 환경에서 오픈 모델 최고 수준의 성능을 제공하며, 특히 자체 배포를 통해 기업 맞춤형 보안 연구 및 정책 적용이 가능합니다.
Notable Quotes & Details
Notable Data / Quotes
- ML4 is a 1 trillion-parameter natively multimodal model with 52 billion active parameters.
- Weights drop end of this month.
- ML4 was trained from scratch on 3,800 NVIDIA Grace Blackwell GPUs in Mistral’s own datacenters in Europe.
- spanning more than 160 languages, including every official language of the European Union
Intended Audience
AI 연구자, 소프트웨어 개발자, 엔터프라이즈 보안 및 IT 의사결정권자