이미지: METAL
요약
- LG AI연구원이 K-EXAONE-2.0-750B-A37B-FP8을 허깅페이스에 공개했다
- 총 파라미터 7500억, 활성 파라미터 370억 규모의 MoE(Mixture of Experts) 구조다
- 10개 언어를 지원하며 apache-2.0 라이선스로 배포됐다
- 모델명
- K-EXAONE-2.0-750B-A37B-FP8
- 개발사
- LG AI연구원(LGAI-EXAONE)
- 구조
- Mixture of Experts(exaone_moe)
- 지원 언어
- 10개 언어
- 라이선스
- apache-2.0
- 관련 논문
- arXiv:2608.04505
LG AI연구원이 대규모 언어모델 K-EXAONE 시리즈의 신규 버전인 'K-EXAONE-2.0-750B-A37B-FP8'을 허깅페이스에 공개했다. 모델명에 담긴 수치대로 총 파라미터는 7500억 규모이며, 실제 추론 시 활성화되는 파라미터는 370억 수준의 MoE(Mixture of Experts) 구조로 알려졌다.
이번 모델은 FP8 양자화 버전으로 배포됐으며, transformers·safetensors 포맷을 지원하고 vLLM, SGLang 등 주요 추론 프레임워크와 호환되는 것으로 확인됐다. 태그에는 exaone_moe, lg-ai, exaone, k-exaone, moe 등이 포함돼 있으며, 10개 언어를 지원하는 대화형(conversational) 모델로 소개됐다.
라이선스는 apache-2.0으로 공개돼 상업적 활용을 포함한 폭넓은 이용이 가능한 것으로 보인다. 모델과 관련된 기술 내용은 arXiv에 등록된 논문(2608.04505)에서 확인할 수 있는 것으로 알려졌다.
앞서 LG AI연구원은 2360억 규모의 K-EXAONE 모델을 공개한 바 있어, 이번 750B급 모델은 기존 라인업 대비 파라미터 규모를 크게 확장한 후속작으로 풀이된다.
댓글