메타(Meta)는 최근 새로운 대규모 언어 모델 시리즈인 ’라마4(Llama 4)’를 공개했습니다. 이 시리즈는 ’라마4 스카우트(Llama 4 Scout)’와 ‘라마4 매버릭(Llama 4 Maverick)’ 두 가지 모델로 구성되어 있으며, 텍스트와 이미지를 동시에 처리할 수 있는 멀티모달 기능을 갖추고 있습니다.라마4 스카우트(Llama 4 Scout):• 구조: 총 1090억 개의 파라미터 중 활성 파라미터는 170억 개로 구성되어 있으며, 16개의 전문가 모듈로 이루어진 혼합 전문가(Mixture of Experts, MoE) 아키텍처를 채택하고 있습니다. • 특징:• 업계 최고 수준인 1000만 토큰의 컨텍스트 윈도우를 지원하여, 장문의 문서 요약이나 복잡한 코드 분석에 적합합니다.• 단일..
