GROK 4.8 / 2.5 TRILLION 2.5T 모델은 얼마나 큰 걸까? 일론 머스크가 예고한 Grok 4.8의 크기를 숫자 대신 ‘거대한 종합병원’으로 바꿔 설명해 봤다. “Grok 4.8, which is a 2.5T model trained with our new C++ software stack, will finish training this week and start RL” — Elon Musk, 2026-09-14 01 / SHORT ANSWER 2조 5천억 개의 조절 다이얼 AI 업계에서 ‘2.5T 모델’이라고 하면 보통 2.5 trillion, 즉 2조 5천억 개의 파라미터를 가진 모델 이라는 뜻으로 읽는다. 파라미터는 학습 과정에서 조정되는 숫자다. 문맥, 단어 관계, 문제 해결 패턴 같은 것을 담는 수많은 작은 다이얼이라고 생각하면 쉽다. Grok 4.8은 쉽게 말해 2,500,000,000,000 개의 다이얼을 조정하며 학습하는 초거대 AI다. 다만 머스크의 짧은 게시물에는 ‘2.5T parameters’라고 명시돼 있지 않고, 상세 모델 카드도 아직 나오지 않았다. 따라서 이 숫자가 총 파라미터를 뜻하는지, 매 순간 계산에 참여하는 활성 파라미터를 뜻하는지는 확인이 필요하다. 02 / SCALE 유명 모델과 비교하면 VS GPT-3 175B 약 14.3× 2020년 공개된 GPT-3보다 파라미터 수 기준 약 14배 VS LLAMA 3.1 405B 약 6.2× Meta의 Llama 3.1 405B와 비교하면 약 6배 VS GROK-1 314B 약 8.0× xAI가 공개한 초기 Grok-1과 비교하면 약 8배 저장 공간도 만만치 않다. 모델 가중치만 단순 계산하면 16비트 정밀도에...
경제, 금융, 교육, 사회적인 이슈들을 심층 분석합니다.