Grok 3 Beta 출시 노트 / 새로운 기능

xAI는 광범위한 사전 학습 지식과 고급 추론 능력을 통합한 모델 제품군인 Grok 3 Beta를 출시했습니다. Colossus 슈퍼클러스터를 사용하여 이전 SOTA 모델보다 10배 더 많은 컴퓨팅 자원을 활용해 학습된 Grok 3는 수학, 코딩, 세계 지식 및 지시 이행 작업에서 상당한 개선을 보여줍니다.

Advanced Reasoning via Test-Time Compute

Grok 3는 대규모 강화 학습(RL)을 사용하여 사고 과정(chain-of-thought)을 정교화하는 특화된 추론 모델인 Grok 3 (Think) 및 Grok 3 mini (Think)를 도입합니다. 이 모델들은 테스트 시간 컴퓨팅(test-time compute)을 활용하여, 최종 답변을 내놓기 전 몇 초에서 몇 분 동안 되짚어보고, 오류를 수정하며, 다양한 문제 해결 전략을 탐색할 수 있습니다.

추론 모델의 성능 벤치마크는 다음과 같습니다:

• AIME 2025: Grok 3 (Think)는 최고 수준의 테스트 시간 컴퓨팅(cons@64)을 사용하여 93.3%를 달성했습니다.
• GPQA (Graduate-level expert reasoning): Grok 3 (Think)는 84.6%를 달성했습니다.
• LiveCodeBench: Grok 3 (Think)는 코드 생성 및 문제 해결에서 79.4%를 달성했습니다.
• AIME 2024: Grok 3 mini는 95.8%에 도달했습니다.
• LiveCodeBench: Grok 3 mini는 STEM 과업에서 80.4%에 도달했습니다.

사용자는 "Think" 버튼을 통해 이러한 기능을 사용할 수 있으며, 이 버튼은 모델의 내부 추론 과정을 검사할 수 있게 하여 완전한 투명성을 제공합니다.

Pretraining and General Performance

추론 기능이 비활성화된 경우, Grok 3는 고품질의 즉각적인 응답을 제공하며 비추론 모델 중 SOTA 결과를 달성합니다. Grok 3는 이전 xAI 모델보다 8배 더 큰 100만 토큰의 컨텍스트 창을 특징으로 하며, 이는 방대한한 문서를 처리하고 지시 이행 정확도를 유지하는 능력을 향상시킵니다.

주요 벤치마크에서의 비교 성능 (Grok 3 Beta vs. 경쟁사):

Benchmark	Grok 3 Beta	Gemini 2.0	DeepSeek-V3	GPT 4o	Claude 3.5 Sonnet
AIME’24	52.2%	—	39.2%	9.3%	16.0%
GPQA	75.4%	64.7%	59.1%	53.6%	65.0%
LCB	57.0%	36.0%	33.1%	32.3%	40.2%
MMLU-pro	79.9%	79.1%	75.9%	72.6%	78.0%
LOFT (128k)	83.3%	75.6%	—	78.0%	69.9%
MMMU	73.2%	72.7%	—	69.1%	70.4%
EgoSchema	74.5%	71.9%	—	72.2%	—

chocolate이라는 코드명을 가진 모델의 초기 버전은 이전에 LMArena Chatbot Arena 리더보드에서 Elo 점수 1402점으로 1위를 차지했습니다.

Grok Agents and DeepSearch

모델의 능력을 실제 세계의 interaction과의 연결로 확장하기 위해, xAI는 추론과 도구 사용(인터넷 접속 및 코드 인터프리터 포함)을 결신합한 Grok Agents를 도입합니다.

첫 번째 에이전트인 DeepSearch는 인류 지식의 전체 코퍼스에서 정보를 합성하고, 상충하는 사실을 추론하며, 종합적인 보고서를 생성하도록 설계되었습니다. 이는 실시간 뉴스 합성부터 심층 과학 연구까지 다양한 유즈케이스에 적합합니다.

Availability and Roadmap

• User Access: Grok 3는 X의 ° Premium 및 Premium+ 사용자에게 제공됩니다. Premium+ 사용자는 Think 및 DeepSearch에 대해 더 높은 사용 한도를 가진 즉각적인 액세스 권한한을 가집니다.
• API Access: Grok 3 및 Grok 3 mini(표준 및 추론 버전 모두 포함)는 향후 몇 주 내에 API 플랫폼을 통해 출시될 예정입니다. DeepSearch는 Enterprise 파트너에게 API를 통해 제공될 예정입니다.
• Future Development: 학습은 계속 진행 중입니다. Enterprise API에 대한 향후 업데이트에는 도구 사용, 코드 실행 및 고급 에이전트 기능이 포함될 예정이며, 확장 가능한 감독(oversight)과 적대적 강건성(adversarial robustness)에 초점을 맞출 것입니다.