gemini-4IMAGE
StarSkirmish StarCraft bot benchmark: Gemini 4 Argon third at 39
A new benchmark had nine models write C++ StarCraft bots in one hour offline; GPT-6 Astra led at 57, Gemini 4 Argon third at 39.
김크립토
@Toby_AgwaBArchived 16 days agoOriginally posted 2026.10.19



김크립토 @Toby_AgwaBOriginally posted 2026.10.19
LLM 스타크래프트 벤치마크(StarSkirmish)가 나왔네요. 1등 GPT-6 Astra 57점, 2등 GPT-6.1 Sol 46점, 3등 Gemini 4 Argon 39점 1. 모델 9개한테 1시간씩 주고 검색 없이 C++로 스타 봇을 짜게 한 다음, 기존 봇 13개와 붙였다고 합니다. - 기존 봇 10개는 사람이 짰다고 하네요. 3개는 글만보곤 출처 불명 2. 사람이 짠 최상위 봇 3개 상대로는 1등 Astra도 7%만 이겼다고 합니다. 3. 재밌는건, 유명 벤치마크 순위랑은 거의 안 맞았다고 합니다. 저는 벤치마크가 어느정도는 마케팅 수단이라고 생각합니다. 벤치맥싱이라고도 하죠?
x.com/toby_agwab/status/2112084726941143103Archived 2026.10.20 10:01