Sudo su (@sudoingX)

모든 모델을 'octopus invaders' 동일한 프롬프트·게임 사양으로 테스트해 단일 GPU에서 자율적으로 빌드하면 통과시킨다고 설명. qwen 3.5 9B Q4를 RTX 3060에서 첫 시도했을 때 화면은 빈 상태였고 11개 파일에 2,699줄을 생성했지만 렌더링은 이루어지지 않았다고 보고.

https://x.com/sudoingX/status/2032838998926962711

#qwen #rtx3060 #benchmark #octopusinvaders #llm

Sudo su (@sudoingX) on X

i run every model through octopus invaders. same prompt, same game spec if a model can build this autonomously on a single GPU it passes. if it can't it doesn't. qwen 3.5 9B Q4 on a RTX 3060. first attempt was blank screen built 2,699 lines across 11 files and nothing rendered.

X (formerly Twitter)