Qwen 3.8 27B 모델이 Aider 벤치마크에서 72.9점을 기록했어요. 이는 Gemini 2.5 Pro와 동일한 점수이며, Claude Opus 4보다 높은 수치예요.
FP8 방식과 256K 컨텍스트 vLLM을 활용해 테스트를 진행했어요. MacBook에서 SOTA 모델과 비슷한 성능을 보여 놀라운 결과가 나왔어요.
DeepSeek R1보다 높은 점수를 기록했으며, DeepSeek Harness를 사용하면 대부분의 Aider 테스트를 해결할 수 있었어요.