Im AA-Index lag Qwen3.8-27B bei 52,0 Punkten und damit über Claude Opus 4.5 mit 41,9, GPT-5.2 mit 43,3 und Gemini 3 Pro mit 40,6. Diese Vergleichsmodelle gehörten Anfang 2026 zur Spitze. Eine gebrauchte RTX 3090 mit 24 GB kann das Modell ausführen.
Der Index misst überwiegend Coding, Werkzeuggebrauch und Kontexttreue; nur einer seiner neun Benchmarks prüft reines Faktenwissen. Im c’t-Gegentest ordnete Qwen mehrere deutsche Bundespräsidenten falsch zu und erfand eine Quelle zu den Sams-Büchern.
Die Hardwaregrenze bleibt deutlich: Für Kimi K3 reichten vier Mac Studio mit zusammen rund 1,5 TB Speicher nicht aus. Auf demselben GPU-Verbund lief Qwen unter vLLM etwa viermal schneller als unter Ollama. Qwen3.8-27B ist damit lokal zugänglich, aber nicht in jeder Umgebung praktisch.