Inoffizieller SVG-Kreativtest vergleicht Qwen3- und Sol-Modelle
Der Reddit-Nutzer /u/sterby92 hat einen eigenen inoffiziellen Kreativ-Benchmark für lokale Sprachmodelle entwickelt, der den bekannten „Pelikan auf einem Fahrrad"-SVG-Test ablösen soll – ein in der LocalLLaMA-Community verbreiteter Standardprompt zur visuellen Kreativitätsprüfung. Als neues Testszenario dient der Prompt „Create a svg of a horse on a blue bycicle in the desert, with a camel in the background" – inklusive des absichtlich belassenen Tippfehlers „bycicle", der prüft, ob Modelle fehlertolerante Prompts korrekt interpretieren. Verglichen werden drei quantisierte Modelle: Qwen3.8-27B in der UD-Q4_K_XL-Quantisierung, Sol 5.6 auf „high"-Einstellung sowie Qwen3.6-35B in der UD-Q6_K_XL-Quantisierung. Die Auswahl kombiniert zwei verschiedene Modellgrößen aus der Qwen3-Familie mit dem Sol-Modell, das aus einer anderen Entwicklungslinie stammt. SVG-Generierung gilt als anspruchsvoller Test, weil die Modelle strukturierten, syntaktisch korrekten XML-Code erzeugen müssen, der gleichzeitig semantisch sinnvoll das beschriebene Bild darstellt. Ein formales Scoring oder eine systematische Auswertungsmethodik ist im Post nicht dokumentiert; die Ergebnisse basieren auf visueller Begutachtung. Der Post spiegelt den Community-Trend wider, kreative und ungewöhnliche Szenarien als niedrigschwellige Alltagstests für Lokalmodelle einzusetzen, bevor aufwändigere Benchmarks herangezogen werden.
Frag die KI zum Artikel
Folgefragen zu Headline, Quelle und Volltext — Antwort streamt in wenigen Sekunden.
Verwandte Beiträge
- MEINUNGreddit.com1w
Kleinere lokale Coding-LLMs übertreffen größere Modelle im Praxistest
- MEINUNGreddit.com1w
Prompt-Qualität entscheidet: Qwen3-27B liefert bessere Ergebnisse mit detaillierteren Anweisungen
- MEINUNGsimonwillison.net3w
Simon Willison testet Mistral Large 4 mit kuriosem SVG-Prompt
- MEINUNGreddit.com2d
Qwen 3.8 FN als lokales Modell für OpenGL-Portierungs-Benchmark getestet
Inoffizieller SVG-Kreativtest vergleicht Qwen3- und Sol-Modelle
Der Reddit-Nutzer /u/sterby92 hat einen eigenen inoffiziellen Kreativ-Benchmark für lokale Sprachmodelle entwickelt, der den bekannten „Pelikan auf einem Fahrrad"-SVG-Test ablösen soll – ein in der LocalLLaMA-Community verbreiteter Standardprompt zur visuellen Kreativitätsprüfung. Als neues Testszenario dient der Prompt „Create a svg of a horse on a blue bycicle in the desert, with a camel in the background" – inklusive des absichtlich belassenen Tippfehlers „bycicle", der prüft, ob Modelle fehlertolerante Prompts korrekt interpretieren. Verglichen werden drei quantisierte Modelle: Qwen3.8-27B in der UD-Q4_K_XL-Quantisierung, Sol 5.6 auf „high"-Einstellung sowie Qwen3.6-35B in der UD-Q6_K_XL-Quantisierung. Die Auswahl kombiniert zwei verschiedene Modellgrößen aus der Qwen3-Familie mit dem Sol-Modell, das aus einer anderen Entwicklungslinie stammt. SVG-Generierung gilt als anspruchsvoller Test, weil die Modelle strukturierten, syntaktisch korrekten XML-Code erzeugen müssen, der gleichzeitig semantisch sinnvoll das beschriebene Bild darstellt. Ein formales Scoring oder eine systematische Auswertungsmethodik ist im Post nicht dokumentiert; die Ergebnisse basieren auf visueller Begutachtung. Der Post spiegelt den Community-Trend wider, kreative und ungewöhnliche Szenarien als niedrigschwellige Alltagstests für Lokalmodelle einzusetzen, bevor aufwändigere Benchmarks herangezogen werden.
Frag die KI zum Artikel
Folgefragen zu Headline, Quelle und Volltext — Antwort streamt in wenigen Sekunden.
Verwandte Beiträge
- MEINUNGreddit.com1w
Kleinere lokale Coding-LLMs übertreffen größere Modelle im Praxistest
- MEINUNGreddit.com1w
Prompt-Qualität entscheidet: Qwen3-27B liefert bessere Ergebnisse mit detaillierteren Anweisungen
- MEINUNGsimonwillison.net3w
Simon Willison testet Mistral Large 4 mit kuriosem SVG-Prompt
- MEINUNGreddit.com2d
Qwen 3.8 FN als lokales Modell für OpenGL-Portierungs-Benchmark getestet