CRAP: Gemma-4-Finetuning generiert direkt ELF-Binaries ohne Compiler
ToolsHugging Face
CompaniesHugging Face
Warum es zählt
Das Projekt zeigt, dass ein LLM direkt ausführbare Binaries generieren kann – mit 114/144 korrekt auf f16. Gleichzeitig warnt der Autor explizit: Training-Loss (0,038) korreliert nicht mit Task-Erfolg, was Evals ohne Verhaltenstests enttarnt.
— Lumeric Redaktion
CRAP Eval (Binary correctness, 144 cases) · Spitzenwert
114%
f16 (v1.1)
Frag die KI zum Artikel
Folgefragen zu Headline, Quelle und Volltext — Antwort streamt in wenigen Sekunden.
Verwandte Beiträge
CRAP: Gemma-4-Finetuning generiert direkt ELF-Binaries ohne Compiler
ToolsHugging Face
CompaniesHugging Face
Warum es zählt
Das Projekt zeigt, dass ein LLM direkt ausführbare Binaries generieren kann – mit 114/144 korrekt auf f16. Gleichzeitig warnt der Autor explizit: Training-Loss (0,038) korreliert nicht mit Task-Erfolg, was Evals ohne Verhaltenstests enttarnt.
— Lumeric Redaktion
CRAP Eval (Binary correctness, 144 cases) · Spitzenwert
114%
f16 (v1.1)
Frag die KI zum Artikel
Folgefragen zu Headline, Quelle und Volltext — Antwort streamt in wenigen Sekunden.