RoLaQ: 2-Bit KV-Cache für Multi-Head Latent Attention mit 2,51× Durchsatz · Lumeric
Beitrag
FORSCHUNGarxiv.org· ArXiv cs.LG★Pro6h
RoLaQ: 2-Bit KV-Cache für Multi-Head Latent Attention mit 2,51× Durchsatz
Pro-Quelle
Dieser Beitrag stammt aus einer Pro-Quelle. Mit Lumeric Pro liest du den vollständigen Eintrag inklusive „Warum es zählt", Quelle und verwandten Beiträgen.