azkomgec logo
azkomgec.hu
Kapcsolat
Bejelentkezés Regisztráció

AI-tömörítés: Brutális VRAM-megtakarítás az Nvidiától

8 megtekintés

Forrás: GS+

infopctech
Blurred placeholder
Kép forrása: GS+
AI összefoglaló

Az Nvidia új AI-alapú tömörítési technológiája drasztikusan csökkentheti a nagy nyelvi modellek memóriahasználatát. Egy demó során a korábbi 6,5 GB helyett mindössze 970 MB VRAM-ra volt szükség a modell futtatásához.

Tovább az eredeti cikkhez

Kapcsolódó cikkek