Tehnologija Hrvatska

Koliko VRAM-a zapravo troši kontekst na lokalnom modelu?

Bug.hr·05. 06. 2026. 04:20:00

Jedna od zbunjujućih postavki na alatima za korištenje lokalnih modela je veličina konteksta, koja jede bitno više memorije nego bismo pomislili i čije stvarno zauzeće VRAM-a ne možemo „intuitivno“ predvidjeti jer ovisi o tipu i arhitekturi modela i mora se izračunati

Izvor: Bug.hr. Sva autorska prava pripadaju izvornom mediju. KLIK je agregator vijesti.
Koliko VRAM-a zapravo troši kontekst na lokalnom modelu?
Foto: Bug.hr

Povezane vijesti