Mudelisari: Meta Llama 3.3
Parameetrite arv: 70.60B
Struktuur: 70.6B tihe
Litsents: Llama 3.3 Community License; lubatud litsentsitingimustel; piiratud juurdepääs. See on üldine sobivushinnang; enne ärilist kasutust kontrolli mudeli litsentsi.
Algne kontekstiaken: 131 072 tokenit
Kvantimine: Q4_K_M
Q4 mudelikaalude ligikaudne maht: 42.5 GB
Vaikehinnang: 51 GB @ 4096 tokenit
Mudelikaalud / KV-vahemälu / käituskeskkond / varu: 42.5 GB / 3 GB / 1.5 GB / 4 GB
CPU- ja RAM-põhine varuvariant: Ei ole soovitatav
VRAM: 48 GB vähemalt / 64 GB soovituslik
RAM: 64 GB vähemalt / 96 GB soovituslik
Praegune käitusviis: Sellel arvutil ei ole praktiline
Oodatav kogemus: Ei ole soovitatav
Kogu mudeli GPU-le laadimine: Sageli piiratud
Konteksti hoiatus: Q4 mudelikaalud kasutavad enne KV-vahemälu, käituskeskkonna lisakulu ja töölaua varu juba umbes 42,5 GB.
Kõigi mäluhinnangute vaatamiseks libista tabelit külgsuunas.
Teabeallikad
Andmed kontrollitud: 2026-07-30