GPU-mälu ja RAM
GPU-mälu määrab enamasti mudeli suuruse; RAM toetab rakendusi, andmeid ja mudeli osalist laadimist.
Komponendi ülevaade
PNY NVIDIA RTX PRO 5000 72GB Blackwell Small Box
Graafikakaart kohaliku tehisaru ja kiirendatud töövoogude jaoks
KategooriaGraafikakaardidBrändPNY
Tehnilised andmed
Tootja
PNY
Kontrollitud tootja tootekood
VCNRTXPRO5000-72-SB
Väljalase
2025 Q1
Videomälu
72 GB GDDR7 ECC
Arhitektuur
Blackwell
Graafikakaardi võimsus
300 W
Toitepistiku standard
1x PCIe CEM5 16-pin
Minimaalne toiteplokk
700 W
Kahe GPU tugi
Ei
Mälusiin
384-bit
Ribalaius
1344 GB/s
CUDA-tuumad
14080
Tensorituumad
440
RT-tuumad
110
Baas- / kiirendustakt
1740 / 2377 MHz
TDP
300 W
PCIe-põlvkond
PCIe 5.0
Pesalaius
2-slot
Pikkus
267 mm
Toitepistikud
1x PCIe CEM5 16-pin
Soovitatud toiteplokk
700 W
FP32 jõudlus
65 TFLOPS
Inferentsi märkused
Exact PNY Small Box SKU VCNRTXPRO5000-72-SB with 72 GB ECC in one GPU. Two independent Estonian retailer offers were verified; Small Box accessories, current stock, and price are rechecked before quote.
70B-klassi mudeli sobivust tuleb kontrollida
Valitud 70B-klassi Q4 mudelid vajavad palju videomälu või Apple'i ühismälu, lühikest või mõõdukat kontekstimahtu ja käituskeskkonna kontrolli.
AI-terminid lihtsas keeles
CUDA
NVIDIA arvutusplatvorm paljude AI-tööriistade jaoks. CUDA vajab toetatud NVIDIA GPU-d; Apple Silicon ja AMD GPU-d ei toeta seda otse.
Apple'i ühismälu
CPU, GPU, macOS-i ja rakenduste jagatud mälu. See pole sama mis NVIDIA videomälu.
7B / 8B / 14B / 70B
Mudeli ligikaudne suurus miljardites parameetrites; suurem mudel vajab tavaliselt rohkem mälu.
Kvanditud mudel
Väiksema täpsusega mudel, näiteks Q4, mis kasutab vähem mälu võimaliku kvaliteedi- või kiirusekaoga.
Konteksti pikkus
Kui palju teksti saab mudel korraga sisendis arvesse võtta. Pikem kontekst kasutab rohkem mälu.
Mudeli käitamine
Valmis mudeli kasutamine vestluseks, koodi abiks, kokkuvõteteks või dokumentidega töötamiseks.
Mudeli kohandamine
LoRA ja QLoRA kohandavad väikseid adaptereid ning vajavad vähem ressursse kui täielik peenhäälestus.
Läbilaskevõime (tokenit/s)
Mudeli väljundkiirus. Võrdle sama mudelit, kvantimist, konteksti, käituskeskkonda ja kasutajate arvu; sisendi töötlemine on eraldi näitaja.
Hinnangu ajalugu
Kasutab võimalusel turuhindu ja muul juhul viitehinnanguid.
Madalaim9423 €Kõrgeim10 401 €Keskmine10 261 €7 andmepunkti
Kõigi kuupäevade vaatamiseks libista graafikut külgsuunas.
Hind ja ostmine
11 378 €
Hinnanguline kogusumma. Lõplik hind kinnitatakse enne tellimist.
Selle toote eest ei saa veebis maksta; küsi hinnapakkumist.
Kasuta selle lehe hinnapäringuvormi. See ei kogu makse- ega kaardiandmeid; täpse hinna ja saadavuse saadame e-postiga.
Küsi hinnapakkumist
Mis juhtub pärast päringut
- Päringuga ei koguta makse- ega kaardiandmeid.
- Kinnitame täpse komponendi, mudeli ja sinu peamised nõuded.
- Kontrollime kehtivat Eesti turuhinda ja saadavust.
- Juhime sinu antud andmete põhjal tähelepanu teadaolevatele sobivuspiirangutele.
- Saadame täpse hinna ja võimalikud alternatiivid kirjaliku pakkumisena.
Edasine suhtlus ja tugi jätkuvad tellimuse või pakkumise e-kirjavahetuses.
Kohalike mudelite näited
Kohalike mudelite näited
Sobib hästi privaatseks vestluseksSobib hästi programmeerimisabiksSobib hästi dokumentide kokkuvõtmiseks70B-klassi mudelid vajavad rangeid piiranguid
Soovitatud mudel
Llama 3.3 70B Instruct
Selge ülempiiri näide, millega hinnata, kas arvuti saab 70B-klassi mudelit üldse proovida.
Sobib hästi GPU-l käitamiseks
Kasutatav
ollama run llama3.3:70b
Selle kvanditud mudeli jaoks peaks tavapärase konteksti korral olema piisavalt mäluvaru.
- 128 GB süsteemi- või ühismälu on saadaval
- 72 GB kiirendimälu mudelikaalude ja vahemälu jaoks
Qwen3.6 35B-A3B
Programmeerimisagendid, koodihoidla analüüs ja keerukad kohalikud assistenditöövood
Võimekas MoE-mudel, mis annab 32 ja 48 GB tööjaamadele sisulise suurema programmeerimissihi.
Oodatav kogemus: Kasutatav
Selle kvanditud mudeli jaoks peaks tavapärase konteksti korral olema piisavalt mäluvaru.
- 128 GB süsteemi- või ühismälu on saadaval
Gemma 4 12B
Privaatne assistent, dokumentide mõistmine ning piltide või heli analüüs
Kaasaegne mitmikmodaalne igapäevamudel, mis kasutab 16 GB GPU võimekust hästi.
Oodatav kogemus: Kiire
Selle kvanditud mudeli jaoks peaks tavapärase konteksti korral olema piisavalt mäluvaru.
- 128 GB süsteemi- või ühismälu on saadaval
Kuva tehnilised üksikasjad
Eeldused
- Eeldatav GPU-mälu: 72 GB from PNY NVIDIA RTX PRO 5000 72GB Blackwell Small Box.
- Eeldatav süsteemimälu: 128 GB.
- Hinnang arvestab ühe kohaliku mudeli kaale, KV-vahemälu, käituskeskkonna lisakulu ja turvavaru. See näitab sobivust, mitte tagatud kiirust.
- GPU-tooteleht eeldab selle videomälu klassi jaoks mõistlikku süsteemimälu mahtu. Täiskomplekti leht näitab täpset mälusobivust.
Llama 3.3 70B Instruct tehnilised detailid
Mudelisari: Meta Llama 3.3
Parameetrite arv: 70.60B
Struktuur: 70.6B tihe
Litsents: Llama 3.3 Community License; lubatud litsentsitingimustel; piiratud juurdepääs. See on üldine sobivushinnang; enne ärilist kasutust kontrolli mudeli litsentsi.
Algne kontekstiaken: 131 072 tokenit
Kvantimine: Q4_K_M
Q4 mudelikaalude ligikaudne maht: 42.5 GB
Vaikehinnang: 51 GB @ 4096 tokenit
Mudelikaalud / KV-vahemälu / käituskeskkond / varu: 42.5 GB / 3 GB / 1.5 GB / 4 GB
CPU- ja RAM-põhine varuvariant: Ei ole soovitatav
VRAM: 48 GB vähemalt / 64 GB soovituslik
RAM: 64 GB vähemalt / 96 GB soovituslik
Praegune käitusviis: Sobib hästi GPU-l käitamiseks
Oodatav kogemus: Kasutatav
Kogu mudeli GPU-le laadimine: Sageli piiratud
Konteksti hoiatus: Q4 mudelikaalud kasutavad enne KV-vahemälu, käituskeskkonna lisakulu ja töölaua varu juba umbes 42,5 GB.
| Kontekst | Kaalud | KV | Käituskeskkond | Varu | GPU-mälu hinnang |
|---|---|---|---|---|---|
| 4K | 42.5 GB | 3 GB | 1.5 GB | 4 GB | 51 GB |
| 8K | 42.5 GB | 6 GB | 1.5 GB | 4 GB | 54 GB |
| 16K | 42.5 GB | 12 GB | 1.5 GB | 4.5 GB | 60.5 GB |
| 32K | 42.5 GB | 24 GB | 1.5 GB | 5.5 GB | 73.5 GB |
Kõigi mäluhinnangute vaatamiseks libista tabelit külgsuunas.
Qwen3.6 35B-A3B tehnilised detailid
Mudelisari: Qwen3.6
Parameetrite arv: 35B
Struktuur: 35B kokku / 3B aktiivsed MoE
Litsents: Apache License 2.0; lubatud. See on üldine sobivushinnang; enne ärilist kasutust kontrolli mudeli litsentsi.
Algne kontekstiaken: 262 144 tokenit
Laiendatud kontekstiaken: 1 010 000 meetodiga YaRN; ei ole vaikimisi sobivuseeldus
Kvantimine: Q4_K_M
Q4 mudelikaalude ligikaudne maht: 24 GB
Vaikehinnang: 31.5 GB @ 8192 tokenit
Mudelikaalud / KV-vahemälu / käituskeskkond / varu: 24 GB / 2.5 GB / 2 GB / 3 GB
CPU- ja RAM-põhine varuvariant: Ei ole soovitatav
VRAM: 32 GB vähemalt / 48 GB soovituslik
RAM: 64 GB vähemalt / 64 GB soovituslik
Praegune käitusviis: Sobib hästi GPU-l käitamiseks
Oodatav kogemus: Kasutatav
Kogu mudeli GPU-le laadimine: Ainult siis, kui mudel ja kontekst mahuvad mällu
Konteksti hoiatus: Pikk koodihoidla kontekst võib allesjäänud mäluvaru kiiresti ära kasutada, eriti 32 GB GPU-l.
| Kontekst | Kaalud | KV | Käituskeskkond | Varu | GPU-mälu hinnang |
|---|---|---|---|---|---|
| 4K | 24 GB | 1.5 GB | 2 GB | 3 GB | 30.5 GB |
| 8K | 24 GB | 2.5 GB | 2 GB | 3 GB | 31.5 GB |
| 16K | 24 GB | 5 GB | 2 GB | 3.5 GB | 34.5 GB |
| 32K | 24 GB | 10 GB | 2 GB | 4 GB | 40 GB |
Kõigi mäluhinnangute vaatamiseks libista tabelit külgsuunas.
Gemma 4 12B tehnilised detailid
Mudelisari: Google Gemma 4
Parameetrite arv: 11.95B
Struktuur: 11.95B tihe
Litsents: Apache License 2.0; lubatud. See on üldine sobivushinnang; enne ärilist kasutust kontrolli mudeli litsentsi.
Algne kontekstiaken: 262 144 tokenit
Kvantimine: Q4_0 QAT
Q4 mudelikaalude ligikaudne maht: 7.2 GB
Vaikehinnang: 11.5 GB @ 8192 tokenit
Mudelikaalud / KV-vahemälu / käituskeskkond / varu: 7.2 GB / 1.5 GB / 1.2 GB / 1.5 GB
CPU- ja RAM-põhine varuvariant: Ei ole soovitatav
VRAM: 12 GB vähemalt / 16 GB soovituslik
RAM: 24 GB vähemalt / 32 GB soovituslik
Praegune käitusviis: Sobib hästi GPU-l käitamiseks
Oodatav kogemus: Kiire
Kogu mudeli GPU-le laadimine: Ainult siis, kui mudel ja kontekst mahuvad mällu
Konteksti hoiatus: Suur kontekstiaken vajab endiselt märkimisväärset KV-vahemälu varu.
| Kontekst | Kaalud | KV | Käituskeskkond | Varu | GPU-mälu hinnang |
|---|---|---|---|---|---|
| 4K | 7.2 GB | 1 GB | 1.2 GB | 1.5 GB | 11 GB |
| 8K | 7.2 GB | 1.5 GB | 1.2 GB | 1.5 GB | 11.5 GB |
| 16K | 7.2 GB | 2.5 GB | 1.2 GB | 1.5 GB | 12.5 GB |
| 32K | 7.2 GB | 5 GB | 1.2 GB | 2 GB | 15.5 GB |
Kõigi mäluhinnangute vaatamiseks libista tabelit külgsuunas.
Teabeallikad
Andmed kontrollitud: 2026-07-30
Kohaliku tehisaru jõudlus on ligikaudne. Tulemus sõltub kvantimisest, konteksti pikkusest, käitusmootorist, draiveritest ja sellest, kas mudel koos KV-vahemäluga mahub GPU-mällu või Apple'i ühismällu.
Usaldus ja protsess
Mis juhtub pärast komponendi päringut
Täpne toode ja saadavus
Kinnitame enne tellimuse täitmist mudeli, hinna ja saadavuse. Hinnapäringuga makset ei võeta.
Sobivuse ulatus
Kontrollime teadaolevaid mõõtude, toite ja liidese piiranguid. Lõplik sobivus sõltub ülejäänud süsteemist.
Üleandmine Eestis
Üleandmise või kohaletoimetamise viis ja aeg lepitakse kokku pärast saadavuse kinnitamist.
Tagastus, garantii ja tugi
Käsitlus sõltub tellimuse olekust ning komponendi, tootja ja müüja tingimustest. Küsimustele vastame e-kirjavahetuses.
Usaldus
Oluline enne tellimist
Kontakt ja tugi
Kiireim viis on vastata tellimuse või pakkumise kinnitusele.
Täpne toode ja sobivus
Kinnitame mudeli, saadavuse ja hinna. Sobivus olemasoleva süsteemiga sõltub kogu osade loendist.
Üleandmine ja tagastus
Üleandmine lepitakse kokku pärast saadavuse kinnitamist. Tagastus sõltub tellimuse olekust ja tingimustest.
Hinna alus
Leht eristab turuandmeid, planeerimishinnangut ja kirjalikku pakkumist. Komponendi hind ei sisalda terviksüsteemi teenust.