GPU-mälu ja RAM
GPU-mälu määrab enamasti mudeli suuruse; RAM toetab rakendusi, andmeid ja mudeli osalist laadimist.
Komponendi ülevaade
Mälukomplekt kohalike mudelite ja rakenduste jaoks
Kontrollitud tootja tootekood
F5-6000J3040G32GX2-TZ5NR
Maht
64 GB (2x32 GB)
Põlvkond
DDR5
Kiirus
6000 MT/s
Latentsus
CL30
Profiilid
EXPO
Pinge
1.4V
ECC
Ei
Registreeritud mälu
Ei
Soovitatud platvorm
AM5
70B-klassi mudeli sobivust tuleb kontrollida
Valitud 70B-klassi Q4 mudelid vajavad palju videomälu või Apple'i ühismälu, lühikest või mõõdukat kontekstimahtu ja käituskeskkonna kontrolli.
GPU-mälu ja RAM
GPU-mälu määrab enamasti mudeli suuruse; RAM toetab rakendusi, andmeid ja mudeli osalist laadimist.
CUDA
NVIDIA arvutusplatvorm paljude AI-tööriistade jaoks. CUDA vajab toetatud NVIDIA GPU-d; Apple Silicon ja AMD GPU-d ei toeta seda otse.
Apple'i ühismälu
CPU, GPU, macOS-i ja rakenduste jagatud mälu. See pole sama mis NVIDIA videomälu.
7B / 8B / 14B / 70B
Mudeli ligikaudne suurus miljardites parameetrites; suurem mudel vajab tavaliselt rohkem mälu.
Kvanditud mudel
Väiksema täpsusega mudel, näiteks Q4, mis kasutab vähem mälu võimaliku kvaliteedi- või kiirusekaoga.
Konteksti pikkus
Kui palju teksti saab mudel korraga sisendis arvesse võtta. Pikem kontekst kasutab rohkem mälu.
Mudeli käitamine
Valmis mudeli kasutamine vestluseks, koodi abiks, kokkuvõteteks või dokumentidega töötamiseks.
Mudeli kohandamine
LoRA ja QLoRA kohandavad väikseid adaptereid ning vajavad vähem ressursse kui täielik peenhäälestus.
Läbilaskevõime (tokenit/s)
Mudeli väljundkiirus. Võrdle sama mudelit, kvantimist, konteksti, käituskeskkonda ja kasutajate arvu; sisendi töötlemine on eraldi näitaja.
Kasutab võimalusel turuhindu ja muul juhul viitehinnanguid.
Kõigi kuupäevade vaatamiseks libista graafikut külgsuunas.
1453 €
Hinnanguline kogusumma. Lõplik hind kinnitatakse enne tellimist.
Selle toote eest ei saa veebis maksta; küsi hinnapakkumist.
Kasuta selle lehe hinnapäringuvormi. See ei kogu makse- ega kaardiandmeid; täpse hinna ja saadavuse saadame e-postiga.
Küsi hinnapakkumist
Mis juhtub pärast päringut
Edasine suhtlus ja tugi jätkuvad tellimuse või pakkumise e-kirjavahetuses.
Usaldus ja protsess
Täpne toode ja saadavus
Kinnitame enne tellimuse täitmist mudeli, hinna ja saadavuse. Hinnapäringuga makset ei võeta.
Sobivuse ulatus
Kontrollime teadaolevaid mõõtude, toite ja liidese piiranguid. Lõplik sobivus sõltub ülejäänud süsteemist.
Üleandmine Eestis
Üleandmise või kohaletoimetamise viis ja aeg lepitakse kokku pärast saadavuse kinnitamist.
Tagastus, garantii ja tugi
Käsitlus sõltub tellimuse olekust ning komponendi, tootja ja müüja tingimustest. Küsimustele vastame e-kirjavahetuses.
Usaldus
Kontakt ja tugi
Kiireim viis on vastata tellimuse või pakkumise kinnitusele.
Täpne toode ja sobivus
Kinnitame mudeli, saadavuse ja hinna. Sobivus olemasoleva süsteemiga sõltub kogu osade loendist.
Üleandmine ja tagastus
Üleandmine lepitakse kokku pärast saadavuse kinnitamist. Tagastus sõltub tellimuse olekust ja tingimustest.
Hinna alus
Leht eristab turuandmeid, planeerimishinnangut ja kirjalikku pakkumist. Komponendi hind ei sisalda terviksüsteemi teenust.