Maskinkrav for GLM-5.3

744B vekter, 40B aktive per token, og en 4-bit-bygg som krever 475GB. Hva den sterkeste åpne modellen trenger, hva du gir avkall på ved hver kvantisering, og hvilke maskiner som når det.

Terminal showing GLM-5.3 loaded with llama-server and --n-cpu-moe 40: 744B parameters with 40B active per token, attention layers on the GPU and expert layers in system RAM, 475GB total memory and 94.29% top-1 accuracy

GLM-5.3 er den sterkeste open-weight-modellen du kan laste ned i dag. Z.ai lanserte den den 14 august 2026 og publiserte vektene to uker senere, den 28 august, etter at sikkerhetsherding var fullført.4 Den oppgir toppresultater på Terminal-Bench 3.0 og løfter den scoren fra 4.6% til 28.3% mot sin egen forgjenger.4

Den er også en modell med 744B parametre, og den brukbare versjonen krever 475GB minne. Det tallet, ikke benchmarken, avgjør om du kan kjøre den.

  • Parametere744Bomtrent 40B aktive
  • Kontekst1Mtokens
  • LisensGLM-5.3egendefinert, ikke MIT
  • Minne ved 4-bit475GB94.3% nøyaktighet

Den samme modellen som 5.2, videreopplært

GLM-5.3 deler basismodellen sin med GLM-5.2. Hver gevinst kommer fra अतिरिक्त post-trening, ikke fra en ny pre-treningskjøring.1 Arkitekturen, parameterantallet og minnebehovet er derfor identiske med 5.2s, noe som er praktisk: alt du lærte om å kjøre 5.2 gjelder fortsatt, og enhver maskin som kjørte 5.2 kjører 5.3.

Som alle ledende åpne modeller i år er den en blanding av eksperter. Den har 744B parametere og ruter omtrent 40B av dem per token. Den lave aktive andelen er grunnen til at én maskin kan generere med rimelig hastighet. Det store totalantallet er grunnen til at den maskinen må være en skikkelig kraftpakke — ruteren velger ulike eksperter for hver token, så alle må være i minnet.

Hva den trenger

Unsloth publiserer en full kvantiseringstrapp for GLM-5.3, og uvanlig nok publiserer de en målt nøyaktighetsverdi ved siden av hver av dem. Det er denne andre kolonnen som gjør valget mulig.

GLM-5.3 bygger videre på Unsloth. Minne er summen av system-RAM og VRAM, eller enhetlig minne, og ligger over filstørrelsen fordi kontekst og arbeidstilstand kommer i tillegg.
Bygg På disk Minne Nøyaktighet
UD-IQ1_S 216.7GB 223GB 72.56%
UD-IQ2_M 238.6GB 245GB 78.53%
UD-IQ3_XXS 281.7GB 290GB 84.15%
UD-Q3_K_XL 343.0GB 360GB 88.86%
UD-Q4_K_XL 467.3GB 475GB 94.29%
UD-Q5_K_XL 562.5GB 570GB 95.82%

Hva hver kvantisering gir avkall på

Kvantisering lagrer hver vekt i færre biter. Gevinsten er reell, og det samme er kostnaden, og kostnaden er ikke lineær. Les trappen fra bunnen, og de første trinnene er nesten gratis; les den fra toppen, og de siste trinnene er brutale.

Hva hver kvantisering gir avkall påTopp-1nøyaktighet gitt opp sammenlignet med fullpresisjonsmodellen, i prosentpoeng. Lavere er bedre.
  1. 1-bit27.4
  2. 2-bit21.5
  3. 3-bit15.9
  4. 3-bit XL11.1
  5. 4-bit5.7
  6. 5-bit4.2

Avledet fra Unsloths publiserte topp-1nøyaktighet for UD-IQ1_S, UD-IQ2_M, UD-IQ3_XXS, UD-Q3_K_XL, UD-Q4_K_XL og UD-Q5_K_XL-byggene av GLM-5.3.1

Å gå fra 4-bit til 2-bit sparer 230GB og koster nesten seksten poeng i nøyaktighet. Å gå fra 5-bit til 4-bit sparer 95GB og koster halvannet. Hvis budsjettet ditt strekker seg til 512GB, er 4-bit der modellen fortsatt oppfører seg som seg selv. Under det kjører du en demonstrasjon.

Tre måter å nå 475GB på

Én pool med enhetlig minne. En Mac Studio M3 Ultra 512GB holder 4-bit-byggingen med plass til kontekst, og det er maskinen som gjør dette i dag. 2-bit-byggingen på 245GB får plass i en 256GB-maskin direkte.2 512GB er taket på Apple silicon uansett: den nyere M5 Ultra topper ut på samme tall, og 512GB-konfigurasjonen kommer ikke før sent i oktober.5

Et kort og system-RAM. Fordi modellen er sparsom, fungerer delingen godt. Oppmerksomhetslagene legges på grafikkortet, ekspertlagene blir i systemminnet, og llama.cpps --n-cpu-moe-flagg bestemmer hvor streken går. Unsloth oppgir at GLM-5.2 kjører på ett enkelt 24GB-kort med 256GB RAM på denne måten.2 Forvent at dette er tregere enn enhetlig minne, fordi ekspertvektene da leses med hastigheten til DDR5-en din i stedet for VRAM-en din. Det er her en arbeidsstasjon med åtte kanaler forsvarer prisen sin.

Alt i VRAM. Fire RTX PRO 6000-kort gir 384GB, nok for et 3-bit-bygg. HelixML målte den mindre GLM-5.3-Flash på fire RTX PRO 6000 Server Edition-kort til 63.7 utdata-token per sekund for én forespørsel og 82.8 med spekulativ dekoding, og trengte en fastlåst eksperimentell utgave av SGLang for å få det til.3 Støtte på dag null for en ny arkitektur er sjelden ferdig.

Les lisensen før du planlegger et produkt basert på den

Det er her GLM-5.3 skiller seg fra sin egen familie, og nesten ingen nevner det. GLM-5.2 ble utgitt under MIT.6 GLM-5.3 er det ikke: vektene deres har en spesiallaget lisens oppkalt etter modellen, som krever at operatører av model-as-a-service over $10B i inntekter de siste tolv månedene gjennomgår en Z.ai-sikkerhetsgjennomgang før kommersiell bruk.4 GLM-5.3-Flash, utgitt 26 august, er MIT igjen.4

For de fleste virksomheter er omsetningsterskelen akademisk. Poenget er at lisensen nå varierer fra utgivelse til utgivelse innenfor én familie, så sjekk den per modell heller enn per leverandør.

Innstillinger som betyr noe

Bruk en temperatur på 1.0 med top-p på 0.95 for vanlig arbeid, og top-p på 1.0 for lange agentiske kjøringer.1

Én felle er spesifikk for denne utgivelsen. GLM-5.3 bruker som standard maksimal resonnering, og tenkning kan ikke slås av, noe som ikke gjelder for 5.2. Send --chat-template-kwargs '{"reasoning_effort":"low"}' for å redusere det, og sett clear_thinking til true for samtaler med flere runder, slik at gammel resonnering ikke hoper seg opp i konteksten.1 Lar du den være alene i en lang samtale, vil den bruke både tokens og minnebufferen din.

For regnestykket bak alt dette, se hvor mye minne du trenger for å kjøre en åpen modell lokalt. For den nyeste utgivelsen i samme vektklasse, se DeepSeek V4.1-Flash. En 512GB maskin i dag betyr en Mac Studio M3 Ultra 512GB eller en Neox Metal med 512GB med registered ECC memory.

Kilder

  1. Unsloth, GLM-5.3: How to Run Locally — parametere, kvantiseringstørrelser, minnekrav, top-1 nøyaktighet per versjon, anbefalte innstillinger og flagg for resonneringsinnsats.
  2. Unsloth, GLM-5.2: How to Run Locally — 2-bit-bygg på en 256GB Mac med delt minne, og drift med én kort på enkeltskive med MoE-avlasting.
  3. HelixML, "GLM-5.3-Flash on RTX PRO 6000, Part 1", 27 August 2026.
  4. Z.ai, GLM-5.3 model card and licence, Hugging Face — lanserings- og åpen-vekt-datoer, Terminal-Bench 3.0 resultater, lisensvilkår og den MIT-lisensierte GLM-5.3-Flash.
  5. Apple, "Apple introduces M6 and M5 Ultra", 25 August 2026 — 512GB maksimal samlet minne.
  6. Z.ai, GLM-5.2 model card, Hugging Face — MIT-lisens.