Hårdvarukrav för GLM-5.3

744B vikter, 40B aktiva per token, och en 4-bitsversion som kräver 475GB. Vad den starkaste öppna modellen behöver, vad du ger upp vid varje kvantisering, och vilka maskiner som når dit.

Terminal showing GLM-5.3 loaded with llama-server and --n-cpu-moe 40: 744B parameters with 40B active per token, attention layers on the GPU and expert layers in system RAM, 475GB total memory and 94.29% top-1 accuracy

GLM-5.3 är den starkaste öppna viktmodellen du kan ladda ned i dag. Z.ai lanserade den den 14 augusti 2026 och publicerade vikterna två veckor senare, den 28 augusti, när säkerhetshärdningen var klar.4 Den rapporterar toppresultat på Terminal-Bench 3.0 och höjer den poängen från 4.6% till 28.3% jämfört med sin egen föregångare.4

Det är också en modell med 744B parametrar vars användbara build vill ha 475GB minne. Den siffran, inte benchmarken, avgör om du kan köra den.

  • Parametrar744Bcirka 40B aktiva
  • Kontext1Mtoken
  • LicensGLM-5.3egen, inte MIT
  • Minne vid 4-bit475GB94.3% noggrannhet

Samma modell som 5.2, vidaretränad

GLM-5.3 delar sin basmodell med GLM-5.2. Varje förbättring kommer därför från ytterligare efterträning snarare än en ny förträning.1 Arkitekturen, parameterantalet och minneskostnaden är därför identiska med 5.2s, vilket är praktiskt: allt du lärt dig om att köra 5.2 gäller fortfarande, och varje maskin som körde 5.2 kör 5.3.

Som alla öppna frontlinjemodeller i år är den en mixture of experts. Den har 744B parametrar och använder ungefär 40B av dem per token. Den lilla aktiva siffran är anledningen till att en enda maskin kan generera i rimlig hastighet. Den stora totalsiffran är anledningen till att den maskinen måste vara seriös — routern väljer olika experter för varje token, så alla förblir residenta.

Vad den behöver

Unsloth publicerar en fullständig kvantiseringsstege för GLM-5.3, och ovanligt nog publicerar de en uppmätt noggrannhetssiffra bredvid varje nivå. Den andra kolumnen är det som gör valet möjligt.

GLM-5.3 bygger från Unsloth. Minnet är summan av systemets RAM och VRAM, eller enhetligt minne, och ligger över filstorleken eftersom kontexten och arbetsläget ligger ovanpå.
Bygge På disk Minne Noggrannhet
UD-IQ1_S 216.7GB 223GB 72.56%
UD-IQ2_M 238.6GB 245GB 78.53%
UD-IQ3_XXS 281.7GB 290GB 84.15%
UD-Q3_K_XL 343.0GB 360GB 88.86%
UD-Q4_K_XL 467.3GB 475GB 94.29%
UD-Q5_K_XL 562.5GB 570GB 95.82%

Vad varje kvantisering ger upp

Kvantisering lagrar varje vikt i färre bitar. Besparingen är verklig och det är också kostnaden, och kostnaden är inte linjär. Läs stegen från botten och de första få stegen är nästan gratis; läs dem från toppen och de sista få stegen är brutala.

Vad varje kvantisering ger uppTopp-1noggrannhet som offras jämfört med modellen med full precision, i procentenheter. Lägre är bättre.
  1. 1-bit27.4
  2. 2-bit21.5
  3. 3-bit15.9
  4. 3-bit XL11.1
  5. 4-bit5.7
  6. 5-bit4.2

Härledt från Unsloths publicerade topp-1noggrannhet för byggena UD-IQ1_S, UD-IQ2_M, UD-IQ3_XXS, UD-Q3_K_XL, UD-Q4_K_XL och UD-Q5_K_XL av GLM-5.3.1

Från 4-bit till 2-bit sparar 230GB och kostar nästan sexton poäng i noggrannhet. Från 5-bit till 4-bit sparar 95GB och kostar en och en halv. Om din budget räcker till 512GB, är 4-bit där modellen fortfarande beter sig som sig själv. Under det kör du en demonstration.

Tre sätt att nå 475GB

Ett gemensamt minnespool. En Mac Studio M3 Ultra 512GB rymmer den 4-bitars byggnaden med utrymme för kontext, och det är den maskin som gör detta i dag. Den 2-bitars byggnaden för 245GB passar direkt i en 256GB-maskin.2 512GB är taket på Apple silicon oavsett vilket: den nyare M5 Ultra toppar ut vid samma siffra, och dess 512GB-konfiguration kommer inte förrän sent i oktober.5

Ett kort plus systemets RAM. Eftersom modellen är gles fungerar uppdelningen bra. Attention-lager ligger på grafikkortet, expertlager stannar i systemminnet, och llama.cpp:s --n-cpu-moe-flagga sätter var gränsen går. Unsloth rapporterar GLM-5.2 körande på ett enda 24GB-kort med 256GB RAM på detta sätt.2 Räkna med att det blir långsammare än gemensamt minne, eftersom expertvikterna då läses i hastigheten hos din DDR5 snarare än ditt VRAM. Det är här en arbetsstationsplattform med åtta kanaler tjänar in sitt pris.

Allt i VRAM. Fyra RTX PRO 6000-kort ger 384GB, tillräckligt för en 3-bitars byggnad. HelixML mätte den mindre GLM-5.3-Flash på fyra RTX PRO 6000 Server Edition-kort till 63.7 utgångstoken per sekund för en enskild begäran och 82.8 med spekulativ avkodning, och behövde en fastlåst experimentell version av SGLang för att göra det.3 Stöd för en ny arkitektur från dag noll är sällan färdigt.

Läs licensen innan du planerar en produkt på den

Det är här GLM-5.3 skiljer sig från sin egen familj, och nästan ingen nämner det. GLM-5.2 släpptes under MIT.6 GLM-5.3 är det inte: dess vikter omfattas av en skräddarsydd licens uppkallad efter modellen, som kräver att operatörer av model-as-a-service över $10B i rullande tolv månaders intäkter genomgår en Z.ai-säkerhetsgranskning innan kommersiell användning.4 GLM-5.3-Flash, släppt den 26 augusti, är MIT igen.4

För de flesta företag är intäktsgränsen akademisk. Poängen är att licensen nu varierar från utgåva till utgåva inom en och samma familj, så kontrollera den per modell snarare än per leverantör.

Inställningar som spelar roll

Använd en temperatur på 1.0 med top-p på 0.95 för vanligt arbete, och top-p på 1.0 för långa agentiska körningar.1

En fälla är specifik för denna utgåva. GLM-5.3 använder maximalt resonemang som standard och tänkande kan inte stängas av, vilket inte gäller för 5.2. Skicka --chat-template-kwargs '{"reasoning_effort":"low"}' för att tona ned det, och sätt clear_thinking till true för konversationer med flera turer så att gammalt resonemang inte samlas i kontexten.1 Lämnas den ensam i en lång konversation kommer den att förbruka både dina token och ditt minnesutrymme.

För matten bakom allt detta, se how much memory you need to run an open model locally. För den senaste utgåvan i samma viktklass, se DeepSeek V4.1-Flash. En 512GB maskin i dag innebär en Mac Studio M3 Ultra 512GB eller en Neox Metal med 512GB av registered ECC memory.

Källor

  1. Unsloth, GLM-5.3: Hur man kör lokalt — parametrar, quantiseringsstorlekar, minneskrav, top-1 noggrannhet per build, rekommenderade inställningar och flaggor för reasoning-effort.
  2. Unsloth, GLM-5.2: How to Run Locally — the 2-bit build on a 256GB unified-memory Mac, and single-card operation with MoE offloading.
  3. HelixML, "GLM-5.3-Flash on RTX PRO 6000, Part 1", 27 August 2026.
  4. Z.ai, GLM-5.3 model card and licence, Hugging Face — launch and open-weights dates, Terminal-Bench 3.0 results, licence terms, and the MIT-licensed GLM-5.3-Flash.
  5. Apple, "Apple introducerar M6 och M5 Ultra", 25 August 2026 — 512GB maximum unified memory.
  6. Z.ai, GLM-5.2 model card, Hugging Face — MIT-licens.