Hardwarové požadavky GLM-5.3

744B váhy, 40B aktivní na token a 4bitový build, který vyžaduje 475GB. Co potřebuje nejsilnější otevřený model, čeho se vzdáte při každé kvantizaci a které stroje to zvládnou.

Terminal showing GLM-5.3 loaded with llama-server and --n-cpu-moe 40: 744B parameters with 40B active per token, attention layers on the GPU and expert layers in system RAM, 475GB total memory and 94.29% top-1 accuracy

GLM-5.3 je dnes nejsilnější open-weight model, který si můžete stáhnout. Z.ai jej uvedla 14. srpna 2026 a o dva týdny později, 28. srpna, po dokončení bezpečnostního zpevnění publikovala váhy.4 Uvádí výsledky na úrovni špičky na Terminal-Bench 3.0 a proti svému předchůdci zvyšuje toto skóre z 4.6% na 28.3%.4

Je to také model s 744B parametry, jehož použitelná sestava vyžaduje 475GB paměti. Právě toto číslo, ne benchmark, rozhoduje o tom, zda jej můžete spustit.

  • Parametry744Bzhruba 40B aktivních
  • Kontext1Mtokenů
  • LicenceGLM-5.3vlastní, ne MIT
  • Paměť při 4bitové475GB94.3% přesnost

Stejný model jako 5.2, dále dotrénovaný

GLM-5.3 sdílí základní model s GLM-5.2. Veškeré zlepšení pochází z dodatečného post-tréninku, nikoli z nového předtrénování.1 Architektura, počet parametrů i paměťová náročnost jsou tedy stejné jako u 5.2, což je praktické: vše, co jste se naučili o spuštění 5.2, stále platí a každý počítač, který zvládl 5.2, zvládne i 5.3.

Jako každý špičkový open model letos je i tento mixture of experts. Obsahuje 744B parametrů a na každý token využívá zhruba 40B z nich. Malé aktivní číslo je důvod, proč na jednom počítači může generovat přiměřenou rychlostí. Velké celkové číslo je důvod, proč ten počítač musí být skutečně výkonný — router vybírá pro každý token jiné experty, takže všechny zůstávají v paměti.

Co je potřeba

Unsloth zveřejňuje úplnou škálu kvantizace pro GLM-5.3 a neobvykle u každé z nich zveřejňuje i naměřenou hodnotu přesnosti. Právě tento druhý sloupec umožňuje volbu.

GLM-5.3 vychází z Unsloth. Paměť je celkem systémová RAM plus VRAM, nebo jednotná paměť, a při spuštění je vyšší než velikost souboru, protože na ni navazuje kontext a pracovní stav.
Sestavení Na disku Paměť Přesnost
UD-IQ1_S 216.7GB 223GB 72.56%
UD-IQ2_M 238.6GB 245GB 78.53%
UD-IQ3_XXS 281.7GB 290GB 84.15%
UD-Q3_K_XL 343.0GB 360GB 88.86%
UD-Q4_K_XL 467.3GB 475GB 94.29%
UD-Q5_K_XL 562.5GB 570GB 95.82%

Co každá kvantizace obětuje

Kvantizace ukládá každou váhu do menšího počtu bitů. Úspora je skutečná a stejně tak i náklad, přičemž ten náklad není lineární. Čtěte škálu odspodu a první kroky jsou téměř zdarma; čtěte ji shora a poslední kroky jsou drsné.

Co každá kvantizace obětujePřesnost ztracená oproti plně přesnému modelu v top-1, v procentních bodech. Nižší je lepší.
  1. 1bitová27.4
  2. 2bitová21.5
  3. 3bitová15.9
  4. 3bitové XL11.1
  5. 4bitové5.7
  6. 5bitové4.2

Odvozeno z veřejně publikované top-1 přesnosti od Unsloth pro sestavení UD-IQ1_S, UD-IQ2_M, UD-IQ3_XXS, UD-Q3_K_XL, UD-Q4_K_XL a UD-Q5_K_XL modelu GLM-5.3.1

Přechod z 4bitové na 2bitové ušetří 230GB a stojí téměř šestnáct bodů přesnosti. Přechod z 5bitové na 4bitové ušetří 95GB a stojí jeden a půl. Pokud vám rozpočet dovolí 512GB, 4bitová je úroveň, kde se model stále chová jako sám sebe. Pod ní spouštíte demonstraci.

Tři způsoby, jak dosáhnout 475GB

Jeden fond sjednocené paměti. Mac Studio M3 Ultra 512GB pojme 4bitovou sestavu s rezervou pro kontext a je to stroj, který to dnes zvládá. 2bitová sestava za 245GB se vejde přímo do stroje 256GB.2 512GB je v obou případech strop na Apple silicon: novější M5 Ultra končí na stejné hodnotě a jeho konfigurace 512GB má dorazit až na konci října.5

Karta plus systémová RAM. Protože je model s稀疏ný, rozdělení funguje dobře. Attention vrstvy běží na grafické kartě, expert vrstvy zůstávají v systémové paměti a příznak llama.cpp --n-cpu-moe určuje, kde se hranice dělí. Unsloth uvádí, že GLM-5.2 tak běží na jediné kartě 24GB s 256GB paměti RAM.2 Očekávejte, že to bude pomalejší než sjednocená paměť, protože expert váhy pak čtou rychlostí vašeho DDR5, nikoli VRAM. Tady si osmislotová workstation platforma vydělá na svou cenu.

Všechno ve VRAM. Čtyři karty RTX PRO 6000 dávají 384GB, což stačí pro 3bitovou sestavu. HelixML naměřil menší GLM-5.3-Flash na čtyřech kartách RTX PRO 6000 Server Edition na 63.7 výstupních tokenech za sekundu pro jeden požadavek a 82.8 se spekulativním dekódováním a k tomu potřeboval připnutou experimentální verzi SGLang.3 Podpora nové architektury v den uvedení bývá jen zřídka hotová.

Přečtěte si licenci, než na ní budete plánovat produkt

Tady se GLM-5.3 odlišuje od vlastní rodiny a téměř nikdo to nezmiňuje. GLM-5.2 byl vydán pod MIT.6 GLM-5.3 takový není: jeho váhy nesou vlastní licenci pojmenovanou po modelu, která u provozovatelů model-as-a-service s tržbami nad $10B za posledních dvanáct měsíců vyžaduje před komerčním použitím bezpečnostní prověrku od Z.ai.4 GLM-5.3-Flash, vydaný v 26 srpnu, je znovu pod MIT.4

Pro většinu firem je hranice tržeb akademická. Jde o to, že se licence nyní liší vydání od vydání v rámci jedné rodiny, takže ji kontrolujte podle jednotlivých modelů, nikoli podle výrobce.

Nastavení, na kterých záleží

Pro běžnou práci použijte teplotu 1.0 s top-p na 0.95 a pro dlouhé agentní běhy top-p na 1.0.1

Jeden háček se týká právě tohoto vydání. GLM-5.3 ve výchozím nastavení používá maximální uvažování a thinking nelze vypnout, což u 5.2 neplatí. Předáním --chat-template-kwargs '{"reasoning_effort":"low"}' to snížíte a pro vícerozměrné konverzace nastavte clear_thinking na true, aby se staré uvažování nehromadilo v kontextu.1 Ponecháte-li to v dlouhé konverzaci bez zásahu, spotřebuje to jak vaše tokeny, tak i rezervu paměti.

Pro aritmetiku za tím vším se podívejte na kolik paměti potřebujete k lokálnímu spuštění otevřeného modelu. Pro nejnovější vydání ve stejné váhové třídě se podívejte na DeepSeek V4.1-Flash. Stroj 512GB dnes znamená Mac Studio M3 Ultra 512GB nebo Neox Metal s 512GB registrované paměti ECC.

Zdroje

  1. Unsloth, GLM-5.3: Jak jej spustit lokálně — parametry, velikosti kvantizace, paměťové požadavky, přesnost top-1 podle sestavení, doporučená nastavení a příznaky reasoning-effort.
  2. Unsloth, GLM-5.2: Jak jej spustit lokálně — 2bitové sestavení na Macu s 256GB unified memory a provoz na jediné kartě s offloadingem MoE.
  3. HelixML, "GLM-5.3-Flash na RTX PRO 6000, část 1", 27 srpen 2026.
  4. Z.ai, karta modelu GLM-5.3 a licence, Hugging Face — data spuštění a zveřejnění otevřených vah, výsledky Terminal-Bench 3.0, licenční podmínky a MIT licencovaný GLM-5.3-Flash.
  5. Apple, „Apple představuje M6 a M5 Ultra“, 25 srpen 2026 — 512GB maximální unified memory.
  6. Z.ai, karta modelu GLM-5.2, Hugging Face — licence MIT.