Απαιτήσεις υλικού για DeepSeek V4.1-Flash

510GB των weights, 8B active. A 2-bit MLX build runs on a Mac Studio M3 Ultra 256GB at 9.5 tokens per second — but not through llama.cpp, Ollama or LM Studio.

Terminal showing DeepSeek V4.1-Flash at 510GB across 48 safetensors files, llama.cpp failing with unknown model architecture deepseek_v41, and the MLX 2-bit build at 166.69 GiB peak memory and 9.46 tokens per second

Η DeepSeek κυκλοφόρησε το V4.1-Flash στις 10 Σεπτεμβρίου 2026 με άδεια MIT, με παράθυρο συμφραζομένων ενός εκατομμυρίου token και εγγενή κατανόηση εικόνων.1 Η πρώτη ερώτηση που έκαναν όλοι ήταν αν θα έτρεχε σε μηχάνημα 128GB, επειδή το τελευταίο μοντέλο που ονομαζόταν Flash το έκανε.

Δεν θα το κάνει. V4.1-Flash διατίθεται ως 510GB από FP8 βάρη σε 48 αρχεία, και το βήμα συμπίεσης έχει ήδη καταναλωθεί.2 Αλλά όντως τρέχει τοπικά σήμερα, σε hardware που μπορείτε να αγοράσετε: μια κοινοτική κατασκευή 2-bit έχει μετρηθεί στα 9.46 token ανά δευτερόλεπτο σε ένα Mac Studio 256GB Ultra M3.5

  • Παράμετροι552B8B in, 16B out
  • Συμφραζόμενα1Mtoken
  • ΆδειαMITχωρίς ενεργοποίηση εσόδων
  • Βάρη510GBFP8, 48 αρχεία

Το Flash περιγράφει την ταχύτητα, όχι το μέγεθος

V4.1-Flash περιλαμβάνει ένα 552B-παραμετρικό backbone και ενεργοποιεί 8B παραμέτρους ενώ διαβάζει το prompt σας και 16B ενώ γράφει την απάντηση.1 Αυτά τα μικρά ενεργά μεγέθη είναι αυτό στο οποίο αναφέρεται το "Flash". Καθορίζουν πόσο γρήγορα παράγει και πόσο κοστίζει ανά token σε ένα API. Δεν καθορίζουν το κόστος μνήμης.

Υπάρχει ένας δεύτερος, λιγότερο προφανής λόγος για τον οποίο το αρχείο είναι τόσο μεγάλο. Το μοντέλο φέρει ένα engram δύο επιπέδων, μια ενσωμάτωση hashed n-gram της οποίας οι πίνακες αναζήτησης από μόνοι τους αντιστοιχούν σε περίπου 196B παραμέτρους — περίπου σαράντα τοις εκατό του checkpoint.5 Αυτή είναι μνήμη που τη διατηρείτε και σπάνια τη χρησιμοποιείτε για υπολογισμό, και αυτός είναι ο λόγος που το download είναι μεγαλύτερο απ’ όσο υποδηλώνει ο αριθμός του backbone.

Το προηγούμενο μοντέλο έκανε εύκολη την παγίδα. Το DeepSeek-V4-Flash-0731 ήταν 284B συνολικά με 13B ενεργά, και εκτελούνταν χωρίς απώλειες σε 169GB.3 V4.1-Flash φέρει περίπου διπλάσια βασική δομή κάτω από το ίδιο όνομα προϊόντος.

Η κβαντοποίηση έχει ήδη καταναλωθεί

Κανονικά, ένα μοντέλο 552B θα ήταν πρόσκληση για κβαντοποίηση. Η DeepSeek το έκανε πριν το κατεβάσετε: το αποθετήριο διατίθεται σε FP8 με τα επίπεδα ειδικών ήδη συμπιεσμένα.2 Απομένει λιγότερο να αφαιρεθεί από ό,τι η συνηθισμένη περικοπή τέσσερα προς ένα που περιμένουν οι περισσότεροι από ένα GGUF 4-bit, γι’ αυτό οι παρακάτω community builds δεν πέφτουν τόσο όσο θα φανταζόσασταν.

Τι το εκτελεί πραγματικά

Αυτό είναι το μέρος που δεν σας λέει κανένα φύλλο προδιαγραφών. Ένα νέο μοντέλο χρειάζεται η αρχιτεκτονική του να γραφτεί στη μηχανή που χρησιμοποιείτε, και V4.1-Flash εισήγαγε μία νέα: έναν causal encoder-decoder, σαράντα επίπεδα διατεταγμένα ως ένας causal encoder είκοσι επιπέδων ακολουθούμενος από έναν decoder είκοσι επιπέδων.1 Η αρχιτεκτονική deepseek_v41 δεν υπάρχει σε κανένα mainstream runtime — ούτε Transformers, ούτε mlx-lm, ούτε mlx-vlm, ούτε llama.cpp.4

Αυτό αποκλείει τις εύκολες διαδρομές. Το Ollama, το LM Studio και οτιδήποτε άλλο βασίζεται στο llama.cpp δεν μπορεί να το φορτώσει, και δεν υπάρχει χρησιμοποιήσιμο GGUF. Δεν αποκλείει όμως την εκτέλεσή του.

Στο Apple silicon, το PipeNetwork port παρέχει την αρχιτεκτονική που λείπει και οι community MLX conversions παρέχουν τα βάρη.4 Σε διακομιστές NVIDIA και AMD, το SGLang δημοσιεύει development container images για αυτό — lmsysorg/sglang:dev-dsv41 και dev-dsv41-mi35x — πριν από μια επισημασμένη έκδοση. Το vLLM έχει ανοιχτά pull requests και, από τον 10 Σεπτέμβριο, κανένα δεν έχει συγχωνευθεί.6

Άρα πρόκειται για πρώιμο λογισμικό πάνω σε σταθερό υλικό. Περιμένετε να κάνετε clone ένα repository αντί να πληκτρολογήσετε μία εντολή εγκατάστασης, και περιμένετε αυτό να γίνει ευκολότερο τις επόμενες λίγες εβδομάδες αντί δυσκολότερο.

Τι χρειάζεται κάθε DeepSeek V4.1-Flash buildΜνήμη σε GB — unified memory σε Mac, ή system RAM συν VRAM σε server. Σεπτέμβριος 2026.
  1. MLX 2-bit167GB
  2. MLX 4/8-bit427GB
  3. MLX engram-6477GB
  4. FP8 όπως αποστέλλεται510GB

Οι τιμές MLX είναι οι δημοσιευμένες απαιτήσεις για τις community conversions: μετρημένη μέγιστη μνήμη διεργασίας για το build 2-bit, δηλωμένη resident memory για τα mixed builds 4/8-bit.45 Η τιμή FP8 είναι το συνολικό μέγεθος του repository στο Hugging Face.2

Οι τρεις builds της κοινότητας MLX. Όλες χρειάζονται τη θύρα PipeNetwork, όχι το mlx-lm.
Build Στο δίσκο Μνήμη
2-bit MTP 238.8GB 167GB
Μικτό 4/8-bit 427.6GB 427GB
4/8-bit engram-6 476.8GB 477GB

Ποιο μηχάνημα

Το 2-bit build είναι αυτό με το οποίο αξίζει να ξεκινήσετε, και είναι πραγματικά καλά νέα. Είναι 238.8GB στο δίσκο και έφτασε στο μέγιστο των 166.69 GiB μνήμης διεργασίας στις δοκιμές, κάτι που το τοποθετεί μέσα σε ένα Mac Studio M3 Ultra 256GB με περιθώριο. Ο δημιουργός του μέτρησε 9.46 tokens ανά δευτερόλεπτο με greedy decoding ακριβώς σε αυτό το μηχάνημα.5 Αυτό δεν είναι γρήγορο, και για ένα μοντέλο 552B που απαντά από το γραφείο είναι αξιοσημείωτο.

Το μικτό 4/8-bit build ζητά 427GB resident, κάτι που ένα Mac Studio M3 Ultra 512GB το διαθέτει, οριακά. Η στενή ισορροπία μετρά εδώ: αφήστε περιθώριο για το context, επειδή ένα μεγάλο prompt σε αυτό το context length δεν είναι δωρεάν. Το engram-6 build θέλει περίπου 477GB και μηχάνημα κατηγορίας terabyte, αφού ένα lazy forward pass μπορεί προσωρινά να χρειαστεί περίπου το διπλάσιο του build size.4

Πάνω από 512GB σε ένα κουτί υπάρχουν δύο έντιμες διαδρομές. Το Thunderbolt 5 clustering συγκεντρώνει unified memory σε πολλούς Mac — το macOS 26.2 πρόσθεσε RDMA μέσω Thunderbolt 5 και το exo 1.0 το υποστηρίζει, οπότε συνδεδεμένα Mac Studio M3 Ultra 512GB μηχανήματα αθροίζονται.7 Ή φτιάχνετε έναν σταθμό εργασίας με τη χωρητικότητα: ένα Neox Metal στην πλατφόρμα Threadripper PRO διαθέτει οκτώ κανάλια registered ECC memory, που είναι ο τρόπος να φτάσετε σε ένα terabyte σε ένα μόνο μηχάνημα, και η ίδια πλατφόρμα υποστηρίζει τις κάρτες RTX PRO 6000 που απαιτεί η διαδρομή SGLang.

Ρυθμίσεις

Η DeepSeek συνιστά θερμοκρασία 1.0 με top-p στο 0.95 ή στο 1.0, και τουλάχιστον 256K του max_tokens.1 Η προσπάθεια συλλογισμού είναι ένας συνεχώς ρυθμιζόμενος ακέραιος από 1 έως 100 αντί για τον διακόπτη low/high/max που χρησιμοποιούν άλλα μοντέλα, οπότε αξίζει να ρυθμιστεί αντί να μείνει στην προεπιλογή.

Ένας αριθμός είναι ασυνήθιστα καλός. V4.1-Flash χρησιμοποιεί 890 bytes ανά token της καθολικής KV cache, κάτι που κρατά ένα πλήρες context ενός εκατομμυρίου tokens κάτω από ένα gigabyte.1 Στα περισσότερα μοντέλα αυτού του μεγέθους το context είναι αυτό που επιβάλλει την επόμενη αναβάθμιση μνήμης. Εδώ είναι τα weights, και μόνο τα weights.

Για τους υπολογισμούς πίσω από όλα αυτά, δείτε πόση μνήμη χρειάζεστε για να εκτελέσετε τοπικά ένα open model. Για το μοντέλο που βρίσκεται αυτή τη στιγμή στην κορυφή των open leaderboards, δείτε τις απαιτήσεις υλικού του GLM-5.3.

Πηγές

  1. DeepSeek-V4.1-Flash model card, Hugging Face — 552B backbone, 8B active on prefill and 16B on decode, causal encoder-decoder, άδεια MIT, 890 bytes ανά token global KV, sampling and reasoning-effort settings.
  2. DeepSeek-V4.1-Flash file listing, Hugging Face — 510GB across 48 safetensors shards in FP8.
  3. Unsloth, DeepSeek-V4: How to Run Locally — V4-Flash-0731 parameters, quantisation sizes and memory requirements.
  4. PipeNetwork, DeepSeek-V4.1-Flash MLX mixed 4/8-bit and the engram-6 build — 427.6GB and 476.8GB on disk, resident memory, and the note that deepseek_v41 exists in no runtime, with the port at PipeNetwork/deepseek-v41-mlx.
  5. Vontra, DeepSeek-V4.1-Flash MLX 2-bit MTP — 238.80GB on disk, 166.69 GiB peak process memory, 9.46 tokens per second measured on an M3 Ultra Mac Studio, and the engram table size.
  6. Modem Guides, "DeepSeek V4.1-Flash Hardware Requirements", 10 Σεπτεμβρίου 2026 — survey of engine support, including the SGLang development images and the state of the vLLM pull requests.
  7. RunAIHome, "Mac Studio Cluster: RDMA Over Thunderbolt 5" — macOS 26.2 RDMA over Thunderbolt 5, the JACCL backend and exo 1.0 clustering.