Sie möchten Coding-Agenten und IDE-Assistenten mit einem eigenen Modell betreiben, ohne Quellcode an eine fremde API zu senden. Wir betreiben Devstral auf einem dedizierten GPU-Server in einem deutschen Rechenzentrum.
Unternehmen weltweit vertrauen WZ-IT
Devstral ist die Coding-Linie von Mistral AI. Die Modelle sind auf Agenten für die Softwareentwicklung ausgelegt: Codebasis durchsuchen, Änderungen über mehrere Dateien vornehmen, Werkzeuge aufrufen. Devstral Small 2 hat 24 Mrd. Parameter, nimmt auch Bilder entgegen und steht unter Apache 2.0. Devstral 2 hat 123 Mrd. Parameter und steht unter einer Modified MIT License mit Umsatzschwelle.
Coding-Agenten senden große Teile einer Codebasis als Kontext an das Modell. Auf einem eigenen Server bleiben Quellcode, Diffs und Testausgaben im deutschen Rechenzentrum. IDE-Erweiterungen und Agenten-Clients sprechen den Server über die OpenAI-kompatible API von vLLM an. Die allgemeinen Modelle Mistral Small 4 und Mistral Medium 3.5 ordnen wir auf der Seite zu Mistral Hosting ein.
Das Modell läuft auf einem dedizierten Server in einem deutschen Rechenzentrum. Mit Auftragsverarbeitungsvertrag, ohne Datenweg zu einer Modell-API.
Fester Monatspreis je Serverstufe statt Abrechnung nach verbrauchten Tokens. Mehr Anfragen erhöhen die Rechnung nicht.
Checkpoint und Quantisierung bleiben, bis Sie einem Wechsel zustimmen. Kein stilles Modell-Update durch einen Anbieter.
Herstellerangaben und Größe der Gewichtsdateien je Format, mit Quelle.
| Checkpoint | Veröffentlicht | Parameter | Kontext laut Hersteller | Gewichte je Format |
|---|---|---|---|---|
| mistralai/Devstral-Small-2-24B-Instruct-2512 | 12/2025 | 24 Mrd. (dense, mit Vision) | 256K Tokens |
|
| mistralai/Devstral-2-123B-Instruct-2512 | 12/2025 | 123 Mrd. (dense, nur Text) | 256K Tokens |
|
GB = 10⁹ Bytes, Summe der Gewichtsdateien im genannten Hugging-Face-Repository. Zusätzlich braucht der Betrieb Speicher für KV-Cache, Runtime und gegebenenfalls Bildverarbeitung. Stand Oktober 2026.
Technische Einordnung, keine Rechtsberatung. Maßgeblich ist der Lizenztext der eingesetzten Modellversion.
Open-Source-LLM-Lizenzen im VergleichDie Empfehlung folgt aus der Größe der Gewichte plus Reserve für Kontext und Runtime.
| Modell | Format | Gewichte | Mindestens empfohlen | Hinweis |
|---|---|---|---|---|
| Devstral Small 2 | FP8 | 25,8 GB | Managed GPU Server 96 | Die Gewichte allein sind größer als 24 GB. Die Reserve auf 96 GB geht in Kontext und gleichzeitige Agentenläufe. |
| Devstral 2 | FP8 | 128,2 GB | Managed GPU Server 192 | Lizenzhinweis: keine Rechte bei mehr als 20 Mio. USD konsolidiertem Monatsumsatz des Unternehmens. |
Welche Stufe für Ihren Einsatz passt, hängt von Kontextlänge und gleichzeitigen Anfragen ab. Wir prüfen das vor dem Angebot.
Mistral veröffentlicht beide Modelle als FP8-Checkpoint. Die Repositories enthalten die Gewichte zusätzlich ein zweites Mal im Format consolidated, das beim Betrieb nicht doppelt geladen wird.
1 × RTX PRO 4000 Blackwell, 24 GB GPU-Speicher
699 € netto / Monat, monatlich kündbar
499 € netto Einrichtung einmalig
Konfiguration ansehenFür diese Familie relevant
1 × RTX PRO 6000 Blackwell Max-Q, 96 GB GPU-Speicher
1.799 € netto / Monat, monatlich kündbar
999 € netto Einrichtung einmalig
Konfiguration ansehenFür diese Familie relevant
2 × RTX PRO 6000 Blackwell Max-Q, 192 GB GPU-Speicher
Preis und Laufzeit auf Anfrage
Konfiguration ansehen4 × RTX PRO 6000 Blackwell Max-Q, 384 GB GPU-Speicher
Preis und Laufzeit auf Anfrage
Konfiguration ansehenDer Managed GPU Server 288 mit drei GPUs ist für mehrere Modelle nebeneinander gedacht, weil vLLM ein Modell nur bei durch die GPU-Zahl teilbaren Attention-Heads verteilt.
Architektur, Quantisierung und Verteilung auf mehrere GPUs.
Devstral Small 2 nutzt Mistral3ForConditionalGeneration mit Bild-Encoder, Devstral 2 die reine Textarchitektur Ministral3ForCausalLM. Beide stehen in der Liste der von vLLM unterstützten Modelle. Mistral verlangt für den Betrieb mistral_common ab Version 1.8.6.
Coding-Agenten rufen Werkzeuge über Function Calling auf. vLLM aktiviert das für Devstral mit dem Tool-Call-Parser mistral und automatischer Tool-Auswahl, so wie in der Modellkarte beschrieben. Clients mit OpenAI-kompatibler Schnittstelle nutzen das über Basis-URL und API-Schlüssel.
Jeder Agentenlauf hält seinen Kontext im KV-Cache. Lange Kontexte und viele gleichzeitige Läufe teilen sich denselben GPU-Speicher. Mistrals eigenes Beispiel betreibt Devstral Small 2 mit vollen 262.144 Tokens auf zwei GPUs. Auf einer GPU stellen wir Kontextlänge und parallele Läufe passend zu Ihrem Team ein.
Devstral Small 2 hat 32 Attention-Heads, Devstral 2 hat 96, beide mit 8 KV-Heads. Beide lassen sich auf zwei oder vier GPUs verteilen. Mistrals Beispiel für Devstral 2 nutzt acht GPUs; für die FP8-Gewichte mit rund 128 GB empfehlen wir mindestens zwei RTX PRO 6000.
Der Managed GPU Server ist eine betriebene Modellumgebung, kein leerer Server.
Ein abgestimmtes Modell in der vereinbarten Quantisierung, bereitgestellt über eine gemanagte vLLM-Inferenzschicht.
Anwendungen und Coding-Clients binden den Server über Basis-URL und API-Schlüssel an.
Gemanagte Chat-Oberfläche für Teams, die das Modell ohne eigene Anwendung nutzen.
Host, GPU, vLLM und Open WebUI werden proaktiv überwacht, Störungen nach Service Level bearbeitet.
Betriebssystem, Treiber, vLLM und Open WebUI werden geprüft und kontrolliert aktualisiert. Modellwechsel nur nach Absprache.
Auftragsverarbeitungsvertrag, dokumentierte Konfiguration und ein persönlicher Ansprechpartner.
Leistungsumfang, Preise und Mehr-GPU-Server stehen auf der Produktseite.
Managed GPU Server ansehenQwen Hosting
Qwen Hosting in Deutschland: Qwen3.8-27B, Qwen3.5-122B und Qwen3-Coder-Next auf dedizierter GPU, mit vLLM, OpenAI-kompatibler API und Betrieb mit AVV.
Familie ansehengpt-oss Hosting
gpt-oss Hosting in Deutschland: gpt-oss-120b und gpt-oss-20b von OpenAI auf dedizierter GPU, mit vLLM, OpenAI-kompatibler API und Betrieb mit AVV.
Familie ansehenGemma Hosting
Gemma Hosting in Deutschland: Gemma 4 31B, 26B A4B und 12B von Google auf dedizierter GPU, mit vLLM, OpenAI-kompatibler API und Betrieb mit AVV.
Familie ansehenMistral Hosting
Mistral Hosting in Deutschland: Mistral Small 4, Devstral Small 2 und Mistral Medium 3.5 auf dedizierter GPU, mit vLLM, Lizenzprüfung und Betrieb mit AVV.
Familie ansehenDeepSeek Hosting
DeepSeek Hosting in Deutschland: DeepSeek-V4-Flash auf einem dedizierten Server mit vier GPUs, mit vLLM, MIT-Lizenz und ohne Datenweg zur DeepSeek-API.
Familie ansehenLlama Hosting
Llama Hosting in Deutschland: warum Llama 4 für EU-Unternehmen lizenzrechtlich ausscheidet, wie Llama 3.3 70B läuft und welche Alternativen es gibt.
Familie ansehenModell prüfen lassen
Nennen Sie Modell, Kontextlänge und gleichzeitige Anfragen. Wir prüfen Checkpoint, Lizenz und Serverstufe vor dem Angebot.
Lizenz, Serverstufe, Datenweg und Betrieb
Devstral Small 2 ist der Einstieg für IDE-Assistenten und Coding-Agenten, mindestens empfohlen ist der Managed GPU Server 96. Devstral 2 ist das größere Modell, mindestens empfohlen ist der Managed GPU Server 192, und die Lizenz hat eine Umsatzschwelle. Welche Stufe für Ihren Einsatz passt, hängt von Kontextlänge und gleichzeitigen Anfragen ab. Wir prüfen das vor dem Angebot.
Nur wenn der konsolidierte weltweite Monatsumsatz Ihres Unternehmens oder Ihres Arbeitgebers im Vormonat 20 Mio. USD nicht überschreitet. Darüber gewährt die Modified MIT License keine Rechte, auch nicht für abgeleitete Modelle; eine kommerzielle Lizenz vergibt Mistral AI auf Anfrage. Devstral Small 2 steht unter Apache 2.0 ohne Schwelle.
Clients und IDE-Erweiterungen mit OpenAI-kompatibler Schnittstelle verbinden sich über Basis-URL, API-Schlüssel und Modellname. Mistral nennt in der Modellkarte unter anderem Mistral Vibe, Cline, Kilo Code, OpenHands und SWE-agent. Tool Calling stellt vLLM über den Parser für Mistral-Modelle bereit.
Das Modell läuft auf einem dedizierten Server in einem deutschen Rechenzentrum, ohne Verbindung zur Mistral-API. Viele Coding-Clients haben zusätzlich eigene Einstellungen für Anbieter und Telemetrie. Wir stimmen mit Ihnen ab, dass die Clients nur den eigenen Endpunkt ansprechen.
Das hängt weniger von der Zahl der Personen ab als von gleichzeitigen Agentenläufen und deren Kontextlänge. Ein Agent mit großem Repository-Kontext belegt deutlich mehr KV-Cache als eine kurze Chatfrage. Wir legen Kontextlänge und Parallelität mit Ihren typischen Aufgaben fest und nennen die Werte im Angebot.
Devstral Small 2 ist ein Dense-Modell mit 24 Mrd. Parametern und passt auf eine GPU mit 96 GB. Qwen3-Coder-Next ist ein größeres Mixture-of-Experts-Modell und braucht mindestens den Managed GPU Server 192. Welches Modell auf Ihren Repositories bessere Ergebnisse liefert, vergleichen wir mit Ihren Aufgaben.
Die Modelle unterstützen ihn, aber jeder lange Kontext belegt GPU-Speicher. Der volle Kontext ist nicht automatisch Teil jeder Stufe. Wir stellen die Kontextlänge passend zu Serverstufe und gleichzeitigen Agentenläufen ein.
Der Einstieg für Devstral ist der Managed GPU Server 96, mindestens empfohlen für Devstral Small 2: 1.799 € netto / Monat plus 999 € netto Einrichtung einmalig, mit dediziertem Server, vLLM, Open WebUI und Managed-Betrieb durch WZ-IT. Größere Varianten brauchen einen Mehr-GPU-Server, dessen Preis wir auf Anfrage nennen. Welche Stufe für Ihren Einsatz passt, hängt von Kontextlänge und gleichzeitigen Anfragen ab. Wir prüfen das vor dem Angebot.
Ob konkrete IT-Herausforderung oder einfach eine Idee - wir freuen uns auf den Austausch. In einem kurzen Gespräch prüfen wir gemeinsam, ob und wie Ihr Projekt zu WZ-IT passt.