Wir bieten
Unsere erschwinglichen Preise
Nur Marken-Hardware, vollständige Kontrolle, keine Traffic-Limits, keine Überraschungen!
NVIDIA-GPU-Server für AI, maschinelles Lernen und Rendering in Tier-III-EU-Rechenzentren
Nur Marken-Hardware, vollständige Kontrolle, keine Traffic-Limits, keine Überraschungen!
Unternehmensfähige Infrastruktur mit 99.9% Verfügbarkeitsgarantie in EU-Standorten
Bringen Sie Ihre Server und Ressourcen innerhalb von Stunden online, nicht Tagen. Keine Installationsgebühr
GDPR-konforme Operationen mit allen Daten gespeichert in europäischen Rechenzentren
Ein GPU-Server ist eine dedizierte Maschine mit einem oder mehreren Beschleunigern, in unseren eigenen europäischen Racks. Sie bekommen die ganze Karte - nicht einen zeitlich geteilten Bruchteil davon - zusammen mit CPU, RAM und NVMe, um sie auszulasten, und genau das entscheidet meist über den tatsächlichen Durchsatz.
Welche Karten verfügbar sind, ändert sich mit der Liefersituation, deshalb ist die Konfigurationsseite die ehrliche Liste und nicht eine feste Tabelle an dieser Stelle. Was sich nicht ändert, ist die Form: genug Arbeitsspeicher, um ein Modell beim Laden zu halten, NVMe schnell genug, dass das Laden der Daten nicht zum Engpass wird, und ein Netzwerkport, über den ein Datensatz hereinkommt.
Die praktische Grenze ist VRAM. Ein Modell mit 7 Milliarden Parametern, auf 4 Bit quantisiert, passt bequem auf eine 16-GB-Karte und lässt Platz für ein brauchbares Kontextfenster; 13B will 24 GB; ein 70B-Modell gleicher Quantisierung braucht rund 40-48 GB oder zwei Karten. In voller 16-Bit-Präzision verdoppeln sich diese Zahlen ungefähr.
Passt ein Modell nicht, lautet die Antwort Quantisierung, ein kleineres Modell oder eine weitere Karte - nicht das Auslagern in den Arbeitsspeicher, das aus einem interaktiven Assistenten einen Batch-Job macht.
vLLM für Serving mit hohem Durchsatz und OpenAI-kompatiblem Endpunkt, Ollama, wenn Bequemlichkeit mehr zählt als maximale Token pro Sekunde, llama.cpp für den kleinsten Fußabdruck und PyTorch direkt für alles Eigene. Alle installieren sich genauso wie auf jeder anderen Ubuntu-Maschine, denn genau das ist es.
Inferenz ist latenzempfindlich und wird meist von VRAM und Speicherbandbreite begrenzt: eine Karte, groß genug, und ein kurzer Weg zum Client. Sie läuft durchgehend, also ist eine monatliche Maschine die günstigere Lösung.
Training und Fine-Tuning sind durchsatzgebunden und stoßweise. Sie wollen mehr Karten, deutlich mehr Arbeitsspeicher und NVMe groß genug für den Datensatz. Fällt die Arbeit nur gelegentlich an, dimensionieren Sie für die Spitze und geben die Maschine danach zurück, statt für ungenutztes Silizium zu zahlen.
Der Grund, aus dem die meisten unserer GPU-Kunden hier sind, ist nicht der Preis. Es ist, dass ein Modell auf einer Maschine, die Sie in Prag oder Covilha mieten, keine Prompts an Dritte schickt, mit Ihren Dokumenten nicht das Modell eines anderen trainiert und in einer Rechtsordnung liegt, die Sie in einem Auftragsverarbeitungsvertrag benennen können.
Das zählt bei allem, was Kundendaten, Verträge, medizinische oder finanzielle Daten berührt - den Workloads, bei denen eine öffentliche Inferenz-API ein Compliance-Problem ist, bevor sie ein technisches ist.
GPU-Maschinen sind physisch und werden auf Bestellung gebaut, die Vorlaufzeit ist also länger als bei einem Cloud-Server. Sagen Sie dem Support, welches Modell Sie ausliefern wollen und mit welcher Parallelität, dann nennt er Ihnen die kleinste Karte, die das schafft - und nicht die größte auf Lager.
Beide Tier-III-Standorte können sie beherbergen, und die Wahl folgt Ihren Nutzern genauso wie bei jedem anderen Server.
Häufig gestellte Fragen
Die ganze Karte. Ein GPU-Server ist eine dedizierte Maschine, an der der Beschleuniger hängt, zusammen mit der CPU, dem RAM und dem NVMe, um die Karte auszulasten - und das entscheidet meist über den tatsächlichen Durchsatz, nicht die Karte allein
Die Grenze ist der VRAM. Ein Modell mit 7 Milliarden Parametern, auf 4 Bit quantisiert, passt bequem in 16 GB und lässt Platz für ein brauchbares Kontextfenster, 13B will 24 GB, und ein 70B-Modell gleicher Quantisierung braucht rund 40-48 GB oder zwei Karten. In voller 16-Bit-Präzision verdoppelt sich jede dieser Zahlen ungefähr
Alles, was unter Ubuntu mit NVIDIA-Treibern läuft: vLLM für Serving mit hohem Durchsatz und OpenAI-kompatiblem Endpunkt, Ollama, wenn Bequemlichkeit mehr zählt als Spitzendurchsatz, llama.cpp für den kleinsten Fußabdruck oder PyTorch direkt für eigene Arbeiten
Sie brauchen verschiedene Maschinen. Inferenz ist latenzgebunden und meist durch VRAM begrenzt, also ist eine ausreichend große Karte im Dauerbetrieb die günstigere Lösung. Training und Fine-Tuning sind durchsatzgebunden und stoßweise - mehr Karten, deutlich mehr Arbeitsspeicher und NVMe groß genug für den Datensatz
Nirgendwohin. Das Modell läuft auf einer Maschine, die Sie in Prag oder Covilha mieten: Prompts gehen nicht an Dritte, nichts wird verwendet, um das Modell eines anderen zu trainieren, und die Rechtsordnung ist eine, die Sie in einem Auftragsverarbeitungsvertrag benennen können
Länger als bei einem Cloud-Server, denn die Maschine ist physisch und wird auf Bestellung gebaut. Sagen Sie dem Support, welches Modell Sie ausliefern wollen und mit welcher Parallelität, dann dimensioniert er die kleinste Karte, die das schafft - statt der größten auf Lager
Wenn Sie Hilfe benötigen oder zusätzliche Fragen haben, wenden Sie sich bitte an die Manager oder schreiben Sie an das Support-Team unter support@dcxv.com