ServeTheHome: AI/GPU-Hardware: Funktionierende lokale KI-Setups im Realitäts-Check

Kurzfassung (4-6 Sätze): ServeTheHome: AI/GPU-Hardware deckt aktuell eine Vielzahl von Themen ab, darunter neue Workstations, Switches und RISC-V-Updates. Besonders hervorzuheben sind die neuen AMD Threadripper Halo Station und der MikroTik CRS804-4DDQ-hRM Switch. Diese Woche bieten wir konkrete Setups, die für die lokale KI-Entwicklung geeignet sind, und geben Einblicke in ihre Leistung und Eignung für den privaten Einsatz.
[AMD Announces Threadripper Halo Station: A High-End AI-Centric Developer Workstation] (8/10) — OpenCode-Fit: JA

Worum es geht (2-4 Sätze): AMD hat bei IFA 2026 die Threadripper Halo Station vorgestellt, eine hochwertige Workstation für AI-Entwickler. Das System kombiniert einen Threadripper Pro CPU mit AMD Instinct MI350P Acceleratoren und bietet hohe Leistung für lokale AI-Inferenz und Entwicklung.
Reales Setup (komplette Fakten-Tabelle):
| Feld | Wert |
|—|—|
| GPU(s) | 2x/4x AMD Instinct MI350P (144GB HBM3E) |
| CPU / Mainboard | AMD Threadripper Pro 9995WX (96C/192T) |
| RAM | Up to 2TB DDR5 |
| PSU | TBC |
| Chassis / Kuehlung | Tower Workstation |
| Framework + Version | TBC |
| Modell + Quant | TBC |
| Kontext-Länge | TBC |
| tok/s (single) | TBC |
| tok/s (batched) | TBC |
| Strom (full load) | TBC |
| Rohkosten | TBC |
| Autarkie-Fit | JA mit Einschränkung |
Was funktioniert konkret? (3-5 Sätze): Die Threadripper Halo Station bietet eine hohe Leistung für AI-Inferenz und Entwicklung dank der Kombination aus einem leistungsstarken Threadripper Pro CPU und AMD Instinct MI350P Acceleratoren. Das System ist ideal für Entwickler, die komplexe Modelle lokal trainieren und deployen möchten.
Was NICHT funktioniert / Limits (2-4 Sätze): Die genauen Zahlen für Leistung und Energieverbrauch sind noch nicht bekannt. Das System ist relativ teuer und könnte für den privaten Einsatz zu aufwendig sein, aber es bietet eine hervorragende Leistung für professionelle Entwickler.
Nachbau-Empfehlung (2-4 Sätze): Das System ist für Entwickler mit einem höheren Budget geeignet, die eine hohe Leistung für lokale AI-Entwicklung benötigen. Für den privaten Einsatz könnte man eine reduzierte Version mit weniger GPUs in Betracht ziehen.
Weitere Beitraege (automatisch gefiltert):
– Cheap Desktop 400GbE Switch MikroTik CRS804-4DDQ-hRM Review — keine Hardware belegt, kein nachbaubares Setup