Published on

KI-Server Netzwerk: Gigabit vs. 10G für LLM-Pipelines

Authors

Netzwerk-Bandbreite: Der unterschätzte Engpass

Bei LLM-Workloads geht es nicht nur um GPU-Performance — die Netzwerk-Bandbreite zwischen Server, NAS und Clients kann zum Flaschenhals werden.

Vergleich: 1G vs. 10G

NetzwerkMax. Throughput1M-Dok. RAG-LatenzDateisync 100GB
1 Gigabit125 MB/s~8s~14min
10 Gigabit1.250 MB/s~1s~1.5min
25 Gigabit3.125 MB/s~0.5s~36s

Wann 1G reicht

  • Single-User: 1-3 gleichzeitige Nutzer
  • Lokale Vektordatenbank: Qdrant auf demselben Server
  • Lokales Frontend: Open WebUI auf demselben Server
  • Lokales NAS: Daten liegen auf demselben Rack

Wann 10G nötig ist

  • Mehrere Clients: >10 gleichzeitige RAG-Anfragen
  • Distributed RAG: Vektordatenbank auf eigenem NAS
  • Batch-Processing: Tausende Dokumente parallel hochladen
  • Backup-Pipeline: Tägliche Backups vom NAS zum Remote-Server

Hardware-Empfehlung für 10G

KomponenteSpezifikationPreis
10G-NIC: Intel X520-DA2Dual-Port SFP+€80
10G-Switch: Netgear GS728T24-Port 10G~€600
SFP+-Kabel1m DAC€15
10G-NAS: Synology RS3621xs12-Bay 10G~€2.500

Fazit

Für den kleinen Mittelstand reicht 1G. Für produktive RAG-Pipelines mit mehreren Nutzern ist 10G der Standard — und der Unterschied (1s vs. 8s RAG-Latenz) ist spürbar.

👉 KI-Server Komplett-Konfiguration 👉 Enterprise KI: Pexon Consulting

📖 Verwandte Artikel

Weitere interessante Beiträge zu ähnlichen Themen