Game-Lag-Whitepaper › L6 Netzwerkkarte des Servers

Virtualisierungs-Overhead und Noisy Neighbor Noisy neighbors in virtualization

Ursachen-ID nic-noisy · Hauptzuständig Server-Infrastruktur (Infrastrukturteam) · Beteiligt Extern (Extern)

In der interaktiven Fassung mit Grafiken und Experimenten öffnen →

Nutzen andere VMs auf demselben physischen Server viel Netzwerk oder CPU, verzögert sich die Verarbeitung auf dem eigenen Server unregelmäßig.

Warum Andere VMs auf demselben physischen Server verbrauchen viele Ressourcen → Folge Paketverarbeitung der eigenen VM verzögert sich unregelmäßig → Auf dem Bildschirm Ohne erkennbaren Grund gelegentlich Jitter (Schwankung der Ankunftsabstände), es ruckelt

Symptome

Ruckeln

Faktoren

Jitter

Wer ist betroffen

Ganzer Server

Wann

Gelegentlich, zufällig

Zuständigkeit

Hauptzuständig Server-Infrastruktur (Infrastrukturteam) · Beteiligt Extern (Extern)

Aufgaben Infrastrukturteam

Dedizierte Hosts oder Instanzen mit garantierter Leistung nutzen, Instanzen mit anhaltendem Jitter stoppen und neu starten, um sie auf einen anderen Host zu verschieben.

Aufgaben Extern

Problematischen Host beim Cloud-Anbieter melden.

Im Graphen

Vereinzelte Spitzen ohne Muster · Jitter der Umlaufzeit im selben Rechenzentrum, %steal

Wo nachsehen

Dauerhaft ping an andere Server im selben Rechenzentrum senden, den Jitter der Umlaufzeit protokollieren und zusammen mit %steal aus mpstat mit anderen Instanzen gleicher Konfiguration vergleichen

Spricht dafür

Nur bei dieser Instanz schlagen Jitter der Umlaufzeit oder %steal unregelmäßig aus, andere Instanzen gleicher Konfiguration bleiben ruhig. Nach Stoppen und Neustart auf einem anderen Host ist es weg

Spricht dagegen

Alle Instanzen gleicher Konfiguration schlagen gleich aus: kein Host-Problem. Last auf dem Spielserver oder den Netzwerkabschnitt prüfen

Prüfmittel

Mit Infrastruktur-Tools prüfbar (ohne Spielcode)

Quellen

1. How EC2 instance stop and start works AWS
   Wird eine Instanz gestoppt und wieder gestartet, landet sie meist auf einem neuen Host (außer bei dedizierten Hosts)
2. mpstat(1) — Linux manual page sysstat
   %steal: Anteil der Zeit, in der diese virtuelle CPU zwangsweise warten musste, während der Hypervisor eine andere virtuelle CPU bediente

Verwandte Ursachen

Gleiche Schicht: L6 Netzwerkkarte des Servers

• NIC-Interrupts auf nur einem Kern
• Zu kleiner Ringpuffer
• Zu starkes Interrupt-Coalescing
• Überschrittenes PPS-Limit in der Cloud
• Vollauslastung der NIC-Bandbreite
• Wartung des Cloud-Hosts und Live-Migration
• Probleme mit NIC-Treiber oder -Firmware
• Verzögerung durch GRO/LRO-Zusammenfassung

Ursachen aus anderen Schichten mit demselben Symptom (Ruckeln)

• Frametime-Spikes L1 Spielprozess auf dem Client
• Garbage Collection auf dem Client L1 Spielprozess auf dem Client
• Synchrones Laden und Shader-Kompilierung im Main-Thread L1 Spielprozess auf dem Client
• Langsamer Datenträger bremst Asset-Streaming L1 Spielprozess auf dem Client
• Renderlast durch große Spielermengen L1 Spielprozess auf dem Client
• Fehlender oder zu kurzer Interpolationspuffer L1 Spielprozess auf dem Client
• Übermäßige Extrapolation (Dead Reckoning) L1 Spielprozess auf dem Client
• Aufholspirale bei festem Zeitschritt L1 Spielprozess auf dem Client

Karte in der interaktiven Fassung mit Grafiken und Experimenten ansehen