Saturação da largura de banda da NIC NIC bandwidth saturation

ID da causa nic-saturate · Responsável principal Desenvolvimento do servidor (Equipe de desenvolvimento) · Também envolvidos Infraestrutura de servidores (Equipe de infraestrutura)

Abrir o card interativo, com figuras e simulações →

Usar uma placa de 1 Gbps ou 10 Gbps no limite faz a fila de transmissão crescer até os pacotes serem descartados.

Por quê Mais broadcasts levam o tráfego ao limite da placa → Efeito A fila de transmissão cresce e, quando transborda, os pacotes são descartados → Na tela Atraso e perda no servidor inteiro (input lag, teleporte)

Sintomas: Input lag, Teleporte
Fatores: Latência, Perda de pacotes
Quem é afetado: Servidor inteiro
Quando: Quando junta muita gente
Responsável: Responsável principal Desenvolvimento do servidor (Equipe de desenvolvimento) · Também envolvidos Infraestrutura de servidores (Equipe de infraestrutura)
O que fazer (Equipe de desenvolvimento): Reduzir o tráfego (área de interesse, compressão, enviar só o que mudou).
O que fazer (Equipe de infraestrutura): Fazer upgrade da placa (NIC mais rápida ou, na nuvem, instância maior), criar alerta de utilização da NIC.
No gráfico: Achata ao bater no limite · Volume de transmissão da NIC, descartes na transmissão
Onde olhar: Comparar o txkB/s e o %ifutil (utilização em relação à velocidade da interface) do sar -n DEV 1 com a velocidade da NIC ou a largura de banda da instância, junto com o TX dropped do ip -s link
Confirma se: O volume de transmissão achata perto da largura de banda da NIC ou da instância, e a partir daí os descartes na transmissão e a latência do servidor inteiro aumentam
Descarta se: Largura de banda com folga: não é esta causa. Muitos pacotes pequenos e perda: “Limite de PPS da nuvem excedido”
Como verificar: Ferramentas de infra (sem precisar do código do jogo)

Fontes

Interface statistics Linux kernel
tx_dropped: número de pacotes descartados durante a transmissão por falta de recursos
Amazon EC2 instance network bandwidth AWS
A largura de banda que uma instância pode usar depende do número de vCPUs (tamanho da instância)
sar(1) — Linux manual page sysstat
rxkB/s, txkB/s e %ifutil (utilização em relação à velocidade da interface) do -n DEV

Veja também

Mesma camada: L6 Placa de rede do servidor

Mesmo sintoma (Input lag) em outras camadas

Carga de renderização com muitos personagens L1 Processo do jogo no cliente
Gargalo no processamento de pacotes na thread principal L1 Processo do jogo no cliente
V-Sync e fila de renderização L1 Processo do jogo no cliente
Modo de economia de energia e thermal throttling L2 SO e dispositivo do cliente
Outros apps do mesmo dispositivo consumindo largura de banda L2 SO e dispositivo do cliente
Latência da tela, do dispositivo de entrada e da geração de frames L2 SO e dispositivo do cliente
Canal de Wi-Fi congestionado L3 Rede doméstica
Bufferbloat (fila do roteador) L3 Rede doméstica

Ver o card interativo, com figuras e simulações