[GTER] Latência alta somente pela Embratel/Virtua

Thu Dec 20 05:01:08 -02 2018

Bom dia,

Pessoal queria ver se alguém consegue me dar uma luz, em um problema que
esta arrastando aqui a algumas semanas e já tentei de tudo e não acho uma
solução, nem mesma a causa raiz.

O CENÁRIO:

Ocorre o seguinte, aqui na empresa temos alguns servidores, onde clientes
externos fazem acesso a eles.
Temos como operadora de transito, a China e Level3. E fechamos as sessões
BGP através de um servidor com VyOS.

O PROBLEMA:

Para quase todos os estados do Brasil, o acesso é super rápido a esses
servidores, não excede 50ms no tempo de resposta. Só há uma exceção a
NetVirtua.
Ela tem o tempo de resposta de 280ms. Somente  para o Virtua que tem a
latência alta assim, as demais conexões até distantes como Maranhão, Pará
tem latência ótima.

Bom, derrubando um link, deixando o outro, e vice versa o problema
persiste, o mais estranho e que pelos testes de traceroute o aumento da
latência ocorre dentro do meu roteador, que é o ultimo salto.

TESTES REALIZADOS:

Esse é um traceroute feito pela ALGAR ( que não tem problema ):

1 et-2-0-1-0.ptx-a.spo-piaf.algartelecom.com.br (170.84.34.5) 0.680 ms
0.756 ms 0.730 ms
2 ae0-0.ptx-b.bre-511.algartelecom.com.br (170.84.33.38) 1.144 ms 1.162 ms
1.099 ms
3 100.126.1.194 (100.126.1.194) 1.251 ms 1.183 ms 1.310 ms
4 168-197-021-061.static.algartelecom.com.br (168.197.21.61) 1.911 ms
200-170-177-173.xf-static.ctbcnetsuper.com.br (200.170.177.173) 3.211 ms
1.801 ms
5 218.30.39.18 (218.30.39.18) [AS 4809] 2.383 ms 59.43.246.245
(59.43.246.245) 1.720 ms 3.012 ms
6 218.30.39.18 (218.30.39.xx) [AS 4809] 2.370 ms 3.858 ms 3.072 ms
7 45.162.xx (45.162.xx) [AS 268xx] 2.132 ms 177.67.xx  6.634 ms 1.796 ms
9 45.162.xx (45.162.xx) [AS 268xx] 2.866 ms !<10> 2.773 ms !<10> 2.033 ms
!<10>

Média de 2.8ms

Agora pelo NetVirtua para o mesmo IP ( rede que ocorre o problema ):

 1    <1 ms    <1 ms    <1 ms  192.168.20.1
  2    15 ms    19 ms    23 ms  10.16.0.1
  3    91 ms    92 ms    95 ms  bd07605a.virtua.com.br [189.7.96.90]
  4    22 ms    23 ms    23 ms  embratel-T0-0-0-0-uacc01.bhe.embratel.net.br
[189.52.252.133]
  5    22 ms    22 ms    23 ms  ebt-P4-2-1-agg02.bhe.embratel.net.br
[200.244.212.147]
  6    22 ms    22 ms    23 ms  ebt-P2-2-3-core01.cem.embratel.net.br
[200.244.24.5]
  7   109 ms   115 ms    22 ms  ebt-Plag-12-core01.bhe.embratel.net.br
[200.244.24.9]
  8    37 ms    38 ms    35 ms  ebt-B10831-tcore01.spoph.embratel.net.br
[200.244.212.126]
  9    36 ms    31 ms    37 ms  ebt-B12-tcore01.spo.embratel.net.br
[200.230.158.30]
 10    29 ms    31 ms    30 ms  ebt-H0-0-0-1-agg01.spo.embratel.net.br
[200.230.242.44]
 11    29 ms    30 ms    29 ms  peer-B42-agg01.spo.embratel.net.br
[200.211.219.222]
 12    34 ms    34 ms    34 ms
et-2-0-1-0.ptx-a.spo-piaf.algartelecom.com.br [170.84.34.5]
 13    34 ms    33 ms    33 ms  ae0-0.ptx-b.bre-511.algartelecom.com.br
[170.84.33.38]
 14    30 ms    73 ms    40 ms  100.126.1.194
 15     *        *        *     Esgotado o tempo limite do pedido.
 16   244 ms   244 ms   244 ms  218.30.39.xx
 17   245 ms   245 ms   245ms  45.162.xx

Então pensei.. poxa isso é o VyOS, algum problema, mudei a versão, troquei
o hardware, e nada.
Pensei novamente "problema em todas as versões do VyOS rs. ", fui para
FreeBSD + OpenBGP, mesma coisa.

É hardware, troquei cordão, placa de rede... nada.

Hoje estava mais tranquilo resolvi fazer uns testes mais a fundo, e ocorreu
uma coisa mais estranha ainda, temos uma outra operadora, que nos fornece
apenas 20MB de link, então deixamos so para monitorar a rede. Setei esta
rede no roteador. acontece que quando a sessão BGP está down, o ping fica
estável e baixo, como deveria, mas quando a sessão sob, o ping aumenta,
mesmo nesta rede, ou seja, uma terceira com o mesmo erro.

Porem confirmando, isto ocorre só para a NetVirtua,  demais operadoras está
100%.

Ocorre para todos os IPs do /21. IPv6, funciona normal, somente IPv4 que
tem esse aumento de latência.

Certamente é algo em minha configuração, que estou passando por cima e não
estou vendo, mas já revisei isso de tudo quanto é forma.

Na semana passada, sem mexer em nada estabilizou, fico com o ping normal
via NetVirtua, mas desde Quarta passada voltou novamente a latência alta.

Contratei um VPS da Embratel (para ter uma referencia de outro ponto da
rede deles), para fazer um traceroute de dentro da rede deles, para o IP do
servidor, e tenho o seguinte resultado:

root at vps-embratel:~# traceroute 45.162.xx.xx
traceroute to 45.162.228.4 (45.162.xx.xx), 30 hops max, 60 byte packets
 1  cs-201-73-146-3.embratelcloud.com.br (201.73.146.3)  3.878 ms  3.836
ms  3.816 ms
 2  * * *
 3  * * *
 4  * * *
 5  * * *
 6  embratel-g0-0-0-19-uacc02.spolp.embratel.net.br (201.64.46.177)  11.099
ms  11.090 ms  10.868 ms
 7  ebt-h0-4-0-0-tcore01.spolp.embratel.net.br (200.244.213.132)  13.780
ms  12.489 ms  10.883 ms
 8  ebt-b10-tcore01.spo.embratel.net.br (200.230.0.2)  13.178 ms
ebt-b1102-tcore01.spo.embratel.net.br (200.230.243.32)  7.751 ms
ebt-b10-tcore01.spo.embratel.net.br (200.230.0.2)  14.220 ms
 9  ebt-h0-4-0-1-agg01.spo.embratel.net.br (200.230.242.42)  10.731 ms
11.003 ms  10.521 ms
10  peer-b42-agg01.spo.embratel.net.br (200.211.219.222)  10.262 ms  10.364
ms  10.320 ms
11  et-2-0-1-0.ptx-a.spo-piaf.algartelecom.com.br (170.84.34.5)  10.352 ms
10.240 ms  10.286 ms
12  ae0-0.ptx-b.bre-511.algartelecom.com.br (170.84.33.38)  12.374 ms
10.875 ms  10.864 ms
13  100.126.1.194 (100.126.1.194)  10.500 ms  10.626 ms  10.468 ms
14  200-170-177-173.xf-static.ctbcnetsuper.com.br (200.170.177.173)  39.831
ms *  19.455 ms
15  * * *
16  45.162.xx.xx (45.162.xx.xx)  223.999 ms !X  223.338 ms !X 45.162.xx
(45.162.xx.xx)  223.264 ms

Bom tenho mais testes e informações, mas o e-mail acabaria ficando grande
demais por isso resumi.

Se alguém tiver alguma sugestão, disca seja o que for será de grande ajuda,
pois realmente não tenho mais ideia do que tentar.

-- 
Atenciosamente
----------------------------------
Fabio F. Andrade
smsfabio at gmail.com

[image: Mailtrack]
<https://mailtrack.io?utm_source=gmail&utm_medium=signature&utm_campaign=signaturevirality5&>
Remetente
notificado por
Mailtrack
<https://mailtrack.io?utm_source=gmail&utm_medium=signature&utm_campaign=signaturevirality5&>
20/12/18
04:44:00