[caiu] RES: IX-SP

Ricardo Romero ricromerobr em gmail.com
Sex Set 7 15:07:10 -03 2018


Nova pane do IX.br de São Paulo em 7 de setembro <http://stspg.io/48323ea74>
Incident Report for UPX
New Incident Status: Resolved
Conforme esperado, o IX.br de São Paulo foi normalizado. Quaisquer dúvidas
ou dificuldades que possam persistir devem ser direcionadas ao suporte do
NIC.br via http://meu.ix.br. Nosso atendimento também está à disposição
para os clientes do IPTS via redes em upx.com e demais produtos via
suporte em upx.com.
Sep 7, 13:50 GMT-03:00
Monitoring
Às 10:55 (UTC-3 da manhã de hoje diversos PIXes do IX.br de São Paulo
ficaram novamente fora do ar. A normalização se iniciou às 11:47 (UTC-3).
Clientes que se conectam a UPX do produto IPTS através de VLAN bilateral
podem ter apresentado desconexão durante este intervalo. Demais clientes
UPX de outros produtos podem ter sido afetado por dificuldades técnicas em
seus provedores de acesso à internet pois a interrupção do IX.br de São
Paulo provoca severo congestionamento e recálculo de rotas por caminhos
alternativos da internet.

Esta alta incidência de downtime no IX.br não é normal e não possui
paralelos desde a fundação deste ponto de troca de tráfego. No último
relatório público emitido (http://ix.br/doc/relatorio-incidente-20180830.pdf)
isolaram a causa na fonte de um equipamento importante que ao perder a
alimentação elétrica gera esta pane massiva. Com esta causa identificada,
estimamos que nas próximas semanas a solução definitiva seja implementada
pelo NIC.br.

Durante todo o episódio, o backbone da UPX e seus serviços permaneceram
operantes sem intercorrências. Estamos monitorando a normalização e a
consideraremos estável após 1h da permanência do cenário atual.
Sep 7, 12:01 GMT-03:00
This incident affected: CYBER SECURITY (IP TRANSIT SECURITY (DDoS
Mitigation)) and PERFORMANCE (IP TRANSIT).

On Fri, Sep 7, 2018 at 2:56 PM Marcel Figueiredo <marcelhalls em gmail.com>
wrote:

> Sp inteira esta com manutenção nos postes, turma da infraestrutura esta
> arrumando tudo, pode ser isso .
>
> Em sex, 7 de set de 2018 12:40, NOC do IX.br <noc em ix.br> escreveu:
>
> > Pessoal, bom dia. Houve sim uma instabilidade na matriz de comutação do
> > IX.br de São Paulo. Foi normalizado por volta do 11:58 hrs. A equipe de
> > engenharia ainda esta investigando a causa raiz e tão logo tenhamos
> > maiores informações toods os participantes serão informados.
> >
> > Obrigado
> >
> > --
> >   Galvao Rezende
> >   <galvao em ix.br>
> >
> >   -------------------------
> >   Equipe do NOC IX.br
> >   <noc em ix.br>
> >
> >
> > On 9/7/18 11:10 AM, Gustavo Crims wrote:
> > > Acho que estamos com problema novamente não?
> > >
> > > Att
> > > Gustavo
> > >
> > > Em 6 de set de 2018, à(s) 08:38, Wagner Bento <wagner em seanet.com.br>
> > escreveu:
> > >
> > >> Bom dia. Aqui não caiu mais desde o dia 1.
> > >>
> > >>
> > >>
> > >> Atenciosamente.
> > >>
> > >>
> > >> Em 5 de setembro de 2018 08:02, Sidney de Oliveira Viana <
> > >> sidney.imw em gmail.com> escreveu:
> > >>
> > >>> Bom dia!
> > >>>
> > >>> PTT caiu pra vcs tbm?
> > >>>
> > >>> Em seg, 3 de set de 2018 às 17:37, Roosvelt David <
> > >>> roosveltdavid em hotmail.com>
> > >>> escreveu:
> > >>>
> > >>>> Perfeita explicação Douglas,
> > >>>>
> > >>>> E o efeito do Unicast flood é sentido mais intensamente no PTT,
> pois
> > >>> cada
> > >>>> vários Pixes costumam ter Centenas de Gbps de tráfego, como no caso
> da
> > >>>> Eletronet com média de Tráfego de 460Gbps, quando um Pix Cai como
> > ocorreu
> > >>>> na Eletronet, esse volume de tráfego passa a bombardear os demais
> > switchs
> > >>>> com Unicast Flood tentando buscar “aquele MAC”, inundando as demais
> > >>>> interfaces e causando muitas vezes um efeito cascata de proporções
> > >>>> gigantescas.
> > >>>>
> > >>>>
> > >>>>> Em 1 de set de 2018, à(s) 12:35 AM, Douglas Fischer <
> > >>>> fischerdouglas em gmail.com> escreveu:
> > >>>>> Unicast flood!
> > >>>>> Conceito básico de switching.
> > >>>>>
> > >>>>> O comportamento default de qualquer switch é encaminhar para todas
> as
> > >>>>> portas todo pacote que chegue para um Mac que não estejam na
> tabela.
> > >>>>>
> > >>>>> Quando uma interface cai, todos os macs que estavam vinculados
> aquela
> > >>>>> interface saem da tabela. (Ex.: Eletronet)
> > >>>>>
> > >>>>> Mas os outros participantes (ex.: Google, Facebook, etc...)
> continuam
> > >>>>> mandando pacotes para aquele mac-address.
> > >>>>>
> > >>>>> Isso significa que todos os participantes estão recebendo os
> pacotes
> > >>>>> daqueles macs até que os geradores de tráfego deixem de encaminhar
> > >>>> pacotes
> > >>>>> para os macs caídos.
> > >>>>>
> > >>>>>
> > >>>>> Existem várias alternativas para essa correção.
> > >>>>> Todas tem um pênalti! Nenhuma sai impune!
> > >>>>>
> > >>>>> Uma delas (a melhor na minha opinião) seria a de mudar o
> > comportamento
> > >>>>> padrão em caso de unknow Mac de flood para drop.
> > >>>>> Mas os impactos disso podem ser intensos, e difíceis de se estimar,
> > >>>>> principalmente considerando a quantidade de participantes com
> > múltiplos
> > >>>> IPs
> > >>>>> no mesmo ATM e tráfego assimétrico.
> > >>>>>
> > >>>>> Em sex, 31 de ago de 2018 18:11, Alexandre C. Fonseca por (caiu) <
> > >>>>> caiu em eng.registro.br> escreveu:
> > >>>>>
> > >>>>>> eu JURO q nao entendo como queda de energia em um switch de um PIX
> > >>>>>> qualquer pode gerar esse caos!
> > >>>>>>
> > >>>>>> para mim isso ainda tem cara de loop na rede!
> > >>>>>>
> > >>>>>> mas enfim... eles nao falam.. no maximo vem aquela resposta de 3
> > >>> linhas
> > >>>>>> com uma explicação bem superficial do q houve!
> > >>>>>>
> > >>>>>>
> > >>>>>>
> > >>>>>>> On 8/31/2018 5:54 PM, "Ezequias J. Gonçalves (Foruns)" wrote:
> > >>>>>>> Prezados
> > >>>>>>>    Uma duvida, se a queda de energia em um único pix afeta todo
> um
> > >>>>>> sistema não teria como isolar tal pix até que seja resolvido o
> > >>> problema
> > >>>> por
> > >>>>>> completo?
> > >>>>>>> Ezequias J. Gonçalves
> > >>>>>>> Icenet Telecomunicações LTDA
> > >>>>>>> Totalvia Internet
> > >>>>>>>
> > >>>>>>>
> > >>>>>>>
> > >>>>>>> Em 31 de ago de 2018, à(s) 17:16, Guilherme A. Monfré - Process
> > >>>> Telecom <
> > >>>>>> guilherme em process.com.br> escreveu:
> > >>>>>>>> Caiu via Algar - PIAF
> > >>>>>>>>
> > >>>>>>>> Atenciosamente
> > >>>>>>>> Guilherme A. Monfré
> > >>>>>>>> Adm. Redes Internet
> > >>>>>>>>
> > >>>>>>>> Process Telecom
> > >>>>>>>> Fone: +55 16 2016-1010 / 2016 1022
> > >>>>>>>> E-mail: guilherme em process.com.br     Skype:gmonfre
> > >>>>>>>> “Para chegar aonde a maioria não chega, é preciso fazer o que a
> > >>>> maioria
> > >>>>>> não
> > >>>>>>>> faz!”
> > >>>>>>>>
> > >>>>>>>> A Process oferece soluções com produtos e serviços de
> tecnologia e
> > >>>>>>>> comunicação.
> > >>>>>>>> Visite nosso portal de notícias www.process.com.br
> > >>>>>>>>
> > >>>>>>>> -----Mensagem original-----
> > >>>>>>>> De: caiu [mailto:caiu-bounces em eng.registro.br] Em nome de lyon
> > >>> lisboa
> > >>>>>>>> Enviada em: sexta-feira, 31 de agosto de 2018 17:14
> > >>>>>>>> Para: Lista das indisponibilidades da Internet brasileira
> > >>>>>>>> Assunto: Re: [caiu] IX-SP
> > >>>>>>>>
> > >>>>>>>> Caiu tudo via Eletronet
> > >>>>>>>>
> > >>>>>>>> Em sex, 31 de ago de 2018 às 17:10, Antonio Carlos Sanches <
> > >>>>>>>> asanches em omni.net.br> escreveu:
> > >>>>>>>>
> > >>>>>>>>> Acabou de cair aqui para mim, Bilateral e RS's. Só o LG ta on.
> > >>>>>>>>>
> > >>>>>>>>> Em sex, 31 de ago de 2018 às 15:40, Rubens Kuhl <
> > rubensk em gmail.com
> > >>>>>>>>> escreveu:
> > >>>>>>>>>
> > >>>>>>>>>> On Fri, Aug 31, 2018 at 9:34 AM Rodrigo Meireles
> > >>>>>>>>>> <mikrotikfull em gmail.com
> > >>>>>>>>>>
> > >>>>>>>>>> wrote:
> > >>>>>>>>>>
> > >>>>>>>>>>> Alguém confirma quedas no IX-SP novamente?
> > >>>>>>>>>>>
> > >>>>>>>>>>>
> > >>>>>>>>>> Não sei se é isso, mas hoje o IX-SP pode começar a ter o que o
> > >>> IX-CE
> > >>>>>>>>>> teve há algum tempo atrás:
> > >>>>>>>>>>
> > >>>>>>>>>>
> > >>>>
> > https://www.tudocelular.com/curiosidade/noticias/n130163/abrint-reclam
> > >>>>>>>>> a-corte-cabos-irregulares-eletropaulo.html
> > >>>>>>>>>> Rubens
> > >>>>>>>>>> _______________________________________________
> > >>>>>>>>>> caiu mailing list
> > >>>>>>>>>> caiu em eng.registro.br
> > >>>>>>>>>> https://eng.registro.br/mailman/listinfo/caiu
> > >>>>>>>>>>
> > >>>>>>>>>>
> > >>>>>>>>>> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >>>>>>>>>>
> > >>>>>>>>>> https://eng.registro.br/mailman/options/caiu
> > >>>>>>>>>>
> > >>>>>>>>> --
> > >>>>>>>>> _______________________________________________
> > >>>>>>>>> caiu mailing list
> > >>>>>>>>> caiu em eng.registro.br
> > >>>>>>>>> https://eng.registro.br/mailman/listinfo/caiu
> > >>>>>>>>>
> > >>>>>>>>>
> > >>>>>>>>> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >>>>>>>>>
> > >>>>>>>>> https://eng.registro.br/mailman/options/caiu
> > >>>>>>>>>
> > >>>>>>>> _______________________________________________
> > >>>>>>>> caiu mailing list
> > >>>>>>>> caiu em eng.registro.br
> > >>>>>>>> https://eng.registro.br/mailman/listinfo/caiu
> > >>>>>>>>
> > >>>>>>>>
> > >>>>>>>> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >>>>>>>>
> > >>>>>>>> https://eng.registro.br/mailman/options/caiu
> > >>>>>>>>
> > >>>>>>>> _______________________________________________
> > >>>>>>>> caiu mailing list
> > >>>>>>>> caiu em eng.registro.br
> > >>>>>>>> https://eng.registro.br/mailman/listinfo/caiu
> > >>>>>>>>
> > >>>>>>>>
> > >>>>>>>> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >>>>>>>>
> > >>>>>>>> https://eng.registro.br/mailman/options/caiu
> > >>>>>>> _______________________________________________
> > >>>>>>> caiu mailing list
> > >>>>>>> caiu em eng.registro.br
> > >>>>>>> https://eng.registro.br/mailman/listinfo/caiu
> > >>>>>>>
> > >>>>>>>
> > >>>>>>> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >>>>>>>
> > >>>>>>> https://eng.registro.br/mailman/options/caiu
> > >>>>>> _______________________________________________
> > >>>>>> caiu mailing list
> > >>>>>> caiu em eng.registro.br
> > >>>>>> https://eng.registro.br/mailman/listinfo/caiu
> > >>>>>>
> > >>>>>>
> > >>>>>> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >>>>>>
> > >>>>>> https://eng.registro.br/mailman/options/caiu
> > >>>>>>
> > >>>>> _______________________________________________
> > >>>>> caiu mailing list
> > >>>>> caiu em eng.registro.br
> > >>>>> https://eng.registro.br/mailman/listinfo/caiu
> > >>>>>
> > >>>>>
> > >>>>> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >>>>>
> > >>>>> https://eng.registro.br/mailman/options/caiu
> > >>>> _______________________________________________
> > >>>> caiu mailing list
> > >>>> caiu em eng.registro.br
> > >>>> https://eng.registro.br/mailman/listinfo/caiu
> > >>>>
> > >>>>
> > >>>> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >>>>
> > >>>> https://eng.registro.br/mailman/options/caiu
> > >>>>
> > >>>
> > >>> --
> > >>> ___________________________________________________
> > >>>
> > >>> Sidney de Oliveira Viana
> > >>>
> > >>> Analista de Rede Nível 2 na Vivatelecom de ASN 264564
> > >>> Técnico em Informática pelo IFRN
> > >>> Graduando Análise e Desenvolvimento de Sistemas pela UNIT
> > >>> _______________________________________________
> > >>> caiu mailing list
> > >>> caiu em eng.registro.br
> > >>> https://eng.registro.br/mailman/listinfo/caiu
> > >>>
> > >>>
> > >>> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >>>
> > >>> https://eng.registro.br/mailman/options/caiu
> > >>>
> > >> _______________________________________________
> > >> caiu mailing list
> > >> caiu em eng.registro.br
> > >> https://eng.registro.br/mailman/listinfo/caiu
> > >>
> > >>
> > >> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >>
> > >> https://eng.registro.br/mailman/options/caiu
> > > _______________________________________________
> > > caiu mailing list
> > > caiu em eng.registro.br
> > > https://eng.registro.br/mailman/listinfo/caiu
> > >
> > >
> > > --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> > >
> > > https://eng.registro.br/mailman/options/caiu
> >
> > --
> >
> > _______________________________________________
> > caiu mailing list
> > caiu em eng.registro.br
> > https://eng.registro.br/mailman/listinfo/caiu
> >
> >
> > --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
> >
> > https://eng.registro.br/mailman/options/caiu
> >
> _______________________________________________
> caiu mailing list
> caiu em eng.registro.br
> https://eng.registro.br/mailman/listinfo/caiu
>
>
> --> PARA SAIR DA LISTA SIGA AS INSTRUÇÕES em:
>
> https://eng.registro.br/mailman/options/caiu
>


Mais detalhes sobre a lista de discussão caiu