[caiu] Fwd: Comunicado de Incidente: IBX SP2-II

[Rubens Kuhl]

Tipo de comunicado: *Incidente*
Tipo de aviso: *Sistemas de UPS*
Severidade: *Vermelho*
Status do comunicado: *Update*
Data/Hora do comunicado: *07/09/2016 21:07*

Communication type: *Incident*
Warning type: *Sistemas de UPS*
Severity: *Vermelho*
Communication status *Update*
Communication date/time: *07/09/2016 21:07*



*Descrição inicial do incidente:*

Às 11h03m de 06/09/2016  (horário local, GMT -0300) ocorreu uma falha em um
dos equipamentos de UPS da sala B que atende à Fase II do IBX SP2 da
Equinix Brasil. Esta falha comprometeu a disponibilidade elétrica da linha
de alimentação B.





Entre 11h03m e 15h10m, tivemos dois eventos de instabilidade parcial na
linha de alimentação A, que também podem ter afetado equipamentos
conectados a esta fonte de alimentação.





*Atualização:*


Toda a carga dos clientes da linha A foi transferida com sucesso para a
energia protegida pelos sistemas de UPS, os quais já estão operando em
condições normais. Nós também optamos por operar apoiados por geradores,
que por serem uma fonte de energia mais estável, nos fornecem uma proteção
adicional para esse sistema. A linha B continua indisponível.





A manutenção corretiva dos equipamentos UPS foi finalizada com sucesso, e
toda a carga crítica já foi transferida para o UPS, e também protegida
peloo grupo de geradores. Neste momento a linha A opera sob condições
normais.





A recuperação completa da linha B acontece de forma paralela. Este é o
plano de ação atualizado que estamos seguindo até a recuperação completa
dos serviços:





*Ação*



*Manutenção corretiva e Testes: UPS A                         DATA: 07/set
| Prazo: Concluído, 13:00h | Linha AAtivação do UPS A na Linha
                                 DATA: 07/set | Prazo: Concluído, 14:00h |
Linha A*

Recuperação da sala de UPS B
DATA: 08/set | Prazo: 19:00h       | Linha B

Recuperação de painéis elétricos na sala UPS B               DATA: 08/set |
Prazo: 19:00h       | Linha B

Ativação da linha B, conectada aos geradores                 DATA: 08/set |
Prazo: 20:00h       | Linha B

Relatório preliminar do incidente
DATA: 09/set | Prazo: 18:00h

Entrega de novos equipamentos UPS B                            DATA: 11/set
| Prazo: 10:00h       | Linha B

Configuração e testes: UPS B
DATA: 14/set | Prazo: 10:00h       | Linha B

Ativação de UPS B na linha B
DATA: 14/set | Prazo: 21:00h       | Linha B

Relatório final pós-Incidente
DATA: Após relatório de Causa-Raiz do Fabricante | Prazo: 10:00h





Nossa central de Suporte continua disponível caso você precise de
informações adicionais.






*Initial incident description:*

At 09/06/2016 11:03 AM (BRT/UTC-3) Equinix Brasil faced a failure in the
UPS located at Room B. This UPS delivers power to Phase II of SP2 IBX of
Equinix Brasil. Power Line B availability was compromised due to this
failure.




Between 11:03 AM and 03:10 PM we faced two minor different failure events
on Power Line A, affecting partially it’s availability. Those events might
have affected equipment fed by this line.



*Update:*


Customer loads have successfully been transferred to UPS protected power on
UPS system A and this system is operating under normal condition.  We are
also running on generator as a more stable primary power source to provide
added protection for this system. Power Line B remains unavailable.




Power Line B complete repair is being conducted as a parallel and
independent activity. Please find below the updated action plan that is
guiding us until the full recovery of the services:





*Action*



*Corrective Maintenance and Tests: UPS A equipment’s          Due Date:
Sep-07 | Time (UTC -3): Done, 1 PM | Track: Feed AActivation of UPS A on
Feed A                                                       Due Date:
Sep-07 | Time (UTC -3): Done, 2 PM | Track: Feed A*

Recovery of UPS ROOM B
             Due Date: Sep-08 | Time (UTC -3): 7 PM | Track: Feed B

Recovery of Electric Panels on ROOM B
         Due Date: Sep-08 | Time (UTC -3): 7 PM | Track: Feed B

Activation of Feed B, connected on GenSets
Due Date: Sep-08 | Time (UTC -3): 8 PM | Track: Feed B

Preliminary incident report
              Due Date: Sep-09 | Time (UTC -3): 6 PM

Delivery of new UPS B Equipments
       Due Date: Sep-11 | Time (UTC -3): 10 AM | Track: Feed B

Setup and Tests: UPS B
                   Due Date: Sep-14 | Time (UTC -3): 10 AM | Track: Feed B

Activation of UPS B on Feed B
            Due Date: Sep-14 | Time (UTC -3): 9 AM | Track: Feed B

Post-Incident Final Report
             Due Date: TBD / Following Root Cause Analisys from Manufacturer





Our Service Desk remains available for any additional information in the
number: +55 (21) 3958-2596.









www.equinix.com.br

© 2014 EQUINIX BRASIL.