[GTER] Problemas no Terra

Wed Apr 16 09:40:00 -03 2003

|Que tal dar um crédito para os colegas de profissão, inclusive para o
próprio hardware?

Se eles tiveram esses problemas, é justamente porque deram mais crédito a
uma estrutura do que deveriam...

|O Terra deve possuir um EMC Symmetrix 8330 ou superior, este equipamento
não possui duas fontes, e sim três. Lei de Murphy mesmo!!! O problema foi
|feio!!!

Podem ser três fontes, mas todas tem o mesmo projeto e portanto estão
sujeitas aos mesmos riscos de queima simultânea quando não se tratar de
falha usual de componente... em sistemas de missão crítica de verdade
(aqueles em que se algo dá errado, pessoas morrem), uma providência comum é
ter designs distintos para componentes redundantes.

Eu acho que eles tem mesmo um Symmetrix, mas veja que a EMC tem outra linha
de storage, os Clarion.

|  Já passei por situação igual, só que ficamos 8 horas parado.

Um problema com tantas ocorrências não é incomum.

|Entretanto tenho informações que é a primeira vez que acontece este tipo de
problemas em três anos. E também que o problema originou de um pico de
|energia. Grande parte do atraso para retornar o serviço foi devido ao
processo de fsck nos discos.

O Celerra (NAS que usa o Symmetrix como storage) usa journaling... para ter
que dar fsck, só se a falha causar um índice muito alto de corrupção no
file-system. De outra maneira o sistema poderia paralelizar o fsck com o
retorno às operações.

| Outra observação: Será que o Terra não tem No-Break?

Sim, o que não deve adiantar se os caminhos até a energia passam pelo mesmo
quadro de distribuição.

| Porque não possuem um sistema redundante? A própria EMC fornece tecnologia
para isto.

Agora sim, no início e provavelmente quando o Terra adquiriu o sistema de
replicação ainda não suportasse o XFS (file-system usado no EMC Celerra)...
cuidado com as letras miúdas. Além de que isso exige bem mais $... o alto
custo do EMC (Equipamento Muito Caro) pode ter impedido a adoção desta
alternativa.

|Duvido muito que o responsável não tenha solicitado isto para o alto
escalão do Terra. Não estamos falando de 500 usuários, e sim milhões.
| Te garanto que agora eles vão se coçar.

Isso eu concordo. Nada como um pau desses para disparar uma revisão completa
da árvore de falhas, gerando alterações de arquitetura e procedimentos.

Rubens

>>> rubens at email.com 4/15/03 7:29:14 >>>

Quem falhou em acreditar que falhas desse tipo não acontecem não foi o zé da
EMC... se duas fontes são iguais em projeto, os riscos à elas são muito
similares. Não é só de falhas de componentes que Murphy se utiliza para nos
por à prova. E aparentemente os problemas ocorridos das 11h00 de hoje em
diante não tem a haver com fonte...

Faço coro com o Durval: o alto custo de alguns equipamentos faz que soluções
que por sensatez de projeto seriam adotadas, não o sejam. Aí se passa a
querer acreditar em todo o discurso de impossibilidade de falhas que os
vendores dessas soluções precisam para justificar o custo desses
equipamentos... pena que apenas as pessoas e não os equipamentos sejam
suscetíveis a programação neuro-lingüística. ("Você não vai falhar, você é
um equipamento muuuuuito bom...")

Rubens

----- Original Message -----
From: "Juliano Primavesi - CyberWeb Networks" <juliano at cyberweb.com.br>
To: <gter at eng.registro.br>
Sent: Tuesday, April 15, 2003 7:09 PM
Subject: Re: [GTER] Problemas no Terra

--
GTER list    http://eng.registro.br/mailman/listinfo/gter