Les ouvriers du bâtiment ont rempli mon SAN de béton et de poussière minérale

50

Mise à jour: EMC a abandonné notre garantie et son assistance. Ce sera donc un cas d’assurance. Dell affirme que nous pouvons faire appel à une agence de nettoyage professionnelle pour rénover les serveurs et conserver notre garantie. Cisco dit "peut-être". HP est toujours silencieux :(

Dernière mise à jour: EMC a annulé et approuvé le nettoyage d’une entreprise certifiée. Le VNX nous a été renvoyé aujourd'hui et fonctionne parfaitement. Le reste de la salle des serveurs est également en train d'être nettoyé et nos pertes sont limitées à quelques lecteurs de bande. La compagnie d’assurance prélève la facture pour à peu près tout le reste.

La question initiale:

Voici l'histoire ..

Les propriétaires de l'immeuble pour lequel nous louons des bureaux ont décidé de rénover l'extérieur. Cela impliquait des travaux assez lourds au niveau de notre salle des serveurs, y compris l'échange de fenêtres qui sont insérées dans un mur en béton.

Mon alerte rouge s'est déclenchée quand j'ai appris qu'ils allaient faire la même chose avec notre salle des serveurs (oui, notre salle des serveurs a une fenêtre. Nous sommes un petit magasin avec 3 étagères. La fenêtre est sécurisée avec des barres en acier.) J'ai explicitement dit à l'entrepreneur qu'il devait installer un mur temporaire entre nos supports et le mur d'origine - et s'assurer que le mur temporaire était étanche à 100% à l'air et à l'eau. Ils ont promis de le faire.

Le mur temporaire comporte une petite porte, pour que les travailleurs puissent entrer et sortir toute la journée (via notre salle des serveurs, qui était la seule option ...). À plusieurs reprises, je pouvais trouver la petite porte à mi-chemin tout en travaillant le soir et la nuit. J'ai verrouillé la porte et je pensais qu'ils espéraient obtenir le point rapidement et garder la porte fermée. J'ai même donné une bouchée à un électricien quand j'ai vu qu'il ne fermait pas bien la porte.

À ce stade, je parie que la plupart d’entre vous ont une image de ce qui s’est passé. Oui, ils ont probablement laissé la porte ouverte pendant le forage du béton.

Je vous présente notre EMC VNX âgé de 4 semaines: Disques VNX Rack VNX

Je vais même ajouter un petit bonus, voici l’APC UPS un peu plus loin du mur temporaire. Voir la belle petite piste d'atterrissage de mon doigt? UPS

Que devrais-je faire? La seule chose qui me vienne à l’esprit est d’appeler tous nos fournisseurs (EMC, HP, Dell, Cisco) et de leur demander d’envoyer des techniciens vérifier tous les équipements présents dans la salle des serveurs, ou d’obtenir une sorte de consultant tiers certifié. pour tout vérifier. Souhaitez-vous exécuter des systèmes de production sur cet engin? Combien de temps?

Je dois également noter que notre climatisation n’est pas vraiment une entreprise, étant donné la nature de notre petite pièce. C'est juste un seul onduleur, qui a échoué une fois avant que je commence à travailler ici (les onduleurs défaillants entraînent généralement des gouttes d'eau).

Pauska
la source
8
Malheureusement, je sais que les systèmes de production-ish fonctionnent dans des conditions bien pires (pensez aux entrepôts). Mais ce n’est pas idéal, surtout pour les nouveaux équipements. Je chercherais à obtenir au moins une sorte de compensation pour le nettoyage, et peut-être pour le nombre inévitable de fans, qui échoueront. Cela dépend en grande partie de votre débit d'air et du débit de chaque unité d'équipement. Au minimum, nettoyez la pièce, puis les filtres à air ou les entrées d’air de l’équipement, et surveillez bien la température et le refroidissement.
Sirex
Oui, bien que ce ne soit pas une bonne chose, j’ai vu bien pire et avec un kit plus critique et plus coûteux. Alors, faites le tri, mais je ne m'attendrais pas à un échec imminent.
Dan
Dommage de lire qu'EMC a perdu sa garantie, les autres fabricants feront de même, je parie ... N'ayez pas peur d'engager un avocat dans cette
affaire
1
Au contraire: ayez peur de faire intervenir les avocats. Obtenez vos preuves ensemble. Oui, obtenez des conseils professionnels. Nous avons eu un problème grave une fois, dans lequel un avocat nous a dit que nous avions des dommages matériels. Il s’est avéré que nous ne l’avions pas fait, et après le procès que nous avons perdu contre le vendeur, nous avons intenté un procès contre notre avocat, ce qui a été atténué en dehors des tribunaux. Faites très attention aux dommages qui existent réellement et à qui est responsable. Si vous trouvez un avocat digne de confiance (haw), il vous dira quels sont les efforts requis par le procès et quelles sont vos chances. S'ils disent que c'est clair à 100%, ils mentent.
Posipiet
1
Ces pauvres bébés!
Ben Brocka

Réponses:

22
  1. Obtenez tous les techniciens dans.
  2. Faites-les vérifier / nettoyer tout le matériel.
  3. Envoyez la facture au responsable de la construction.

Vraiment, les serveurs peuvent supporter un certain niveau de poussière, mais c’est trop. Nous nettoyons régulièrement nos serveurs pendant les temps d'arrêt avec un aspirateur PC de 3M . C'est une bonne chose d'avoir autour du bureau.

Mais pour l'instant, commencez à nettoyer. Plus vite vous récupérerez la poussière, mieux ce sera. Essayez de garder les radiateurs et les ventilateurs exempts de poussière. Si un dissipateur thermique ou un ventilateur est recouvert de poussière, sa capacité à dissiper la chaleur est bien pire qu’une unité propre.

Bart De Vos
la source
Dans ce cas, il devrait vraiment envisager de faire appel à un service spécialisé dans le nettoyage antistatique de la salle des serveurs.
erimar77
1
@ erimar77: Notre compagnie d'assurance est sur cette route en ce moment :)
pauska
28

Premièrement: lorsque la salle des serveurs devient un site de construction, vous devez supprimer tous les serveurs, pour plusieurs raisons.

  • des pannes de courant
  • pannes de refroidissement
  • accès (vous ne savez pas qui passe devant vos serveurs, à quelle heure)
  • contraintes mécaniques dues aux machines de construction
  • dommages directs causés par les travailleurs
  • poussières résiduelles du chantier, en particulier poussières métalliques ou minérales

Le seul pari sûr est de déplacer vos serveurs dans une autre pièce. Cela signifie des arrêts supplémentaires, mais au cours des activités de construction, vous devrez probablement le faire quand même.

(Remarquez, ce qui suit est mon opinion subjective) Maintenant c'est arrivé. Les ventilateurs sont recouverts de poussière minérale. Cela réduit potentiellement leur durée de vie en affectant les roulements.

Je ne m'attendrais pas à une défaillance massive des serveurs, mais à un pourcentage plus élevé d'échecs. Chez un client assez important, les pannes de ventilateurs ont augmenté après les activités de construction.

Mais encore une fois, je ne ferais pas de grands efforts pour nettoyer les systèmes. Si le nettoyage est endommagé, il est probablement plus gros qu'un ventilateur défaillant. À moins, bien sûr, si la poussière contient des particules métalliques, cela change tout le jeu.

Que faire? Nettoyez la salle, nettoyez l’extérieur des serveurs, réservez de l’argent pour des remplacements futurs.

Les dommages ne sont probablement pas justiciables. La partie des dommages que vous pouvez prouver ne vaut probablement pas la peine d'aller en cour. Vous pouvez essayer d’obtenir du propriétaire une certaine indemnisation, par exemple un paiement réduit.

Posipiet
la source
Ce que nous aurions dû faire n’est pas particulièrement utile, mais je suis d’accord avec les points que vous avez énumérés. Le coupable est que je ne sais pas (encore) s'il y a des traces métalliques dans la poussière. L’autre danger potentiel est l’échec de la climatisation, ce qui peut conduire à un air humide, ce qui n’est pas bon, combiné à du béton et / ou de la poussière minérale.
Pauska
11
comme le site est lu par de nombreuses autres personnes, dont certaines peuvent avoir des travaux de construction à venir, ce que vous auriez dû faire est une information très utile, vraiment un peu tard pour vous personnellement.
Sirex
5
C'est vrai. Désolé d'être un peu heureux, mon humeur est en dessous de la moyenne en ce moment.
Pauska
1
Je suis d'accord avec cela. Nous installions de nouvelles dalles de plafond suspendu et, au cours du processus, les travailleurs ont recouvert les bâtis de serveurs de bâches en plastique. Heureusement, j'étais là et les avertissements thermiques ont généré une alerte par courrier électronique, mais sans cela, cela aurait été un toast. Une fois que les serveurs sont contaminés par des particules, il est très difficile d’inverser les conséquences et les effets secondaires peuvent être durables et engendrer des problèmes très évasifs.
Greg Askew