Comment construire et gérer une salle des machines?

29

Le dernier gars a démissionné (je pense que beaucoup d'aventures commencent de cette façon?) Et j'ai été chargé de construire une nouvelle salle des machines. Je coordonne avec 2 ingénieurs, campus ITS, campus Facilities Management, un chef de projet, une entreprise de construction et 2 sous-traitants (électrique et mécanique). Yay.

La plupart de ces gens l'ont déjà fait, mais je ne l'ai pas fait. La construction est en cours, et tout va bien, mais honnêtement, je suis complètement perdu sur des choses comme où les racks doivent aller, où les découpes de plancher doivent être faites, etc. J'ai besoin de comprendre des choses comme la consommation d'énergie, les PDU, le CRAC unités, génération de BTU, câblage, etc. Une fois la construction terminée, je serai en charge de qui pourra utiliser la salle et quelles seront les règles.

Je sais qu'il y a des gens qui sont des experts dans ce domaine, mais aucune des personnes impliquées jusqu'à présent n'en sait beaucoup (y compris moi). Où puis-je apprendre ces trucs? Google n'a pas beaucoup tourné pour moi.

Pour résumer, je recherche une référence de tutoriel qui répond à des questions comme:

  • Comprendre les exigences de refroidissement et les capacités de refroidissement dans une salle de serveurs
  • Comprendre l'alimentation et la consommation
  • Comment définir une politique pour les utilisateurs dans une salle de serveurs (y compris des choses à penser comme la sécurité, la prévention des incendies, la sécurité des données, la bonne garde)

Je suis un logiciel compétent, mais j'ai très peu d'expérience avec les machines au-delà de la construction de mes propres petits ordinateurs.

electrical-power rackspace server-room physical-environment Fixee
la source
4
+1 Cela ressemble à un nouveau défi amusant! Si tout le reste échoue, il y a toujours des entreprises contractantes qui le feront pour vous.
Kyle Smith
1
+1 Grande question, en tant que développeur, je
réserve
Pouvez-vous donner plus de détails sur le type de centre de données que vous construisez? cela aura un effet énorme sur une bonne réponse. Quelle est la superficie de la pièce? Y a-t-il plusieurs pièces? S'agit-il d'une nouvelle construction ou rénovation? Combien de racks et de serveurs? S'agit-il d'un centre de données public ou privé de votre entreprise? Y a-t-il des serveurs configurés pour entrer immédiatement ou créez-vous cet espace uniquement pour les nouvelles installations? Êtes-vous censé gérer quoi que ce soit sur le serveur ou simplement fournir de l'espace aux autres? Je pourrais continuer, mais plus de détails aideraient beaucoup ceux qui essaient de répondre à votre question.
Kyle Gibbons
Essayez également de faire des recherches sur le «centre de données» au lieu de la salle des machines.
Kyle Gibbons
J'ai réussi à trouver une solution à laquelle la plupart des gens n'auront pas accès: il s'avère que quelqu'un dans mon département a récemment écrit plusieurs articles sur ce sujet (construction de centres de données pour les supercalculateurs) et est prêt à m'aider sur ce projet relativement simple .
Fixee

Réponses:

11

Vous pourriez jeter un coup d'œil si vous n'êtes pas encore tombé sur ce site ( http://www.datacenterknowledge.com/ ). Une tonne de livres blancs sur les sujets. Certains sont «marketie», mais restent à tout le moins de bons points de départ.

user48838
la source
Bonne réponse, mais je suis déconcerté qu'il n'y ait pas de livre sur ce sujet?
DutchUncle
L'un des défis possibles avec les livres sur un sujet plus vaste, car celui-ci serait les technologies changeantes / avancées dans chacun des domaines spécifiques.
user48838
Oui, mais une bonne donne au novice une base solide pour commencer (canalisation, alimentation, refroidissement, etc.) et quelques indices sur la spécification des exigences.
DutchUncle
Même chose avec le site, un peu plus de "fouille" est nécessaire, mais le compromis est la possibilité d'informations plus à jour.
user48838
11

Commencez par le pouvoir. Il vous montrera assez facilement la quantité de tout ce dont vous avez besoin.

Obtenez un nombre, demandez peut-être aux électriciens, combien de KW ou KVA le projet est.

Si c'est moins que disons 12 KW, vous parlez d'une construction de taille moyenne. Peu de racks, disons cinq, une centaine de serveurs.

100 * (1 ampères) * (120 volts) = 12 000 watts = 12 kW

Tenez compte d'une certaine redondance en votre pouvoir. Encore une fois, demandez à l'électricien des circuits redondants. Obtenez un dessin si vous le pouvez. Se léver.

Le refroidissement sera fonction de la puissance. En fonction de la taille de votre pièce, vous pourrez peut-être mettre le refroidissement juste là, appelé CRAC. Le refroidissement nécessitera plus de puissance.

Vous avez touché un dernier point qui se rapporte à la sécurité physique. J'ai utilisé des scanners à main biométriques dans le passé. Une autre option est un système de carte de proximité simple. Vous voudrez peut-être configurer la vidéosurveillance ainsi que d'autres surveillances de la température, de l'humidité et d'autres choses de cette nature.

Bonne chance.

dmourati
la source
ne pouvez-vous pas dépasser 42 kW dans une seule armoire si elle est entièrement remplie (blocs d'alimentation redondants de 1 kW, au pic théorique?)
Warren
@warren, je pense que vous auriez un feu sur les mains
dmourati
@dmourati - comprendre que le tirage nominal par rapport à la réalité est souvent différent, il semble toujours probable que si vous avez 10 armoires 42U entièrement équipées de serveurs alimentés par 1 kW, ce qui signifie, par exemple, 30%, que vous allez fonctionner 10*42*1kw*.3 = 126kw. Ce n'est pas vraiment beaucoup de pouvoir.
warren
Je pense que c'est votre numéro 42KW qui est éteint. Je spécifiais, à des fins de discussion, plus comme 5 racks et environ 100 serveurs pour arriver à 12. Vous pouvez aller jusqu'à 4,8 KW (KVA vraiment) ou 10 mais pas beaucoup plus que cela. 42KW par rack ne fonctionnera pas.
dmourati
1
@dmourati - soit je ne comprends pas la consommation d'énergie, soit mes calculs sont erronés si vos chiffres sont corrects. Si vous avez un périphérique à double processeur, chacun consommant 115 W (crête), c'est 330 W. Des disques durs complémentaires à ~ 10 W chacun (disons quatre par serveur), vous avez maintenant jusqu'à 370 W. C'est PER U d'espace rack. Ajoutez un facteur de fudge de 10% pour les composants non comptabilisés et vous obtenez jusqu'à 400 W par U d'espace rack. Un rack 42U entièrement peuplé est donc en cours de dessin 42x440W == 18.5KW. 10 racks vous amène à 185KW. Suis-je en train de manquer quelque chose? De plus, nous n'avons pas encore ajouté de SAN, de réseau ou d'autres appareils.
warren
4

Le livre de Barroso est une excellente ressource; bien qu'il ne réponde pas à toutes mes questions, vous ne pouvez pas faire mieux qu'un livre gratuit d'un concepteur de centre de données Google.

Fixee
la source
3

Mon organisation emménage dans un nouveau bureau et je me suis retrouvé à me référer encore et encore à La pratique de l'administration des systèmes et des réseaux . Il contient pas mal d'informations sur d'autres sujets, mais j'ai beaucoup appris de leur discussion sur les centres de données, en particulier le centre de données idéal de chaque auteur.

Helixso
la source