Exigences d'alimentation du datacenter. A = W / V… je dois faire quelque chose de stupide

12

D'accord, notre centre de données ne nous facture pas en fonction de notre "utilisation" uniquement en fonction du nombre d'ampères que nous avons livrées à notre rack. Je prévois d'installer un nouveau rack cette année pour une extension de serveur, basée sur cet article. Chaque serveur dispose d'un crapload de disques et, à son tour, utilise un crapload de puissance.

Ce rack comprendra.

1 routeur Cisco.

1 commutateur fibre

1 contrôleur de stockage 1U, serveur Dell 850 standard.

11 serveurs de stockage 3U, chacun avec deux blocs d'alimentation de 750 watts.

Alors ... j'essaie de calculer le nombre d'ampères dont je devrais théoriquement avoir besoin. Je n'ai pas encore de serveur d'exemple pour voir à quel point un serveur 3U - 45 disques tire. Je suppose donc qu'il a besoin de deux alimentations, donc laisse aller avec 1000 watts de traction. Beaucoup pour les disques durs, beaucoup pour les trucs à bord. 11 x 1000 watts, c'est évidemment 11000 watts de puissance.

A = W / V. W = 11000. V = 120v. A = 91.

C'est là que mon cerveau s'est déclenché. 91 ampères de puissance, c'est de la folie. (Le maximum que j'ai eu sur un distributeur de rack est de 40, et sa seule capacité est de 60%.

Et c'est avec seulement 1000w utilisés par serveur - si le PSU tire le plein courant à 1500watts pour le système, c'est quelque chose à hauteur de 140amps.

.... Ce son est juste ou je suis juste fou? J'ai sûrement fait quelque chose de mal, 140 ampères de puissance, c'est de la folie.

**** Edit: la boîte est en fait 4U, donc les nombres sont différents puis affichés ici, mais pas beaucoup.

grufftech
la source
+1 pour m'avoir pointé vers un article vraiment cool.
phoebus
Avez-vous trouvé des boîtiers de disques 3U 45? Les boîtiers Equalogic sont basés sur un châssis IIRC à 48 disques xyratex 4U 48. Toutes les autres solutions que je connais avec des disques verticaux sont 4U ou 5U, pas 3U.
wazoox
Ya - les boîtiers 3U n'existent pas - je ne faisais pas attention lorsque j'écrivais cet article, ma question était toujours pertinente dans le sens des calculs de puissance sous charge maximale.
grufftech

Réponses:

10

Vos chiffres semblent être sur la bonne voie en général, un boîtier à double disque et à double processeur comme un HP DL380 tire environ 350-450w en moyenne, alors ajoutez 43 x 15-20w pour le disque et vous n'êtes pas loin un Kw par châssis. Cela vous pose deux problèmes, vous allez avoir besoin de 4 x 32A PDU pour prendre en charge deux PSU et vous avez une quantité raisonnable de chaleur provenant de l'arrière si le rack a besoin d'être nettoyé. Je soupçonne également que votre hébergeur pourrait râler à ce sujet et insister pour que vous divisiez votre kit entre 2 ou plusieurs racks à la place.

Cela dit, je ne peux pas penser à un autre moyen d'obtenir cette quantité de disques dans cette densité, quelle marque / modèle sont les boîtiers 3U au fait?

Modifier - avez-vous déjà fait le calcul du poids? Vous devriez aussi le gérer par eux, ce meunier va être assez lourd.

Chopper3
la source
Bons points - l'apprécie vraiment.
grufftech
Mistyped - son 4U.
grufftech
5

Eh bien, l'intention des doubles blocs d'alimentation est de fournir une redondance et non une puissance supplémentaire en tant que telle afin que vos unités de 750 watts me semblent sous-dimensionnées. Les configurations de serveur que vous décrivez sont extrêmement denses - 350-350 pour le serveur de base + 45 * 10-15Watts pour les lecteurs et vous regardez un kilowatt par serveur et vous devriez mettre des blocs d'alimentation de 1,2 kW qui peuvent fonctionner avec un peu de la marge.

Vous devrez également absolument avoir une sorte de rotation progressive pour les disques, le démarrage de la consommation d'énergie sur les disques est environ 50% plus élevé que la puissance de crête sous charge de fonctionnement.

En ce qui concerne la consommation d'énergie globale, ces chiffres ne sont pas si fous - c'est ce qui se produit lorsque vous devenez dense. Un rack avec 4 boîtiers lames Dell M1000E entièrement équipés consommera environ 16 (+ -5) kW, ce qui correspondrait à 130 A sur une alimentation 120 V. Les blocs d'alimentation pour ceux-ci sont conçus pour fournir 2360 watts à 12 V, donc la consommation CA maximale est d'environ 2500 watts et vous avez besoin d'un minimum de 3 pour alimenter le châssis. Leur configuration recommandée a 6 blocs d'alimentation pour fournir un circuit CA et plusieurs pannes de bloc d'alimentation.

La deuxième chose à laquelle vous voulez accorder une attention particulière supplémentaire lorsque vous devenez dense est la conception du refroidissement. À ces densités, vous êtes fou si vous ne choisissez pas une configuration d'allée chaude / froide et le kit en rack doit être conçu pour cela. 20 kilowatts, c'est beaucoup de chaleur dans quelque chose d'aussi petit qu'un rack 42u, et vous voulez être sûr de pouvoir le pomper efficacement avec un certain niveau de redondance. À moins que vous ne placiez ce rack à l'extérieur dans l'Arctique, vous devez vous assurer que vous avez des ventilateurs redondants [idéalement échangeables à chaud] capables de shunter environ 150 pieds cubes par minute même lorsqu'un ventilateur est en panne (en supposant que vous refroidissez 1 kW par serveur et que vous pouvez vivre avec un différentiel chaud :: froid de 20 degrés)

Enfin, ce seront vraiment des systèmes lourds. Votre unité de serveur va peser quelque chose dans la gamme de 160 livres. Avec 11 de ceux-ci et tout ce que vous prévoyez plus le rack lui-même, le tout pèsera littéralement une tonne.

Le concept Backblaze bénéficie du fait d'être un composant dans une pile de solutions intégrées qui leur permet de traiter chaque serveur comme une unité remplaçable à chaud avec une redondance intégrée plus haut dans la pile en plus de la redondance RAID \ PSU \ Fan de base dans les unités de stockage elles-mêmes. Cela leur permet d'utiliser des composants assez bon marché et de ne pas avoir à faire d'efforts pour remplacer à chaud les composants individuels défaillants - cela a tendance à être une autre caractéristique des systèmes vraiment denses et vous voudriez être sûr de pouvoir vivre avec cette approche.

Helvick
la source
3

Les chiffres me paraissent sains d'esprit. Nous avons plusieurs racks qui fonctionnent à 150 ampères sur 208 volts. une bête d'un rack tire actuellement 200+ AMPS sur 208 volts. De plus, comme d'autres l'ont mentionné, vérifiez le poids du rack, il sera lourd. quelques-uns de nos racks de stockage pèsent plus de 1000 kg. Attention, les amplis varient en fonction de la charge de votre serveur. Cela peut aller d'environ 1 ampère à peut-être 8 à 10 ampères avec un appel de 40 ampères sur quelques ms, mais quelques ms suffisent pour faire des choses désagréables si vos services au rack sont sous-dimensionnés. Aussi, comme si vous aviez besoin de plus de réflexion, vous devrez avoir un séquençage de puissance sur le rack pour que le fichu truc n'essaye pas de tout démarrer en même temps et de vraiment aspirer les amplis.

Liam
la source
+1 construction folle, vraiment impressionné.
grufftech
2

Je constate que votre contrôleur de stockage est un Dell. Si vos serveurs de stockage sont également Dell, vous pouvez trouver le planificateur de capacité du centre de données Dell utile. Il vous donnera des conseils sur la consommation d'énergie et le poids!

hmallett
la source
serveur dell basé strictement parce qu'ils nous donnent les meilleures offres atm. pourrait être une boîte personnalisée pour tous mes soins.
grufftech
0

Les calculs sont corrects, basés sur la puissance nominale maximale des blocs d'alimentation.

Vous constaterez probablement que chaque serveur consomme en fait entre 0,5 A et 3 A pendant son utilisation moyenne. Le courant d'appel peut atteindre 40 A par serveur, mais c'est pour un temps vraiment très court, comme 20 ms.

Je soupçonne que vous seriez plus près de 20-35A pour le rack .. Mais je peux me tromper.

Sur une autre note, je pense qu'il est intéressant de voir quelqu'un utiliser la méthode Backblaze de ce document. Je serais intéressé de savoir comment cela se passe!

Tom O'Connor
la source
0

Cela semble sain. À titre de comparaison: dans la plupart des racks, j'utilise des PDU 38 KVA doubles (une avec alimentation diesel et une alimentation sans coupure) (entrée triphasée 400 V, chaque phase 32 A). N'oubliez pas que la puissance nominale des PSU est nominale et que le système peut fonctionner avec une seule de ses PSU contenant du jus.

pfo
la source
1
ce système n'est pas conçu pour fonctionner avec un seul bloc d'alimentation - il utilise en fait les deux blocs d'alimentation pour alimenter différentes zones du système. (Nous parlons de 46
disques durs
PFO, vos chiffres semblent corrects pour les États-Unis. (La société pour laquelle je travaille fabrique des logiciels d'analyse de charge électrique et ce sont des chiffres très familiers) Gruff, votre problème va être de refroidissement, et Twin 32A-3phase fournit :)
Tim Williscroft
@GruffTech: Les étagères ne sont donc pas du tout redondantes?!
pfo
yep la conception Backblaze traite les étagères comme l'unité à remplacer, ils mentionnent que dans l'article, il ne s'agit donc pas d'une solution de stockage à usage général mais d'une partie d'une plus grande pile avec redondance fournie par répartition sur plusieurs étagères.
Helvick
0

Voici quelques options pour vous aider à évaluer réellement vos besoins.

À bon marché, vous pouvez brancher un Kill-A-Watt à chaque appareil et obtenir des mesures du monde réel. (attention à ne pas le faire dans un LAB, un serveur chargé supporte une charge beaucoup plus élevée qu'un serveur inactif)

Un serveur augmentera souvent sa charge au démarrage initial. Garde cela à l'esprit. (s'il y a une panne de courant et que tout se passe en même temps, vous risquez de faire un pic)

Vous pouvez également obtenir une PDU comme un APC 7901 (ou un appareil similaire) qui a une lecture LED du tirage AMP actuel. (Le 7901 n'est qu'un modèle de 20 ampères)

Nos commutateurs Cisco haut de gamme et commutateurs à fibre dépassent rarement 80 W. * YMMV

Votre DC ne peut vous offrir que des options de 20 et 30 ampères, il peut donc être théorique.

Votre DC peut également vous fournir une alimentation de 208 V en option.

Une blague: je pense que tout le monde qui est facturé pour la puissance délivrée par rapport à la puissance utilisée devrait brancher certains radiateurs spatiaux pour s'assurer que vous utilisez tout ce que vous payez. :)

J'espère que ça aide.

Joel K
la source
Je parie que les auteurs du blog pourraient vous dire leur consommation d'énergie réelle ...
Joel K
0

Les chiffres de la plaque signalétique sur les équipements informatiques sont des chiffres de sécurité / réglementaires, et vous allez être trop constructifs si vous les utilisez pour concevoir quelque chose. Demandez à votre fournisseur le «rapport thermique de l'équipement ASHRAE» pour l'équipement en question. Tout fournisseur majeur l'aura.

Ce rapport vous donnera des chiffres plus réalistes.

duffbeer703
la source