Rack de serveur de refroidissement avec de l'eau? Sensible? Réutiliser l'énergie pour une petite installation?

15

Premièrement - il ne s'agit pas d'une question d'achat et non de prix concrets mais de faisabilité générale. Cela n'a aucun sens de chercher un fabricant si l'approche est mauvaise.

Je déménage mon entreprise dans de nouveaux bureaux en septembre et, pendant le déménagement, nous élargirons et consoliderons notre cluster informatique. En ce moment, c'est dans un centre de données, mais j'ai une belle pièce au sous-sol préparée pour cela.

Je pense au refroidissement. Nous utiliserons probablement environ 10 kW d'électricité d'ici la fin de l'année. C'est BEAUCOUP de chaleur, et le refroidissement coûtera cher. Je suis situé dans le sud de la Pologne, près de la frontière allemande. C'est un domaine où l'eau est disponible à un prix relativement bon marché - «gaspiller l'eau» n'est pas un problème ici. Ma situation est donc différente, par exemple, d'une entreprise en Espagne;)

La physique me dit que pour chauffer 1 litre d'eau par 1 ° CI, utilisez 1 calorie (1KCal), et 1kWh est (et nous pouvons supposer une efficacité de 100% - les chauffe-eau sont assez efficaces) 750 calories. Cela signifie que 1 kWh équivaut à 750 litres chauffés à 1 ° C. 10kw et une augmentation de 20 ° de la chaleur signifieraient que par heure j'ai besoin de 375 litres. C'est 6,25 litres par minute et pas tant que ça;) Nous parlons ici de 270 mètres cubes. Même en été, les tuyaux souterrains refroidissent beaucoup plus l'eau;)

Une telle approche est-elle faisable? Quelqu'un a-t-il fait cela? Nous avons une installation de 10kw pour l'instant. Est-il possible de réutiliser cette chaleur? L'alternative est un système de refroidissement décent qui utilisera environ 2,5 kWh pour fonctionner. Faire tomber l'eau aurait:

  1. Obtenez-moi un apport assez froid par rapport à l'air extérieur, même en été (c'est-à-dire un milieu à température plus basse pour laisser tomber la chaleur)
  2. Remplacez la nécessité de déverser de la chaleur dans l'air extérieur, ce qui peut être problématique. Si l'air est à 22 ° C, c'est BEAUCOUP à combattre, mais OTOH l'eau sera assez froide. J'économiserais également éventuellement l'investissement pour la partie extérieure du circuit de refroidissement.

Maintenant, deuxième question - est-il possible de chauffer une maison avec ça? ;) Après tout, c'est BEAUCOUP d'énergie dans cette eau;)

Si c'est une mauvaise idée, je m'arrête ici. Si ce n'est pas le cas, je vais commencer à chercher des fournisseurs. Peut-être que mes calculs sont faux?

TomTom
la source
2
Idée intéressante - comme les réponses l'ont montré auparavant, mais personnellement, je ne voudrais pas d'eau près d'un cluster de serveurs de cent mille devises - peu importe combien d'argent est jeté sur un système de refroidissement par eau.
tombull89
1
Eh bien, utilisez-le pour le refroidissement coutner. Dans le système de refroidissement en rack - dans quoi vider la chaleur? ;) Je viens de trouver en.wikipedia.org/wiki/Deep_water_source_cooling comme idée - maintenant je n'ai pas ça, mais peut-être que ça marche avec des trucs comme chauffer la maison, laisser tomber de l'eau chaude et avoir de l'eau fraîche etc. Le refroidissement par évaporation seul ferait des choses beaucoup plus efficace et économe en énergie.
TomTom
L'eau n'est généralement pas le médium de choix (car obtenir de l'eau pure à 100% est presque impossible, et l'eau impure a tendance à conduire l'électricité). Le refroidissement par immersion dans l'huile est généralement la méthode de choix ... Le recyclage de la chaleur perdue de ce système est laissé au lecteur, mais je dirais que l'échange d'air utilisant l'échappement des ventilateurs est probablement plus facile / moins cher à mettre en œuvre. ..
voretaq7
@ voretaq7, j'ai déjà vu le refroidissement de l'huile minérale, mais sur un seul bureau et je ne pense pas que ce serait fait à une telle échelle. J'avais visiblement tort.
tombull89
1
10kw n'est pas une échelle élevée. Les densités vont de nos jours à 40 kW PAR RACK (j'ai déjà vu des unités de refroidissement de porte arrière pour cela). Je reçois de nos jours 2 processeurs par 1U - faites le calcul. Les jours des racks 2.5kw sont terminés ...;)
TomTom

Réponses:

4

Il y a deux approches à cela, une dont je suis sûr qu'elle existe sur le marché, et une autre dont je n'ai entendu parler que dans les versions personnalisées.

Prêt pour le marché

Ces solutions utilisent une boucle d'eau pour assurer le refroidissement au niveau du rack. Ils produisent de l'air réfrigéré du côté de l'entrée du rack et utilisent la boucle d'eau pour échanger la chaleur entre la température ambiante et ce qu'elle produit. Ces solutions existent et ne nécessitent aucune modification du matériel en rack pour fonctionner. Ils nécessitent parfois des portes de rack spéciales pour assurer un flux d'air correct, mais pas toujours; certaines solutions créent un «rideau» d'air froid devant les entrées du serveur.

Avec cette approche, vous pouvez facilement briser la barrière 10KW / Rack pour la densité de puissance.

Constructions personnalisées

Cette approche apporte de l'eau dans l'appareil lui-même. Je ne connais pas de serveurs hors boutique en ligne dotés de boucles d'eau, mais j'entends dire que les principaux fabricants peuvent vous aider si vous avez vraiment besoin d'appareils 10K avec de telles exigences. L'avantage ici est que vous pouvez pousser plus haut sur l'enveloppe de puissance car vous ne comptez pas (autant) sur la transmission de la chaleur par l'air, car le bloc d'eau lui-même effectue le transfert de chaleur des appareils.

Théoriquement, vous pouvez obtenir des densités de puissance très élevées avec la méthode de construction personnalisée.

sysadmin1138
la source
Désolé, cela ne répond pas à la question en soi. Je SAIS qu'il existe des solutions de rack. Rittal et d'autres les vendent - c'est une climatisation en rack. La question est plutôt de l'autre côté, de se débarrasser de la chaleur. Je préfère ne pas payer pour une unité extérieure AC qui JUST gaspille la chaleur quand je peux avoir une solution plus efficace. Peut-être que l'eau froide fonctionne comme contre-partie, peut-être qu'elle fonctionne encore mieux .... lorsque vous utilisez l'eau chaude dans la maison?
TomTom
@TomTom Ah, vous cherchez le côté échangeur de chaleur à l' extérieur de la salle des serveurs! Au-delà de mon savoir-faire immédiat, j'ai peur.
sysadmin1138
Dans la pièce, je vais probablement avec une installation en rack ou à montage latéral - en vérifiant cette partie pour le moment. Il y en a qui utilisent de l'eau mais assurez-vous qu'elle soit économisée (pas d'eau AU-DESSUS des serveurs, une fuite descend vers le bas et il n'y a que des tuyaux, nous obtenons des données et de l'énergie par le haut de toute façon). Le problème est plus - une fois que le liquide est sorti de la pièce, comment puis-je refroidir ces choses le plus efficacement possible;)
TomTom
7

En ce qui concerne la rentabilité du refroidissement par eau en général, il y a une autre bonne question à laquelle j'ai déjà répondu: pourquoi le refroidissement par eau du centre de données n'est pas répandu?

En ce qui concerne votre situation spécifique, je recommanderais fortement de regarder les pompes à chaleur à boucle de terre avec des économiseurs. Il est probablement assez frais pendant votre hiver pour simplement faire fonctionner les économiseurs, en utilisant ce qui est essentiellement de l'air extérieur pour refroidir votre centre de données. En été, les pompes à chaleur sont beaucoup plus efficaces que les unités à courant alternatif standard, environ deux fois plus efficaces généralement.

L'utilisation de pompes à chaleur à boucle commune peut vous permettre d'extraire la chaleur d'une zone (centre de données) et de la pomper dans une autre zone (un espace de bureau ou une maison attenante même) de manière assez efficace (bien qu'il soit probablement plus rentable d'utiliser des sources conventionnelles). , cela dépend des coûts énergétiques dans votre localité).

Vous pouvez également utiliser de l'air pour vider l'eau pour refroidir, de l'air dans le rack (comme c'est typique) et de l'eau douce pour refroidir l'air. Cette eau peut provenir de sources fraîches et être déversée après "chauffage"; cela était courant pour faire fonctionner des réfrigérateurs de taille commerciale, car les calculs ont fonctionné exactement comme vous l'avez dit dans la question. Elle n'est pas couramment utilisée aujourd'hui car l'eau est plus chère qu'elle ne l'était auparavant et les calculs ne fonctionnent plus (du moins dans mon coin du monde, et l'eau est assez bon marché ici aussi). Il serait plus efficace de refroidir directement le serveur avec un refroidissement par eau, mais vous introduisez également le risque de fuite (qui comporte ses propres risques ou frais d'assurance).

Le plus grand détracteur que vous aurez dans la mise en œuvre de tout ce qui précède est que c'est un équipement coûteux. La plupart des entreprises se moquent de savoir si elle est rentabilisée dans 10 à 20 ans, elles ne se soucient que des résultats de cette année. La période de paiement dépend de vos prix locaux.

Chris S
la source
1
En fait non. Même si vous sortez de la salle des serveurs - ignorez le côté eau, etc ... qu'en est-il de l'utilisation d'eau douce comme décharge de chaleur? Pour une installation de 1 mw, cela peut être un problème (sauf si vous êtes sur une rivière), mais cela éliminerait la moitié du problème d'énergie pour la climatisation et fournirait un rejet de chaleur considérablement plus froid que l'air extérieur. Ma question n'est pas très répandue - je suis prêt à investir ici. Ma question est l'économie / la faisabilité. Et il existe des kits qui font dans le refroidissement des racks - même avec de l'eau.
TomTom
1
Impérial - Les galons sont déjà assez mauvais, mais un BTU n'est pas quelque chose que nous utilisons ici. Tout tourne autour de Watts;)
TomTom
1
L'utilisation de l'eau comme dissipateur de chaleur dans un cycle de réfrigération typique (refroidisseurs typiques) les rend 2-3 fois plus efficaces (en supposant que l'approvisionnement en eau est à peu près la température du sol, 12 ° C). Cela s'applique à la fois aux boucles souterraines fermées (communément appelées pompes à chaleur géothermiques) et aux boucles ouvertes, telles que l'eau de décharge. Les systèmes d'évaporation typiques sont beaucoup moins efficaces et conviennent généralement mieux aux applications à vapeur (où le service public local fournit de la vapeur, généralement à partir de l'incinération des déchets).
Chris S
1
Il est préférable. Trouvé quelques allégations pour le refroidissement avec de l'eau souterraine qui met le refroidissement à 500 watts (!) Pour 15 kW (!) Tant que la température de l'eau est de 14 à 18 degrés.
TomTom
1
L'eau fournit 1,16 W de refroidissement par degré-litre. Pour refroidir 10 kW, vous avez besoin de 11600 degrés-litres; la plupart des ordinateurs tournent autour de 32 ° C. Si l'eau souterraine commençait à 12 ° C, ce serait une augmentation de 20 ° C (en supposant une efficacité irréaliste de 100%), donc 11600l-C ÷ 200C = 580l (mon estimation de 650l est plus réaliste). Votre nombre de 500 watts ne signifie rien sans un différentiel de température et un débit. Par exemple, si vous utilisez une pompe à chaleur (Peltier, évap, réfrigérant), vous pouvez augmenter le différentiel de température, mais vous devrez alors payer l'électricité pour le faire fonctionner également.
Chris S
6

TomTom - Je très près a acheté un tas de HP MCS racks refroidis à l' eau pour un projet il y a quelques années , mais a choisi de changer centre de données au lieu.

Ce n'est pas vraiment bon marché, mais ils le soutiennent en termes de fiabilité, par exemple, ils sont heureux que vous leur mettiez leurs trucs d'intégrité. Soit dit en passant, il peut gérer environ 36 kW par rack.

Je voulais juste que vous soyez au courant de ce genre de choses, car il ne sort pas exactement de leur site Web.

Chopper3
la source
Ouais, surtout HP;) Il y en a toujours - et le refroidisseur latéral mince est le meilleur. Évaluer actuellement les approches. Ma principale question n'est pas côté serveur, c'est essentiellement comment vider la chaleur;)
TomTom
Il y a un centre de données dans l'est de Londres que nous utilisons qui a une façon folle de le faire en cas de panne de courant majeure - ils ont un grand étang entre les bâtiments rempli de beaucoup d'eau de pluie régulière. En cas de panne de courant alternatif, ils peuvent acheminer la chaleur d'une manière ou d'une autre, je ne connais pas les détails mais ce n'est pas un petit étang, peut-être 100m x 10m?
Chopper3
1
Eh bien, la maison a un chant à l'arrière pour les eaux usées des toilettes, etc. - qui n'est plus utilisé. Je pourrais payer certaines personnes pour le nettoyer, puis y installer un réservoir pour l'eau de pluie. D'accord;) En fait, l'eau de pluie peut également réduire considérablement la facture d'eau;)
TomTom
0

Je ne suis pas en mesure de répondre à toutes les questions que vous avez posées mais il y a un hôte qui a basé la plupart de sa stratégie sur le refroidissement à base d'eau et c'est OVH . Tous leurs serveurs sont refroidis par eau ce qui leur permet d'offrir des prix intéressants. Si je me souviens bien des statistiques, c'est la plus grande société d'hébergement en Europe et la 5e au monde. Alors oui, ça peut marcher.

C'est simple? Non. Ils fabriquent la plupart de leurs équipements de watercooling, ce qui induit des coûts initiaux élevés. Elle conduit néanmoins à une grande efficacité énergétique.

Pouvez-vous réutiliser l'eau chauffée? Je ne suis pas sûr car vous ne voulez pas que l'eau devienne trop élevée car elle perdra son efficacité pour refroidir vos serveurs.

Antoine Benkemoun
la source
0

LRZ a un grand cluster HPC refroidi à l'eau chaude, et ils font ce type de récupération de chaleur résiduelle.

SuperMUC utilise une nouvelle forme révolutionnaire de refroidissement par eau chaude développée par IBM. Les composants actifs comme les processeurs et la mémoire sont directement refroidis avec de l'eau qui peut avoir une température d'entrée allant jusqu'à 40 degrés Celsius. Le «refroidissement liquide à haute température» associé à un logiciel système très innovant promet de réduire la consommation d'énergie du système. De plus, tous les bâtiments LRZ seront chauffés en réutilisant cette énergie.

Plus d'informations sur http://www.lrz.de/services/compute/supermuc/systemdescription/

physicsgeekn
la source