Auteur Sujet: Quelle est la bonne température dans les allées froides dans les data centers ?  (Lu 2471 fois)

0 Membres et 1 Invité sur ce sujet

vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Quelle est la bonne température dans les allées froides dans les data centers ?

À l'origine ce tweet de Jérémy Martin (CEO Techcréa Solutions / CTO FirstHeberg) :

Coté température dans la salle, on pousse de l'air autour de 19°c, pour une température réelle en confinement froid autour de 23°C (oui, le calfeutrage n'est pas au top).
Coté chaud, on tourne vers 31°C, tout à fait gérable pour la ventilation.

Vous aurez remarqué évidemment la coupure d'hier soir sur nos clims, le disjoncteur est tombé (TRI 25A). On le changera plus tard, les sections de câble le permettent. Via les brumisateurs, la puissance absorbée est plus faible, donc aujourd'hui, ça tient bon !




J'ai fait la réponse suivante :
Pourquoi ne pas monter un peu en température ? Les serveurs, le supportent et cela permettrait des économies.
C'est pour vous laisser de la marge en cas d'incident ?


En effet, il est habituel de voir des températures en allée froide de 28°c

Par exemple, il me semble qu'à DC5 il était prévu une température allée froide de 30°c quel que soit la température extérieure. Peut-être que cela a baissé depuis ou qu'il y a une température plus froide pour l'hiver (car cela ne coute pas grand-chose de la baisser)

Dans la photo ci-dessous l’air neuf arrive par la droite. Les registres motorisés à gauche permettent la reprise de l’air chaud en provenance des allées chaudes du data center : c’est nécessaire pour garantir un air dans les allées froides qui est toujours à 30°C, quand il fait moins de 30°C à l’extérieur.


vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Quelle température dans les allées froides dans les data centers ?
« Réponse #1 le: 19 juillet 2022 à 19:06:40 »
Coté serveur de nombreux serveurs (attention, pas tous) sont en mesure de fonctionner parfaitement avec un couloir froid à 40°c (et même 45°c moins de 1% du temps) :



Une température élevée, permet de faire des économies sur la climatisation.

Mais je n'avais pas pensé à la consommation électrique des ventilateurs.

Voici la réponse de Jérémy Martin  :
Regarde sur le dernier dashboard. La conso onduleur a explosé rapidement après la coupure de la clim. C'est a cause des ventilateurs des serveurs. Y a un équilibre a trouver entre le froid et la vitesse de ventilation sur chaque machine




vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Quelle température dans les allées froides dans les data centers ?
« Réponse #2 le: 19 juillet 2022 à 19:09:10 »
Donc ces chiffres me bouleverse un peu : Quand on augmente la température, il y a une si forte augmentation de la consommation des serveurs liée aux ventilateurs qui tournent plus vite ?

Quelle est finalement la température idéale, pour un DC avec climatisation ?

Et pour un datacenter en freecooling direct, l'hiver pourquoi ne pas baisser fortement la température ?

caaptusss

  • AS197922 Officiel Techcréa
  • Expert
  • *
  • Messages: 115
  • Valenciennes (59)
    • FirstHeberg
Quelle température dans les allées froides dans les data centers ?
« Réponse #3 le: 19 juillet 2022 à 20:41:05 »
La régulation des serveurs s'adapte au moindre degré de différence. On avait calculé que 1 degré de plus en couloir froid consomme 1kw d'énergie en plus en ventilation serveur. Et ça ne fait baisser la conso clim que de quelques centaines de watts.
Donc vaut mieux refroidir fort pour que les ventilo tournent peu.

On le vois sur la coupure de hier. On a pris 10 degrés en couloir froid en 15mn, et la conso onduleur augmente de presque 9 kW pour compenser en ventilation serveur.
Globalement, pas de panne, et l'augmentation de la consigne nous donnerais moins d'inertie dans la salle en cas de panne (déjà 10 degrés en 15mn, c'est très rapide).

jfmaurin

  • Abonné Orange Fibre
  • *
  • Messages: 23
  • Clermont-Ferrand (63)
Quelle température dans les allées froides dans les data centers ?
« Réponse #4 le: 19 juillet 2022 à 20:58:44 »
Donc ces chiffres me bouleverse un peu : Quand on augmente la température, il y a une si forte augmentation de la consommation des serveurs liée aux ventilateurs qui tournent plus vite ?

Ca ne m'étonne qu'assez peu. A la maison j'ai un modeste Dell PowerEdge R720, avec seulement 4 HDD dedans.
En idle, l'IDRAC me dit qu'il consomme 98 W, ventilos tournant plutôt au ralenti à 3600 RPM.
Si je force les ventilo à fond, donc vers les 14 500 RPM, l'IDRAC me donne alors une consommation de 154 W, soit une hausse notable :o

hwti

  • Abonné Orange Fibre
  • *
  • Messages: 2 237
  • Chambly (60)
Quelle température dans les allées froides dans les data centers ?
« Réponse #5 le: 19 juillet 2022 à 23:49:46 »
C'est vrai que les ventilateurs des serveurs consomment énormément. Leur diamètre est contraint par la hauteur disponible.
Quelle est la température CPU cible pour la régularisation en général ? L'efficacité de l'aircooling dépend du delta de température entre l'air injecté et le radiateur.

Je me demande à quel point il pourrait être rentable d'augmenter la surface des radiateurs (plus de métal) ou mieux uniformiser la température (heatpipes) pour nécessiter moins de ventilation (et s'y retrouver sur la consommation).

Symbol

  • AS52075 Wifirst
  • Expert
  • *
  • Messages: 349
Quelle température dans les allées froides dans les data centers ?
« Réponse #6 le: 20 juillet 2022 à 01:13:50 »
Ça parle de ventilos, mais il y a le rendement de l'électronique (y compris des alimentations) par rapport à la température.
Plus il fait chaud, plus le rendement diminue, donc plus plus il faut chaud, plus ça consomme d'énergie pour le même travail (et plus ça chauffe, et plus ça ventile).

Un article (sur du PC de bureau) de 2011:
https://forums.anandtech.com/threads/effect-of-temperature-on-power-consumption-with-the-i7-2600k.2200205/


Il y a aussi des articles çà et là sur le MTBF qui baisse avec l'élévation des températures ambiantes.

hwti

  • Abonné Orange Fibre
  • *
  • Messages: 2 237
  • Chambly (60)
Quelle température dans les allées froides dans les data centers ?
« Réponse #7 le: 20 juillet 2022 à 01:40:38 »
Les CPU consomment effectivement moins quand ils sont froids.
Mais je ne sais pas si c'est aussi important dans des serveurs, où la tension n'est pas poussée au maximum, et où les radiateurs ne sont pas forcément les plus efficaces par rapport à ce qui se fait sur des PC puissants (en beaucoup plus gros).

Pour les alimentations, je ne suis pas sûr que la baisse de rendement soit si grande.
Mais effectivement le MTBF des condensateurs dépend beaucoup de la température.

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 991
Quelle température dans les allées froides dans les data centers ?
« Réponse #8 le: 20 juillet 2022 à 19:45:23 »
Pour la partie ventilateur, si on veut économiser de l'énergie, il faut bannir les serveurs puissants de 1U, et prendre du 2U. Le 1.5U de open-compute était intéressant aussi, mais ça n'a pas trop pris.
Les ventilateurs 1U, 40mm c'est assez mauvais en terme de ratio performance/conso. Sans parler du bruit insupportable, mais dans un datacenter on s'en fout.

Quand je vois des baies de serveurs 1U, baies remplies à moitié un emplacement sur 2 à cause de limitations de puissance de la baie, j'ai envie de pleurer à chaque fois...
On pourrait faire la même chose en moins bruyant, moins énergivore et plus fiable/durable en 2U.

Leon.

Free_me

  • Abonné Free fibre
  • *
  • Messages: 3 113
  • Marseille
Quelle température dans les allées froides dans les data centers ?
« Réponse #9 le: 20 juillet 2022 à 19:53:39 »
ca me fait penser quela derniere fois chez JN dans un couloir froid, il y avait une baie, une seule qui soufflait un air aussi chaud que l'exterieur, sur plus de la moitiée de la hauteur. Je sais pas s'ils ont monté les serveurs a l'envers ou quoi mais je me suis fait la reflexion que si toutes les baies etaient comme ca le couloir froid ne pourra jamais rester froid.

caaptusss

  • AS197922 Officiel Techcréa
  • Expert
  • *
  • Messages: 115
  • Valenciennes (59)
    • FirstHeberg
Quelle température dans les allées froides dans les data centers ?
« Réponse #10 le: 20 juillet 2022 à 23:50:23 »
On utilise beaucoup de serveur blade de gamme M620 chez DELL, ça n'a donc pas de ventilateur directement, mais il y a 9 turbines à l'arrière du chassis.
En nominal, elles consomment environs 100W chacune (oui...) et font un bruit déjà pas très sympa.
Lors de notre incident lundi, elles sont montés à 250W chacune ! D'après les tachymètres, elles sont passés de 3k RPM à plus de 12k RPM. Elles font environs 8mm de diamètre, je vous laisse imaginer le bruit.
On peut pas dire, coté pression d'air, c'est très efficace, les lames ont très bien tenu face à la chaleur, mais on se prend très vite une énorme montée d'énergie dans le datacenter.

Concernant les baies saturés électriquement, on a fait le choix d'équiper chaque baie avec un 2x TRI 2,5mm², on peut donc tirer environs 11 kW par baie sécurisé. Du fait, on arrive à mettre 4 Blade 1000E DELL, soit 64 serveurs sur 42U dans une baie.
Mais la plupart des datacenters sont conçu en câble de 1mm2 TRI, donc max 6 kW... Il n'y a que les nouvelles constructions qui sont dimensionnés convenablement (depuis une dizaine d'année).

ldrevon

  • AS43142 Officiel Adeli
  • Expert
  • *
  • Messages: 642
Chez nous, la température de froid est de 25° toute l'année (qu'on pousse avec nos ventilateurs...) et  coté chaud c'est variable en fonction des baies/serveurs entre 30 et 38°.
Au niveau de la régulation la température chaude est régulée sur 35°. (on pousse plus ou moins d'air en fonction de la température d'air chaud)

Si la température de froid monte (> 30°) effectivement les ventilateurs de serveur vont augmenter leur flux afin de maintenir l'augmentation de température des CPU (principalement).
Il n'y pas de norme/règle sur ce point car tous les fabricants n'ont pas les mêmes TDP de proc ni le même type de ventilation.
La limite étant aux alentour de 40° en fonction de chaque serveur. (il faut regarder les spécificités de ces derniers)
Sur Maxnod le dernier groupe de production d'eau glacée était prévu pour des t° ext limite de 41° (en fait j'ai des doutes sur les caractéristiques des vendeurs de groupe..) car cette semaine  on a eu un contacteur HS ce qui a enlevé 2 ventilateurs sur les 6 du dernier groupe, et on commençait à avoir des alarmes de température d'eau anormale à cause de la limite de puissance de 180kw au lieu des 266 théoriques ... (pour le bâtiment + la salle 1 ).