La Fibre

Hébergeurs et opérateurs pro / entreprises => Hébergeurs et opérateurs pro / entreprises => OVH OVHcloud => Discussion démarrée par: vivien le 09 juin 2011 à 07:39:50

Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:39:50
Visite du data-center OVH de Roubaix 4
(https://lafibre.info/images/ovh/logo_ovh_80.png)
Également disponible :
- Visite du data-center OVH de Roubaix 1 (https://lafibre.info/datacenter/data-center-ovh-roubaix-1/)
- Visite du data-center OVH de Roubaix 2 (https://lafibre.info/datacenter/data-center-ovh-roubaix-2/)
- Visite du data-center OVH de Roubaix 3 (https://lafibre.info/datacenter/data-center-ovh-roubaix-3/)
- Test des groupes électrogènes de Roubaix 2... vive l'écologie ! (https://lafibre.info/datacenter/test-de-groupes/)
- Visite du laboratoire de test OVH (https://lafibre.info/ovh/laboratoire-de-test-ovh/)
- Visite des lignes de montages du 4ème fabriquant de PC en France : OVH (https://lafibre.info/ovh/lignes-de-montages-ovh/)
- Visite du data center Bouygues Telecom de Montigny (78) (https://lafibre.info/datacenter/visite-du-data-center-bouygues-telecom-de-montigny/)


Roubaix 4 est le 4ème et dernier data-center d'OVH, construit tout en forme de cube de 7 niveaux, creux à l'intérieur afin de faciliter le free-cooling (refroidissement par l'air extérieur).
new datacentre RBX4 for 35000 dedicated servers (https://www.youtube.com/watch?v=iaHOVMj3aDY#ws)
(https://lafibre.info/images/ovh/201106_rbx4_batiment_de_7_etages.jpg)

Photo pendant les travaux de Roubaix 4, fin 2010 :
(https://lafibre.info/images/ovh/201009_rbx4_construction_1.jpg)

(https://lafibre.info/images/ovh/201009_rbx4_construction_2.jpg)

(https://lafibre.info/images/ovh/201009_rbx4_construction_3.jpg)

(https://lafibre.info/images/ovh/201011_rbx4_01.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_batiment_de_7_etages_2.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_batiment_de_7_etages_1.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:40:38
La vue intérieure du cube, de nombreux ventilateurs assurent la ventilation des serveurs (Free cooling) :
(https://lafibre.info/images/ovh/201105_rbx4_interieur.jpg)

Au septième étage, il y a du vent et une belle vue sur Roubaix Valley :
(https://lafibre.info/images/ovh/201105_rbx4_septieme_etage_il_y_a_du vent_1.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_septieme_etage_il_y_a_du vent_2.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:41:04
Vue sur le data-center de Roubaix 2 en bas :
(https://lafibre.info/images/ovh/201105_rbx4_rbx2_en_bas.jpg)

Le data-center de Roubaix 1 droit devant et Roubaix 3 à gauche :
(https://lafibre.info/images/ovh/201105_rbx4_rbx1_droit_devant_et_rbx3_a_gauche.jpg)

Vue sur Roubaix-Est :
(https://lafibre.info/images/ovh/201011_rbx4_05.jpg)

Vue sur Roubaix Valley :
(https://lafibre.info/images/ovh/201105_rbx4_vu_sur_Roubaix_Valley.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:41:17
(https://lafibre.info/images/ovh/201105_rbx4_septieme_etage_il_y_a_du vent_3.jpg)

En bas des ouïes d'aération pour le rez-de-chaussée :
(https://lafibre.info/images/ovh/201105_rbx4_septieme_etage_il_y_a_du vent_4.jpg)

Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:41:29
Pendant les travaux de Roubaix 4 fin 2010 :
(https://lafibre.info/images/ovh/201011_rbx4_03.jpg)

(https://lafibre.info/images/ovh/201011_rbx4_04.jpg)

Le chantier en cours à l'intérieur fin 2010 :
(https://lafibre.info/images/ovh/201011_rbx4_02.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:41:57
Étage 0, pas encore prêt, ventilateurs tournent seuls avec la hauteur du bâtiment, la différence des pressions :
(https://lafibre.info/images/ovh/201105_rbx4_etage0_pas_encore_pret_ventilateurs_tournent_seuls_avec_la_hauteur_du_batiment_la_difference_des_pressions.jpg)

Étage 2, préparation des baies qui vont accueillir les serveurs - La ventilation est mutualisée pour plusieurs serveurs lame :
(https://lafibre.info/images/ovh/201105_rbx4_preparation_etage2_avec_les_baies.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:42:12
Salle de routage en préparation :
(https://lafibre.info/images/ovh/201105_rbx4_salle_de_routage_en_preparation.jpg)

1200 serveurs sont en bêta-test depuis avril 2011 :
(https://lafibre.info/images/ovh/201105_rbx4_1200_serveurs_en_ beta_test_depuis_avril_2011_1.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_1200_serveurs_en_ beta_test_depuis_avril_2011_2.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:42:26
Les conduits nécessaires au Free-cooling du rez-de-chaussée :
(https://lafibre.info/images/ovh/201105_rbx4_air_1.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_air_2.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:42:47
L'ascenseur industriel de 1,5 tonnes :
(https://lafibre.info/images/ovh/201105_rbx4_ascenseur_industriel_1.5T_1.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_ascenseur_industriel_1.5T_2.jpg)

La futur salle de gestion, encore en travaux :
(https://lafibre.info/images/ovh/201105_rbx4_futur_salle_de_gestion.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:43:21
Espace pour les transformateurs 20 000 v :
(https://lafibre.info/images/ovh/201105_rbx4_espace_pour_les_transformateurs_20000v.jpg)

Transformateurs sous tension :
(https://lafibre.info/images/ovh/201105_rbx4_transformateur_sous_tension.jpg)

Les cellules 20 000v :
(https://lafibre.info/images/ovh/201105_rbx4_les_cellules_20000v.jpg)

TGBT (Tableau Général Basse Tension). C'est le tableau électrique basse tension des grandes installations électriques.
Ce tableau fait le lien entre l'arrivée du fournisseur et le réseau du client.
(https://lafibre.info/images/ovh/201105_rbx4_tgbt.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:43:54
Installation des TGBT (Tableau Général Basse Tension) :
(https://lafibre.info/images/ovh/201105_rbx4_installation_TGBT_1.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_installation_TGBT_2.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_installation_TGBT_3.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_installation_TGBT_4.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:44:28
Nouveaux onduleurs :
(https://lafibre.info/images/ovh/201105_rbx4_nouveaux_onduleurs.jpg)

Les batteries pour alimenter le data-center en attendant la synchronisation des groupes :
(https://lafibre.info/images/ovh/201105_rbx4_les_batteries.jpg)

Les batteries en cours d'installation :
(https://lafibre.info/images/ovh/201105_rbx4_batteries.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 09 juin 2011 à 07:44:56
La sécurité est déjà opérationnelle à Roubaix 4 :
(https://lafibre.info/images/ovh/201105_rbx4_securite.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_batiment_de_7_etages_3.jpg)

Les vélos pour se déplacer entre tous les data-center de Roubaix Valley :
(https://lafibre.info/images/ovh/201105_rbx4_pour_se_deplacer_entre_tous_les_datacentres.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: cali le 13 juin 2011 à 03:44:20
Elle est bien moche la ville de Roubaix tout de meme.
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Leon le 09 juillet 2011 à 07:28:16
Les amis de chez PCImpact ont mis fait un reportage sur ce datacenter d'OVH (Roubaix 4).
[Lien HS supprimé]

Le plus intéressant c'est les images du watercooling. Ce sont des images assez rares. OVH a volontairement restreint sa communication (et les photos) sur le sujet depuis des années!

(https://lafibre.info/images/ovh/201106_rbx4_watercooling_serveurs_1.jpg)

(https://lafibre.info/images/ovh/201106_rbx4_watercooling_serveurs_2.jpg)

(https://lafibre.info/images/ovh/201106_rbx4_watercooling_serveurs_3.jpg)

(https://lafibre.info/images/ovh/201106_rbx4_watercooling_serveurs_4.jpg)

Leon.
Titre: Visite du data-center OVH de Roubaix 4
Posté par: corrector le 09 juillet 2011 à 16:29:29
Est-ce qu'il y a des fuites?

Est-ce que les ordinateurs pourraient fonctionner dans l'eau?
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Leon le 09 juillet 2011 à 17:10:00
C'est clair que c'est couillu de la part d'OVH, le watercooling. Surtout que voyant leur installation, on peut se dire qu'ils ne prennent pas toutes les précautions nécessaires. Si j'avais eu à déployer du watercooling "industriel", j'aurais mis des raccords sécurisés partout, des vannes partout, etc... Les raccord sécurisés permettent de brancher/débrancher une canalisation sans provoquer de fuite ni d'un côté ni de l'autre.

On pourrait aussi utiliser des huiles diélectriques, mais le tarif ne doit pas être le même.

Voici un bref aperçu des expériences d'OVH sur le watercooling. C'est extrait du Mag OVH (http://"https://www.ovh.com/fr/ovh_mag/07_2010/index.xml"), pages 130-131. Ca montre que ça n'est pas sans risque.

(https://lafibre.info/images/ovh/201007_experiences_OVH_sur_le_watercooling.jpg)

Leon.
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Mieszko le 09 juillet 2011 à 19:11:15
sur la vignette numero 4 la carte mere est entrain de prendre feu ??
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Leon le 09 juillet 2011 à 19:31:36
Eh oui, tu as bien compris!
Voilà, c'est la communication selon OVH. "On fait du watercooling, et c'est risqué pour vos serveurs"...
Va comprendre. OVH crame des serveurs et le montre à ses clients.

Voici la vraie légende des images 1, 4 et 7. Aucun trucage de ma part!
Citer
Expérimentations sur une carte mère : « Si on versait de l’eau sur un serveur ? Tiens, c’est marrant ... Ah! okey ... ça fait ça ... »
(https://lafibre.info/images/ovh/201007_experiences_OVH_sur_le_watercooling-zoom.jpg)

Leon.
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Gilum le 10 juillet 2011 à 13:14:19
C'est clair que c'est couillu de la part d'OVH, le watercooling. Surtout que voyant leur installation, on peut se dire qu'ils ne prennent pas toutes les précautions nécessaires. Si j'avais eu à déployer du watercooling "industriel", j'aurais mis des raccords sécurisés partout, des vannes partout, etc... Les raccord sécurisés permettent de brancher/débrancher une canalisation sans provoquer de fuite ni d'un côté ni de l'autre.

Qui te dit qu'il n'y a aucune sécurité ?
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Leon le 10 juillet 2011 à 13:53:35
Je n'ai jamais dit qu'il n'y avait aucune sécurité. Sauf que quand je vois des montages comme ça, sans vanne, sans raccord "stop", je me demande comment ils pourront faire une maintenance sans arrêter de serveur. C'est clair que là, ils doivent arrêter tous les serveurs et vider les tuyaux pour bricoler leur système.
https://lafibre.info/images/ovh/201106_rbx4_watercooling_serveurs_2.jpg (https://lafibre.info/images/ovh/201106_rbx4_watercooling_serveurs_2.jpg)

Encore une fois, les raccords "stop" industriels, ça existe. C'est cher? Oui, et alors. 1 baie de serveurs, c'est des dizaines de milliers d'Euros de chiffre d'affaire par an! Alors économiser des bouts de chandelle qui diminuent la fiabilité globale, je trouve que ça n'est pas terrible.

Leon.
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 14 juillet 2011 à 09:27:18
(https://lafibre.info/images/ovh/201107_lettre_information_ovh.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 18 septembre 2012 à 09:03:36
Je me demande quel est le système d'extinction d'incendie utilisé par OVH dans ses datacenter sans climatisation.

Le FM200 ou l'Azote me semble impossible, les container étant troués de partout.

Suppression incendie par brouillard d'eau ?
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Leon le 20 septembre 2012 à 08:45:25
Je me suis posé la même question! Du coup, je ne sais même pas s'ils ont un dispositif anti-incendie! On n'en n'a jamais vu sur les photos OVH. Pourtant, ils ont une densité de serveur énorme grâce à leur watercooling. Donc un incendie peut vraiment être catastrophique.

Et ce qui me surprends aussi, c'est le fait que le plancher du datacenter "Roubaix 4" est... en bois! J'espère que c'est du bois traité ignifugé.

Je rappelle que dans un datacenter "classique / professionnel", on interdit au maximum les matières inflammables. Même les câbles (électriques / fibres) sont normalement de qualité spéciale qui les empêche de bruler.

Leon.
Titre: Visite du data-center OVH de Roubaix 4
Posté par: vivien le 20 septembre 2012 à 08:51:50
J'ai eu confirmation : pas de système anti-incendie chez OVH mais ils ont du personnel 24h/24 sur site.

C'est clair que pour Roubaix 4 cela pourrait facilement s'étendre verticalement et la structure bois / métal rapidement s'écrouler sous la chaleur et le poids important des serveurs.

(https://lafibre.info/images/ovh/201009_rbx4_construction_2.jpg)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Nico le 20 septembre 2012 à 09:19:07
Je rappelle que dans un datacenter "classique / professionnel", on interdit au maximum les matières inflammables. Même les câbles (électriques / fibres) sont normalement de qualité spéciale qui les empêche de bruler.
On utilise des câbles ISH, par contre je ne retrouve plus la définition de l'acronyme...
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Damien le 20 septembre 2012 à 10:31:27
On utilise des câbles ISH, par contre je ne retrouve plus la définition de l'acronyme...
Tu trouveras peut-être ton bonheur ici : http://www.acronymfinder.com/ISH.html (http://www.acronymfinder.com/ISH.html)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Nico le 20 septembre 2012 à 10:33:09
Non, j'avais été voir mais c'est un acronyme FR : Ignifugé Sans Halogène (merci les voisins d'open space).
Titre: Visite du data-center OVH de Roubaix 4
Posté par: miky01 le 20 septembre 2012 à 16:17:45
J'ai eu confirmation : pas de système anti-incendie chez OVH mais ils ont du personnel 24h/24 sur site.
Incroyable que leurs assurances tolère ça, j'ai bossé dans pas mal de très gros sites de hosting sur Genève,  les assurances obligent un système d'extinction automatique par eau, c'est en fait des petites capsule en verre qui explosent sous l'effet de la chaleur et ouvre une vanne a haute pression, mais tous les datacenters ont un système d'extinction par gaz, l'eau est le dernier recours en cas de gros incendie, c'est une obligation pour être assuré.

Pour le water cooling de OVH, je rejoint tout a fait Leon, c'est vraiment du bricolage "made in Roumanie"...
J'ai vu des installation de water cooling au CERN, ca a vraiment rien a voir, que des tuyaux blindés avec gaine inox, raccords avec vanne aussi tout en inox, et c'est pas de la flotte qui passe dedans.

OVH se fait pas une bonne pub en montrant des bricolages pareille avec leur tuyaux en plastique mou et leurs brides Castorama ...
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Leon le 20 septembre 2012 à 17:57:10
Incroyable que leurs assurances tolère ça, j'ai bossé dans pas mal de très gros sites de hosting sur Genève,  les assurances obligent un système d'extinction automatique par eau[...]
Peut-être qu'ils n'ont même pas d'assurance pour leurs serveurs et équipements! Ils sont obligés d'avoir une assurance "responsabilité civile", mais pour le reste, ils font comme ils veulent, il n'y a rien d'obligatoire!

Leon.
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Leon le 08 décembre 2012 à 11:52:34
Encore une vidéo intéressante d'OVH, roubaix 4, avec des images inédites.
On y voit entre autre des serveurs "supermicro" avec du watercooling, une connexion 10Gb/s et 2 connexions SAS. Je ne pense pas qu'on en avait déjà vues. Sans doute un de leur serveur de fichier (pour le NAS, ou autre).

Par contre, j'ai l'impression que la "démonstration" du retrait de Disque dur à chaud est du bluff: le filer semble éteint!

Reportage France 3 du 30/11 (https://www.youtube.com/watch?v=pCXdYvaWfAw#ws)

Leon.
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Mieszko le 08 décembre 2012 à 12:57:22
j'aurais tendance a dire que son filer est sous tension, meme si tout les tiroirs de disques n'ont pas de LED bleue sur la gauche.

En revanche, meme si j'ai confiance dans le matos et la technologie, j'enleverrais pas un disque sur une machine en prod... ;)
enfin si je le fait, mais quand je suis en formation ;)
Titre: Visite du data-center OVH de Roubaix 4
Posté par: Anthoo le 30 avril 2013 à 18:36:15
Bonjour,

Donc en fait, si j'ai bien compris tout . Ovh à presque un "quartier" à eux avec RBX1, RBX2, RBX3, RBX4, RBX 5 ?
Quand on voit cela :

(https://lafibre.info/images/ovh/201304_ovh_rbx1_rbx2_rbx3_rbx3_rbx4_rbx5.jpg)