Auteur Sujet: Les data centers de Googles  (Lu 180167 fois)

0 Membres et 1 Invité sur ce sujet

kgersen

  • Modérateur
  • Abonné Bbox fibre
  • *
  • Messages: 9 078
  • Paris (75)
Les data centers de Googles
« Réponse #12 le: 29 mai 2013 à 16:15:45 »
Pour ceux qui veulent savoir comment sont utilisé ces datacenters, voir la présentation suivante:

(cliquez sur la miniature ci-dessous - le document est au format PDF - page 5 à 20, après ça devient plus 'logiciel')


On voit clairement que l'unité de base c'est le cluster, le groupe de 24 (ou 48?) racks de forme rectangulaire tel qu'on voit sur la photo [2] plus haut.

Ca date un peu (octobre 2009) mais ça explique bien pourquoi ils ont choisi d'utiliser du matériel 'pas cher et standard' (cpu middle gamme, disques sata) plutôt que des serveurs chers spécifiques pour DC comme on trouve dans les DC plus traditionnels.

Il faut dire aussi que les DCs de Google ne servent qu'aux services Google et a leur offre 'cloud' qui est a un niveau logiciel plus haut que les autres (bien qu'ils aient aussi une offre de location de VMs plus traditionnelle). Difficile donc de comparer ca avec un DC qui offre de la coloc ou du dédié par exemple.


ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #13 le: 29 mai 2013 à 22:43:18 »
Pour l'offre VM "traditionnel", nommement le Google Compute Engine (GCE), on est sur du Linux sous KVM (Kernel Based Virtual Machine), dans les infrastructures Google.

Il y a un démo très intéressante d'un cluster de 600,000 coeur (!!!) faite lors de l'annonce de GCE durant la conférence IO 2012:


bedou974

  • Abonné SFR fibre FttH
  • *
  • Messages: 73
Les data centers de Googles
« Réponse #14 le: 29 mai 2013 à 23:47:12 »
J'aime bien les disques dur HS qui sont quand meme percé au milieu pour etre sur qu'aucunes donnée ne puisse être récup  :)

ZmK

  • Abonné SFR THD (câble)
  • *
  • Messages: 5
  • FTTH 300/50 Nancy (54)
Les data centers de Googles
« Réponse #15 le: 30 mai 2013 à 09:17:30 »
dommage de ne pas avoir les légendes sous les photos ;-)
https://www.google.com/about/datacenters/gallery/ ^^

le "streetview": https://www.google.com/about/datacenters/inside/streetview/ ;-)

ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #16 le: 30 mai 2013 à 10:42:07 »
Ça peut se faire . Mais je dois avouer que comme introduction j'ai préféré mettre en valeur la matière première: de très jolies images :D.

En attendant, voici une petite aide pour décrypter les photos par url (qui contiennent les codes des datacentres):

CBF:: Council Bluffs, IOWA
DLS:: The Dalles, OREGON
GBL:: St Ghislain, BELGIUM
IDI:: Douglas County, GEORGIA
LNR:: Lenoir, NORTH-CAROLINA
LPP:: Hamina, FINLAND
MNK:: Berkeley County, SOUTH-CAROLINA
PRY:: Mayes County, OKLAHOMA

ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #17 le: 30 mai 2013 à 12:15:41 »
Coucil Bluffs, Iowa

Les arrivées vidéo satellites pour les offres Google Fibre (Gigabit + TV) se font sur se site ou elle sont ensuite router vers les PoP Google Fibre (Kansas City Mo / Ks pour l'instant):
 

Ce data centre d'approximativement 350 x 60 mètre est le troisième plus large, derrière Douglas County et St Ghislain (~380x60m). On peut se rendre compte de la longueur du site ici.
 

Dans le data centre les serveurs sont mis dans des baies utilisant des "hot huts" - une hot aisle avec les équipement de refroidissement au plus pres des serveurs qui retourne un air rafraîchit directement dans le halle:
   

Une salle de routage. On semble distinguer des équipements Infinera (DWDM) et Juniper, même si Google utilise ses propres switch router (128 x 10GE) depuis 2010 pour ses réseaux distant (et certainement pour les réseaux interne au data centres):


Un Googler au travail: avec toute l'infrastructure hors IT (réseau électrique et humide) la maintenance ou les ameliorations / amenagements sont très importants:

« Modifié: 30 mai 2013 à 17:58:22 par ruchard5 »

ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #18 le: 30 mai 2013 à 16:45:40 »
The Dalles, Oregon

Ceci est le premier data centre construit par Google, en 2008. On peux voir que la hauteur des bâtiments limites de volume d'air a l’intérieur des data halls, alors que les tours de refroidissement sont plus hautes, donnant l'impression de voir deux "pétrolier" échouer sur les berges de la rivière Columbia.

La plomberie sous les tours de refroidissement suit un code de couleur qui rends l'ensemble très jolie: Rouge pour les circuits chaud, Bleue pour les circuits froid, Vert et Jaune pour les échangeurs thermique et groupes de refroidissement.




ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #19 le: 30 mai 2013 à 17:21:45 »
St Ghislain, Belgique

Google a investit sur le site de St Ghislain à partir de 2007 (250 million d'euro) et construit en ce moment même une extension pour 300 millions de plus:

http://www.rtbf.be/video/detail_di-rupo-visite-le-datacenter-de-google-a-saint-ghislain?id=1814191

St Ghislain est un site sans refroidisseurs (chillers) grâce aux faibles variations de température (qui ne sont pas souvent trop chaude). De plus Google se fournit en eau dans un canal a proximité, ce qui leur permet de ne pas dépendre du système d'eau publique (potable)  grace a leur usine de traitement des eaux:



« Modifié: 30 mai 2013 à 17:56:44 par ruchard5 »

kgersen

  • Modérateur
  • Abonné Bbox fibre
  • *
  • Messages: 9 078
  • Paris (75)
Les data centers de Googles
« Réponse #20 le: 30 mai 2013 à 18:55:53 »
J'ai 'maper' les batiments des DC sur MapsEngine ici: http://mapsengine.google.com/map/view?mid=zUFNNGDtrepc.kreW74DOiigg avec mesures faites avec l'outils de mesure de Google Maps. (zoomer a fond sur un puis passer de l'un a l'autre dans la liste, changer le fond de carte au besoin).
Les emplacements des DC de Berkeley County et Hamina ne sont pas officiels Google mais un recoupement très probable d’après des infos et des photos.

Les mesures en mètres (la feuille de calcul en live):


Ce sont des mesures approximatives de la surface de chaque batiment. Ce n'est pas la surface intérieure réellement disponible mais un plafond probable. Le DC de Douglas est vraiment gros ...
« Modifié: 30 mai 2013 à 22:11:04 par kgersen »

ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #21 le: 30 mai 2013 à 22:38:36 »
Les emplacements des DC de Berkeley County et Hamina ne sont pas officiels Google mais un recoupement très probable d’après des infos et des photos.

Le recoupement est bon, il n'y a pas de doute à avoir ;).

Pour le total, tu peux rajouter le deuxième data centre a Lenoir, qui fait aussi approximativement 250 x 70 mètre, soit 17,500 mètre carre de plus. Même si on ne peux pas savoir comment l'espace est utilise il ne fait _aucun_ doute que Google maximise son immobilier informatique (pour l'informatique).

ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #22 le: 30 mai 2013 à 23:36:14 »
Douglas County, Géorgie

Comme kgersen disais plus haut, Douglas County (IDI) est très impressionnant, avec plus de 40,000 m2 de surface extérieur.

La preuve par l'image: les tours de refroidissement, que l'on a en gros plan sur l' images 2, sont au fond en tout petit sur la première, alors que le premier plan ne dévoile qu'une partie de la largeur du bâtiments - puisqu'il y a trois tours de refroidissement a chaque extrémité.

Pour finir sur le coté mastodonte, image 4, nous avons une vu intérieur sur la _largeur_ du centre.

Au niveau des équipements informatique, on peut voir précisèment sur l'image 9, outre le faut plancher, les détails des serveurs de stockage (GFS, Colossus ou autre) a gauche:
  • 1 baie pour l’unité central
  • une baie pour les disque
  • 2 cables SATA orange pour la connectique
Ce qui nous donne 14 serveurs par rack. Sachant qu'un serveur standard a 2 disque de 1 TO, combien de disque peuvent ils mettre sur une baie? Puisqu'un cable SATA peut connecter 5 disques (comme sur les storage pods de Backblaze cela nous fait donc 10 TO de disponible (Google utilisant des replicas sur plusieurs serveurs plutôt qu'une redondance par RAID) ou plus (si ils utilisent des disque de 2 ou 4 TO).

Sur un rack, on arrive quand même a un total de 140 TO, soit un peu plus de 7 rack pour 1 Peta-octet.


vivien

  • Administrateur
  • *
  • Messages: 47 075
    • Twitter LaFibre.info
Les data centers de Googles
« Réponse #23 le: 31 mai 2013 à 00:07:00 »
Merci pour toutes ces infos.

Comment relier 5 disques SATA sur un même connecteur ?

Il ne faut pas des disques spécifiques ?