Auteur Sujet: Les data centers de Googles  (Lu 180192 fois)

0 Membres et 1 Invité sur ce sujet

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
Les data centers de Googles
« Réponse #48 le: 02 juin 2013 à 20:50:17 »
Et sur ces autres photos, on voit d'autres techno de lien entre switch et serveurs. Je pense que c'est du 10Gb/s CX4. Les serveurs ont alors une carte d'extension, que l'on voit verticale.







Leon.

vivien

  • Administrateur
  • *
  • Messages: 47 085
    • Twitter LaFibre.info
Les data centers de Googles
« Réponse #49 le: 02 juin 2013 à 21:16:29 »
La photo source :


ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #50 le: 02 juin 2013 à 21:40:35 »
Ce qui nous donne 14 serveurs par rack. Sachant qu'un serveur standard a 2 disque de 1 TO, combien de disque peuvent ils mettre sur une baie? Puisqu'un cable SATA peut connecter 5 disques (comme sur les storage pods de Backblaze cela nous fait donc 10 TO de disponible (Google utilisant des replicas sur plusieurs serveurs plutôt qu'une redondance par RAID) ou plus (si ils utilisent des disque de 2 ou 4 TO).
J'ai trouvé la réponse a cet question (pas sur la taille, mais sur la quantité de disque) grace a une autre video Youtube de CBS [vidéo supprimée] :

Les baies de stockage on 2x6 disques. Donc au moins 12 TO, voir 24 TO ou plus.

Dans cette vidéo on apprends aussi qu'il y a 55,200 serveurs a Lenoir, alors que les DC semble plein au 7/8eme, pour une surface externe de 11,700 m2.








BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Les data centers de Googles
« Réponse #51 le: 02 juin 2013 à 22:51:50 »
Sur la dernière photo, vous avez vu la largeur de la carte mère ???

C'est moi ou c'est plus large que du 19" ?!


BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Les data centers de Googles
« Réponse #52 le: 02 juin 2013 à 22:57:18 »
Et sur ces autres photos, on voit d'autres techno de lien entre switch et serveurs. Je pense que c'est du 10Gb/s CX4. Les serveurs ont alors une carte d'extension, que l'on voit verticale.

A la réflexion, je pense que c'est de l'infiniband au sens large c'est à dire qui transporte LAN et SAN (FCoE ou natif FC ?). Google en faisait la promotion en 2010 : http://www.datacenterstocks.com/2010/06/google-network-architects-endorse.html


ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #53 le: 02 juin 2013 à 23:24:15 »
Je pense que DataCenterStock fait référence a ce document (mais il n'est pas sourcé):

(cliquez sur la miniature ci-dessous - le document est au format PDF)


Si c'est le cas alors ils se trompent - Google ne parle pas d' Infiniband comme d'une solution mais comme d'un exemple de spécification définissant des Liens a gamme dynamic (Link's Dynamic Range):

Extrait de la Page 5 du document (page 342 de la publication original):

"One good example of dynamic channel range is the InfiniBand architectural specification, which defines multiple operational data rates (see Table 2). Figure 5 illustrates the normalized dynamic range of an off-the-shelf InfiniBand switch available today, where it is possible to manually adjust the link rates corresponding to Table 2.".

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
Les data centers de Googles
« Réponse #54 le: 03 juin 2013 à 07:01:32 »
Effectivement, c'est surement de l'infiniband. D'autres articlent en parlent.
http://www.cablinginstall.com/articles/2010/06/google-says-infiniband.html

Après, comme infiniband et Ethernet 10Gb/s peuvent tous les 2 utiliser des connecteurs CX4, c'est impossible de choisir entre les 2 juste avec des photos!

Leon.

BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Les data centers de Googles
« Réponse #55 le: 03 juin 2013 à 15:20:28 »
Ce qui me fait pencher pour de l'infiniband est qu'il est plus facile de trouver un switch de ce protocole en connectique CX4 qu'un switch Ethernet en CX4. En Ethernet, en cuivre, il y a une préférence pour les cables DAC/DirectAttach.

Mais ce n'est que supputation :)

ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #56 le: 03 juin 2013 à 17:38:20 »
Honnêtement je vois pas Google passer sur une infrastructure mixed Ethernet / Infiniband. Le passage 4 x 1 GE -> 10GE est compréhensible.

Vers l'infiniband? Beaucoup moins d'un point de vu opérationnel et expertise interne etc. Surtout si c'est juste pour le top-of-rack.


ruchard5

  • Expert
  • Abonné Free adsl
  • *
  • Messages: 116
    • Le blog du Ruchard
Les data centers de Googles
« Réponse #57 le: 04 juin 2013 à 09:58:27 »
Berkeley County, South Carolina



BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Les data centers de Googles
« Réponse #58 le: 04 juin 2013 à 10:01:47 »
Tiens ils ont du Sun pour le robot de sauvegarde. Doit y en avoir d'autres car il me parait bien "petit" vu la taille de Google. Ou alors ils sont très optimistes sur les sauvegardes et font de la dedup à fond.

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
Les data centers de Googles
« Réponse #59 le: 04 juin 2013 à 21:10:31 »
Moi, il y a un truc que je ne comprends pas.

Pourquoi ils mettent des faux planchers? On voit bien sur plein de photos que les clims (échangeurs) sont directement au plafond des "allées chaudes".

Donc il est peu probable que les faux planchers soient choisis pour la circulation de l'air. Pour les chemins de câble non plus, puisqu'on voit que tout est en hauteur: alimentation électrique, et fibre. Circulation d'eau? Si oui, c'est vraiment étrange. s'embêter à mettre des faux planchers juste pour ça, ça ne me parait pas logique.

Leon.
« Modifié: 04 juin 2013 à 21:31:22 par leon_m »