Auteur Sujet: C14 : système d'archivage dans le cloud  (Lu 42049 fois)

0 Membres et 1 Invité sur ce sujet

Phach

  • Abonné Orange Fibre
  • *
  • Messages: 1 031
  • Hérault (34) - Occitanie
C14 : système d'archivage dans le cloud
« Réponse #48 le: 19 juillet 2016 à 20:40:53 »

* Arnaud nous présentait une baie avec une profondeur hors normes, c'est peut-être pour ça.
https://twitter.com/online_fr/status/702162197598887937

si c'est ça, c'est pas du jeu  ;D

willemijns

  • Abonné FreeMobile
  • *
  • Messages: 2 680
C14 : système d'archivage dans le cloud
« Réponse #49 le: 26 juillet 2016 à 22:47:06 »
C'est un projet passionnant, que nous développons depuis près d'un an, avec des choix qui vont vous surprendre :-)

J'adore les surprises.... genre comment expliquer seulement "99,99999999972%" de duration avec "Chaque coffre-fort est chiffré, répliqué et distribué sur un minimum de 10 à 44 périphériques indépendants. "




Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
C14 : système d'archivage dans le cloud
« Réponse #50 le: 27 juillet 2016 à 06:39:08 »
J'adore les surprises.... genre comment expliquer seulement "99,99999999972%" de duration avec "Chaque coffre-fort est chiffré, répliqué et distribué sur un minimum de 10 à 44 périphériques indépendants. "
Qu'est-ce qui te surprend là dedans? Sur le principe, c'est comme du RAID 6 à priori, même si c'est techniquement différent.
https://fr.wikipedia.org/wiki/RAID_(informatique)#RAID_6
Donc le coffre fort est réparti sur 10 à 44 supports différents, et tu as de la redondance d'information qui permet d'accepter la panne simultanée de 2 ou 3 supports de stockage sur les 10 (Online nous confirmera le chiffre).

Leon.

Phach

  • Abonné Orange Fibre
  • *
  • Messages: 1 031
  • Hérault (34) - Occitanie
C14 : système d'archivage dans le cloud
« Réponse #51 le: 27 juillet 2016 à 08:50:57 »
J'adore les surprises.... genre comment expliquer seulement "99,99999999972%" de duration avec "Chaque coffre-fort est chiffré, répliqué et distribué sur un minimum de 10 à 44 périphériques indépendants. "

Dans les CGV il est écrit :

Citer
ONLINE garantie à 100% la durabilité des données archivées dans son infrastructure « C14 », quelque soit la durabilité théorique du niveau de service sélectionné.

Citer
ONLINE s’engage à maintenir en parfait état de fonctionnement la plateforme C14 au minimum (cumulatif) :
- Au minimum 115 mois à compter du 1er Juin 2016,
- Au minimum 72 mois à compter de la date d’archivage des données de l’Usager

https://www.online.net/cgv-c14.pdf

willemijns

  • Abonné FreeMobile
  • *
  • Messages: 2 680
C14 : système d'archivage dans le cloud
« Réponse #52 le: 29 juillet 2016 à 16:34:54 »
Qu'est-ce qui te surprend là dedans? Sur le principe, c'est comme du RAID 6 à priori, même si c'est techniquement différent.
https://fr.wikipedia.org/wiki/RAID_(informatique)#RAID_6
Donc le coffre fort est réparti sur 10 à 44 supports différents, et tu as de la redondance d'information qui permet d'accepter la panne simultanée de 2 ou 3 supports de stockage sur les 10 (Online nous confirmera le chiffre).

Leon.

Parler de support ici n'a aucun sens, on parle sur des pourcentages...

et pourquoi 10 et pas toujours 44 ?

bon... bref... qu'ils le decoupent comme ils veulent en nombre de pieces placés sur X disques ou même Y voire 2 si ca les echante je veux pouvoir comparer...

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
C14 : système d'archivage dans le cloud
« Réponse #53 le: 29 juillet 2016 à 17:14:36 »
Parler de support ici n'a aucun sens, on parle sur des pourcentages...
Je n'ai pas compris ta remarque, pourquoi parler de support n'aurait aucun sens? Un support de stockage, c'est un disque dur, une bande magnétique ou un disque optique.
Et je n'ai toujours pas compris ce qui te surprend dans l'offre d'Online.

Ici, on est dans une offre de stockage de très gros fichiers (les archives). Le minimum à stocker, c'est 1Go par archive, tu ne peux pas faire moins.
Donc je suppose que le système de stockage est basé sur des blocs de donnée de grande taille (100Mo?). Ca expliquerai que les petites archives ne soient réparties que sur un nombre réduit de supports (disques durs, bande, disque optique, on ne sait pas), et que les grosses archives soient réparties sur un plus grand nombre de supports.

Leon.

willemijns

  • Abonné FreeMobile
  • *
  • Messages: 2 680
C14 : système d'archivage dans le cloud
« Réponse #54 le: 29 juillet 2016 à 18:18:05 »
pourquoi on couperait en 44 parties un pack de 40 To et en 10 un pack de 1Go ??? au nom de quoi cette discrimination ??? comment on peut garantir un "99,9999......97%" de durabilité fixe alors qu'on peut couper une archive en 10, 12, 15,19,24,28,34,37,40, ou 44 parties ??? pourquoi pas plus de 44 parties ???

la valeur de mon fichier de 1.1GB en a autant que les 39.9TB naméo !!!



Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
C14 : système d'archivage dans le cloud
« Réponse #55 le: 29 juillet 2016 à 18:24:46 »
comment on peut garantir un "99,9999......97%" de durabilité fixe alors qu'on peut couper une archive en 10, 12, 15,19,24,28,34,37,40, ou 44 parties ??? pourquoi pas plus de 44 parties ???
Personne n'a dit qu'une archive stockée sur 44 supports différents étaient plus fiable qu'une archive stockée sur 10... Le nombre de supports utilisés ne décrit absolument pas la redondance d'information, ni comment cette redondance est traitée, ni à quelle fréquence chaque support est vérifié, etc...

Bref, décris franchement ce que tu cherches à comprendre, parce que là, je ne vois pas où ça bloque.

Leon.

jack

  • Professionnel des télécoms
  • *
  • Messages: 1 674
  • La Madeleine (59)
C14 : système d'archivage dans le cloud
« Réponse #56 le: 29 juillet 2016 à 18:29:50 »
Une garantie, c'est le seuil minimal, pas maximal
De plus, ce n'est que des chiffres vaguement probabilistiques ..

BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
C14 : système d'archivage dans le cloud
« Réponse #57 le: 29 juillet 2016 à 19:31:32 »
On aurait donc des blocs de 100Mo avec une implèmentation d'Erasure Coding en 10+3, d'où le seuil mini de 1Go pour simplifier la configuration.

44 c'est le nombre de supports, probablement le nombre de noeuds du cluster, chaque noeud ayant son propre espace de stockage (sans forcèment du RAID afin d'éviter une dégradation des perfs en cas de reconstruction).




Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
C14 : système d'archivage dans le cloud
« Réponse #58 le: 29 juillet 2016 à 19:35:51 »
On aurait donc des blocs de 100Mo avec une implèmentation d'Erasure Coding en 10+3, d'où le seuil mini de 1Go pour simplifier la configuration.

44 c'est le nombre de supports, probablement le nombre de noeuds du cluster, chaque noeud ayant son propre espace de stockage (sans forcèment du RAID afin d'éviter une dégradation des perfs en cas de reconstruction).
Voilà, c'est ce genre de chose que j'imaginais. Après, ça n'est peut-être pas exactement ça, mais sur le principe, on doit s'approcher de la réalité.

Leon.

willemijns

  • Abonné FreeMobile
  • *
  • Messages: 2 680
C14 : système d'archivage dans le cloud
« Réponse #59 le: 29 juillet 2016 à 21:03:55 »
On aurait donc des blocs de 100Mo avec une implèmentation d'Erasure Coding en 10+3, d'où le seuil mini de 1Go pour simplifier la configuration.

10 blocs de data et 3 de recup ? si c'est ca je vois pas les 44....