Auteur Sujet: Le SSD de LaFibre.info  (Lu 23444 fois)

0 Membres et 1 Invité sur ce sujet

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 12 446
  • Lyon (69) / St-Bernard (01)
    • Twitter
Le SSD de LaFibre.info
« Réponse #48 le: 25 novembre 2016 à 00:19:15 »
Si, demandes à Mattmatt le débit d'un flux 1080p en RAW, de mémoire on s'approche du Go/s. Certains traitent ça en brut sur leurs workstations (avec des solutions type blackmagic)

corrector

  • Invité
Le SSD de LaFibre.info
« Réponse #49 le: 25 novembre 2016 à 00:27:48 »
Tu t'amuses comme tu veux, mais moi je ne vois pas l'intérêt par rapport à un RAID.

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 12 446
  • Lyon (69) / St-Bernard (01)
    • Twitter
Le SSD de LaFibre.info
« Réponse #50 le: 25 novembre 2016 à 00:45:35 »
De mémoire, c'est un RAID 0 interne dans tous les SSD modernes

mattmatt73

  • Expert.
  • Abonné Bbox fibre
  • *
  • Messages: 7 340
  • vancia (69)
Le SSD de LaFibre.info
« Réponse #51 le: 25 novembre 2016 à 01:32:45 »
Si, demandes à Mattmatt le débit d'un flux 1080p en RAW, de mémoire on s'approche du Go/s. Certains traitent ça en brut sur leurs workstations (avec des solutions type blackmagic)

1080*1920 progressif 50 images/s, environ 3Gb/s

on enregistre sur ça par exemple : http://pro.sony.com/bbsc/ssr/cat-srmemory/cat-memory/product-SR1TS55/

au alentour de 8000$ la cartouche, c'est des raids de SSD

BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Le SSD de LaFibre.info
« Réponse #52 le: 25 novembre 2016 à 09:07:21 »
Garantir presque 6Gb/s en écriture c'est pas mal du tout. Mais on est loin des 1,2Go/s de Hugues ;)

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 12 446
  • Lyon (69) / St-Bernard (01)
    • Twitter
Le SSD de LaFibre.info
« Réponse #53 le: 25 novembre 2016 à 09:14:15 »
Suffit de faire du 2160p en 10 bit par exemple, ensuite si tu veux pousser le vice, tu fais du 60fps, et tu les tapes.

Fuli10

  • Abonné Free fibre
  • *
  • Messages: 1 006
  • Conflans Sainte Honorine (78)
Le SSD de LaFibre.info
« Réponse #54 le: 25 novembre 2016 à 11:37:15 »
Euh faut que tu te mettes à jour : mettre un SSD en cache est la technique la plus utilisée en ce moment pour accélérer les temps de réponse.

ZFS est spécialement prévu pour ce use-case : ZIL. J'utilise un SSD en frontal de mes disques, les iops en écriture sont incomparables. On parle de milliers d'iops contre une centaine.

Proof (blocs de 4k sur fichier de 10m, écriture en mode SYNC)
# iozone -R -z -t 1 -r 4k -s10m -O -F test -o
...
Children see throughput for  1 initial writers  =    6237.24 ops/sec
...

La même sur un 15000rpm:
Children see throughput for  1 initial writers  =      53.12 ops/sec

Sur ce point, t'as raison. Avec un SSD assez gros devant normalement remplacer un disque dur, et le bon algorithme pour gérer l'écriture en tampon à travers, ça passe très bien.
D'ailleurs je crois que windows intègre ce genre de fonctionnalité, et là à priori tu me montres un linux. Ça m'intéresse de savoir comment ça marche et comment t'as fais sous linux :D

Par contre, dans mon message je pensais plus à ça: https://www.grosbill.com/4-seagate_desktop_sshd_1_to_8_go_ssd_-600147-informatique-_disque_dur
Avec seulement 8Go, difficile de faire du wear leveling correct (étalement de nombre d’écriture par secteur), surtout si la flash sert en tampon pour l'écriture. Donc à mon avis la flash ne sert pas en écriture ou très peu.


mattmatt73

  • Expert.
  • Abonné Bbox fibre
  • *
  • Messages: 7 340
  • vancia (69)
Le SSD de LaFibre.info
« Réponse #55 le: 25 novembre 2016 à 12:38:33 »
Suffit de faire du 2160p en 10 bit par exemple, ensuite si tu veux pousser le vice, tu fais du 60fps, et tu les tapes.

mais non monsieur, UHD en 10 bit HDR et 120 fps comme le conseillent BBC et EBU , c'est un peut moins de 24Gb/s

https://kws.smpte.org/kws/public/projects/project/details?project_id=180
http://www.c-dis.net/embrionix.html

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 12 446
  • Lyon (69) / St-Bernard (01)
    • Twitter
Le SSD de LaFibre.info
« Réponse #56 le: 25 novembre 2016 à 12:40:07 »
çà fait 3Go/s, j'ai gagné  ;D

BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Le SSD de LaFibre.info
« Réponse #57 le: 25 novembre 2016 à 14:51:46 »
Par contre, dans mon message je pensais plus à ça: https://www.grosbill.com/4-seagate_desktop_sshd_1_to_8_go_ssd_-600147-informatique-_disque_dur
Avec seulement 8Go, difficile de faire du wear leveling correct (étalement de nombre d’écriture par secteur), surtout si la flash sert en tampon pour l'écriture. Donc à mon avis la flash ne sert pas en écriture ou très peu.

Je ne sais pas comment est utilisé la flash sur ce type de disque par rapport à un SSD en ZIL. C'est pas tellement la capacité qui me gêne mais plus la manière de s'en servir. Le SSD que j'utilise en ZIL fait 64Go mais seulement 8Go sont utilisés. Ca suffit pour accélérer toutes les opérations disques des VM en NFS (lecture/écriture aléatoire) par contre, dès qu'on copie des gros fichiers, ça devient un bottleneck : le débit séquentiel des disques est supérieur au débit en écriture du SSD. Note: le ZIL apporte une sécurité sur les écritures en cas de crash puisque ça fait office de journal.

Comme j'ai 16Go de RAM sur le NAS, je n'ai pas mis de cache en lecture (L2ARC) sur le SSD, l'efficacité par rapport au volume de données accédé aurait été faible (le cache en RAM suffit). Donc là, même punition.

Thornhill

  • Abonné SFR fibre FttH
  • *
  • Messages: 3 976
  • Saint-Médard-en-Jalles (33)
Le SSD de LaFibre.info
« Réponse #58 le: 26 novembre 2016 à 17:47:18 »
Note: le ZIL apporte une sécurité sur les écritures en cas de crash puisque ça fait office de journal.

Le ZIL n'est utilisé que pour les applications nécessitant des écritures synchrones (O_DSYNC : écriture commitée = écriture garantie), il va servir de garantie d'intégrité pour les données (et pas seulement les meta-données comme sur un filesystem journalisé standard).
Cas d'usage typiques : NFS et SGBD.

Le cas d'usage de la vidéo est inapproprié à ZIL car les écritures sont bufferisés et sans la contrainte d'être synchrones : dans ce cas le ZIL ne sera pas utilisé et le cache RAM sera de toutes façons plus performant que le ZIL et suffisant en terme d'intégrité puisque le journal du filesystem assurera l'intégrité des métadonnées (peu importe le rollback d'une écriture sur ce type d'application).


vivien

  • Administrateur
  • *
  • Messages: 47 183
    • Twitter LaFibre.info
Le SSD de LaFibre.info
« Réponse #59 le: 28 novembre 2016 à 08:37:46 »
C'est mis en place avec le reboot de 6h53 :
$ dmesg | grep EXT4
[    3.260881] EXT4-fs (sda2): mounted filesystem with ordered data mode. Opts: (null)
[    3.945954] EXT4-fs (sda2): re-mounted. Opts: commit=300,errors=remount-ro
[    4.032655] EXT4-fs (sda4): mounted filesystem with ordered data mode. Opts: commit=300


L'option commit=300 secondes (valeur par défaut = 30 secondes) ne diminue que peu les écritures sur le SSD, toutefois son action ne semple pas nul

La mise en place de l'option est réalisée le 24 au matin, là où il y a un pic important en lecture, lié au fait que le cache de lecture en ram a été vidé :


Au total, si on regarde avant la mise de SmokePing dans un Ram disque persistant, j'ai presque divisé par deux les écritures sur le SSD :