La Fibre

Datacenter et équipements réseaux => Équipements réseaux => Serveurs NAS, serveurs et micro-serveurs => Discussion démarrée par: PacOrly le 25 août 2016 à 19:05:14

Titre: rsync entre 2 NAS
Posté par: PacOrly le 25 août 2016 à 19:05:14
J’ai ajouté une couche LVM entre la couche RAID6 et la couche du système de fichier sur nas03 et nas04 (https://lafibre.info/switch/vos-installations-reseau/msg317308/#msg317308) pour pouvoir faire du SHR façon Synology (https://www.synology.com/fr-fr/knowledgebase/DSM/tutorial/Storage/What_is_Synology_Hybrid_RAID_SHR) et ainsi pouvoir, lors de changement de disque HS, installer des disques de plus grande capacité.

Il a donc fallu casser le système de fichier sur chaque machine.

nas04 étant la sauvegarde de nas03, après chaque modification sur une machine, j’ai fait un rsync pour récupérer les données.

Chaque rsync a duré 3 jours et demi.

Comme c’était les plus gros rsync que je n’ai jamais fait, je n’ai pas pu m’empêcher de faire une sauvegarde de la sortie standard dont voici les deux dernières lignes.

sent 12,160,912,947,455 bytes  received 41,817 bytes  44,243,140.70 bytes/sec
total size is 12,157,944,559,384  speedup is 1.00
Titre: rsync entre 2 NAS
Posté par: BadMax le 26 août 2016 à 09:44:17
Pas plus simple d'utiliser ZFS avec FreeBSD ?

Le send/receive sera en tout cas plus rapide grace à l'utilisation de mbuffer : 44Mo/s c'est la vitesse d'import sur mon backup à base de Sempron64 2600+.
Titre: rsync entre 2 NAS
Posté par: PacOrly le 26 août 2016 à 17:46:22
Moi, c'est un Intel(R) Celeron(R) CPU E1400 @ 2.00GHz, 2 cores (acheté en 2008 ou 2009 de mémoire).
Le CPU doit être le point limitant car lors du rsync j'avais un CPU load averages entre 1,5 et 2.

Sinon pour ZFS, j'avais regardé, il y a quelques années, mais ce qui m'avait arrêté c'est qu'il faut de la RAM et ma carte mère est limitée à 2 Go, mais surtout comme la RAM est saturée par les caches, il faut de la RAM ECC sinon il y a de gros risques de corruption de données et ma carte mère ne supporte pas ce type de RAM.
Titre: rsync entre 2 NAS
Posté par: BadMax le 26 août 2016 à 20:51:44
Moi, c'est un Intel(R) Celeron(R) CPU E1400 @ 2.00GHz, 2 cores (acheté en 2008 ou 2009 de mémoire).
Le CPU doit être le point limitant car lors du rsync j'avais un CPU load averages entre 1,5 et 2.

Sinon pour ZFS, j'avais regardé, il y a quelques années, mais ce qui m'avait arrêté c'est qu'il faut de la RAM et ma carte mère est limitée à 2 Go, mais surtout comme la RAM est saturée par les caches, il faut de la RAM ECC sinon il y a de gros risques de corruption de données et ma carte mère ne supporte pas ce type de RAM.

La RAM il faut compter 1Go par To de volume (1 volume pouvant être composé de plusieurs disques). L'ECC est loin d'être obligatoire, j'ai tourné plusieurs années sans et il ne m'est jamais rien arrivé. Le risque de corruption est le même qu'avec n'importe quel autre système de fichiers. Avec ECC, tu bénéficies du contrôle des données effectué par ZFS.

Autre pré-requis : CPU 64 bits. C'est pour cela que je garde mon Sempron64 (1x Core à 1.6Ghz !).
Titre: rsync entre 2 NAS
Posté par: vivien le 26 août 2016 à 21:13:38
Le load average n'indique pas une charge CPU mais une charge (cela peut être un charge CPU ou d'E/S comme un disque)

Dans le cas d'une sauvegarde, c'est le disque qui est utilisé à 100% et qui fait qu'il y a toujours un process qui tourne, donc load average de 1.

Il faudrait faire un "top" pendant un transfert pour voir ce que fais le CPU.
Titre: rsync entre 2 NAS
Posté par: PacOrly le 26 août 2016 à 23:14:49
La RAM il faut compter 1Go par To de volume (1 volume pouvant être composé de plusieurs disques).

Merci pour ces précisions.

nas03, volume de 18To, RAM 2Go, pas dans l'épure.
nas04, volume de 28To, RAM 2Go, pas dans l'épure.

Sinon, effectivement, cela m'aurait bien tenté de migrer vers ce système de fichier.
Titre: rsync entre 2 NAS
Posté par: PacOrly le 26 août 2016 à 23:29:14
Dans le cas d'une sauvegarde, c'est le disque qui est utilisé à 100% et qui fait qu'il y a toujours un process qui tourne, donc load average de 1.

Avec un transfert de 44 Mo/s entre les deux machines, peut on penser avoir une saturation d'une grappe de 20 disques en RAID6 soft (mdadm)?

Je pensai que c'était plutôt le processeur gérant ces 20 disques qui devait saturer.
Titre: rsync entre 2 NAS
Posté par: vivien le 27 août 2016 à 00:06:55
Si tu pouvais à l’occasion vérifier, je suis curieux...

Effectivement, ce ne sera as les disques, mais cela pourrait être les E/S ?

"Top" distingue bien les choses et si le CPU est en attente d'E/S, mettre un plus puissant ne change rien.
Titre: rsync entre 2 NAS
Posté par: PacOrly le 27 août 2016 à 00:25:46
Les E/S sont faites par un Chipset Intel® G31.

16 disques par le port PCI Express 16x et 4 disques par les ports SATA de la carte mère.

Je regarderai aussi avec "top" à l'occasion.
Titre: rsync entre 2 NAS
Posté par: PacOrly le 27 août 2016 à 12:09:51
rsync nas03 vers nas04 depuis 11H10.
Transfert à 380 Mb/s.

nas03
top - 12:00:21 up 5 days, 23:48,  2 users,  load average: 1,16, 1,17, 1,12
Tasks: 112 total,   2 running, 110 sleeping,   0 stopped,   0 zombie
%Cpu(s): 33,3 us, 11,5 sy,  0,0 ni, 41,7 id,  6,7 wa,  0,0 hi,  6,9 si,  0,0 st
KiB Mem:   2048744 total,  1981448 used,    67296 free,   146424 buffers
KiB Swap:  9595900 total,      244 used,  9595656 free.  1485316 cached Mem

  PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND         
26530 root      20   0   50080   8900   4616 R  64,2  0,4  33:58.57 ssh             
26529 root      20   0   67912   4880   2644 S  31,2  0,2  16:53.86 rsync           
   29 root      20   0       0      0      0 S   1,0  0,0   0:51.50 kswapd0         

nas04
top - 12:00:53 up 5 days, 23:29,  1 user,  load average: 1,96, 2,05, 1,97
Tasks: 117 total,   4 running, 113 sleeping,   0 stopped,   0 zombie
%Cpu(s): 39,2 us, 23,1 sy,  0,0 ni, 22,1 id,  0,2 wa,  0,0 hi, 15,4 si,  0,0 st
KiB Mem:   2048744 total,  1969672 used,    79072 free,   153276 buffers
KiB Swap:  1633276 total,       44 used,  1633232 free.  1498544 cached Mem

  PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND         
11138 root      20   0   99336  10376   5536 R  99,1  0,5  50:42.71 sshd           
11144 root      20   0   67856   2716   1288 R  43,5  0,1  22:11.88 rsync           
  129 root      20   0       0      0      0 S   7,0  0,0   5:49.23 md0_raid6       

nas04
top - 12:15:28 up 5 days, 23:44,  1 user,  load average: 2,25, 2,13, 2,03
Tasks: 116 total,   3 running, 113 sleeping,   0 stopped,   0 zombie
%Cpu(s): 41,5 us, 15,4 sy,  0,0 ni, 26,6 id,  0,0 wa,  0,0 hi, 16,4 si,  0,0 st
KiB Mem:   2048744 total,  1967860 used,    80884 free,   154076 buffers
KiB Swap:  1633276 total,       44 used,  1633232 free.  1482916 cached Mem

  PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND         
11138 root      20   0   99380  10624   5536 R  99,6  0,5  64:51.14 sshd           
11144 root      20   0   67856   2716   1288 R  43,5  0,1  28:24.27 rsync           
   29 root      20   0       0      0      0 S   1,6  0,0   1:07.48 kswapd0         
Titre: rsync entre 2 NAS
Posté par: BadMax le 27 août 2016 à 13:24:52
Voilà. C'est ssh qui sature l'un des deux coeurs. J'ai le même problème sur mon Sempron64 de backup, c'est pour cela que j'utilise mbuffer pour les send/receive de ZFS.

Pour améliorer la vitesse de rsync, l'autre solution est de faire un montage NFS depuis la machine de backup et de faire un rsync depuis les volumes montés vers le volume local. C'est bien plus rapide sur de vieux CPU.
Titre: rsync entre 2 NAS
Posté par: vivien le 27 août 2016 à 13:25:47
Détail des données de top : Les états du CPU sont affichés dans la zone de résumé. Ils sont toujours présentés sous forme de pourcentage du temps écoulé depuis le dernier rafraîchissement.

us -- Temps CPU utilisateur : Temps consacré par le CPU aux processus utilisateurs dont la politesse n'a pas été modifiée.

sy -- Temps CPU système : Temps consacré par le CPU au noyau et à ses processus.

ni -- Temps de politesse (« nice ») du CPU : Temps consacré par le CPU aux processus utilisateurs dont la politesse a changé.

id -- Temps CPU non sollicité (idle)

wa -- En attente d'entrées ou sorties (« iowait ») : Temps consacré par le CPU à attendre la fin des entrées ou sorties.

hi -- IRQ matériel : Temps consacré par le CPU aux sollicitations des interruptions matérielles.

si -- Interruptions logicielles : Temps consacré par le CPU aux sollicitations des interruptions logicielles.

st -- Temps volé : La quantité de temps CPU « volé » à la machine virtuelle par l'hyperviseur pour d'autres tâches (telles que la gestion d'une autre machine virtuelle).
Titre: rsync entre 2 NAS
Posté par: vivien le 27 août 2016 à 13:34:23
Si je comprends bien, tu fais passer le trafic rsync dans un tunnel SSH ?

Pourquoi ne pas passer en direct si c'est chez toi ?
Titre: rsync entre 2 NAS
Posté par: PacOrly le 27 août 2016 à 13:55:52
Merci à vous deux pour votre expertise.
Je vais creuser çà.
Titre: rsync entre 2 NAS
Posté par: BadMax le 27 août 2016 à 15:52:13
Si je comprends bien, tu fais passer le trafic rsync dans un tunnel SSH ?

Pourquoi ne pas passer e direct si c'est chez toi ?

Pour s'éviter un daemon rsyncd.
Titre: rsync entre 2 NAS
Posté par: Paul le 27 août 2016 à 15:53:06
Quel est le bénéfice ? Moins d'utilisation CPU/RAM ?
Titre: rsync entre 2 NAS
Posté par: BadMax le 28 août 2016 à 09:11:36
Avec rsyncd moins de CPU utilisé car il n'y a pas l'overhead du chiffrement de SSH. Côté client, on économise la construction de la filelist.

rsync + ssh est très pratique pour faire des backups (faible volumétrie modifié)
rsyncd est plus adapté pour faire des mirrors (par exemple) ou de plus grosses volumétries.
Titre: rsync entre 2 NAS
Posté par: PacOrly le 28 août 2016 à 19:58:08
Le même transfert avec un montage nfs.
Je passe à plus de 60 Mo/s.

sent 847,549,299,484 bytes  received 2,863 bytes  63,867,171.72 bytes/sec
total size is 847,342,416,795  speedup is 1.00

nas03
top - 19:46:06 up 7 days,  7:34,  2 users,  load average: 1,57, 1,62, 1,67
Tasks: 117 total,   4 running, 113 sleeping,   0 stopped,   0 zombie
%Cpu(s): 20,4 us, 18,0 sy,  0,0 ni, 31,5 id, 20,2 wa,  0,0 hi,  9,9 si,  0,0 st
KiB Mem:   2048744 total,  1964868 used,    83876 free,   155332 buffers
KiB Swap:  9595900 total,      244 used,  9595656 free.  1459932 cached Mem

  PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND       
24849 root      20   0   23656   1772   1160 R  43,5  0,1  42:14.00 rsync         
24847 root      20   0   23704   3220   2592 R  34,2  0,2  34:56.08 rsync         
26816 root      20   0       0      0      0 R   8,6  0,0   1:23.78 kworker/0:4   
27457 root      20   0       0      0      0 S   2,7  0,0   0:04.69 kworker/u8:2   

nas04
top - 19:47:49 up 7 days,  7:16,  2 users,  load average: 2,94, 2,91, 2,82
Tasks: 128 total,   1 running, 127 sleeping,   0 stopped,   0 zombie
%Cpu(s):  0,2 us, 46,7 sy,  0,0 ni, 31,3 id,  1,0 wa,  0,0 hi, 20,8 si,  0,0 st
KiB Mem:   2048744 total,  1969636 used,    79108 free,     5436 buffers
KiB Swap:  1633276 total,    27176 used,  1606100 free.  1641148 cached Mem

  PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND       
  129 root      20   0       0      0      0 S  35,5  0,0  92:29.12 md0_raid6     
31559 root      20   0       0      0      0 S  18,9  0,0  40:14.84 nfsd           
31560 root      20   0       0      0      0 S  16,9  0,0  40:27.58 nfsd           
31557 root      20   0       0      0      0 S  13,0  0,0  40:31.59 nfsd           
31562 root      20   0       0      0      0 S  12,6  0,0  40:39.42 nfsd           
31561 root      20   0       0      0      0 S   8,3  0,0  40:10.36 nfsd           
31564 root      20   0       0      0      0 S   7,3  0,0  40:28.63 nfsd           
31563 root      20   0       0      0      0 S   5,3  0,0  39:51.18 nfsd           
19434 root      20   0       0      0      0 S   4,6  0,0   1:30.06 kworker/u8:0   

nas04
top - 19:54:21 up 7 days,  7:22,  2 users,  load average: 0,98, 2,10, 2,54
Tasks: 128 total,   7 running, 121 sleeping,   0 stopped,   0 zombie
%Cpu(s):  0,0 us, 38,5 sy,  0,0 ni, 38,8 id,  0,0 wa,  0,0 hi, 22,7 si,  0,0 st
KiB Mem:   2048744 total,  1974752 used,    73992 free,     5128 buffers
KiB Swap:  1633276 total,    27360 used,  1605916 free.  1646596 cached Mem

  PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND       
31559 root      20   0       0      0      0 S  19,6  0,0  40:54.38 nfsd           
31562 root      20   0       0      0      0 S  17,3  0,0  41:14.14 nfsd           
31558 root      20   0       0      0      0 D  15,0  0,0  40:40.16 nfsd           
31561 root      20   0       0      0      0 S  14,3  0,0  40:48.77 nfsd           
  129 root      20   0       0      0      0 R  12,3  0,0  93:43.93 md0_raid6     
31564 root      20   0       0      0      0 S  11,3  0,0  41:05.32 nfsd           
31560 root      20   0       0      0      0 R   8,0  0,0  41:00.94 nfsd           
31563 root      20   0       0      0      0 S   7,0  0,0  40:29.54 nfsd           
   29 root      20   0       0      0      0 S   5,6  0,0  14:06.72 kswapd0       
Titre: rsync entre 2 NAS
Posté par: PacOrly le 29 août 2016 à 14:22:59
rsync + ssh, transfert plafonne à 40 Mo/s, CPU limitant, upgrade possible.
rsync + nfs, transfert plafonne à 60 Mo/s, CPU en attente des E/S, chipset de la carte mère limitant, upgrade impossible (sauf changer la carte mère).

Ce qui voudrait dire que même en upgradant le CPU, un rsync + ssh plafonnerait aussi à 60 Mo/s (E/S saturées).

Cette analyse est elle correcte?
Titre: rsync entre 2 NAS
Posté par: BadMax le 29 août 2016 à 15:07:59
A vérifier avec iostat ("iostat 1") pendant une dizaine de secondes pour voir l'activité des disques.
Titre: rsync entre 2 NAS
Posté par: PacOrly le 29 août 2016 à 22:59:50
Résultat de iostat.

nas03
root@nas03:~# iostat -m 1 20
Linux 3.16.0-4-amd64 (nas03) 29/08/2016 _x86_64_ (2 CPU)

avg-cpu: %user %nice %system %iowait %steal %idle
2,16 0,00 1,58 0,71 0,00 95,55

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 0,82 0,14 0,00 100060 2049
sdd 0,78 0,14 0,00 99969 2046
sda 0,78 0,14 0,00 99967 2044
sdb 0,79 0,14 0,00 99976 2047
sde 0,78 0,14 0,00 99968 2044
sdg 0,78 0,14 0,00 99969 2045
sdf 0,78 0,14 0,00 99969 2043
sdh 0,78 0,14 0,00 99966 2046
sdi 0,78 0,14 0,00 99965 2047
sdj 0,82 0,14 0,00 100067 2048
sdl 0,78 0,14 0,00 99965 2045
sdn 0,78 0,14 0,00 99966 2047
sdk 0,78 0,14 0,00 99966 2047
sdm 0,78 0,14 0,00 99967 2046
sdo 0,78 0,14 0,00 99964 2051
sdq 0,68 0,00 0,02 1043 12838
sdp 0,78 0,14 0,00 99968 2050
sds 0,79 0,14 0,00 100116 2048
sdt 0,78 0,14 0,00 99965 2046
sdr 0,82 0,14 0,00 100209 2048
sdu 0,78 0,14 0,00 99965 2046
md0 47,49 2,81 0,05 1998847 36599
dm-0 47,49 2,81 0,05 1998846 36599

avg-cpu: %user %nice %system %iowait %steal %idle
33,50 0,00 37,56 5,08 0,00 23,86

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 15,00 2,81 0,00 2 0
sdd 15,00 2,81 0,00 2 0
sda 15,00 2,81 0,00 2 0
sdb 15,00 2,81 0,00 2 0
sde 14,00 2,81 0,00 2 0
sdg 15,00 2,75 0,00 2 0
sdf 15,00 2,81 0,00 2 0
sdh 16,00 2,75 0,00 2 0
sdi 16,00 2,75 0,00 2 0
sdj 15,00 2,75 0,00 2 0
sdl 15,00 2,81 0,00 2 0
sdn 15,00 2,81 0,00 2 0
sdk 15,00 2,81 0,00 2 0
sdm 15,00 2,81 0,00 2 0
sdo 16,00 2,81 0,00 2 0
sdq 0,00 0,00 0,00 0 0
sdp 16,00 2,81 0,00 2 0
sds 14,00 2,81 0,00 2 0
sdt 15,00 2,81 0,00 2 0
sdr 15,00 2,81 0,00 2 0
sdu 15,00 2,81 0,00 2 0
md0 896,00 56,00 0,00 56 0
dm-0 896,00 56,00 0,00 56 0

avg-cpu: %user %nice %system %iowait %steal %idle
34,01 0,00 38,58 4,06 0,00 23,35

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 16,00 3,00 0,00 3 0
sdd 17,00 3,00 0,00 3 0
sda 16,00 3,00 0,00 3 0
sdb 16,00 3,00 0,00 3 0
sde 17,00 3,00 0,00 3 0
sdg 16,00 3,06 0,00 3 0
sdf 16,00 3,00 0,00 3 0
sdh 15,00 3,06 0,00 3 0
sdi 16,00 3,06 0,00 3 0
sdj 16,00 3,00 0,00 3 0
sdl 16,00 3,00 0,00 3 0
sdn 16,00 2,94 0,00 2 0
sdk 16,00 3,00 0,00 3 0
sdm 16,00 3,00 0,00 3 0
sdo 16,00 2,94 0,00 2 0
sdq 0,00 0,00 0,00 0 0
sdp 16,00 2,94 0,00 2 0
sds 17,00 3,00 0,00 3 0
sdt 16,00 3,00 0,00 3 0
sdr 17,00 3,00 0,00 3 0
sdu 16,00 3,00 0,00 3 0
md0 960,00 60,00 0,00 60 0
dm-0 960,00 60,00 0,00 60 0

avg-cpu: %user %nice %system %iowait %steal %idle
25,13 0,00 30,48 13,37 0,00 31,02

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 12,00 2,19 0,00 2 0
sdd 12,00 2,19 0,00 2 0
sda 12,00 2,19 0,00 2 0
sdb 11,00 2,19 0,00 2 0
sde 12,00 2,19 0,00 2 0
sdg 12,00 2,19 0,00 2 0
sdf 12,00 2,19 0,00 2 0
sdh 12,00 2,19 0,00 2 0
sdi 11,00 2,19 0,00 2 0
sdj 12,00 2,25 0,00 2 0
sdl 12,00 2,25 0,00 2 0
sdn 12,00 2,25 0,00 2 0
sdk 12,00 2,25 0,00 2 0
sdm 12,00 2,19 0,00 2 0
sdo 11,00 2,19 0,00 2 0
sdq 0,00 0,00 0,00 0 0
sdp 12,00 2,19 0,00 2 0
sds 11,00 2,19 0,00 2 0
sdt 12,00 2,19 0,00 2 0
sdr 12,00 2,19 0,00 2 0
sdu 13,00 2,19 0,00 2 0
md0 704,00 44,00 0,00 44 0
dm-0 704,00 44,00 0,00 44 0

avg-cpu: %user %nice %system %iowait %steal %idle
22,45 0,00 27,04 19,39 0,00 31,12

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 11,00 2,19 0,00 2 0
sdd 12,00 2,19 0,00 2 0
sda 13,00 2,19 0,00 2 0
sdb 12,00 2,19 0,00 2 0
sde 12,00 2,19 0,00 2 0
sdg 12,00 2,19 0,00 2 0
sdf 11,00 2,19 0,00 2 0
sdh 13,00 2,19 0,00 2 0
sdi 12,00 2,19 0,00 2 0
sdj 11,00 2,19 0,00 2 0
sdl 12,00 2,19 0,00 2 0
sdn 12,00 2,25 0,00 2 0
sdk 12,00 2,19 0,00 2 0
sdm 12,00 2,25 0,00 2 0
sdo 12,00 2,25 0,00 2 0
sdq 14,00 0,00 0,06 0 0
sdp 12,00 2,25 0,00 2 0
sds 12,00 2,19 0,00 2 0
sdt 11,00 2,19 0,00 2 0
sdr 12,00 2,19 0,00 2 0
sdu 12,00 2,19 0,00 2 0
md0 704,00 44,00 0,00 44 0
dm-0 704,00 44,00 0,00 44 0

avg-cpu: %user %nice %system %iowait %steal %idle
45,83 0,00 27,08 9,38 0,00 17,71

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 26,00 4,81 0,00 4 0
sdd 26,00 4,81 0,00 4 0
sda 25,00 4,81 0,00 4 0
sdb 26,00 4,81 0,00 4 0
sde 26,00 4,81 0,00 4 0
sdg 25,00 4,81 0,00 4 0
sdf 26,00 4,81 0,00 4 0
sdh 25,00 4,81 0,00 4 0
sdi 27,00 4,81 0,00 4 0
sdj 26,00 4,75 0,00 4 0
sdl 27,00 4,75 0,00 4 0
sdn 25,00 4,75 0,00 4 0
sdk 26,00 4,75 0,00 4 0
sdm 26,00 4,75 0,00 4 0
sdo 26,00 4,81 0,00 4 0
sdq 2,00 0,00 0,03 0 0
sdp 26,00 4,81 0,00 4 0
sds 26,00 4,81 0,00 4 0
sdt 26,00 4,81 0,00 4 0
sdr 26,00 4,88 0,00 4 0
sdu 25,00 4,81 0,00 4 0
md0 1536,00 96,00 0,00 96 0
dm-0 1536,00 96,00 0,00 96 0

avg-cpu: %user %nice %system %iowait %steal %idle
34,85 0,00 35,35 6,57 0,00 23,23

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 17,00 3,19 0,00 3 0
sdd 17,00 3,19 0,00 3 0
sda 18,00 3,19 0,00 3 0
sdb 17,00 3,19 0,00 3 0
sde 18,00 3,19 0,00 3 0
sdg 17,00 3,19 0,00 3 0
sdf 17,00 3,19 0,00 3 0
sdh 18,00 3,19 0,00 3 0
sdi 17,00 3,19 0,00 3 0
sdj 17,00 3,25 0,00 3 0
sdl 17,00 3,25 0,00 3 0
sdn 18,00 3,19 0,00 3 0
sdk 16,00 3,25 0,00 3 0
sdm 18,00 3,19 0,00 3 0
sdo 17,00 3,19 0,00 3 0
sdq 0,00 0,00 0,00 0 0
sdp 17,00 3,19 0,00 3 0
sds 17,00 3,25 0,00 3 0
sdt 17,00 3,19 0,00 3 0
sdr 17,00 3,19 0,00 3 0
sdu 18,00 3,19 0,00 3 0
md0 1024,00 64,00 0,00 64 0
dm-0 1024,00 64,00 0,00 64 0

avg-cpu: %user %nice %system %iowait %steal %idle
36,22 0,00 36,22 4,59 0,00 22,96

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 16,00 3,00 0,00 3 0
sdd 17,00 3,00 0,00 3 0
sda 17,00 3,00 0,00 3 0
sdb 16,00 3,00 0,00 3 0
sde 16,00 3,00 0,00 3 0
sdg 16,00 3,00 0,00 3 0
sdf 16,00 3,00 0,00 3 0
sdh 17,00 3,00 0,00 3 0
sdi 17,00 3,00 0,00 3 0
sdj 16,00 3,00 0,00 3 0
sdl 16,00 2,94 0,00 2 0
sdn 15,00 3,00 0,00 3 0
sdk 16,00 3,00 0,00 3 0
sdm 16,00 3,00 0,00 3 0
sdo 16,00 3,00 0,00 3 0
sdq 0,00 0,00 0,00 0 0
sdp 17,00 3,00 0,00 3 0
sds 15,00 3,00 0,00 3 0
sdt 16,00 3,06 0,00 3 0
sdr 16,00 3,00 0,00 3 0
sdu 16,00 3,00 0,00 3 0
md0 960,00 60,00 0,00 60 0
dm-0 960,00 60,00 0,00 60 0

avg-cpu: %user %nice %system %iowait %steal %idle
27,04 0,00 25,00 17,86 0,00 30,10

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 12,00 2,19 0,00 2 0
sdd 12,00 2,19 0,00 2 0
sda 11,00 2,19 0,00 2 0
sdb 12,00 2,19 0,00 2 0
sde 12,00 2,19 0,00 2 0
sdg 12,00 2,19 0,00 2 0
sdf 12,00 2,19 0,00 2 0
sdh 11,00 2,19 0,00 2 0
sdi 12,00 2,19 0,00 2 0
sdj 12,00 2,19 0,00 2 0
sdl 12,00 2,25 0,00 2 0
sdn 12,00 2,25 0,00 2 0
sdk 12,00 2,19 0,00 2 0
sdm 12,00 2,25 0,00 2 0
sdo 11,00 2,19 0,00 2 0
sdq 0,00 0,00 0,00 0 0
sdp 12,00 2,19 0,00 2 0
sds 12,00 2,19 0,00 2 0
sdt 11,00 2,19 0,00 2 0
sdr 13,00 2,19 0,00 2 0
sdu 12,00 2,25 0,00 2 0
md0 704,00 44,00 0,00 44 0
dm-0 704,00 44,00 0,00 44 0

avg-cpu: %user %nice %system %iowait %steal %idle
27,27 0,00 19,19 23,74 0,00 29,80

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 15,00 2,81 0,00 2 0
sdd 15,00 2,81 0,00 2 0
sda 15,00 2,81 0,00 2 0
sdb 14,00 2,81 0,00 2 0
sde 15,00 2,81 0,00 2 0
sdg 15,00 2,81 0,00 2 0
sdf 15,00 2,81 0,00 2 0
sdh 15,00 2,81 0,00 2 0
sdi 14,00 2,81 0,00 2 0
sdj 15,00 2,81 0,00 2 0
sdl 16,00 2,75 0,00 2 0
sdn 15,00 2,75 0,00 2 0
sdk 15,00 2,75 0,00 2 0
sdm 16,00 2,75 0,00 2 0
sdo 15,00 2,81 0,00 2 0
sdq 0,00 0,00 0,00 0 0
sdp 15,00 2,81 0,00 2 0
sds 15,00 2,81 0,00 2 0
sdt 16,00 2,81 0,00 2 0
sdr 15,00 2,81 0,00 2 0
sdu 16,00 2,81 0,00 2 0
md0 896,00 56,00 0,00 56 0
dm-0 896,00 56,00 0,00 56 0

avg-cpu: %user %nice %system %iowait %steal %idle
46,60 0,00 26,70 8,38 0,00 18,32

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 25,00 4,81 0,00 4 0
sdd 26,00 4,81 0,00 4 0
sda 27,00 4,88 0,00 4 0
sdb 26,00 4,81 0,00 4 0
sde 26,00 4,81 0,00 4 0
sdg 26,00 4,75 0,00 4 0
sdf 25,00 4,75 0,00 4 0
sdh 27,00 4,75 0,00 4 0
sdi 27,00 4,75 0,00 4 0
sdj 26,00 4,75 0,00 4 0
sdl 25,00 4,81 0,00 4 0
sdn 26,00 4,81 0,00 4 0
sdk 26,00 4,81 0,00 4 0
sdm 25,00 4,81 0,00 4 0
sdo 26,00 4,81 0,00 4 0
sdq 0,00 0,00 0,00 0 0
sdp 26,00 4,81 0,00 4 0
sds 26,00 4,81 0,00 4 0
sdt 25,00 4,81 0,00 4 0
sdr 26,00 4,81 0,00 4 0
sdu 25,00 4,81 0,00 4 0
md0 1536,00 96,00 0,00 96 0
dm-0 1536,00 96,00 0,00 96 0

avg-cpu: %user %nice %system %iowait %steal %idle
33,66 0,00 36,63 4,95 0,00 24,75

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 15,00 2,81 0,00 2 0
sdd 16,00 2,81 0,00 2 0
sda 15,00 2,75 0,00 2 0
sdb 15,00 2,81 0,00 2 0
sde 16,00 2,81 0,00 2 0
sdg 14,00 2,88 0,00 2 0
sdf 15,00 2,88 0,00 2 0
sdh 15,00 2,81 0,00 2 0
sdi 15,00 2,81 0,00 2 0
sdj 14,00 2,81 0,00 2 0
sdl 16,00 2,81 0,00 2 0
sdn 14,00 2,81 0,00 2 0
sdk 15,00 2,81 0,00 2 0
sdm 15,00 2,81 0,00 2 0
sdo 15,00 2,81 0,00 2 0
sdq 0,00 0,00 0,00 0 0
sdp 15,00 2,75 0,00 2 0
sds 15,00 2,75 0,00 2 0
sdt 15,00 2,75 0,00 2 0
sdr 16,00 2,75 0,00 2 0
sdu 16,00 2,75 0,00 2 0
md0 896,00 56,00 0,00 56 0
dm-0 896,00 56,00 0,00 56 0

avg-cpu: %user %nice %system %iowait %steal %idle
28,80 0,00 41,88 5,24 0,00 24,08

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 16,00 2,94 0,00 2 0
sdd 16,00 2,94 0,00 2 0
sda 16,00 3,00 0,00 3 0
sdb 16,00 3,00 0,00 3 0
sde 16,00 2,94 0,00 2 0
sdg 17,00 2,94 0,00 2 0
sdf 16,00 2,94 0,00 2 0
sdh 17,00 3,00 0,00 3 0
sdi 16,00 3,00 0,00 3 0
sdj 16,00 3,00 0,00 3 0
sdl 16,00 3,00 0,00 3 0
sdn 17,00 3,00 0,00 3 0
sdk 16,00 3,00 0,00 3 0
sdm 17,00 3,00 0,00 3 0
sdo 16,00 3,00 0,00 3 0
sdq 0,00 0,00 0,00 0 0
sdp 16,00 3,06 0,00 3 0
sds 16,00 3,06 0,00 3 0
sdt 16,00 3,06 0,00 3 0
sdr 15,00 3,06 0,00 3 0
sdu 16,00 3,06 0,00 3 0
md0 960,00 60,00 0,00 60 0
dm-0 960,00 60,00 0,00 60 0

avg-cpu: %user %nice %system %iowait %steal %idle
26,40 0,00 24,87 18,78 0,00 29,95

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 11,00 2,06 0,00 2 0
sdd 10,00 2,06 0,00 2 0
sda 11,00 2,00 0,00 2 0
sdb 11,00 2,00 0,00 2 0
sde 10,00 2,06 0,00 2 0
sdg 10,00 2,00 0,00 2 0
sdf 11,00 2,06 0,00 2 0
sdh 11,00 2,00 0,00 2 0
sdi 12,00 2,00 0,00 2 0
sdj 11,00 2,00 0,00 2 0
sdl 11,00 2,00 0,00 2 0
sdn 10,00 2,00 0,00 2 0
sdk 10,00 2,00 0,00 2 0
sdm 11,00 2,00 0,00 2 0
sdo 11,00 2,00 0,00 2 0
sdq 2,00 0,00 0,02 0 0
sdp 12,00 2,00 0,00 2 0
sds 10,00 1,94 0,00 1 0
sdt 11,00 1,94 0,00 1 0
sdr 11,00 1,94 0,00 1 0
sdu 11,00 1,94 0,00 1 0
md0 640,00 40,00 0,00 40 0
dm-0 640,00 40,00 0,00 40 0

avg-cpu: %user %nice %system %iowait %steal %idle
16,58 0,00 27,46 24,87 0,00 31,09

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 11,00 2,00 0,00 2 0
sdd 12,00 2,00 0,00 2 0
sda 11,00 2,00 0,00 2 0
sdb 10,00 2,00 0,00 2 0
sde 11,00 2,00 0,00 2 0
sdg 11,00 2,06 0,00 2 0
sdf 10,00 2,00 0,00 2 0
sdh 10,00 2,06 0,00 2 0
sdi 10,00 2,06 0,00 2 0
sdj 11,00 2,06 0,00 2 0
sdl 11,00 2,00 0,00 2 0
sdn 11,00 1,94 0,00 1 0
sdk 11,00 2,00 0,00 2 0
sdm 11,00 1,94 0,00 1 0
sdo 10,00 1,94 0,00 1 0
sdq 0,00 0,00 0,00 0 0
sdp 11,00 1,94 0,00 1 0
sds 11,00 2,00 0,00 2 0
sdt 10,00 2,00 0,00 2 0
sdr 12,00 2,00 0,00 2 0
sdu 11,00 2,00 0,00 2 0
md0 704,00 44,00 0,00 44 0
dm-0 704,00 44,00 0,00 44 0

avg-cpu: %user %nice %system %iowait %steal %idle
44,50 0,00 28,50 9,00 0,00 18,00

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 25,00 4,81 0,00 4 0
sdd 25,00 4,81 0,00 4 0
sda 26,00 4,81 0,00 4 0
sdb 26,00 4,81 0,00 4 0
sde 27,00 4,81 0,00 4 0
sdg 26,00 4,75 0,00 4 0
sdf 26,00 4,75 0,00 4 0
sdh 27,00 4,75 0,00 4 0
sdi 26,00 4,75 0,00 4 0
sdj 25,00 4,75 0,00 4 0
sdl 26,00 4,81 0,00 4 0
sdn 26,00 4,81 0,00 4 0
sdk 26,00 4,81 0,00 4 0
sdm 26,00 4,88 0,00 4 0
sdo 26,00 4,81 0,00 4 0
sdq 0,00 0,00 0,00 0 0
sdp 25,00 4,81 0,00 4 0
sds 26,00 4,81 0,00 4 0
sdt 26,00 4,81 0,00 4 0
sdr 25,00 4,81 0,00 4 0
sdu 26,00 4,81 0,00 4 0
md0 1472,00 92,00 0,00 92 0
dm-0 1472,00 92,00 0,00 92 0

avg-cpu: %user %nice %system %iowait %steal %idle
36,87 0,00 35,86 5,05 0,00 22,22

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 17,00 3,19 0,00 3 0
sdd 18,00 3,19 0,00 3 0
sda 18,00 3,19 0,00 3 0
sdb 17,00 3,19 0,00 3 0
sde 17,00 3,19 0,00 3 0
sdg 16,00 3,25 0,00 3 0
sdf 17,00 3,25 0,00 3 0
sdh 17,00 3,25 0,00 3 0
sdi 18,00 3,19 0,00 3 0
sdj 18,00 3,19 0,00 3 0
sdl 17,00 3,19 0,00 3 0
sdn 17,00 3,25 0,00 3 0
sdk 17,00 3,19 0,00 3 0
sdm 17,00 3,19 0,00 3 0
sdo 17,00 3,19 0,00 3 0
sdq 0,00 0,00 0,00 0 0
sdp 18,00 3,19 0,00 3 0
sds 17,00 3,19 0,00 3 0
sdt 17,00 3,19 0,00 3 0
sdr 18,00 3,19 0,00 3 0
sdu 17,00 3,19 0,00 3 0
md0 1024,00 64,00 0,00 64 0
dm-0 1024,00 64,00 0,00 64 0

avg-cpu: %user %nice %system %iowait %steal %idle
32,00 0,00 40,50 5,00 0,00 22,50

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 16,00 3,00 0,00 3 0
sdd 17,00 3,00 0,00 3 0
sda 16,00 3,00 0,00 3 0
sdb 16,00 3,00 0,00 3 0
sde 17,00 3,00 0,00 3 0
sdg 16,00 3,00 0,00 3 0
sdf 16,00 3,00 0,00 3 0
sdh 16,00 2,94 0,00 2 0
sdi 16,00 3,00 0,00 3 0
sdj 15,00 3,00 0,00 3 0
sdl 17,00 3,00 0,00 3 0
sdn 15,00 3,00 0,00 3 0
sdk 16,00 3,00 0,00 3 0
sdm 16,00 3,00 0,00 3 0
sdo 16,00 3,06 0,00 3 0
sdq 0,00 0,00 0,00 0 0
sdp 16,00 3,00 0,00 3 0
sds 16,00 3,00 0,00 3 0
sdt 16,00 3,00 0,00 3 0
sdr 17,00 3,00 0,00 3 0
sdu 17,00 3,00 0,00 3 0
md0 960,00 60,00 0,00 60 0
dm-0 960,00 60,00 0,00 60 0

avg-cpu: %user %nice %system %iowait %steal %idle
26,42 0,00 30,57 13,99 0,00 29,02

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 13,00 2,38 0,00 2 0
sdd 12,00 2,38 0,00 2 0
sda 13,00 2,38 0,00 2 0
sdb 13,00 2,38 0,00 2 0
sde 13,00 2,38 0,00 2 0
sdg 13,00 2,38 0,00 2 0
sdf 13,00 2,38 0,00 2 0
sdh 13,00 2,44 0,00 2 0
sdi 13,00 2,44 0,00 2 0
sdj 13,00 2,44 0,00 2 0
sdl 13,00 2,44 0,00 2 0
sdn 14,00 2,38 0,00 2 0
sdk 12,00 2,44 0,00 2 0
sdm 14,00 2,38 0,00 2 0
sdo 13,00 2,38 0,00 2 0
sdq 0,00 0,00 0,00 0 0
sdp 13,00 2,44 0,00 2 0
sds 13,00 2,44 0,00 2 0
sdt 13,00 2,38 0,00 2 0
sdr 12,00 2,44 0,00 2 0
sdu 13,00 2,38 0,00 2 0
md0 768,00 48,00 0,00 48 0
dm-0 768,00 48,00 0,00 48 0

avg-cpu: %user %nice %system %iowait %steal %idle
12,24 0,00 12,76 36,73 0,00 38,27

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sdc 7,00 1,44 0,00 1 0
sdd 8,00 1,44 0,00 1 0
sda 8,00 1,44 0,00 1 0
sdb 7,00 1,44 0,00 1 0
sde 7,00 1,44 0,00 1 0
sdg 8,00 1,44 0,00 1 0
sdf 7,00 1,44 0,00 1 0
sdh 8,00 1,38 0,00 1 0
sdi 8,00 1,38 0,00 1 0
sdj 8,00 1,38 0,00 1 0
sdl 7,00 1,31 0,00 1 0
sdn 7,00 1,38 0,00 1 0
sdk 8,00 1,38 0,00 1 0
sdm 8,00 1,38 0,00 1 0
sdo 7,00 1,38 0,00 1 0
sdq 0,00 0,00 0,00 0 0
sdp 8,00 1,38 0,00 1 0
sds 7,00 1,38 0,00 1 0
sdt 7,00 1,44 0,00 1 0
sdr 8,00 1,38 0,00 1 0
sdu 8,00 1,44 0,00 1 0
md0 448,00 28,00 0,00 28 0
dm-0 448,00 28,00 0,00 28 0

Titre: rsync entre 2 NAS
Posté par: PacOrly le 29 août 2016 à 23:00:07

nas04
root@nas04:~# iostat -m 1 20
Linux 3.16.0-4-amd64 (nas04) 29/08/2016 _x86_64_ (2 CPU)

avg-cpu: %user %nice %system %iowait %steal %idle
1,37 0,00 2,74 0,28 0,00 95,61

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 0,94 0,00 0,20 2968 143462
sdc 1,10 0,01 0,20 4054 143467
sdb 1,09 0,01 0,20 4189 143469
sde 1,09 0,01 0,20 4021 143464
sdd 1,08 0,01 0,20 4021 143461
sdf 1,10 0,01 0,20 4049 143469
sdh 0,96 0,00 0,20 2875 143465
sdg 1,09 0,01 0,20 4036 143463
sdi 1,09 0,01 0,20 4049 143465
sdj 1,10 0,01 0,20 4046 143465
sdk 1,10 0,01 0,20 4052 143466
sdl 1,09 0,01 0,20 4030 143469
sdn 1,10 0,01 0,20 4045 143469
sdo 1,10 0,01 0,20 4037 143468
sdp 1,10 0,01 0,20 4046 143462
sdm 1,10 0,01 0,20 4045 143472
sdq 1,54 0,01 0,02 8808 15210
md0 46,96 0,00 2,82 1194 2001560
dm-0 46,92 0,00 2,82 1192 2001560

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 0,51 0,51 0,00 98,99

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 6,00 0,06 0,00 0 0
sdc 6,00 0,06 0,00 0 0
sdb 6,00 0,06 0,00 0 0
sde 22,00 0,06 0,06 0 0
sdd 21,00 0,00 0,06 0 0
sdf 22,00 0,06 0,06 0 0
sdh 69,00 0,00 0,25 0 0
sdg 22,00 0,06 0,06 0 0
sdi 69,00 0,00 0,25 0 0
sdj 11,00 0,06 0,10 0 0
sdk 11,00 0,06 0,10 0 0
sdl 7,00 0,06 0,02 0 0
sdn 9,00 0,06 0,06 0 0
sdo 6,00 0,06 0,00 0 0
sdp 6,00 0,06 0,00 0 0
sdm 9,00 0,08 0,03 0 0
sdq 0,00 0,00 0,00 0 0
md0 12,00 0,00 0,33 0 0
dm-0 8,00 0,00 0,33 0 0

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 7,04 0,00 0,00 92,96

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 0,00 0,00 0,00 0 0
sdc 0,00 0,00 0,00 0 0
sdb 0,00 0,00 0,00 0 0
sde 0,00 0,00 0,00 0 0
sdd 0,00 0,00 0,00 0 0
sdf 0,00 0,00 0,00 0 0
sdh 0,00 0,00 0,00 0 0
sdg 0,00 0,00 0,00 0 0
sdi 0,00 0,00 0,00 0 0
sdj 0,00 0,00 0,00 0 0
sdk 0,00 0,00 0,00 0 0
sdl 0,00 0,00 0,00 0 0
sdn 0,00 0,00 0,00 0 0
sdo 0,00 0,00 0,00 0 0
sdp 0,00 0,00 0,00 0 0
sdm 0,00 0,00 0,00 0 0
sdq 0,00 0,00 0,00 0 0
md0 0,00 0,00 0,00 0 0
dm-0 0,00 0,00 0,00 0 0

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 80,83 0,00 0,00 19,17

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 0,00 0,00 0,00 0 0
sdc 0,00 0,00 0,00 0 0
sdb 0,00 0,00 0,00 0 0
sde 0,00 0,00 0,00 0 0
sdd 0,00 0,00 0,00 0 0
sdf 0,00 0,00 0,00 0 0
sdh 0,00 0,00 0,00 0 0
sdg 0,00 0,00 0,00 0 0
sdi 0,00 0,00 0,00 0 0
sdj 0,00 0,00 0,00 0 0
sdk 0,00 0,00 0,00 0 0
sdl 0,00 0,00 0,00 0 0
sdn 0,00 0,00 0,00 0 0
sdo 0,00 0,00 0,00 0 0
sdp 0,00 0,00 0,00 0 0
sdm 0,00 0,00 0,00 0 0
sdq 0,00 0,00 0,00 0 0
md0 0,00 0,00 0,00 0 0
dm-0 0,00 0,00 0,00 0 0

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 85,71 0,00 0,00 14,29

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 14,00 0,00 3,82 0 3
sdc 14,00 0,00 3,82 0 3
sdb 14,00 0,00 3,82 0 3
sde 14,00 0,00 3,82 0 3
sdd 14,00 0,00 3,82 0 3
sdf 14,00 0,00 3,82 0 3
sdh 14,00 0,00 3,82 0 3
sdg 14,00 0,00 3,82 0 3
sdi 14,00 0,00 3,82 0 3
sdj 14,00 0,00 3,82 0 3
sdk 14,00 0,00 3,82 0 3
sdl 14,00 0,06 3,75 0 3
sdn 14,00 0,00 3,82 0 3
sdo 14,00 0,00 3,82 0 3
sdp 14,00 0,00 3,82 0 3
sdm 14,00 0,00 3,82 0 3
sdq 0,00 0,00 0,00 0 0
md0 1076,00 0,00 67,19 0 67
dm-0 1077,00 0,00 67,25 0 67

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 83,59 1,03 0,00 15,38

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 28,00 0,12 11,69 0 11
sdc 29,00 0,09 11,75 0 11
sdb 29,00 0,09 11,75 0 11
sde 29,00 0,09 11,75 0 11
sdd 29,00 0,09 11,75 0 11
sdf 28,00 0,03 11,75 0 11
sdh 28,00 0,03 11,75 0 11
sdg 28,00 0,03 11,75 0 11
sdi 28,00 0,03 11,75 0 11
sdj 29,00 0,09 11,75 0 11
sdk 29,00 0,09 11,75 0 11
sdl 28,00 0,03 11,75 0 11
sdn 30,00 0,11 11,73 0 11
sdo 29,00 0,12 11,71 0 11
sdp 29,00 0,12 11,72 0 11
sdm 29,00 0,09 11,75 0 11
sdq 0,00 0,00 0,00 0 0
md0 2408,00 0,00 150,36 0 150
dm-0 2406,00 0,00 150,29 0 150

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 46,60 1,57 0,00 51,83

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 20,00 0,15 6,50 0 6
sdc 20,00 0,15 6,50 0 6
sdb 20,00 0,15 6,50 0 6
sde 19,00 0,15 6,44 0 6
sdd 19,00 0,15 6,44 0 6
sdf 20,00 0,21 6,44 0 6
sdh 66,00 0,09 6,63 0 6
sdg 66,00 0,09 6,63 0 6
sdi 35,00 0,15 6,50 0 6
sdj 35,00 0,09 6,56 0 6
sdk 34,00 0,00 6,59 0 6
sdl 20,00 0,12 6,52 0 6
sdn 20,00 0,15 6,48 0 6
sdo 20,00 0,15 6,50 0 6
sdp 20,00 0,15 6,50 0 6
sdm 20,00 0,10 6,50 0 6
sdq 0,00 0,00 0,00 0 0
md0 1457,00 0,00 90,60 0 90
dm-0 1455,00 0,00 90,60 0 90

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 2,51 0,50 0,00 96,98

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 0,00 0,00 0,00 0 0
sdc 0,00 0,00 0,00 0 0
sdb 0,00 0,00 0,00 0 0
sde 0,00 0,00 0,00 0 0
sdd 0,00 0,00 0,00 0 0
sdf 0,00 0,00 0,00 0 0
sdh 0,00 0,00 0,00 0 0
sdg 0,00 0,00 0,00 0 0
sdi 0,00 0,00 0,00 0 0
sdj 0,00 0,00 0,00 0 0
sdk 0,00 0,00 0,00 0 0
sdl 0,00 0,00 0,00 0 0
sdn 0,00 0,00 0,00 0 0
sdo 0,00 0,00 0,00 0 0
sdp 0,00 0,00 0,00 0 0
sdm 0,00 0,00 0,00 0 0
sdq 2,00 0,00 0,02 0 0
md0 0,00 0,00 0,00 0 0
dm-0 0,00 0,00 0,00 0 0

avg-cpu: %user %nice %system %iowait %steal %idle
0,53 0,00 78,07 0,00 0,00 21,39

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 0,00 0,00 0,00 0 0
sdc 0,00 0,00 0,00 0 0
sdb 0,00 0,00 0,00 0 0
sde 0,00 0,00 0,00 0 0
sdd 0,00 0,00 0,00 0 0
sdf 0,00 0,00 0,00 0 0
sdh 0,00 0,00 0,00 0 0
sdg 0,00 0,00 0,00 0 0
sdi 0,00 0,00 0,00 0 0
sdj 0,00 0,00 0,00 0 0
sdk 0,00 0,00 0,00 0 0
sdl 0,00 0,00 0,00 0 0
sdn 0,00 0,00 0,00 0 0
sdo 0,00 0,00 0,00 0 0
sdp 0,00 0,00 0,00 0 0
sdm 0,00 0,00 0,00 0 0
sdq 0,00 0,00 0,00 0 0
md0 0,00 0,00 0,00 0 0
dm-0 0,00 0,00 0,00 0 0

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 92,75 0,00 0,00 7,25

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 36,00 0,12 8,31 0 8
sdc 37,00 0,16 8,28 0 8
sdb 35,00 0,09 8,28 0 8
sde 37,00 0,16 8,28 0 8
sdd 36,00 0,16 8,25 0 8
sdf 37,00 0,19 8,25 0 8
sdh 37,00 0,16 8,28 0 8
sdg 37,00 0,16 8,28 0 8
sdi 37,00 0,19 8,25 0 8
sdj 37,00 0,19 8,25 0 8
sdk 38,00 0,19 8,25 0 8
sdl 36,00 0,25 8,19 0 8
sdn 36,00 0,14 8,29 0 8
sdo 37,00 0,19 8,25 0 8
sdp 36,00 0,12 8,31 0 8
sdm 36,00 0,19 8,25 0 8
sdq 0,00 0,00 0,00 0 0
md0 2071,00 0,00 129,36 0 129
dm-0 2072,00 0,00 129,42 0 129

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 64,65 19,19 0,00 16,16

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 42,00 0,09 12,75 0 12
sdc 42,00 0,09 12,75 0 12
sdb 42,00 0,09 12,75 0 12
sde 42,00 0,09 12,75 0 12
sdd 43,00 0,10 12,75 0 12
sdf 43,00 0,12 12,75 0 12
sdh 41,00 0,09 12,72 0 12
sdg 43,00 0,10 12,75 0 12
sdi 42,00 0,09 12,75 0 12
sdj 42,00 0,06 12,78 0 12
sdk 42,00 0,06 12,78 0 12
sdl 41,00 0,06 12,75 0 12
sdn 40,00 0,06 12,75 0 12
sdo 41,00 0,06 12,75 0 12
sdp 41,00 0,06 12,75 0 12
sdm 42,00 0,09 12,75 0 12
sdq 0,00 0,00 0,00 0 0
md0 2748,00 0,00 171,50 0 171
dm-0 2748,00 0,00 171,50 0 171

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 2,04 4,08 0,00 93,88

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 13,00 0,16 1,00 0 1
sdc 13,00 0,16 1,00 0 1
sdb 13,00 0,16 1,00 0 1
sde 13,00 0,17 0,99 0 0
sdd 13,00 0,16 1,00 0 1
sdf 13,00 0,16 1,00 0 1
sdh 43,00 0,16 1,06 0 1
sdg 43,00 0,16 1,06 0 1
sdi 12,00 0,22 0,94 0 0
sdj 12,00 0,12 1,06 0 1
sdk 13,00 0,06 1,13 0 1
sdl 28,00 0,00 1,19 0 1
sdn 13,00 0,16 1,00 0 1
sdo 13,00 0,16 1,00 0 1
sdp 13,00 0,16 1,00 0 1
sdm 30,00 0,16 1,08 0 1
sdq 0,00 0,00 0,00 0 0
md0 120,00 0,00 7,00 0 7
dm-0 117,00 0,00 6,94 0 6

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 8,76 0,00 0,00 91,24

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 5,00 0,01 0,00 0 0
sdc 5,00 0,01 0,00 0 0
sdb 5,00 0,01 0,00 0 0
sde 5,00 0,01 0,00 0 0
sdd 5,00 0,01 0,00 0 0
sdf 5,00 0,01 0,00 0 0
sdh 21,00 0,00 0,08 0 0
sdg 21,00 0,01 0,06 0 0
sdi 5,00 0,00 0,01 0 0
sdj 5,00 0,01 0,00 0 0
sdk 5,00 0,01 0,00 0 0
sdl 5,00 0,01 0,00 0 0
sdn 21,00 0,01 0,06 0 0
sdo 6,00 0,01 0,00 0 0
sdp 6,00 0,00 0,01 0 0
sdm 5,00 0,01 0,00 0 0
sdq 0,00 0,00 0,00 0 0
md0 5,00 0,00 0,07 0 0
dm-0 4,00 0,00 0,07 0 0

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 81,05 0,00 0,00 18,95

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 0,00 0,00 0,00 0 0
sdc 0,00 0,00 0,00 0 0
sdb 0,00 0,00 0,00 0 0
sde 0,00 0,00 0,00 0 0
sdd 0,00 0,00 0,00 0 0
sdf 0,00 0,00 0,00 0 0
sdh 0,00 0,00 0,00 0 0
sdg 0,00 0,00 0,00 0 0
sdi 0,00 0,00 0,00 0 0
sdj 0,00 0,00 0,00 0 0
sdk 0,00 0,00 0,00 0 0
sdl 0,00 0,00 0,00 0 0
sdn 0,00 0,00 0,00 0 0
sdo 0,00 0,00 0,00 0 0
sdp 0,00 0,00 0,00 0 0
sdm 0,00 0,00 0,00 0 0
sdq 0,00 0,00 0,00 0 0
md0 0,00 0,00 0,00 0 0
dm-0 0,00 0,00 0,00 0 0

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 86,08 0,00 0,00 13,92

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 19,00 0,00 5,75 0 5
sdc 19,00 0,00 5,75 0 5
sdb 19,00 0,00 5,75 0 5
sde 19,00 0,06 5,70 0 5
sdd 19,00 0,00 5,75 0 5
sdf 20,00 0,05 5,70 0 5
sdh 18,00 0,12 5,75 0 5
sdg 18,00 0,12 5,75 0 5
sdi 18,00 0,12 5,75 0 5
sdj 18,00 0,12 5,69 0 5
sdk 18,00 0,12 5,75 0 5
sdl 18,00 0,12 5,69 0 5
sdn 19,00 0,06 5,75 0 5
sdo 19,00 0,00 5,75 0 5
sdp 19,00 0,00 5,75 0 5
sdm 18,00 0,06 5,74 0 5
sdq 1,00 0,00 0,02 0 0
md0 1283,00 0,00 80,01 0 80
dm-0 1283,00 0,00 80,01 0 80

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 75,00 1,50 0,00 23,50

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 22,00 0,06 10,19 0 10
sdc 22,00 0,06 10,19 0 10
sdb 20,00 0,00 9,94 0 9
sde 23,00 0,06 10,25 0 10
sdd 22,00 0,06 10,19 0 10
sdf 20,00 0,00 9,99 0 9
sdh 23,00 0,06 10,25 0 10
sdg 23,00 0,06 10,25 0 10
sdi 23,00 0,06 10,25 0 10
sdj 23,00 0,06 10,25 0 10
sdk 22,00 0,00 10,25 0 10
sdl 22,00 0,00 10,25 0 10
sdn 22,00 0,00 10,25 0 10
sdo 21,00 0,00 10,00 0 10
sdp 22,00 0,06 10,00 0 10
sdm 22,00 0,00 10,25 0 10
sdq 17,00 0,00 0,08 0 0
md0 2295,00 0,00 143,40 0 143
dm-0 2295,00 0,00 143,40 0 143

avg-cpu: %user %nice %system %iowait %steal %idle
0,53 0,00 44,74 2,11 0,00 52,63

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 39,00 0,20 6,13 0 6
sdc 23,00 0,20 6,06 0 6
sdb 40,00 0,20 6,38 0 6
sde 25,00 0,20 6,11 0 6
sdd 24,00 0,20 6,10 0 6
sdf 26,00 0,26 6,38 0 6
sdh 85,00 0,07 6,31 0 6
sdg 85,00 0,07 6,31 0 6
sdi 23,00 0,20 6,06 0 6
sdj 24,00 0,14 6,16 0 6
sdk 25,00 0,12 6,23 0 6
sdl 24,00 0,12 6,20 0 6
sdn 24,00 0,20 6,13 0 6
sdo 40,00 0,16 6,38 0 6
sdp 40,00 0,20 6,38 0 6
sdm 25,00 0,18 6,13 0 6
sdq 0,00 0,00 0,00 0 0
md0 1378,00 0,00 85,29 0 85
dm-0 1374,00 0,00 85,29 0 85

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 0,50 0,00 0,00 99,50

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 0,00 0,00 0,00 0 0
sdc 0,00 0,00 0,00 0 0
sdb 0,00 0,00 0,00 0 0
sde 0,00 0,00 0,00 0 0
sdd 0,00 0,00 0,00 0 0
sdf 0,00 0,00 0,00 0 0
sdh 0,00 0,00 0,00 0 0
sdg 0,00 0,00 0,00 0 0
sdi 0,00 0,00 0,00 0 0
sdj 0,00 0,00 0,00 0 0
sdk 0,00 0,00 0,00 0 0
sdl 0,00 0,00 0,00 0 0
sdn 0,00 0,00 0,00 0 0
sdo 0,00 0,00 0,00 0 0
sdp 0,00 0,00 0,00 0 0
sdm 0,00 0,00 0,00 0 0
sdq 0,00 0,00 0,00 0 0
md0 0,00 0,00 0,00 0 0
dm-0 0,00 0,00 0,00 0 0

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 76,50 0,00 0,00 23,50

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 0,00 0,00 0,00 0 0
sdc 0,00 0,00 0,00 0 0
sdb 0,00 0,00 0,00 0 0
sde 0,00 0,00 0,00 0 0
sdd 0,00 0,00 0,00 0 0
sdf 0,00 0,00 0,00 0 0
sdh 0,00 0,00 0,00 0 0
sdg 0,00 0,00 0,00 0 0
sdi 0,00 0,00 0,00 0 0
sdj 0,00 0,00 0,00 0 0
sdk 0,00 0,00 0,00 0 0
sdl 0,00 0,00 0,00 0 0
sdn 0,00 0,00 0,00 0 0
sdo 0,00 0,00 0,00 0 0
sdp 0,00 0,00 0,00 0 0
sdm 0,00 0,00 0,00 0 0
sdq 0,00 0,00 0,00 0 0
md0 0,00 0,00 0,00 0 0
dm-0 0,00 0,00 0,00 0 0

avg-cpu: %user %nice %system %iowait %steal %idle
0,00 0,00 90,05 0,00 0,00 9,95

Device: tps MB_read/s MB_wrtn/s MB_read MB_wrtn
sda 23,00 0,16 5,09 0 5
sdc 22,00 0,12 5,13 0 5
sdb 23,00 0,16 5,09 0 5
sde 24,00 0,20 5,05 0 5
sdd 23,00 0,16 5,09 0 5
sdf 21,00 0,19 5,03 0 5
sdh 22,00 0,12 5,09 0 5
sdg 22,00 0,12 5,09 0 5
sdi 22,00 0,12 5,09 0 5
sdj 23,00 0,16 5,09 0 5
sdk 23,00 0,12 5,13 0 5
sdl 23,00 0,15 5,10 0 5
sdn 22,00 0,16 5,09 0 5
sdo 22,00 0,09 5,16 0 5
sdp 22,00 0,09 5,16 0 5
sdm 21,00 0,12 5,09 0 5
sdq 0,00 0,00 0,00 0 0
md0 1246,00 0,00 77,71 0 77
dm-0 1248,00 0,00 77,84 0 77

L'écriture sur nas04 se fait par vague.
La lecture sur nas03 est un peu mieux lissée.
Par contre, je ne vois pas ou çà bloque.
Titre: rsync entre 2 NAS
Posté par: BadMax le 30 août 2016 à 09:04:03
Les montages NFS tu les a fait de nas04 (serveur) sur nas03 (client) ?

Il vaudrait mieux les faire dans l'autre sens et lancer rsync sur nas04. Pourquoi ? Parce que tu écris en mode sync sur ton share NFS -> tant que l'écriture n'est pas terminée, les I/O du point de vue FS sont bloquées. Tu peux aussi exporter en mode async, ça devrait mieux lisser. Mais lire sur NFS plutôt que écrire sera mieux.


Titre: rsync entre 2 NAS
Posté par: PacOrly le 30 août 2016 à 18:50:50
Il vaudrait mieux les faire dans l'autre sens et lancer rsync sur nas04.

En relisant le topic, j'ai vu que tu indiquais déjà de faire le rsync dans ce sens, j'ai lu ta réponse trop rapidement.

rsync lancé sur nas04.
montage nfs sur nas04 (client) depuis nas03 (serveur).

nas03
root@nas03:~# iostat -m 1 20 md0
Linux 3.16.0-4-amd64 (nas03) 30/08/2016 _x86_64_ (2 CPU)

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           2,32    0,00    1,79    0,79    0,00   95,10

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0              55,86         3,34         0,05    2667897      36610

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   13,98    5,38    0,00   80,65

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             843,00        50,00         0,00         50          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   14,36    5,32    0,00   80,32

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             929,00        54,00         0,01         54          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   14,52    6,45    0,00   79,03

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             930,00        55,18         0,00         55          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   14,13    5,98    0,00   79,89

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             996,00        60,82         0,00         60          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   15,05    5,91    0,00   79,03

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             913,00        56,00         0,00         56          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   14,36    6,91    0,00   78,72

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             928,00        54,00         0,00         54          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   14,13    5,98    0,00   79,89

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             944,00        58,00         0,00         58          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,54    0,00   12,37    4,84    0,00   82,26

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             845,00        52,00         0,00         52          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   11,54    6,59    0,00   81,87

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             924,00        56,00         0,00         56          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,54    0,00   14,05    5,95    0,00   79,46

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             950,00        56,00         0,00         56          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   12,15    4,97    0,00   82,87

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             935,00        56,00         0,00         56          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   13,51    5,95    0,00   80,54

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             914,00        54,00         0,00         54          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   12,64    5,49    0,00   81,87

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             888,00        54,00         0,00         54          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   13,04    7,61    0,00   79,35

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             882,00        54,00         0,00         54          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   14,05    5,95    0,00   80,00

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             910,00        56,00         0,00         56          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   13,66    6,56    0,00   79,78

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             932,00        56,00         0,00         56          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   15,43    5,85    0,00   78,72

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             945,00        56,12         0,00         56          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,00    0,00   14,13    6,52    0,00   79,35

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0            1008,00        61,88         0,00         61          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0,53    0,00   12,77    5,32    0,00   81,38

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             845,00        52,00         0,00         52          0

nas04
root@nas04:~# iostat -m 1 20 md0
Linux 3.16.0-4-amd64 (nas04) 30/08/2016 _x86_64_ (2 CPU)

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           1,43    0,00    3,20    0,29    0,00   95,07

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0              55,41         0,00         3,34       1292    2671669

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          26,26    0,00   62,63    0,00    0,00   11,11

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0            2344,00         0,00       146,22          0        146

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          29,38    0,00   48,45    0,00    0,00   22,16

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0               0,00         0,00         0,00          0          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          30,05    0,00   46,11    0,00    0,00   23,83

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0               0,00         0,00         0,00          0          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          29,29    0,00   49,49    0,00    0,00   21,21

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             716,00         0,00        44,16          0         44

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          24,74    0,00   55,15    0,00    0,00   20,10

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             705,00         0,00        44,00          0         44

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          25,91    0,00   63,73    0,00    0,00   10,36

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0            2065,00         0,00       128,90          0        128

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          23,00    0,00   62,50    0,00    0,00   14,50

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0            1590,00         0,00        99,12          0         99

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          32,83    0,00   42,93    0,00    0,00   24,24

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0               0,00         0,00         0,00          0          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          29,95    0,00   43,15    0,00    0,00   26,90

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0               0,00         0,00         0,00          0          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          27,84    0,00   50,52    0,00    0,00   21,65

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             705,00         0,00        44,00          0         44

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          30,00    0,00   51,50    0,00    0,00   18,50

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0            1141,00         0,00        71,24          0         71

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          25,89    0,00   65,48    1,02    0,00    7,61

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0            2299,00         0,00       143,50          0        143

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          29,59    0,00   55,10    0,00    0,00   15,31

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             919,00         0,00        57,28          0         57

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          30,41    0,00   43,30    0,00    0,00   26,29

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0               0,00         0,00         0,00          0          0

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          27,41    0,00   45,69    0,00    0,00   26,90

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0             218,00         0,00        13,59          0         13

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          28,35    0,00   55,15    0,00    0,00   16,49

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0            1149,00         0,00        71,75          0         71

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          25,39    0,00   61,14    0,00    0,00   13,47

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0            1571,00         0,00        98,00          0         98

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          27,50    0,00   65,00    0,00    0,00    7,50

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0            2104,95         0,00       131,37          0        132

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          33,67    0,00   40,70    0,00    0,00   25,63

Device:            tps    MB_read/s    MB_wrtn/s    MB_read    MB_wrtn
md0               0,00         0,00         0,00          0          0

Les données semblent arriver par vagues.
Titre: rsync entre 2 NAS
Posté par: BadMax le 30 août 2016 à 20:24:32
Désormais nas04 est au taquet : t'as un core qui doit être à 100% -> pas possible d'aller plus vite. Le noyau écrit en asynchrone des données reçues, c'est pourquoi le débit d'écriture n'est pas constant alors que le flux de lecture est stable sur nas03.


Titre: rsync entre 2 NAS
Posté par: PacOrly le 30 août 2016 à 22:37:50
nas03 et nas04 sont équipés respectivement d'un Celeron Dual Core E1400 et d'un Celeron Dual Core E1500.
Les cartes mères supportent les CPU suivants :
- Core 2 Duo du E4300 au E8600;
- Core 2 Extreme du QX6800 au QX9770 et X6800;
- Core 2 Quad du Q6400 au Q9650.

Un upgrade CPU pourrait-il améliorer les choses?
Y aurait-il un modèle à privilégier?

Pour mémoire sur eBay
E8400   10€
Q8200   20€
QX6800 70€

Edit :

rsync lancé sur nas03.
montage nfs sur nas03 (client) depuis nas04 (serveur).
sent 847,549,299,484 bytes  received 2,863 bytes  63,867,171.72 bytes/sec
total size is 847,342,416,795  speedup is 1.00

rsync lancé sur nas04.
montage nfs sur nas04 (client) depuis nas03 (serveur).
Citer
sent 847,549,299,484 bytes  received 2,858 bytes  57,470,710.45 bytes/sec
total size is 847,342,416,795  speedup is 1.00

Finalement, le premier mode est plus efficace.
Titre: rsync entre 2 NAS
Posté par: BadMax le 31 août 2016 à 09:06:35
Tes derniers chiffres confirment que c'est le CPU qui limite, pas les I/O (vu le nombre de disques, pas étonnant). Dans le scénario 1, nas04 ne gère que NFSd et nas03 gère rsync.

Si tu dois faire un upgrade, ça doit d'abord être pour favoriser la performance par core. Augmenter le nombre de core sans augmenter la perf individuelle de chacun n'améliorera pas les perfs globales. Les Core 2 sont plus rapides que les Celeron je pense, donc tu devrais sentir une différence.

Titre: rsync entre 2 NAS
Posté par: BadMax le 31 août 2016 à 14:12:08
https://fr.wikipedia.org/wiki/Load_average

Citer
    La charge est supérieure à 1

Ceci ne signifie pas forcèment qu'un processeur plus rapide résoudrait le problème. En effet, la charge inclut généralement les processus en attente d'entrées-sorties. Un processus dans ce cas sera donc comptabilisé, mais il est « bloqué » car il « attend » un périphérique d'I/O, et non pas le processeur.
Il faut donc prêter attention aux autres affichages des commandes comme top ; où l'utilisation processeur globale est également indiquée. Si le processeur est inactif (idle) à 90 % mais que la charge est élevée, un processeur plus véloce n'y changera rien. S'il reste « collé » à 100 % d'utilisation, alors il est certainement en cause.
(Autrement dit : un load > 1 n'indique une contention sur le processeur que si, et seulement si, le idle = 0.0.)
Titre: rsync entre 2 NAS
Posté par: corrector le 31 août 2016 à 16:14:49
OK, linux is not Unix.
Titre: rsync entre 2 NAS
Posté par: BadMax le 31 août 2016 à 18:13:35
Sous HP-UX j'avais le même comportement. C'est d'ailleurs pénible car "top" sous HP-UX donne moins de détails sur le CPU que "top" Linux.
Titre: rsync entre 2 NAS
Posté par: corrector le 31 août 2016 à 18:20:33
Tu veux dire que les processus en attente de lecture disque sont comptés comme des RUNNABLE?
Titre: rsync entre 2 NAS
Posté par: BadMax le 31 août 2016 à 20:22:48
C'est ça.
Titre: rsync entre 2 NAS
Posté par: PacOrly le 10 septembre 2016 à 18:02:01
Excellent diagnostique BadMax.

J'ai trouvé deux E8600 (Intel(R) Core(TM)2 Duo CPU E8600 @ 3.33GHz, 2 cores) pour 15€/pièce frais de port compris, pour remplacer le E1400 (nas03) et le E1500 (nas04).

Rsync via ssh -> 92 Mio/s (environ 40 Mio/s avant).

nas03 38% user, 12% kernel, 0% IO, 51% idle
nas04 36% user, 42% kernel, 0% IO, 22% idle

Je ferai aussi un test via nfs, mais vu l'occupation CPU, je n'attends pas faire mieux.
Titre: rsync entre 2 NAS
Posté par: BadMax le 10 septembre 2016 à 19:44:28
Toujours pas bloqué par les I/O -> essaye NFS :)

Bon après tu seras limité par le Gb \o/
Titre: rsync entre 2 NAS
Posté par: PacOrly le 11 septembre 2016 à 16:19:42
Rsync via ssh -> 96 Mo/s
Rsync via nfs depuis nas03 -> 88 Mo/s


Rsync via nfs depuis nas04 -> 102 Mo/s
nas03  2% user, 24% kernel, 0% IO, 74% idle
nas04 32% user, 53% kernel, 3% IO, 12% idle