Auteur Sujet: saturation entre Orange et Scaleway (Lu 7307 fois)

hwti · « **Réponse #12 le:** 19 février 2023 à 22:54:45 »

Citation de: eahlys le 19 février 2023 à 22:43:00

Les traceroute sont propres. C’est à n’importe quelle heure de la journée ou en soirée seulement ?

Dans mon cas, même à 0h30 l'IPv6 était à 200Ko/s, et l'IPv4 était mieux mais pas parfait.
Là l'IPv4 est à 5Mo/s, l'IPv6 à 100Ko/s

En revanche ipv4.scaleway.testdebit.info fonctionne correctement, et ipv6.scaleway.testdebit.info fonctionne parfois très bien, parfois mal.

Antoinel · « **Réponse #13 le:** 19 février 2023 à 22:57:22 »

Il y a eu un problème la semaine dernière sur un des liens de peering Orange/SCW. Potentiellement un nouveau souci dessus.

jeremyp3 · « **Réponse #14 le:** 19 février 2023 à 22:59:24 »

Citation de: hwti le 19 février 2023 à 22:54:45

En revanche ipv4.scaleway.testdebit.info fonctionne correctement, et ipv6.scaleway.testdebit.info fonctionne parfois très bien, parfois mal.

je me demande si bbr n'y est pas pour quelque chose pour ce cas là

hwti · « **Réponse #15 le:** 19 février 2023 à 23:05:52 »

Citation de: jeremyp3 le 19 février 2023 à 22:59:24

je me demande si bbr n'y est pas pour quelque chose pour ce cas là

C'est possible, parce que les mtr montrent un peu de pertes et quelques pings anormaux de temps en temps.
En revanche, ça n'explique pas pourquoi l'IPv6 semble moins bien fonctionner.

Code: [Sélectionner]

Start: 2023-02-19T22:56:25+0100
HOST: TR                                                   Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 2a01:cb00:....                                        0.0%   100    0.6   0.8   0.5   4.3   0.8
  2.|-- 2a01cb08a00402000193025300740009.ipv6.abo.wanadoo.fr  0.0%   100    3.0   3.7   2.3  16.4   2.0
  3.|-- 2a01:cfc4::b                                          0.0%   100    4.3   4.5   3.7   8.7   0.7
  4.|-- bundle-ether104.pastr4.paris.opentransit.net         62.0%   100    4.2   5.1   3.1  30.9   4.3
  5.|-- 2001:688:0:2:1::46b                                   0.0%   100    4.6   5.1   3.5  26.4   2.4
  6.|-- 2001:688:0:3:8::396                                   8.0%   100   28.9   5.7   3.5  45.2   5.2
  7.|-- 2001:bc8:0:1::3b                                      0.0%   100    4.7   5.5   4.2  48.2   4.6
  8.|-- 2001:bc8:0:1::b6                                      3.0%   100    4.4   5.6   3.7  27.2   3.2
  9.|-- ping6.online.net                                      2.0%   100    3.9   5.6   3.6  93.1   9.5

Code: [Sélectionner]

Start: 2023-02-19T23:01:10+0100
HOST: TR                                 Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 192.168.2.1                         0.0%   100    0.5   0.8   0.4   7.5   1.2
  2.|-- 80.10.237.77                        0.0%   100    3.1   2.5   1.5  10.0   0.9
  3.|-- ae111-0.ncidf103.rbci.orange.net    0.0%   100    7.9   7.9   3.0  53.0   8.6
  4.|-- ae41-0.niidf101.rbci.orange.net     0.0%   100    3.4   4.0   3.1  20.3   2.2
  5.|-- 193.252.137.10                      0.0%   100    3.7   6.1   3.0 105.5  13.6
  6.|-- 193.251.132.119                     0.0%   100    3.9   4.6   3.5  25.3   2.4
  7.|-- 81.52.200.129                       0.0%   100    4.1   4.7   3.5  18.0   1.8
  8.|-- 193.251.152.48                      0.0%   100    3.7   4.1   2.8  14.2   1.3
  9.|-- 51.158.1.37                         2.0%   100    3.9   4.4   3.3  17.3   2.0
 10.|-- 45x-s44-2-a9k1.dc3.poneytelecom.eu  2.0%   100    4.2   5.2   3.1  29.7   3.4
 11.|-- ping.online.net                     1.0%   100    3.6   4.2   3.3  22.6   2.8

iperf en UDP continue d'avoir plein de pertes (35% à 900Mbps, 15-20% à 500Mbps), mais ça peut être un problème de serveur.

ralmn · « **Réponse #16 le:** 19 février 2023 à 23:13:07 »

Citation de: eahlys le 19 février 2023 à 22:43:00

Les traceroute sont propres. C’est à n’importe quelle heure de la journée ou en soirée seulement ?

Pour moi ça semble être en soirée d'après le speedtest sur le serveur de Scaleway Vitry (id 5022) que je monitore dans un Zabbix interne.

Et sur 7j

zergflag · « **Réponse #17 le:** 20 février 2023 à 02:14:04 »

Citation de: ralmn le 19 février 2023 à 23:13:07

Pour moi ça semble être en soirée d'après le speedtest sur le serveur de Scaleway Vitry (id 5022) que je monitore dans un Zabbix interne.

2h du matin passé et le problème est toujours présent perso

EDIT : j'ai oublier de préciser que mon serveur étais en BBR

ralmn · « **Réponse #18 le:** 20 février 2023 à 21:11:32 »

J'avais plus trop de problème à 2h. Mais étrangement le débit était plus variable aujourd'hui d'après le graph... Bon j'étais pas chez moi pour constaté réellement si ça se ressentait...

Antoinel · « **Réponse #19 le:** 21 février 2023 à 17:48:38 »

https://status.scaleway.com/incidents/m01xgh71pgch

Citer

Orange subscribers might experience performance limitations when communicating with Scaleway services.
Our team is currently investigating.

Posted 7 hours ago. Feb 21, 2023 - 11:15 CET

Twister · « **Réponse #20 le:** 22 février 2023 à 14:14:52 »

Le problème a commencé Jeudi dernier quand on a isolé un des deux PNI qui avait un soucis hardware.
Sauf que visiblement le 2ème PNI a aussi un problème, probablement un soucis de capacité vu que le problème est particulièrement visible lors du pic de trafic.

Le 1er PNI est réparé, on est en train de voir avec Orange pour le remettre en prod, ça devrait permettre un retour à la normal.
Et en parallèle on discute avec eux pour identifier le soucis de capacité sur le 2ème PNI.

Désolé pour le service dégradé, on a mis un moment à identifier qu'il y avait un soucis (pas de saturation visible de notre côté).
On a déchargé une petite partie du trafic hier soir, ça a dû mieux se passer cette nuit. Et si le 1er PNI n'est pas remis en prod dans l'après-midi, on déchargera encore plus de trafic.

hwti · « **Réponse #21 le:** 23 février 2023 à 00:09:17 »

Le TCP semble bien fonctionner, mais iperf en UDP semble se comporter de manière bizarre (c'est peut-être le serveur).

500Mbps => 19% de pertes :

Code: [Sélectionner]

~  ᐅ iperf3 -R -c ping6.online.net -p 5203 -u -b 500M --get-server-output
Connecting to host ping6.online.net, port 5203
Reverse mode, remote host ping6.online.net is sending
[  5] local 2a01:cb00:xxxx:xxxx:xxxx:xxxx:xxxx:xxxx port 36023 connected to 2001:bc8:1::40 port 5203
[ ID] Interval           Transfer     Bitrate         Jitter    Lost/Total Datagrams
[  5]   0.00-1.00   sec  47.5 MBytes   398 Mbits/sec  0.016 ms  9512/44360 (21%)
[  5]   1.00-2.00   sec  48.2 MBytes   405 Mbits/sec  0.013 ms  8468/43882 (19%)
[  5]   2.00-3.00   sec  49.0 MBytes   411 Mbits/sec  0.011 ms  7742/43745 (18%)
[  5]   3.00-4.00   sec  49.0 MBytes   411 Mbits/sec  0.014 ms  7720/43692 (18%)
[  5]   4.00-5.00   sec  48.4 MBytes   406 Mbits/sec  0.017 ms  8539/44100 (19%)
[  5]   5.00-6.00   sec  48.2 MBytes   404 Mbits/sec  0.015 ms  8065/43465 (19%)
[  5]   6.00-7.00   sec  47.4 MBytes   398 Mbits/sec  0.016 ms  8667/43494 (20%)
[  5]   7.00-8.00   sec  48.2 MBytes   405 Mbits/sec  0.014 ms  8692/44101 (20%)
[  5]   8.00-9.00   sec  48.9 MBytes   410 Mbits/sec  0.015 ms  8305/44205 (19%)
[  5]   9.00-10.00  sec  47.9 MBytes   402 Mbits/sec  0.018 ms  8273/43456 (19%)
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval           Transfer     Bitrate         Jitter    Lost/Total Datagrams
[  5]   0.00-10.00  sec   598 MBytes   501 Mbits/sec  0.000 ms  0/438500 (0%)  sender
[  5]   0.00-10.00  sec   483 MBytes   405 Mbits/sec  0.018 ms  83983/438500 (19%)  receiver

Server output:
Time: Wed, 22 Feb 2023 22:47:17 GMT
Accepted connection from 2a01:cb00:xxxx:xxxx:xxxx:xxxx:xxxx:xxxx, port 37038
      Cookie: htbgkxk2ug3fo6jwfzyftf6o4vjnomlnlzox
[  5] local 2001:bc8:1::40 port 5203 connected to 2a01:cb00:xxxx:xxxx:xxxx:xxxx:xxxx:xxxx port 36023
Starting Test: protocol: UDP, 1 streams, 1428 byte blocks, omitting 0 seconds, 10 second test
[ ID] Interval           Transfer     Bandwidth       Total Datagrams
[  5]   0.00-2.00   sec   115 MBytes   483 Mbits/sec  84526
[  5]   2.00-4.00   sec   119 MBytes   499 Mbits/sec  87443
[  5]   4.00-6.00   sec   119 MBytes   500 Mbits/sec  87579
[  5]   6.00-8.00   sec   120 MBytes   501 Mbits/sec  87770
[  5]   8.00-10.00  sec   119 MBytes   498 Mbits/sec  87255
[  5]  10.00-10.04  sec  5.97 MBytes  1.19 Gbits/sec  4387
- - - - - - - - - - - - - - - - - - - - - - - - -
Test Complete. Summary Results:
[ ID] Interval           Transfer     Bandwidth       Jitter    Lost/Total Datagrams
[  5]   0.00-10.04  sec   598 MBytes   499 Mbits/sec  0.000 ms  0/438960 (0%)
CPU Utilization: local/sender 3.0% (0.4%u/2.6%s), remote/receiver 2.9% (0.4%u/2.5%s)

500Mbps avec des paquets de 500 octets => 1,2% de pertes (bizarre que ça fonctionne mieux, en tout cas ça s'accompagne d'une forte charge CPU du serveur) :

Code: [Sélectionner]

~  ᐅ iperf3 -R -c ping6.online.net -p 5203 -u -b 500M --get-server-output -l 500
Connecting to host ping6.online.net, port 5203
Reverse mode, remote host ping6.online.net is sending
[  5] local 2a01:cb00:xxxx:xxxx:xxxx:xxxx:xxxx:xxxx port 38276 connected to 2001:bc8:1::40 port 5203
[ ID] Interval           Transfer     Bitrate         Jitter    Lost/Total Datagrams
[  5]   0.00-1.00   sec  59.6 MBytes   500 Mbits/sec  0.005 ms  1082/126012 (0.86%)
[  5]   1.00-2.00   sec  59.4 MBytes   499 Mbits/sec  0.004 ms  866/125496 (0.69%)
[  5]   2.00-3.00   sec  60.0 MBytes   503 Mbits/sec  0.006 ms  733/126561 (0.58%)
[  5]   3.00-4.00   sec  55.1 MBytes   463 Mbits/sec  0.003 ms  1661/117306 (1.4%)
[  5]   4.00-5.00   sec  58.0 MBytes   487 Mbits/sec  0.004 ms  1857/123588 (1.5%)
[  5]   5.00-6.00   sec  63.5 MBytes   533 Mbits/sec  0.004 ms  976/134101 (0.73%)
[  5]   6.00-7.00   sec  59.0 MBytes   495 Mbits/sec  0.004 ms  1641/125305 (1.3%)
[  5]   7.00-8.00   sec  57.9 MBytes   486 Mbits/sec  0.006 ms  1492/122938 (1.2%)
[  5]   8.00-9.00   sec  57.7 MBytes   484 Mbits/sec  0.004 ms  2694/123764 (2.2%)
[  5]   9.00-10.00  sec  59.7 MBytes   500 Mbits/sec  0.006 ms  2598/127699 (2%)
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval           Transfer     Bitrate         Jitter    Lost/Total Datagrams
[  5]   0.00-10.00  sec   598 MBytes   501 Mbits/sec  0.000 ms  0/1252770 (0%)  sender
[  5]   0.00-10.00  sec   590 MBytes   495 Mbits/sec  0.006 ms  15600/1252770 (1.2%)  receiver

Server output:
iperf 3.1.3
Linux ping 4.15.0-47-generic #50-Ubuntu SMP Wed Mar 13 10:44:52 UTC 2019 x86_64
-----------------------------------------------------------
Server listening on 5203
-----------------------------------------------------------
Time: Wed, 22 Feb 2023 22:48:38 GMT
Accepted connection from 2a01:cb00:xxxx:xxxx:xxxx:xxxx:xxxx:xxxx, port 43396
      Cookie: k5rds5w6ooc7fn2yulzrza7bp362uv7iur5a
[  5] local 2001:bc8:1::40 port 5203 connected to 2a01:cb00:xxxx:xxxx:xxxx:xxxx:xxxx:xxxx port 38276
Starting Test: protocol: UDP, 1 streams, 500 byte blocks, omitting 0 seconds, 10 second test
[ ID] Interval           Transfer     Bandwidth       Total Datagrams
[  5]   0.00-2.00   sec   119 MBytes   499 Mbits/sec  249374
[  5]   2.00-4.00   sec   114 MBytes   479 Mbits/sec  239621
[  5]   4.00-6.00   sec   123 MBytes   515 Mbits/sec  257693
[  5]   6.00-8.00   sec   118 MBytes   496 Mbits/sec  247921
[  5]   8.00-10.00  sec   120 MBytes   503 Mbits/sec  251258
[  5]  10.00-10.04  sec  3.57 MBytes   713 Mbits/sec  7484
- - - - - - - - - - - - - - - - - - - - - - - - -
Test Complete. Summary Results:
[ ID] Interval           Transfer     Bandwidth       Jitter    Lost/Total Datagrams
[  5]   0.00-10.04  sec   598 MBytes   499 Mbits/sec  0.000 ms  0/1253351 (0%)
CPU Utilization: local/sender 28.6% (3.6%u/24.9%s), remote/receiver 1.5% (0.1%u/1.4%s)

900Mbps en paquets de 500 octets => forte charge CPU côté serveur qui semble le limiter à 700Mbps, mais peu de pertes (parfois comme ici ça fait des out of order, et une forte charge CPU côté client) :

Code: [Sélectionner]

~  ᐅ iperf3 -R -c ping6.online.net -p 5203 -u -b 900M --get-server-output -l 500
Connecting to host ping6.online.net, port 5203
Reverse mode, remote host ping6.online.net is sending
[  5] local 2a01:cb00:xxxx:xxxx:xxxx:xxxx:xxxx:xxxx port 52261 connected to 2001:bc8:1::40 port 5203
[ ID] Interval           Transfer     Bitrate         Jitter    Lost/Total Datagrams
[  5]   0.00-1.00   sec  79.9 MBytes   670 Mbits/sec  0.009 ms  163469/331001 (49%)
[  5]   1.00-2.00   sec  79.4 MBytes   666 Mbits/sec  0.005 ms  -157057/9445 (-1.7e+03%)
[  5]   2.00-3.00   sec  83.0 MBytes   697 Mbits/sec  0.005 ms  5319/179449 (3%)
[  5]   3.00-4.00   sec  84.5 MBytes   708 Mbits/sec  0.004 ms  7405/184522 (4%)
[  5]   4.00-5.00   sec  78.6 MBytes   659 Mbits/sec  0.009 ms  6942/171695 (4%)
[  5]   5.00-6.00   sec  78.1 MBytes   655 Mbits/sec  0.005 ms  536/164360 (0.33%)
[  5]   6.00-7.00   sec  82.0 MBytes   688 Mbits/sec  0.006 ms  3985/175998 (2.3%)
[  5]   7.00-8.00   sec  81.9 MBytes   687 Mbits/sec  0.004 ms  2285/174053 (1.3%)
[  5]   8.00-9.00   sec  80.0 MBytes   671 Mbits/sec  0.004 ms  2761/170578 (1.6%)
[  5]   9.00-10.00  sec  82.3 MBytes   690 Mbits/sec  0.004 ms  3589/176111 (2%)
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval           Transfer     Bitrate         Jitter    Lost/Total Datagrams
[  5]   0.00-10.00  sec   829 MBytes   695 Mbits/sec  0.000 ms  0/1737212 (0%)  sender
[SUM]  0.0-10.0 sec  324587 datagrams received out-of-order
[  5]   0.00-10.00  sec   810 MBytes   679 Mbits/sec  0.004 ms  39234/1737212 (2.3%)  receiver

Server output:
iperf 3.1.3
Linux ping 4.15.0-47-generic #50-Ubuntu SMP Wed Mar 13 10:44:52 UTC 2019 x86_64
-----------------------------------------------------------
Server listening on 5203
-----------------------------------------------------------
Time: Wed, 22 Feb 2023 22:49:06 GMT
Accepted connection from 2a01:cb00:xxxx:xxxx:xxxx:xxxx:xxxx:xxxx, port 41514
      Cookie: mlngbjsmbgyhmrh3fljex54a2p2pu4vh7wxw
[  5] local 2001:bc8:1::40 port 5203 connected to 2a01:cb00:xxxx:xxxx:xxxx:xxxx:xxxx:xxxx port 52261
Starting Test: protocol: UDP, 1 streams, 500 byte blocks, omitting 0 seconds, 10 second test
[ ID] Interval           Transfer     Bandwidth       Total Datagrams
[  5]   0.00-2.00   sec   159 MBytes   667 Mbits/sec  333670
[  5]   2.00-4.00   sec   173 MBytes   727 Mbits/sec  363571
[  5]   4.00-6.00   sec   161 MBytes   673 Mbits/sec  336642
[  5]   6.00-8.00   sec   167 MBytes   700 Mbits/sec  349830
[  5]   8.00-10.00  sec   165 MBytes   693 Mbits/sec  346544
[  5]  10.00-10.04  sec  3.58 MBytes   703 Mbits/sec  7515
- - - - - - - - - - - - - - - - - - - - - - - - -
Test Complete. Summary Results:
[ ID] Interval           Transfer     Bandwidth       Jitter    Lost/Total Datagrams
[  5]   0.00-10.04  sec   829 MBytes   692 Mbits/sec  0.000 ms  0/1737772 (0%)
CPU Utilization: local/sender 35.7% (4.3%u/31.4%s), remote/receiver 40.1% (4.9%u/35.2%s)

Twister · « **Réponse #22 le:** 23 février 2023 à 10:29:57 »

Le 1er PNI a été remis en prod en milieu de nuit, il ne devrait plus y avoir de problèmes de performance dans l'immédiat.
On continue de creuser avec Orange pour éviter que ça ne se reproduise.

passoa68 · « **Réponse #23 le:** 12 mars 2024 à 21:17:25 »

Y aurait t'il de nouveau des problèmes en ce moment ?
Je tourne en ce moment autour des 10, 11 mo/s pour la copie de fichiers entre Scaleway et mon domicile (fibre Orange).