Auteur Sujet: Double NAT OpenWrt sur machine virtuelle  (Lu 2774 fois)

0 Membres et 1 Invité sur ce sujet

Kartman

  • Abonné Orange vdsl
  • *
  • Messages: 97
  • FTTLa 1000/60 sur Croix (59)
Double NAT OpenWrt sur machine virtuelle
« le: 24 août 2021 à 17:46:57 »
Bonjour,

Je suis en train de tester la configuration WAN -> OpenWrt -> Untangle chez moi et les performances m’intriguent.
Les 2 systèmes sont sur des machines virtuelles, sur un même serveur. Tests de débit depuis Openwrt avec iperf3 donne ~930Mbps, tests de depuis Untangle et en général mes appareils donne ~630Mbs-530Mpbs.
Les charges cpu sur Openwrt et Untangle ne dépassent pas les 0.5 lors des tests. Est-ce vraiment juste le double nat la cause?
Je teste cette configuration pour m’éviter a reediter le fichier /etc/dhcp/dhclient.conf dans Untangle pour recuperer la connexion wan.

Kartman

  • Abonné Orange vdsl
  • *
  • Messages: 97
  • FTTLa 1000/60 sur Croix (59)
Double NAT OpenWrt sur machine virtuelle
« Réponse #1 le: 06 septembre 2021 à 13:49:15 »
Je viens de lire le fil de discussion sur la personne qui à un problème de latence quand il joue à fortnite et les autres qui essaient en vein de le persuader que c'est dû à la charge d'un core CPU qui s'atturait.
Je pense que c'est le même problème ici car j'avais alloué 2vcpu pour openwrt, et avait fait des tests avec l'option nat désactivée sur untangle sans aucun changement au niveau des résultats.
Après j'étais en train de m'enteté car je dépassais les 2Gbps avec un test untangle->openwrt.

J'ai abandonné l'idée de mettre openwrt car j'avais des problèmes de packets venant de ma zone local qui ne semblaient pas être traités correctement sur openwrt alors qu'avec tcpdump je les voyais bien être acheminés.
 Il me fallait a chaque fois redémarrer openwrt pour que cela remarche. Peut-être un problème avec le règle du pare-feu mais j'ai pas pu le résoudre.


Jiajo

  • Abonné Orange Fibre
  • *
  • Messages: 822
  • Château-Thierry (02)
Double NAT OpenWrt sur machine virtuelle
« Réponse #2 le: 06 septembre 2021 à 14:04:34 »
Je viens de lire le fil de discussion sur la personne qui à un problème de latence quand il joue à fortnite et les autres qui essaient en vein de le persuader que c'est dû à la charge d'un core CPU qui s'atturait.

Si c'est bien le post que je pensse, il a pas un probleme de latence au contraire il a un tres bon ping.
mais un probleme de debit ;)

Kartman

  • Abonné Orange vdsl
  • *
  • Messages: 97
  • FTTLa 1000/60 sur Croix (59)
Double NAT OpenWrt sur machine virtuelle
« Réponse #3 le: 06 septembre 2021 à 16:28:59 »
Oui c'est bien celui-là. J'ai trop supputer sur son problème car je m'imaginais qu'il avait des difficulté à y jouer correctement. Mais son fil de discussion suffit pour cela.

Kartman

  • Abonné Orange vdsl
  • *
  • Messages: 97
  • FTTLa 1000/60 sur Croix (59)
Double NAT OpenWrt sur machine virtuelle
« Réponse #4 le: 21 septembre 2021 à 19:09:11 »
J'ai remis OpenWrt pour faire quelque tests et voici les résultats sans analyses car je doute quelles seraient exactes, a part le fait qu'un processeur plus récent-puissant aiderait à diminué la charge cpu et donc les resultats.

J'utilise mwan3 pour dépasser les 1Gpbs vers l’extérieur.

Openwrt -> WEB
root@OpenWrt:~# ./nspeed_linux_amd64 -cpu get http://lille.testdebit.info/1G/1G.iso get http://scaleway.testdebit.info/1G/1G.iso get http://bouygues.testdebit.info/1G.iso get http://k-net.testdebit.in
fo/1G.iso get https://rbx.proof.ovh.net/files/1Gb.dat
Jobs:
  0 HTTP client {Method: GET, URL: "http://lille.testdebit.info/1G/1G.iso", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  1 HTTP client {Method: GET, URL: "http://scaleway.testdebit.info/1G/1G.iso", IPversion: 0, Address: , Group: 1, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  2 HTTP client {Method: GET, URL: "http://bouygues.testdebit.info/1G.iso", IPversion: 0, Address: , Group: 2, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  3 HTTP client {Method: GET, URL: "http://k-net.testdebit.info/1G.iso", IPversion: 0, Address: , Group: 3, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  4 HTTP client {Method: GET, URL: "https://rbx.proof.ovh.net/files/1Gb.dat", IPversion: 0, Address: , Group: 4, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
3:10PM | 19| 20| 19| 11| 17| 79|, active jobs: 0 / active goroutines: 19
3:10PM | 27| 10| 20| 14| 22| 77|, active jobs: 0 / active goroutines: 19
3:10PM | 34|  8| 22| 19| 27| 70|, active jobs: 0 / active goroutines: 19
3:10PM | 24| 20| 26| 25| 26| 78|, active jobs: 0 / active goroutines: 19
3:10PM | 35| 20| 18|  7| 20| 79|, active jobs: 0 / active goroutines: 19
3:10PM | 39|  5| 23|  7| 23| 82|, active jobs: 0 / active goroutines: 19
3:10PM | 21| 28| 13| 24| 27| 74|, active jobs: 0 / active goroutines: 19
3:10PM | 20| 18| 22| 22| 20| 71|, active jobs: 0 / active goroutines: 19
3:10PM | WARN  | all jobs ended:
   Job| Read speed| Write speed| Time| Bytes read| Bytes written|command
 Job 0| 528.6 Mbps|       0 bps| 8.00|   528.6 MB|           0 B|get http://lille.testdebit.info/1G/1G.iso (89.84.1.234:80 - 12.263 ms)
 Job 1| 411.1 Mbps|       0 bps| 8.00|   411.1 MB|           0 B|get http://scaleway.testdebit.info/1G/1G.iso (62.210.156.7:80 - 11.319 ms)
 Job 2| 408.5 Mbps|       0 bps| 7.99|   408.1 MB|           0 B|get http://bouygues.testdebit.info/1G.iso (89.84.1.186:80 - 13.526 ms)
 Job 3| 393.8 Mbps|       0 bps| 8.00|   393.8 MB|           0 B|get http://k-net.testdebit.info/1G.iso (178.250.208.152:80 - 8.336 ms)
 Job 4|  14.9 Mbps|       0 bps| 7.99|    14.9 MB|           0 B|get https://rbx.proof.ovh.net/files/1Gb.dat (152.228.221.228:443 - 15.707 ms)
 Total|   1.8 Gbps|       0 bps| 8.00|     1.8 GB|           0 B|


root@OpenWrt:~# iperf3 -c lille.testdebit.info -R -p 9220 -P 4
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval           Transfer     Bitrate         Retr
[  5]   0.00-10.02  sec   551 MBytes   461 Mbits/sec  291             sender
[  5]   0.00-10.00  sec   539 MBytes   452 Mbits/sec                  receiver
[  7]   0.00-10.02  sec   487 MBytes   408 Mbits/sec  5306             sender
[  7]   0.00-10.00  sec   476 MBytes   399 Mbits/sec                  receiver
[  9]   0.00-10.02  sec   565 MBytes   473 Mbits/sec  329             sender
[  9]   0.00-10.00  sec   554 MBytes   464 Mbits/sec                  receiver
[ 11]   0.00-10.02  sec   486 MBytes   407 Mbits/sec  5341             sender
[ 11]   0.00-10.00  sec   475 MBytes   398 Mbits/sec                  receiver
[SUM]   0.00-10.02  sec  2.04 GBytes  1.75 Gbits/sec  11267             sender
[SUM]   0.00-10.00  sec  2.00 GBytes  1.71 Gbits/sec                  receiver



Untangle ->WEB
./nspeed_linux_amd64 -cpu get http://lille.testdebit.info/1G/1G.iso get http://scaleway.testdebit.info/1G/1G.iso get http://bouygues.testdebit.info/1G.iso get http://k-net.testdebit.info/1G.iso get https://rbx.proof.ovh.net/files/1Gb.dat
Jobs:
  0 HTTP client {Method: GET, URL: "http://lille.testdebit.info/1G/1G.iso", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  1 HTTP client {Method: GET, URL: "http://scaleway.testdebit.info/1G/1G.iso", IPversion: 0, Address: , Group: 1, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  2 HTTP client {Method: GET, URL: "http://bouygues.testdebit.info/1G.iso", IPversion: 0, Address: , Group: 2, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  3 HTTP client {Method: GET, URL: "http://k-net.testdebit.info/1G.iso", IPversion: 0, Address: , Group: 3, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  4 HTTP client {Method: GET, URL: "https://rbx.proof.ovh.net/files/1Gb.dat", IPversion: 0, Address: , Group: 4, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
5:10PM | 40| 16|  3| 22|  0| 17|, active jobs: 0 / active goroutines: 19
5:10PM | 34| 21|  8| 21|  3| 22|, active jobs: 0 / active goroutines: 19
5:10PM | 31| 11| 18|  4| 21| 16|, active jobs: 0 / active goroutines: 19
5:10PM | 32| 14| 21|  8| 19| 11|, active jobs: 0 / active goroutines: 19
5:10PM | 27| 24| 15| 22|  2| 15|, active jobs: 0 / active goroutines: 19
5:10PM | 19| 19| 13| 28|  1| 13|, active jobs: 0 / active goroutines: 19
5:10PM | 23| 30| 15| 24|  0|  5|, active jobs: 0 / active goroutines: 19
5:10PM | 22| 21|  5| 24|  2| 22|, active jobs: 0 / active goroutines: 19
5:10PM | WARN  | all jobs ended:
   Job| Read speed| Write speed| Time| Bytes read| Bytes written|command
 Job 0| 190.0 Mbps|       0 bps| 8.00|   190.0 MB|           0 B|get http://lille.testdebit.info/1G/1G.iso (89.84.1.234:80 - 12.185 ms)
 Job 1| 141.6 Mbps|       0 bps| 8.00|   141.6 MB|           0 B|get http://scaleway.testdebit.info/1G/1G.iso (62.210.156.7:80 - 9.40 ms)
 Job 2| 443.9 Mbps|       0 bps| 8.00|   443.9 MB|           0 B|get http://bouygues.testdebit.info/1G.iso (89.84.1.186:80 - 12.722 ms)
 Job 3| 167.1 Mbps|       0 bps| 8.00|   167.1 MB|           0 B|get http://k-net.testdebit.info/1G.iso (178.250.208.152:80 - 8.369 ms)
 Job 4| 177.7 Mbps|       0 bps| 8.00|   177.7 MB|           0 B|get https://rbx.proof.ovh.net/files/1Gb.dat (152.228.221.228:443 - 15.766 ms)
 Total|   1.1 Gbps|       0 bps| 8.00|     1.1 GB|           0 B|


iperf3 -c lille.testdebit.info -R -p 9220 -P 4
[ ID] Interval           Transfer     Bitrate         Retr
[  5]   0.00-10.02  sec   378 MBytes   317 Mbits/sec  1199             sender
[  5]   0.00-10.00  sec   367 MBytes   308 Mbits/sec                  receiver
[  7]   0.00-10.02  sec   297 MBytes   248 Mbits/sec  14097             sender
[  7]   0.00-10.00  sec   285 MBytes   239 Mbits/sec                  receiver
[  9]   0.00-10.02  sec   377 MBytes   316 Mbits/sec  1185             sender
[  9]   0.00-10.00  sec   366 MBytes   307 Mbits/sec                  receiver
[ 11]   0.00-10.02  sec   294 MBytes   246 Mbits/sec  14212             sender
[ 11]   0.00-10.00  sec   283 MBytes   237 Mbits/sec                  receiver
[SUM]   0.00-10.02  sec  1.31 GBytes  1.13 Gbits/sec  30693             sender
[SUM]   0.00-10.00  sec  1.27 GBytes  1.09 Gbits/sec                  receiver


pc (2.5Gbps) -> WEB
./nspeed_linux_amd64 -cpu get http://lille.testdebit.info/1G/1G.iso get http://scaleway.testdebit.info/1G/1G.iso get http://bouygues.testdebit.info/1G.iso get http://k-net.testdebit.info/1G.iso get https://rbx.proof.ovh.net/files/1Gb.dat
Jobs:
  0 HTTP client {Method: GET, URL: "http://lille.testdebit.info/1G/1G.iso", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  1 HTTP client {Method: GET, URL: "http://scaleway.testdebit.info/1G/1G.iso", IPversion: 0, Address: , Group: 1, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  2 HTTP client {Method: GET, URL: "http://bouygues.testdebit.info/1G.iso", IPversion: 0, Address: , Group: 2, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  3 HTTP client {Method: GET, URL: "http://k-net.testdebit.info/1G.iso", IPversion: 0, Address: , Group: 3, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  4 HTTP client {Method: GET, URL: "https://rbx.proof.ovh.net/files/1Gb.dat", IPversion: 0, Address: , Group: 4, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
5:02PM |  0|  4|  0|  0|  0|  1|  8|  0|  0|  1|  0|  0|, active jobs: 0 / active goroutines: 19
5:03PM |  0|  1|  6|  0|  0|  0| 11|  0|  0|  0|  0|  0|, active jobs: 0 / active goroutines: 19
5:03PM |  0|  6|  0|  0|  0|  0| 15|  2|  7|  1|  0|  1|, active jobs: 0 / active goroutines: 19
5:03PM |  3|  5|  2|  0|  0|  1| 15|  0|  3|  0|  0|  0|, active jobs: 0 / active goroutines: 19
5:03PM |  6|  4|  4|  0|  0|  0| 10|  0|  0|  0|  0|  0|, active jobs: 0 / active goroutines: 19
5:03PM |  6|  2|  4|  0|  0|  0| 15|  0|  0|  0|  0|  0|, active jobs: 0 / active goroutines: 19
5:03PM |  0|  2| 11|  0|  0|  1|  9|  1|  0|  1|  1|  0|, active jobs: 0 / active goroutines: 19
5:03PM |  0|  6|  6|  0|  0|  0| 16|  0|  1|  0|  0|  0|, active jobs: 0 / active goroutines: 19
5:03PM | WARN  | all jobs ended:
   Job| Read speed| Write speed| Time| Bytes read| Bytes written|command
 Job 0| 209.8 Mbps|       0 bps| 8.00|   209.8 MB|           0 B|get http://lille.testdebit.info/1G/1G.iso (89.84.1.234:80 - 21.87 ms)
 Job 1| 220.5 Mbps|       0 bps| 7.99|   220.1 MB|           0 B|get http://scaleway.testdebit.info/1G/1G.iso (62.210.156.7:80 - 13.234 ms)
 Job 2| 235.0 Mbps|       0 bps| 8.00|   235.0 MB|           0 B|get http://bouygues.testdebit.info/1G.iso (89.84.1.186:80 - 15.447 ms)
 Job 3| 231.2 Mbps|       0 bps| 8.00|   231.2 MB|           0 B|get http://k-net.testdebit.info/1G.iso (178.250.208.152:80 - 14.795 ms)
 Job 4|   5.3 Mbps|       0 bps| 7.96|     5.3 MB|           0 B|get https://rbx.proof.ovh.net/files/1Gb.dat (152.228.221.228:443 - 19.369 ms)
 Total| 901.3 Mbps|       0 bps| 8.00|   901.3 MB|           0 B|

iperf3 -c lille.testdebit.info -R -p 9220 -P 4
[ ID] Interval           Transfer     Bitrate         Retr
[  5]   0.00-10.01  sec   222 MBytes   186 Mbits/sec  17827             sender
[  5]   0.00-10.00  sec   213 MBytes   179 Mbits/sec                  receiver
[  7]   0.00-10.01  sec   203 MBytes   170 Mbits/sec  16643             sender
[  7]   0.00-10.00  sec   193 MBytes   162 Mbits/sec                  receiver
[  9]   0.00-10.01  sec   248 MBytes   208 Mbits/sec  20790             sender
[  9]   0.00-10.00  sec   238 MBytes   200 Mbits/sec                  receiver
[ 11]   0.00-10.01  sec   501 MBytes   420 Mbits/sec  4945             sender
[ 11]   0.00-10.00  sec   490 MBytes   411 Mbits/sec                  receiver
[SUM]   0.00-10.01  sec  1.15 GBytes   983 Mbits/sec  60205             sender
[SUM]   0.00-10.00  sec  1.11 GBytes   952 Mbits/sec                  receive


Untangle -> Openwrt
iperf3 -c 192.168.15.2 -R -P 4
[ ID] Interval           Transfer     Bitrate         Retr
[  5]   0.00-10.02  sec   666 MBytes   557 Mbits/sec    0             sender
[  5]   0.00-10.00  sec   664 MBytes   557 Mbits/sec                  receiver
[  7]   0.00-10.02  sec   611 MBytes   511 Mbits/sec    0             sender
[  7]   0.00-10.00  sec   610 MBytes   511 Mbits/sec                  receiver
[  9]   0.00-10.02  sec   630 MBytes   528 Mbits/sec    0             sender
[  9]   0.00-10.00  sec   629 MBytes   527 Mbits/sec                  receiver
[ 11]   0.00-10.02  sec   609 MBytes   509 Mbits/sec    0             sender
[ 11]   0.00-10.00  sec   607 MBytes   509 Mbits/sec                  receiver
[SUM]   0.00-10.02  sec  2.46 GBytes  2.11 Gbits/sec    0             sender
[SUM]   0.00-10.00  sec  2.45 GBytes  2.10 Gbits/sec                  receiver

Untangle <- Openwrt
iperf3 -c 192.168.15.2 -P 4
[ ID] Interval           Transfer     Bitrate         Retr
[  5]   0.00-10.00  sec  1.13 GBytes   973 Mbits/sec  339             sender
[  5]   0.00-10.00  sec  1.13 GBytes   970 Mbits/sec                  receiver
[  7]   0.00-10.00  sec  1.12 GBytes   966 Mbits/sec  222             sender
[  7]   0.00-10.00  sec  1.12 GBytes   963 Mbits/sec                  receiver
[  9]   0.00-10.00  sec  1.12 GBytes   961 Mbits/sec  289             sender
[  9]   0.00-10.00  sec  1.12 GBytes   959 Mbits/sec                  receiver
[ 11]   0.00-10.00  sec  1.13 GBytes   968 Mbits/sec  281             sender
[ 11]   0.00-10.00  sec  1.12 GBytes   965 Mbits/sec                  receiver
[SUM]   0.00-10.00  sec  4.50 GBytes  3.87 Gbits/sec  1131             sender
[SUM]   0.00-10.00  sec  4.49 GBytes  3.86 Gbits/sec                  receiver




pc (2.5Gbps) -> Openwrt
./nspeed_linux_amd64 -cpu get -n 4 http://192.168.15.2:7333/5G
Jobs:
  0 HTTP client {Method: GET, URL: "http://192.168.15.2:7333/5G", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  1 HTTP client {Method: GET, URL: "http://192.168.15.2:7333/5G", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  2 HTTP client {Method: GET, URL: "http://192.168.15.2:7333/5G", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
  3 HTTP client {Method: GET, URL: "http://192.168.15.2:7333/5G", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false}}
6:34PM |  4| 10|  1|  3|  1|  2| 24|  7|  3|  1|  1|  3|, active jobs: 0 / active goroutines: 16
6:34PM |  6|  5|  3|  4|  3|  0| 20|  6| 11|  2|  3|  1|, active jobs: 0 / active goroutines: 16
6:34PM |  4|  7| 10|  0|  6|  0| 24|  4| 10|  0|  0|  1|, active jobs: 0 / active goroutines: 16
6:34PM |  4|  9|  8|  1|  2|  0| 25|  5|  8|  1|  0|  1|, active jobs: 0 / active goroutines: 16
6:34PM |  2|  9|  5|  1|  2|  1| 26|  7|  7|  1|  1|  1|, active jobs: 0 / active goroutines: 16
6:34PM |  5| 10|  5|  2|  5|  0| 26|  2|  6|  0|  0|  1|, active jobs: 0 / active goroutines: 16
6:34PM | 11|  8|  1|  1|  2|  1| 32|  4|  3|  1|  0|  1|, active jobs: 0 / active goroutines: 16
6:34PM |  6|  7|  3|  3|  2|  1| 23|  3|  4|  1|  1|  1|, active jobs: 0 / active goroutines: 16
6:34PM | WARN  | all jobs ended:
   Job| Read speed| Write speed| Time| Bytes read| Bytes written|command
 Job 0| 416.4 Mbps|       0 bps| 8.00|   416.3 MB|           0 B|get http://192.168.15.2:7333/5G (192.168.15.2:7333 - 3.321 ms)
 Job 1| 454.9 Mbps|       0 bps| 8.00|   454.8 MB|           0 B|get http://192.168.15.2:7333/5G (192.168.15.2:7333 - 4.274 ms)
 Job 2| 378.0 Mbps|       0 bps| 8.00|   378.0 MB|           0 B|get http://192.168.15.2:7333/5G (192.168.15.2:7333 - 3.529 ms)
 Job 3| 568.3 Mbps|       0 bps| 8.00|   568.4 MB|           0 B|get http://192.168.15.2:7333/5G (192.168.15.2:7333 - 3.185 ms)
 Total|   1.8 Gbps|       0 bps| 8.00|     1.8 GB|           0 B|

CHARGE OPENWRT
4:34PM |  1|  1|  0|  0|  0|  0|, active jobs: 0 / active goroutines: 6
4:34PM |  0|  1|  1|  1|  1|  1|, active jobs: 0 / active goroutines: 6
4:34PM |  1| 32|  1|  0|  8|  1|, active jobs: 0 / active goroutines: 14
4:34PM |  1| 97| 12|  3| 18|  4|, active jobs: 0 / active goroutines: 14
4:34PM |  2| 98|  2|  1| 23| 10|, active jobs: 0 / active goroutines: 14
4:34PM |  0|100|  1|  1| 14| 14|, active jobs: 0 / active goroutines: 14
4:34PM |  1| 97|  1|  1| 15| 15|, active jobs: 0 / active goroutines: 14
4:34PM |  1| 99|  1|  1| 12| 12|, active jobs: 0 / active goroutines: 14
4:34PM | 11| 98|  0|  1|  7|  6|, active jobs: 0 / active goroutines: 14
4:34PM | 13| 98|  1|  0|  7|  3|, active jobs: 0 / active goroutines: 14
4:34PM |  5| 67|  1|  0|  6|  3|, active jobs: 0 / active goroutines: 6
4:34PM |  0|  2|  0|  0|  0|  0|, active jobs: 0 / active goroutines: 6
4:34PM |  1|  1|  0|  1|  1|  1|, active jobs: 0 / active goroutines: 6


pc (2.5Gbps) <- Openwrt
./nspeed_linux_amd64 -cpu put -n 4 http://192.168.15.2:7333/ 5G
Jobs:
  0 HTTP client {Method: POST, URL: "http://192.168.15.2:7333/", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false},size: 5368709120 (5.4 GB)}
  1 HTTP client {Method: POST, URL: "http://192.168.15.2:7333/", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false},size: 5368709120 (5.4 GB)}
  2 HTTP client {Method: POST, URL: "http://192.168.15.2:7333/", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false},size: 5368709120 (5.4 GB)}
  3 HTTP client {Method: POST, URL: "http://192.168.15.2:7333/", IPversion: 0, Address: , Group: 0, timeout: 8s, delay: 0s, h2c: false, http1.1:false},size: 5368709120 (5.4 GB)}
6:35PM |  1|  0|  2|  3|  4|  1| 30|  2|  1|  1|  2|  1|, active jobs: 0 / active goroutines: 16
6:35PM |  2|  0|  0|  0|  4|  1| 28|  3|  3|  1|  0|  1|, active jobs: 0 / active goroutines: 16
6:35PM |  3|  2|  2|  2|  4|  3| 28|  6|  2|  4|  1|  2|, active jobs: 0 / active goroutines: 16
6:35PM |  5|  6|  5|  1|  2|  2| 28|  7|  1|  2|  1|  2|, active jobs: 0 / active goroutines: 16
6:35PM |  3|  4|  4|  1|  0|  0| 30|  4|  3|  0|  0|  3|, active jobs: 0 / active goroutines: 16
6:35PM |  4|  4|  8|  0|  1|  0| 32|  7|  1|  1|  1|  2|, active jobs: 0 / active goroutines: 16
6:35PM |  1|  2|  3|  0|  0|  1| 27|  2|  0|  2|  0|  2|, active jobs: 0 / active goroutines: 16
6:35PM |  5|  4|  3|  2|  2|  2| 34|  5|  1|  2|  0|  0|, active jobs: 0 / active goroutines: 8
6:35PM | WARN  | all jobs ended:
   Job| Read speed| Write speed| Time| Bytes read| Bytes written|command
 Job 0|      0 bps|  492.9 Mbps| 8.00|        0 B|      492.9 MB|put http://192.168.15.2:7333/ 5.4 GB (192.168.15.2:7333 - 4.91 ms)
 Job 1|      0 bps|  650.5 Mbps| 8.00|        0 B|      650.5 MB|put http://192.168.15.2:7333/ 5.4 GB (192.168.15.2:7333 - 3.379 ms)
 Job 2|      0 bps|  608.7 Mbps| 8.00|        0 B|      608.7 MB|put http://192.168.15.2:7333/ 5.4 GB (192.168.15.2:7333 - 4.44 ms)
 Job 3|      0 bps|  511.5 Mbps| 8.00|        0 B|      511.5 MB|put http://192.168.15.2:7333/ 5.4 GB (192.168.15.2:7333 - 3.637 ms)
 Total|      0 bps|    2.3 Gbps| 8.00|        0 B|        2.3 GB|

CHARGE OPENWRT
4:36PM |  0|  1|  0|  0|  0|  0|, active jobs: 0 / active goroutines: 6
4:36PM | 21| 76| 17| 10| 18| 19|, active jobs: 0 / active goroutines: 10
4:36PM | 22| 92| 12| 12| 27| 29|, active jobs: 0 / active goroutines: 10
4:36PM | 27| 91| 14| 26| 20| 15|, active jobs: 0 / active goroutines: 10
4:36PM | 30| 94| 23| 22|  3| 20|, active jobs: 0 / active goroutines: 10
4:36PM | 26| 93| 20| 14|  3| 31|, active jobs: 0 / active goroutines: 10
4:36PM | 30| 94| 14| 24|  4| 30|, active jobs: 0 / active goroutines: 10
4:36PM | 18| 93| 23| 29|  2| 26|, active jobs: 0 / active goroutines: 10
4:36PM | 23| 95| 19| 27|  5| 28|, active jobs: 0 / active goroutines: 10
4:36PM |  7| 27|  5|  6|  1|  8|, active jobs: 0 / active goroutines: 6
4:36PM |  1|  1|  2|  0|  0|  0|, active jobs: 0 / active goroutines: 6