Le soucis ne vient, je pense pas de la connexion internet au vu des temps de réponse en ms des ping mais plutôt d'un équipement qui n'arrive pas a géré la multitude de connexion, je pencherais pour la livebox qui, j'imagine, n'est pas fait pour géré plusieurs centaine de connexion TCP venant de l'extérieur.
Tu as moyen de checker le nombres de connexion simultané sur ton serveurs au moment des soucis de pertes de packet (TCP et/ou UDP, pas le nombres d'utilisateurs)?
Sur l'UDM Pro, tu peux voir le nombres de session en cours lors des soucis ? (je connais pas trop ce que peuvent faire / monitorer les udm de ubiquiti).
Si tu peux également faire un test de charge TCP / UDP avec iperf entre un client distant et ton serveur, voir si les problèmes surviennent lors de ces monter en charge TCP/UDP.
Les ping que tu nous montre sont réalisé sur le serveurs en question qui héberge le serveur de jeux ?
Si oui, tu as essayer de faire les ping sur un autre poste a côté voir si tu avais le même soucis ?
Dans ton cas, il faut essayer d'éliminer les éléments 1 a 1 jusqu’à ce que tu trouve l'élément perturbateur, ensuite tu pourras chercher une remédiation au problème

.