Tu peux tenter de diminuer à 1 seconde. N'oublie pas que coté serveur il faut redémarrer pour que ce soit pris en compte (je n'ose pas trop redémarrer SSH en étant connecté en SSH, je préfère redémarrer le serveur)
Personnellement, j'ai déterminé le seul de 4 seconde empiriquement et je dois dire qu'avec 4 secondes je n'ai plus jamais de problème sur un accès sur un PC en partage de connexion sur un mobile Orange, SFR, Free ou Bouygues Telecom.
Je n'ai pas encore eu d'accès CG-Nat SFR FttH, mais c'est anormal de couper aussi rapidement.