Effectivement tu dois avoir des murs qui sont pas tres perméables...
Comme dit par Cochonou, essaye de configurer ta box en 2.4 GHz, ca traverse beaucoup mieux les obstacles que le 5 GHz, mais avec moins de débit, par contre ca peux te donner de meilleurs résultats dans tes chambres.
Pour mon cas j'ai mis une seule antenne en 2.4 GHz (il en faudrait normalement 2 pour etre optimum), mais c'est ce qui me donne les meilleurs résultats dans toute la maison, ce genre d'antenne coute une 50ene d'€ pour une 6 ou 9 dB de gain.
J'arrive a un débit entre 54 et 90 Mbs quasiment partout dans la maison, ca suffit pour des PC, pour les décos SAT et TV c'est connecté en RJ45, ca évite les freeze inévitable.
Maintenant si tu as pas de fiche SMA sur la box (je connait pas du tout ces boxs), il te reste la possibilité d'utiliser un cable adaptateur que tu branche sur le module WIFI a la place de l'antenne interne (pigtail) , mais faut etre quand meme a l'aise avec ce genre de manip, c'est comme dans les laptop, tu as un micro connecteur sur la carte WIFI ou sont racordée les antennes internes, qui souvent valent pas un clou, car elle font meme pas 0 dB de gain, quand c'est pas -3dB ...

Une autre solution serait de tirer un cable RJ45 entre la box et tes chambres, et placer un access point dans les chambres, tu auras le signal maximum des 2 cotés, si tu as que 5m de cable a tirer ca doit pas etre un pbs.
Tu as aussi les répeteurs CPL, mais bon je peux que te déconseiller cette technologie, qui est tres perturbée par tous les parasites du secteur 220V, qui est pas vraiment concu pour ca.