J'ai eu le même problème (réduction de 50% du débit en 1 ans), je m'en étais d'ailleurs plaint au SAV Orange, lequel n'a donné aucune explication mais proposé bien évidemment... la fibre !
La conclusion plausible dans un secteur où la fibre avait été déployée, c'est que c'est fait volontairement, soit par paramétrage spécifique, soit par négligence de la maintenance car l'ADSL n'est plus une priorité, soit par réduction anticipé des équipements et leur concentration bien que tout le monde soit encore loin d'être passé à la fibre.
Problème résolu par le passage à la fibre que j'envisageais de toute façon.
C'est un peu le discours qu'ont tenu les techniciens Orange à ma tante quand sa ligne était en dérangement "vous savez ma bonne dame, on fait ce qu'on peut, mais faut pas croire, ça va arriver de plus en plus souvent maintenant que la fibre est chez vous, on pourra plus entretenir comme avant. D'ailleurs, le plus simple serait d'y passer."
Ce qui ressemblait cependant à du prosélytisme il y a quelques années est devenu une réalité depuis que le démantèlement du cuivre est devenu une réalité.

Un ami aussi s'est senti obligé d'y passer non pour des raisons de débit (ses 10 mégas lui convenaient) mais à cause de désynchros de plus en plus fréquentes, qui ont commencé au moment où son quartier a commencé à être couvert. Je suis pas du genre à tremper dans les théories du complot mais les coincidences sont troublantes.