il me semble que dans un navigateur il y a une connexion multiple, de mémoire il y a une valeur qu'on peut augmenter pour permettre plus de connexions. Par contre je ne suis pas certain qu'il s'agisse de connexions multiple sur 1 seul fichier, ou si ce n'est pas plutôt des connexions a plusieurs fichiers simultanément...
Les navigateurs n'utilisent bien qu'une seule requête HTTP par fichier, donc une seule connexion TCP en HTTP 1.x. En HTTP 2 et 3 (Quic), c'est pareil, avec un possible multiplexage des autres requêtes vers le même serveur sur une seule et même connexion (TCP en HTTP 2, UDP en 3).
La limite de connexion dont tu parles, c'est la limite maximale que le navigateur peut établir vers un même hostname pour effectuer des requêtes parallèles (par exemple, quand il charge une page avec plusieurs images, fichiers javascript, CSS ou autre). Cette limite a pour but de ne pas saturer le serveur en face avec un grand nombre de connexions/requêtes simultanées.
Mais le principe reste le même : une ressource donnée n'est transférée que sur une seule connexion.