C'est merdique au possible d'utiliser X11 comme ca. c'est lent et pas opti. On utilise la meme technique pour faire tourner des
apps desktop dans des containers mais ca marchouille moyen.
On attend toujours un vrai 'display server' réseau (ou isolé localement) capable d'exploiter pleinement les gpu. Entre X11 qui se meurt sans mourrir, Wayland et Mir qui naissent sans naitre et Microsoft qui propose rien de son coté sur Windows , on n'est pas pret de voir des choses solides avant au moins 5 ans.
Une approche 'streaming video' comme on fait en cloud gaming ou en 'remote desktop' (vnc, rdp, etc) serait sans doute plus robuste pour le moment.