ssh -X už z definice ne, protože tam nebude to X. Jestli bude nějaké ssh -W nebo jestli to bude vůbec teoreticky možné nevím.
x11vnc si bez x11 taky nepustíte ale ekvivalentní waylandový VNC nebo RDP klient samozřejmě bude (pokud už dávno neexistuje) takže tady si žádné starosti dělat nemusíte.