Der Gnome Desktop benötigt bei weitem mehr Ram als XFCE4 (laut offiziellen Angaben minimal 3GB) weshalb ich ihn nicht einmal auf dem RPI4 nutzen würde. Der Speicherplatz ist auch bei weitem mehr. Einzige Alternative ist der Mate Desktop, der benötigt fast den selben Arbeitsspeicher, hat aber auch 200Mb mehr auf der Platte.
LXDE oder Enlightenment (e16 im alten Paketmanager glaube) sind die einzigen alternativen die sowohl weniger Ram und Speicherplatz benötigen wobei Enlightenment Programme wie der Mediaplayer etc. Selbst von Github geladen und kompiliert werden müssen.
Auch ein Displaymanager ist nicht unbedingt nötig um den Desktop zu wechseln da man diesen auch einfach in die .xinitrc eintragen kann bzw. Aus dem Terminal von Hand starten, je nach Displaymanager muss man das sogar.
Wenn du Ubuntu mit klassischem Gnome (2) Desktop verwenden möchtest dann schau dir einfach Ubuntu Mate auf der offiziellen Raspberry Pi Website an, das ist für den Pi ausgelegt und läuft trotz den 300Mb Ram im Leerlauf recht stabil.