Hoi Danny,
welkom op het forum !
Opstarten zonder Xserver kan altijd via de "recovery mode" in het opstartmenu (grub).
Maar dat hoeft echt niet, zoal Nunslaughter al zei.
Bij Gnome zit er een menupunt naast het "Synaptic pakketbeheer" voor de "hardware drivers".
Bij Xubuntu met Xfce zit dat misschien een beetje anders, maar dat zal je wél vinden.
Vriendelijke groet,
track