Se você tentou o comando startx, mas o erro command not found foi retornado, então para instalar uma área de trabalho gráfica, caso ela não esteja instalada, você deve digitar:
Eu tive o mesmo problema. A solução é instalar X.org e a área de trabalho do Ubuntu. Além disso, não se esqueça dos pacotes build-essential:
sudo apt-get install ubuntu-desktop
Você pode ter que instalar X.org separadamente, mas também aproveite esta linha de comando porque (para a minha situação) o Ubuntu continuou tentando usar minha porta de exibição.