Desinstalando o Ambiente Gráfico

No Debian, no Ubuntu e nas outras distros derivadas, se você remover o lightdm, não vai mais dispôr da tela de autenticação gráfica. Neste caso, a inicialização do sistema irá terminar na tela de autenticação do console.
Outras distribuições usam o GDM ou KDM, no lugar do lightdm. O processo é o mesmo.
Para remover o lightdm no Debian e no Ubuntu, use o seguinte comando:

sudo apt remove lightdm

Isto não vai remover todo o ambiente gráfico — a maior parte dos aplicativos do desktop gráfico ainda vai estar lá.
Você pode reverter o processo reinstalando o lightdm. Como os pacotes ainda continuam no sistema, rapidamente estarão de volta ao seu lugar.
No Debian, é possível usar o comando tasksel (com privilégios administrativos).
Este aplicativo permite remover todo o desktop gráfico automaticamente.
Clique na imagem, abaixo, para ver detalhes:

Se quiser voltar atrás, basta rodar o tasksel novamente e remarcar as opções.

Desative o gerenciador gráfico

Uma solução bastante rápida é desativar o ambiente gráfico, já na sua inicialização.
Isto pode ser feito com uma operação simples de mudar o nome do display manager — cuja função é autenticar o usuário e carregar o restante do ambiente gráfico.

Basta alterar o nome do lightdm. Como consequência, o sistema não vai conseguir iniciá-lo e você será deixado no login da linha de comando.
Esta pode ser a solução ideal para quem deseja temporariamente ligar o computador e evitar o ambiente gráfico automaticamente.
Contudo, ela traz alguns problemas.
O sistema vai continuar usando recursos na tentativa de iniciar o lightdm (o tempo todo).
Você pode desligar o serviço do lightdm e ele vai parar de incomodar, se for o caso. Veja como:

sudo mv /usr/sbin/lightdm /usr/sbin/0lightdm

Se a tela de login demorar muito a se apresentar (mais de 3 minutos), reinicie o computador e desative o serviço:

sudo service lightdm stop

Os comandos acima, renomeiam o lightdm (para que ele não seja mais encontrado) e param o serviço, respectivamente.
Quando quiser voltar atrás, basta executá-los em ordem inversa:

sudo mv /usr/sbin/0lightdm /usr/sbin/lightdm

sudo service lightdm start

Leia mais sobre Linux Clicando Aqui!