Вообще, это может разниться от дистрибутива к дистрибутиву. Я не знаю, какой runlevel общепринят для консоли, но у меня это уровень 2. А runlevel 3 - это как раз X.
А ещё, X-сервер можно убить (Ctrl-Alt-Backspace). Правда, лучше этого не делать без необходимости
