Можно установить Ubuntu-рабочий стол, а затем загрузить без графического интерфейса

Я установил Ubuntu Server. Я хотел бы добавить графический интерфейс с пакетом ubuntu-desktop, но если я это сделаю, смогу ли я получить интерфейс сервера без графического интерфейса по умолчанию? Что мне в основном нужно, так это отсутствие графического интерфейса и возможность запуска графического интерфейса при необходимости. Возможный?