Переключение пользователя ведет на черный экран

Я на последнем 14.04 с nvidia-331 драйверы установлены. Все идет гладко, только когда я пытаюсь сменить пользователя, я получаю черный экран. Приостановка и выход из системы работает без проблем.

Каким-то образом мне удалось заставить его работать, но после перезапуска он снова сломался, и я не смог повторить шаги, которые сделал.

Кажется это nvidia водитель или lightdm проблема, так как я все еще могу подключиться по SSH даже с черным экраном.