Как я могу полностью удалить X-Windows из Fedora?

Некоторое время назад я установил свой первый сервер Linux с использованием Fedora 10. Затем я обновился до Fedora 11 и понял, что никогда не использую X-Windows на компьютере, и во время каждого обновления загружаю огромное количество файлов, которые мне не нужны, так как все на машина сделана удаленно используя ssh.

Используя yum или любой другой инструмент, как я могу полностью удалить Gnome и подсистему X-Windows с этого компьютера? Является ли единственной альтернативой сделать полную переустановку и не выбирать X-Windows?