Не может оно само без надобности "затянуться".
rpm -qa --last вам покажет, какие пакеты были установлены последними.
Простейший тест: rpm -qi glibc -- выведет вам либо одну, либо две glibc.
Как безболезненно для 64 бит удалить 32 окружение?
я хочу адаптировать дистрибутив Fedora для него, со всеми драйверами, и т.д.
Если вы заглянете сюда: mirrors.fedoraproject.org/publiclist/Fedora/20
то увидите колонки arm и armhfp -- это репозитории федоры собранные для ARM (без плавающей точки и с аппаратной поддержкой плавающей точки). Вам нужно всего лишь (tm) загрузить своё ядро и начать установку.