я хочу адаптировать дистрибутив Fedora для него, со всеми драйверами, и т.д.
Если вы заглянете сюда:
mirrors.fedoraproject.org/publiclist/Fedora/20
то увидите колонки arm и armhfp -- это репозитории федоры собранные для ARM (без плавающей точки и с аппаратной поддержкой плавающей точки). Вам нужно всего лишь (tm) загрузить своё ядро и начать установку.