Ну, нужно спарсить первую страницу сайта. Найти на ней все pdf поиском по тексту или по ссылкам/кнопкам на странице, смотря как там файлы представлены для скачивания.
Также найти на этой странице пагинацию и в ней - ссылку на следующую страницу.
Все это рекурсивно запустить, условие выхода - когда ссылка на след страницу не найдена.
