Как массово сгенерировать ссылки?

Question

[mr1pacman]

Есть ли программа, для генерации ссылок по шаблону
{ссылка}{номер}{кусок ссылки}{номер страницы}{кусок ссылки}
https://**********************/api/book/1234/page/1/img
https://**********************/api/book/1234/page/2/img
https://**********************/api/book/1234/page/3/img
Наткнулся на две программы - URL Generator - все делается вручную, а у меня около 25 тыс. ссылок, которые необходимо обработать
Extreme URL Generator - нужен кряк
Excel - быстрее чем URL Generator, но все...

Answer 1

[Виктор Таран]

ээээ а зачем их вообще генерировать?
этим заниматься должно ЧПУ, че велосипед то выдумывать?
Если вам нужны редиректы то в таком количестве можно и по маске сделать.
Опишите более подробно задачу что и зачем вы делаете.

Comments

[mr1pacman]

Необходимо скачать электронно-библиотечную систему.
С помощью плагина webscraper создал некую базу данных (с ссылками, метаданными, доступностью книг).
Страницы книг можно просмотреть через исходный код/или же путем генерации (пример указан в вопросе)
Как сгеренирую ссылки - буду скачивать частями в uGET (он поддерживает куки, поэтому нет траблов с авторизацией)
как то так

[mr1pacman]

перед скачивание отфильтровал по доступностью, ибо акк привязывается к конкретному ВУЗу, то бишь если ВУЗ медицинского профиля - книги которые будут доступны мне - это медицинские и т.д

[Виктор Таран]

ссылку на библиотеку и критерий скачивания какой все страницы ?

[mr1pacman]

https://e.lanbook.com/, да все страницы
там проблема в одном, в описательной части книг (пример https://e.lanbook.com/book/125723?category=5856), указано 88 страниц, а по факту, если перейти к чтению - 86 страниц (https://e.lanbook.com/reader/book/125723/#1)

[Виктор Таран]

вас устроит собраь все урлы сайта по категориям в эксель формате ?

[Виктор Таран]

какие категории нужны какие-то данные кроме урлов ?

[mr1pacman]

тык
в экселе почти манипуляции и провожу
/в таблице стоит фильтр на доступность (avat) и сортировка по страницам (убывание)
//во втором листе так скажем генератор этих ссылок
///мне необходимо из двух стобцов (id книги и кол-ко страниц) сгенерировать ссылки в таком виде

[Виктор Таран]

гыгыг дык я вам сейчас все покажу ;)
https://chrome.google.com/webstore/detail/web-scra...
1 поставьте.
Разберитесь и парсите наздоровье
это парсер с графичеким интерфейсом
все что вы показали там можно сделать за 10 минут.
Правильно ли я понимю что тебе нужнопомочь собрать структуру для всего парсинга, если да присылай свой конфиг, подправлю

[Виктор Таран]

mr1pacman,
в теле по ссылке сдейл из них линк многострочный.
А так же там есть возможность обьединить потом многомерный массив в 1 ячейку,не омню как он там называется но точно есть.
Собираешь потом это меню и все ну уж а если прям приспичило то в экселе через сцепить
если че завтра пос скайпу решим

[mr1pacman]

функцией =СЦЕПИТЬ и делаю, но обрабатывать 64 (можно конечно увеличить, это в моем случае) ссылок за раз, когда всего 25000+ долго и муторно
два раза уже прогнал, сумма сгенерированных ссылок не совпадает с суммой страниц
просто я имел ввиду, есть ли какая-нибудь программа, где в какой-нибудь маске выставить все значения и он тебе на выходе выдает уже сгенерированные ссылки в текстовом формате

[Виктор Таран]

mr1pacman, так ты собери правельнто карту сайта и не нужно будет ничего собирать.
Кстати посмотри может и в сайтмапе все уже есть.