Есть wayback machine с заточкой для продактов?

Question

[DemChick]

Всем привет!
Наверняка все знают про https://archive.org/web/ - архив сайтов, по которому можно проследить историю изменений на сайтах конкурентов, например
На самом деле, это сильно помогает для анализа того, какой путь прошел успешный (или не очень) проект
Можно даже проследить какие гипотезы у него сработали, а какие нет

Но есть одно большое но: его очень неудобно использовать для этих целей (нет профильной заточки) и он очень медленный

Возможно вы знаете какие-нибудь похожие сервисы, которые заточены под конкурентный анализ в таком формате и имеют высокую скорость работы/оптимизацию?

Answer 1

[rPman]

погугли: web archive alternatives
там куча продуктов, но мне кажется они не такие крупные

сомневаюсь что такая узкая задача будет реализована, так как веб архив достаточно дорогое удовольствие.ю Что именно тебе нужно (что такое 'профильная заточка') у web.archive.org точно знаю есть api, возможно можно реализовать что то поверх него?

Comments

[DemChick]

Альтернативы уже прогнал - все не то

Заточка под продуктовую аналитику, более подходящий интерфейс хотя бы
Но в первую очередь - скорость, это то, за что я бы платил
Я уже много выписал из того, как это должно выглядеть, если рассматривать это как проф. инструмент, просто решил сначала поспрашивать, вдруг уже есть решение, на базе того же api вебархива

В его api еще не рылся, возможно это будет решением, хотя очень не хочется продукт пилить
Но я уже столько времени потерял с ним, что возможно это даже и рационально будет

[Uno]

DemChick, беда в том, что оценить спрос на такую услугу не представляется возможным, поэтому решения и нет. Сейчас ты школьник, а через 10 лет квалифицированный продакт, а мне, даже если предоставлять аналог вебархива с платными услугами - придётся всё равно сканировать абсолютно все веб сайты интернета, чтоб только через 10 лет ты смог мне принести 100$ за пару месяцев?

[shurshur]

DemChick, Internet Archive - это не просто дорогое - это мегадорогое удовольствие. У них даже свои датацентры. И иногда они вешают прогрессбар донатов, там запредельные суммы.

Скорее всего, альтернативы даже близко не обладают таким охватом.

Так что я бы попробовал в сторону API. Ещё можно накачивать локально с помощью готовых скриптов типа wayback-machine-downloader.