Получить все url?

Question

[Mazzy9]

Доброго времени суток.
Каким образом можно получить все существующие ссылки
пр.
site.domain/url1
site.domain/url2
site.domain/url3
...
Как то через поисковики можно получить список проиндексированных страниц без доступа к серверу на котором стоит сайт ?

Comments

[Mazzy9]

www.xsitemap.com нашел сервис, но есть ли какое то другое решение ?

Answer 1

[Андрей Куртучкин]

Если нужно найти все страницы сайта, то можно воспользоваться программой скриминг фрог или аналогами. Они найдут только те страницы на которые есть ссылки начиная поиск с главной страницы.

Через поисковики можно найти страницы сайта в поиске. Для этого введите в поисковую строку site:вашсайт.рф (работает в Гугл и Яндекс).

Comments

[Mazzy9]

не то что хотел, но это решение мне нравится )